TW202126039A - 用於視訊解碼的參數集訊號傳遞 - Google Patents

用於視訊解碼的參數集訊號傳遞 Download PDF

Info

Publication number
TW202126039A
TW202126039A TW109133070A TW109133070A TW202126039A TW 202126039 A TW202126039 A TW 202126039A TW 109133070 A TW109133070 A TW 109133070A TW 109133070 A TW109133070 A TW 109133070A TW 202126039 A TW202126039 A TW 202126039A
Authority
TW
Taiwan
Prior art keywords
picture
syntax element
video data
pps
decoding
Prior art date
Application number
TW109133070A
Other languages
English (en)
Inventor
張耀仁
莫哈美德塞伊德 克班
瑪塔 卡克基維克茲
Original Assignee
美商高通公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 美商高通公司 filed Critical 美商高通公司
Publication of TW202126039A publication Critical patent/TW202126039A/zh

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/119Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136Incoming video signal characteristics or properties
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/174Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/96Tree coding, e.g. quad-tree coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

一種視訊解碼裝置可以在圖片參數集(PPS)中對語法元素進行解碼,該語法元素指示PPS所適用於的視訊資料的圖片的解碼樹單元(CTU)的亮度解碼樹塊大小。該視訊解碼裝置亦可以根據PPS中的語法元素來對PPS所適用於的視訊資料的圖片進行解碼。

Description

用於視訊解碼的參數集訊號傳遞
本專利申請案主張享受於2019年9月24日提出申請的美國臨時申請案第62/905,235號的權益,據此將上述申請案的全部內容經由引用的方式併入本文中。
本案內容係關於視訊編碼和視訊解碼。
數位視訊能力可以被合併到各種各樣的設備中,包括數位電視機、數位直播系統、無線廣播系統、個人數位助理(PDA)、膝上型電腦或桌上型電腦、平板電腦、電子書閱讀器、數位相機、數位記錄設備、數位媒體播放機、視訊遊戲裝置、視訊遊戲控制台、蜂巢或衛星無線電電話(所謂的「智慧型電話」)、視訊電話會議設備、視訊流式設備等。數位視訊設備實現視訊解碼技術(諸如在由MPEG-2、MPEG-4、ITU-T H.263、ITU-T H.264/MPEG-4(第10部分,高級視訊解碼(AVC))、ITU-T H.265/高效率視訊解碼(HEVC)、以及此類標準的擴展所定義的標準中描述的那些技術)。經由實現此類視訊解碼技術,視訊設備可以更加高效地發送、接收、編碼、解碼及/或儲存數位視訊資訊。
視訊解碼技術包括空間(訊框內圖片)預測及/或時間(訊框間圖片)預測以減少或去除在視訊序列中固有的冗餘。對於基於塊的視訊解碼,視訊切片(例如,視訊圖片或視訊圖片的一部分)可以被分割為視訊塊,視訊塊亦可以被稱為解碼樹單元(CTU)、解碼單元(CU)及/或解碼節點。圖片的經訊框內編碼(I)的切片中的視訊塊是使用相對於同一圖片中的相鄰塊中的參考取樣的空間預測來編碼的。圖片的經訊框間編碼(P或B)的切片中的視訊塊可以使用相對於同一圖片中的相鄰塊中的參考取樣的空間預測或者相對於其他參考圖片中的參考取樣的時間預測。圖片可以被稱為訊框,並且參考圖片可以被稱為參考訊框。
概括而言,本案內容描述了用於以減少在用於視訊資料的圖片的圖片參數集(PPS)與用於視訊資料的圖片的序列參數集(SPS)之間的解析依賴性的方式來用訊號通知用於在PPS級別對視訊資料進行解碼的資訊的技術。本技術可以被應用於通用視訊解碼標準和其他未來的視訊解碼標準,並且可以改進解析PPS和SPS的視訊解碼裝置(video coder)的效能。
用於視訊資料的圖片的PPS可以用訊號通知用於對圖片進行解碼的某些語法元素。此類語法元素可以包括可以用於對圖片的磚塊進行解碼的磚塊語法元素。此類磚塊語法元素的訊號傳遞可以取決於PPS中的各種參數的值。然而,此類參數的值可以取決於用於圖片的SPS中包括的語法元素的值。
例如,PPS中的各種參數的值可以取決於圖片的解碼樹單元的解碼樹塊大小。若指示圖片的解碼樹單元的解碼樹塊大小的語法元素僅被包括在用於圖片的SPS中,而不被包括在用於圖片的PPS中,則對用於圖片的PPS的解析可能取決於解析用於圖片的SPS。
為了解決用於圖片的PPS與用於圖片的SPS之間的這種解析依賴性,PPS可以包括語法元素,該語法元素指示圖片的解碼樹單元的解碼樹塊大小,該語法元素可以具有與指示用於圖片的SPS中的圖片的解碼樹單元的解碼樹塊大小的語法元素相同的值。以這種方式,視訊解碼裝置能夠決定用於圖片的PPS中的參數的值,而無需依賴於用於圖片的SPS中的指示圖片的解碼樹單元的解碼樹塊大小的語法元素,從而減少用於圖片的PPS與SPS之間的解析依賴性。
減少用於視訊資料圖片的PPS與SPS之間的解析依賴性可以改進對視訊資料圖片進行解碼的效能,諸如經由使視訊解碼器能夠在解析用於視訊資料的圖片的SPS之前解析用於視訊資料的圖片的PPS,或者經由使視訊解碼器能夠基本並行地解析用於視訊資料的圖片的PPS和SPS,從而增加了視訊解碼器解析用於視訊資料的圖片的PPS和SPS以及對視訊資料的圖片進行解碼的靈活性。
在一個實例中,一種用於對視訊資料進行解碼的方法包括:在圖片參數集(PPS)中對語法元素進行解碼,該語法元素指示該PPS所適用於的視訊資料的圖片的解碼樹單元(CTU)的亮度解碼樹塊大小。該方法亦包括:根據該PPS中的該語法元素來對該PPS所適用於的該視訊資料的該圖片進行解碼。
在另一實例中,一種用於對視訊資料進行解碼的設備包括被配置為儲存視訊資料的記憶體。該設備亦包括一或多個處理器,該一或多個處理器在電路中實現並且通訊地耦合到該記憶體,該一或多個處理器被配置為:在圖片參數集(PPS)中對語法元素進行解碼,該語法元素指示該PPS所適用於的視訊資料的圖片的解碼樹單元(CTU)的亮度解碼樹塊大小;及根據該PPS中的該語法元素來對該PPS所適用於的該視訊資料的該圖片進行解碼。
在另一實例中,一種用於視訊解碼的設備包括:用於在圖片參數集(PPS)中對語法元素進行解碼的單元,該語法元素指示該PPS所適用於的視訊資料的圖片的解碼樹單元(CTU)的亮度解碼樹塊大小;及用於根據該PPS中的該語法元素來對該PPS所適用於的該視訊資料的該圖片進行解碼的單元。
在另一實例中,一種非暫時性電腦可讀取儲存媒體被編碼有指令,該等指令在被執行時使得一或多個處理器進行以下操作:在圖片參數集(PPS)中對語法元素進行解碼,該語法元素指示該PPS所適用於的視訊資料的圖片的解碼樹單元(CTU)的亮度解碼樹塊大小;及根據該PPS中的該語法元素來對該PPS所適用於的該視訊資料的該圖片進行解碼。
在附圖和以下描述中闡述了一或多個實例的細節。根據描述、附圖並且請求項,其他特徵、目的和優點將是顯而易見的。
概括而言,本案內容描述了用於以減少在用於視訊資料的圖片的圖片參數集(PPS)與用於視訊資料的圖片的序列參數集(SPS)之間的依賴性的方式來用訊號通知用於在PPS級別對視訊資料進行解碼的資訊的技術。作為對視訊資料進行編碼的一部分,視訊轉碼器可以產生要用於對視訊資料的圖片進行解碼的參數集,諸如PPS和SPS。PPS可以包含適用於視訊資料的單個圖片的資訊,諸如語法元素。SPS可以包含適用於視訊資料的圖片的序列中的所有圖片並且在圖片的序列中的圖片之間不改變的資訊,諸如語法元素。
當對適用於視訊資料的圖片的PPS進行解碼時,可能在適用於圖片的PPS與適用於圖片的SPS之間存在解析依賴性,使得PPS中的參數的值可能取決於SPS中的一或多個參數的值。例如,PPS可以包括以變數的值為條件的條件陳述式。若變數的值取決於SPS中指定的參數的值,則在PPS與SPS之間存在解析依賴性。當在用於圖片的PPS與用於圖片的SPS之間存在此類解析依賴性時,視訊解碼裝置(例如,視訊解碼器(video encoder)或視訊解碼器(video decoder))可能無法決定PPS中的參數的值,直到視訊解碼裝置已經決定了SPS中的一或多個參數的值為止,其中PPS中的參數的值取決於該一或多個參數的值。
此類解析依賴性可能會對解析PPS和SPS的電腦的效能產生負面影響,諸如經由阻止視訊解碼器在解析用於視訊資料的圖片的SPS之前解析用於視訊資料的圖片的PPS及/或基本並行地解析PPS和SPS,從而潛在地增加了解析用於視訊資料的圖片的PPS和SPS所需的處理週期及/或時間量,並且潛在地降低了解析PPS和SPS的視訊解碼裝置的效能。
本案內容的各態樣包括用於減少用於視訊資料的圖片的PPS與用於視訊資料的圖片的序列參數集(SPS)之間的依賴性的技術。例如,若PPS中的變數的值取決於SPS中指定的參數的值,則視訊轉碼器可以在PPS中對PPS中的變數的值所依賴的參數的值進行編碼。在另一實例中,若PPS包括取決於PPS中的變數的值的條件陳述式,並且若變數的值取決於SPS中指定的參數的值,則視訊解碼裝置可以避免對PPS中的條件陳述式進行解碼,從而從PPS中去除條件陳述式。將在下面進一步描述這些和其他技術。
圖1是示出可以執行本案內容的技術的實例視訊編碼和解碼系統100的方塊圖。概括而言,本案內容的技術涉及對視訊資料進行解碼(coding)(編碼(encoding)及/或解碼(decoding))。通常,視訊資料包括用於處理視訊的任何資料。因此,視訊資料可以包括原始的未經編碼的視訊、經編碼的視訊、經解碼(例如,經重構)的視訊、以及視訊中繼資料(例如,訊號傳遞資料)。
如圖1所示,在該實例中,系統100包括源設備102,源設備102提供要被目的地設備116解碼和顯示的、經編碼的視訊資料。具體地,源設備102經由電腦可讀取媒體110來將視訊資料提供給目的地設備116。源設備102和目的地設備116可以包括各種各樣的設備中的任何一種,包括桌上型電腦、筆記本(亦即,膝上型電腦)電腦、行動設備、平板電腦、機上盒、電話手機(諸如智慧型電話)、電視機、相機、顯示裝置、數位媒體播放機、視訊遊戲控制台、視訊流式設備、廣播接收器設備等。在一些情況下,源設備102和目的地設備116可以被配備用於無線通訊,並且因此可以被稱為無線通訊設備。
在圖1的實例中,源設備102包括視訊源104、記憶體106、視訊轉碼器200以及輸出介面108。目的地設備116包括輸入介面122、視訊解碼器300、記憶體120以及顯示裝置118。根據本案內容,源設備102的視訊轉碼器200和目的地設備116的視訊解碼器300可以被配置為應用用於以減少與SPS的解析依賴性的方式來用訊號通知PPS的參數的技術。因此,源設備102表示視訊編碼設備的實例,而目的地設備116表示視訊解碼設備的實例。在其他實例中,源設備和目的地設備可以包括其他部件或佈置。例如,源設備102可以從諸如外部相機之類的外部視訊源接收視訊資料。同樣,目的地設備116可以與外部顯示裝置以介面方式連接,而不是包括整合顯示裝置。
在圖1中所示的系統100僅是一個實例。通常,任何數位視訊編碼及/或解碼設備可以執行用於以減少與SPS的解析依賴性的方式來用訊號通知PPS的參數的技術。源設備102和目的地設備116僅是此類解碼設備的實例,其中源設備102產生經解碼的視訊資料以用於傳輸給目的地設備116。本案內容將「編碼」設備代表為執行對資料的解碼(例如,編碼及/或解碼)的設備。因此,視訊轉碼器200和視訊解碼器300分別表示解碼設備(具體地,視訊轉碼器和視訊解碼器)的實例。在一些實例中,源設備102和目的地設備116可以以基本上對稱的方式進行操作,使得源設備102和目的地設備116中的每一者皆包括視訊編碼和解碼用部件。因此,系統100可以支援在源設備102和目的地設備116之間的單向或雙向視訊傳輸,例如,以用於視訊流式、視訊重播、視訊廣播或視訊電話。
通常,視訊源104表示視訊資料(即原始的未經編碼的視訊資料)的源,並且將視訊資料的連續的一系列圖片(亦被稱為「訊框」)提供給視訊轉碼器200,視訊轉碼器200對用於圖片的資料進行編碼。源設備102的視訊源104可以包括視訊擷取裝置,諸如攝像機、包含先前擷取的原始視訊的視訊存檔單元、及/或用於從視訊內容提供者接收視訊的視訊饋送介面。作為另外的替代方式,視訊源104可以產生基於電腦圖形的資料作為源視訊,或者產生即時視訊、被存檔的視訊和電腦產生的視訊的組合。在每種情況下,視訊轉碼器200可以對被擷取的、預擷取的或電腦產生的視訊資料進行編碼。視訊轉碼器200可以將圖像從所接收的次序(有時被稱為「顯示次序」)重新排列為用於解碼的解碼次序。視訊轉碼器200可以產生包括經編碼的視訊資料的位元串流。隨後,源設備102可以經由輸出介面108將經編碼的視訊資料輸出到電腦可讀取媒體110上,以便由例如目的地設備116的輸入介面122接收及/或取回。
源設備102的記憶體106和目的地設備116的記憶體120表示通用記憶體。在一些實例中,記憶體106、120可以儲存原始視訊資料,例如,來自視訊源104的原始視訊以及來自視訊解碼器300的原始的經解碼的視訊資料。補充或可替代地,記憶體106、120可以儲存可由例如視訊轉碼器200和視訊解碼器300分別執行的軟體指令。儘管記憶體106和記憶體120在該實例中被示為與視訊轉碼器200和視訊解碼器300分開,但是應當理解的是,視訊轉碼器200和視訊解碼器300亦可以包括用於在功能上類似或等效目的的內部記憶體。此外,記憶體106、120可以儲存例如從視訊轉碼器200輸出並且輸入到視訊解碼器300的經編碼的視訊資料。在一些實例中,記憶體106、120的部分可以被分配為一或多個視訊緩衝器,例如,以儲存原始的經解碼及/或經編碼的視訊資料。
電腦可讀取媒體110可以表示能夠將經編碼的視訊資料從源設備102移動到目的地設備116的任何類型的媒體或設備。在一個實例中,電腦可讀取媒體110表示通訊媒體,其使得源設備102能夠例如經由射頻網路或基於電腦的網路,來即時地向目的地設備116直接發送經編碼的視訊資料。輸出介面108可以根據諸如無線通訊協定之類的通訊標準,來對包括經編碼的視訊資料的傳輸訊號進行調制,並且輸入介面122可以根據諸如無線通訊協定之類的通訊標準,來對所接收的傳輸訊號進行解調。通訊媒體可以包括任何無線或有線通訊媒體,例如,射頻(RF)頻譜或一或多條實體傳輸線。通訊媒體可以形成諸如以下各項的基於封包的網路的一部分:區域網路、廣域網、或諸如網際網路之類的全球網路。通訊媒體可以包括路由器、交換機、基地台、或對於促進從源設備102到目的地設備116的通訊而言可以有用的任何其他設備。
在一些實例中,源設備102可以將經編碼的資料從輸出介面108輸出到存放裝置112。類似地,目的地設備116可以經由輸入介面122從存放裝置112存取經編碼的資料。存放裝置112可以包括各種分散式或本端存取的資料儲存媒體中的任何一種,諸如硬碟、藍光光碟、DVD、CD-ROM、快閃記憶體、揮發性或非揮發性記憶體、或用於儲存經編碼的視訊資料的任何其他適當的數位儲存媒體。
在一些實例中,源設備102可以將經編碼的視訊資料輸出到檔案伺服器114或者可以儲存由源設備102產生的經編碼的視訊資料的另一中間存放裝置。目的地設備116可以經由流式或下載來從檔案伺服器114存取被儲存的視訊資料。
檔案伺服器114可以是能夠儲存經編碼的視訊資料並且將該經編碼的視訊資料發送給目的地設備116的任何類型的伺服器設備。檔案伺服器114可以表示網頁伺服器(例如,用於網站)、被配置為提供檔案傳輸通訊協定服務(諸如檔案傳輸通訊協定(FTP)或單向傳輸檔遞送(FLUTE)協定)的伺服器、內容遞送網路(CDN)設備、超文字傳輸協定(HTTP)伺服器、多媒體廣播多播服務(MBMS)或增強型MBMS(eMBMS)伺服器及/或網路附加儲存(NAS)設備。檔案伺服器114可以另外或替代地實現一或多個HTTP流式協定,諸如基於HTTP的動態自我調整流式(DASH)、HTTP即時流式(HLS)、即時流式協定(RTSP)、HTTP動態流式等。
目的地設備116可以經由任何標準資料連接(包括網際網路連接)來從檔案伺服器114存取經編碼的視訊資料。這可以包括適於存取被儲存在檔案伺服器114上的經編碼的視訊資料的無線通道(例如,Wi-Fi連接)、有線連接(例如,數位用戶線路(DSL)、纜線數據機等)、或這兩者的組合。輸入介面122可以被配置為根據以上論述的用於從檔案伺服器114取回或接收媒體資料的各種協定中的任何一或多個或者用於取回媒體資料的其他此類協定來操作。
輸出介面108和輸入介面122可以表示無線發射器/接收器、數據機、有線聯網單元(例如,乙太網路卡)、根據各種IEEE 802.11標準中的任何一種標準進行操作的無線通訊部件、或其他實體部件。在其中輸出介面108和輸入介面122包括無線部件的實例中,輸出介面108和輸入介面122可以被配置為根據蜂巢通訊標準(諸如4G、4G-LTE(長期進化)、改進的LTE、5G等)來傳輸資料(諸如經編碼的視訊資料)。在其中輸出介面108包括無線發射器的一些實例中,輸出介面108和輸入介面122可以被配置為根據其他無線標準(諸如IEEE 802.11規範、IEEE 802.15規範(例如,ZigBee™)、Bluetooth™標準等)來傳輸資料(諸如經編碼的視訊資料)。在一些實例中,源設備102及/或目的地設備116可以包括相應的片上系統(SoC)設備。例如,源設備102可以包括用於執行被賦予視訊轉碼器200及/或輸出介面108的功能的SoC設備,並且目的地設備116可以包括用於執行被賦予視訊解碼器300及/或輸入介面122的功能的SoC設備。
本案內容的技術可以應用於視訊解碼,以支援各種多媒體應用中的任何一種,諸如空中電視廣播、有線電視傳輸、衛星電視傳輸、網際網路流式視訊傳輸(諸如基於HTTP的動態自我調整流式(DASH))、被編碼到資料儲存媒體上的數位視訊、對被儲存在資料儲存媒體上的數位視訊的解碼、或其他應用。
目的地設備116的輸入介面122從電腦可讀取媒體110(例如,通訊媒體、存放裝置112、檔案伺服器114等)接收經編碼的視訊位元串流。經編碼的視訊位元串流可以包括由視訊轉碼器200定義的諸如以下語法元素之類的訊號傳遞資訊(其亦被視訊解碼器300使用),該等語法元素具有描述視訊塊或其他解碼單元(例如,切片、圖片、圖片組、序列等)的特性及/或處理的值。顯示裝置118將經解碼的視訊資料的經解碼的圖片顯示給使用者。顯示裝置118可以表示各種顯示裝置中的任何一種,諸如液晶顯示器(LCD)、等離子顯示器、有機發光二極體(OLED)顯示器、或另一種類型的顯示裝置。
儘管在圖1中未圖示,但是在一些實例中,視訊轉碼器200和視訊解碼器300可以各自與音訊編碼器及/或音訊解碼器整合,並且可以包括適當的MUX-DEMUX單元或其他硬體及/或軟體,以處理包括公共資料串流中的音訊和視訊兩者的經多工的流。若適用,MUX-DEMUX單元可以遵循ITU H.223多工器協定或其他協定(諸如使用者資料包通訊協定(UDP))。
視訊轉碼器200和視訊解碼器300各自可以被實現為各種適當的編碼器及/或解碼器電路中的任何一種,諸如一或多個微處理器、數位訊號處理器(DSP)、特殊應用積體電路(ASIC)、現場可程式設計閘陣列(FPGA)、個別邏輯、軟體、硬體、韌體、或其任何組合。當該等技術部分地用軟體實現時,設備可以將用於軟體的指令儲存在適當的非暫時性電腦可讀取媒體中,並且使用一或多個處理器,用硬體來執行指令以執行本案內容的技術。視訊轉碼器200和視訊解碼器300中的每一者可以被包括在一或多個編碼器或解碼器中,編碼器或解碼器中的任一者可以被整合為相應設備中的組合編碼器/解碼器(CODEC)的一部分。包括視訊轉碼器200及/或視訊解碼器300的設備可以包括積體電路、微處理器、及/或無線通訊設備(諸如蜂巢式電話)。
視訊轉碼器200和視訊解碼器300可以根據視訊解碼標準(諸如ITU-T H.265(亦被稱為高效率視訊解碼(HEVC)標準)或對其的擴展(諸如多視圖及/或可伸縮視訊解碼擴展))進行操作。替代地,視訊轉碼器200和視訊解碼器300可以根據其他專有或行業標準(諸如ITU-T H.266標準,亦被稱為多功能視訊解碼(VVC))進行操作。VVC標準的草案是在Bross等人,「Versatile Video Coding (Draft 10)」,ITU-T SG 16 WP 3和ISO/IEC JTC 1/SC 29/WG 11的聯合視訊專家組(JVET),第18次電話會議,2020年6月22日-7月1日,JVET-S2001-vA(下文中稱為「VVC草案10」)中描述的。然而,本案內容的技術不限於任何特定的解碼標準。
通常,視訊轉碼器200和視訊解碼器300可以執行對圖片的基於塊的解碼。術語「塊」通常代表包括要被處理的(例如,在編碼及/或解碼程序中要被編碼、被解碼或以其他方式使用的)資料的結構。例如,塊可以包括亮度及/或色度資料的取樣的二維矩陣。通常,視訊轉碼器200和視訊解碼器300可以對以YUV(例如,Y、Cb、Cr)格式表示的視訊資料進行解碼。亦即,並不是對用於圖片的取樣的紅色、綠色和藍色(RGB)資料進行解碼,視訊轉碼器200和視訊解碼器300可以對亮度和色度分量進行解碼,其中色度分量可以包括紅色和藍色色相色度分量兩者。在一些實例中,視訊轉碼器200在進行編碼之前將所接收的經RGB格式化的資料轉換為YUV表示,並且視訊解碼器300將YUV表示轉換為RGB格式。替代地,預處理和後處理單元(未圖示)可以執行這些轉換。
概括而言,本案內容可以涉及對圖片的解碼(例如,編碼和解碼)以包括對圖片的資料進行編碼或解碼的程序。類似地,本案內容可以涉及對圖片的塊的解碼以包括對用於塊的資料進行編碼或解碼(例如,預測及/或殘差解碼)的程序。經編碼的視訊位元串流通常包括用於表示解碼決策(例如,解碼模式)以及將圖片分割為塊的語法元素的一系列值。因此,關於對圖片或塊的解碼的引用通常應當被理解為用於形成圖片或塊的語法元素的解碼值。
HEVC定義了各種塊,包括解碼單元(CU)、預測單元(PU)和變換單元(TU)。根據HEVC,視訊解碼裝置(諸如視訊轉碼器200)根據四叉樹結構來將解碼樹單元(CTU)分割為CU。亦即,視訊解碼裝置將CTU和CU分割為四個相等的、不重疊的正方形,並且四叉樹的每個節點具有零個或四個子節點。沒有子節點的節點可以被稱為「葉節點」,並且這種葉節點的CU可以包括一或多個PU及/或一或多個TU。視訊解碼裝置可以進一步分割PU和TU。例如,在HEVC中,殘差四叉樹(RQT)表示對TU的分區。在HEVC中,PU表示訊框間預測資料,而TU表示殘差資料。經訊框內預測的CU包括訊框內預測資訊,諸如訊框內模式指示。
作為另一實例,視訊轉碼器200和視訊解碼器300可以被配置為根據VVC進行操作。根據VVC,視訊解碼裝置(諸如視訊轉碼器200)將圖片分割為複數個解碼樹單元(CTU)。視訊轉碼器200可以根據樹結構(諸如四叉樹-二叉樹(QTBT)結構或多類型樹(MTT)結構)分割CTU。QTBT結構去除了多種分割類型的概念,諸如在HEVC的CU、PU和TU之間的分隔。QTBT結構包括兩個級別:根據四叉樹分割而被分割的第一級、以及根據二叉樹分割而被分割的第二級。QTBT結構的根節點對應於CTU。二叉樹的葉節點對應於解碼單元(CU)。
在MTT分割結構中,可以使用四叉樹(QT)分割、二叉樹(BT)分割以及一或多個類型的三叉樹(TT)分割(亦被稱為三元樹(TT))來對塊進行分割。三叉樹或三元樹分割是其中塊被分為三個子塊的分割。在一些實例中,三叉樹或三元樹分割將塊劃分為三個子塊,而不經由中心劃分原始塊。MTT中的分割類型(例如,QT、BT和TT)可以是對稱的或非對稱的。
在一些實例中,視訊轉碼器200和視訊解碼器300可以使用單個QTBT或MTT結構來表示亮度和色度分量中的每一者,而在其他實例中,視訊轉碼器200和視訊解碼器300可以使用兩個或更多個QTBT或MTT結構,諸如用於亮度分量的一個QTBT/MTT結構和以及用於兩個色度分量的另一個QTBT/MTT結構(或者用於相應色度分量的兩個QTBT/MTT結構)。
視訊轉碼器200和視訊解碼器300可以被配置為使用每HEVC的四叉樹分割、QTBT分割、MTT分割、或其他分割結構。為了解釋的目的,關於QTBT分割提供了本案內容的技術的描述。然而,應當理解的是,本案內容的技術亦可以應用於被配置為使用四叉樹分割或者亦使用其他類型的分割的視訊解碼裝置。
在一些實例中,CTU包括亮度取樣的解碼樹塊(CTB)、具有三個取樣陣列的圖片的色度取樣的兩個對應的CTB、或者單色圖片或使用三個單獨的色彩平面和用於對取樣進行解碼的語法結構來解碼的圖片的取樣的CTB。CTB可以是針對N的某個值的取樣的NxN塊,使得將分量劃分為CTB是一個分區。分量是來自以4:2:0、4:2:2或4:4:4的顏色格式組成圖片的三個陣列(一個亮度和兩個色度)之一的陣列或單個取樣,或者是以單色格式組成圖片的陣列的陣列或單個取樣。在一些實例中,解碼塊是針對M和N的一些值的取樣的M×N塊,使得將CTB劃分成解碼塊是一個分區。
可以以各種方式在圖片中對塊(例如,CTU或CU)進行群組。作為一個實例,磚塊可以代表圖片中的特定瓦片(tile)內的CTU行的矩形區域。瓦片可以是圖片中的特定瓦片列和特定瓦片行內的CTU的矩形區域。瓦片列代表CTU的矩形區域,其具有等於圖片的高度的高度以及由語法元素(例如,諸如在圖片參數集中)指定的寬度。瓦片行代表CTU的矩形區域,其具有由語法元素指定的高度(例如,諸如在圖片參數集中)以及等於圖片的寬度的寬度。
在一些實例中,可以將瓦片分割為多個磚塊,每個磚塊可以包括瓦片內的一或多個CTU行。沒有被分割為多個磚塊的瓦片亦可以被稱為磚塊。然而,作為瓦片的真實子集的磚塊可以不被稱為瓦片。
圖片中的磚塊亦可以被排列在切片中。切片可以是圖片的整數個磚塊,其可以唯一地被包含在單個網路抽象層(NAL)單元中。在一些實例中,切片包括多個完整的瓦片或者僅包括一個瓦片的完整磚塊的連續序列。
本案內容可以互換地使用「NxN」和「N乘N」來代表塊(諸如CU或其他視訊塊)在垂直和水平維度態樣的取樣大小,例如,16x16個取樣或16乘16個取樣。通常,16x16 CU在垂直方向上將具有16個取樣(y = 16),並且在水平方向上將具有16個取樣(x = 16)。同樣地,NxN CU通常在垂直方向上具有N個取樣,並且在水平方向上具有N個取樣,其中N表示非負整數值。CU中的取樣可以按行和列來排列。此外,CU不一定需要在水平方向上具有與在垂直方向上相同的數量的取樣。例如,CU可以包括NxM個取樣,其中M不一定等於N。
視訊轉碼器200對用於CU的表示預測及/或殘差資訊以及其他資訊的視訊資料進行編碼。預測資訊指示將如何預測CU以便形成用於CU的預測塊。殘差資訊通常表示在編碼之前的CU的取樣與預測塊之間的逐取樣差。
為了預測CU,視訊轉碼器200通常可以經由訊框間預測或訊框內預測來形成用於CU的預測塊。訊框間預測通常代表根據先前解碼的圖片的資料來預測CU,而訊框內預測通常代表根據同一圖片的先前解碼的資料來預測CU。為了執行訊框間預測,視訊轉碼器200可以使用一或多個運動向量來產生預測塊。視訊轉碼器200通常可以執行運動搜尋,以辨識例如在CU與參考塊之間的差異態樣與CU緊密匹配的參考塊。視訊轉碼器200可以使用絕對差之和(SAD)、平方差之和(SSD)、平均絕對差(MAD)、均方差(MSD)、或其他這種差計算來計算差度量,以決定參考塊是否與當前CU緊密匹配。在一些實例中,視訊轉碼器200可以使用單向預測或雙向預測來預測當前CU。
VVC的一些實例亦提供仿射運動補償模式,其可以被認為是訊框間預測模式。在仿射運動補償模式下,視訊轉碼器200可以決定表示非平移運動(諸如放大或縮小、旋轉、透視運動或其他不規則的運動類型)的兩個或更多個運動向量。
為了執行訊框內預測,視訊轉碼器200可以選擇訊框內預測模式來產生預測塊。VVC的一些實例提供六十七種訊框內預測模式,包括各種方向性模式、以及平面模式和DC模式。通常,視訊轉碼器200選擇訊框內預測模式,訊框內預測模式描述要根據其來預測當前塊(例如,CU的塊)的取樣的、當前塊的相鄰取樣。假定視訊轉碼器200以光柵掃瞄次序(從左到右、從上到下)對CTU和CU進行解碼,則此類取樣通常可以是在與當前塊相同的圖片中在當前塊的上方、左上方或左側的。
視訊轉碼器200對表示用於當前塊的預測模式的資料進行編碼。例如,對於訊框間預測模式,視訊轉碼器200可以對表示使用各種可用訊框間預測模式中的哪一種的資料以及用於對應模式的運動資訊進行編碼。對於單向或雙向訊框間預測,例如,視訊轉碼器200可以使用高級運動向量預測(AMVP)或合併模式來對運動向量進行編碼。視訊轉碼器200可以使用類似的模式來對用於仿射運動補償模式的運動向量進行編碼。
在諸如對塊的訊框內預測或訊框間預測之類的預測之後,視訊轉碼器200可以計算用於該塊的殘差資料。殘差資料(諸如殘差塊)表示在塊與用於該塊的預測塊之間的逐取樣差,該預測塊是使用對應的預測模式來形成的。視訊轉碼器200可以將一或多個變換應用於殘差塊,以在變換域中而非在取樣域中產生經變換的資料。例如,視訊轉碼器200可以將離散餘弦變換(DCT)、整數變換、小波變換或概念上類似的變換應用於殘差視訊資料。另外,視訊轉碼器200可以在第一變換之後應用二次變換,諸如依賴於模式相關的不可分離二次變換(MDNSST)、訊號相關變換、Karhunen-Loeve變換(KLT)等。視訊轉碼器200在應用一或多個變換之後產生變換係數。
如前述,在任何變換以產生變換係數之後,視訊轉碼器200可以執行對變換係數的量化。量化通常代表如下的程序:在該程序中,對變換係數進行量化以可能減少用於表示變換係數的資料量,從而提供進一步的壓縮。經由執行量化程序,視訊轉碼器200可以減小與一些或所有變換係數相關聯的位元深度。例如,視訊轉碼器200可以在量化期間將n位元的值向下捨入為m位元的值,其中n大於m。在一些實例中,為了執行量化,視訊轉碼器200可以執行對要被量化的值的按位右移。
在量化之後,視訊轉碼器200可以掃瞄變換係數,從而從包括經量化的變換係數的二維矩陣產生一維向量。可以將掃瞄設計為將較高能量(並且因此較低頻率)的變換係數放在向量的前面,並且將較低能量(並且因此較高頻率)的變換係數放在向量的後面。在一些實例中,視訊轉碼器200可以利用預定義的掃瞄次序來掃瞄經量化的變換係數以產生經序列化的向量,並且隨後對向量的經量化的變換係數進行熵編碼。在其他實例中,視訊轉碼器200可以執行自我調整掃瞄。在掃瞄經量化的變換係數以形成一維向量之後,視訊轉碼器200可以例如根據上下文自我調整二進位算術解碼(CABAC)來對一維向量進行熵編碼。視訊轉碼器200亦可以對用於描述與經編碼的視訊資料相關聯的中繼資料的語法元素的值進行熵編碼,以供視訊解碼器300在對視訊資料進行解碼時使用。
為了執行CABAC,視訊轉碼器200可以將上下文模型內的上下文分配給要被發送的符號。上下文可以涉及例如符號的相鄰值是否為零值。概率決定可以是基於被分配給符號的上下文的。
視訊轉碼器200亦可以例如在圖片標頭、塊標頭、切片標頭中為視訊解碼器300產生語法資料(諸如基於塊的語法資料、基於圖片的語法資料和基於序列的語法資料)、或其他語法資料(諸如序列參數集(SPS)、圖片參數集(PPS)或視訊參數集(VPS))。同樣地,視訊解碼器300可以對此類語法資料進行解碼以決定如何解碼對應的視訊資料。
以這種方式,視訊轉碼器200可以產生位元串流,其包括經編碼的視訊資料,例如,描述將圖片分割為塊(例如,CU)以及用於該塊的預測及/或殘差資訊的語法元素。最終,視訊解碼器300可以接收位元串流並且對經編碼的視訊資料進行解碼。
位元串流可以包括網路抽象層(NAL)單元。NAL單元是一種語法結構,其包含對NAL單元中的資料的類型的指示以及包含該資料的位元組,這些位元組以原始位元組序列有效載荷(RBSP)的形式散佈,其中必要時具有模擬防止位元。每個NAL單元可以包括NAL單元標頭並且可以封裝RBSP。NAL單元標頭可以包括指示NAL單元類型代碼的語法元素。由NAL單元的NAL單元標頭指定的NAL單元類型代碼指示NAL單元的類型。RBSP可以是包含封裝在NAL單元內的整數個位元組的語法結構。在一些情況下,RBSP包括零位元。
如前述,位元串流可以包括視訊資料和關聯資料的經編碼的圖片的表示。關聯資料可以包括參數集。NAL單元可以封裝用於視訊參數集(VPS)、序列參數集(SPS)和圖片參數集(PPS)的RBSP。VPS是一種語法結構,其包括適用於零個或更多個完整的經解碼的視訊序列(CVS)的語法元素。 SPS亦是一種語法結構,其包括適用於零個或更多個完整的CVS的語法元素。SPS可以包括語法元素,該語法元素標識當SPS處於活動狀態時處於活動狀態的VPS。因此,與SPS的語法元素相比,VPS的語法元素可以更普遍地適用。PPS是一種語法結構,其包括適用於零個或更多個經解碼的圖片的語法元素。PPS可以包括語法元素,該語法元素標識當PPS處於活動狀態時處於活動狀態的SPS。切片的切片標頭可以包括語法元素,該語法元素指示在對切片進行解碼時處於活動狀態的PPS。
通常,視訊解碼器300執行與由視訊轉碼器200執行的程序相反的程序,以對位元串流的經編碼的視訊資料進行解碼。例如,視訊解碼器300可以使用CABAC,以與視訊轉碼器200的CABAC編碼程序基本上類似的、但是相反的方式來對用於位元元流的語法元素的值進行解碼。語法元素可以定義將圖片的資訊分割為CTU、以及根據對應的分割結構(諸如QTBT結構)對每個CTU的分割,以定義CTU的CU。語法元素亦可以定義用於視訊資料的塊(例如,CU)的預測和殘差資訊。
殘差資訊可以由例如經量化的變換係數來表示。視訊解碼器300可以對塊的經量化的變換係數進行逆量化和逆變換以重現用於該塊的殘差塊。視訊解碼器300使用經訊號通知的預測模式(訊框內預測或訊框間預測)和相關的預測資訊(例如,用於訊框間預測的運動資訊)來形成用於該塊的預測塊。視訊解碼器300隨後可以對預測塊和殘差塊(在逐個取樣的基礎上)進行組合以重現原始塊。視訊解碼器300可以執行額外處理,諸如執行去塊化處理以減少沿著塊的邊界的視覺偽影。
根據本案內容的技術,視訊解碼裝置(例如,視訊轉碼器200或視訊解碼器300)可以在PPS中對語法元素進行解碼,該語法元素指示PPS所適用於的視訊資料的圖片的的亮度解碼樹塊大小,並且可以根據PPS中的語法元素來對PPS所適用於的視訊資料的圖片進行解碼。
本案內容通常可能涉及「用訊號通知」某些資訊(諸如語法元素)。術語「用訊號通知」通常可以代表對用於語法元素的值及/或用於對經編碼的視訊資料進行解碼的其他資料的傳送。亦即,視訊轉碼器200可以在位元串流中用訊號通知用於語法元素的值。通常,用訊號通知代表在位元串流中產生值。如前述,源設備102可以基本上即時地或不是即時地(諸如可能在將語法元素儲存到存放裝置112以供目的地設備116稍後取回時發生)將位元串流傳輸到目的地設備116。
圖2A和2B是示出實例四叉樹二叉樹(QTBT)結構130以及對應的解碼樹單元(CTU)132的概念圖。實線表示四叉樹拆分,而虛線表示二叉樹拆分。在二叉樹的每個拆分(即非葉)節點中,用訊號發送一個標記以指示使用哪種拆分類型(亦即,水平或垂直),在該實例中,0指示水平拆分,而1指示垂直拆分。對於四叉樹拆分,由於四叉樹節點將塊水平地並且垂直地拆分為具有相等大小的4個子塊,因此無需指示拆分類型。因此,視訊轉碼器200可以對以下各項進行編碼,而視訊解碼器300可以對以下各項進行解碼:用於QTBT結構130的區域樹級別(即實線)的語法元素(諸如拆分資訊)、以及用於QTBT結構130的預測樹級別(即虛線)的語法元素(諸如拆分資訊)。視訊轉碼器200可以對用於由QTBT結構130的終端葉節點表示的CU的視訊資料(諸如預測和變換資料)進行編碼,而視訊解碼器300可以對視訊資料進行解碼。
通常,圖2B的CTU 132可以與定義與QTBT結構130的處於第一和第二級別的節點相對應的塊的大小的參數相關聯。這些參數可以包括CTU大小(表示取樣中的CTU 132的大小)、最小四叉樹大小(MinQTSize,其表示最小允許四叉樹葉節點大小)、最大二叉樹大小(MaxBTSize,其表示最大允許二叉樹根節點大小)、最大二叉樹深度(MaxBTDepth,其表示最大允許二叉樹深度)、以及最小二叉樹大小(MinBTSize,其表示最小允許二叉樹葉節點大小)。
QTBT結構的與CTU相對應的根節點可以在QTBT結構的第一級別處具有四個子節點,每個子節點可以是根據四叉樹分割來分割的。亦即,第一級別的節點是葉節點(沒有子節點)或者具有四個子節點。QTBT結構130的實例將此類節點表示為包括具有實線分支的父節點和子節點。若第一級別的節點不大於最大允許二叉樹根節點大小(MaxBTSize),則可以經由相應的二叉樹進一步對這些節點進行分割。可以對一個節點的二叉樹拆分進行反覆運算,直到從拆分產生的節點達到最小允許二叉樹葉節點大小(MinBTSize)或最大允許二叉樹深度(MaxBTDepth)。QTBT結構130的實例將此類節點表示為具有虛線分支。二叉樹葉節點被稱為解碼單元(CU),其用於預測(例如,圖片內或圖片間預測)和變換,而不進行任何進一步分割。如上所論述的,CU亦可以被稱為「視訊塊」或「塊」。
在QTBT分割結構的一個實例中,CTU大小被設置為128x128(亮度取樣和兩個對應的64x64色度取樣),MinQTSize被設置為16x16,MaxBTSize被設置為64x64,MinBTSize(對於寬度和高度兩者)被設置為4,並且MaxBTDepth被設置為4。首先對CTU應用四叉樹分割以產生四叉樹葉節點。四叉樹葉節點可以具有從16x16(即MinQTSize)到128x128(即CTU大小)的大小。若四叉樹葉節點為128x128,則由於該大小超過MaxBTSize(亦即,在該實例中為64x64),因此葉四叉樹節點將不被二叉樹進一步拆分。否則,四叉樹葉節點將被二叉樹進一步分割。因此,四叉樹葉節點亦是用於二叉樹的根節點,並且具有二叉樹的深度為0。當二叉樹深度達到MaxBTDepth(在該實例中為4)時,不允許進一步拆分。具有等於MinBTSize(在該實例中為4)的寬度的二叉樹節點意味著不允許針對該二叉樹節點進行進一步的垂直拆分(亦即,劃分寬度)。類似地,具有等於MinBTSize的高度的二叉樹節點意味著不允許針對該二叉樹節點進行進一步的水平拆分(亦即,劃分高度)。如前述,二叉樹的葉節點被稱為CU,並且根據預測和變換而被進一步處理,而無需進一步分割。
本文揭示減少參數集之間的解析依賴性的訊號傳遞技術。本案內容的訊號傳遞技術可以應用於通用視訊解碼(VVC)標準和其他未來的視訊解碼標準。
視訊解碼標準包括ITU-T H.261、ISO/IEC MPEG-1視覺、ITU-T H.262或ISO/IEC MPEG-2視覺、ITU-T H.263、ISO/IEC MPEG-4視覺和ITU-T H.264(亦被稱為ISO/IEC MPEG-4 AVC),包括其可縮放視訊解碼(SVC)和多視圖視訊解碼(MVC)擴展。另外,ITU-T視訊解碼專家組(VCEG)和ISO/IEC電影專家組(MPEG)的視訊解碼聯合協調小組(JCT-VC)以及3D視訊解碼擴展開發聯合協調小組(JCT-3V)最近開發了新的視訊解碼標準,即高效視訊解碼(HEVC)或ITU-T H.265,包括其範圍和螢幕內容解碼擴展、3D視訊解碼(3D-HEVC)和多視圖擴展(MV-HEVC)和可縮放擴展(SHVC)。
2016年,MPEG和ITU-T VCEG組成了聯合探索視訊小組(JVET),以探索和開發用於下一代視訊解碼標準(即VVC)的新視訊解碼工具。Bross等在「Versatile Video Coding (Draft 6)」,ITU-T SG 16 WP 3和ISO/IEC JTC 1/SC 29/WG 11的聯合視訊專家小組(JVET),第15次會議:瑞典哥德堡,2019年7月3-12日,JVET-O2001(以下稱為「VVC草案6」)中描述了VCC標準的草案6。參考軟體被稱為VVC測試模型(VTM)。下面在表1中圖示可以在本案內容中改進的VVC草案6的章節。視訊轉碼器200可以產生下面列出的參數,並且視訊解碼器300可以對參數進行解碼以決定如何解碼相應的視訊資料。
pic_parameter_set_rbsp( ) { 描述符
  …  
     pic_width_in_luma_samples ue(v)
     pic_height_in_luma_samples ue(v)
  …  
     single_tile_in_pic_flag u(1)
     if( !single_tile_in_pic_flag ) {  
         uniform_tile_spacing_flag u(1)
         if( uniform_tile_spacing_flag ) {  
              tile_cols_width_minus1 ue(v)
              tile_rows_height_minus1 ue(v)
         } else {  
              num_tile_columns_minus1 ue(v)
              num_tile_rows_minus1 ue(v)
              for( i = 0; i < num_tile_columns_minus1; i++ )  
                   tile_column_width_minus1[ i ] ue(v)
              for( i = 0; i < num_tile_rows_minus1; i++ )  
                  tile_row_height_minus1[ i ] ue(v)
         }  
         brick_splitting_present_flag u(1)
         if( uniform_tile_spacing_flag  &&  brick_splitting_present_flag )  
              num_tiles_in_pic_minus1 ue(v)
         for( i = 0; brick_splitting_present_flag  &&  i  <=  num_tiles_in_pic_minus1 + 1; i++ ) {  
              if( RowHeight[ i ] > 1 )  
                  brick_split_flag[ i ] u(1)
              if( brick_split_flag[ i ] ) {  
                  if( RowHeight[ i ] > 2 )  
                       uniform_brick_spacing_flag[ i ] u(1)
                  if( uniform_brick_spacing_flag[ i ] )  
                       brick_height_minus1[ i ] ue(v)
                  else {  
                       num_brick_rows_minus2[ i ] ue(v)
                       for( j = 0; j  <=  num_brick_rows_minus2[ i ]; j++ )  
                            brick_row_height_minus1[ i ][ j ] ue(v)
                  }  
              }  
         }  
表1
如表1所示,PPS可以反覆運算圖片的瓦片以用訊號通知語法元素,該語法元素用訊號通知關於圖片的瓦片中的磚塊的資訊。例如,PPS可以經由包括指示第i 瓦片是否被拆分為兩個或更多個磚塊的磚塊語法元素brick_split_flag[i]來用訊號通知瓦片是否被拆分為兩個或更多個磚塊。視訊解碼器300能夠至少部分地基於推導參數RowHeight[i](其指示第i 瓦片的行高)的值來推斷用於第i 瓦片的磚塊語法元素brick_split_flag[i]的值以及用於第i 瓦片的其他磚塊資訊。若第i 瓦片的行高不大於1,則視訊解碼器300可以推斷brick_split_flag[i]的值為0,從而指示第i 瓦片未被拆分為兩個或更多個磚塊。若第i 瓦片的行高大於1,則PPS可以顯式地用訊號通知磚塊語法元素brick_split_flag[i]。
此外,若brick_split_flag[i]等於1,則PPS亦可以經由包括指示第i 瓦片中的磚塊是否跨越瓦片均勻地分佈的磚塊語法元素uniform_brick_spacing_flag[i],來用訊號通知跨越瓦片均勻地分佈的兩個或更多個磚塊的水平磚塊邊界。類似地,視訊解碼器300能夠至少部分地基於推導參數RowHeight[i]的值來推斷用於第i 瓦片的磚塊語法元素uniform_brick_spacing_flag[i]的值。若第i 瓦片的行高不大於2,則視訊解碼裝置可以避免用訊號通知uniform_brick_spacing_flag[i],並且可以替代地推斷uniform_brick_spacing_flag[i]等於1。若第i 瓦片的行高大於2,則PPS可以替代地顯式地用訊號通知磚塊語法元素uniform_brick_spacing_flag[i]。
如前述,視訊資料的圖片所引用的SPS和PPS之間的解析依賴性可能導致視訊解碼裝置(例如,視訊轉碼器200或視訊解碼器300)無法決定PPS中的某些參數的值,直到視訊解碼裝置已經解析了SPS的至少一部分為止。
當對視訊資料的圖片所引用的PPS進行解碼時,視訊解碼器300可以使用圖片中的瓦片的數量以便反覆運算圖片的瓦片,以便對用於圖片中的瓦片的各種參數進行解碼。具體地,PPS可以包括條件循環,該條件循環具有至少部分地基於視訊資料的圖片中的瓦片的數量的條件。當對PPS進行解碼時,視訊解碼器300亦可以以CTB為單位決定圖片中的瓦片行的高度,以便決定是否在PPS中用訊號通知了某些磚塊語法元素的值,或者視訊解碼器300是否要推斷此類語法元素的值。
作為解析PPS的一部分,視訊解碼器300可以決定參數NumTilesInPic和RowHeight[i]的值,諸如表1中PPS的部分所示,其中參數NumTilesInPic的值對應於圖片中的瓦片的數量,並且參數RowHeight[i]的值對應於第i 瓦片行的高度,以CTB為單位。視訊解碼器300可以至少部分地基於圖片的寬度和圖片的高度來推導參數NumTilesInPic和RowHeight[i]的值。然而,若圖片的寬度和圖片的高度的值是在SPS中用訊號通知的(諸如經由用訊號在SPS中通知語法元素pic_width_in_luma_samples和pic_height_in_luma_samples),而不是在PPS中用訊號通知的,則決定參數NumTilesInPic和RowHeight[i]的值可能取決於解析SPS以決定語法元素pic_width_in_luma_samples和pic_height_in_luma_sample的值。
在表1的實例中,作為參考圖片重取樣(RPR)採用的一部分,語法元素pic_width_in_luma_samples和語法元素pic_height_in_luma_samples兩者均已從SPS移至PPS。因此,PPS中的參數NumTilesInPic和參數RowHeight[i]的值不依賴於SPS中的語法元素pic_width_in_luma_samples和pic_height_in_luma_samples的值。
然而,決定參數NumTilesInPic和RowHeight[i]的值可能仍取決於SPS訊號傳遞。具體地,除了語法元素pic_width_in_luma_samples和語法元素pic_height_in_luma_samples的值之外,參數NumTilesInPic和RowHeight[i]的值亦可能取決於語法元素log2_ctu_size_minus5,其指示由SPS用訊號通知但不是由PPS用訊號通知的解碼樹塊。
因此,由於與SPS的解析依賴性問題,可能無法在PPS級別推導RowHeight[i]的值,因此本案內容的各態樣描述了用於以解決用於推導參數RowHeight[i]的值的解析依賴性的方式來在PPS中用訊號通知語法元素的技術。
在以上表1的實例中,表1的實例中的PSS的一部分包括語法元素num_tiles_in_pic_minus1,其指示引用PPS的圖片中的瓦片的數量。因此,視訊解碼器300能夠對PPS中的語法元素num_tiles_in_pic_minus1進行解碼,以便決定與圖片中的瓦片的數量相對應的NumTilesInPic的值。
然而,儘管在PPS中用訊號通知語法元素num_tiles_in_pic_minus1可以針對推導NumTilesInPic的值解決PPS對SPS的解析依賴性,但在PPS中用訊號通知語法元素num_tiles_in_pic_minus1沒有針對決定參數RowHeight [i]的值解決對SPS的解析依賴性。此外,包括指示圖片中的瓦片的數量的語法元素(諸如num_tiles_in_pic_minus1)可以增加PPS的大小,在最壞情況下(諸如在8K內容(例如,8192 x 4320並且CtbSize =32)的情況下)增加33位元。因此,不包括指示圖片中的瓦片的數量的語法元素可以潛在地將PPS的大小最多減少33位元。
然而,若PPS不包括指示圖片中的瓦片的數量的語法元素(諸如語法元素num_tiles_in_pic_minus1),則視訊解碼器300可能無法基於PPS中包括的資訊來決定圖片中的瓦片的數量,此類省略可能重新引入PPS和SPS之間的解析依賴性,因為在視訊解碼裝置解析SPS中的指示解碼樹塊的大小的語法元素之前,視訊解碼裝置可能無法推斷圖片中的瓦片的數量。
在另一實例中,作為解析由視訊資料的圖片引用的PPS的一部分,視訊解碼器300可以解析條件陳述式,以便決定是解碼指示關於圖片中的磚塊的資訊的磚塊語法元素還是推斷關於圖片中的磚塊的這種資訊。例如,針對圖片中的第i 瓦片,僅當指示第i 瓦片行的高度(以CTB為單位)的參數RowHeight[i]的值大於1時,PSS才可以用訊號通知語法元素brick_split_flag[i],其指示該瓦片是否被劃分為兩個或更多個磚塊。若RowHeight[i]的值大於1,則視訊解碼器300能夠對語法元素brick_split_flag[i]進行解碼,以決定瓦片是否被劃分為兩個或更多個磚塊。在另一態樣,若RowHeight[i]的值不大於1,則視訊解碼器300可以基於RowHeight[i]的值不大於1來推斷出該瓦片未被劃分為兩個或更多個磚塊。
類似地,針對圖片中的第i 瓦片(其中該瓦片被劃分為兩個或更多個磚塊),僅當指示第i 瓦片行的高度(以CTB為單位)的參數RowHeight[i]的值大於2時,PSS才可以用訊號通知語法元素uniform_brick_spacing_flag[i],其指示兩個或更多個磚塊的水平磚塊邊界跨越瓦片是否均勻地分佈。若RowHeight[i]的值大於2,則視訊解碼器300能夠對語法元素uniform_brick_spacing_flag[i]進行解碼,以決定瓦片中的兩個或更多個磚塊的水平磚塊邊界跨越瓦片是否均勻地分佈。在另一態樣,若RowHeight[i]的值不大於2,則視訊解碼器300可以替代地基於RowHeight[i]的值不大於2來推斷瓦片中的兩個或更多個磚塊的水平磚塊邊界跨越瓦片均勻地分佈。
如前述,決定用於視訊資料的圖片的瓦片行的高度可能會引入皆應用於視訊資料的圖片和SPS的PPS與SPS之間的解析依賴性。具體地,參數RowHeight[i]的值(其為圖片中的第i 瓦片的瓦片行的高度(以CTB為單位))可以取決於SPS中的資訊。亦即,當解析PPS時,視訊解碼器300可能無法僅根據從PPS解碼的資訊來決定參數RowHeight[i]的值,而是替代地可能需要從SPS解碼的資訊來決定參數RowHeight[i]的值。因此,在解析PPS時,視訊解碼器300可能無法獨立於解析SPS來決定圖片的第i 個瓦片的RowHeight[i]的值以及評估取決於RowHeight[i]的值的條件陳述式。
視訊解碼器300能夠至少部分地基於圖片的解碼樹塊大小來推導圖片中的瓦片的數量以及圖片的瓦片的瓦片行的高度(以CTB為單位)兩者。因此,若PPS包括對圖片的解碼樹塊大小的指示,則視訊解碼器300能夠推導圖片中的瓦片的數量以及用於圖片的瓦片的瓦片行的高度(以CTB為單位)(例如,RowHeight[i])兩者,而無需與SPS的解析依賴性,並且不需要PPS顯式地用訊號通知指示圖片中的瓦片的數量的語法元素。因為用訊號通知用於圖片的解碼樹塊大小可能需要少至2個額外位元,而用訊號通知圖片中的瓦片的數量可能需要多達33個位元,所以在PSS中包括指示用於圖片的解碼樹塊大小的語法元素可以減小PPS的大小。
根據本案內容的各態樣,從PPS中去除語法元素num_tiles_in_pic_minus1的訊號傳遞,而在PPS中用訊號通知關於解碼樹塊大小(CtbSize)的資訊。特別地,在PPS中可能需要pps_log2_ctu_size_minus5以及pic_width_in_luma_samples和pic_height_in_luma_samples來推導PicWidthInCtbsY和PicHeightInCtbsY的值,這可以推斷NumTilesInPic和RowHeight[i]的值。此外,pps_log2_ctu_size_minus5的訊號傳遞可能需要2個額外位元,但是在8K內容(例如,8192 x 4320並且解碼樹塊大小(CtbSize)= 32)的最壞情況下,去除num_tiles_in_pic_minus1的語法元素可以減少多達33位元。
亦即,根據本案內容的各態樣,為了減少PPS與SPS之間的解析依賴性,不是在視訊資料的圖片所引用的PPS中包括指示圖片中的瓦片的數量的語法元素,而是圖片所引用的PPS可以替代地包括指示圖片的解碼樹塊大小的語法元素。視訊解碼器300可以對語法元素進行解碼以決定圖片的解碼樹塊大小的值,並且可以基於圖片的解碼樹塊大小的值來推導圖片中的瓦片的數量以及圖片的瓦片的瓦片行的高度(以CTB為單位)(例如,RowHeight[i])兩者。
用於圖片的PPS可以包括語法元素,該語法元素指示圖片中的瓦片的數量可以是語法元素pps_log2_ctu_size_minus5,其指定圖片之每一者CTU的亮度解碼樹塊大小減去5。特別地,語法元素pps_log_2_ctu_size_minus5可以具有與用於圖片的SPS中的語法元素log2_ctu_size_minus5相同的值。因此,視訊轉碼器可以經由將語法元素pps_log2_ctu_size_minus5的值加5並且經由將所得的總和左移1,使得解碼樹塊大小(CtbSize)= 1 <<((pps_log2_ctu_size_minus5+5),來根據語法元素pps_log2_ctu_size_minus5決定CtbSize。經由在用於圖片的PPS中用訊號通知語法元素pps_log_2_ctu_size_minus5具有與用於圖片的SPS中的語法元素log2_ctu_size_minus5相同的值,本案內容針對決定參數NumTilesInPic和RowHeight[i]的值去除了PPS與SPS之間的解析依賴性,因為可以從PPS中的語法元素pps_log_2_ctu_size_minus5而不是SPS中的語法元素log_2_ctu_size_minus5推導出該等參數的值。
表2中描述了對VVC草案6版本14的語法更改,其中<DELETE> </DELETE>之間的內容已從語法中刪除,而<ADD> </ADD>之間的內容已添加至語法。
VVC草案6版本14中的第7.3.2.4節:
pic_parameter_set_rbsp( ) { 描述符
  …  
     pic_width_in_luma_samples ue(v)
     pic_height_in_luma_samples ue(v)
   <ADD> pps_log2_ctu_size_minus5 </ADD> u(2)
  …  
     single_tile_in_pic_flag u(1)
     if( !single_tile_in_pic_flag ) {  
         uniform_tile_spacing_flag u(1)
         if( uniform_tile_spacing_flag ) {  
              tile_cols_width_minus1 ue(v)
              tile_rows_height_minus1 ue(v)
         } else {  
              num_tile_columns_minus1 ue(v)
              num_tile_rows_minus1 ue(v)
              for( i = 0; i < num_tile_columns_minus1; i++ )  
                  tile_column_width_minus1[ i ] ue(v)
              for( i = 0; i < num_tile_rows_minus1; i++ )  
                  tile_row_height_minus1[ i ] ue(v)
         }  
         brick_splitting_present_flag u(1)
<DELETE>if( uniform_tile_spacing_flag && brick_splitting_present_flag )</DELETE>  
<DELETE>num_tiles_in_pic_minus1</DELETE>  
         for( i = 0; brick_splitting_present_flag  &&  i  < <DELETE>= num_tiles_in_pic_minus1 + 1</DELETE>  <ADD>NumTilesInPic</ADD> ; i++ ) {  
              if( RowHeight[ i ] > 1 )  
                  brick_split_flag[ i ] u(1)
              if( brick_split_flag[ i ] ) {  
                  if( RowHeight[ i ] > 2 )  
                       uniform_brick_spacing_flag[ i ] u(1)
                  if( uniform_brick_spacing_flag[ i ] )  
                       brick_height_minus1[ i ] ue(v)
                  else {  
                       num_brick_rows_minus2[ i ] ue(v)
                       for( j = 0; j  <=  num_brick_rows_minus2[ i ]; j++ )  
                            brick_row_height_minus1[ i ][ j ] ue(v)
                  }  
              }  
         }  
VVC草案6版本14中的第7.4.3.4節: pic_width_in_luma_samples指定引用PPS的每個經解碼的圖片的寬度,以亮度取樣為單位。pic_width_in_luma_samples不應等於0,應為Max(8,MinCbSizeY)的整數倍,並且應小於或等於pic_width_max_in_luma_samples。 當subpics_present_flag等於1時,pic_width_in_luma_samples的值應等於pic_width_max_in_luma_samples。 pic_height_in_luma_samples指定引用PPS的每個經解碼的圖片的高度,以亮度取樣為單位。pic_height_in_luma_samples不應等於0,並且應為Max(8,MinCbSizeY)的整數倍,並且應小於或等於pic_height_max_in_luma_samples。 當subpics_present_flag等於1時,pic_height_in_luma_samples的值應等於pic_height_max_in_luma_samples。 <ADD> pps_log2_ctu_size_minus5加5指定引用PPS的每個圖片之每一者CTU的亮度解碼樹塊大小。pps_log2_ctu_size_minus5的值應等於log2_ctu_size_minus5。 CtbSize = 1 <<(pps_log2_ctu_size_minus5 + 5)</ ADD> single_tile_in_pic_flag等於1指定引用PSS的每個圖片中僅存在一個瓦片。single_tile_in_pic_flag等於0指定引用PSS的每個圖片中存在一個以上的瓦片。 注意–在瓦片內沒有進一步的磚塊拆分的情況下,整個瓦片被稱為磚塊。當圖片僅包含單個瓦片而沒有進一步的磚塊拆分時,其被稱為單個磚塊。 位元串流一致性的要求是,對於CVS內的經解碼的圖片所引用的所有PPS,single_tile_in_pic_flag的值應相同。 uniform_tile_spacing_flag等於1指定瓦片列邊界和同樣的瓦片行邊界跨越圖片均勻地分佈並且使用語法元素tile_cols_width_minus1和tile_rows_height_minus1用訊號進行通知。Uniform_tile_spacing_flag等於0指定瓦片列邊界和同樣的瓦片行邊界跨越圖片可以均勻地分佈或者可以不是均勻地分佈並且使用語法元素num_tile_columns_minus1和num_tile_rows_minus1以及語法元素對tile_column_width_minus1[i]和tile_row_height_minus1[i]的列表用訊號進行通知。當不存在時,推斷uniform_tile_spacing_flag的值等於1。 tile_cols_width_minus1加1指定當uniform_tile_spacing_flag等於1時,瓦片列的寬度不包括圖片的最右瓦片列(以CTB為單位)。tile_cols_width_minus1的值應在0到PicWidthInCtbsY-1的範圍中(包括0和PicWidthInCtbsY-1)。當不存在時,推斷tile_cols_width_minus1的值等於PicWidthInCtbsY-1。 tile_rows_height_minus1加1指定當uniform_tile_spacing_flag等於1時,瓦片行的高度不包括圖片的底部瓦片行(以CTB為單位)。tile_rows_height_minus1的值應在0到PicHeightInCtbsY-1的範圍中(包括0和PicHeightInCtbsY-1)。當不存在時,推斷tile_rows_height_minus1的值等於PicHeightInCtbsY-1。 num_tile_columns_minus1加1指定當uniform_tile_spacing_flag等於0時,對圖片進行分割的瓦片列數。num_tile_columns_minus1的值應在0到PicWidthInCtbsY-1的範圍中(包括0和PicWidthInCtbsY-1)。如果single_tile_in_pic_flag等於1,則推斷num_tile_columns_minus1的值等於0。否則,當uniform_tile_spacing_flag等於1時,則按條款6.5.1中的規定推斷num_tile_columns_minus1的值。 num_tile_rows_minus1加1指定當uniform_tile_spacing_flag等於0時,對圖片進行分割的瓦片行數。num_tile_rows_minus1的值應在0到PicHeightInCtbsY - 1的範圍中(包括0和PicHeightInCtbsY - 1)。如果single_tile_in_pic_flag等於1,則推斷num_tile_rows_minus1的值等於0。否則,當uniform_tile_spacing_flag等於1時,則按條款6.5.1的規定推斷num_tile_rows_minus1的值。 變數NumTilesInPic被設置為等於(num_tile_columns_minus1 + 1)*(num_tile_rows_minus1 + 1)。 當single_tile_in_pic_flag等於0時,NumTilesInPic應大於1。 tile_column_width_minus1[i]加1指定第i 瓦片列的寬度(以CTB為單位)。 tile_row_height_minus1[i]加1指定第i 瓦片行的高度(以CTB為單位)。 brick_splitting_present_flag等於1指定引用PPS的圖片的一或多個瓦片可以被劃分為兩個或更多個磚塊。 brick_splitting_present_flag等於0指定引用PPS的圖片的瓦片均未被劃分為兩個或更多個磚塊。 <DELETE> num_tiles_in_pic_minus1加1指定引用PPS的每個圖片中的瓦片的數量。num_tiles_in_pic_minus1的值應等於NumTilesInPic-1。當不存在時,推斷num_tiles_in_pic_minus1的值等於NumTilesInPic-1。</ DELETE> brick_split_flag[i]等於1指定第i 瓦片被劃分為兩個或更多個磚塊。brick_split_flag[i]等於0指定第i 瓦片未被劃分為兩個或更多個磚塊。當不存在時,推斷brick_split_flag[i]的值等於0。 uniform_brick_spacing_flag[ i ]等於1指定水平磚塊邊界跨越第i 瓦片均勻地分佈並且使用語法元素brick_height_minus1[ i ]用訊號進行通知。uniform_brick_spacing_flag[ i ]等於0指定水平磚塊邊界跨越第i 瓦片可以均勻地分佈或者可以不是均勻地分佈並且使用語法元素num_brick_rows_minus2[ i ]和語法元素brick_row_height_minus1[ i ][ j ]的列表用訊號進行通知。當不存在時,推斷uniform_brick_spacing_flag[ i ]的值等於1。 brick_height_minus1[i]加1指定當uniform_brick_spacing_flag[i]等於1時,磚塊行的高度不包括第i 瓦片中的底部磚塊(以CTB為單位)。當存在時,brick_height_minus1的值應在0到RowHeight[i]-2的範圍中(包括0和RowHeight[i]-2)。當不存在時,推斷brick_height_minus1[i]的值等於RowHeight[i]-1。 num_brick_rows_minus2[i]加2指定當uniform_brick_spacing_flag[i]等於0時,對第i 瓦片進行分割的磚塊的數量。當存在時,num_brick_rows_minus2[i]的值應在0到RowHeight[i]-2的範圍中(包括0和RowHeight[i]-2)。如果brick_split_flag [i]等於0,則推斷num_brick_rows_minus2[i]的值等於-1。否則,當uniform_brick_spacing_flag[i]等於1時,將按6.5.1中的規定推斷num_brick_rows_minus2[i]的值。 brick_row_height_minus1[i][j]加1指定當uniform_tile_spacing_flag等於0時,第i 瓦片中的第j 磚塊的高度(以CTB為單位)。
表2
如表2所示,視訊解碼裝置(例如,視訊轉碼器200或視訊解碼器300)可以在PPS中對語法元素pps_log2_ctu_size_minus5進行解碼,該語法元素pps_log2_ctu_size_minus5指示PPS所適用於的視訊資料的圖片的亮度解碼樹塊大小,其中語法元素pps_log2_ctu_size_minus5具有與SPS中的語法元素log2_ctu_size_minus5相同的值。亦即,視訊轉碼器200可以在PPS中對語法元素pps_log2_ctu_size_minus5進行編碼,並且視訊解碼器300可以對語法元素pps_log2_ctu_size_minus5進行解碼。
視訊解碼器300可以基於PPS中的語法元素pps_log2_ctu_size_minus5來決定圖片的亮度解碼樹塊大小。因為語法元素pps_log2_ctu_size_minus5指示圖片中的CTU的log2亮度解碼樹塊大小減5,所以視訊解碼器300可以經由將語法元素pps_log2_ctu_size_minus5的值加5以及經由將所得的總和左移1,諸如CtbSize = 1 <<(pps_log2_ctu_size_minus5 + 5),來決定圖片中的CTU的亮度解碼樹塊大小CtbSize。
視訊解碼裝置亦可在PPS中對條件循環進行解碼,該條件循環具有至少部分地基於視訊資料的圖片中的瓦片的數量的條件。例如,視訊轉碼器200可以在PPS中對(i = 0; brick_splitting_present_flag && i <= NumTilesInPic + 1; i ++)的條件循環進行編碼,該條件循環是至少部分地基於與視訊資料的圖片中的瓦片的數量相對應的變數NumTilesInPic的,並且視訊解碼器300可以對PPS中的條件循環進行解碼。
當視訊解碼器300在PPS中對條件循環進行解碼時,該條件循環具有至少部分地基於與視訊資料的圖片中的瓦片的數量相對應的變數NumTilesInPic的條件,視訊解碼器300可以決定變數NumTilesInPic的值,以便評估條件i <= NumTilesInPic +1。如前述,視訊解碼器300可以至少部分地基於亮度取樣中的圖片寬度(如語法元素pic_width_in_luma_samples指示的)、亮度取樣中的圖片高度(如語法元素pic_height_in_luma_samples指示的)以及圖片中的CTU的亮度解碼樹塊大小CtbSize(如從語法元素pps_log2_ctu_size_minus5推導出的)來決定變數NumTilesInPic的值。因此,在決定變數NulTilesInPic的值時,視訊轉碼器200可以至少部分地基於變數NulTiles的值來反覆運算條件循環。
如前述,由於視訊解碼器300能夠在沒有包括指示圖片中的瓦片的數量的語法元素的PPS的情況下決定視訊資料的圖片中的瓦片的數量,因此視訊解碼裝置可以避免在PPS中對指示圖片中的瓦片的數量的語法元素進行解碼。亦即,視訊轉碼器200可以避免在PPS中對指示圖片中的瓦片的數量的語法元素進行編碼,並且視訊轉碼器200可以避免對在PPS中指示圖片的瓦片的數量的任何語法元素進行解碼。
如表2所示,視訊解碼裝置亦可以在PPS中對條件陳述式進行解碼,該條件陳述式具有至少部分地基於PPS所適用於的圖片的瓦片行的高度的條件。例如,視訊轉碼器200可以在PPS中對條件陳述式if(RowHeight [i]> 1)和if(RowHeight [i]> 2)進行編碼,該條件陳述式是至少部分地基於與視訊資料的圖片的第i 瓦片行的高度(以CTB為單位)相對應的變數RowHeight[i]的,並且視訊解碼器300可以對PPS中的條件陳述式進行解碼。
當視訊解碼器300在PPS中對條件陳述式(諸如if(RowHeight [i]> 1)和if(RowHeight [i]> 2))進行解碼時,該條件陳述式是至少部分地基於與視訊資料的圖片的第i 瓦片行的高度(以CTB為單位)相對應的變數RowHeight[i]的,視訊解碼器300可以決定變數RowHeight[i]的值,以便評估條件RowHeight[i ]> 1及/或RowHeight[i]>2。如前述,視訊解碼器300可至少部分地基於圖片中的CTU的亮度解碼樹塊大小CtbSize(如從語法元素pps_log2_ctu_size_minus5推導出的)來決定變數RowHeight[i]的值。因此,在決定變數RowHeight[i]的值時,視訊解碼器300可以諸如經由評估if(RowHeight[i]> 1)及/或if(RowHeight[i]> 2)來評估條件陳述式。
當視訊解碼器300經由決定與視訊資料的圖片的第i 瓦片行的高度(以CTB為單位)相對應的變數RowHeight[i]的值來對條件陳述式if(RowHeight[i]> 1)進行解碼時,視訊解碼器300可以評估條件陳述式if(RowHeight[i]> 1),以決定PPS是否用訊號通知指示視訊資料的圖片的第i 瓦片是否被劃分為兩個或更多個磚塊的語法元素brick_split_flag[i]。若視訊解碼器300在評估條件陳述式if(RowHeight[i]> 1)時決定條件陳述式評估為真(亦即,變數RowHeight[i]的值大於1),則視訊解碼器300可以在PPS中對指示視訊資料的圖片的第i 瓦片是否被劃分為兩個或更多個磚塊的語法元素brick_split_flag[i]進行解碼。然而,若視訊解碼器300在評估條件陳述式if(RowHeight[i]> 1)時決定條件陳述式評估為假(亦即,變數RowHeight[i]的值不大於1),則視訊解碼器300可以替代地推斷視訊資料的圖片的第i 瓦片未被劃分為兩個或更多個磚塊。
類似地,當視訊解碼器300經由決定與視訊資料的圖片的第i 瓦片行的高度(以CTB為單位)相對應的變數RowHeight[i]的值來對條件陳述式if(RowHeight[i]> 2)進行解碼時,視訊解碼器300可以評估條件陳述式if(RowHeight[i]> 2),以決定PPS是否用訊號通知指示一或多個水平磚塊邊界是否跨越被劃分為兩個或更多個磚塊的視訊資料的圖片的第i 瓦片均勻地分佈的語法元素uniform_brick_spacing_flag[ i ]。若視訊解碼器300在評估條件陳述式if(RowHeight[i]> 2)時決定條件陳述式評估為真(亦即,變數RowHeight[i]的值大於2),則視訊解碼器300可以在PPS中對指示一或多個水平磚塊邊界是否跨越被劃分為兩個或更多個磚塊的視訊資料的圖片的第i 瓦片均勻地分佈的語法元素uniform_brick_spacing_flag[ i ]進行解碼。然而,若視訊解碼器300在評估條件陳述式if(RowHeight[i]> 2)時決定條件陳述式評估為假(亦即,變數RowHeight[i]的值不大於2),則視訊解碼器300可以替代地推斷一或多個水平磚塊邊界跨越被劃分為兩個或更多個磚塊的視訊資料的圖片的第i 瓦片均勻地分佈。
因此,視訊解碼裝置可以根據語法元素pps_log2_ctu_size_minus5對PPS所適用於的視訊資料的圖片進行解碼。亦即,視訊轉碼器200可以根據語法元素pps_log2_ctu_size_minus5來對PPS所適用於的視訊資料的圖像進行編碼,諸如經由在PPS中對語法元素pps_log2_ctu_size_minus5進行編碼,並且視訊解碼器300可以根據語法元素pps_log2_ctu_size_minus5來對PPS所適用於的視訊資料的圖像進行解碼,諸如經由在PPS中對語法元素pps_log2_ctu_size_minus5進行解碼。
根據本案內容的一些態樣,代替在語法元素pps_log2_ctu_size_minus5中進行解碼以減少PPS與SPS之間的解析依賴性或除此之外,本案內容的各態樣包括用於減少PPS與SPS之間的解析依賴性的額外技術。
如前述,可以經由添加RowHeight[i]的語法條件檢查(諸如分別向brick_split_flag[i]和uniform_brick_spacing_flag[i]添加條件陳述式if(Row Height[i]> 1)和if(Row Height [i]> 2))來引入PPS對SPS的解析依賴性。由於HLS專家同意在PPS語法中去除對SPS的依賴性,因此該問題應在下一版VVC文字中解決。為了解決該問題,提出了若干更改:
解決方案1:在語義上一致的情況下,可以經由簡單地在語法上替換條件檢查(諸如分別為條件陳述式if(Row Height[i]> 1)和if(Row Height[i]> 2)來解決上述依賴性。下文在表3中描述了提議的對VVC草案6版本14的語法更改,其中<DELETE></ DELETE>之間的內容已從語法中刪除,而<ADD></ ADD>之間的內容已添加至語法。
VVC草案6版本14中的第7.3.2.4節:
pic_parameter_set_rbsp( ) { 描述符
  …  
         brick_splitting_present_flag u(1)
         if( uniform_tile_spacing_flag  &&  brick_splitting_present_flag )  
              num_tiles_in_pic_minus1 ue(v)
         for( i = 0; brick_splitting_present_flag  &&  i  <=  num_tiles_in_pic_minus1 + 1; i++        ) {  
              <DELETE>if( RowHeight[ i ] > 1 )</DELETE>  
                  brick_split_flag[ i ] u(1)
              if( brick_split_flag[ i ] ) {  
                  <DELETE>if( RowHeight[ i ] > 2 )</DELETE>  
                       uniform_brick_spacing_flag[ i ] u(1)
                   if( uniform_brick_spacing_flag[ i ] )  
                       brick_height_minus1[ i ] ue(v)
                  else {  
                       num_brick_rows_minus2[ i ] ue(v)
                       for( j = 0; j  <=  num_brick_rows_minus2[ i ]; j++ )  
                           brick_row_height_minus1[ i ][ j ] ue(v)
                  }  
              }  
         }  
  …  
VVC草案6版本14中的第7.4.3.4節: brick_splitting_present_flag等於1指定引用PPS的圖片的一或多個瓦片可以被劃分為兩個或更多個磚塊。brick_splitting_present_flag等於0指定引用PPS的圖片的瓦片均未被劃分為兩個或更多個磚塊。 num_tiles_in_pic_minus1加1指定引用PPS的每個圖片中的瓦片的數量。 num_tiles_in_pic_minus1的值應等於NumTilesInPic-1。當不存在時,推斷num_tiles_in_pic_minus1的值等於NumTilesInPic-1。 brick_split_flag[i]等於1指定第i 瓦片被劃分為兩個或更多個磚塊。brick_split_flag[i]等於0指定示第i 瓦片未被劃分為兩個或更多個磚塊。<DELETE>當不存在時,推斷brick_split_flag[i]的值等於0。</DELETE><ADD>位元串流一致性的要求是,如果RowHeight[ i] =1,則brick_split_flag[i]的值應等於0。</ADD> uniform_brick_spacing_flag[i]等於1指定水平磚塊邊界跨越第i瓦片均勻地分佈並且使用語法元素brick_height_minus1[ i ]用訊號進行通知。uniform_brick_spacing_flag[ i ]等於0指定水平磚塊邊界跨越第i 瓦片可以均勻地分佈或者可以不是均勻地分佈並且使用語法元素num_brick_rows_minus2[ i ]和語法元素brick_row_height_minus1[ i ][ j ]的列表用訊號進行通知。當不存在時,推斷uniform_brick_spacing_flag[ i ]的值等於1。<ADD>位元串流一致性的要求是,如果RowHeight[i] =2,則uniform_brick_spacing_flag[ i ]的值應等於1。</ADD> brick_height_minus1[i]加1指定當uniform_brick_spacing_flag[i]等於1時,磚塊行的高度不包括第i 瓦片中的底部磚塊(以CTB為單位)。當存在時,brick_height_minus1的值應在0到RowHeight[i]-2的範圍中(包括0和RowHeight[i]-2)。當不存在時,推斷brick_height_minus1[i]的值等於RowHeight[i]-1。 num_brick_rows_minus2[i]加2指定當uniform_brick_spacing_flag[i]等於0時,對第i 瓦片進行分割的磚塊的數量。當存在時,num_brick_rows_minus2[i]的值應在0到RowHeight[i]-2的範圍中(包括0和RowHeight[i]-2)。若brick_split_flag [i]等於0,則推斷num_brick_rows_minus2[i]的值等於-1。否則,當uniform_brick_spacing_flag[i]等於1時,將按6.5.1中的規定推斷num_brick_rows_minus2[i]的值。 brick_row_height_minus1[i][j]加1指定當uniform_tile_spacing_flag等於0時,第i 瓦片中的第j 磚塊的高度(以CTB為單位)。
表3
如表3中所示,視訊解碼裝置可以經由從PPS中消除以RowHeight [i]為條件的條件陳述式(諸如條件陳述式if(Row Height[i]> 1)和if(Row Height[i]> 2)),來消除由推導變數RowHeight[i]的值引起的PPS與SPS之間的解析依賴性。因此,表3中的PPS部分不包括變數RowHeight[i]或以RowHeight[i]為條件的條件陳述式。因此,視訊轉碼器200可以避免在PPS中對以RowHeight[i]為條件的條件陳述式進行編碼,並且視訊解碼器300可以避免在PPS中對以RowHeight[i]為條件的條件陳述式進行解碼。
解決方案2:亦可以經由添加新的語法元素來指定第i 瓦片中的RowHeight[i]的值來解決由RowHeight[i]引起的PPS與SPS之間的解析依賴性。具體而言,PPS可以包括指示視訊資料的圖片的第i 瓦片行的高度減1的語法元素row_height_minus1。此外,將PSS中以RowHeight[i]為條件的條件陳述式(諸如條件陳述式if(Row Height[i]> 1)和if(Row Height[i]> 2))替換為以語法元素row_height_minus1[i]為條件的條件陳述式(諸如條件陳述式if(row_height_minus1[i]> 0和if(row_height_minus1[i]> 1])。
下文在表4中描述了提議的對VVC草案6版本14的語法更改,其中<DELETE></DELETE>之間的內容已從語法中刪除,而<ADD></ADD>之間的內容已添加至語法。
VVC草案6版本14中的第7.3.2.4節:
pic_parameter_set_rbsp( ) { 描述符
  …  
         brick_splitting_present_flag u(1)
         if( uniform_tile_spacing_flag  &&  brick_splitting_present_flag )  
              num_tiles_in_pic_minus1 ue(v)
         for( i = 0; brick_splitting_present_flag  &&  i  <=  num_tiles_in_pic_minus1 + 1; i++        ) {  
      <ADD>row_height_minus1[ i ]</ADD> ue(v)
              <DELETE>if( RowHeight[ i ] > 1 )</DELETE>        <ADD>if( row_height_minus1[ i ] > 0 )</ADD>  
                  brick_split_flag[ i ] u(1)
              if( brick_split_flag[ i ] ) {  
                  <DELETE>if( RowHeight[ i ] > 2 )</DELETE>          <ADD>if( row_height_minus1[ i ] > 1 )</ADD>  
                       uniform_brick_spacing_flag[ i ] u(1)
                  if( uniform_brick_spacing_flag[ i ] )  
                       brick_height_minus1[ i ] ue(v)
                  else {  
                       num_brick_rows_minus2[ i ] ue(v)
                       for( j = 0; j  <=  num_brick_rows_minus2[ i ]; j++ )  
                           brick_row_height_minus1[ i ][ j ] ue(v)
                  }  
              }  
         }  
  …  
VVC草案6版本14中的第7.4.3.4節: brick_splitting_present_flag等於1指定引用PPS的圖片的一或多個瓦片可以被劃分為兩個或更多個磚塊。brick_splitting_present_flag等於0指定引用PPS的圖片的瓦片均未被劃分為兩個或更多個磚塊。 num_tiles_in_pic_minus1加1指定引用PPS的每個圖片中的瓦片的數量。 num_tiles_in_pic_minus1的值應等於NumTilesInPic-1。當不存在時,推斷num_tiles_in_pic_minus1的值等於NumTilesInPic-1。 <ADD> row_height_minus1[i]加1指定第i 瓦片行的高度(以CTB為單位)。row_height_minus1[i]的值應等於RowHeight [i] –1。當不存在時,推斷row_height_minus1[i]的值等於RowHeight [i] – 1。</ADD> brick_split_flag[i]等於1指定第i 瓦片被劃分為兩個或更多個磚塊。brick_split_flag[i]等於0指定第i 瓦片未被劃分為兩個或更多個磚塊。當不存在時,推斷brick_split_flag[i]的值等於0。 uniform_brick_spacing_flag[i]等於1指定水平磚塊邊界跨越第i瓦片均勻地分佈並且使用語法元素brick_height_minus1[ i ]用訊號進行通知。uniform_brick_spacing_flag[ i ]等於0指定水平磚塊邊界跨越第i 瓦片可以均勻地分佈或者可以不是均勻地分佈並且使用語法元素num_brick_rows_minus2[ i ]和語法元素brick_row_height_minus1[ i ][ j ]的列表用訊號進行通知。當不存在時,推斷uniform_brick_spacing_flag[ i ]的值等於1。 brick_height_minus1[i]加1指定當uniform_brick_spacing_flag[i]等於1時,磚塊行的高度不包括第i 瓦片中的底部磚塊(以CTB為單位)。當存在時,brick_height_minus1的值應在0到RowHeight[i]-2的範圍中(包括0和RowHeight[i]-2)。當不存在時,推斷brick_height_minus1[i]的值等於RowHeight[i]-1。 num_brick_rows_minus2[i]加2指定當uniform_brick_spacing_flag[i]等於0時,對第i 瓦片進行分割的磚塊的數量。當存在時,num_brick_rows_minus2[i]的值應在0到RowHeight[i]-2的範圍中(包括0和RowHeight[i]-2)。若brick_split_flag [i]等於0,則推斷num_brick_rows_minus2[i]的值等於-1。否則,當uniform_brick_spacing_flag[i]等於1時,將按6.5.1中的規定推斷num_brick_rows_minus2[i]的值。 brick_row_height_minus1[i][j]加1指定當uniform_tile_spacing_flag等於0時,第i 瓦片中的第j 磚塊的高度(以CTB為單位)。
表4
如表4所示,視訊轉碼器200可以在適用於視訊資料的圖片的PPS中對語法元素row_height_minus1進行編碼,該語法元素row_height_minus1指示視訊資料的圖片的第i 瓦片行的高度減1。視訊轉碼器200亦可以在PPS中對條件陳述式if(row_height_minus1[i]> 0)和if(row_height_minus1[i]> 1)進行編碼,以分別替換條件陳述式if(Row Height[i]> 1)和if (Row Height[i]> 2)。
視訊解碼器300可以對PPS中的語法元素row_height_minus1進行解碼,以決定視訊資料的圖片的第i 瓦片行的高度減1。
當視訊解碼器300對條件陳述式if(row_height_minus1[i]> 0)進行解碼時,因為視訊解碼器已經根據對PPS中的語法元素row_height_minus1進行解碼決定了視訊資料的圖片的第i 瓦片行的高度減1,所以視訊解碼器300可以評估條件陳述式if(row_height_minus1[i]> 0),以決定PPS是否用訊號通知指示視訊資料的圖片的第i 瓦片是否被劃分為兩個或更多個磚塊的語法元素brick_split_flag[i]。若視訊解碼器300在評估條件陳述式if(row_height_minus1[i]> 0))時決定條件陳述式評估為真(亦即,row_height_minus1的值大於0),則視訊解碼器300可以在PPS中對指示視訊資料的圖片的第i 瓦片是否被劃分為兩個或更多個磚塊的語法元素brick_split_flag[i]進行解碼。然而,若視訊解碼器300在評估條件陳述式if(row_height_minus1[i]> 0)時決定條件陳述式評估為假(即row_height_minus1[i]的值不大於0),則視訊解碼器300可以替代地推斷視訊資料的圖片的第i 瓦片未被劃分為兩個或更多個磚塊。
類似地,當視訊解碼器300對條件陳述式if(row_height_minus1[i]> 1)進行解碼時,視訊解碼器300可以評估條件陳述式if(row_height_minus1[i]> 1),以決定PPS是否用訊號通知指示一或多個水平磚塊邊界是否跨越被劃分為兩個或更多個磚塊的視訊資料的圖片的第i 瓦片均勻地分佈的語法元素uniform_brick_spacing_flag[ i ]。若視訊解碼器300在評估條件陳述式if(row_height_minus1[i]> 1)時決定條件陳述式評估為真(亦即,row_height_minus1[i]的值大於1),則視訊解碼器300可以在PPS中對指示一或多個水平磚塊邊界是否跨越被劃分為兩個或更多個磚塊的視訊資料的圖片的第i 瓦片均勻地分佈的語法元素uniform_brick_spacing_flag[ i ]進行解碼。然而,若視訊解碼器300在評估條件陳述式if(row_height_minus1[i]> 1)時決定條件陳述式評估為假(亦即,row_height_minus1[i]的值不大於1),則視訊解碼器300可以替代地推斷一或多個水平磚塊邊界跨越被劃分為兩個或更多個磚塊的視訊資料的圖片的第i 瓦片均勻地分佈。
如前述,在VVC草案6中,PPS中的語法元素brick_split_flag[i]和uniform_brick_spacing[i]可以以參數RowHeight[i]為條件。然而,對於brick_split_flag[i]和uniform_brick_spacing[i],參數RowHeight[i]的索引應是RowHeight [i%(num_tile_columns_minus1 + 1)],而不是RowHeight[i],因為RowHeight的索引的值在範0到num_tile_rows_minus1的範圍中(包括0和num_tile_rows_minus1)。
根據本案內容的各態樣,可以在語法中用新的參數TileHeight[i]替換參數RowHeight[i],其中在VCC草案6版本14的子條款6.5.1中將TileHeight[i]推導為RowHeight [i%(num_tile_columns_minus1 +1) ]。因此,PPS中的語法元素brick_split_flag[i]和uniform_brick_spacing[i]可以以參數TileHeight[i]而不是RowHeight[i]為條件。
下文在表5中描述了對VVC草案6版本14的語法更改,其中<DELETE></DELETE>之間的內容已從語法中刪除,而<ADD></ADD>之間的內容已添加至語法。
VVC草案6版本14中的第6.5.1節: 對於範圍從0到num_tile_columns_minus1(包括0和num_tile_columns_minus1)的i ,推導列表colWidth[i],其指定第i 瓦片列的寬度(以CTB為單位),並且當unique_tile_spacing_flag等於1時,按如下推斷num_tile_columns_minus1的值: if( uniform_tile_spacing_flag ) {      remainingWidthInCtbsY = PicWidthInCtbsY      i = 0      while( remainingWidthInCtbsY > ( tile_cols_width_minus1 + 1 ) ) {          colWidth[ i++ ] = tile_cols_width_minus1 + 1          remainingWidthInCtbsY  –=  ( tile_cols_width_minus1 + 1 )      }      colWidth[ i ] = remainingWidthInCtbsY      num_tile_columns_minus1 = i } else {      colWidth[ num_tile_columns_minus1 ] = PicWidthInCtbsY     (6–1)      for( i = 0; i < num_tile_columns_minus1; i++ ) {          colWidth[ i ] = tile_column_width_minus1[ i ] + 1          colWidth[ num_tile_columns_minus1 ]  –=  colWidth[ i ]      } } 對於範圍從0到num_tile_rows_minus1(包括0和num_tile_rows_minus1)的j ,推導列表RowHeight[ j ],其指定第j 瓦片行的高度(以CTB為單位),並且當uniform_tile_spacing_flag等於1時,按如下推斷num_tile_rows_minus1的值: if( uniform_tile_spacing_flag ) {      remainingHeightInCtbsY = PicHeightInCtbsY      i = 0      while( remainingHeightInCtbsY > ( tile_rows_height_minus1 + 1 ) ) {          RowHeight[ i++ ] = tile_rows_height_minus1 + 1          remainingHeightInCtbsY  –=  ( tile_rows_height_minus1 + 1 )      }      RowHeight[ i ] = remainingHeightInCtbsY      num_tile_rows_minus1 = i } else {      RowHeight[ num_tile_rows_minus1 ] = PicHeightInCtbsY     (6–2)      for( j = 0; j < num_tile_rows_minus1; j++ ) {          RowHeight[ j ] = tile_row_height_minus1[ j ] + 1          RowHeight[ num_tile_rows_minus1 ]  –=  RowHeight[ j ]      } } <ADD>對於範圍從0到NumTilesInPic – 1(包括0和NumTilesInPic – 1)的k,按如下推導列表TileHeight [ k ],其指定第k瓦片的高度(以CTB為單位): for( k = 0; k < NumTilesInPic; k++ ) { TileHeight[ k ] =  RowHeight[ k % (num_tile_columns_minus1 + 1) ]              }</ADD>   VVC草案6版本14中的第7.3.2.4節:
pic_parameter_set_rbsp( ) { 描述符
  …  
     single_tile_in_pic_flag u(1)
     if( !single_tile_in_pic_flag ) {  
         uniform_tile_spacing_flag u(1)
         if( uniform_tile_spacing_flag ) {  
              tile_cols_width_minus1 ue(v)
              tile_rows_height_minus1 ue(v)
         } else {  
              num_tile_columns_minus1 ue(v)
              num_tile_rows_minus1 ue(v)
              for( i = 0; i < num_tile_columns_minus1; i++ )  
                  tile_column_width_minus1[ i ] ue(v)
              for( i = 0; i < num_tile_rows_minus1; i++ )  
                  tile_row_height_minus1[ i ] ue(v)
         }  
         brick_splitting_present_flag u(1)
         if( uniform_tile_spacing_flag  &&  brick_splitting_present_flag )  
              num_tiles_in_pic_minus1 ue(v)
         for( i = 0; brick_splitting_present_flag  &&  i  <=  num_tiles_in_pic_minus + 1; i++ ) {  
              if( RowHeight[ i ] > 1 )  
                  brick_split_flag[ i ] u(1)
              if( brick_split_flag[ i ] ) {  
                  if( RowHeight[ i ] > 2 )  
                       uniform_brick_spacing_flag[ i ] u(1)
                  if( uniform_brick_spacing_flag[ i ] )  
                       brick_height_minus1[ i ] ue(v)
                  else {  
                       num_brick_rows_minus2[ i ] ue(v)
                       for( j = 0; j  <=  num_brick_rows_minus2[ i ]; j++ )  
                           brick_row_height_minus1[ i ][ j ] ue(v)
                  }  
              }  
         }  
VVC草案6版本14中的第7.4.3.4節: single_tile_in_pic_flag等於1指定引用PSS的每個圖片中僅存在一個瓦片。single_tile_in_pic_flag等於0指定引用PSS的每個圖片中存在一個以上的瓦片。 注意–在瓦片內沒有進一步的磚塊拆分的情況下,整個瓦片被稱為磚塊。當圖片僅包含單個瓦片而沒有進一步的磚塊拆分時,其被稱為單個磚塊。 位元串流一致性的要求是,對於CVS內的經解碼的圖片所引用的所有PPS,single_tile_in_pic_flag的值應相同。 uniform_tile_spacing_flag等於1指定瓦片列邊界和同樣的瓦片行邊界跨越圖片均勻地分佈並且使用語法元素tile_cols_width_minus1和tile_rows_height_minus1用訊號進行通知。uniform_tile_spacing_flag等於0指定瓦片列邊界和同樣的瓦片行邊界跨越圖片可以均勻地分佈或者可以不是均勻地分佈並且使用語法元素num_tile_columns_minus1和num_tile_rows_minus1以及語法元素對tile_column_width_minus1[i]和tile_row_height_minus1[i]的列表用訊號進行通知。當不存在時,推斷uniform_tile_spacing_flag的值等於1。 tile_cols_width_minus1加1指定當uniform_tile_spacing_flag等於1時,瓦片列的寬度不包括圖片的最右瓦片列(以CTB為單位)。tile_cols_width_minus1的值應在0到PicWidthInCtbsY-1的範圍中(包括0和PicWidthInCtbsY-1)。當不存在時,推斷tile_cols_width_minus1的值等於PicWidthInCtbsY-1。 tile_rows_height_minus1加1指定當uniform_tile_spacing_flag等於1時,瓦片行的高度不包括圖片的底部瓦片行(以CTB為單位)。tile_rows_height_minus1的值應在0到PicHeightInCtbsY-1的範圍中(包括0和PicHeightInCtbsY-1)。當不存在時,推斷tile_rows_height_minus1的值等於PicHeightInCtbsY-1。 num_tile_columns_minus1加1指定當uniform_tile_spacing_flag等於0時,對圖片進行分割的瓦片列數。num_tile_columns_minus1的值應在0到PicWidthInCtbsY-1的範圍中(包括0和PicWidthInCtbsY-1)。如果single_tile_in_pic_flag等於1,則推斷num_tile_columns_minus1的值等於0。否則,當uniform_tile_spacing_flag等於1時,則按條款6.5.1中的規定推斷num_tile_columns_minus1的值。 num_tile_rows_minus1加1指定當uniform_tile_spacing_flag等於0時,對圖片進行分割的瓦片行數。num_tile_rows_minus1的值應在0到PicHeightInCtbsY - 1的範圍中(包括0和PicHeightInCtbsY - 1)。如果single_tile_in_pic_flag等於1,則推斷num_tile_rows_minus1的值等於0。否則,當uniform_tile_spacing_flag等於1時,則按條款6.5.1的規定推斷num_tile_rows_minus1的值。 變數NumTilesInPic被設置為等於(num_tile_columns_minus1 + 1)*(num_tile_rows_minus1 + 1)。 當single_tile_in_pic_flag等於0時,NumTilesInPic應大於1。 tile_column_width_minus1[i]加1指定第i 瓦片列的寬度(以CTB為單位)。 tile_row_height_minus1[i]加1指定第i 瓦片行的高度(以CTB為單位)。 brick_splitting_present_flag等於1指定引用PPS的圖片的一或多個瓦片可以被劃分為兩個或更多個磚塊。brick_splitting_present_flag等於0指定引用PPS的圖片的瓦片均未被劃分為兩個或更多個磚塊。 num_tiles_in_pic_minus1加1指定引用PPS的每個圖片中的瓦片的數量。num_tiles_in_pic_minus1的值應等於NumTilesInPic-1。當不存在時,推斷num_tiles_in_pic_minus1的值等於NumTilesInPic-1。 brick_split_flag[i]等於1指定第i 瓦片被劃分為兩個或更多個磚塊。 brick_split_flag[i]等於0指定第i 瓦片未被劃分為兩個或更多個磚塊。當不存在時,推斷brick_split_flag[i]的值等於0。 uniform_brick_spacing_flag[ i ]等於1指定水平磚塊邊界跨越第i 瓦片均勻地分佈並且使用語法元素brick_height_minus1[ i ]用訊號進行通知。uniform_brick_spacing_flag[ i ]等於0指定水平磚塊邊界跨越第i 瓦片可以均勻地分佈或者可以不是均勻地分佈並且使用語法元素num_brick_rows_minus2[ i ]和語法元素brick_row_height_minus1[ i ][ j ]的列表用訊號進行通知。當不存在時,推斷uniform_brick_spacing_flag[ i ]的值等於1。 brick_height_minus1[i]加1指定當uniform_brick_spacing_flag[i]等於1時,磚塊行的高度不包括第i 瓦片中的底部磚塊(以CTB為單位)。當存在時,brick_height_minus1的值應在0到RowHeight[i]-2的範圍中(包括0和RowHeight[i]-2)。當不存在時,推斷brick_height_minus1[i]的值等於RowHeight[i]-1。 num_brick_rows_minus2[i]加2指定當uniform_brick_spacing_flag[i]等於0時,對第i 瓦片進行分割的磚塊的數量。當存在時,num_brick_rows_minus2[i]的值應在0到RowHeight[i]-2的範圍中(包括0和RowHeight[i]-2)。如果brick_split_flag [i]等於0,則推斷num_brick_rows_minus2[i]的值等於-1。否則,當uniform_brick_spacing_flag[i]等於1時,將按6.5.1中的規定推斷num_brick_rows_minus2[i]的值。 brick_row_height_minus1[i][j]加1指定當uniform_tile_spacing_flag等於0時,第i 瓦片中的第j 磚塊的高度(以CTB為單位)。
表5
本案內容的各態樣涉及解決與子圖片提取有關的問題。視訊資料的圖片可以具有一或多個子圖片,其中每個子圖片可以包含一或多個共同覆蓋圖片的矩形區域的切片,並且視訊解碼裝置可以從視訊資料的圖片中提取一或多個子圖片。關於子圖片提取的此類問題包括如何從視訊資料的原始圖片中提取子圖片,如何設計子圖片ID以標識提取了哪些子圖片,以及如何在不同的參數集(例如,PPS和SPS)和切片標頭之間進行互動。
圖3是示出根據本案內容的各態樣的實例子圖片佈局的概念圖。如圖5所示,視訊資料的實例圖片150可以包括4個子圖片:子圖片0、子圖片1、子圖片2和子圖片3,以及6個切片:切片0、切片1、切片2、切片3、切片4、切片5,其中每個子圖片包括至少一個切片。子圖片0包括切片0和切片1,子圖片1包括切片2和切片3,子圖片2包括切片4,並且子圖片3包括切片5。
為了解決與子圖片提取有關的問題,本案內容的各態樣提出以下技術: 1)添加PPS標誌num_subpicture_in_pic_minus1以指定從原始圖片提取的子圖片的數量。具體地,視訊資料的圖片所引用的PPS可以包括語法元素num_subpicture_in_pic_minus1,其指示從圖片提取的子圖片的數量。語法元素num_subpicture_in_pic_minus1的值可以是從圖片中提取的子圖片的數量減去一,並且語法元素num_subpicture_in_pic_minus1的值可以在0到圖片中的子圖片的數量減去1的範圍中(包括0和圖片中的子圖片的數量減去1),以指示從圖片中提取的子圖片的數量。 2)添加PPS語法元素subpicture_id[i]以指定所提取的子圖片的子圖片ID。具體地,視訊資料的圖片所引用的PPS可以包括語法元素subpicture_id[i],其指示圖片之每一者子圖片的子圖片ID。i的最大值可以是語法元素num_subpicture_in_pic_minus1的值。此外,subpicture_id[i]的值可以在0到圖片中的子圖片的數量減去1的範圍中(包括0和圖片中的子圖片的數量減去1)。 3)添加切片標頭語法元素slice_subpicture_id,以指定使用中的切片的subpicture_id的值。可能要求語法元素slice_subpicture_id的值是subpicture_id [i]的值之一。
適用於視訊資料的圖片的SPS可以包括表示圖片中的子圖片的索引的語法元素subpic_grid_idx[i][j],並且SPS語法可以根據語法元素subpic_grid_idx[i][j]推導出每個網格的子圖片索引。在圖3中圖示的實例中,subpic_grid_idx[i][j]的值可以在0到3的範圍中(包括0和3)。
在圖3的實例中,若要從圖片150提取子圖片1和子圖片3,則用訊號通知在應用於圖片150的PPS中提議的語法元素num_subpicture_in_pic_minus1和subpicture_id[i]以及切片標頭中的語法元素slice_subpicture_id,如下文在表6中並且亦在圖6中示出的:
假設提取了子圖片1和3
SPS subpic_grid_idx[ NumSubPicGridRows ][ NumSubPicGridCols ] = {0, 1, 2, 3}
PPS num_subpicture_in_pic_minus1 = 1subpicture_id[0] = 1subpicture_id[1] = 3
Slice 在切片2和3中,slice_subpicture_id = 1 在切片5中,slice_subpicture_id = 3
表6
圖4圖示從圖3的實例圖片150提取子圖片。如圖4所示,從圖片150提取子圖片1和子圖片3。為了指定從圖片150提取子圖片1和子圖片3,應用於圖片150的PPS可以包括具有為1的值的語法元素num_subpicture_in_pic_minus1,以指示從圖片150提取了兩個子圖片。應用於圖片150的PPS亦可以包括指示從圖片150提取的兩個子圖片的兩個subpicture_id[i]語法元素。具體地,PPS可以包括具有為1的值的語法元素subpicture_id[0],以指示從圖片150提取的第一子圖片具有為1的子圖片ID,並且可以包括具有為3的值的語法元素subpicture_id[1],以指示從圖片150提取的第二子圖片具有為3的子圖片ID。
如圖4所示,子圖片1包括切片2和切片3,並且子圖片3包括切片5。因此,用於切片2、切片3和切片5中的每一個的切片標頭可以包括指示該切片所屬的子圖片的語法元素slice_subpicture_id。因此,用於切片2的切片標頭以及用於切片3的切片標頭可以各自包括具有為1的值的語法元素slice_subpicture_id,以指示切片2和切片3屬於子圖片1。類似地,用於切片5的切片標頭可以包括具有為3的值的語法元素slice_subpicture_id,以指示切片5屬於子圖片3。
下文在表7中描述了對VVC草案6版本14的語法更改,其中<DELETE></DELETE>之間的內容已從語法中刪除,而<ADD></ADD>之間的內容已添加至語法。
VVC草案6版本14中的第7.3.2.3節:
seq_parameter_set_rbsp( ) { 描述符
  …  
     subpics_present_flag u(1)
     if( subpics_present_flag ) {  
         max_subpics_minus1 u(8)
         subpic_grid_col_width_minus1 u(v)
         subpic_grid_row_height_minus1 u(v)
         for( i = 0; i < NumSubPicGridRows; i++ )  
              for( j = 0; j < NumSubPicGridCols; j++ )  
                  subpic_grid_idx[ i ][ j ] u(v)
  …  
VVC草案6版本14中的第7.4.3.3節: subpics_present_flag等於1指示在SPS RBSP語法中當前存在子圖片參數。subpics_present_flag等於0指示在SPS RBSP語法中當前不存在子圖片參數。 注意2-當位元串流是子位元串流提取程序的結果並且僅包含子位元串流提取程序的輸入位元串流的子圖片的子集時,可能需要在SPS的RBSP中將subpics_present_flag的值設置為等於1。 max_subpics_minus1加1指定CVS中可能存在的最大子圖片數量。 max_subpics_minus1應在0到254的範圍中。預留255的值以供ITU-T | ISO/IEC將來使用。 subpic_grid_col_width_minus1加1指定子圖片辨識符網格的每個元素的寬度(以4個取樣為單位)。語法元素的長度為Ceil(Log2(pic_width_max_in_luma_samples / 4))位元。 按如下推導變數NumSubPicGridCols: NumSubPicGridCols =(pic_width_max_in_luma_samples + subpic_grid_col_width_minus1 * 4 + 3)/(subpic_grid_col_width_minus1 * 4 + 4) subpic_grid_row_height_minus1加1指定子圖片辨識符網格的每個元素的高度(以4個取樣為單位)。語法元素的長度為Ceil(Log2(pic_height_max_in_luma_samples / 4))位元。 按如下推導變數NumSubPicGridRows: NumSubPicGridRows =(pic_height_max_in_luma_samples + subpic_grid_row_height_minus1 * 4 + 3)/(subpic_grid_row_height_minus1 * 4 + 4) subpic_grid_idx[i][j]指定網格位置(i,j)的子圖片索引。語法元素的長度為Ceil(Log2(max_subpics_minus1 + 1))位元。 按如下推導變數SubPicTop[subpic_grid_idx[i][j]]、SubPicLeft[subpic_grid_idx[i][j]]、SubPicWidth[subpic_grid_idx[i][j]]、 SubPicHeight[subpic_grid_idx[i][j]]和NumSubPics: NumSubPics = 0 for( i = 0; i. < NumSubPicGridRows; i++ ) {      for( j = 0; j < NumSubPicGridCols; j++ ) {          if ( i = = 0)               SubPicTop[ subpic_grid_idx[ i ][ j ] ] = 0          else if( subpic_grid_idx[ i ][ j ]  !=  subpic_grid_idx[ i – 1 ][ j ] ) {               SubPicTop[ subpic_grid_idx[ i ][ j ] ] = i               SubPicHeight[ subpic_grid_idx[ i – 1][ j ] ] = i – SubPicTop[ subpic_grid_idx[ i – 1 ][ j ] ]          }          if ( j = = 0)               SubPicLeft[ subpic_grid_idx[ i ][ j ] ] = 0 (7–7)          else if (subpic_grid_idx[ i ][ j ] != subpic_grid_idx[ i ][ j – 1 ] ) {               SubPicLeft[ subpic_grid_idx[ i ][ j ] ] = j               SubPicWidth[ subpic_grid_idx[ i ][ j ] ] = j – SubPicLeft[ subpic_grid_idx[ i ][ j – 1 ] ]          }          if ( i = = NumSubPicGridRows – 1)               SubPicHeight[ subpic_grid_idx[ i ][ j ] ] = i – SubPicTop[ subpic_grid_idx[ i – 1 ][ j ] ] + 1         if (j = = NumSubPicGridRows – 1)          if(j= = NumSubPicGridRows – 1)     SubPicWidth[ subpic_grid_idx[ i ][ j ] ] = j – SubPicLeft[ subpic_grid_idx[ i ][ j – 1 ] ] + 1          if( subpic_grid_idx[ i ][ j ] > NumSubPics)               NumSubPics = subpic_grid_idx[ i ][ j ]      } }   VVC草案6版本14中的第7.3.2.4節:
pic_parameter_set_rbsp( ) { 描述符
 …  
<ADD> num_subpicture_in_pic_minus1 ue(v)
   for( i = 0; i <= num_subpicture_in_pic_minus1; i++ ) {  
    subpicture_id[ i ] ue(v)
   }</ADD>  
 …  
VVC草案6版本14中的第7.4.3.4節: <ADD> num_subpicture_in_pic_minus1加1指定引用PPS的每個圖片中的子圖片的數量。num_subpicture_in_pic_minus1的值應在0到NumSubPics的範圍中(包括0和NumSubPics)。 </ADD> <ADD> subpicture_id[i]指定引用PPS的圖片中的第i子圖片的子圖片ID。 subpicture_id [i]的值應在0到NumSubPics的範圍中(包括0和NumSubPics)。</ADD> VVC草案6版本14中的第7.3.6.1節:
slice_header( ) { 描述符
 …  
     <ADD>if( subpics_present_flag  &&  NumSubPics > 0 )</ADD>  
          <ADD>slice_subpicture_id</ADD> u(v)
 …  
VVC草案6版本14中的第7.4.7.1節: <ADD>slice_subpicture_id指定正在使用的切片的subpicture_id的值。slice_subpicture_id的值應在0到NumSubPics的範圍中(包括0和NumSubPics)。</ADD>
表7
如表7所示,視訊解碼裝置(例如,視訊轉碼器200或視訊解碼器300)可以在PPS中對指示PPS所適用於的視訊資料的圖片中的子圖片的數量的語法元素num_subpicture_in_pic_minus1進行解碼。亦即,視訊轉碼器200可以在PPS中對語法元素num_subpicture_in_pic_minus1進行編碼,並且視訊解碼器300可以對PPS中的語法元素num_subpicture_in_pic_minus1進行解碼。
視訊解碼裝置亦可以在PPS中對指示視訊資料的圖片之每一者子圖片的子圖片ID的語法元素subpicture_id[i]進行解碼。亦即,視訊轉碼器可以對指示視訊資料的圖片之每一者子圖片的子圖片ID的語法元素subpicture_id[i]進行編碼,並且視訊解碼器300可以對PPS中的語法元素subpicture_id[i]進行解碼。
因此,視訊解碼裝置可以根據PPS中的語法元素num_subpicture_in_pic_minus和語法元素subpicture_id[1]對視訊資料的圖片進行解碼。視訊轉碼器200可以根據PPS中的語法元素num_subpicture_in_pic_minus和語法元素subpicture_id[1]對視訊資料的圖片進行編碼,並且視訊解碼器300可以根據PPS中的語法元素num_subpicture_in_pic_minus和語法元素subpicture_id[1]對視訊資料的圖片進行解碼。
如表7中可見,視訊解碼裝置亦可以在視訊資料的圖片的切片的切片標頭中對指示視訊資料的圖片的切片的子圖片ID的語法元素slice_subpicture_id進行解碼。亦即,視訊轉碼器200可以在切片標頭中對語法元素slice_subpicture_id進行編碼,而視訊解碼器300可以對切片標頭中的語法元素slice_subpicture_id進行解碼。
圖5是示出可以執行本案內容的技術的實例視訊轉碼器200的方塊圖。圖5是出於解釋的目的而提供的,並且不應當被認為對在本案內容中泛泛地舉例說明和描述的技術進行限制。出於解釋的目的,本案內容根據VVC(正在開發的ITU-T H.266)和HEVC(ITU-T H.265)的技術描述了視訊轉碼器200。然而,本案內容的技術可以由被配置為其他視訊解碼標準的視訊編碼設備來執行。
在圖5的實例中,視訊轉碼器200包括視訊資料記憶體230、模式選擇單元202、殘差產生單元204、變換處理單元206、量化單元208、逆量化單元210、逆變換處理單元212、重構單元214、濾波器單元216、解碼圖片緩衝器(DPB)218和熵編碼單元220。視訊資料記憶體230、模式選擇單元202、殘差產生單元204、變換處理單元206、量化單元208、逆量化單元210、逆變換處理單元212、重構單元214、濾波器單元216、DPB 218和熵編碼單元220中的任何一者或全部可以在一或多個處理器中或者在處理電路中實現。例如,視訊轉碼器200的單元可以被實現為一或多個電路或邏輯部件,作為硬體電路的一部分,或者作為處理器、ASIC或FPGA的一部分。此外,視訊轉碼器200可以包括額外或替代的處理器或處理電路以執行這些和其他功能。
視訊資料記憶體230可以儲存要由視訊轉碼器200的部件來編碼的視訊資料。視訊轉碼器200可以從例如視訊源104(圖1)接收被儲存在視訊資料記憶體230中的視訊資料。DPB 218可以充當參考圖片記憶體,其儲存參考視訊資料以在由視訊轉碼器200對後續視訊資料進行預測時使用。視訊資料記憶體230和DPB 218可以由各種記憶體設備中的任何一種形成,諸如動態隨機存取記憶體(DRAM)(包括同步DRAM(SDRAM))、磁阻RAM(MRAM)、電阻性RAM(RRAM)、或其他類型的記憶體設備。視訊資料記憶體230和DPB 218可以由相同的記憶體設備或單獨的記憶體設備來提供。在各個實例中,視訊資料記憶體230可以與視訊轉碼器200的其他部件在晶片上(如圖所示),或者相對於那些部件在晶片外。
在本案內容中,對視訊資料記憶體230的引用不應當被解釋為限於在視訊轉碼器200內部的記憶體(除非如此具體地描述),或者不限於在視訊轉碼器200外部的記憶體(除非如此具體地描述)。確切而言,對視訊資料記憶體230的引用應當被理解為儲存視訊轉碼器200接收以用於編碼的視訊資料(例如,用於要被編碼的當前塊的視訊資料)的參考記憶體。圖1的記憶體106亦可以提供對來自視訊轉碼器200的各個單元的輸出的臨時儲存。
圖示圖5的各個單元以説明理解由視訊轉碼器200執行的操作。這些單元可以被實現為固定功能電路、可程式設計電路、或其組合。固定功能電路代表提供特定功能並且在可以執行的操作上預先設置的電路。可程式設計電路代表可以被程式設計以執行各種任務並且在可以執行的操作中提供靈活功能的電路。例如,可程式設計電路可以執行軟體或韌體,軟體或韌體使得可程式設計電路以軟體或韌體的指令所定義的方式進行操作。固定功能電路可以執行軟體指令(例如,以接收參數或輸出參數),但是固定功能電路執行的操作類型通常是不可變的。在一些實例中,這些單元中的一或多個單元可以是不同的電路塊(固定功能或可程式設計),並且在一些實例中,這些單元中的一或多個單元可以是積體電路。
視訊轉碼器200可以包括由可程式設計電路形成的算數邏輯單位(ALU)、基本功能單元(EFU)、數位電路、類比電路及/或可程式設計核心。在其中使用由可程式設計電路執行的軟體來執行視訊轉碼器200的操作的實例中,記憶體106(圖1)可以儲存視訊轉碼器200接收並且執行的軟體的指令(例如,目標代碼),或者視訊轉碼器200內的另一記憶體(未圖示)可以儲存此類指令。
視訊資料記憶體230被配置為儲存所接收的視訊資料。視訊轉碼器200可以從視訊資料記憶體230取回視訊資料的圖片,並且將視訊資料提供給殘差產生單元204和模式選擇單元202。視訊資料記憶體230中的視訊資料可以是要被編碼的原始視訊資料。
模式選擇單元202包括運動估計單元222、運動補償單元224和訊框內預測單元226。模式選擇單元202可以包括額外功能單元,其根據其他預測模式來執行視訊預測。作為實例,模式選擇單元202可以包括調色板單元、塊內複製單元(其可以是運動估計單元222及/或運動補償單元224的一部分),仿射單元、線性模型(LM)單元等。
模式選擇單元202通常協調多個編碼通路(pass),以測試編碼參數的組合以及針對此類組合所得到的率失真值。編碼參數可以包括將CTU分割為CU、用於CU的預測模式、用於CU的殘差資料的變換類型、用於CU的殘差資料的量化參數等。模式選擇單元202可以最終選擇編碼參數的具有比其他測試的組合更佳的率失真值的組合。
視訊轉碼器200可以將從視訊資料記憶體230取回的圖片分割為一系列CTU,並且將一或多個CTU封裝在切片內。模式選擇單元202可以根據樹結構(諸如,上述HEVC的QTBT結構或四叉樹結構)來分割圖片的CTU。如前述,視訊轉碼器200可以經由根據樹結構來分割CTU,從而形成一或多個CU。此類CU通常亦可以被稱為「視訊塊」或「塊」。
通常,模式選擇單元202亦控制其部件(例如,運動估計單元222、運動補償單元224和訊框內預測單元226)以產生用於當前塊(例如,當前CU,或者在HEVC中為PU和TU的重疊部分)的預測塊。為了對當前塊進行訊框間預測,運動估計單元222可以執行運動搜尋以辨識在一或多個參考圖片(例如,被儲存在DPB 218中的一或多個先前解碼的圖片)中的一或多個緊密匹配的參考塊。具體地,運動估計單元222可以例如根據絕對差之和(SAD)、平方差之和(SSD)、平均絕對差(MAD)、均方差(MSD)等,來計算表示潛在參考塊將與當前塊的類似程度的值。運動估計單元222通常可以使用在當前塊與所考慮的參考塊之間的逐取樣差來執行這些計算。運動估計單元222可以辨識具有從這些計算得到的最低值的參考塊,其指示與當前塊最緊密匹配的參考塊。
運動估計單元222可以形成一或多個運動向量(MV),該運動向量限定相對於當前圖片中的當前塊的位置而言參考塊在參考圖片中的的位置。隨後,運動估計單元222可以將運動向量提供給運動補償單元224。例如,對於單向訊框間預測,運動估計單元222可以提供單個運動向量,而對於雙向訊框間預測,運動估計單元222可以提供兩個運動向量。隨後,運動補償單元224可以使用運動向量來產生預測塊。例如,運動補償單元224可以使用運動向量來取回參考塊的資料。作為另一實例,若運動向量具有分數取樣精度,則運動補償單元224可以根據一或多個內插濾波器來對用於預測塊的值進行內插。此外,對於雙向訊框間預測,運動補償單元224可以例如經由逐取樣平均或加權平均來取回用於由相應的運動向量標識的兩個參考塊的資料,並且將所取回的資料進行組合。
作為另一實例,對於訊框內預測或訊框內預測解碼,訊框內預測單元226可以根據與當前塊相鄰的取樣來產生預測塊。例如,對於方向性模式,訊框內預測單元226通常可以在數學上將相鄰取樣的值進行組合,並且在當前塊上沿著所定義的方向來填充這些計算出的值以產生預測塊。作為另一實例,對於DC模式,訊框內預測單元226可以計算與當前塊的相鄰取樣的平均值,並且產生預測塊以包括針對預測塊的每個取樣的該得到的平均值。
模式選擇單元202將預測塊提供給殘差產生單元204。殘差產生單元204從視訊資料記憶體230接收當前塊的原始的未經編碼的版本,並且從模式選擇單元202接收預測塊。殘差產生單元204計算在當前塊與預測塊之間的逐取樣差。所得到的逐取樣差定義了用於當前塊的殘差塊。在一些實例中,殘差產生單元204亦可以決定在殘差塊中的取樣值之間的差,以使用殘餘差分脈衝解碼調制(RDPCM)來產生殘差塊。在一些實例中,可以使用執行二進位減法的一或多個減法器電路來形成殘差產生單元204。
在其中模式選擇單元202將CU分割為PU的實例中,每個PU可以與亮度預測單元和對應的色度預測單元相關聯。視訊轉碼器200和視訊解碼器300可以支援具有各種大小的PU。如上所指出的,CU的大小可以代表CU的亮度解碼塊的大小,而PU的大小可以代表PU的亮度預測單元的大小。假定特定CU的大小為2Nx2N,則視訊轉碼器200可以支援用於訊框內預測的2Nx2N或NxN的PU大小、以及用於訊框間預測的2Nx2N、2NxN、Nx2N、NxN或類似的對稱的PU大小。視訊轉碼器200和視訊解碼器300亦可以支援針對用於訊框間預測的2NxnU、2NxnD、nLx2N和nRx2N的PU大小的非對稱分割。
在其中模式選擇單元202不將CU進一步分割為PU的實例中,每個CU可以與亮度解碼塊和對應的色度解碼塊相關聯。如前述,CU的大小可以代表CU的亮度解碼塊的大小。視訊轉碼器200和視訊解碼器300可以支援2N×2N、2N×N或N×2N的CU大小。
對於其他視訊解碼技術(諸如塊內複製模式解碼、仿射模式解碼和線性模型(LM)模式解碼),作為一些實例,模式選擇單元202經由與解碼技術相關聯的相應單元來產生用於正被編碼的當前塊的預測塊。在一些實例中(諸如調色板模式解碼),模式選擇單元202可以不產生預測塊,而是替代產生指示基於所選擇的調色板來重構塊的方式的語法元素。在此類模式下,模式選擇單元202可以將這些語法元素提供給熵編碼單元220以進行編碼。
如前述,殘差產生單元204接收用於當前塊和對應的預測塊的視訊資料。隨後,殘差產生單元204為當前塊產生殘差塊。為了產生殘差塊,殘差產生單元204計算在預測塊與當前塊之間的逐取樣差。
變換處理單元206將一或多個變換應用於殘差塊,以產生變換係數的塊(本文中被稱為「變換係數塊」)。變換處理單元206可以將各種變換應用於殘差塊,以形成變換係數塊。例如,變換處理單元206可以將離散餘弦變換(DCT)、方向變換、Karhunen-Loeve變換(KLT)、或概念上類似的變換應用於殘差塊。在一些實例中,變換處理單元206可以對殘差塊執行多種變換,例如,初級變換和二次變換(諸如旋轉變換)。在一些實例中,變換處理單元206不對殘差塊應用變換。
量化單元208可以對變換係數塊中的變換係數進行量化,以產生經量化的變換係數塊。量化單元208可以根據與當前塊相關聯的量化參數(QP)值來對變換係數塊的變換係數進行量化。視訊轉碼器200(例如,經由模式選擇單元202)可以經由調整與CU相關聯的QP值來調整被應用於與當前塊相關聯的變換係數塊的量化程度。量化可能導致資訊丟失,並且因此,經量化的變換係數可以具有與變換處理單元206所產生的原始變換係數相比較低的精度。
逆量化單元210和逆變換處理單元212可以將逆量化和逆變換分別應用於經量化的變換係數塊,以從變換係數塊來重構殘差塊。重構單元214可以基於經重構的殘差塊和由模式選擇單元202產生的預測塊來產生與當前塊相對應的重構塊(儘管潛在地具有某種程度的失真)。例如,重構單元214可以將經重構的殘差塊的取樣與來自由模式選擇單元202所產生的預測塊的對應取樣相加,以產生經重構的塊。
濾波器單元216可以對經重構的塊執行一或多個濾波器操作。例如,濾波器單元216可以執行去塊化操作以減少沿著CU的邊緣的塊狀偽影。在一些實例中,可以跳過濾波器單元216的操作。
視訊轉碼器200將經重構的塊儲存在DPB 218中。例如,在其中不執行濾波器單元216的操作的實例中,重構單元214可以將經重構的塊儲存到DPB 218中。在其中執行濾波器單元216的操作的實例中,濾波器單元216可以將經濾波的經重構的塊儲存到DPB 218中。運動估計單元222和運動補償單元224可以從DPB 218取回由經重構的(並且潛在地經濾波的)塊形成的參考圖片,以對後續編碼的圖片的塊進行訊框間預測。另外,訊框內預測單元226可以使用在DPB 218中的當前圖片的經重構的塊來對當前圖片中的其他塊進行訊框內預測。
通常,熵編碼單元220可以對從視訊轉碼器200的其他功能部件接收的語法元素進行熵編碼。例如,熵編碼單元220可以對來自量化單元208的經量化的變換係數塊進行熵編碼。作為另一實例,熵編碼單元220可以對來自模式選擇單元202的預測語法元素(例如,用於訊框間預測的運動資訊或用於訊框內預測的訊框內模式資訊)進行熵編碼。熵編碼單元220可以對作為視訊資料的另一實例的語法元素執行一或多個熵編碼操作,以產生經熵編碼的資料。例如,熵編碼單元220可以執行上下文自我調整變長解碼(CAVLC)操作、CABAC操作、可變-可變(V2V)長度解碼操作、基於語法的上下文自我調整二進位算術解碼(SBAC)操作、概率區間分割熵(PIPE)解碼操作、指數哥倫布編碼操作、或對資料的另一種熵編碼操作。在一些實例中,熵編碼單元220可以在其中語法元素未被熵編碼的旁路模式下操作。
在一些實例中,熵編碼單元220可以對封裝用於視訊參數集(VPS)、序列參數集(SPS)和圖片參數集(PPS)的RBSP的NAL單元進行編碼。因此,熵編碼單元220可以執行本文描述的用於減少PPS與SPS之間的解析依賴性的技術,諸如經由在PPS中對指示PPS所適用於的圖片的亮度解碼樹塊大小的語法元素進行編碼。熵編碼單元220可以根據PPS中的語法元素來對PPS所適用於的視訊資料的圖片的塊進行編碼,諸如經由在位元串流中對用於PPS的RBSP進行編碼。
視訊轉碼器200可以輸出位元串流,其包括用於切片或圖片的重構塊所需要的經熵編碼的語法元素、NAL單元等。具體地,熵編碼單元220可以輸出位元串流。
關於塊描述了上述操作。此類描述應當被理解為用於亮度解碼塊及/或色度解碼塊的操作。如前述,在一些實例中,亮度解碼塊和色度解碼塊是CU的亮度分量和色度分量。在一些實例中,亮度解碼塊和色度解碼塊是PU的亮度分量和色度分量。
在一些實例中,不需要針對色度解碼塊重複關於亮度解碼塊執行的操作。作為一個實例,不需要重多工於辨識用於亮度解碼塊的運動向量(MV)和參考圖片的操作來辨識用於色度塊的MV和參考圖片。確切而言,可以對用於亮度解碼塊的MV進行縮放以決定用於色度塊的MV,並且參考圖片可以是相同的。作為另一實例,對於亮度解碼塊和色度解碼塊,訊框內預測程序可以是相同的。
視訊轉碼器200可以表示被配置為對視訊資料進行編碼的設備的實例,該設備包括:被配置為儲存視訊資料的記憶體;及一或多個處理單元,其在電路中實現並且被配置為:在圖片參數集(PPS)中對語法元素進行編碼,該語法元素指示PPS所適用於的視訊資料的圖片的亮度解碼樹塊大小;及根據PPS中的語法元素來對PPS所適用於的視訊資料的圖片進行編碼。
圖6是示出可以執行本案內容的技術的實例視訊解碼器300的方塊圖。圖6是出於解釋的目的而提供的,並且不對在本案內容中泛泛地舉例說明和描述的技術進行限制。出於解釋的目的,本案內容根據VVC(正在開發的ITU-T H.266)和HEVC(ITU-T H.265)的技術描述了視訊解碼器300。然而,本案內容的技術可以由被配置用於其他視訊解碼標準的視訊解碼設備來執行。
在圖6的實例中,視訊解碼器300包括解碼圖片緩衝器(CPB)記憶體320、熵解碼單元302、預測處理單元304、逆量化單元306、逆變換處理單元308、重構單元310、濾波器單元312和解碼圖片緩衝器(DPB)314。CPB記憶體320、熵解碼單元302、預測處理單元304、逆量化單元306、逆變換處理單元308、重構單元310、濾波器單元312和DPB 134中的任何一者或全部可以在一或多個處理器中或者在處理電路中實現。例如,視訊解碼器300的單元可以被實現為一或多個電路或邏輯部件,作為硬體電路的一部分,或者作為處理器、ASIC或FPGA的一部分。此外,視訊解碼器300可以包括額外或替代的處理器或處理電路以執行這些和其他功能。
預測處理單元304包括運動補償單元316和訊框內預測單元318。預測處理單元304可以包括加法單元,以根據其他預測模式來執行預測。作為實例,預測處理單元304可以包括調色板單元、塊內複製單元(其可以形成運動補償單元316的一部分)、仿射單元、線性模型(LM)單元等。在其他實例中,視訊解碼器300可以包括更多、更少或不同的功能部件。
CPB記憶體320可以儲存要由視訊解碼器300的部件解碼的視訊資料,諸如經編碼的視訊位元串流。例如,可以從電腦可讀取媒體110(圖1)獲得被儲存在CPB記憶體320中的視訊資料。CPB記憶體320可以包括儲存來自經編碼的視訊位元串流的經編碼的視訊資料(例如,語法元素)的CPB。此外,CPB記憶體320可以儲存除了經解碼的圖片的語法元素之外的視訊資料,諸如表示來自視訊解碼器300的各個單元的輸出的臨時資料。DPB 314通常儲存經解碼的圖片,視訊解碼器300可以輸出經解碼的圖片,及/或在解碼經編碼的視訊位元串流的後續資料或圖片時使用經解碼的圖片作為參考視訊資料。CPB記憶體320和DPB 314可以由各種記憶體設備中的任何一種形成,諸如DRAM,包括SDRAM、MRAM、RRAM或其他類型的記憶體設備。CPB記憶體320和DPB 314可以由相同的記憶體設備或單獨的記憶體設備來提供。在各個實例中,CPB記憶體320可以與視訊解碼器300的其他部件在晶片上,或者相對於那些部件在晶片外。
補充或替代地,在一些實例中,視訊解碼器300可以從記憶體120(圖1)取回經解碼的視訊資料。亦即,記憶體120可以如上文所論述地利用CPB記憶體320來儲存資料。同樣,當視訊解碼器300的一些或全部功能是用要被視訊解碼器300的處理電路執行的軟體來實現時,記憶體120可以儲存要被視訊解碼器300執行的指令。
圖示圖6中示出的各個單元以説明理解由視訊解碼器300執行的操作。這些單元可以被實現為固定功能電路、可程式設計電路、或其組合。類似於圖5,固定功能電路代表提供特定功能並且在可以執行的操作上預先設置的電路。可程式設計電路代表可以被程式設計以執行各種任務並且在可以執行的操作中提供靈活功能的電路。例如,可程式設計電路可以執行軟體或韌體,軟體或韌體使得可程式設計電路以軟體或韌體的指令所定義的方式進行操作。固定功能電路可以執行軟體指令(例如,以接收參數或輸出參數),但是固定功能電路執行的操作類型通常是不可變的。在一些實例中,這些單元中的一或多個單元可以是不同的電路塊(固定功能或可程式設計),並且在一些實例中,這些單元中的一或多個單元可以是積體電路。
視訊解碼器300可以包括由可程式設計電路形成的ALU、EFU、數位電路、類比電路及/或可程式設計核心。在其中由在可程式設計電路上執行的軟體執行視訊解碼器300的操作的實例中,片上或片外記憶體可以儲存視訊解碼器300接收並且執行的軟體的指令(例如,目標代碼)。
熵解碼單元302可以從CPB接收經編碼的視訊資料,並且對視訊資料進行熵解碼以重現語法元素。預測處理單元304、逆量化單元306、逆變換處理單元308、重構單元310和濾波器單元312可以基於從位元串流中提取的語法元素來產生經解碼的視訊資料。
通常,視訊解碼器300在逐塊的基礎上重構圖片。視訊解碼器300可以單獨地對每個區塊執行重構操作(其中當前正在被重構(亦即,被解碼)的塊可以被稱為「當前塊」)。
熵解碼單元302可以對定義經量化的變換係數塊的經量化的變換係數的語法元素以及諸如量化參數(QP)及/或變換模式指示之類的變換資訊進行熵解碼。逆量化單元306可以使用與經量化的變換係數塊相關聯的QP來決定量化程度,並且同樣地,決定逆量化程度以供逆量化單元306應用。逆量化單元306可以例如執行按位左移操作以對經量化的變換係數進行逆量化。逆量化單元306從而可以形成包括變換係數的變換係數塊。
在一些實例中,熵解碼單元302可以對位元串流中的NAL單元進行解碼,NAL單元封裝用於視訊參數集(VPS)、序列參數集(SPS)和圖片參數集(PPS)的RBSP。熵解碼單元302可以對此類VPS、SPS和PPS進行解碼,以推導用於對視訊資料的塊進行解碼的各種參數的值。
因此,熵解碼單元302可以執行本文描述的用於減少PPS與SPS之間的解析依賴性的技術,諸如經由在PPS中對指示PPS所適用於的圖片的亮度解碼樹塊大小的語法元素進行解碼。因此,視訊解碼器300可以根據PPS中的語法元素來對PPS所適用於的視訊資料的圖片的塊進行解碼。
在逆量化單元306形成變換係數塊之後,逆變換處理單元308可以將一或多個逆變換應用於變換係數塊,以產生與當前塊相關聯的殘差塊。例如,逆變換處理單元308可以將逆DCT、逆整數變換、逆Karhunen-Loeve變換(KLT)、逆旋轉變換、逆方向變換或另一逆變換應用於變換係數塊。
此外,預測處理單元304根據由熵解碼單元302進行熵解碼的預測資訊語法元素來產生預測塊。例如,若預測資訊語法元素指示當前塊是經訊框間預測的,則運動補償單元316可以產生預測塊。在這種情況下,預測資訊語法元素可以指示在DPB 314中的要從其取回參考塊的參考圖片、以及標識相對於當前圖片中的當前塊的位置而言參考圖片中的參考塊的位置的運動向量。運動補償單元316通常可以以與關於運動補償單元224(圖5)所描述的方式基本類似的方式來執行訊框間預測程序。
作為另一實例,若預測資訊語法元素指示當前塊是經訊框內預測的,則訊框內預測單元318可以根據由預測資訊語法元素指示的訊框內預測模式來產生預測塊。再次,訊框內預測單元318通常可以以與關於訊框內預測單元226(圖5)所描述的方式基本上類似的方式來執行訊框內預測程序。訊框內預測單元318可以從DPB 314取回與當前塊的相鄰取樣的資料。
重構單元310可以使用預測塊和殘差塊來重構當前塊。例如,重構單元310可以將殘差塊的取樣與預測塊的對應取樣相加來重構當前塊。
濾波器單元312可以對經重構的塊執行一或多個濾波器操作。例如,濾波器單元312可以執行去塊化操作以減少沿著經重構的塊的邊緣的塊狀偽影。不一定在所有實例中皆執行濾波器單元312的操作。
視訊解碼器300可以將經重構的塊儲存在DPB 314中。例如,在其中不執行濾波器單元312的操作的實例中,重構單元310可以將經重構的塊儲存到DPB 314中。在其中執行濾波器單元312的操作的實例中,濾波器單元312可以將經濾波的重構塊儲存到DPB 314中。如上所論述的,DPB 314可以將參考資訊(諸如用於訊框內預測的當前圖片以及用於後續運動補償的先前解碼的圖片的取樣)提供給預測處理單元304。此外,視訊解碼器300可以從DPB 314輸出經解碼的圖片(例如,經解碼的視訊),以用於在諸如圖1的顯示裝置118之類的顯示裝置上的後續呈現。
以這種方式,視訊解碼器300表示視訊解碼設備的實例,該視訊解碼設備包括:被配置為儲存視訊資料的記憶體;及一或多個處理單元,其在電路中實現並且被配置為:在圖片參數集(PPS)中對語法元素進行解碼,該語法元素指示PPS所適用於的視訊資料的圖片的亮度解碼樹塊大小;及根據PPS中的該語法元素來對PPS所適用於的視訊資料的圖片進行解碼。
圖7是示出根據本案內容的技術的用於對當前塊進行編碼的實例方法的流程圖。當前塊可以包括當前CU。儘管關於視訊轉碼器200(圖1和5)進行了描述,但是應當理解的是,其他設備可以被配置為執行與圖7的方法類似的方法。在該實例中,視訊轉碼器200最初預測當前塊(350)。例如,視訊轉碼器200可以形成用於當前塊的預測塊。隨後,視訊轉碼器200可以計算用於當前塊的殘差塊(352)。為了計算殘差塊,視訊轉碼器200可以計算在原始的未經編碼的塊與用於當前塊的預測塊之間的差。隨後,視訊轉碼器200可以對殘差塊進行變換並且對殘差塊的變換係數進行量化(354)。接下來,視訊轉碼器200可以掃瞄殘差塊的經量化的變換係數(356)。
在掃瞄期間或在掃瞄之後,視訊轉碼器200可以對變換係數進行熵編碼(358)。例如,視訊轉碼器200可以使用CAVLC或CABAC來對變換係數進行編碼。視訊轉碼器200亦可以在圖片參數集(PPS)中對語法元素進行編碼,該語法元素指示PPS所適用於的視訊資料的圖片的亮度解碼樹塊大小,並且可以根據PPS中的語法元素來對PPS所適用於的視訊資料的圖片進行熵編碼。隨後,視訊轉碼器200可以輸出塊的經熵編碼的資料(360)。
圖8是示出根據本案內容的技術的用於對視訊資料的當前塊進行解碼的實例方法的流程圖。當前塊可以包括當前CU。儘管關於視訊解碼器300(圖1和6)進行了描述,但是應當理解的是,其他設備可以被配置為執行與圖8的方法類似的方法。
視訊解碼器300可以接收用於當前塊的經熵編碼的資料(例如,用於與當前塊相對應的殘差塊的變換係數的經熵編碼的預測資訊和經熵編碼的資料)(370)。視訊解碼器300可以對經熵編碼的資料進行熵解碼以決定用於當前塊的預測資訊並且重現殘差塊的變換係數(372)。視訊解碼器300亦可以在圖片參數集(PPS)中對語法元素進行解碼,該語法元素指示PPS所適用於的視訊資料的圖片的亮度解碼樹塊大小,並且可以根據PPS中的語法元素來對PPS所適用於的視訊資料的圖片進行解碼。
視訊解碼器300可以例如使用如由用於當前塊的預測資訊所指示的訊框內或訊框間預測模式來預測當前塊(374),以計算用於當前塊的預測塊。隨後,視訊解碼器300可以對所重現的變換係數進行逆掃瞄(376),以建立經量化的變換係數的塊。隨後,視訊解碼器300可以對變換係數進行逆量化並且將逆變換應用於變換係數以產生殘差塊(378)。最終,視訊解碼器300可以經由將預測塊和殘差塊組合來對當前塊進行解碼(380)。
圖9是示出根據本案內容的技術的用於以減少與序列參數集(SPS)的解析依賴性的方式來用訊號通知圖片參數集(PPS)的參數的實例技術的流程圖。儘管關於視訊轉碼器200(圖1和圖5)和視訊解碼器300(圖1和圖6)進行了描述,但是應當理解,其他設備可以被配置為執行與圖9類似的方法。
如圖9所示,視訊解碼裝置(諸如視訊轉碼器200或視訊解碼器300)的一或多個處理器可以在圖片參數集(PPS)中對語法元素進行解碼,該語法元素指示PPS所適用於的視訊資料的圖片的解碼樹單元(CTU)的亮度解碼樹塊大小(402)。視訊解碼裝置的一或多個處理器可以根據PPS中的語法元素來對PPS所適用於的視訊資料的圖片進行解碼(404)。
在一些實例中,指示視訊資料的圖片的CTU的亮度解碼樹塊大小的語法元素指示視訊資料的圖片的CTU的亮度解碼樹塊大小減去5。在一些實例中,語法元素包括語法元素pps_log2_ctu_size_minus5。在一些實例中,語法元素pps_log2_ctu_size_minus5具有與適用於視訊資料的圖片的序列參數集(SPS)中的語法元素log2_ctu_size_minus5相同的值。
在一些實例中,視訊解碼裝置的一或多個處理器亦可以在PPS中對條件循環進行解碼,該條件循環具有至少部分地基於視訊資料的圖片中的瓦片的數量的條件。視訊解碼裝置的一或多個處理器亦可以至少部分地基於由語法元素指示的視訊資料的圖片的亮度解碼塊樹大小來決定視訊資料的圖片中的瓦片的數量,並且至少部分地基於視訊資料的圖片中的瓦片的數量來反覆運算條件循環。
在一些實例中,PPS不包括指示視訊資料的圖片中的瓦片的數量的第二語法元素。
在一些實例中,視訊解碼裝置的一或多個處理器亦可以在PPS中對條件陳述式進行解碼,該條件陳述式具有至少部分地基於視訊資料的圖片的第i 瓦片行的高度的條件。視訊解碼裝置的一或多個處理器亦可以至少部分地基於由語法元素指示的視訊資料的圖片的亮度解碼塊樹大小來決定視訊資料的圖片的第i 瓦片行的高度。
在一些實例中,視訊解碼裝置的一或多個處理器亦可以基於視訊資料的圖片的第i 瓦片行的高度來推斷視訊資料的圖片的第i 瓦片未被劃分為兩個或更多個磚塊。在一些實例中,視訊解碼裝置的一或多個處理器亦可以基於視訊資料的圖片的第i 瓦片行的高度來推斷一或多個水平磚塊邊界跨越被劃分為兩個或更多個磚塊的視訊資料的圖片的第i 瓦片均勻地分佈。
在一些實例中,在語法元素包括第一語法元素的情況下,視訊解碼裝置的一或多個處理器亦可以進行以下操作:在PPS中對第二語法元素進行解碼,該第二語法元素指示視訊資料的圖片中的子圖片的數量;在PPS中對第三語法元素進行解碼,該第三語法元素指示視訊資料的圖片之每一者子圖片的子圖片ID;及根據PPS中的第二語法元素和PPS中的第三語法元素來對視訊資料的圖片進行解碼。
在一些實例中,視訊解碼裝置的一或多個處理器亦可以進行以下操作:在用於視訊資料的圖片的切片的切片標頭中對第四語法元素進行解碼,該第四語法元素指示視訊資料的圖片的切片的子圖片ID;及根據切片標頭中的第四語法元素來對視訊資料的圖片進行解碼。
在一些實例中,解碼可以包括解碼,使得視訊解碼裝置包括視訊解碼器300。在一些實例中,視訊解碼裝置可以顯示視訊資料的圖片。
在一些實例中,解碼可以包括編碼,使得視訊解碼裝置包括視訊轉碼器200。在一些實例中,視訊解碼裝置可以擷取視訊資料的圖片。
本案內容包含以下實例。
實例1。一種對視訊資料進行解碼的方法,該方法包括:用訊號通知用於視訊資料的瓦片的一或多個磚塊資訊,其中該一或多個磚塊資訊的值符合該瓦片的行高的值;及對該視訊資料進行解碼。
實例2。根據實例1之方法,其中該一或多個磚塊資訊包括磚塊拆分標誌,並且其中若該瓦片的該行高的值為1,則該磚塊拆分標誌的值為0。
實例3。根據實例1之方法,其中該一或多個磚塊資訊包括磚塊拆分標誌,並且其中若該瓦片的該行高的值為2,則該磚塊拆分標誌的值為1。
實例4。根據實例1-3中任一項所述的方法,其中解碼包括解碼。
實例5。根據實例1-4中任一項所述的方法,其中解碼包括編碼。
實例6。一種對視訊資料進行解碼的方法,該方法包括:針對該視訊資料中的瓦片,至少部分地基於指定該瓦片的行高的值的語法元素來決定是否用訊號通知用於該瓦片的一或多個磚塊資訊;及至少部分地基於關於是否用訊號通知用於該瓦片的該一或多個磚塊資訊的該決定來對該視訊資料進行解碼。
實例7。根據實例6之方法,亦包括:若不存在該語法元素,則推斷該瓦片的該行高的該值。
實例8。根據實例6-7中任一項所述的方法,其中解碼包括解碼。
實例9。根據實例6-8中任一項所述的方法,其中解碼包括編碼。
實例10。一種對視訊資料進行解碼的方法,該方法包括:用訊號通知指示從該視訊資料中的圖片中提取的一或多個子圖片的一或多個語法元素;及至少部分地基於該一或多個語法元素來對該視訊資料進行解碼。
實例11。根據實例10之方法,其中解碼包括解碼。
實例12。根據實例10和11中任一項所述的方法,其中解碼包括編碼。
實例13。一種用於對視訊資料進行解碼的設備,該設備包括用於執行根據實例1–5中任一項所述的方法的一或多個單元。
實例14。根據實例13之設備,其中該一或多個單元包括在電路中實現的一或多個處理器。
實例15。根據實例13和14中任一項所述的設備,亦包括:用於儲存該視訊資料的記憶體。
實例16。根據實例13-15中任一項所述的設備,亦包括:被配置為顯示經解碼的視訊資料的顯示器。
實例17。根據實例13-16中任一項所述的設備,其中該設備包括以下各項中的一項或多項:相機、電腦、行動設備、廣播接收器設備、或機上盒。
實例18。根據實例13-17中任一項所述的設備,其中該設備包括視訊解碼器。
實例19。根據實例13-18中任一項所述的設備,其中該設備包括視訊轉碼器。
實例20。一種用於對視訊資料進行解碼的設備,該設備包括用於執行根據實例6–9中任一項所述的方法的一或多個單元。
實例21。根據實例20之設備,其中該一或多個單元包括在電路中實現的一或多個處理器。
實例22。根據實例20和21中任一項所述的設備,亦包括:用於儲存該視訊資料的記憶體。
實例23。根據實例20-22中任一項所述的設備,亦包括:被配置為顯示經解碼的視訊資料的顯示器。
實例24。根據實例20-23中任一項所述的設備,其中該設備包括以下各項中的一項或多項:相機、電腦、行動設備、廣播接收器設備、或機上盒。
實例25。根據實例20-24中任一項所述的設備,其中該設備包括視訊解碼器。
實例26。根據實例20-25中任一項所述的設備,其中該設備包括視訊轉碼器。
實例27。一種用於對視訊資料進行解碼的設備,該設備包括用於執行根據實例10–12中任一項所述的方法的一或多個單元。
實例28。根據實例27之設備,其中該一或多個單元包括在電路中實現的一或多個處理器。
實例29。根據實例27和28中任一項所述的設備,亦包括:用於儲存該視訊資料的記憶體。
實例30。根據實例27-29中任一項所述的設備,亦包括:被配置為顯示經解碼的視訊資料的顯示器。
實例31。根據實例27-30中任一項所述的設備,其中該設備包括以下各項中的一項或多項:相機、電腦、行動設備、廣播接收器設備、或機上盒。
實例32。根據實例27-31中任一項所述的設備,其中該設備包括視訊解碼器。
實例33。根據實例27-32中任一項所述的設備,其中該設備包括視訊轉碼器。
實例34。一種具有儲存在其上的指令的電腦可讀取儲存媒體,該等指令在被執行時使得一或多個處理器執行根據實例1-5中任一項所述的方法。
實例35。一種具有儲存在其上的指令的電腦可讀取儲存媒體,該等指令在被執行時使得一或多個處理器執行根據實例6-9中任一項所述的方法。
實例36。一種具有儲存在其上的指令的電腦可讀取儲存媒體,該等指令在被執行時使得一或多個處理器執行根據實例10-12中任一項所述的方法。
實例37。一種用於對視訊資料進行解碼的設備,該設備包括:用於用訊號通知用於視訊資料的瓦片的一或多個磚塊資訊的單元,其中該一或多個磚塊資訊的值符合該瓦片的行高的值;及用於對該視訊資料進行解碼的單元。
實例38。一種用於對視訊資料進行解碼的設備,該設備包括:用於針對該視訊資料中的瓦片,至少部分地基於指定該瓦片的行高的值的語法元素來決定是否用訊號通知用於瓦片的一或多個磚塊資訊的單元;及用於至少部分地基於關於是否用訊號通知用於瓦片的該一或多個磚塊資訊的該決定來對該視訊資料進行解碼的單元。
實例39。一種對視訊資料進行解碼的設備,該設備包括:用於用訊號通知指示從該視訊資料中的圖片中提取的一或多個子圖片的一或多個語法元素的單元;及用於至少部分地基於該一或多個語法元素來對該視訊資料進行解碼的單元。
要認識到的是,根據實例,本文描述的任何技術的某些動作或事件可以以不同的循序執行,可以被添加、合併或完全省略(例如,並非所有描述的動作或事件是對於實施該等技術都是必要的)。此外,在某些實例中,動作或事件可以例如經由多執行緒處理、中斷處理或多個處理器併發地而不是順序地執行。
在一或多個實例中,所描述的功能可以用硬體、軟體、韌體或其任何組合來實現。若用軟體來實現,則該等功能可以作為一或多個指令或代碼儲存在電腦可讀取媒體上或者經由其進行傳輸並且由基於硬體的處理單元執行。電腦可讀取媒體可以包括電腦可讀取儲存媒體,其對應於諸如資料儲存媒體之類的有形媒體或者通訊媒體,該通訊媒體包括例如根據通訊協定來促進電腦程式從一個地方傳送到另一個地方的任何媒體。以這種方式,電腦可讀取媒體通常可以對應於(1)非暫時性的有形電腦可讀取儲存媒體、或者(2)諸如訊號或載波之類的通訊媒體。資料儲存媒體可以是可以由一或多個電腦或者一或多個處理器存取以取回用於實現在本案內容中描述的技術的指令、代碼及/或資料結構的任何可用的媒體。電腦程式產品可以包括電腦可讀取媒體。
經由舉例而非限制性的方式,此類電腦可讀取儲存媒體可以包括RAM、ROM、EEPROM、CD-ROM或其他光碟儲存、磁碟儲存或其他磁存放裝置、快閃記憶體、或者能夠用於以指令或資料結構形式儲存期望的程式碼以及能夠由電腦存取的任何其他媒體。此外,任何連接被適當地稱為電腦可讀取媒體。例如,若使用同軸電纜、光纖光纜、雙絞線、數位用戶線路(DSL)或者無線技術(例如,紅外線、無線電和微波)從網站、伺服器或其他遠端源傳輸指令,則同軸電纜、光纖光纜、雙絞線、DSL或者無線技術(例如,紅外線、無線電和微波)被包括在媒體的定義中。然而,應當理解的是,電腦可讀取儲存媒體和資料儲存媒體不包括連接、載波、訊號或其他臨時性媒體,而是替代地針對非臨時性的有形儲存媒體。如本文所使用的,磁碟和光碟包括壓縮光碟(CD)、鐳射光碟、光碟、數位多功能光碟(DVD)、軟碟和藍光光碟,其中磁碟通常磁性地複製資料,而光碟則利用鐳射來光學地複製資料。上述各項的組合亦應當被包括在電腦可讀取媒體的範疇之內。
指令可以由一或多個處理器來執行,諸如一或多個DSP、通用微處理器、ASIC、FPGA、或其他等效的整合或個別邏輯電路。因此,如本文所使用的術語「處理器」和「處理電路」可以代表前述結構中的任何一者或者適於實現本文描述的技術的任何其他結構。另外,在一些態樣中,本文描述的功能可以在被配置用於編碼和解碼的專用硬體及/或軟體模組內提供,或者被併入經組合的轉碼器中。此外,該等技術可以完全在一或多個電路或邏輯部件中實現。
本案內容的技術可以在多種多樣的設備或裝置中實現,包括無線手機、積體電路(IC)或一組IC(例如,晶片組)。在本案內容中描述了各種部件、模組或單元以強調被配置以執行所揭示的技術的設備的功能性態樣,但是不一定需要經由不同的硬體單元來實現。確切而言,如前述,各種單元可以被組合在轉碼器硬體單元中,或者由可交互動操作的硬體單元的集合(包括如前述的一或多個處理器)結合適當的軟體及/或韌體來提供。
已經描述了各個實例。這些和其他實例在所附的請求項的範疇內。
100:編碼和解碼系統 102:源設備 104:視訊源 106:記憶體 108:輸出介面 110:電腦可讀取媒體 112:存放裝置 114:存放裝置 116:目的地設備 118:顯示裝置 120:記憶體 122:輸入介面 130:四叉樹二叉樹(QTBT)結構 132:解碼樹單元(CTU) 150:圖片 200:視訊轉碼器 202:模式選擇單元 204:殘差產生單元 206:變換處理單元 208:量化單元 210:逆量化單元 212:逆變換處理單元 214:重構單元 216:濾波器單元 218:碼圖片緩衝器(DPB) 220:熵編碼單元 222:運動估計單元 224:運動補償單元 226:訊框內預測單元 230:視訊資料記憶體 300:視訊解碼器 302:熵解碼單元 304:預測處理單元 306:逆量化單元 308:逆變換處理單元 310:重構單元 312:濾波器單元 314:解碼圖片緩衝器(DPB) 316:運動補償單元 318:訊框內預測單元 320:CPB記憶體 350:方塊 352:方塊 354:方塊 356:方塊 358:方塊 360:方塊 372:方塊 374:方塊 376:方塊 378:方塊 380:方塊 402:方塊 404:方塊
圖1是示出可以執行本案內容的技術的實例視訊編碼和解碼系統的方塊圖。
圖2A和2B是示出實例四叉樹二叉樹(QTBT)結構以及對應的解碼樹單元(CTU)的概念圖。
圖3是示出根據本案內容的各態樣的實例子圖片佈局的概念圖。
圖4圖示從圖3的實例圖片中提取子圖片。
圖5是示出可以執行本案內容的技術的實例視訊轉碼器的方塊圖。
圖6是示出可以執行本案內容的技術的實例視訊解碼器的方塊圖。
圖7是示出根據本案內容的技術的用於對當前塊進行編碼的實例方法的流程圖。
圖8是示出根據本案內容的技術的用於對當前塊進行解碼的實例方法的流程圖。
圖9是示出根據本案內容的技術的用於以減少與序列參數集(SPS)的解析依賴性的方式來用訊號通知圖片參數集(PPS)的參數的實例技術的流程圖。
國內寄存資訊(請依寄存機構、日期、號碼順序註記) 無 國外寄存資訊(請依寄存國家、機構、日期、號碼順序註記) 無
100:編碼和解碼系統
102:源設備
104:視訊源
106:記憶體
108:輸出介面
110:電腦可讀取媒體
112:存放裝置
114:存放裝置
116:目的地設備
118:顯示裝置
120:記憶體
122:輸入介面

Claims (30)

  1. 一種用於對視訊資料進行解碼的方法,該方法包括以下步驟: 在一圖片參數集(PPS)中對一語法元素進行解碼,該語法元素指示該PPS所適用於的該視訊資料的一圖片的解碼樹單元(CTU)的一亮度解碼樹塊大小;及 根據該PPS中的該語法元素來對該PPS所適用於的該視訊資料的該圖片進行編碼。
  2. 根據請求項1之方法,其中指示該視訊資料的該圖片的該等CTU的該亮度解碼樹塊大小的該語法元素指示:該視訊資料的該圖片的該等CTU的該亮度解碼樹塊大小減去5。
  3. 根據請求項2之方法,其中該語法元素包括一語法元素pps_log2_ctu_size_minus5。
  4. 根據請求項3之方法,其中該語法元素pps_log2_ctu_size_minus5具有與適用於該視訊資料的該圖片的一序列參數集(SPS)中的一語法元素log2_ctu_size_minus5相同的一值。
  5. 根據請求項1之方法,其中對該語法元素進行解碼包括對該語法元素進行解碼,亦包括以下步驟: 使用具有至少部分地基於該視訊資料的該圖片中的一瓦片的數量的一條件的一條件循環,來對該PPS中的該語法元素進行解碼,其包括至少部分地基於該視訊資料的該圖片中的該瓦片的數量來反覆運算該條件循環;及 至少部分地基於由該語法元素指示的該視訊資料的該圖片的該亮度解碼塊樹大小,來決定該視訊資料的該圖片中的該瓦片的數量。
  6. 根據請求項1之方法,其中: 該PPS不包括指示該視訊資料的該圖片中的一瓦片的數量的一第二語法元素。
  7. 根據請求項1之方法,其中對該語法元素進行解碼包括對該語法元素進行解碼,亦包括以下步驟: 使用具有至少部分地基於該視訊資料的該圖片的一第i 瓦片行的一高度的一條件的一條件陳述式,來對該PPS中的該語法元素進行解碼;及 至少部分地基於由該語法元素指示的該視訊資料的該圖片的該亮度解碼塊樹大小,來決定該視訊資料的該圖片的該第i 瓦片行的該高度。
  8. 根據請求項7之方法,亦包括以下步驟: 基於該視訊資料的該圖片的該第i 瓦片行的該高度,來推斷該視訊資料的該圖片的一第i 瓦片未被劃分為兩個或更多個磚塊。
  9. 根據請求項7之方法,亦包括以下步驟: 基於該視訊資料的該圖片的該第i 瓦片行的該高度,來推斷一或多個水平磚塊邊界跨越被劃分為兩個或更多個磚塊的該視訊資料的該圖片的一第i 瓦片均勻地分佈。
  10. 根據請求項1之方法,其中該語法元素包括一第一語法元素,該方法亦包括以下步驟: 在該PPS中對一第二語法元素進行編碼,該第二語法元素指示該視訊資料的該圖片中的一子圖片的數量;及 在該PPS中對一第三語法元素進行編碼,該第三語法元素指示該視訊資料的該圖片之每一者子圖片的一子圖片ID, 其中對視訊資料的該圖片進行解碼進一步包括:根據該PPS中的該第二語法元素和該PPS中的該第三語法元素,來對視訊資料的該圖片進行解碼。
  11. 根據請求項10之方法,亦包括以下步驟: 在用於該視訊資料的該圖片的一切片的一切片標頭中,對一第四語法元素進行編碼,該第四語法元素指示該視訊資料的該圖片的該切片的該子圖片ID;及 根據該切片標頭中的該第四語法元素,來對該視訊資料的該圖片進行編碼。
  12. 根據請求項1之方法,其中解碼包括解碼,其中對該語法元素進行解碼包括對該語法元素進行解碼,並且其中對該圖片進行解碼包括對該圖片進行解碼。
  13. 根據請求項1之方法,其中解碼包括編碼,其中對該語法元素進行解碼包括對該語法元素進行編碼,並且其中對該圖片進行解碼包括對該圖片進行編碼。
  14. 一種用於對視訊資料進行解碼的設備,該設備包括: 被配置為儲存視訊資料的記憶體;及 一或多個處理器,該一或多個處理器在電路中實現並且通訊地耦合到該記憶體,該一或多個處理器被配置為: 在一圖片參數集(PPS)中對一語法元素進行編碼,該語法元素指示該PPS所適用於的該視訊資料的一圖片的解碼樹單元(CTU)的一亮度解碼樹塊大小;及 根據該PPS中的該語法元素來對該PPS所適用於的該視訊資料的該圖片進行編碼。
  15. 根據請求項14之設備,其中指示該視訊資料的該圖片的該等CTU的該亮度解碼樹塊大小的該語法元素指示:該視訊資料的該圖片的該等CTU的該亮度解碼樹塊大小減去5。
  16. 根據請求項15之設備,其中該語法元素包括一語法元素pps_log2_ctu_size_minus5。
  17. 根據請求項16之設備,其中該語法元素pps_log2_ctu_size_minus5具有與適用於該視訊資料的該圖片的一序列參數集(SPS)中的一語法元素log2_ctu_size_minus5相同的一值。
  18. 根據請求項14之設備,其中該一或多個處理器亦被配置為: 使用具有至少部分地基於該視訊資料的該圖片中的一瓦片的數量的一條件的一條件循環,來對該PPS中的該語法元素進行解碼,其包括至少部分地基於該視訊資料的該圖片中的該瓦片的數量來反覆運算該條件循環;及 至少部分地基於由該語法元素指示的該視訊資料的該圖片的該亮度解碼塊樹大小,來決定該視訊資料的該圖片中的該瓦片的數量。
  19. 根據請求項14之設備,其中: 該PPS不包括指示該視訊資料的該圖片中的一瓦片的數量的一第二語法元素。
  20. 根據請求項14之設備,其中該一或多個處理器亦被配置為: 使用具有至少部分地基於該視訊資料的該圖片的一第i 瓦片行的一高度的一條件的一條件陳述式,來對該PPS中的該語法元素進行解碼;及 至少部分地基於由該語法元素指示的該視訊資料的該圖片的該亮度解碼塊樹大小,來決定該視訊資料的該圖片的該第i 瓦片行的該高度。
  21. 根據請求項20之設備,其中該一或多個處理器亦被配置為: 基於該視訊資料的該圖片的該第i 瓦片行的該高度,來推斷該視訊資料的該圖片的一第i 瓦片未被劃分為兩個或更多個磚塊。
  22. 根據請求項20之設備,其中該一或多個處理器亦被配置為: 基於該視訊資料的該圖片的該第i 瓦片行的該高度,來推斷一或多個水平磚塊邊界跨越被劃分為兩個或更多個磚塊的該視訊資料的該圖片的一第i 瓦片均勻地分佈。
  23. 根據請求項14之設備,其中該語法元素包括一第一語法元素,並且其中該一或多個處理器亦被配置為: 在該PPS中對一第二語法元素進行編碼,該第二語法元素指示該視訊資料的該圖片中的一子圖片的數量; 在該PPS中對一第三語法元素進行編碼,該第三語法元素指示該視訊資料的該圖片之每一者子圖片的一子圖片ID;及 根據該PPS中的該第二語法元素和該PPS中的該第三語法元素,來對視訊資料的該圖片進行編碼。
  24. 根據請求項23之設備,其中該一或多個處理器亦被配置為: 在用於該視訊資料的該圖片的一切片的一切片標頭中,對一第四語法元素進行編碼,該第四語法元素指示該視訊資料的該圖片的該切片的該子圖片ID;及 根據該切片標頭中的該第四語法元素來對該視訊資料的該圖片進行編碼。
  25. 根據請求項14之設備,其中該設備包括一視訊解碼器,其中為了對該語法元素進行解碼,該一或多個處理器被配置為對該語法元素進行解碼,並且其中為了對該圖片進行解碼,該一或多個處理器被配置為對該圖片進行解碼。
  26. 根據請求項25之設備,亦包括:被配置為顯示經解碼的圖片的一顯示器。
  27. 根據請求項14之設備,其中該設備包括一視訊轉碼器,其中為了對該語法元素進行解碼,該一或多個處理器被配置為對該語法元素進行編碼,並且其中為了對該圖片進行解碼,該一或多個處理器被配置為對該圖片進行編碼。
  28. 根據請求項27之設備,其中該設備包括:被配置為擷取該視訊資料的該圖片的相機。
  29. 一種用於視訊解碼的設備,該設備包括: 用於在一圖片參數集(PPS)中對語法元素進行解碼的單元,該語法元素指示該PPS所適用於的視訊資料的一圖片的解碼樹單元(CTU)的一亮度解碼樹塊大小;及 用於根據該PPS中的該語法元素來對該PPS所適用於的該視訊資料的該圖片進行解碼的單元。
  30. 一種具有儲存在其上的指令的非暫時性電腦可讀取儲存媒體,該等指令在被執行時使得一或多個處理器進行以下操作: 在一圖片參數集(PPS)中對一語法元素進行解碼,該語法元素指示該PPS所適用於的視訊資料的一圖片的解碼樹單元(CTU)的一亮度解碼樹塊大小;及 根據該PPS中的該語法元素來對該PPS所適用於的該視訊資料的該圖片進行編碼。
TW109133070A 2019-09-24 2020-09-24 用於視訊解碼的參數集訊號傳遞 TW202126039A (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US201962905235P 2019-09-24 2019-09-24
US62/905,235 2019-09-24
US17/029,550 2020-09-23
US17/029,550 US11412264B2 (en) 2019-09-24 2020-09-23 Parameter set signaling for video coding

Publications (1)

Publication Number Publication Date
TW202126039A true TW202126039A (zh) 2021-07-01

Family

ID=74881368

Family Applications (1)

Application Number Title Priority Date Filing Date
TW109133070A TW202126039A (zh) 2019-09-24 2020-09-24 用於視訊解碼的參數集訊號傳遞

Country Status (6)

Country Link
US (1) US11412264B2 (zh)
EP (1) EP4035394A1 (zh)
KR (1) KR20220062534A (zh)
CN (1) CN114402600A (zh)
TW (1) TW202126039A (zh)
WO (1) WO2021061968A1 (zh)

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015169207A1 (en) * 2014-05-05 2015-11-12 Mediatek Singapore Pte. Ltd. Method and apparatus for determining residue transform tree representation
WO2016074147A1 (en) * 2014-11-11 2016-05-19 Mediatek Singapore Pte. Ltd. Separated coding tree for luma and chroma
WO2016090568A1 (en) * 2014-12-10 2016-06-16 Mediatek Singapore Pte. Ltd. Binary tree block partitioning structure
CN106254878B (zh) * 2015-06-14 2020-06-12 同济大学 一种图像编码及解码方法、图像处理设备
CN116647677A (zh) * 2016-10-28 2023-08-25 韩国电子通信研究院 视频编码/解码方法和设备以及存储比特流的记录介质
US11218697B2 (en) * 2017-05-26 2022-01-04 Sk Telecom Co., Ltd. Apparatus and method for video encoding or decoding supporting various block sizes
US10477237B2 (en) * 2017-06-28 2019-11-12 Futurewei Technologies, Inc. Decoder side motion vector refinement in video coding
KR20190046704A (ko) * 2017-10-26 2019-05-07 한국전자통신연구원 비대칭 서브 블록 기반 영상 부호화/복호화 방법 및 장치
WO2019098758A1 (ko) * 2017-11-16 2019-05-23 한국전자통신연구원 영상 부호화/복호화 방법, 장치 및 비트스트림을 저장한 기록 매체
JP7337072B2 (ja) * 2018-03-30 2023-09-01 ヴィド スケール インコーポレイテッド エンコーディングおよびデコーディングのレイテンシ低減に基づく、テンプレートによるインター予測技術
US11509937B2 (en) * 2018-04-09 2022-11-22 Sk Telecom Co., Ltd. Method and apparatus for encoding/decoding video
EP3811612A1 (en) * 2018-06-21 2021-04-28 Telefonaktiebolaget LM Ericsson (publ) Tile partitions with sub-tiles in video coding
KR20200002011A (ko) * 2018-06-28 2020-01-07 한국전자통신연구원 영상 부호화/복호화 방법, 장치 및 비트스트림을 저장한 기록 매체
CN114900694A (zh) * 2018-06-29 2022-08-12 抖音视界(北京)有限公司 哪个查找表需要更新或不更新
US10511852B1 (en) * 2018-07-13 2019-12-17 Tencent America LLC Method and apparatus for video coding
WO2020094050A1 (en) * 2018-11-06 2020-05-14 Beijing Bytedance Network Technology Co., Ltd. Using inter prediction with geometric partitioning for video processing
US11363307B2 (en) * 2019-08-08 2022-06-14 Hfi Innovation Inc. Video coding with subpictures
US11284077B2 (en) * 2019-09-10 2022-03-22 Mediatek Inc. Signaling of subpicture structures

Also Published As

Publication number Publication date
KR20220062534A (ko) 2022-05-17
CN114402600A (zh) 2022-04-26
US11412264B2 (en) 2022-08-09
US20210092455A1 (en) 2021-03-25
EP4035394A1 (en) 2022-08-03
WO2021061968A1 (en) 2021-04-01

Similar Documents

Publication Publication Date Title
CN113940069A (zh) 用于视频译码中的低频不可分离变换的变换和最后有效系数位置信令
CN114009026A (zh) 视频译码中的色度量化参数偏移的块级信令
TW202115977A (zh) 用於視訊編碼的跨分量自我調整迴路濾波
TW202110189A (zh) 用於視訊寫碼的環繞運動補償
TW202135531A (zh) 用於視訊編解碼的經解碼圖片緩衝器(dpb)參數訊號傳遞通知
US20210058620A1 (en) Chroma quantization parameter (qp) derivation for video coding
TW202123705A (zh) 低頻不可分離變換(lfnst)訊號傳遞
TW202127886A (zh) 用於視頻譯碼的圖像標頭信令
TW202127887A (zh) 視訊解碼中用於聯合色度殘差模式的量化參數訊號傳遞
TW202143733A (zh) 在視訊編解碼中的獨立子圖片信號傳遞
TW202126040A (zh) 用於視訊編碼的簡化的調色板預測器更新
CN114128274A (zh) 推导译码***操作配置
TW202139715A (zh) 視訊譯碼中的參考圖片列表和共位圖片訊號傳遞
TW202131676A (zh) 視訊編碼中針對參考圖片重取樣的環繞偏移
TW202106023A (zh) 調色板模式下的增量量化參數訊令
TW202139696A (zh) 在進行視訊解碼時對區塊的色度變換跳過和聯合色度解碼賦能
EP4162681A1 (en) General constraints of syntax elements for video coding
TW202127881A (zh) 採用用於視訊編解碼之高階語法的子圖像傳訊
TW202143712A (zh) 視訊轉碼中的低頻不可分離變換處理
TW202133615A (zh) 基於色度變換跳過的用於色度的lfnst信號傳遞
TW202143711A (zh) 用於具有混合網路抽象層(nal)單元類型的視訊的高階語法
TW202141986A (zh) 視訊編解碼中的子畫面訊號傳遞
TW202143735A (zh) 用於視訊資料的語法元素的訊號傳遞
TW202133621A (zh) 支援有損解碼和無損解碼兩者的殘差解碼
TW202133619A (zh) 用於合併估計區域的基於歷史的運動向量預測約束