CN113906753A - 编解码视频的量化残差差分脉冲编解码调制表示的约束 - Google Patents
编解码视频的量化残差差分脉冲编解码调制表示的约束 Download PDFInfo
- Publication number
- CN113906753A CN113906753A CN202080031685.XA CN202080031685A CN113906753A CN 113906753 A CN113906753 A CN 113906753A CN 202080031685 A CN202080031685 A CN 202080031685A CN 113906753 A CN113906753 A CN 113906753A
- Authority
- CN
- China
- Prior art keywords
- video block
- current video
- block
- value
- prediction
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 claims abstract description 389
- 238000013139 quantization Methods 0.000 claims abstract description 61
- 230000007704 transition Effects 0.000 claims abstract description 18
- 239000013598 vector Substances 0.000 claims description 89
- 238000012545 processing Methods 0.000 claims description 50
- 241000023320 Luma <angiosperm> Species 0.000 claims description 30
- OSWPMRLSEDHDFF-UHFFFAOYSA-N methyl salicylate Chemical compound COC(=O)C1=CC=CC=C1O OSWPMRLSEDHDFF-UHFFFAOYSA-N 0.000 claims description 30
- 238000006243 chemical reaction Methods 0.000 claims description 21
- 238000009795 derivation Methods 0.000 claims description 21
- 208000037170 Delayed Emergence from Anesthesia Diseases 0.000 claims description 20
- 230000004044 response Effects 0.000 claims description 20
- 230000009977 dual effect Effects 0.000 claims description 16
- 239000011159 matrix material Substances 0.000 description 31
- 238000013507 mapping Methods 0.000 description 29
- 230000008569 process Effects 0.000 description 22
- 238000010586 diagram Methods 0.000 description 17
- 230000011664 signaling Effects 0.000 description 14
- 238000005070 sampling Methods 0.000 description 11
- 230000006835 compression Effects 0.000 description 9
- 238000007906 compression Methods 0.000 description 9
- 238000004590 computer program Methods 0.000 description 9
- PXFBZOLANLWPMH-UHFFFAOYSA-N 16-Epiaffinine Natural products C1C(C2=CC=CC=C2N2)=C2C(=O)CC2C(=CC)CN(C)C1C2CO PXFBZOLANLWPMH-UHFFFAOYSA-N 0.000 description 7
- 101100508818 Mus musculus Inpp5k gene Proteins 0.000 description 6
- 101100366438 Rattus norvegicus Sphkap gene Proteins 0.000 description 6
- 238000005516 engineering process Methods 0.000 description 5
- 230000015654 memory Effects 0.000 description 5
- 238000012935 Averaging Methods 0.000 description 4
- 238000005192 partition Methods 0.000 description 4
- 230000008901 benefit Effects 0.000 description 3
- 238000004891 communication Methods 0.000 description 3
- 230000001419 dependent effect Effects 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 238000012360 testing method Methods 0.000 description 3
- 241000209094 Oryza Species 0.000 description 2
- 235000007164 Oryza sativa Nutrition 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 238000010276 construction Methods 0.000 description 2
- 230000006837 decompression Effects 0.000 description 2
- 238000006073 displacement reaction Methods 0.000 description 2
- 238000007689 inspection Methods 0.000 description 2
- 230000007774 longterm Effects 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 230000000644 propagated effect Effects 0.000 description 2
- 235000009566 rice Nutrition 0.000 description 2
- 238000013515 script Methods 0.000 description 2
- 238000000926 separation method Methods 0.000 description 2
- 230000017105 transposition Effects 0.000 description 2
- 241000287196 Asthenes Species 0.000 description 1
- 230000003044 adaptive effect Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000000903 blocking effect Effects 0.000 description 1
- 238000004422 calculation algorithm Methods 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000003780 insertion Methods 0.000 description 1
- 230000037431 insertion Effects 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 230000003252 repetitive effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000000638 solvent extraction Methods 0.000 description 1
- 239000000126 substance Substances 0.000 description 1
- 239000000758 substrate Substances 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 238000012800 visualization Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/593—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/11—Selection of coding mode or of prediction mode among a plurality of spatial predictive coding modes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/124—Quantisation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/129—Scanning of coding units, e.g. zig-zag scan of transform coefficients or flexible macroblock ordering [FMO]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
- H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/182—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/59—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
Abstract
描述了视频编解码和解码方法。示例方法包括确定差分编解码模式适用于视频的当前视频块和当前视频块的比特流表示之间的转换,以及基于所述确定,根据实施规则来使用差分编解码模式执行当前视频块和当前视频块的比特流表示之间的转换,其中在差分编解码模式下,使用当前视频块的帧内预测的量化残差和量化残差的预测之间的差在比特流表示中表示当前视频块,并且其中在差分编解码模式下,量化残差和量化残差的预测之间的差使用差分脉冲编解码调制(DPCM)表示来表示。
Description
相关申请的交叉引用
根据适用的专利法和/或依据巴黎公约的规则,本申请旨在及时要求2019年4月24日提交的国际专利申请No.PCT/CN2019/084008的优先权和权益。出于根据法律的所有目的,前述申请的整个公开通过引用而并入作为本申请公开的一部分。
技术领域
本专利文档涉及视频编解码技术、设备和***。
背景技术
尽管在视频压缩方面取得了进步,但数字视频仍然是互联网和其他数字通信网络上使用的最大带宽。随着能够接收和显示视频的连接用户设备数量的增加,预计数字视频使用的带宽需求将继续增长。
发明内容
本文档描述了在视频或图像的解码或编码期间使用二次变换的各种实施例和技术。
视频处理的第一示例方法包括,基于适用性规则来确定差分编解码模式适用于视频的色度视频块和色度视频块的比特流表示之间的转换,以及基于该确定,使用差分编解码模式来执行色度视频块和色度视频块的比特流表示之间的转换,其中在差分编解码模式下,使用色度视频块的帧内预测的量化残差和量化残差的预测之间的差在比特流表示中表示色度视频块,其中在第一方向上执行帧内预测,并且在第二方向上执行量化残差的预测,并且其中在差分编解码模式下,量化残差和量化残差的预测之间的差使用差分脉冲编解码调制(DPCM)表示来表示。
视频处理的第二示例方法包括,使用差分编解码模式并使用基于共存规则的帧内预测模式,执行视频的当前视频块和当前视频块的比特流表示之间的转换,其中在帧内预测模式下,当前视频块的帧内预测的量化残差基于当前视频块的样点的预测,其中在差分编解码模式下,使用量化残差和量化残差的预测之间的差在比特流表示中表示当前视频块,并且其中量化残差和量化残差的预测之间的差使用差分脉冲编解码调制(DPCM)表示来表示。
视频处理的第三示例方法包括,使用差分编解码模式来执行视频的当前视频块和当前视频块的比特流表示之间的转换,其中在该差分编解码模式下使用当前视频块的帧内预测的量化残差和量化残差的预测之间的差在比特流表示中表示当前视频块,其中量化残差的预测的方向可从比特流表示推断。
视频处理的第四示例方法包括,确定差分编解码模式适用于视频的当前视频块和当前视频块的比特流表示之间的转换,以及基于该确定,根据实施规则来使用差分编解码模式执行当前视频块和当前视频块的比特流表示之间的转换,其中在差分编解码模式下,使用当前视频块的帧内预测的量化残差和量化残差的预测之间的差在比特流表示中表示当前视频块,并且其中在差分编解码模式下,量化残差和量化残差的预测之间的差使用差分脉冲编解码调制(DPCM)表示来表示。
视频处理的第五示例方法包括,基于适用性规则来确定差分编解码模式适用于视频的当前视频块和当前视频块的比特流表示之间的转换,其中当前视频块与色彩分量相关联,并且其中适用性规则基于差分编解码模式是否被应用于视频的另一视频块来指定对当前视频块启用还是禁用差分编解码模式,以及基于该确定,使用差分编解码模式来执行当前视频块和当前视频块的比特流表示之间的转换,其中在差分编解码模式下,使用当前视频块的帧内预测的量化残差和量化残差的预测之间的差在比特流表示中表示当前视频块,并且其中在差分编解码模式下,量化残差和量化残差的预测之间的差使用差分脉冲编解码调制(DPCM)表示来表示。
在一个示例方面,公开了一种视频处理方法。该方法包括,使用差分编解码模式并选择性地使用基于共存规则的帧内预测模式来执行当前视频块和当前视频块的比特流表示之间的转换;其中,帧内预测模式用于生成当前视频块的样点的预测;并且其中,差分编解码模式用于使用差分脉冲编解码调制表示来表示来自像素的预测的量化残差块。
在另一个示例方面,公开了另一种视频处理的方法。该方法包括,使用差分编解码模式来执行当前视频块和当前视频块的比特流表示之间的转换,其中在该差分编解码模式下使用差分脉冲编解码调制表示来表示来自当前视频块的像素的预测的量化残差块;其中,预测的第一方向或差分编解码模式的第二方向可从比特流表示推断。
在又一个示例方面,公开了另一种视频处理的方法。该方法包括,基于适用性规则来确定差分编解码模式适用于当前视频块和当前视频块的比特流表示之间的转换;以及使用差分编解码模式来执行当前视频块和比特流表示之间的转换;其中,在差分编解码模式下,使用在不同于水平方向或垂直方向的残差预测方向上执行的差分脉冲编解码调制表示来表示来自当前视频块的像素的帧内预测的量化残差块。
在又一个示例方面,公开了另一种视频处理的方法。该方法包括,确定差分编解码模式适用于当前视频块和当前视频块的比特流表示之间的转换;以及使用差分编解码模式的实施规则来执行当前视频块和比特流表示之间的转换;其中,在差分编解码模式下,使用在不同于水平方向或垂直方向的残差预测方向上执行的差分脉冲编解码调制表示来表示来自当前视频块的像素的帧内预测的量化残差块。
在又一个示例方面,公开了一种视频处理装置。该装置包括被配置为执行以上公开的方法的处理器。
在又一个示例方面,公开了一种计算机可读介质。该介质上存储有用于上述方法的处理器实施的代码。
本文档描述了这些和其他方面。
附图说明
图1是帧内块复制的图示。
图2示出了以调色板模式编解码的块的示例。
图3示出了示例使用调色板预测值来信令通知调色板条目。
图4示出了水平和垂直遍历扫描的示例。
图5示出了调色板索引的编解码的示例。
图6示出了仿射线性加权帧内预测(ALWIP)过程的示例过程。
图7示出了仿射线性加权帧内预测(ALWIP)过程的示例过程。
图8示出了仿射线性加权帧内预测(ALWIP)过程的示例过程。
图9示出了仿射线性加权帧内预测(ALWIP)过程的示例过程。
图10是用于实施本文档中描述的技术的示例硬件平台的框图。
图11是视频处理的示例方法的流程图。
图12示出了四个Merge候选的示例。
图13示出了在视频编解码中使用的示例Merge候选对。
图14是示出可以实施本文公开的各种技术的示例视频处理***的框图。
图15是示出可以利用本公开的技术的示例视频编解码***的框图。
图16是示出视频编码器的示例的框图。
图17是示出视频解码器的示例的框图。
图18-图22示出了用于视频处理的示例方法的五个示例流程图。
具体实施方式
本文档中使用章节标题是为了便于理解,而不是将章节中公开的实施例仅限于该章节。此外,虽然参考通用视频编解码或其他特定视频编解码器描述了特定实施例,但是所公开的技术也适用于其他视频编解码技术。此外,虽然一些实施例详细描述了视频编解码步骤,但是应当理解,撤销编解码的对应解码步骤将由解码器实施。此外,术语视频处理包括视频编解码或压缩、视频解码或解压缩以及视频转码,其中视频像素从一个压缩格式表示为另一个压缩格式或以不同的压缩比特率表示。
1.摘要
本专利文档涉及视频编解码技术。具体地,它涉及视频编解码中的DPCM编解码。它可以应用于现有的视频编解码标准,如HEVC,或即将要定案的标准(多功能视频编解码)。它也可以应用于未来的视频编解码标准或视频编解码器。
2.初步讨论
视频编解码标准主要是通过熟知的ITU-T和ISO/IEC标准的发展而演变的。ITU-T制定了H.261和H.263,ISO/IEC制定了MPEG-1和MPEG-4可视化,并且这两个组织联合制定了H.262/MPEG-2视频和H.264/MPEG-4高级视频编解码(Advanced Video Coding,AVC)和H.265/HEVC[1]标准。自H.262以来,视频编解码标准基于混合视频编解码结构,其中利用了时域预测加变换编解码。为了探索HEVC以外的未来视频编解码技术,VCEG和MPEG于2015年联合成立了联合视频探索组(Joint Video Exploration Team,JVET)。此后,JVET采用了许多新方法,并将其放入名为联合探索模型(Joint Exploration Model,JEM)[3,4]的参考软件中。2018年4月,VCEG(Q6/16)和ISO/IEC JTC1 SC29/WG11(MPEG)之间的联合视频专家组(JVET)成立,以致力于VVC(Versatile Video Coding,多功能视频编解码)标准,目标是与HEVC相比比特率降低50%。
VVC草案的最新版本,即通用视频编解码(草案4)可以在以下处找到:
phenix.it-sudparis.eu/jvet/doc_end_user/current_document.php?id=5755
The latest reference software of VVC,named VTM,could be found at:
vcgit.hhi.fraunhofer.de/jvet/VVCSoftware_VTM/tags/VTM-4.0
2.1帧内块复制
HEVC屏幕内容编解码扩展(HEVC-SCC)[1]和当前VVC测试模型(VTM-4.0)采用了帧内块复制(IBC),也称为当前图片参考。IBC将运动补偿的概念从帧间编解码扩展到帧内编解码。如图1所示范的,当应用IBC时,当前块由相同图片中的参考块预测。在当前块被编解码或解码之前,参考块中的样点必须已经被重构。尽管IBC对大多数相机捕捉的序列并不那么有效,但它示出对屏幕内容的显著编解码增益。原因是屏幕内容图片中有很多重复的图案,诸如图标和文本字符。IBC可以有效地移除这些重复图案之间的冗余。在HEVC-SCC中,如果帧间编解码单元(CU)选择当前图片作为其参考图片,则它可以应用IBC。在这种情况下,MV被重命名为块矢量(BV),并且BV总是具有整数像素精度。为了与主简档HEVC兼容,当前图片在解码图片缓冲区(DPB)中被标记为“长期”参考图片。应当注意,类似地,在多视图/3D视频编解码标准中,帧间视图参考图片也被标记为“长期”参考图片。
在BV找到其参考块之后,可以通过复制参考块来生成预测。残差可以通过从原始信号中减去参考像素得到。然后,可以像在其他编解码模式下一样应用变换和量化。
图1是帧内块复制的图示。
然而,当参考块在图片之外,或与当前块重叠,或在重构区域之外,或在受一些约束限制的有效区域之外时,部分或全部像素值没有被定义。基本上,有两种解决方案来处理这样的问题。一种是不允许这样的情况,例如在比特流一致性中。另一种是对那些未定义的像素值应用填充。以下子章节详细描述了解决方案。
2.2HEVC屏幕内容编解码扩展中的IBC
在HEVC的屏幕内容编解码扩展中,当块使用当前图片作为参考时,它应该保证整个参考块在可用的重构区域内,如以下规范文本所指示的:
变量offsetX和offsetY被推导如下:
offsetX=(ChromaArrayType==0)?0:(mvCLX[0]&0x7?2:0) (8-106)
offsetY=(ChromaArrayType==0)?0:(mvCLX[1]&0x7?2:0) (8-107)
比特流一致性的要求是,当参考图片是当前图片时,亮度运动矢量mvLX应当遵守以下约束:
–当调用第6.4.1条中指定的z扫描顺序块可用性的推导过程时,其中以设置为等于(xCb,yCb)的(xCurr,yCurr)和设置为等于(xPb+(mvLX[0]>>2)-offsetX,yPb+(mvLX[1]>>2)-offsetY)的邻近亮度位置(xNbY,yNbY)作为输入,输出应当等于TRUE(真)。
–当调用第6.4.1条中指定的z扫描顺序块可用性的推导过程时,其中以设置为等于(xCb,yCb)的(xCurr,yCurr)和设置为等于(xPb+(mvLX[0]>>2)+nPbW-1+offsetX,yPb+(mvLX[1]>>2)+nPbH-1+offsetY)的邻近亮度位置(xNbY,yNbY)作为输入,输出应当等于TRUE。
–一个或两个以下条件应当为真:
–(mvLX[0]>>2)+nPbW+xB1+offsetX的值小于或等于0。
–(mvLX[1]>>2)+nPbH+yB1+offsetY的值小于或等于0。
–以下条件应当为真:
(xPb+(mvLX[0]>>2)+nPbSw-1+offsetX)/CtbSizeY-xCurr/CtbSizeY<=yCurr/CtbSizeY-(yPb+(mvLX[1]>>2)+nPbSh-1+offsetY)/CtbSizeY (8-108)
因此,参考块与当前块重叠或者参考块在图片之外的情况将不会发生。不需要填充参考或预测块。
2.3VVC测试模型中的IBC
在当前VVC测试模型(即,VTM-4.0设计)中,整个参考块应该与当前编解码树单元(CTU)一起,并且不与当前块重叠。因此,不需要填充参考或预测块。IBC标志被编解码为当前CU的预测模式。因此,对于每个CU,总共有三种预测模式,MODE_INTRA、MODE_INTER和MODE_IBC。
2.3.1IBC Merge模式
在IBC Merge模式中,从比特流中解析指向IBC Merge候选列表中的条目的索引。IBC Merge列表的构建可以根据以下步骤顺序进行总结:
·步骤1:推导空域候选
·步骤2:***HMVP候选
·步骤3:***成对平均候选
在空域Merge候选的推导中,在位于图12中描绘的位置的候选当中最多选择四个Merge候选。推导的顺序为A1、B1、B0、A0和B2。仅当位置A1、B1、B0、A0的任何PU不可用(例如,因为它属于另一个条带或片)或未以IBC模式编解码时,才考虑位置B2。在位置A1处的候选被添加之后,剩余候选的***经受冗余检查,该冗余检查确保具有相同运动信息的候选从列表中排除,以便提高编解码效率。为了降低计算复杂度,在所提到的冗余检查中并没有考虑所有可能的候选对。相反,仅考虑图13中用箭头链接的对,并且如果用于冗余检查的对应候选不具有相同的运动信息,则候选仅被添加到列表。
在***空域候选之后,如果IBC Merge列表尺寸仍然小于最大IBC Merge列表尺寸,则可以***来自HMVP表的IBC候选。在***HMVP候选时执行冗余检查。
最终,成对平均候选被***到IBC Merge列表中。
当由Merge候选标识的参考块在图片之外,或者与当前块重叠,或者在重构区域之外,或者在受一些约束限制的有效区域之外时,该Merge候选被称为无效Merge候选。
注意,无效Merge候选可以被***到IBC Merge列表中。
2.3.2IBC AMVP模式
在IBC AMVP模式下,从比特流中解析指向IBC AMVP列表中的条目的AMVP索引。IBCAMVP列表的构建可以根据以下步骤顺序进行总结:
·步骤1:推导空域候选
o检查A0、A1,直到找到可用候选。
o检查B0、B1、B2,直到找到可用候选。
·步骤2:***HMVP候选
·步骤3:***零候选
在***空域候选之后,如果IBC AMVP列表尺寸仍然小于最大IBC AMVP列表尺寸,则可以***HMVP表中的IBC候选。
最后,零候选被***到IBC AMVP列表中。
2.4调色板模式
调色板模式背后的基本思想是CU中的样点由代表性色彩值的小集合表示。该集合被称为调色板。也可以通过信令通知逸出符号(escape symbol)(其后是(可能是量化的)分量值)来指示调色板之外的样点。这在图2中示出。
2.5HEVC屏幕内容编解码扩展(HEVC-SCC)中的调色板模式
在HEVC-SCC中的调色板模式下,使用预测方式对调色板和索引图进行编解码。
2.5.1调色板条目的编解码
对于调色板条目的编解码,保持调色板预测值。调色板的最大尺寸以及调色板预测值在SPS中被信令通知。在HEVC-SCC中,在PPS中引入了palette_predictor_initializer_present_flag。当该标志为1时,用于初始化调色板预测值的条目在比特流中信令通知。调色板预测值在每个CTU行、每个条带和每个片的开头初始化。根据palette_predictor_initializer_present_flag的值,调色板预测值被重置为0或使用PPS中信令通知的调色板预测值初始化器条目进行初始化。在HEVC-SCC中,启用了尺寸为0的调色板预测值初始化器,以允许在PPS级别显式禁用调色板预测值初始化。
对于调色板预测值中的每个条目,信令通知重用标志,以指示它是否是当前调色板的一部分。这在图3中示出。使用零的游程长度编解码来传送重用标志。此后,新调色板条目的数量使用0阶的指数Golomb码来信令通知。最终,新调色板条目的分量值被信令通知。
2.5.2调色板索引的编解码
如图4所示,使用水平和垂直遍历扫描对调色板索引进行编解码。使用palette_transpose_flag在比特流中显式信令通知扫描顺序。对于该子章节的其余部分,假设扫描为水平。
调色板索引使用两种主要的调色板样点模式进行编解码:“INDEX”和“COPY_ABOVE”。如前所解释的,逸出符号也作为“INDEX”模式被信令通知,并被分配等于最大调色板尺寸的索引。除了顶行或先前模式为“COPY_ABOVE”时,该模式使用标志来信令通知。在“COPY_ABOVE”模式下,复制上面行中的样点的调色板索引。在“INDEX”模式下,调色板索引是显式信令通知的。对于“INDEX”和“COPY_ABOVE”模式两者,指定也使用相同模式进行编解码的后续样点的数量的游程值被信令通知。当逸出符号是“INDEX”或“COPY_ABOVE”模式下的游程的一部分时,针对每个逸出符号信令通知逸出分量值。调色板索引的编解码在图5中示出。
该语法顺序按如下方式完成。首先,信令通知CU的索引值的数量。随后是使用截断二进制编解码的整个CU的实际索引值的信令通知。索引数量以及索引值都在旁路模式下进行编解码。这将索引相关的旁路二进制位分组在一起。然后调色板样点模式(如有必要)和游程以交错方式信令通知。最终,对应于整个CU的逸出样点的分量逸出值被分组在一起,并在旁路模式下进行编解码。
附加语法元素,last_run_type_flag,在信令通知索引值之后被信令通知。该语法元素与索引的数量相结合,消除了信令通知与块中的最后游程相对应的游程值的需要。
在HEVC-SCC中,也针对4:2:2、4:2:0和单色色度格式启用调色板模式。对于所有色度格式,调色板条目和调色板索引的信令通知几乎是相同的。在非单色格式的情况下,每个调色板条目由3个分量组成。对于单色格式,每个调色板条目由单个分量组成。对于子采样色度方向,色度样点与可被2整除的亮度样点索引相关联。在为CU重构调色板索引后,如果样点只有与其相关联的单个分量,则只使用调色板条目的第一分量。信令通知的唯一差别是逸出分量值。对于每个逸出样点,根据与该样点相关联的分量的数量,信令通知的逸出分量值的数量可能不同。
2.6变换跳过模式下的系数编解码
在JVET-M0464和JVET-N0280中,为了使残差编解码适应变换跳过级别的统计和信号特征,对变换跳过(TS)模式下的系数编解码提出了几个修改。
提议的修改列出如下。
没有最后的显著扫描位置:由于残差信号反映了预测之后的空域残差,并且没有对TS执行通过变换的能量集中,所以不再给出在变换块的右下角的尾随零或不显著级别的更高概率。因此,在这种情况下,省略了最后显著扫描位置信令。相反,要处理的第一子块是变换块内的最右底部子块
子块CBF:最后显著扫描位置信令的缺失要求TS的具有coded_sub_block_flag的子块CBF信令被修改如下:
·由于量化,前述无意义序列可能仍然局部地出现在变换块内。因此,如上所述移除最后显著扫描位置,并为所有子块编解码coded_sub_block_flag。
·覆盖DC频率位置的子块(左顶部子块)的coded_sub_block_flag呈现了特殊情况。在VVC草案3中,该子块的coded_sub_block_flag从不被信令通知并且总是被推断为等于1。当最后显著扫描位置位于另一个子块中时,这意味着在DC子块之外有至少一个显著级别。因此,DC子块可以只包含零/非显著级别,尽管该子块的coded_sub_block_flag被推断为等于1。在TS中缺失最后扫描位置信息的情况下,每个子块的coded_sub_block_flag被信令通知。这还包括DC子块的coded_sub_block_flag,除了当所有其他coded_sub_block_flag语法元素已经等于0时。在这种情况下,DC coded_sub_block_flag被推断为等于1(inferDcSbCbf=1)。因为在该DC子块中必须有至少一个显著级别,所以如果该DC子块中的所有其他sig_coeff_flag语法元素都等于0,则反而(0,0)处的第一位置的sig_coeff_flag语法元素不被信令通知并被推导为等于1(injectsbdcsigcoefflag=1)。
·coded_sub_block_flag的上下文建模被改变。上下文模型索引被计算为当前子块的左边的coded_sub_block_flag和上方的coded_sub_block_flag之和,而不是两者的逻辑析取(disjunction)。
sig_coeff_flag上下文建模:修改sig_coeff_flag上下文建模中的局部模板,以仅包括当前扫描位置左边的邻居(NB0)和上方的邻居(NB1)。上下文模型偏移只是重要邻近位置sig_coeff_flag[NB0]+sig_coeff_flag[NB1]的数量。因此,根据当前变换块内的对角线d的不同上下文集的选择被移除。这产生了三个上下文模型和用于编解码sig_coeff_flag标志的单个上下文模型集。
abs_level_gt1_flag和par_level_flag上下文建模:对abs_level_gt1_flag和par_level_flag采用单个上下文模型。
abs_remainder编解码:尽管变换跳过残差绝对级别的经验分布通常仍然符合拉普拉斯或几何分布,但是存在比变换系数绝对级别更大的不稳定性。具体地,对于残差绝对级别,连续实现窗口内的方差更高。这激发了对abs_remainder语法二值化和上下文建模的以下修改:
·在二值化中使用更高的截止值(即,从利用sig_coeff_flag、abs_level_gt1_flag、par_level_flag和abs_level_gt3_flag的编解码到abs_remainder的Rice码的转变点)、以及每个二进制位位置的专用上下文模型产生更高的压缩效率。增加截止值将导致更多的“大于X”标志,例如引入abs_level_gt5_flag、abs_level_gt7_flag等,直到达到截止值。截止值本身固定为5(numGtFlags=5)。
·修改Rice参数推导的模板,即仅当前扫描位置的左边的邻居和上方的邻居被认为类似于sig_coeff_flag上下文建模的局部模板。
coeff_sign_flag上下文建模:由于记号序列内的不稳定性以及预测残差常常偏置的事实,即使当全局经验分布几乎均匀分布时,也可以使用上下文模型对记号进行编解码。单个专用上下文模型用于记号的编解码,并且符号在sig_coeff_flag之后被解析,以将所有上下文编解码二进制位保持在一起。
2.7量化残差块差分脉冲码调制(QR-BDPCM)
在JVET-M0413中,提出了量化残差块差分脉冲码调制(QR-BDPCM)来有效编解码屏幕内容。
QR-BDPCM中使用的预测方向可以是垂直和水平预测模式。通过在类似于帧内预测的预测方向(水平或垂直预测)上的样点复制,对整个块进行帧内预测。残差被量化,量化残差与其预测值(水平或垂直)量化值之间的增量(delta)被编解码。这可以通过以下进行描述:对于尺寸为M(行)×N(列)的块,假设ri,j,0≤i≤M-1,0≤j≤N-1是在使用来自上方或左边块边界样点的未滤波样点水平地(跨预测块逐线复制左边邻近像素值)或垂直地(在预测块中将顶部邻近线复制到每条线)执行帧内预测之后的预测残差。假设Q(ri,j),0≤i≤M-1,0≤j≤N-1表示残差ri,j的量化版本,其中残差是原始块和预测块值之间的差。然后将块DPCM应用于量化残差样点,得到具有元素的修改后的M×N阵列当信令通知垂直BDPCM时:
对于水平预测,应用类似的规则,通过以下获得残差量化样点
在解码器侧,使上面计算相反,以产生Q(ri,j),0≤i≤M-1,0≤j≤N-1。对于垂直预测情况,
对于水平情况,
逆量化残差Q-1(Q(ri,j))被添加到帧内块预测值,以产生重构样点值。
该方案的主要好处是,在系数解析期间可以动态地执行逆DPCM,只要在解析系数时添加预测值,或者其可以在解析之后被执行。
QR-BDPCM的草案文本改变如下所示。
7.3.6.5编解码单元语法
等于1的bdpcm_flag[x0][y0]指定bdpcm_dir_flag存在于包括位置(x0,y0)处的亮度编解码块的编解码单元中
等于0的bdpcm_dir_flag[x0][y0]指定要在bdpcm块中使用的预测方向为水平,否则为垂直。
2.8基于矩阵的帧内预测(MIP)
基于矩阵的帧内预测也称为仿射线性加权帧内预测(ALWIP),其使用加权矩阵来推导帧内预测信号。
2.8.1方法描述
为了预测具有宽度W和高度H的矩形块的样点,仿射线性加权帧内预测(ALWIP)将块左边的H个重构邻近边界样点的一条线和块上方的W个重构邻近边界样点的一条线作为输入。如果重构样点不可用,则像在传统帧内预测中那样生成它们。
预测信号的生成基于以下三个步骤:
1.在边界样点中,通过平均提取在W=H=4的情况下的四个样点和在所有其他情况下的八个样点。
2.使用平均样点作为输入,执行矩阵矢量乘法,随后添加偏移。结果是原始块中样点的子采样集上的简化预测信号。
3.剩余位置处的预测信号是通过线性插值从子采样集上的预测信号生成的,其中该线性插值是每个方向上的单步线性插值。
生成预测信号所需的矩阵和偏移矢量取自矩阵的三个集合S0、S1、S2。集合S0由18个矩阵和18个偏移矢量组成,每个矩阵具有16行和4列,并且每个偏移矢量的尺寸为16。该集合的矩阵和偏移矢量用于尺寸为4×4.的块。集合S1由10个矩阵和10个偏移矢量组成,每个矩阵具有16行和8列,并且每个偏移矢量的尺寸为16。该集合的矩阵和偏移矢量用于尺寸为4×8、8×4和8×8的块。最终,集合S2由6个矩阵和6个偏移矢量组成,每个矩阵具有64行和8列,并且每个偏移矢量的尺寸为64。该集合的矩阵和偏移矢量或者这些矩阵和偏移矢量的一部分用于所有其他块形状。
计算矩阵矢量乘积所需的乘法总数总是小于或等于4·W·H。换句话说,对于ALWIP模式,需要每个样点最多四次乘法。
2.8.2边界的平均
在4×4块的情况下,对于0≤i<2,定义
否则,如果块宽度W给出为W=4·2k,对于0≤i<4,则定义
最终,对于子采样预测信号的插值,在大块上,需要平均边界的第二版本。也就是说,如果min(W,H)>8且W≥H,写为W=8*2l,并且对于0≤i<8,定义
2.8.3通过矩阵矢量乘法生成简化的预测信号
在简化的输入矢量bdryred中,生成简化的预测信号predred。后一个信号是在具有宽度Wred和高度Hred的下采样块上的信号。这里,Wred和Hred被定义为:
通过计算矩阵矢量乘积并添加偏移来计算简化的预测信号predred:
predred=A·bdryred+b。
这里,A是矩阵,如果W=H=4,则具有Wred·Hred行和4列,并且在所有其他情况下,具有8列。b是尺寸为Wred·Hred的矢量。
矩阵A和矢量b取自集合S0、S1、S2中的一个,如下所示。定义索引idx=idx(W,H),如下:
此外,表达m如下:
然后,如果idx≤1或idx=2并且min(W,H)>4,表达和 在idx=2并且min(W,H)=4的情况下,假设A是通过省去的每行而出现的矩阵,在W=4的情况下,其对应于下采样块中的奇数x坐标,或者在H=4的情况下,其对应于下采样块中的奇数y坐标。
最终,在以下情况下,简化的预测信号被其转置所代替:
·W=H=4并且mode≥18
·max(W,H)=8并且mode≥10
·max(W,H)>8并且mode≥6
在W=H=4的情况下,计算predred所需的乘法次数为4,因为在这种情况下A具有4列和16行。在所有其他情况下,A具有8列和Wred·Hred行,并且立即验证在这些情况下需要8·Wred·Hred≤4·W·H次乘法,即,也在这些情况下,需要每个样点最多4次乘法来计算predred。
2.8.4整个ALWIP过程的图示
在图6、图7、图8和图9中针对不同形状示出了平均、矩阵矢量乘法和线性插值的整个过程。请注意,剩余形状被视为所描述的情况之一。
1.给出4×4块,ALWIP沿着边界的每个轴取两个平均值。得到的四个输入样点进入矩阵矢量乘法。矩阵取自集合S0。在添加偏移之后,这产生16个最终预测样点。线性插值对于生成预测信号不是必需的。因此,执行每个样点总共(4·16)/(4·4)=4次乘法。
图6是4×4块的ALWIP的图示。
2.给出8×8块,ALWIP沿着边界的每个轴取四个平均值。得到的八个输入样点进入矩阵矢量乘法。矩阵取自集合S1。这在预测块的奇数位置产生16个样点。因此,执行每个样点总共8·16)/(8·8)=2次乘法。在添加偏移之后,通过使用简化的顶部边界对这些样点进行垂直插值。使用原始的左边界进行水平插值。
图7是8×8块的ALWIP的图示。
3.给出8×4块,ALWIP沿着边界的水平轴取四个平均值,并且在左边界上取四个原始边界值。得到的八个输入样点进入矩阵矢量乘法。矩阵取自集合S1。这在预测块的奇数水平和每个垂直位置上产生16个样点。因此,执行每个样点总共(8·16)/(8·4)=4次乘法。在添加偏移之后,通过使用原始左边界对这些样点进行水平插值。
图8是8×4块的ALWIP的图示。
转置后的情况被相应地对待。
4.给出16×16块,ALWIP沿着边界的每个轴取四个平均值。得到的八个输入样点进入矩阵矢量乘法。矩阵取自集合S2。这在预测块的奇数位置产生64个样点。因此,执行每个样点总共(8·64)/(16·16)=2次乘法。在添加偏移之后,通过使用顶部边界的八个平均值对这些样点进行垂直插值。使用原始的左边界进行水平插值。
图9是16×16块的ALWIP的图示。
对于更大的形状,过程基本相同,容易检查每个样点的乘法次数少于四次。
对于W×8块,其中W>8,仅需要水平插值,因为样点是在奇数水平和每个垂直位置给出的。在这种情况下,执行每个样点(8·64)/(W·8)=64/W次乘法来计算简化预测。
最终,对于W×4块,其中W>8,假设Ak是通过省去对应于沿着下采样块的水平轴的奇数条目的每行而出现的矩阵。因此,输出尺寸为32,并且再次,只剩下水平插值要执行。对于简化预测的计算,执行每个样点(8·32)/(W·4)=64/W次乘法。对于W=16,不需要附加的乘法,而对于W>16,线性插值需要每个样点少于2次乘法。因此,乘法的总数小于或等于四。
转置后的情况被相应地对待。
2.8.5单步线性插值
对于W×H块,其中max(W,H)≥8,预测信号通过线性插值从简化的预测信号出现。根据块形状,线性插值在垂直、水平或两个方向上进行。如果要在两个方向上应用线性插值,则如果W<H,首先在水平方向上应用,否则首先在垂直方向上应用。
不失一般性地考虑W×H块,其中max(W,H)≥8并且W≥H。然后,如下执行一维线性插值。不失一般性,它足以描述垂直方向上的线性插值。首先,简化的预测信号通过边界信号扩展到顶部。定义垂直上采样因子Uver=H/Hred,并且写为然后,通过以下定义扩展的简化预测信号
然后,从该扩展的简化预测信号,通过以下生成垂直线性插值预测信号
对于0≤x<Wred,0≤y<Hred并且0≤k<Uver。
仅比特移位线性插值算法不需要任何乘法。
2.8.6提出的帧内预测模式的信号化
对于帧内模式下的每个编解码单元(CU),在比特流中传送指示ALWIP模式是否将被应用于对应的预测单元(PU)的标志。如果要应用ALWIP模式,则ALWIP模式的索引predmode使用具有3个MPM的MPM列表来信令通知。
这里,如下,使用上方和左边PU的帧内模式来执行MPM的推导。有将ALWIP模式分配给每个传统的帧内预测模式predmodeAngular的三个固定的表map-angular_to_alwipidx,idx∈{0,1,2}
predmodeALWIP=map_angular_to_alwipidx[predmodeAngular].
对于具有宽度W和高度H的每个PU,定义索引
idx(PU)=idx(W,H)∈{0,1,2}
这指示如在上面第1.3节中,从三个集合中的哪一个取得ALWIP参数。
在所有其他情况下,表达
最终,提供了三个固定的默认列表listidx,idx∈{0,1,2},每个列表包含三种不同的ALWIP模式。在默认列表listidx(PU)以及模式和中,通过用默认值替换-1以及消除重复来构建三个不同的MPM。
2.8.7传统的亮度和色度帧内预测模式的自适应MPM列表推导
所提出的ALWIP模式与传统的帧内预测模式的基于MPM的编解码并置如下。传统的帧内预测模式的亮度和色度MPM列表推导过程使用固定的表map-alwip_to_angulariax,idx∈{0,1,2},将给出的PU上的ALWIP模式predmodeALWIP映射到传统的帧内预测模式之一
predmodeAngular=map_alwip_t0_angularidx(PU)[predmodeALWIP]
对于亮度MPM列表推导,无论何时遇到使用ALWIP模式predmodeALWIP的邻近亮度块,该块都被视为是否使用传统的帧内预测模式predmodeAngular。对于色度MPM列表推导,每当当前亮度块使用LWIP模式时,相同的映射用于将ALWIP模式转化为传统的帧内预测模式。
2.9色度帧内模式编解码
对于色度帧内模式编解码,允许总共8种帧内模式用于色度帧内模式编解码。这些模式包括五种传统帧内模式和三种跨分量线性模型模式。色度DM模式使用对应的亮度帧内预测模式。由于在I条带中启用亮度和色度分量的单独块分割结构,因此一个色度块可以对应于多个亮度块。因此,对于色度DM模式,直接继承覆盖当前色度块的中心位置的对应亮度块的帧内预测模式。
3.由所公开的实施例解决的技术问题的示例
尽管QR-BDPCM可以实现对屏幕内容编解码的编解码益处,但它可能仍有一些缺点。
1.QR-BDPCM模式下的预测仅限于水平帧内预测和垂直帧内预测,这可能限制QR-BDPCM模式下的预测效率。
2.为QR-BDPCM编解码块信令通知帧内预测模式,这可能增加QR-BDPCM模式的速率成本
3.当在QR-BDPCM模式下将信令通知的消息映射到预测模式时,没有考虑邻近信息
4.QR-BDPCM通过仅支持水平DPCM和垂直DPCM来表示残差,这可能包括对复杂残差块的编解码性能
5.QR-BDPCM中的残差范围可能超过其他非QR-BDPCM模式的最大范围
6.QR-BDPCM不考虑块形状
7.如何在用QR-BDPCM对亮度块进行编解码时处理色度是未知的。
4.示例实施例和技术
以下项列表应该被视为解释一般构思的示例。不应该狭隘地解释这些技术特征。此外,这些技术特征可以以任何方式组合。
1.QR-BDPCM编解码块中的样点预测可以通过基于矩阵的帧内预测(MIP)方法来生成。
a.在一个示例中,当对一个块启用QR-BDPCM和MIP两者时,限制仅支持MIP中的部分允许模式。
i.在一个示例中,部分允许模式可以包括可以被映射到水平和/或垂直正常帧内模式的、与基于矩阵的帧内预测方法相关联的那些模式。
ii.在一个示例中,部分允许模式可以仅包括可以被映射到水平和/或垂直正常帧内模式的、与基于矩阵的帧内预测方法相关联的那些模式。
b.在一个示例中,当对一个块启用QR-BDPCM和MIP两者时,支持MIP中的所有允许模式。
2.QR-BDPCM编解码块中的样点预测可以通过除了垂直/水平帧内预测之外的帧内预测模式来生成。
a.在一个示例中,QR-BDPCM编解码块中的样点可以通过帧内预测模式K来预测
i.在一个示例中,K可以是平面模式
ii.在一个示例中,K可以是DC模式
iii.在一个示例中,K可以是水平模式
iv.在一个示例中,K可以是垂直模式
v.在一个示例中,K可以是最可能模式列表中的一个候选。
vi.在一个示例中,K可以在比特流中被信令通知
b.QR-BDPCM的允许的帧内预测模式可以基于
i.在SPS/VPS/PPS/图片头/条带头/片组头/LCU行/LCU组中信令通知的消息
ii.当前块和/或其邻近块的块大小
iii.当前块和/或其邻近块的块形状
iv.当前块的邻近块的预测模式(帧内/帧间)
v.当前块的邻近块的帧内预测模式
vi.当前块的邻近块的QR-BDPCM模式的指示
vii.当前块和/或其邻近块的当前量化参数
viii.色彩格式(诸如4:2:0、4:4:4)的指示
ix.单独编解码树结构/双编解码树结构
x.条带/片组类型和/或图片类型
3.QR-BDPCM编解码块中的样点预测可以通过非相邻样点生成。
a.在一个示例中,对于IBC Merge模式,也可以启用QR-BDPCM。
b.在一个示例中,对于IBC AMVP模式,也可以启用QR-BDPCM。
c.在IBC和QR-BDPCM中使用的块矢量可以被信令通知或推导或预定义。
i.在一个示例中,IBC模式可以由运动矢量(块矢量)和/或Merge索引指示。
ii.在一个示例中,IBC模式可以由默认运动矢量指示。
1.在一个示例中,默认运动矢量可以为(-w,0),其中w是正整数
2.在一个示例中,默认运动矢量可以为(0,-h),其中h是正整数
3.在一个示例中,默认运动矢量可以为(-w,-h),其中w和h是两个正整数
iii.在一个示例中,在IBC和QP-BPDCM编解码块中使用的运动矢量的指示可以基于:
1.在SPS/VPS/PPS/图片头/条带头/片组头/LCU行/LCU组中信令通知的消息
2.当前块和/或其邻近块的块大小
3.当前块和/或其邻近块的块形状
4.当前块的邻近块的预测模式(帧内/帧间)
5.当前块的邻近块的运动矢量
6.当前块的邻近块的QR-BDPCM模式的指示
7.当前块和/或其邻近块的当前量化参数
8.色彩格式(诸如4:2:0、4:4:4)的指示
9.单独编解码树结构/双编解码树结构
10.条带/片组类型和/或图片类型
d.在一个示例中,QR-BDPCM模式中的样点预测可以由帧间预测工具(例如,仿射模式、Merge模式和帧间模式)生成
4.QR-BDPCM中的量化残差预测方向的指示可以被动态地推导。
a.在一个示例中,QR-BDPCM中的量化残差预测方向的指示可以基于当前帧内预测模式的指示来推断
i.在一个示例中,当帧内预测模式是垂直时,QR-BDPCM中的量化残差预测的方向可以被推断为垂直
ii.在一个示例中,当帧内预测模式是水平时,QR-BDPCM中的量化残差预测的方向可以被推断为水平
iii.在一个示例中,当帧内预测模式是水平时,QR-BDPCM中的量化残差预测的方向可以被推断为垂直
iv.在一个示例中,当帧内预测模式是垂直时,QR-BDPCM中的量化残差预测的方向可以被推断为水平
b.在一个示例中,QR-BDPCM中的量化残差预测方向的指示可以基于
i.在SPS/VPS/PPS/图片头/条带头/片组头/LCU行/LCU组中信令通知的消息
ii.当前块和/或其邻近块的块大小
iii.当前块和/或其邻近块的块形状
iv.当前块和/或其邻近块的最可能模式
v.当前块的邻近块的预测模式(帧内/帧间)
vi.当前块的邻近块的帧内预测模式
vii.当前块的邻近块的运动矢量
viii.当前块的邻近块的QR-BDPCM模式的指示
ix.当前块和/或其邻近块的当前量化参数
x.色彩格式(诸如4:2:0、4:4:4)的指示
xi.单独编解码树结构/双编解码树结构
xii.应用于当前块的变换类型
xiii.条带/片组类型和/或图片类型5.从QR-BDPCM中的信令通知的索引到QR-BDPCM模式中的帧内预测模式的映射可以基于
a.在SPS/VPS/PPS/图片头/条带头/片组头/LCU行/LCU组中信令通知的消息
b.当前块和/或其邻近块的块大小
c.当前块和/或其邻近块的块形状
d.当前块和/或其邻近块的最可能模式
e.当前块的邻近块的预测模式(帧内/帧间)
f.当前块的邻近块的帧内预测模式
g.当前块的邻近块的运动矢量
h.当前块的邻近块的QR-BDPCM模式的指示
i.当前块和/或其邻近块的当前量化参数
j.色彩格式(诸如4:2:0、4:4:4)的指示
k.单独编解码树结构/双编解码树结构
l.应用于当前块的变换类型
m.条带/片组类型和/或图片类型
a.在一个示例中,可以支持45度QR-BDPCM。
b.在一个示例中,可以支持135度QR-BDPCM。
c.在一个示例中,可以在QR-BDPCM中支持任何方向。
1.在一个示例中,m和/或n可以在比特流中被信令通知
2.在一个示例中,m和/或n可以是整数,并且可以基于
3.在SPS/VPS/PPS/图片头/条带头/片组头/LCU行/LCU组中信令通知的消息
4.i和/或j
5.当前块和/或其邻近块的块大小
6.当前块和/或其邻近块的块形状
7.当前块和/或其邻近块的最可能模式
8.当前块的邻近块的预测模式(帧内/帧间)
9.当前块的邻近块的帧内预测模式
10.当前块的邻近块的运动矢量
11.当前块的邻近块的QR-BDPCM模式的指示
12.当前块和/或其邻近块的当前量化参数
13.色彩格式(诸如4:2:0、4:4:4)的指示
14.单独编解码树结构/双编解码树结构
15.条带/片组类型和/或图片类型
7.QR-BDPCM可以被应用于色度块(例如,Cb/Cr或B/R色彩分量)。
a.在一个示例中,亮度和色度QR-BDPCM编解码块的允许帧内预测方向可以相同,例如,仅水平和垂直。
b.在一个示例中,亮度和色度QR-BDPCM编解码块的允许预测方法可以相同,例如,IBC/帧间/水平和垂直帧内预测模式。
c.在一个示例中,亮度和色度QR-BDPCM编解码块的允许残差预测方向可以相同。
d.在一个示例中,色度QR-BDPCM的残差预测方向可以从对应亮度块的残差预测方向推导。
i.在一个示例中,对应亮度块可以是并置亮度块。
ii.在一个示例中,对应亮度块可以是包含色度块的左上角的并置样点的亮度块。
iii.在一个示例中,对应亮度块可以是包含色度块的中心样点的并置样点的亮度块。
e.在一个示例中,CCLM和QR-BDPCM不能被应用于相同色度块。
i.可替代地,CCLM也可以适用于QR-BDPCM编解码块。
f.在一个示例中,联合色度残差编解码(例如,联合cb和cr编解码)方法和QR-BDPCM不能被应用于相同色度块。
8.QR-BDPCM中的重构量化残差可以被限制在特定范围内。
b.在一个示例中,可以添加所有重构量化残差(例如,等式2-7-3和2-7-4中的Q(ri,j))可以在特定范围内的约束。
d.在一个示例中,裁剪操作可以被应用于重构量化残差差(例如,等式2-7-3和2-7-4中的Q(ri,j)),使得重构量化残差可以在特定范围内。
e.在一个示例中,裁剪操作可以被定义为(x<min?min:(x>max?max:x))
f.在一个示例中,裁剪操作可以被定义为(x<=min?min:(x>=max?max:x))
g.在一个示例中,裁剪操作可以被定义为(x<min?min:(x>=max?max:x))
h.在一个示例中,裁剪操作可以被定义为(x<=min?min:(x>max?max:x))
i.在一个示例中,min和/或max可以是负的或正的
j.在一个示例中,min被设置为-32768,并且max被设置为32767。
i.可替代地,min和/或max可以取决于没有用QR-BDPCM编解码的块的逆量化的范围。
ii.可替代地,min和/或max可以取决于输入样点/重构样点的比特深度。
iii.可替代地,min和/或max可以取决于是否使用无损编解码。
1.在一个示例中,min和/或max可以取决于transquant_bypass_enabled_flag。
2.在一个示例中,min和/或max可以取决于cu_transquant_bypass_flag。
k.在一个示例中,min和/或max可以基于
i.在SPS/VPS/PPS/图片头/条带头/片组头/LCU行/LCU组中信令通知的消息
ii.当前块和/或其邻近块的块大小
iii.当前块和/或其邻近块的块形状
iv.当前块和/或其邻近块的最可能模式
v.当前块的邻近块的预测模式(帧内/帧间)
vi.当前块的邻近块的帧内预测模式
vii.当前块的邻近块的运动矢量
viii.当前块的邻近块的QR-BDPCM模式的指示
ix.当前块和/或其邻近块的当前量化参数
x.色彩格式(诸如4:2:0、4:4:4)的指示
xi.单独编解码树结构/双编解码树结构
xii.应用于当前块的变换类型
xiii.条带/片组类型和/或图片类型9.可以从块的最后一行/列到第一行/列应用QR-DPCM。
a.在一个示例中,当残差预测方向为水平时,第(i+1)列的残差可以用于预测第i列的残差。
b.在一个示例中,当残差预测方向为垂直时,第(i+1)行的残差可以用于预测第i行的残差。
10.QR-DPCM可以被应用于块的子集。
a.在一个示例中,当残差预测方向为水平时,QR-DPCM不适用于残差的最左边k列。
b.在一个示例中,当残差预测方向为垂直时,QR-DPCM不适用于残差的最上方k行。
c.在一个示例中,当残差预测方向为水平时,QR-DPCM不适用于残差的最右边k列。
d.在一个示例中,当残差预测方向为垂直时,QR-DPCM不适用于残差的最底部k行。
e.上述k的值可以是预定义值,基于
i.在SPS/VPS/PPS/图片头/条带头/片组头/LCU行/LCU组中信令通知的消息
ii.当前块和/或其邻近块的块大小
iii.当前块和/或其邻近块的块形状
iv.当前块和/或其邻近块的最可能模式
v.当前块的邻近块的预测模式(帧内/帧间)
vi.当前块的帧内预测模式
vii.当前块的邻近块的帧内预测模式
viii.当前块的邻近块的运动矢量
ix.当前块的邻近块的QR-BDPCM模式的指示
x.当前块和/或其邻近块的当前量化参数
xi.色彩格式(诸如4:2:0、4:4:4)的指示
xii.单独编解码树结构/双编解码树结构
xiii.应用于当前块的变换类型
xiv.条带/片组类型和/或图片类型11.可以对块逐段应用QR-DPCM
a.在一个示例中,当残差预测方向为垂直并且N=nK时,残差预测可以被执行为
b.在一个示例中,当残差预测方向为水平并且M=mK时,残差预测可以被执行为
12.对一个色彩分量启用/禁用QR-DPCM可以从与另一个色彩分量相关联的推导。
a.在一个示例中,对于色度块,是否启用QR-DPCM可以取决于与并置亮度块内的一个或多个代表性块相关联的QR-
DPCM的使用。
i.在一个示例中,可以以与用于DM推导相同的方式定义代表性块。
ii.在一个示例中,如果并置亮度块内的代表性块是QR-DPCM编解码的,并且当前色度块是以DM模式编解码的,则也可以对当前色度块启用QR-DPCM。
b.可替代地,可以针对色度分量信令通知QR-DPCM的使用的指示。
i.在一个示例中,可以信令通知一个标志以指示对两个色度分量的使用。
ii.可替代地,可以信令通知两个标志以分别指示对两个色度分量的使用。
iii.在一个示例中,当色度块以特定模式(诸如CCLM)编解码时,跳过信令通知QR-DPCM的使用的指示。
13.以上方法也可以适用于DPCM/QR-DPCM的其他变化。
5.参考
[1]ITU-T and ISO/IEC,“High efficiency video coding”,Rec.ITU-T H.265|ISO/IEC 23008-2(02/2018).
[2]B.Bross,J.Chen,S.Liu,Versatile Video Coding(Draft 4),JVET-M1001,Jan.2019
图1000是视频处理装置1000的框图。装置1000可以用于实施本文描述的一个或多个方法。装置1000可以体现在智能手机、平板电脑、计算机、物联网(IoT)接收器等中。装置1000可以包括一个或多个处理器1002、一个或多个存储器1004和视频处理硬件1006。(多个)处理器1002可以被配置为实施本文档中描述的一种或多种方法。存储器(多个存储器)1004可以用于存储用于实施本文描述的方法和技术的数据和代码。视频处理硬件1006可以用于在硬件电路***中实施本文档中描述的一些技术。
图11是视频处理的示例方法1100的流程图。方法1100包括使用差分编解码模式并选择性地使用基于共存规则的帧内预测模式来执行当前视频块和当前视频块的比特流表示之间的转换(1102)。帧内预测模式用于生成当前视频块的样点的预测。差分编解码模式用于使用差分脉冲编解码调制表示来表示来自像素的预测的量化残差块。
图14是示出可以在其中实施本文公开的各种技术的示例视频处理***1400的框图。各种实施方式可以包括***1400的一些或所有组件。***1400可以包括用于接收视频内容的输入1402。视频内容可以以例如8或10比特多分量像素值的原始或未压缩格式而接收,或者可以是压缩或编码格式。输入1402可以表示网络接口、***总线接口或存储接口。网络接口的示例包括诸如以太网、无源光网络(Passive Optical Network,PON)等的有线接口和诸如Wi-Fi或蜂窝接口的无线接口。
***1400可以包括可以实施本文档中描述的各种编解码或编码方法的编解码组件1404。编解码组件1404可以将来自输入1402的视频的平均比特率减小到编解码组件1404的输出,以产生视频的编解码表示。编解码技术因此有时被称为视频压缩或视频转码技术。编解码组件1404的输出可以被存储,或者经由如由组件1406表示的通信连接而发送。在输入1402处接收的视频的存储或通信传送的比特流(或编解码)表示可以由组件1408用于生成像素值或传送到显示接口1410的可显示视频。从比特流表示生成用户可视视频的过程有时被称为视频解压缩。此外,虽然特定视频处理操作被称为“编解码”操作或工具,但是将理解,编解码工具或操作在编码器处被使用,并且反转编解码结果的对应的解码工具或操作将由解码器执行。
***总线接口或显示接口的示例可以包括通用串行总线(USB)、或高清晰度多媒体接口(High Definition Multimedia Interface,HDMI)、或显示端口(Displayport)等。存储接口的示例包括SATA(Serial Advanced Technology Attachment,串行高级技术附件)、PCI、IDE接口等。本文档中描述的技术可以体现在各种电子设备中,诸如移动电话、膝上型电脑、智能电话、或能够执行数字数据处理和/或视频显示的其他设备。
所公开技术的一些实施例包括做出启用视频处理工具或模式的决定或确定。在示例中,当视频处理工具或模式被启用时,编码器将在视频块的处理中使用或实施该工具或模式,但是不一定基于工具或模式的使用来修改产生的比特流。也就是说,当基于决定或确定启用视频处理工具或模式时,从视频的块到视频的比特流表示的转换将使用该视频处理工具或模式。在另一示例中,当视频处理工具或模式被启用时,解码器将在知道比特流已经基于视频处理工具或模式而修改的情况下处理比特流。也就是说,将使用基于该决定或该确定而启用的视频处理工具或模式来执行从视频的比特流表示到视频的块的转换。
所公开技术的一些实施例包括做出禁用视频处理工具或模式的决定或确定。在示例中,当视频处理工具或模式被禁用时,编码器将不在视频的块到视频的比特流表示的转换中使用该工具或模式。在另一示例中,当视频处理工具或模式被禁用时,解码器将在知道比特流还没有使用基于该决定或该确定而禁用的视频处理工具或模式而修改的情况下处理比特流。
图15是示出可以利用本公开的技术的示例视频编解码***100的框图。如图15所示,视频编解码***100可以包括源设备110和目标设备120。源设备110生成编码视频数据,其中该源设备110可以被称为视频编码设备。目标设备120可以解码由源设备110生成的编码视频数据,目标设备120可以被称为视频解码设备。源设备110可以包括视频源112、视频编码器114和输入/输出(I/O)接口116。
视频源112可以包括源,诸如视频捕捉设备、从视频内容提供器接收视频数据的接口、和/或用于生成视频数据的计算机图形***、或这些源的组合。视频数据可以包括一个或多个图片。视频编码器114对来自视频源112的视频数据进行编码,以生成比特流。比特流可以包括形成视频数据的编解码表示的比特序列。比特流可以包括编解码图片和相关数据。编解码图片是图片的编解码表示。相关数据可以包括序列参数集、图片参数集和其他语法结构。I/O接口116可以包括调制器/解调器(调制解调器)和/或发射器。编码视频数据可以通过网络130a经由I/O接口116直接传输到目标设备120。编码视频数据也可以存储在存储介质/服务器130b上,以供目标设备120访问。
目标设备120可以包括I/O接口126、视频解码器124和显示设备122。
I/O接口126可以包括接收器和/或调制解调器。I/O接口126可以从源设备110或存储介质/服务器130b获取编码视频数据。视频解码器124可以对编码视频数据进行解码。显示设备122可以向用户显示解码视频数据。显示设备122可以与目标设备120集成,或者可以在被配置为与外部显示设备接口的目标设备120的外部。
视频编码器114和视频解码器124可以根据视频压缩标准进行操作,例如高效视频编解码(HEVC)标准、多功能视频编解码(VVM)标准和其他当前和/或另外的标准。
图16是示出视频编码器200的示例的框图,视频编码器200可以是图15所示的***100中的视频编码器114。
视频编码器200可以被配置为执行本公开的任何或所有技术。在图16的示例中,视频编码器200包括多个功能组件。本公开中描述的技术可以在视频编码器200的各种组件之间共享。在一些示例中,处理器可以被配置为执行本公开中描述的任何或所有技术。
视频编码器200的功能组件可以包括分割单元201、预测单元202(其可以包括模式选择单元203、运动估计单元204、运动补偿单元205和帧内预测单元206)、残差生成单元207、变换单元208、量化单元209、逆量化单元210、逆变换单元211、重构单元212、缓冲区213和熵编码单元214。
在其他示例中,视频编码器200可以包括更多、更少或不同的功能组件。在示例中,预测单元202可以包括帧内块复制(IBC)单元。IBC单元可以执行IBC模式下的预测,其中至少一个参考图片是当前视频块所在的图片。
此外,诸如运动估计单元204和运动补偿单元205的一些组件可以高度集成,但是为了解释的目的,在图16的示例中分开表示。
分割单元201可以将图片分割为一个或多个视频块。视频编码器200和视频解码器300可以支持各种视频块尺寸。
模式选择单元203可以基于误差结果选择编解码模式(例如,帧内或帧间)之一,并且将作为结果的帧内编解码块或帧间编解码块提供给残差生成单元207以生成残差块数据,以及提供给重构单元212以重构编码块以用作参考图片。在一些示例中,模式选择单元203可以选择帧内和帧间预测模式的组合(CIIP),其中预测基于帧间预测信号和帧内预测信号。在帧间预测的情况下,模式选择单元203还可以选择块的运动矢量的分辨率(例如,子像素或整数像素精度)。
为了对当前视频块执行帧间预测,运动估计单元204可以通过将来自缓冲区213的一个或多个参考帧与当前视频块进行比较,来生成当前视频块的运动信息。运动补偿单元205可以基于运动信息和来自缓冲区213的除了与当前视频块相关联的图片之外的图片的解码样点,来确定当前视频块的预测视频块。
运动估计单元204和运动补偿单元205可以对当前视频块执行不同的操作,例如,取决于当前视频块是在I条带、P条带还是B条带中。
在一些示例中,运动估计单元204可以对当前视频块执行单向预测,并且运动估计单元204可以为当前视频块的参考视频块搜索列表0或列表1的参考图片。运动估计单元204然后可以生成指示列表0或列表1中的参考图片的参考索引,该参考索引包含参考视频块和指示当前视频块和参考视频块之间的空域位移的运动矢量。运动估计单元204可以输出参考索引、预测方向指示符和运动矢量作为当前视频块的运动信息。运动补偿单元205可以基于由当前视频块的运动信息指示的参考视频块来生成当前块的预测视频块。
在其他示例中,运动估计单元204可以对当前视频块执行双向预测,运动估计单元204可以在列表0中的参考图片中搜索当前视频块的参考视频块,并且还可以在列表1中搜索当前视频块的另一个参考视频块。运动估计单元204然后可以生成参考索引,该参考索引指示包含参考视频块的列表0和列表1中的参考图片以及指示参考视频块和当前视频块之间的空域位移的运动矢量。运动估计单元204可以输出当前视频块的参考索引和运动矢量作为当前视频块的运动信息。运动补偿单元205可以基于由当前视频块的运动信息指示的参考视频块来生成当前视频块的预测视频块。
在一些示例中,运动估计单元204可以输出完整的运动信息集,以用于解码器的解码处理。
在一些示例中,运动估计单元204可以不输出当前视频的完整的运动信息集。而是运动估计单元204可以参考另一个视频块的运动信息信令通知当前视频块的运动信息。例如,运动估计单元204可以确定当前视频块的运动信息与邻近视频块的运动信息足够相似。
在一个示例中,运动估计单元204可以在与当前视频块相关联的语法结构中指示值,该值向视频解码器300指示当前视频块具有与另一个视频块相同的运动信息。
在另一示例中,运动估计单元204可以在与当前视频块相关联的语法结构中标识另一视频块和运动矢量差(MVD)。运动矢量差指示当前视频块的运动矢量和所指示的视频块的运动矢量之间的差。视频解码器300可以使用所指示的视频块的运动矢量和运动矢量差来确定当前视频块的运动矢量。
如上所讨论的,视频编码器200可以预测性地信令通知运动矢量。可以由视频编码器200实施的预测信令通知技术的两个示例包括高级运动矢量预测(AMVP)和Merge模式信令通知。
帧内预测单元206可以对当前视频块执行帧内预测。当帧内预测单元206对当前视频块执行帧内预测时,帧内预测单元206可以基于相同图片中的其他视频块的解码样点来生成当前视频块的预测数据。当前视频块的预测数据可以包括预测视频块和各种语法元素。
残差生成单元207可以通过从当前视频块中减去(例如,由减号指示)当前视频块的(多个)预测视频块来生成当前视频块的残差数据。当前视频块的残差数据可以包括与当前视频块中样点的不同样点分量相对应的残差视频块。
在其他示例中,例如在跳过模式中,对于当前视频块可能没有当前视频块的残差数据,并且残差生成单元207可能不执行减去操作。
变换处理单元208可以通过将一个或多个变换应用于与当前视频块相关联的残差视频块来为当前视频块生成一个或多个变换系数视频块。
在变换处理单元208生成与当前视频块相关联的变换系数视频块之后,量化单元209可以基于与当前视频块相关联的一个或多个量化参数(QP)值来量化与当前视频块相关联的变换系数视频块。
逆量化单元210和逆变换单元211可以分别对变换系数视频块应用逆量化和逆变换,以从变换系数视频块重构残差视频块。重构单元212可以将重构后的残差视频块添加到来自预测单元202生成的一个或多个预测视频块的对应样点,以产生与当前块相关联的重构视频块,用于存储在缓冲区213中。
在重构单元212重构视频块之后,可以执行环路滤波操作,以减少视频块中的视频块效应。
熵编码单元214可以从视频编码器200的其他功能组件接收数据。当熵编码单元214接收到数据时,熵编码单元214可以执行一个或多个熵编码操作,以生成熵编码数据,并输出包括该熵编码数据的比特流。
图17是示出视频解码器300的示例的框图,视频解码器300可以是图15所示的***100中的视频解码器114。
视频解码器300可以被配置为执行本公开的任何或所有技术。在图17的示例中,视频解码器300包括多个功能组件。本公开中描述的技术可以在视频解码器300的各种组件之间共享。在一些示例中,处理器可以被配置为执行本公开中描述的任何或所有技术。
在图17的示例中,视频解码器300包括熵解码单元301、运动补偿单元302、帧内预测单元303、逆量化单元304、逆变换单元305以及重构单元306和缓冲区307。在一些示例中,视频解码器300可以执行通常与针对视频编码器200(图16)描述的编码过程相反的解码过程。
熵解码单元301可以检索编码比特流。编码比特流可以包括熵编解码的视频数据(例如,视频数据的编码块)。熵解码单元301可以解码熵编解码的视频数据,并且根据熵解码的视频数据,运动补偿单元302可以确定包括运动矢量、运动矢量精度、参考图片列表索引和其他运动信息的运动信息。运动补偿单元302可以例如通过执行AMVP和Merge模式来确定这样的信息。
运动补偿单元302可以产生运动补偿块,可以基于插值滤波器执行插值。要以子像素精度使用的插值滤波器的标识符可以包括在语法元素中。
运动补偿单元302可以使用如视频编码器20在视频块的编码期间使用的插值滤波器来计算参考块的子整数像素的插值。运动补偿单元302可以根据所接收的语法信息确定视频编码器200使用的插值滤波器,并使用该插值滤波器来产生预测块。
运动补偿单元302可以使用一些语法信息来确定用于对编码视频序列的(多个)帧和/或(多个)条带进行编码的块的尺寸、描述编码视频序列的图片的每个宏块如何被分割的分割信息、指示每个分割如何被编码的模式、每个帧间编码块的一个或多个参考帧(和参考帧列表)以及用于对编码视频序列进行解码的其他信息。
帧内预测单元303可以使用例如在比特流中接收的帧内预测模式来从空域上相邻的块形成预测块。逆量化单元303对在比特流中提供并由熵解码单元301解码的量化后的视频块系数进行逆量化,即,解量化。逆变换单元303应用逆变换。
重构单元306可以将残差块与由运动补偿单元202或帧内预测单元303生成的对应预测块相加,以形成解码块。如果需要,还可以应用去块滤波器来滤波解码块,以便移除块效应。解码的视频块然后被存储在缓冲区307中,为随后的运动补偿/帧内预测提供参考块,并且还产生解码的视频以在显示设备上呈现。
在一些实施例中,在ALWIP模式或MIP模式下,当前视频块的预测块通过按行和列平均来确定,随后是矩阵乘法,随后是插值以确定预测块。
图18是视频处理的示例方法1800的流程图。方法1800包括基于适用性规则来确定差分编解码模式适用于视频的色度视频块和色度视频块的比特流表示之间的转换1802。操作1804包括基于该确定,使用差分编解码模式来执行色度视频块和色度视频块的比特流表示之间的转换,其中在差分编解码模式下,使用色度视频块的帧内预测的量化残差和量化残差的预测之间的差在比特流表示中表示色度视频块,其中在第一方向上执行帧内预测,并且在第二方向上执行量化残差的预测,并且其中在差分编解码模式下,量化残差和量化残差的预测之间的差使用差分脉冲编解码调制(DPCM)表示来表示。
在方法1800的一些实施例中,第一方向或第二方向从垂直方向和水平方向确定。在方法1800的一些实施例中,帧内预测在第一方向上被执行,其中该第一方向与用于对与色度视频块相对应的亮度视频块执行的帧内预测的方向相同。在方法1800的一些实施例中,亮度视频块的允许的帧内预测模式与用于对与亮度视频块相对应的色度视频块执行帧内预测的模式相同。在方法1800的一些实施例中,允许用于色度视频块的量化残差的第二方向与用于与色度视频块相对应的亮度视频块的另一量化残差的方向相同。在方法1800的一些实施例中,用于量化残差的预测的第二方向基于为与色度视频块相对应的亮度视频块预测附加量化残差的第二方向。在方法1800的一些实施例中,亮度视频块与色度视频块并置。在方法1800的一些实施例中,亮度视频块包括与位于色度视频块的左上角的第二样点并置的第一样点。在方法1800的一些实施例中,亮度视频块包括与位于色度视频块的中心的第二样点并置的第一样点。
在方法1800的一些实施例中,适用性规则指定当色度视频块以跨分量线性模型(CCLM)编解码模式进行编解码时,差分编解码模式不应用于色度视频块。在方法1800的一些实施例中,适用性规则指定当色度视频块以跨分量线性模型(CCLM)编解码模式进行编解码时,差分编解码模式被应用于色度视频块。在方法1800的一些实施例中,适用性规则指定当色度视频块用联合色度残差编解码技术进行编解码时,差分编解码模式不应用于色度视频块。在方法1800的一些实施例中,色度视频块与蓝色分量或红色分量相关联。
图19是视频处理的示例方法1900的流程图。方法1900包括使用差分编解码模式并使用基于共存规则的帧内预测模式,执行视频的当前视频块和当前视频块的比特流表示之间的转换1902,其中在帧内预测模式下,当前视频块的帧内预测的量化残差基于当前视频块的样点的预测,其中在差分编解码模式下,使用量化残差和量化残差的预测之间的差在比特流表示中表示当前视频块,并且其中量化残差和量化残差的预测之间的差使用差分脉冲编解码调制(DPCM)表示来表示。
在方法1900的一些实施例中,帧内预测模式是基于矩阵的帧内预测模式(MIP),在该MIP中通过对视频的先前编解码样点执行边界下采样操作、随后是矩阵矢量乘法操作、并选择性地随后是上采样操作来确定当前视频块的样点的预测。在方法1900的一些实施例中,共存规则将MIP模式限制为MIP模式的多个允许模式中的部分允许模式。在方法1900的一些实施例中,多个允许模式中的部分允许模式包括水平帧内模式和/或垂直帧内模式。在方法1900的一些实施例中,多个允许模式中的部分允许模式仅包括水平帧内模式和/或垂直帧内模式。在方法1900的一些实施例中,共存规则指示MIP模式支持MIP模式的所有允许模式。在方法1900的一些实施例中,在帧内预测模式下,当前视频块的样点的预测通过沿着非水平方向或非垂直方向执行预测来确定。在方法1900的一些实施例中,帧内预测模式是平面或DC预测模式。在方法1900的一些实施例中,帧内预测模式是垂直预测模式或水平预测模式。在方法1900的一些实施例中,帧内预测模式从最可能模式(MPM)列表中选择。在方法1900的一些实施例中,帧内预测模式由比特流表示中的字段标识。在方法1900的一些实施例中,帧内预测模式从多个允许的帧内预测模式中选择。
在方法1900的一些实施例中,多个允许的帧内预测模式在以下中信令通知的消息中指示:序列参数集(SPS)、视频参数集(VPS)、图片参数集(PPS)、图片头、条带头、片组头、最大编解码单元(LCU)行或LCU组。在方法1900的一些实施例中,多个允许的帧内预测模式基于当前视频块或当前视频块的邻近视频块的块大小。在方法1900的一些实施例中,多个允许的帧内预测模式基于当前视频块或当前视频块的邻近视频块的形状。在方法1900的一些实施例中,多个允许的帧内预测模式基于当前视频块的邻近视频块的帧内预测模式。在方法1900的一些实施例中,多个允许的帧内预测模式基于当前视频块的邻近视频块的帧间预测模式。在方法1900的一些实施例中,多个允许的帧内预测模式基于当前视频块的邻近视频块是否使用差分编解码模式进行编解码的指示。在方法1900的一些实施例中,多个允许的帧内预测模式基于用于当前视频块或用于当前视频块的邻近视频块的量化参数的值。在方法1900的一些实施例中,多个允许的帧内预测模式基于用于对当前视频块进行编解码的色彩格式。在方法1900的一些实施例中,多个允许的帧内预测模式基于单独编解码树结构还是双编解码树结构用于对当前视频块进行编解码。在方法1900的一些实施例中,多个允许的帧内预测模式基于与当前视频块相关联的条带或片组类型或图片类型。
在方法1900的一些实施例中,在帧内预测模式下,当前视频块的样点的预测从当前视频块的邻近视频块中的非相邻样点确定。在方法1900的一些实施例中,帧内预测模式包括帧内块复制Merge模式,并且其中共存规则指示针对IBC Merge模式启用差分编解码模式。在方法1900的一些实施例中,帧内预测模式包括帧内块复制高级运动矢量预测模式,并且其中共存规则指示针对帧内块复制高级运动矢量预测模式启用差分编解码模式。在方法1900的一些实施例中,帧内预测模式包括帧内块复制模式,并且在帧内块复制模式和差分编解码模式下使用的运动矢量由比特流表示中的字段指示、或者被推导、或者被预定义。
在方法1900的一些实施例中,帧内块复制模式由运动矢量和/或Merge索引指示。在方法1900的一些实施例中,帧内块复制模式由默认运动矢量指示。在方法1900的一些实施例中,默认运动矢量为(-w,0),其中w是正整数。在方法1900的一些实施例中,默认运动矢量为(0,-h),其中h是正整数。在方法1900的一些实施例中,默认运动矢量为(-w,-h),其中w和h是两个正整数。在方法1900的一些实施例中,指示运动矢量的字段被包括在以下中信令通知的消息中:序列参数集(SPS)、视频参数集(VPS)、图片参数集(PPS)、图片头、条带头、片组头、最大编解码单元(LCU)行或LCU组。在方法1900的一些实施例中,字段中指示的运动矢量基于当前视频块或当前视频块的邻近视频块的块大小。在方法1900的一些实施例中,字段中指示的运动矢量基于当前视频块或当前视频块的邻近视频块的形状。在方法1900的一些实施例中,字段中指示的运动矢量基于当前视频块的邻近视频块的帧间预测模式或帧内预测模式。在方法1900的一些实施例中,字段中指示的运动矢量基于当前视频块的邻近视频块的运动矢量。在方法1900的一些实施例中,字段中指示的运动矢量基于当前视频块的邻近视频块是否使用差分编解码模式进行编解码的指示。
在方法1900的一些实施例中,字段中指示的运动矢量基于当前视频块或当前视频块的邻近视频块的量化参数的值。在方法1900的一些实施例中,字段中指示的运动矢量基于用于对当前视频块进行编解码的色彩格式。在方法1900的一些实施例中,字段中指示的运动矢量基于单独编解码树结构还是双编解码树结构用于对当前视频块进行编解码。在方法1900的一些实施例中,字段中指示的运动矢量基于与当前视频块相关联的条带或片组类型或图片类型。在方法1900的一些实施例中,在帧内预测模式下,当前视频块的样点的预测是使用帧间预测工具从当前视频块的邻近视频块中的非相邻样点确定的。
在方法1900的一些实施例中,共存规则指定从与差分编解码模式相关联的信令通知的索引到帧内预测模式的映射。在方法1900的一些实施例中,映射在以下中信令通知的消息中指示:序列参数集(SPS)、视频参数集(VPS)、图片参数集(PPS)、图片头、条带头、片组头、最大编解码单元(LCU)行或LCU组。在方法1900的一些实施例中,映射基于当前视频块或当前视频块的邻近视频块的块大小。在方法1900的一些实施例中,映射基于当前视频块或当前视频块的邻近视频块的形状。在方法1900的一些实施例中,映射基于当前视频块或当前视频块的邻近视频块的最可能模式(MPM)。在方法1900的一些实施例中,映射基于当前视频块的邻近视频块的帧间预测模式或帧内预测模式。在方法1900的一些实施例中,映射基于当前视频块的邻近视频块的运动矢量。在方法1900的一些实施例中,映射基于当前视频块的邻近视频块是否使用差分编解码模式进行编解码的指示。在方法1900的一些实施例中,映射基于当前视频块或当前视频块的邻近视频块的量化参数的值。在方法1900的一些实施例中,映射基于用于对当前视频块进行编解码的色彩格式。在方法1900的一些实施例中,映射基于单独编解码树结构还是双编解码树结构用于对当前视频块进行编解码。在方法1900的一些实施例中,映射基于应用于当前视频块的变换类型。在方法1900的一些实施例中,映射基于与当前视频块相关联的条带或片组类型或图片类型。
在方法1900的一些实施例中,量化残差的预测在不同于水平方向或垂直方向的残差预测方向上被执行。在方法1900的一些实施例中,残差预测方向是45度方向。在方法1900的一些实施例中,其中Q(ri,j)指示量化残差,其中指示残差量化样点,并且其中可以响应于Q(r(i-1),(j-1))可用而通过Q(ri,j)-Q(r(i-1),(j-1))推导。在方法1900的一些实施例中,残差预测方向是135度方向。在方法1900的一些实施例中,其中Q(ri,j)指示量化残差,其中指示残差量化样点,并且其中可以响应于Q(r(i-1),(j+1))可用而通过Q(ri,j)-Q(r(i-1),(j+1))推导。
在方法1900的一些实施例中,量化残差的预测在基于第一值和第二值的残差预测方向上被执行。在方法1900的一些实施例中,其中Q(ri,j)指示量化残差,其中指示残差量化样点,其中可以响应于Q(r(i-m),(j-n))可用而通过Q(ri,j)-Q(r(i-m),(j-n))推导,其中m是第一值,并且n是第二值,其中i是指示沿着当前视频块的多个行的第一位置的第三值,并且其中j是指示沿着当前视频块的多个列的第二位置的第四值。在方法1900的一些实施例中,m和n在比特流表示中被信令通知。在方法1900的一些实施例中,m和n是整数。
在方法1900的一些实施例中,m和n在包括在以下中的消息中指示:序列参数集(SPS)、视频参数集(VPS)、图片参数集(PPS)、图片头、条带头、片组头、最大编解码单元(LCU)行或LCU组。在方法1900的一些实施例中,m基于i的第三值,并且n基于j的第四值。在方法1900的一些实施例中,m的第一值和n的第二值基于当前视频块或当前视频块的邻近视频块的块大小。在方法1900的一些实施例中,m的第一值和n的第二值基于当前视频块或当前视频块的邻近视频块的形状。在方法1900的一些实施例中,m的第一值和n的第二值基于当前视频块或当前视频块的邻近视频块的最可能模式(MPM)。在方法1900的一些实施例中,m的第一值和n的第二值基于当前视频块的邻近视频块的帧间预测模式或帧内预测模式。在方法1900的一些实施例中,m的第一值和n的第二值基于当前视频块的邻近视频块的运动矢量。在方法1900的一些实施例中,m的第一值和n的第二值基于当前视频块的邻近视频块是否使用差分编解码模式进行编解码的指示。在方法1900的一些实施例中,m的第一值和n的第二值基于当前视频块或当前视频块的邻近视频块的量化参数的值。在方法1900的一些实施例中,m的第一值和n的第二值基于用于对当前视频块进行编解码的色彩格式。在方法1900的一些实施例中,m的第一值和n的第二值基于单独编解码树结构还是双编解码树结构用于对当前视频块进行编解码。在方法1900的一些实施例中,m的第一值和n的第二值基于与当前视频块相关联的条带或片组类型或图片类型。
图20是视频处理的示例方法2000的流程图。方法2000包括使用差分编解码模式来执行视频的当前视频块和当前视频块的比特流表示之间的转换2002,其中在该差分编解码模式下使用当前视频块的帧内预测的量化残差和量化残差的预测之间的差在比特流表示中表示当前视频块,其中量化残差的预测的方向可从比特流表示推断。
在方法2000的一些实施例中,量化残差的预测的方向可从用于帧内预测的帧内预测模式隐式推断。在方法2000的一些实施例中,量化残差的预测的方向可推断为与用于帧内预测模式的方向相同的方向。在方法2000的一些实施例中,方向为垂直或水平。在方法2000的一些实施例中,量化残差的预测的方向可推断为不同于用于帧内预测模式的第二方向的第一方向。在方法2000的一些实施例中,第一方向为垂直,并且第二方向为水平。在方法2000的一些实施例中,第一方向为水平,并且第二方向为垂直。
在方法2000的一些实施例中,量化残差的预测的方向可基于在以下中信令通知的消息来推断:序列参数集(SPS)、视频参数集(VPS)、图片参数集(PPS)、图片头、条带头、片组头、最大编解码单元(LCU)行或LCU组。在方法2000的一些实施例中,量化残差的预测的方向可基于当前视频块或当前视频块的邻近视频块的块大小来推断。在方法2000的一些实施例中,量化残差的预测的方向可基于当前视频块或当前视频块的邻近视频块的形状来推断。在方法2000的一些实施例中,量化残差的预测的方向可基于当前视频块或当前视频块的邻近视频块的最可能模式(MPM)来推断。在方法2000的一些实施例中,量化残差的预测的方向可基于当前视频块的邻近视频块的帧间预测模式或帧内预测模式来推断。在方法2000的一些实施例中,量化残差的预测的方向可基于当前视频块的邻近视频块的运动矢量来推断。在方法2000的一些实施例中,量化残差的预测的方向可基于当前视频块的邻近视频块是否使用差分编解码模式进行编解码的指示来推断。在方法2000的一些实施例中,量化残差的预测的方向可基于当前视频块或当前视频块的邻近视频块的量化参数的值来推断。在方法2000的一些实施例中,量化残差的预测的方向可基于用于对当前视频块进行编解码的色彩格式来推断。在方法2000的一些实施例中,量化残差的预测的方向可基于单独编解码树结构还是双编解码树结构用于对当前视频块进行编解码来推断。在方法2000的一些实施例中,量化残差的预测的方向可基于应用于当前视频块的变换类型来推断。在方法2000的一些实施例中,量化残差的预测的方向可基于与当前视频块相关联的条带或片组类型或图片类型来推断。
图21是视频处理的示例方法2100的流程图。方法2100包括确定差分编解码模式适用于视频的当前视频块和当前视频块的比特流表示之间的转换2102,以及基于该确定,根据实施规则来使用差分编解码模式执行当前视频块和当前视频块的比特流表示之间的转换2104,其中在差分编解码模式下,使用当前视频块的帧内预测的量化残差和量化残差的预测之间的差在比特流表示中表示当前视频块,并且其中在差分编解码模式下,量化残差和量化残差的预测之间的差使用差分脉冲编解码调制(DPCM)表示来表示。
在方法2100的一些实施例中,实施规则指定量化残差的值被限制在值范围内。在方法2100的一些实施例中,实施规则指定量化残差和量化残差的预测之间的差的值被限制在值范围内。在方法2100的一些实施例中,实施规则指定裁剪操作被应用于量化残差和量化残差的预测之间的差,并且裁剪操作将量化残差和量化残差的预测之间的差的值限制在值范围内。在方法2100的一些实施例中,实施规则指定裁剪操作被应用于量化残差,并且裁剪操作将量化残差的值限制在值范围内。
其中Q(ri,j)描述量化残差的值,其中M和N分别描述当前视频块的行和列,并且其中i和j分别描述沿着当前视频块的行和列的位置。
其中,Q(ri,j)描述量化残差,其中M和N分别描述当前视频块的行和列,并且其中i和j分别描述沿着当前视频块的行和列的位置。
在方法2100的一些实施例中,值中的每个值由根据以下裁剪规则的裁剪操作限制:值响应于该值小于最小值而为最小值,值响应于该值大于最大值而为最大值。在方法2100的一些实施例中,值中的每个值由根据以下裁剪规则的裁剪操作限制:值响应于该值小于或等于最小值而为最小值,并且值响应于该值大于或等于最大值而为最大值。在方法2100的一些实施例中,值中的每个值由根据以下裁剪规则的裁剪操作限制:值响应于该值小于最小值而为最小值,并且值响应于该值大于或等于最大值而为最大值。在方法2100的一些实施例中,值中的每个值由根据以下裁剪规则的裁剪操作限制:值响应于该值小于或等于最小值而为最小值,并且值响应于该值大于最大值而为最大值。
在方法2100的一些实施例中,最小值和/或最大值是正值或负值。在方法2100的一些实施例中,最小值为-32768,并且最大值为32767。在方法2100的一些实施例中,最小值和/或最大值基于与没有以差分编解码模式进行编解码的视频块的逆量化相关的另一值范围。在方法2100的一些实施例中,最小值和/或最大值基于量化残差块的输入样点或重构量化残差块的重构样点的比特深度。在方法2100的一些实施例中,最小值和/或最大值基于当前视频块用无损编解码技术进行编码还是解码。在方法2100的一些实施例中,最小值和/或最大值基于是否启用transquant旁路标志的指示,其中是否使用无损编解码技术由transquant旁路标志指示。在方法2100的一些实施例中,最小值和/或最大值基于是否启用编解码单元(CU)transquant旁路标志的指示,其中是否在CU级别使用无损编解码技术由CUtransquant旁路标志指示。在方法2100的一些实施例中,最小值和/或最大值基于在以下中信令通知的消息:序列参数集(SPS)、视频参数集(VPS)、图片参数集(PPS)、图片头、条带头、片组头、最大编解码单元(LCU)行或LCU组。
在方法2100的一些实施例中,最小值和/或最大值基于当前视频块或当前视频块的邻近视频块的块大小。在方法2100的一些实施例中,最小值和/或最大值基于当前视频块或当前视频块的邻近视频块的形状。在方法2100的一些实施例中,最小值和/或最大值基于当前视频块或当前视频块的邻近视频块的最可能模式(MPM)。在方法2100的一些实施例中,最小值和/或最大值基于当前视频块的邻近视频块的帧间预测模式或帧内预测模式。在方法2100的一些实施例中,最小值和/或最大值基于当前视频块的邻近视频块的运动矢量。在方法2100的一些实施例中,最小值和/或最大值基于当前视频块的邻近视频块是否使用差分编解码模式进行编解码的指示。在方法2100的一些实施例中,最小值和/或最大值基于当前视频块或当前视频块的邻近视频块的量化参数的值。在方法2100的一些实施例中,最小值和/或最大值基于用于对当前视频块进行编解码的色彩格式。在方法2100的一些实施例中,最小值和/或最大值基于单独编解码树结构还是双编解码树结构用于对当前视频块进行编解码。
在方法2100的一些实施例中,最小值和/或最大值基于应用于当前视频块的变换类型。在方法2100的一些实施例中,最小值和/或最大值基于与当前视频块相关联的条带或片组类型或图片类型。在方法2100的一些实施例中,实施规则指定量化残差的预测在从当前视频块的最后一行或最后一列到当前视频块的第一行或第一列的方向上被执行。在方法2100的一些实施例中,响应于方向为水平,当前视频块的第i列处的量化残差的值的预测是当前视频块的第(i+1)列处的量化残差的值。在方法2100的一些实施例中,响应于方向为垂直,当前视频块的第i行处的量化残差的值的预测是当前视频块的第(i+1)行处的量化残差的值。
在方法2100的一些实施例中,实施规则指定差分编解码模式被应用于当前视频块的子集或一部分。在方法2100的一些实施例中,实施规则指定当在水平方向上执行量化残差的预测时,差分编解码模式不应用于当前视频块的最左边k列。在方法2100的一些实施例中,实施规则指定当在垂直方向上执行量化残差的预测时,差分编解码模式不应用于当前视频块的最上方k行。在方法2100的一些实施例中,实施规则指定当在水平方向上执行量化残差的预测时,差分编解码模式不应用于当前视频块的最右边k列。在方法2100的一些实施例中,实施规则指定当在垂直方向上执行量化残差的预测时,差分编解码模式不应用于当前视频块的最底部k行。在方法2100的一些实施例中,k的值是预定义的。
在方法2100的一些实施例中,k的值在以下中信令通知的消息中指示:序列参数集(SPS)、视频参数集(VPS)、图片参数集(PPS)、图片头、条带头、片组头、最大编解码单元(LCU)行或LCU组。在方法2100的一些实施例中,k的值基于当前视频块或当前视频块的邻近视频块的块大小。在方法2100的一些实施例中,k的值基于当前视频块或当前视频块的邻近视频块的形状。在方法2100的一些实施例中,k的值基于当前视频块或当前视频块的邻近视频块的最可能模式(MPM)。在方法2100的一些实施例中,k的值基于当前视频块的邻近视频块的帧间预测模式或帧内预测模式。在方法2100的一些实施例中,k的值基于当前视频块的帧内预测模式。在方法2100的一些实施例中,k的值基于当前视频块的邻近视频块的运动矢量。在方法2100的一些实施例中,k的值基于当前视频块的邻近视频块是否使用差分编解码模式进行编解码的指示。
在方法2100的一些实施例中,k的值基于当前视频块或当前视频块的邻近视频块的量化参数的值。在方法2100的一些实施例中,k的值基于用于对当前视频块进行编解码的色彩格式。在方法2100的一些实施例中,k的值基于单独编解码树结构还是双编解码树结构用于对当前视频块进行编解码。在方法2100的一些实施例中,k的值基于应用于当前视频块的变换类型。在方法2100的一些实施例中,k的值基于与当前视频块相关联的条带或片组类型或图片类型。
在方法2100的一些实施例中,实施规则指定对当前视频块逐段应用差分编解码模式。在方法2100的一些实施例中,实施规则指定当在垂直方向上执行量化残差的预测时并且当N=nK时,残差量化样点根据以下公式来确定:
在方法2100的一些实施例中,实施规则指定当在水平方向上执行量化残差的预测时并且当M=mK时,残差量化样点根据以下公式来确定:
图22是视频处理的示例方法2200的流程图。方法2200包括基于适用性规则来确定差分编解码模式适用于视频的当前视频块和当前视频块的比特流表示之间的转换2202,其中当前视频块与色彩分量相关联,并且其中适用性规则基于差分编解码模式是否被应用于视频的另一视频块来指定对当前视频块启用还是禁用差分编解码模式。方法2200也包括基于该确定,使用差分编解码模式来执行当前视频块和当前视频块的比特流表示之间的转换2204,其中在差分编解码模式下,使用当前视频块的帧内预测的量化残差和量化残差的预测之间的差在比特流表示中表示当前视频块,并且其中在差分编解码模式下,量化残差和量化残差的预测之间的差使用差分脉冲编解码调制(DPCM)表示来表示。
在方法2200的一些实施例中,当前视频块是色度视频块,适用性规则指定是否对色度视频块启用差分编解码模式基于差分编解码模式是否被应用于一个或多个代表性亮度视频块,并且一个或多个代表性亮度视频块与色度视频块并置。在方法2200的一些实施例中,一个或多个代表性亮度视频块以与用于推导色度视频块的帧内预测的推导模式的方式相同的方式来定义。在方法2200的一些实施例中,当前视频块是色度视频块,适用性规则指定当对一个或多个代表性亮度块启用用于色度视频块的帧内预测的推导模式和差分编解码模式时,对色度视频块启用差分编解码模式,并且一个或多个代表性亮度视频块与色度视频块并置。在方法2200的一些实施例中,适用性规则指定对当前视频块启用还是禁用差分编解码模式在比特流表示中包括的一个或多个语法元素中指示。
在方法2200的一些实施例中,单个语法元素指示对两个色彩分量启用还是禁用差分编解码模式,并且两个色彩分量包括与当前视频块相关联的色彩分量。在方法2200的一些实施例中,两个语法元素分别指示对两个色彩分量启用还是禁用差分编解码模式,并且两个色彩分量包括与当前视频块相关联的色彩分量。在方法2200的一些实施例中,适用性规则指定当特定模式用于当前视频块的帧内预测时,比特流表示排除指示对当前视频块启用还是禁用差分编解码模式的语法元素。在方法2200的一些实施例中,特定模式包括跨分量线性模型(CCLM)。
以下列出的示例是对附加实施例的描述。
1.一种视频处理的方法,包括:使用差分编解码模式并选择性地使用基于共存规则的帧内预测模式来执行当前视频块和当前视频块的比特流表示之间的转换;其中,帧内预测模式用于生成当前视频块的样点的预测;并且其中,差分编解码模式用于使用差分脉冲编解码调制表示来表示来自像素的预测的量化残差块。
2.根据示例1所述的方法,其中,所述帧内预测模式是基于矩阵的帧内预测模式(MIP),并且其中共存规则将MIP限制为MIP的部分允许模式。
3.根据示例2所述的方法,其中,部分允许模式包括水平正常帧内模式或垂直正常帧内模式。
示例1-3的进一步实施例在第4节的项1中描述。例如,差分编解码模式可以表示QR-BDPCM编解码模式的当前版本。
4.根据示例1所述的方法,其中,帧内预测模式包括沿着非水平或非垂直方向的预测。
5.根据示例1或4所述的方法,其中,帧内预测模式是平面或DC预测模式。
6.根据示例1或4所述的方法,其中,帧内预测模式是垂直预测模式或水平预测模式。
7.根据示例1或4所述的方法,其中,帧内预测模式由比特流表示中的字段标识。
8.根据示例1或4所述的方法,其中,帧内预测模式取决于当前视频块或邻近块的块大小。
9.根据示例1或4所述的方法,其中,帧内预测模式取决于当前块或邻近块的形状。
10.根据示例1或4所述的方法,其中,帧内预测模式取决于当前视频块或邻近视频块使用帧间预测还是帧内预测进行编解码。
11.根据示例1或4所述的方法,其中,帧内预测模式取决于邻近视频块是否使用差分编解码模式进行编解码。
12.根据示例1或4所述的方法,其中,帧内预测模式取决于用于当前视频块或邻近视频块的量化参数的值。
13.根据示例1或4所述的方法,其中,帧内预测模式取决于用于对当前视频块进行编解码的色彩格式。
14.根据示例1或4所述的方法,其中,帧内预测模式取决于单独编解码树结构还是双编解码树结构用于对当前视频块进行编解码。
示例4至14的进一步实施例在第4节的项2中提供。
15.根据示例1所述的方法,其中,当前视频块的样点的生成预测从邻近视频区域中的非相邻样点执行。
16.根据示例1所述的方法,其中,帧内预测模式包括帧内块复制Merge模式。
17.根据示例1所述的方法,其中,帧内预测模式包括帧内块复制高级运动矢量预测模式。
18.根据示例15至17中任一项所述的方法,其中,帧内预测模式由块矢量或Merge索引指示。
示例15至18的进一步实施例在第4节的项3中提供。
19.根据示例1所述的方法,其中,共存规则基于比特流表示中的字段来指定从差分编解码模式下的信令通知的索引到帧内预测模式的映射。
20.根据示例1所述的方法,其中,共存规则基于当前视频块或邻近块的大小来指定从差分编解码模式下的信令通知的索引到帧内预测模式的映射。
21.根据示例1所述的方法,其中,共存规则基于当前视频块或邻近块的形状来指定从差分编解码模式下的信令通知的索引到帧内预测模式的映射。
22.根据示例1所述的方法,其中,共存规则基于当前视频块或邻近块的预测模式来指定从差分编解码模式下的信令通知的索引到帧内预测模式的映射。
23.根据示例1所述的方法,其中,共存规则基于当前视频块或邻近块的最可能模式来指定从差分编解码模式下的信令通知的索引到帧内预测模式的映射。
24.根据示例1所述的方法,其中,共存规则基于当前视频块或邻近块的运动矢量来指定从差分编解码模式下的信令通知的索引到帧内预测模式的映射。
25.根据示例1所述的方法,其中,共存规则基于邻近块是否使用差分编解码模式进行编解码来指定从差分编解码模式下的信令通知的索引到帧内预测模式的映射。
26.根据示例1所述的方法,其中,共存规则基于由当前视频块或邻近块使用的量化参数来指定从差分编解码模式下的信令通知的索引到帧内预测模式的映射。
27.根据示例1所述的方法,其中,共存规则基于当前视频块的色彩格式来指定从差分编解码模式下的信令通知的索引到帧内预测模式的映射。
28.根据示例1所述的方法,其中,共存规则基于当前视频块使用单独编解码树还是双编解码树来指定从差分编解码模式下的信令通知的索引到帧内预测模式的映射。
29.根据示例1所述的方法,其中,共存规则基于应用于当前视频块的变换来指定从差分编解码模式下的信令通知的索引到帧内预测模式的映射。
30.根据示例1所述的方法,其中,共存规则基于当前视频块的条带类型或片组类型或图片类型来指定从差分编解码模式下的信令通知的索引到帧内预测模式的映射。
示例19至30的进一步实施例在第4节的项2中提供。
31.一种视频处理的方法,包括:使用差分编解码模式来执行当前视频块和当前视频块的比特流表示之间的转换,其中在该差分编解码模式下使用差分脉冲编解码调制表示来表示来自当前视频块的像素的预测的量化残差块;其中,预测的第一方向或差分编解码模式的第二方向可从比特流表示推断。
32.根据示例31所述的方法,其中,像素的预测的第一方向可从用于预测的帧内预测模式隐式推断。
33.根据示例32所述的方法,其中,差分编解码模式的第二方向可推断为与预测的第一方向相同的方向。
34.根据示例31所述的方法,其中,第二方向可从用于预测的帧内预测模式推断。
35.根据示例31所述的方法,其中,第二方向可从当前视频块或邻近块的大小或者当前视频块或邻近块的形状推断。
36.根据示例31所述的方法,其中,第二方向可从邻近块的运动矢量推断。
37.根据示例31所述的方法,其中,第二方向可从当前视频块或邻近块的最可能模式推断。
38.根据示例31所述的方法,其中,第二方向可从邻近块的预测模式推断。
39.根据示例31所述的方法,其中,第二方向可从邻近块的帧内预测模式推断。
40.根据示例31所述的方法,其中,第二方向可从邻近块是否使用差分编解码模式来推断。
示例31-40的进一步实施例在第4节的项4中提供。
41.一种视频处理的方法,包括:基于适用性规则来确定差分编解码模式适用于当前视频块和当前视频块的比特流表示之间的转换;以及使用差分编解码模式来执行当前视频块和比特流表示之间的转换;
其中,在差分编解码模式下,使用在不同于水平方向或垂直方向的残差预测方向上执行的差分脉冲编解码调制表示来表示来自当前视频块的像素的帧内预测的量化残差块。
42.根据示例41所述的方法,其中,残差预测方向是45度方向。
43.根据示例41所述的方法,其中,残差预测方向是135度方向。
44.根据示例41所述的方法,其中,残差预测方向与比特流表示中的字段或者当前视频块或邻近块的大小或者当前视频块或邻近块的形状相关。
示例41至44的进一步实施例在第4节的项6中提供。
45.根据示例41所述的方法,其中,适用性规则指定由于当前视频块是色度块而使用差分编解码模式。
46.根据示例45所述的方法,其中,适用性规则还指定当前视频块的残差预测方向是与对应于当前视频块的亮度块的方向相同的方向。
47.根据示例41所述的方法,其中,适用性规则指定由于当前视频块不使用跨分量线性模型(CCLM)编解码模式而使用差分编解码。
示例45至47的进一步实施例在第4节的项7中提供。
48.根据示例41所述的方法,其中,适用性规则指定从差分编解码模式对一个色彩分量的适用性推导差分编解码模式对另一个色彩分量的适用性。
示例48的进一步实施例在第4节的项12中提供。
49.一种视频处理的方法,包括:确定差分编解码模式适用于当前视频块和当前视频块的比特流表示之间的转换;以及使用差分编解码模式的实施规则来执行当前视频块和比特流表示之间的转换;其中,在差分编解码模式下,使用在不同于水平方向或垂直方向的残差预测方向上执行的差分脉冲编解码调制表示来表示来自当前视频块的像素的帧内预测的量化残差块。
50.根据示例49所述的方法,其中,实施规则指定将量化残差块的值限制在一范围内。
51.根据示例49所述的方法,其中,实施规则指定使用裁剪来获得量化残差块。
示例49-51的进一步实施例在第4节的项8中提供。
52.根据示例49所述的方法,其中,实施规则指定执行从当前视频块的最后一行到当前视频块的第一行的预测。
53.根据示例49所述的方法,其中,实施规则指定执行从当前视频块的最后一列到当前视频块的第一列的预测。
示例52至53的进一步实施例在第4节的项9中提供。
54.根据示例49所述的方法,其中,实施规则指定将差分编解码模式仅应用于当前视频块的子集。
55.根据示例54所述的方法,其中,子集排除残差的k个左列,其中k是小于块的像素宽度的整数。
56.根据示例54所述的方法,其中,子集排除残差的k个顶行,其中k是小于块的像素高度的整数。
示例54至56的进一步实施例在第4节的项10中提供。
57.根据示例49所述的方法,其中,实施规则指定将差分编解码模式逐段应用于转换。
示例57的进一步实施例在第4节的项11中提供。
58.一种视频处理装置,包括被配置为实施示例1至57中的一个或多个的处理器。
59.一种存储有代码的计算机可读介质,该代码在由处理器执行时使得处理器实施根据示例1至57中的任一项或多项所述的方法。
在本文档的列出的示例中,术语转换可以指为当前视频块生成比特流表示或者从比特流表示生成当前视频块。比特流表示不需要表示连续的比特组,并且可以被划分为头字段或表示编解码像素值信息的码字中包括的比特。
在上面的示例中,适用性规则可以是预定义的,并且对于编码器和解码器是已知的。
应当理解,所公开的技术可以体现在视频编码器或解码器中,以使用包括使用关于帧内编解码中使用差分编解码模式的考虑的各种实施规则的技术来提高压缩效率,如本文档中所述。
本文档中描述的所公开的以及其他解决方案、示例、实施例、模块和功能操作可以在数字电子电路中、或者在计算机软件、固件或硬件(包括本文档中公开的结构及其结构等同物)中、或者在它们中的一个或多个的组合中被实施。所公开的以及其他实施例可以被实施为一个或多个计算机程序产品,即在计算机可读介质上编码的计算机程序指令的一个或多个模块,该计算机程序指令用于由数据处理装置运行或控制数据处理装置的操作。计算机可读介质可以是机器可读存储设备、机器可读存储基板、存储器设备、影响机器可读传播信号的物质的组合、或它们中的一个或多个的组合。术语“数据处理装置”包含用于处理数据的所有装置、设备和机器,包括例如可编程处理器、计算机、或多个处理器或计算机。除了硬件之外,装置还可以包括为所讨论的计算机程序创建运行环境的代码,例如,构成处理器固件、协议栈、数据库管理***、操作***、或它们中的一个或多个的组合的代码。传播信号是被生成以对信息进行编码以用于发送到合适的接收器装置的人工生成的信号,例如机器生成的电信号、光学信号或电磁信号。
计算机程序(也已知为程序、软件、软件应用、脚本或代码)可以以任何形式的编程语言(包括编译或解释语言)编写,并且其可以以任何形式部署,包括作为独立程序或作为适合在计算环境中使用的模块、组件、子例程或其他单元。计算机程序不一定对应于文件***中的文件。程序可以存储在保存其他程序或数据(例如,存储在标记语言文档中的一个或多个脚本)的文件的一部分中,存储在专用于所讨论的程序的单个文件中,或存储在多个协调文件中(例如,存储一个或多个模块、子程序或代码部分的文件)。计算机程序可以被部署以在一个计算机上或在位于一个站点上或跨多个站点分布并通过通信网络互连的多个计算机上运行。
本文档书中描述的过程和逻辑流程可以由运行一个或多个计算机程序的一个或多个可编程处理器执行,以通过对输入数据进行操作并生成输出来执行功能。过程和逻辑流程也可以由专用逻辑电路执行,并且装置也可以被实施为专用逻辑电路,例如,FPGA(Field Programmable Gate Array,现场可编程门阵列)或ASIC(专用集成电路)。
适合于运行计算机程序的处理器包括例如通用和专用微处理器、以及任何类型的数字计算机的任何一个或多个处理器。通常,处理器将从只读存储器或随机存取存储器或两者接收指令和数据。计算机的基本元件是用于执行指令的处理器和用于存储指令和数据的一个或多个存储器设备。通常,计算机还将包括用于存储数据的一个或多个大容量存储设备(例如,磁盘、磁光盘或光盘),或可操作地耦合以从该一个或多个大容量存储设备接收数据或向该一个或多个大容量存储设备传递数据、或者从其接收数据并向其传递数据。然而,计算机不需要这样的设备。适用于存储计算机程序指令和数据的计算机可读介质包括所有形式的非易失性存储器、介质和存储器设备,包括例如半导体存储器设备,例如EPROM、EEPROM和闪存设备;磁盘,例如内部硬盘或可换式磁盘;磁光盘;以及CD ROM和DVD-ROM磁盘。处理器和存储器可以由专用逻辑电路补充或并入专用逻辑电路中。
虽然本专利文档包含许多细节,但这些细节不应被解释为对任何主题或可能要求保护的范围的限制,而是作为指定于特定技术的特定实施例的特征的描述。在本专利文档中在单独的实施例的上下文中描述的特定特征也可以在单个实施例中组合实施。相反,在单个实施例的上下文中描述的各种特征也可以分别在多个实施例中或以任何合适的子组合实施。此外,尽管特征可以在上面描述为以特定组合起作用并且甚至最初如此要求保护,但是在一些情况下可以从组合排除来自所要求保护的组合的一个或多个特征,并且所要求保护的组合可以针对子组合或子组合的变化。
类似地,虽然在附图中以特定顺序描绘了操作,但是这不应该被理解为需要以所示的特定顺序或以先后顺序执行这样的操作或者执行所有示出的操作以实现期望的结果。此外,在本专利文档中描述的实施例中的各种***组件的分离不应被理解为在所有实施例中都需要这样的分离。
仅描述了一些实施方式和示例,并且可以基于本专利文档中描述和示出的内容来进行其他实施方式、增强和变化。
Claims (66)
1.一种视频处理的方法,包括:
确定差分编解码模式适用于视频的当前视频块和当前视频块的比特流表示之间的转换;以及
基于所述确定,根据实施规则来使用差分编解码模式执行当前视频块和当前视频块的比特流表示之间的转换,
其中,在差分编解码模式下,使用当前视频块的帧内预测的量化残差和量化残差的预测之间的差在比特流表示中表示当前视频块,并且
其中,在差分编解码模式下,量化残差和量化残差的预测之间的差使用差分脉冲编解码调制(DPCM)表示来表示。
2.根据权利要求1所述的方法,其中,所述实施规则指定量化残差的值被限制在值范围内。
3.根据权利要求1所述的方法,其中,所述实施规则指定量化残差和量化残差的预测之间的差的值被限制在值范围内。
4.根据权利要求1所述的方法,
其中,所述实施规则指定裁剪操作被应用于量化残差和量化残差的预测之间的差,并且
其中,所述裁剪操作将量化残差和量化残差的预测之间的差的值限制在值范围内。
5.根据权利要求1所述的方法,
其中,所述实施规则指定裁剪操作被应用于量化残差,并且
其中,所述裁剪操作将量化残差的值限制在值范围内。
8.根据权利要求4或5中任一项所述的方法,其中,所述值中的每个值由根据以下裁剪规则的裁剪操作限制:
值响应于所述值小于最小值而为最小值,并且
值响应于所述值大于最大值而为最大值。
9.根据权利要求4或5中任一项所述的方法,其中,所述值中的每个值由根据以下裁剪规则的裁剪操作限制:
值响应于所述值小于或等于最小值而为最小值,并且
值响应于所述值大于或等于最大值而为最大值。
10.根据权利要求4或5中任一项所述的方法,其中,所述值中的每个值由根据以下裁剪规则的裁剪操作限制:
值响应于所述值小于最小值而为最小值,并且
值响应于所述值大于或等于最大值而为最大值。
11.根据权利要求4或5中任一项所述的方法,其中,所述值中的每个值由根据以下裁剪规则的裁剪操作限制:
值响应于所述值小于或等于最小值而为最小值,并且
值响应于所述值大于最大值而为最大值。
12.根据权利要求8-11中任一项所述的方法,其中,所述最小值和/或最大值是正值或负值。
13.根据权利要求8-11中任一项所述的方法,其中,所述最小值为-32768,并且最大值为32767。
14.根据权利要求8-11中任一项所述的方法,其中,所述最小值和/或最大值基于与没有以差分编解码模式进行编解码的视频块的逆量化相关的另一值范围。
15.根据权利要求8-11中任一项所述的方法,其中,所述最小值和/或最大值基于量化残差块的输入样点或重构量化残差块的重构样点的比特深度。
16.根据权利要求8-11中任一项所述的方法,其中,所述最小值和/或最大值基于当前视频块用无损编解码技术进行编码还是解码。
17.根据权利要求16所述的方法,其中,所述最小值和/或最大值基于是否启用transquant旁路标志的指示,其中是否使用无损编解码技术由transquant旁路标志指示。
18.根据权利要求16所述的方法,其中,所述最小值和/或最大值基于是否启用编解码单元(CU)transquant旁路标志的指示,其中是否在CU级别使用无损编解码技术由CUtransquant旁路标志指示。
19.根据权利要求8-11中任一项所述的方法,其中,所述最小值和/或最大值基于在以下中信令通知的消息:序列参数集(SPS)、视频参数集(VPS)、图片参数集(PPS)、图片头、条带头、片组头、最大编解码单元(LCU)行或LCU组。
20.根据权利要求8-11中任一项所述的方法,其中,所述最小值和/或最大值基于当前视频块或当前视频块的邻近视频块的块大小。
21.根据权利要求8-11中任一项的方法,其中,所述最小值和/或最大值基于当前视频块或当前视频块的邻近视频块的形状。
22.根据权利要求8-11中任一项所述的方法,其中,所述最小值和/或最大值基于当前视频块或当前视频块的邻近视频块的最可能模式(MPM)。
23.根据权利要求8-11中任一项所述的方法,其中,所述最小值和/或最大值基于当前视频块的邻近视频块的帧间预测模式或帧内预测模式。
24.根据权利要求8-11中任一项所述的方法,其中,所述最小值和/或最大值基于当前视频块的邻近视频块的运动矢量。
25.根据权利要求8-11中任一项的方法,其中,所述最小值和/或最大值基于当前视频块的邻近视频块是否使用差分编解码模式进行编解码的指示。
26.根据权利要求8-11中任一项所述的方法,其中,所述最小值和/或最大值基于当前视频块或当前视频块的邻近视频块的量化参数的值。
27.根据权利要求8-11中任一项所述的方法,其中,所述最小值和/或最大值基于用于对当前视频块进行编解码的色彩格式。
28.根据权利要求8-11中任一项所述的方法,其中,所述最小值和/或最大值基于单独编解码树结构还是双编解码树结构用于对当前视频块进行编解码。
29.根据权利要求8-11中任一项所述的方法,其中,所述最小值和/或最大值基于应用于当前视频块的变换类型。
30.根据权利要求8-11中任一项所述的方法,其中,所述最小值和/或最大值基于与当前视频块相关联的条带或片组类型或图片类型。
31.根据权利要求1所述的方法,其中,所述实施规则指定量化残差的预测在从当前视频块的最后一行或最后一列到当前视频块的第一行或第一列的方向上被执行。
32.根据权利要求31所述的方法,其中,响应于方向为水平,当前视频块的第i列处的量化残差的值的预测是当前视频块的第(i+1)列处的量化残差的值。
33.根据权利要求31所述的方法,其中,响应于方向为垂直,当前视频块的第i行处的量化残差的值的预测是当前视频块的第(i+1)行处的量化残差的值。
34.根据权利要求1所述的方法,其中,所述实施规则指定差分编解码模式被应用于当前视频块的子集或一部分。
35.根据权利要求34所述的方法,其中,所述实施规则指定当在水平方向上执行量化残差的预测时,差分编解码模式不应用于当前视频块的最左边k列。
36.根据权利要求34所述的方法,其中,所述实施规则指定当在垂直方向上执行量化残差的预测时,差分编解码模式不应用于当前视频块的最上方k行。
37.根据权利要求34所述的方法,其中,所述实施规则指定当在水平方向上执行量化残差的预测时,差分编解码模式不应用于当前视频块的最右边k列。
38.根据权利要求34所述的方法,其中,所述实施规则指定当在垂直方向上执行量化残差的预测时,差分编解码模式不应用于当前视频块的最底部k行。
39.根据权利要求35-38中任一项所述的方法,其中,k的值是预定义的。
40.根据权利要求35-38中任一项所述的方法,其中,k的值在以下中信令通知的消息中指示:序列参数集(SPS)、视频参数集(VPS)、图片参数集(PPS)、图片头、条带头、片组头、最大编解码单元(LCU)行或LCU组。
41.根据权利要求35-38中任一项所述的方法,其中,k的值基于当前视频块或当前视频块的邻近视频块的块大小。
42.根据权利要求35-38中任一项所述的方法,其中,k的值基于当前视频块或当前视频块的邻近视频块的形状。
43.根据权利要求35-38中任一项所述的方法,其中,k的值基于当前视频块或当前视频块的邻近视频块的最可能模式(MPM)。
44.根据权利要求35-38中任一项所述的方法,其中,k的值基于当前视频块的邻近视频块的帧间预测模式或帧内预测模式。
45.根据权利要求35-38中任一项所述的方法,其中,k的值基于当前视频块的帧内预测模式。
46.根据权利要求35-38中任一项所述的方法,其中,k的值基于当前视频块的邻近视频块的运动矢量。
47.根据权利要求35-38中任一项所述的方法,其中,k的值基于当前视频块的邻近视频块是否使用差分编解码模式进行编解码的指示。
48.根据权利要求35-38中任一项所述的方法,其中,k的值基于当前视频块或当前视频块的邻近视频块的量化参数的值。
49.根据权利要求35-38中任一项所述的方法,其中,k的值基于用于对当前视频块进行编解码的色彩格式。
50.根据权利要求35-38中任一项所述的方法,其中,k的值基于单独编解码树结构还是双编解码树结构用于对当前视频块进行编解码。
51.根据权利要求35-38中任一项所述的方法,其中,k的值基于应用于当前视频块的变换类型。
52.根据权利要求35-38中任一项所述的方法,其中,k的值基于与当前视频块相关联的条带或片组类型或图片类型。
53.根据权利要求1所述的方法,其中,所述实施规则指定对当前视频块逐段应用差分编解码模式。
56.一种视频处理的方法,包括:
基于适用性规则来确定差分编解码模式适用于视频的当前视频块和当前视频块的比特流表示之间的转换,
其中,当前视频块与色彩分量相关联,并且
其中,适用性规则基于差分编解码模式是否被应用于视频的另一视频块来指定对当前视频块启用还是禁用差分编解码模式;以及
基于所述确定,使用差分编解码模式来执行当前视频块和当前视频块的比特流表示之间的转换,
其中,在差分编解码模式下,使用当前视频块的帧内预测的量化残差和量化残差的预测之间的差在比特流表示中表示当前视频块,并且
其中,在差分编解码模式下,量化残差和量化残差的预测之间的差使用差分脉冲编解码调制(DPCM)表示来表示。
57.根据权利要求56所述的方法,
其中,当前视频块是色度视频块,
其中,适用性规则指定是否对色度视频块启用差分编解码模式基于差分编解码模式是否被应用于一个或多个代表性亮度视频块,并且
其中,一个或多个代表性亮度视频块与色度视频块并置。
58.根据权利要求57所述的方法,其中,所述一个或多个代表性亮度视频块以与用于推导色度视频块的帧内预测的推导模式的方式相同的方式来定义。
59.根据权利要求57所述的方法,
其中,当前视频块是色度视频块,
其中,适用性规则指定当对一个或多个代表性亮度块启用用于色度视频块的帧内预测的推导模式和差分编解码模式时,对色度视频块启用差分编解码模式,并且
其中,一个或多个代表性亮度视频块与色度视频块并置。
60.根据权利要求56所述的方法,
其中,适用性规则指定对当前视频块启用还是禁用差分编解码模式在比特流表示中包括的一个或多个语法元素中指示。
61.根据权利要求60所述的方法,
其中,单个语法元素指示对两个色彩分量启用还是禁用差分编解码模式,并且
其中,两个色彩分量包括与当前视频块相关联的色彩分量。
62.根据权利要求60所述的方法,
其中,两个语法元素分别指示对两个色彩分量启用还是禁用差分编解码模式,并且
其中,两个色彩分量包括与当前视频块相关联的色彩分量。
63.根据权利要求56所述的方法,
其中,所述适用性规则指定当特定模式用于当前视频块的帧内预测时,比特流表示排除指示对当前视频块启用还是禁用差分编解码模式的语法元素。
64.根据权利要求63所述的方法,其中,所述特定模式包括跨分量线性模型(CCLM)。
65.一种视频处理装置,包括被配置为实施权利要求1至64中的一项或多项的处理器。
66.一种存储有代码的非暂时性计算机可读介质,所述代码在由处理器执行时使得所述处理器实施根据权利要求1至64中的任一项或多项所述的方法。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CNPCT/CN2019/084008 | 2019-04-24 | ||
CN2019084008 | 2019-04-24 | ||
PCT/US2020/029603 WO2020219737A1 (en) | 2019-04-24 | 2020-04-23 | Constraints on quantized residual differential pulse code modulation representation of coded video |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113906753A true CN113906753A (zh) | 2022-01-07 |
CN113906753B CN113906753B (zh) | 2023-12-01 |
Family
ID=72940605
Family Applications (3)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202311463066.XA Pending CN117255200A (zh) | 2019-04-24 | 2020-04-23 | 编解码视频的量化残差差分脉冲编解码调制表示 |
CN202080031685.XA Active CN113906753B (zh) | 2019-04-24 | 2020-04-23 | 编解码视频的量化残差差分脉冲编解码调制表示的约束 |
CN202080030903.8A Active CN113728642B (zh) | 2019-04-24 | 2020-04-23 | 编解码视频的量化残差差分脉冲编解码调制表示 |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202311463066.XA Pending CN117255200A (zh) | 2019-04-24 | 2020-04-23 | 编解码视频的量化残差差分脉冲编解码调制表示 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202080030903.8A Active CN113728642B (zh) | 2019-04-24 | 2020-04-23 | 编解码视频的量化残差差分脉冲编解码调制表示 |
Country Status (11)
Country | Link |
---|---|
US (3) | US11431984B2 (zh) |
EP (2) | EP3942820A4 (zh) |
JP (3) | JP7414843B2 (zh) |
KR (1) | KR102630415B1 (zh) |
CN (3) | CN117255200A (zh) |
AU (1) | AU2020262284B2 (zh) |
CA (1) | CA3137163C (zh) |
MX (1) | MX2021012675A (zh) |
SG (1) | SG11202111530YA (zh) |
WO (2) | WO2020219737A1 (zh) |
ZA (1) | ZA202107948B (zh) |
Families Citing this family (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2020180102A1 (ko) * | 2019-03-04 | 2020-09-10 | 엘지전자 주식회사 | 영상 코딩 시스템에서 컨텍스트 코딩된 사인 플래그를 사용하는 영상 디코딩 방법 및 그 장치 |
EP3942820A4 (en) * | 2019-04-24 | 2022-06-01 | ByteDance Inc. | QUANTIFIED REPRESENTATION OF PULSE MODULATION AND RESIDUAL DIFFERENTIAL CODING OF ENCODED VIDEO |
EP3942799A4 (en) | 2019-05-01 | 2022-06-08 | ByteDance Inc. | INTRACODED VIDEO USING QUANTIZED RESIDUAL PULSE CODE MODULATION ENCODING |
CN117615130A (zh) | 2019-05-02 | 2024-02-27 | 字节跳动有限公司 | 基于编解码树结构类型的编解码模式 |
CN114175660A (zh) * | 2019-05-22 | 2022-03-11 | Lg电子株式会社 | 使用bdpcm的图像解码方法及其装置 |
CN117241014A (zh) * | 2019-06-05 | 2023-12-15 | 华为技术有限公司 | Mpm列表构建方法、色度块的帧内预测模式获取方法及装置 |
EP3994886A4 (en) | 2019-08-06 | 2022-12-28 | Beijing Bytedance Network Technology Co., Ltd. | VIDEO ZONE PARTITION ACCORDING TO COLOR FORMAT |
BR112022003656A2 (pt) | 2019-09-02 | 2022-05-24 | Beijing Bytedance Network Tech Co Ltd | Método e aparelho de processamento de dados de vídeo, e, meios de armazenamento e de gravação legíveis por computador não transitórios |
MX2022003122A (es) | 2019-09-21 | 2022-04-06 | Beijing Bytedance Network Tech Co Ltd | Modo intra basado para croma de restriccion de tama?o. |
JP7536484B2 (ja) * | 2020-03-18 | 2024-08-20 | キヤノン株式会社 | 画像符号化装置、画像符号化方法及びプログラム、画像復号装置、画像復号方法及びプログラム |
WO2023198075A1 (en) * | 2022-04-13 | 2023-10-19 | Beijing Bytedance Network Technology Co., Ltd. | Method, apparatus, and medium for video processing |
WO2023239347A1 (en) * | 2022-06-06 | 2023-12-14 | Google Llc | Enhanced multi-stage intra prediction |
WO2023237119A1 (en) * | 2022-06-10 | 2023-12-14 | Beijing Bytedance Network Technology Co., Ltd. | Method, apparatus, and medium for video processing |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20150063454A1 (en) * | 2013-08-27 | 2015-03-05 | Qualcomm Incorporated | Residual prediction for intra block copying |
US20150264376A1 (en) * | 2014-03-17 | 2015-09-17 | Qualcomm Incorporated | Quantization processes for residue differential pulse code modulation |
CN105075270A (zh) * | 2013-03-25 | 2015-11-18 | 高通股份有限公司 | 在视频译码中停用正负号数据隐藏 |
US20160100189A1 (en) * | 2014-10-07 | 2016-04-07 | Qualcomm Incorporated | Intra bc and inter unification |
CN107211121A (zh) * | 2015-01-22 | 2017-09-26 | 联发科技(新加坡)私人有限公司 | 色度分量的视频编码方法 |
JP2018056685A (ja) * | 2016-09-27 | 2018-04-05 | 株式会社ドワンゴ | 画像符号化装置、画像符号化方法、及び画像符号化プログラム、並びに、画像復号装置、画像復号方法、及び画像復号プログラム |
US20180205946A1 (en) * | 2017-01-13 | 2018-07-19 | Qualcomm Incorporated | Coding video data using derived chroma mode |
CN108712651A (zh) * | 2012-06-29 | 2018-10-26 | 韩国电子通信研究院 | 视频解码方法、视频编码方法和计算机可读介质 |
CN109417639A (zh) * | 2016-05-13 | 2019-03-01 | 交互数字Vc控股公司 | 利用自适应裁剪的视频编码的方法和设备 |
Family Cites Families (89)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH11275592A (ja) * | 1998-01-22 | 1999-10-08 | Victor Co Of Japan Ltd | 動画像符号列変換装置及びその方法 |
KR100813963B1 (ko) | 2005-09-16 | 2008-03-14 | 세종대학교산학협력단 | 동영상의 무손실 부호화, 복호화 방법 및 장치 |
US8208545B2 (en) * | 2006-06-01 | 2012-06-26 | Electronics And Telecommunications Research Institute | Method and apparatus for video coding on pixel-wise prediction |
TW201028018A (en) | 2009-01-07 | 2010-07-16 | Ind Tech Res Inst | Encoder, decoder, encoding method and decoding method |
KR101379185B1 (ko) * | 2009-04-14 | 2014-03-31 | 에스케이 텔레콤주식회사 | 예측 모드 선택 방법 및 장치와 그를 이용한 영상 부호화/복호화 방법 및 장치 |
KR101483750B1 (ko) | 2009-07-24 | 2015-01-19 | 삼성전자주식회사 | 영상의 부호화 방법 및 장치, 영상 복호화 방법 및 장치 |
KR20110015356A (ko) | 2009-08-07 | 2011-02-15 | 한국전자통신연구원 | 차분 신호의 특성에 기반한 적응적인 변환 부호화/양자화 영역을 이용한 동영상 부호화/복호화 장치 및 그 방법 |
JP2011041037A (ja) * | 2009-08-12 | 2011-02-24 | Sony Corp | 画像処理装置および方法 |
UA109312C2 (uk) * | 2011-03-04 | 2015-08-10 | Імпульсно-кодова модуляція з квантуванням при кодуванні відеоінформації | |
US8995523B2 (en) | 2011-06-03 | 2015-03-31 | Qualcomm Incorporated | Memory efficient context modeling |
US9503750B2 (en) * | 2011-11-04 | 2016-11-22 | Futurewei Technologies, Inc. | Binarization of prediction residuals for lossless video coding |
KR20130049523A (ko) | 2011-11-04 | 2013-05-14 | 오수미 | 인트라 예측 블록 생성 장치 |
US10390046B2 (en) | 2011-11-07 | 2019-08-20 | Qualcomm Incorporated | Coding significant coefficient information in transform skip mode |
KR101830352B1 (ko) | 2011-11-09 | 2018-02-21 | 에스케이 텔레콤주식회사 | 스킵모드를 이용한 동영상 부호화 및 복호화 방법 및 장치 |
US9621894B2 (en) | 2012-01-13 | 2017-04-11 | Qualcomm Incorporated | Determining contexts for coding transform coefficient data in video coding |
US9332259B2 (en) | 2012-01-18 | 2016-05-03 | Qualcomm Incorporated | Indication of use of wavefront parallel processing in video coding |
US9838684B2 (en) | 2012-04-11 | 2017-12-05 | Qualcomm Incorporated | Wavefront parallel processing for video coding |
US9621921B2 (en) | 2012-04-16 | 2017-04-11 | Qualcomm Incorporated | Coefficient groups and coefficient coding for coefficient scans |
CN104380734B (zh) | 2012-06-07 | 2017-09-15 | 寰发股份有限公司 | 编码以及解码视频数据的方法和装置 |
US9426466B2 (en) | 2012-06-22 | 2016-08-23 | Qualcomm Incorporated | Transform skip mode |
US9264713B2 (en) | 2012-07-11 | 2016-02-16 | Qualcomm Incorporated | Rotation of prediction residual blocks in video coding with transform skipping |
US9549182B2 (en) | 2012-07-11 | 2017-01-17 | Qualcomm Incorporated | Repositioning of prediction residual blocks in video coding |
US9407915B2 (en) | 2012-10-08 | 2016-08-02 | Google Inc. | Lossless video coding with sub-frame level optimal quantization values |
KR102127280B1 (ko) | 2013-04-08 | 2020-06-26 | 지이 비디오 컴프레션, 엘엘씨 | 성분-간 예측 |
US9667990B2 (en) | 2013-05-31 | 2017-05-30 | Qualcomm Incorporated | Parallel derived disparity vector for 3D video coding with neighbor-based disparity vector derivation |
US11323747B2 (en) * | 2013-06-05 | 2022-05-03 | Qualcomm Incorporated | Residual differential pulse code modulation (DPCM) extensions and harmonization with transform skip, rotation, and scans |
US9558567B2 (en) | 2013-07-12 | 2017-01-31 | Qualcomm Incorporated | Palette prediction in palette-based video coding |
US9648335B2 (en) | 2013-07-12 | 2017-05-09 | Qualcomm Incorporated | Bitstream restrictions on picture partitions across layers |
EP3033878A4 (en) | 2013-10-14 | 2017-04-05 | HFI Innovation Inc. | Method of residue differential pulse-code modulation for hevc range extension |
KR20150055858A (ko) | 2013-11-14 | 2015-05-22 | 삼성전자주식회사 | 차분 레지듀얼 신호를 이용한 비디오의 부호화 방법 및 장치, 그 복호화 방법 및 장치 |
GB201321851D0 (en) | 2013-12-10 | 2014-01-22 | Canon Kk | Run length parameters coding for palette mode |
TWI536811B (zh) * | 2013-12-27 | 2016-06-01 | 財團法人工業技術研究院 | 影像處理方法與系統、解碼方法、編碼器與解碼器 |
US20150189321A1 (en) | 2014-01-02 | 2015-07-02 | Mediatek Inc. | Method of Binarization and Context Adaptive Binary Arithmetic Coding of Depth Coding Syntax |
US9860540B2 (en) | 2014-01-03 | 2018-01-02 | Qualcomm Incorporated | Inference of nooutputofpriorpicsflag in video coding |
CA2942903A1 (en) | 2014-03-16 | 2015-09-24 | Vid Scale, Inc. | Method and apparatus for the signaling of lossless video coding |
EP3138293A4 (en) | 2014-04-29 | 2017-05-24 | Microsoft Technology Licensing, LLC | Encoder-side decisions for sample adaptive offset filtering |
JP2017535145A (ja) | 2014-09-30 | 2017-11-24 | マイクロソフト テクノロジー ライセンシング,エルエルシー | 波面並列処理が可能にされた場合のピクチャ内予測モードに関する規則 |
GB2531004A (en) * | 2014-10-06 | 2016-04-13 | Canon Kk | Residual colour transform signalled at sequence level for specific coding modes |
WO2016074147A1 (en) | 2014-11-11 | 2016-05-19 | Mediatek Singapore Pte. Ltd. | Separated coding tree for luma and chroma |
EP3032830A1 (en) * | 2014-12-08 | 2016-06-15 | Thomson Licensing | Differential coding of intra modes |
US10924743B2 (en) | 2015-02-06 | 2021-02-16 | Microsoft Technology Licensing, Llc | Skipping evaluation stages during media encoding |
US10057574B2 (en) | 2015-02-11 | 2018-08-21 | Qualcomm Incorporated | Coding tree unit (CTU) level adaptive loop filter (ALF) |
CN106664405B (zh) | 2015-06-09 | 2020-06-09 | 微软技术许可有限责任公司 | 用调色板模式对经逸出编码的像素的稳健编码/解码 |
WO2017041271A1 (en) | 2015-09-10 | 2017-03-16 | Mediatek Singapore Pte. Ltd. | Efficient context modeling for coding a block of data |
WO2017045101A1 (en) | 2015-09-14 | 2017-03-23 | Mediatek Singapore Pte. Ltd. | Advanced deblocking filter in video coding |
CN112565792B (zh) | 2015-10-19 | 2023-07-11 | 寰发股份有限公司 | 管理已解码图像缓存器的方法及装置 |
WO2017083553A1 (en) | 2015-11-10 | 2017-05-18 | Vid Scale, Inc. | Systems and methods for coding in super-block based video coding framework |
US10440399B2 (en) | 2015-11-13 | 2019-10-08 | Qualcomm Incorporated | Coding sign information of video data |
WO2017088093A1 (en) | 2015-11-23 | 2017-06-01 | Mediatek Singapore Pte. Ltd. | On the smallest allowed block size in video coding |
WO2017139937A1 (en) | 2016-02-18 | 2017-08-24 | Mediatek Singapore Pte. Ltd. | Advanced linear model prediction for chroma coding |
US11223852B2 (en) | 2016-03-21 | 2022-01-11 | Qualcomm Incorporated | Coding video data using a two-level multi-type-tree framework |
WO2017184970A1 (en) * | 2016-04-22 | 2017-10-26 | Vid Scale, Inc. | Prediction systems and methods for video coding based on filtering nearest neighboring pixels |
WO2017192898A1 (en) | 2016-05-05 | 2017-11-09 | Vid Scale, Inc. | Control-point based intra direction representation for intra coding |
RU2710667C1 (ru) | 2016-05-28 | 2019-12-30 | МедиаТек Инк. | Способ и устройство привязки к текущему изображению для кодирования видео |
CN116708776A (zh) | 2016-07-18 | 2023-09-05 | 韩国电子通信研究院 | 图像编码/解码方法和装置以及存储比特流的记录介质 |
US10390015B2 (en) | 2016-08-26 | 2019-08-20 | Qualcomm Incorporated | Unification of parameters derivation procedures for local illumination compensation and cross-component linear model prediction |
CN109792516B (zh) * | 2016-10-04 | 2021-05-25 | 联发科技股份有限公司 | 图像和视频编解码中用于帧内色度编解码的方法及装置 |
US10194147B2 (en) | 2017-01-19 | 2019-01-29 | Google Llc | DC coefficient sign coding scheme |
MX2019002383A (es) | 2017-02-06 | 2019-07-08 | Huawei Tech Co Ltd | Metodo y aparato de codificacion y metodo y aparato de decodificacion. |
US10779007B2 (en) | 2017-03-23 | 2020-09-15 | Mediatek Inc. | Transform coding of video data |
US11290716B2 (en) | 2017-08-03 | 2022-03-29 | Sharp Kabushiki Kaisha | Systems and methods for partitioning video blocks in an inter prediction slice of video data |
WO2019029951A1 (en) | 2017-08-08 | 2019-02-14 | Thomson Licensing | METHOD AND APPARATUS FOR VIDEO ENCODING AND DECODING |
KR20230161539A (ko) | 2018-06-07 | 2023-11-27 | 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 | 부분 코스트 계산 |
TWI739120B (zh) | 2018-06-21 | 2021-09-11 | 大陸商北京字節跳動網絡技術有限公司 | 合併仿射模式與非合併仿射模式的統一拘束 |
WO2019244116A1 (en) | 2018-06-21 | 2019-12-26 | Beijing Bytedance Network Technology Co., Ltd. | Border partition in video coding |
US11973944B2 (en) | 2018-06-27 | 2024-04-30 | Electronics And Telecommunications Research Institute | Image encoding/decoding method and device, and recording medium in which bitstream is stored for block division at picture boundary |
CN110662052B (zh) | 2018-06-29 | 2022-07-08 | 北京字节跳动网络技术有限公司 | 更新查找表(lut)的条件 |
CN114900694A (zh) | 2018-06-29 | 2022-08-12 | 抖音视界(北京)有限公司 | 哪个查找表需要更新或不更新 |
TWI723446B (zh) | 2018-07-02 | 2021-04-01 | 大陸商北京字節跳動網絡技術有限公司 | 具有lic的lut |
CN113170116B (zh) | 2018-11-22 | 2024-08-16 | 北京字节跳动网络技术有限公司 | 为帧内模式视频处理使用参考行 |
CN111699694B (zh) | 2019-01-15 | 2022-07-08 | Lg电子株式会社 | 使用变换跳过标志的图像编码方法和装置 |
US11012701B2 (en) | 2019-02-22 | 2021-05-18 | Tencent America LLC | Residual coding for transform skip mode and block differential pulse-code modulation |
CN113330749B (zh) * | 2019-02-24 | 2024-05-10 | 腾讯美国有限责任公司 | 视频编解码的方法和装置 |
US11825120B2 (en) | 2019-02-28 | 2023-11-21 | Qualcomm Incorporated | Subblock coding by generalized intra prediction in video coding |
KR102608847B1 (ko) | 2019-02-28 | 2023-12-04 | 애플 인크. | 영상 신호 부호화/복호화 방법 및 이를 위한 장치 |
WO2020180102A1 (ko) | 2019-03-04 | 2020-09-10 | 엘지전자 주식회사 | 영상 코딩 시스템에서 컨텍스트 코딩된 사인 플래그를 사용하는 영상 디코딩 방법 및 그 장치 |
US11202100B2 (en) | 2019-03-11 | 2021-12-14 | Qualcomm Incorporated | Coefficient coding for transform skip mode |
US11070812B2 (en) * | 2019-03-12 | 2021-07-20 | Qualcomm Incorporated | Coefficient domain block differential pulse-code modulation in video coding |
US11128876B2 (en) | 2019-03-12 | 2021-09-21 | Qualcomm Incorporated | Joint coefficient coding of transform skip and BDPCM mode for 4:4:4 color formats |
US11451826B2 (en) | 2019-04-15 | 2022-09-20 | Tencent America LLC | Lossless coding mode and switchable residual coding |
WO2020213931A1 (ko) * | 2019-04-16 | 2020-10-22 | 엘지전자 주식회사 | 레지듀얼 계수의 차분 부호화를 이용한 영상 부호화/복호화 방법, 장치 및 비트스트림을 전송하는 방법 |
MX2021012516A (es) | 2019-04-19 | 2021-11-12 | Bytedance Inc | Codificacion de contexto para modo de salto de transformada. |
WO2020216302A1 (en) | 2019-04-23 | 2020-10-29 | Beijing Bytedance Network Technology Co., Ltd. | Intra Prediction and Residual Coding |
WO2020218861A1 (ko) | 2019-04-23 | 2020-10-29 | 주식회사 윌러스표준기술연구소 | 다중 변환 커널을 사용하는 비디오 신호 처리 방법 및 장치 |
EP3942820A4 (en) | 2019-04-24 | 2022-06-01 | ByteDance Inc. | QUANTIFIED REPRESENTATION OF PULSE MODULATION AND RESIDUAL DIFFERENTIAL CODING OF ENCODED VIDEO |
US11190758B2 (en) | 2019-04-25 | 2021-11-30 | Qualcomm Incorporated | Block-based quantized residual domain pulse code modulation assignment for intra prediction mode derivation |
US11368721B2 (en) | 2019-04-30 | 2022-06-21 | Tencent America LLC | Method and apparatus for interaction between intra prediction mode and block differential pulse-code modulation mode |
EP3942799A4 (en) | 2019-05-01 | 2022-06-08 | ByteDance Inc. | INTRACODED VIDEO USING QUANTIZED RESIDUAL PULSE CODE MODULATION ENCODING |
CN117615130A (zh) | 2019-05-02 | 2024-02-27 | 字节跳动有限公司 | 基于编解码树结构类型的编解码模式 |
-
2020
- 2020-04-23 EP EP20794015.6A patent/EP3942820A4/en active Pending
- 2020-04-23 JP JP2021562399A patent/JP7414843B2/ja active Active
- 2020-04-23 WO PCT/US2020/029603 patent/WO2020219737A1/en unknown
- 2020-04-23 CN CN202311463066.XA patent/CN117255200A/zh active Pending
- 2020-04-23 EP EP20794622.9A patent/EP3942811A4/en active Pending
- 2020-04-23 CA CA3137163A patent/CA3137163C/en active Active
- 2020-04-23 SG SG11202111530YA patent/SG11202111530YA/en unknown
- 2020-04-23 MX MX2021012675A patent/MX2021012675A/es unknown
- 2020-04-23 CN CN202080031685.XA patent/CN113906753B/zh active Active
- 2020-04-23 JP JP2021563150A patent/JP7311626B2/ja active Active
- 2020-04-23 KR KR1020217032761A patent/KR102630415B1/ko active IP Right Grant
- 2020-04-23 CN CN202080030903.8A patent/CN113728642B/zh active Active
- 2020-04-23 AU AU2020262284A patent/AU2020262284B2/en active Active
- 2020-04-23 WO PCT/US2020/029598 patent/WO2020219733A1/en unknown
-
2021
- 2021-08-25 US US17/411,333 patent/US11431984B2/en active Active
- 2021-08-25 US US17/411,296 patent/US11438597B2/en active Active
- 2021-10-18 ZA ZA2021/07948A patent/ZA202107948B/en unknown
-
2022
- 2022-08-04 US US17/881,197 patent/US11985323B2/en active Active
-
2023
- 2023-12-07 JP JP2023206900A patent/JP2024026312A/ja active Pending
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108712651A (zh) * | 2012-06-29 | 2018-10-26 | 韩国电子通信研究院 | 视频解码方法、视频编码方法和计算机可读介质 |
CN105075270A (zh) * | 2013-03-25 | 2015-11-18 | 高通股份有限公司 | 在视频译码中停用正负号数据隐藏 |
US20150063454A1 (en) * | 2013-08-27 | 2015-03-05 | Qualcomm Incorporated | Residual prediction for intra block copying |
US20150264376A1 (en) * | 2014-03-17 | 2015-09-17 | Qualcomm Incorporated | Quantization processes for residue differential pulse code modulation |
US20160100189A1 (en) * | 2014-10-07 | 2016-04-07 | Qualcomm Incorporated | Intra bc and inter unification |
CN107211121A (zh) * | 2015-01-22 | 2017-09-26 | 联发科技(新加坡)私人有限公司 | 色度分量的视频编码方法 |
CN109417639A (zh) * | 2016-05-13 | 2019-03-01 | 交互数字Vc控股公司 | 利用自适应裁剪的视频编码的方法和设备 |
JP2018056685A (ja) * | 2016-09-27 | 2018-04-05 | 株式会社ドワンゴ | 画像符号化装置、画像符号化方法、及び画像符号化プログラム、並びに、画像復号装置、画像復号方法、及び画像復号プログラム |
US20180205946A1 (en) * | 2017-01-13 | 2018-07-19 | Qualcomm Incorporated | Coding video data using derived chroma mode |
Non-Patent Citations (2)
Title |
---|
K. SHARMAN, N. SAUNDERS, J. GAMEI: "AHG5: Unifying DPCM", JOINT COLLABORATIVE TEAM ON VIDEO CODING (JCT-VC) OF ITU-T SG 16 WP 3 AND ISO/IEC JTC 1/SC 29/WG 11 15TH MEETING: GENEVA, CH, 23 OCT. – 1 NOV. 2013 * |
MARTA KARCZEWICZ MUHAMMED COBAN: "CE8-related: Quantized residual BDPCM", JOINT VIDEO EXPERTS TEAM (JVET) OF ITU-T SG 16 WP 3 AND ISO/IEC JTC 1/SC 29/WG 11 14TH MEETING: GENEVA, CH, 19–27 MARCH 2019 * |
Also Published As
Publication number | Publication date |
---|---|
US20220385916A1 (en) | 2022-12-01 |
SG11202111530YA (en) | 2021-11-29 |
CN113728642A (zh) | 2021-11-30 |
EP3942811A4 (en) | 2022-06-15 |
US11438597B2 (en) | 2022-09-06 |
AU2020262284A1 (en) | 2021-11-11 |
CN117255200A (zh) | 2023-12-19 |
JP2022529369A (ja) | 2022-06-21 |
EP3942820A4 (en) | 2022-06-01 |
WO2020219733A1 (en) | 2020-10-29 |
CA3137163C (en) | 2024-05-14 |
EP3942820A1 (en) | 2022-01-26 |
JP2022530436A (ja) | 2022-06-29 |
CN113728642B (zh) | 2024-04-02 |
KR102630415B1 (ko) | 2024-01-29 |
JP7311626B2 (ja) | 2023-07-19 |
US11985323B2 (en) | 2024-05-14 |
KR20210152476A (ko) | 2021-12-15 |
KR20210154806A (ko) | 2021-12-21 |
JP2024026312A (ja) | 2024-02-28 |
WO2020219737A1 (en) | 2020-10-29 |
US20210385459A1 (en) | 2021-12-09 |
BR112021020796A2 (pt) | 2021-12-14 |
CN113906753B (zh) | 2023-12-01 |
US11431984B2 (en) | 2022-08-30 |
US20210385442A1 (en) | 2021-12-09 |
AU2020262284B2 (en) | 2023-09-21 |
MX2021012675A (es) | 2021-11-12 |
EP3942811A1 (en) | 2022-01-26 |
CA3137163A1 (en) | 2020-10-29 |
ZA202107948B (en) | 2023-10-25 |
JP7414843B2 (ja) | 2024-01-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN113906753B (zh) | 编解码视频的量化残差差分脉冲编解码调制表示的约束 | |
CN113796069B (zh) | 使用量化残差差分脉冲编解码调制编解码的帧内编解码视频 | |
US20230217024A1 (en) | Size Restriction Based for Chroma Intra Mode | |
US11490089B2 (en) | Transform bypass coded residual blocks in digital video | |
KR102696039B1 (ko) | 코딩 된 비디오의 양자화된 잔차 차동 펄스 코드 변조 표현 | |
RU2807214C2 (ru) | Ограничение представления дифференциальной импульсно-кодовой модуляции квантового остатка кодированного видео |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |