CN116634157A - 图像编解码方法、编码器、解码器以及存储介质 - Google Patents

图像编解码方法、编码器、解码器以及存储介质 Download PDF

Info

Publication number
CN116634157A
CN116634157A CN202310401510.9A CN202310401510A CN116634157A CN 116634157 A CN116634157 A CN 116634157A CN 202310401510 A CN202310401510 A CN 202310401510A CN 116634157 A CN116634157 A CN 116634157A
Authority
CN
China
Prior art keywords
current block
offset
value
size
mip
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202310401510.9A
Other languages
English (en)
Inventor
霍俊彦
马彦卓
万帅
张伟
杨付正
王海鑫
孙宇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Oppo Mobile Telecommunications Corp Ltd
Original Assignee
Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Oppo Mobile Telecommunications Corp Ltd filed Critical Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority to CN202310401510.9A priority Critical patent/CN116634157A/zh
Publication of CN116634157A publication Critical patent/CN116634157A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117Filters, e.g. for pre-processing or post-processing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)

Abstract

本申请实施例公开了一种图像编解码方法、编码器、解码器以及存储介质,编码器确定当前块的大小;在利用MIP模式对当前块进行编码时,根据当前块的大小,确定第一偏移量;利用第一偏移量和当前块对应的相邻像素的重建值,计算第二偏移量;根据第二偏移量,确定当前块的第一预测值;基于第一预测值,对当前块进行编码。解码器解析码流,获得当前块的大小和编码模式;当当前块的编码模式为MIP模式时,根据当前块的大小,确定第一偏移量;利用第一偏移量和当前块对应的相邻像素的重建值,计算第二偏移量;根据第二偏移量,确定当前块的第一预测值;基于第一预测值,确定当前块的重建值。

Description

图像编解码方法、编码器、解码器以及存储介质
本申请是申请日为2019年09月24日,申请号为201980060144.7,发明名称为“图像编解码方法、编码器、解码器以及存储介质”的申请的分案申请。
技术领域
本申请实施例涉及视频编解码技术领域,尤其涉及的是一种图像编解码方法、编码器、解码器以及存储介质。
背景技术
在多功能视频编码(Versatile Video Coding,VVC)的参考软件测试平台中,一种新的帧内编码技术,基于矩阵的帧内预测(Matrix-based Intra Prediction,MIP)被提出,MIP是基于神经网络的帧内预测技术,即利用多层神经网络基于相邻已重建亮度块预测当前块的亮度值。具体地,与传统帧内模式相同,在利用MIP模式进行帧内预测时,MIP预测的输入也为当前块的上一行和左一列相邻亮度块的数据,输出为当前块的亮度分量第一预测值。具体的预测过程分为三步:下采样,矩阵向量乘法和插值。
然而,在通过MIP模式进行亮度预测时,尺寸大小不同的亮度块所采用的参数也有可能不同,因此,需要占用较大的存储空间对大量参数进行存储,且预测过程中对参数的查找和调用也增加了整体时间,从而降低了编解码效率。
发明内容
本申请实施例提供一种图像编解码方法、编码器、解码器以及存储介质,能够在保证编解码性能的基础上,减小编解码过程中所需要的存储空间和整体时间,有效地提高编解码效率。
本申请实施例的技术方案是这样实现的:
本申请实施例提供了一种图像编码方法,应用于编码器,所述方法包括:
确定当前块的大小;
在利用MIP模式对所述当前块进行编码时,根据所述当前块的大小,确定第一偏移量;
利用所述第一偏移量和所述当前块对应的相邻像素的重建值,计算第二偏移量;
根据所述第二偏移量,确定所述当前块的第一预测值;
基于所述第一预测值,对所述当前块进行编码。
本申请实施例提供了一种图像解码方法,应用于解码器,所述方法包括:
解析码流,获得当前块的大小和编码模式;
当所述当前块的编码模式为MIP模式时,根据所述当前块的大小,确定第一偏移量;
利用所述第一偏移量和所述当前块对应的相邻像素的重建值,计算第二偏移量;
根据所述第二偏移量,确定所述当前块的第一预测值;
基于所述第一预测值,确定所述当前块的重建值。
本申请实施例提供了一种编码器,所述编码器包括:第一确定部分,第一计算部分以及编码部分,
所述第一确定部分,配置于确定当前块的大小;以及在利用MIP模式对所述当前块进行编码时,根据所述当前块的大小,确定第一偏移量;
所述第一计算部分,配置于利用所述第一偏移量和所述当前块对应的相邻像素的重建值,计算第二偏移量;
所述第一确定部分,还配置于根据所述第二偏移量,确定所述当前块的第一预测值;
所述编码部分,配置于基于所述第一预测值,对所述当前块进行编码。
本申请实施例提供了解码器,所述解码器包括:解析部分,第二确定部分以及第二计算部分,
所述解析部分,配置于解析码流,获得当前块的大小和编码模式;
所述第二确定部分,配置于当所述当前块的编码模式为MIP模式时,根据所述当前块的大小,确定第一偏移量;
所述第二计算部分,配置于利用所述第一偏移量和所述当前块对应的相邻像素的重建值,计算第二偏移量;
所述第二确定部分,还配置于根据所述第二偏移量,确定所述当前块的第一预测值;以及基于所述第一预测值,确定所述当前块的重建值。
本申请实施例提供了一种编码器,所述编码器包括第一处理器、存储有所述第一处理器可执行指令的第一存储器、第一通信接口,和用于连接所述第一处理器、所述第一存储器以及所述第一通信接口的第一总线,当所述指令被所述第一处理器执行时,实现如如上所述的图像编码方法。
本申请实施例提供了一种解码器,所述解码器包括第二处理器、存储有所述第二处理器可执行指令的第二存储器、第二通信接口,和用于连接所述第二处理器、所述第二存储器以及所述第一通信接口的第二总线,当所述指令被所述第二处理器执行时,实现如如上所述的图像解码方法。
本申请实施例提供了一种计算机可读存储介质,其上存储有程序,应用于编码器和解码器中,所述程序被处理器执行时,实现如上所述的图像编解码方法。
本申请实施例提供了一种图像编解码方法、编码器、解码器以及存储介质,编码器确定当前块的大小;在利用MIP模式对当前块进行编码时,根据当前块的大小,确定第一偏移量;利用第一偏移量和当前块对应的相邻像素的重建值,计算第二偏移量;根据第二偏移量,确定当前块的第一预测值;基于第一预测值,对当前块进行编码。解码器解析码流,获得当前块的大小和编码模式;当当前块的编码模式为MIP模式时,根据当前块的大小,确定第一偏移量;利用第一偏移量和当前块对应的相邻像素的重建值,计算第二偏移量;根据第二偏移量,确定当前块的第一预测值;基于第一预测值,确定当前块的重建值。由此可见,本申请提出的图像编解码方法,在利用MIP模式进行编解码时,可以根据当前块的大小直接确定出与当前块对应的第一偏移量,然后便可以利用第一偏移量对当前块进行编解码处理,也就是说,在本申请中,基于预存索引序号与偏移量的对应关系,可以在确定出当前块的大小对应的MIP块大小索引序号之后,直接获得与MIP块大小索引序号对应的第一偏移量,从而在进行编解码处理时,降低MIP算法的复杂度,能够在保证编解码性能的基础上,减小编解码过程中所需要的存储空间和整体时间,有效地提高编解码效率。
附图说明
图1为帧内预测中的67种预测模式的排布示意图;
图2为MIP模式进行编码的流程示意图;
图3为当前块的上侧相邻亮度块和左侧相邻亮度块的排布示意图;
图4为确定DM模式的排布示意图;
图5为视频编码***的结构示意图;
图6为视频解码***的结构示意图;
图7为图像编码方法的实现流程示意图;
图8为图像解码方法的实现流程示意图;
图9为编码器的组成结构示意图一;
图10为编码器的组成结构示意图二;
图11为解码器的组成结构示意图一;
图12为解码器的组成结构示意图二。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述。可以理解的是,此处所描述的具体实施例仅仅用于解释相关申请,而非对该申请的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与有关申请相关的部分。
在视频图像中,VVC接受了联合视频专家组(Joint Video Experts Team,JVET)-N0217中提出的仿射线性权重帧内预测技术(Affine Linear Weighted IntraPrediction),并更名为基于矩阵的帧内预测,即MIP技术,该技术针对帧内亮度编码块大小的不同,在帧内亮度预测过程中增加了不同数量的基于矩阵的帧内预测模式。
为了捕捉自然视频中呈现的更精细的边缘方向,VVC中将视频压缩标准(HighEfficiency Video Coding,HEVC)中定义的33种帧内亮度预测角度模式扩展到了65种,图1为帧内预测中的67种预测模式的排布示意图,如图1所示,箭头编号为2-66的表示65种帧内角度预测模式,另外还有两种非角度模式,即编号为0的渐变平坦Planar模式和编号为1的直流DC模式;所以,VVC中的帧内预测过程中包含两种非角度模式和65种角度模式,这里,将这67种预测模式称为帧内预测的传统模式。
MIP是基于神经网络的帧内预测技术,即利用多层神经网络基于相邻已重建像素预测当前块的亮度值。具体地,MIP技术根据帧内亮度编码块的大小将亮度编码块分为三类,设亮度编码块大小为W×H,其中,W为宽度参数,H为高度参数,按照亮度编码块的大小可以将亮度编码块分为三类:
大小为4×4的亮度编码块为第一类亮度块,大小为8×4,4×8和8×8的亮度编码块为第二类亮度块,其他大小的亮度编码块为第三类亮度块。
针对这三种类型的帧内亮度编码块,MIP技术在67种传统帧内预测模式的基础上增加了M种MIP模式,其中,针对第一类亮度块,M=35,针对第二类亮度块,M=19,针对第三类亮度块,M=11。
具体来说,MIP技术只应用于帧内亮度预测,与传统模式相同,MIP预测的输入也为当前块的上一行和左一列数据,输出为当前块的预测值,具体的预测过程分为三步:平均,矩阵向量乘法和插值。也就是说,通过对输入的上一行和左一列相邻像素点的重建亮度值进行这三步操作,就可以得到当前块的亮度分量预测值。
图2为MIP模式进行编码的流程示意图,如图2所示,MIP模式进行亮度预测的具体实现如下:
第一步:对当前块的上侧相邻参考点进行平均操作获得向量bdrytop,共N个值;对当前块的左侧相邻参考点进行平均操作获得向量bdryleft,共N个值。当当前块为第一类亮度编码时,N=2;当当前块为第二类或第三类亮度编码时,N=4。向量bdrytop和向量bdryleft组成一个新的向量bdryred并进行后续操作;
第二步:通过MIP模式的模式号k获取对应的矩阵Ak和偏移量bk,通过下列公式(1)计算获得如图2中用交叉线标识的当前块的部分预测值:
Predred=Ak·bdryred+bk (1)
第三步:通过线性插值,获得当前块中剩余的预测值Predred。
需要说明的是,针对当前块进行编码的实现过程,需要将帧内预测具体使用的哪一种编码模式写入到压缩码流中,从而使解码端通过解析该模式信息,可以确定具体使用哪一种模式,是传统模式还是MIP模式;若是传统模式,具体是哪一种传统模式;若是MIP模式,具体是哪一种MIP模式。
在VVC的帧内预测中,对每个亮度编码块都会进行67个传统模式和M个MIP模式的率失真代价RDcost比较,在67个传统模式和M个MIP模式中选出最优模式并进行编码。为了节省比特开销,VVC中使用了基于最可能模式列表(Most Probable Modes List,MPM)的帧内模式编码技术。
需要注意的是,由于多参考行技术(extend reference line)和帧内子块划分技术(Intra Sub-Patitionar,ISP)只对MPM列表中的模式使用,所以当extendrefflag和ispflag都为0,即使用0参考行且不进行子块划分时,不必编码mpmflag,直接编码最优模式在MPM列表中的位置。
进一步地,针对MPM列表和MIPMPM列表的构造来说,在VVC亮度帧内预测中,若当前块选中的最优模式是传统模式,则需要构造包含6个最可能传统模式的MPM列表;若当前块选中的最优模式是MIP模式,则需要构造包含3个最可能MIP模式的MIPMPM列表。
图3为当前块的上侧相邻亮度块和左侧相邻亮度块的排布示意图,如图3所示,上述两个列表都是根据如图3所示的当前块的上侧相邻亮度块(A)和左侧相邻亮度块(L)的最优模式进行推导的。
进一步地,针对MIPMPM列表的构造来说,在VVC帧内预测中,若当前块的最优模式是MIP模式,则需要构造MIPMPM列表。构造MIPMPM列表的过程中,首先需要获取上侧相邻亮度块的最优模式所对应的MIP模式ABOVE_MIP和左侧相邻亮度块的最优模式所对应的MIP模式LEFT_MIP模式。
进一步地,在获取到LEFT_MIP和ABOVE_MIP之后,按照如下方法进行包含3个最可能MIPMPM模式的MIPMPM列表的构造,其中,MIPMPM中的编号为MIP模式的编号,编号范围为0至(M-1),对于第一类亮度块编号为0-34;对于第二类亮度块编号为0-18;对于第三类亮度块编号为0-10:
若LEFT_MIP可用(不为-1),将LEFT_MIP放入MIPMPMlist中;
若ABOVE_MIP可用(不为-1),将ABOVE_MIP通过冗余检查后放入MIPMPMlist中;
若LEFT_MIP不可用(为-1),ABOVE_MIP不可用(为-1),根据当前块的类型将默认列表通过冗余检查后添入直到补满MIPMPMlist:
第一类亮度块默认列表为:{17,34,5};
第二类亮度块默认列表为:{0,7,16};
第三类亮度块默认列表为:{1,4,6}。
进一步地,需要补充的是,在VVC的色度帧内预测过程中有一种利用分量间相关性的直接模式(Direct Mode,DM),会使用当前块对应的同位亮度编码块的中心位置的帧内预测模式来进行当前色度块的帧内预测,图4为确定DM模式的排布示意图,如图4所示,由于MIP技术只应用于亮度编码块,所以当图4中CR位置的帧内预测模式为MIP模式时,需要将该MIP模式通过“MIP-传统映射表”映射为传统模式,进行当前色度块的帧内预测,表1为MIP-传统映射表。
表1
也就是说,由于MIP技术的引入,在帧内预测过程中,在构建MIPMPM列表中,需要将传统模式映射为MIP模式,在构建MPM列表和确定DM模式中,需要将MIP模式映射为传统模式。
另外,在MPM列表构造过程和DM模式的获取过程中需要使用到MIP模式到传统模式的映射。具体通过“MIP-传统映射表”将35/19/11种MIP模式映射为67种传统模式。针对三种类型的亮度块,三种“MIP-传统映射表”如表2,表3和表4所示。
表2
MIP模式 0 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17
传统模式 0 18 18 0 18 0 12 0 18 2 18 12 18 18 1 18 18 0
MIP模式 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34
传统模式 0 50 0 50 0 56 0 50 66 50 56 50 50 1 50 50 50
表3
MIP模式 0 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18
传统模式 0 1 0 1 0 22 18 18 1 0 1 0 1 0 44 0 50 1 0
表4
MIP模式 0 1 2 3 4 5 6 7 8 9 10
传统模式 1 1 1 1 18 0 1 0 1 50 0
图5为视频编码***的结构示意图,如图5所示,该视频编码***100包括变换与量化模块101、帧内估计模块102、帧内预测模块103、运动补偿模块104、运动估计模块105、反变换与反量化模块106、滤波器控制分析模块107、去方块滤波及样本自适应缩进(SampleAdaptive 0ffset,SAO)滤波模块108、头信息编码及基于上下文的自适应二进制算术编码(Context-based Adaptive Binary Arithmatic Coding,CABAC)编码模块109和解码图像缓存模块110等部件;图6为视频解码***的结构示意图,如图6所示,该视频解码***200包括头信息解码及CABAC解码模块201、反变换与反量化模块202、帧内预测模块203、运动补偿模块204、去方块滤波及SAO滤波模块205和解码图像缓存模块206等部件。视频图像经过视频编码***100中变换与量化模块101、帧内估计模块102、帧内预测模块103、运动补偿模块104、运动估计模块105、去方块滤波及SAO滤波模块108以及头信息编码及CABAC模块109等部分处理之后,输出该视频图像的码流;该码流输入视频解码***200中,经过视频解码***200中头信息解码及CABAC解码模块201、反变换与反量化模块202、帧内预测模块203以及运动补偿模块204等部分处理,最终恢复出原来的视频图像。
按照高度参数和宽度参数,当前块可以为25种尺寸,具体地,标准中规定亮度块最大为128×128,但由于变换单元的最大尺寸为64×64,也就是说,亮度块在128×128的尺寸下必定需要先进行四叉树划分,因此最大的亮度块尺寸是64×64。表5为亮度块的尺寸示意表,如表5所示,
表5
(4×4) (4×8) (4×16) (4×32) (4×64)
(8×4) (8×8) (8×16) (8×32) (8×64)
(16×4) (16×8) (16×16) (16×32) (16×64)
(32×4) (32×8) (32×16) (32×32) (32×64)
(64×4) (64×8) (64×16) (64×32) (64×64)
现有技术中,根据当前块的高度参数和宽度参数对MIP模式进行限制,具体地,如果当前块的宽高比大于4,或者高宽比大于4,则不通过MIP模式对当前块进行编码,表6为现有技术中MIP模式下亮度块尺寸的限制,如表6所示,
表6
(4×4) (4×8) (4×16) (4×32) (4×64)
(8×4) (8×8) (8×16) (8×32) (8×64)
(16×4) (16×8) (16×16) (16×32) (16×64)
(32×4) (32×8) (32×16) (32×32) (32×64)
(64×4) (64×8) (64×16) (64×32) (64×64)
现有技术中,在MIP模式的第一类亮度块中(对应于4×4的亮度块),上相邻和左相邻亮度块各2个,经过矩阵运算,生成4×4的预测块;在MIP模式的第二类亮度块中(对应于4×8,8×4,8×8的亮度块),上相邻和左相邻亮度块各4个,经过矩阵运算,生成4×4的预测块;在MIP模式的第三类亮度块中(对应于其他大小的亮度块),上相邻和左相邻亮度块各4个,经过矩阵运算,生成4×8的预测块(4×16的亮度块),8×4的预测块(16×4的亮度块)或8×8的预测块(其他大小的亮度块)。其中,由于第三类亮度块会生成非正方形预测块,因此在计算时需要对矩阵进行奇数行的抽取。
进一步地,在语法中,可以通过MipSizeId表示MIP的应用类别,即MipSizeId为MIP块大小索引序号,numModes表示MIP模式的数量,boundarySize表示下采样获得的上参考行或左参考列的亮度块个数,predW表示预测块的宽度参数,predH表示预测块的高度参数,predC表示MIP的矩阵的边长。表7为现有技术中MIP模式对应的语法关系,如表7所示,语法中的MipSizeId,numModes,boundarySize,predW,predH,predC有以下关系:
表7
MipSizeId numModes boundarySize predW predH predC
0 35 2 4 4 4
1 19 4 4 4 4
2 11 4 Min(nTbW,8) Min(nTbH,8) 8
进一步地,在语法中,MIP块大小索引序号取值为0表示4×4的亮度块,取值为1表示4×8,8×4,8×8的亮度块,取值为2表示其他大小的亮度块。numModes表示一共会有多少种MIP预测模式,即4×4的亮度块共有35种,4×8,8×4,8×8的亮度块共有19种,其他大小的亮度块共有11种。boundarySize表示当前块上行或左列的相邻亮度块最终被下采样成2个或4个相邻亮度块。
现有技术中,编码器在通过MIP模式进行亮度预测时,可以通过如下的公式(2)进行:
其中,mWeight和vBias是各MIP模式通过深度学习训练出来的权重矩阵和偏置矩阵,具体地,mWeight为每一类MIP模式的权重矩阵,vBias为每一类MIP模式的偏置矩阵。sB为偏置矩阵的左移量,oW为四舍五入的保留值,sW为整体预测值的右移量,需要通过查表得到不同MIP模式下的sW值。
基于JVET-N1001-v7,在生成MIP的预测矩阵时,编码器是通过变量incW和incH来判断是否需要抽取奇数行的预测值,fO变量代表了mWeight需要减去的数值,具体地:
sincW=(predC>mipW)?2:1 (4)
incH=(predC>mipH)?2:1 (5)
如果MipSizeId<2,则
p[0]=pTemp[0]-(1<<(BitDepthY-1)) (6)
p[x]=pTemp[x]-pTemp[0]for x=1,inSize–1 (7)
否则
p[x]=pTemp[x+1]-pTemp[0] (8)
其中,incW=2或incH=2代表需要在宽度参数或者高度参数上进行抽取。
表8为现有技术中的sW的语法描述,如表8所示,由于MIP模式下sW取值为映射关系,因此通过表8可以获得全部模式下的sW取值。
表8
表9为现有技术中的fO的语法描述,如表9所示,在MIP模式预测值的计算过程中,fO变量代表了mWeight需要减去的数值,且需要通过查表得到不同亮度块在不同MIP模式下的fO值。mWeight是各MIP模式通过深度学习训练出来的权重矩阵。
由表9中fO的语法描述可以看出,fO的取值与亮度块尺寸大小和模式编号均相关。
表9
正是由于表9中fO的取值与亮度块尺寸和模式编号均相关,也就是说,不同MIP模式下fO的语法描述不同,编码器在通过MIP模式进行亮度预测时,对于不同MipSizeId或不同MIP模式编号modeId的当前编码块,fO的取值可能并不相同,因此会造成算法的不统一,且查询上述表9的流程增加了算法的时间复杂度,表9的存储也需要占用存储空间。
由此可见,现有技术在通过MIP模式进行亮度预测时,尺寸不同的亮度块所采用的参数也有可能不同,因此,需要占用较大的存储空间对大量参数进行存储,且预测过程中对参数的查找和调用也增加了整体时间,从而降低了编解码效率。
为了解决上述问题,本申请提出了一种图像编码方法,一方面,编码器可以通过对预存索引序号与偏移量的设定,即通过MipSizeId与fO的对应关系的设定,实现在编码时当前块fO的取值仅与当前块的大小相关,从而可以使MIP的实现更加简洁统一;另一方面,MipSizeId与fO的对应关系可以利用一维数组或具有类似功能的数据结构进行存储,降低了维度,节省了fO本身所占用的存储空间;再一方面,编码器在对fO进行统一化的修改更新时,还可以利用更新后的fO对相应的mWeight进行更新,从而可以避免编码性能的降低。
进一步地,本申请提出的图像编码方法,可以影响视频编码混合框架中的帧内预测部分,即主要应用于视频编码中的帧内预测模块103和视频解码中的帧内预测模块203中,对编码端和解码端同时作用。
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述。
在本申请的一个实施例中,图7为图像编码方法的实现流程示意图,如图7所示,在本申请的实施例中,编码器进行图像编码的方法可以包括以下步骤:
步骤101、确定当前块的大小。
在本申请的实施例中,编码器可以先确定当前块的大小,其中,当前块可以为待编码的当前编码块,也就是说,编码器在对当前块进行编码之前,可以先确定出当前块的具体尺寸大小。
进一步地,在本申请的实施例中,当前块可以为待编码的亮度块。
需要说明的是,在本申请的实施例中,按照当前块的高度参数H和宽度参数W,当前块的大小可以包括25种尺寸,具体地,标准中规定当前块最大为128×128,但由于变换单元的最大尺寸为64×64,也就是说,当前块在128×128的尺寸下必定需要先进行四叉树划分,因此,当前块的最大尺寸是64×64。
具体地,如上述表5所示,当前块的大小(H×W)可以包括(4×4)、(4×8)、(4×16)、(4×32)、(4×64)、(8×4)、(8×8)、(8×16)、(8×32)、(8×64)、(16×4)、(16×8)、(16×16)、(16×32)、(16×64)、(32×4)、(32×8)、(32×16)、(32×32)、(32×64)、(64×4)、(64×8)、(64×16)、(64×32)、(64×64)这25种尺寸。
步骤102、在利用MIP模式对当前块进行编码时,根据当前块的大小,确定第一偏移量。
在本申请的实施例中,编码器在利用MIP模式对当前块进行编码时,可以先根据当前块的大小,确定出当前块对应的第一偏移量。其中,基于上述公式(2),当前块对应的第一偏移量可以为表征权重矩阵mWeight需要减去的数值的fO。
需要说明的是,在本申请的实施例中,对于不同大小的当前块,编码器可以设置有不同的第一偏移量进行编码处理。具体地,编码器可以先根据当前块的大小确定出当前块对应的MIP块大小索引序号,然后可以根据MIP块大小索引序号进一步地确定出当前块对应的第一偏移量。
进一步地,在申请的实施例中,当前块的MIP块大小索引序号即为根据当前块的尺寸大小确定的MipSizeId,当前块的第一偏移量即为当前块的mWeight需要减去的参数的fO。
可以理解的是,在本申请的实施例中,编码器在根据当前块的大小,确定当前块对应的MIP块大小索引序号时,具体可以基于以下步骤进行:
(1)、若当前块的大小为4×4,则MipSizeId取值为0;
(2)、若当前块的大小为4×8、8×4或8×8,则MipSizeId取值为1;
(3)、若当前块的大小为其他情况,则MipSizeId取值为2。
进一步地,在本申请的实施例中,编码器可以预先设置有MipSizeId和fO的对应关系,即编码器设置有预存索引序号与偏移量的对应关系,因此,编码器在确定出当前块对应的MIP块大小索引序号之后,便可以基于预存索引序号与偏移量的对应关系,映射获得当前块对应的第一偏移量。
需要说明的是,在本申请的实施例中,基于预存索引序号与偏移量的对应关系,对于相同的MIP块大小索引序号,对应的第一偏移量也是相同的,也就是说,在本申请的实施例中,编码器在利用MIP模式对当前块进行编码时,编码器可以直接利用当前块对应的MIP块大小索引序号,确定出当前块对应的第一偏移量,从而可以进一步利用第一偏移量进行编码处理。
在本申请的实施例中,进一步地,在按照MIP模式对当前块进行编码之前,编码器可以先对预存索引序号与偏移量的对应关系进行设定。也就是说,编码器需要先对不同的MipSizeId设置不同的fO。
进一步地,在本申请的实施例中,编码器可以在对预存索引序号与偏移量的对应关系进行设定时,对于相同MipSizeId的亮度块,编码器可以将这些亮度块对应的fO设置为相同的数值。也就是说,在本申请中,编码器可以将具有相同MipSizeId的亮度块所对应的fO进行统一化设置。例如,表10为预存索引序号与偏移量的对应关系一,如表10所示,编码器可以直接对相同的MipSizeId设定相同的fO,从而使编码器在对当前块进行编码时,可以直接根据当前块对应的MIP块大小索引序号确定出对应的第一偏移量的取值;例如,如果当前块的大小为4×4,那么编码器可以确定当前块对应的MIP块大小索引序号取值为0,编码器便可以通过表10所示的MipSizeId和fO的对应关系,确定当前块对应的第一偏移量为66。
表10
MipSizeId fO
0 66
1 45
2 46
表11为预存索引序号与偏移量的对应关系二,如表11所示,编码器可以直接对相同的MipSizeId设定相同的fO,从而使编码器在对当前块进行编码时,可以直接根据当前块对应的MIP块大小索引序号确定出对应的第一偏移量的取值,例如,如果当前块的大小为4×4,那么编码器可以确定当前块对应的MIP块大小索引序号取值为1,编码器便可以通过表11所示的MipSizeId和fO的对应关系,确定当前块对应的第一偏移量为34。
表11
MipSizeId fO
0 34
1 23
2 46
由此可见,本申请中的上述表10、表11与上述表9相比,编码器在确定当前块对应的第一偏移量时,不需要再根据MipSizeId和MIP模式编号modeId两个变量的取值确定当前块对应的第一偏移量,而仅仅根据MipSizeId一个参数便可以获得当前块对应的第一偏移量,从而可以降低运算的复杂度,同时节省了用于存储如上述表9为例的fO的二维表的存储开销。
进一步地,在本申请的实施例中,编码器在对预存索引序号与偏移量的对应关系进行设定时,可以先基于原有的fO的语法描述,确定出同一个MipSizeId的不同MIP模式编号modeId所对应的fO中数值最大的fO,然后将该数值最大的fO确定为该一个MipSizeId所对应的第一偏移量。例如,基于如表9所示的原有的fO的语法描述,可以确定MipSizeId为0时,数值最大的fO为模式编号modeId为15时的66,因此,编码器可以将MipSizeId为0的所有模式编号modeId对应的fO均设定为66,即建立MipSizeId为0与fO为66的对应关系;相应地,基于如表9所示的原有的fO的语法描述,可以确定MipSizeId为1时,数值最大的fO为模式编号modeId为3时的45,因此,编码器可以将MipSizeId为1的所有模式编号modeId对应的fO均设定为45,即建立MipSizeId为1与fO为45的对应关系;相应地,基于如表9所示的原有的fO的语法描述,可以确定MipSizeId为2时,数值最大的fO为模式编号modeId为1时的46,因此,编码器可以将MipSizeId为2时的所有模式编号modeId对应的fO均设定为46,即建立MipSizeId为2与fO为46的对应关系。即获得上述表10。
具体地,编码器在利用上述表10、表11进行fO的获取之前,不需要同时确定出当前块对应的MipSizeId和modeId,只需要利用当前块的大小确定出MipSizeId,便可以获得当前块对应的fO。
可以理解的是,在本申请的实施例中,由于上述表10所示的MipSizeId和fO之间的对应关系为的一维数组,因此编码器可以利用一维数组或具有类似功能的数据结构对MipSizeId和fO之间的对应关系进行存储,与上述表9相比,降低了数组的维度,节省了数组本身所占用的存储空间。
步骤103、利用第一偏移量和当前块对应的相邻像素的重建值,计算第二偏移量。
在本申请的实施例中,编码器在根据当前块的大小,确定第一偏移量之后,便可以利用第一偏移量和当前块对应的相邻像素的重建值,计算获得第二偏移量。其中,第二偏移量可以为上述公式(2)中的oW,具体地,第二偏移量可以为控制比特移位操作的偏移量,例如,上述公式(2)中的oW为四舍五入的保留值,可以通过上述公式(3)计算获得。
需要说明的是,在本申请的实施例中,编码器在根据当前块的大小确定出当前块对应的MIP块大小索引序号,并基于预存索引序号与偏移量的对应关系确定出当前块对应的第一偏移量之后,便可以基于上述公式(3),利用第一偏移量计算获得当前块对应的第二偏移量。具体地,编码器在确定第二偏移量时,还需要利用当前块对应的相邻像素的重建值进行计算。
步骤104、根据第二偏移量,确定当前块的第一预测值。
在本申请的实施例中,编码器在基于第一偏移量和当前块对应的相邻像素的重建值,计算第二偏移量之后,可以根据第二偏移量,确定出当前块对应的第一预测值。
需要说明的是,在本申请的实施例中,编码器在根据第二偏移量确定当前块的第一预测值时,可以先通过第二偏移量,计算当前块中的预设位置的像素的第二预测值;然后可以对第二预测值进行滤波处理,从而可以得到当前块中的全部像素的第一预测值。
进一步地,在本申请的实施例中,预设位置可以为当前块中的特定位置,具体地,预设位置可以为当前块中的部分像素的特定位置。也就是说,在本申请中,编码器通过第二偏移量计算第二预测值,并不是当前块中的全部像素的预测值,而是当前块中的部分特定位置像素的预测值。
需要说明的是,在本申请的实施例中,编码器在通过第二偏移量计算获得当前块中的部分特定位置像素的第二预测值之后,可以对第二预测值进行滤波处理,从而可以获得当前块中的全部像素的预测值,即获得当前块对应的第一预测值。
可以理解的是,在本申请的实施例中,第二偏移量,可以用于在计算第二预测值的过程中,控制比特移位操作的偏移量。
步骤105、基于第一预测值,对当前块进行编码。
在本申请的实施例中,编码器在根据第二偏移量,确定当前块的第一预测值之后,便可以基于第一预测值,对当前编码块进行编码处理,从而可以获得当前块对应的码流。
进一步地,在本申请的实施例中,编码器在基于第一预测值,对当前块进行编码时,可以先计算当前块的原始值与第一预测值之间的预测差,然后可以对预测差值进行编码。
需要说明的是,在本申请的实施例中,编码器在对当前块进行编码时,并不是直接对当前块的第一预测值进行编码的,而是基于第一预测值和当前块对应的原始值,确定出二者之间的差值,即预测差,然后对预测差进行编码处理,从而可以有效地提高编解码效率。
本申请实施例提供了一种图像编码方法,编码器确定当前块的大小;在利用MIP模式对当前块进行编码时,根据当前块的大小,确定第一偏移量;利用第一偏移量和当前块对应的相邻像素的重建值,计算第二偏移量;根据第二偏移量,确定当前块的第一预测值;基于第一预测值,对当前块进行编码。由此可见,本申请提出的图像编码方法,在利用MIP模式进行编码时,可以根据当前块的大小直接确定出与当前块对应的第一偏移量,然后便可以利用第一偏移量对当前块进行编码处理,也就是说,在本申请中,基于预存索引序号与偏移量的对应关系,可以在确定出当前块的大小对应的MIP块大小索引序号之后,直接获得与MIP块大小索引序号对应的第一偏移量,从而在进行编码处理时,降低MIP算法的复杂度,能够在保证编码性能的基础上,减小编码过程中所需要的存储空间和整体时间,有效地提高编码效率。
基于上述实施例,在本申请的再一实施例中,由于编码器预先设置有预存索引序号与偏移量的对应关系,因此编码器在对当前块进行编码时,只需要根据当前块的大小确定出当前块对应的MIP块大小索引序号,便可以利用预存索引序号与偏移量的对应关系确定出相应地第一偏移量,也就是说,在本申请中,基于预存索引序号与偏移量的对应关系,编码器可以直接根据MipSizeId确定fO的取值,而不需要根据MipSizeId和modeId两个变量的取值确定fO取值,从而可以大大降低运算复杂度,节省了用于存储MipSizeId、modeId以及fO三者对应关系的二维表的存储开销。
也就是说,现有技术中,上述公式(2)中的fO代表了mWeight需要减去的数值,且需要通过查询图上述表9所示的MipSizeId、modeId以及fO三者对应关系才能得到当前块的fO值,由此可见,fO的取值与当前块的大小和模式编号均相关,这就造成了算法的不统一,同时如上述表9的MipSizeId、modeId以及fO三者对应关系的存储也需要占用较多存储空间。相比之下,本申请中的只需要存储MipSizeId与fO的对应关系,且对于相同的MipSizeId,即使modeId不同,对应的fO的取值也是相同的,从而既节省了存储空间,同时也降低了运算的复杂度。
具体地,在本申请的实施例中,语法上,本申请将MIP的预测计算过程的语法进行了简化,对相同MipSizeId的fO进行统一化修改,即仅需要根据当前块的大小便可以确定出对应的fO。
在本申请的实施例中,进一步地,编码器在将MIP的预测计算过程的语法进行了简化时,也可以直接将不同MipSizeId、不同modeId的任意亮度块所对应的fO均设置成相同的数值,也就是说,fO为固定数值,取消亮度块的大小与fO的相关性,将所有情况下的fO均定义为统一数值,不再存储与fO相关的表格,从而可以进一步降低MIP算法的复杂度,减少算法的存储空间,并使得MIP技术的实现和语法更加简洁统一。
在本申请的实施例中,进一步地,为了避免编码性能的损失,编码器在统一化修改fO的同时,还需要对mWeight的取值进行相应的修改。具体地,编码器在设定预存索引序号与偏移量的对应关系之后,可以对当前块对应的权重矩阵mWeight中的每一个权重值加上对应模式下的fO增大的部分,即可以对当前块的mWeight对应的原始mWeight中的每一个原始权重值加上更新后的fO,从而可以保持编码性能完全不改变,也就是说,编码器可以同时利用fO对mWeight进行相应的更新,从而可以在减少了存储空间、降低运算复杂度的同时,还能保持编码性能基本不变,同时保持预测计算结果不变。
需要说明的是,在本申请的实施例中,编码器在利用fO对mWeight进行相应的更新时,如果更新后的mWeight中存在大于预设权重阈值的权重值时,可以将该权重值设定为小于或者等于预设权重阈值。例如,编码器将预设权重阈值设定为7位二进制数的上限值127,若更新后的mWeight中存在权重值大于127,则可以通过钳位的方式,将大于127的权重值修改为小于或者等于预设权重阈值,如将其设定为127。
进一步地,在本申请的实施例中,如果更新后的mWeight中出现了大于预设权重阈值的权重值,还可以使用减小sW的方式,使更新后的mWeight中的全部权重值保持在预设权重阈值的范围以内。
进一步地,在本申请的实施例中,为了更好的保持编码性能,还可以使用公式(9)中所示的伪代码计算p[0]参数的值,即利用公式(9)替换公式(6),可以理解的是,使用公式(9)的计算方法可以缩小MIP矩阵中数据的动态范围:
p[0]=(1<<(BitDepthY-1))-pTemp[0] (9)
示例性的,对于MipSizeId的取值为0的亮度块,在统一化修改fO之前,初始的fO的语法描述如下表12所示,不同的MIP模式编号modeId,fO的取值也不同。
表12
MipSizeId 0 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17
0 34 21 7 27 27 28 56 13 47 15 40 21 16 7 45 66 21 32
其中,modeId取值为1的fO为21,对应的mWeight如下表13所示,
表13
18 16 72 2
16 19 55 7
12 72 34 14
0 84 13 21
20 19 65 54
18 19 48 65
15 23 31 73
10 27 18 76
20 21 18 87
19 21 19 87
20 20 22 85
20 20 25 84
20 21 24 82
20 20 24 82
20 22 24 82
19 23 24 82
基于上述表12,利用modeId为1时的取值为21的fO,可以获得modeId取值为1时对应的原始mWeight,具体地,可以对上述表13中的每一个权重值与21进行减法运算,从而可以获得对应的原始mWeight如下表14所示,
表14
-3 -5 51 -19
-5 -2 34 -14
-9 51 13 -7
-21 63 -8 0
-1 -2 44 33
-3 -2 27 44
-6 2 10 52
-11 6 -3 55
-1 0 -3 66
-2 0 -2 66
-1 -1 1 64
-1 -1 4 63
-1 0 3 61
-1 -1 3 61
-1 1 3 61
-2 2 3 61
在本申请的实施例中,在更新mWeight对应的原始mWeight时,为了缩小MIP矩阵中数据的动态范围,编码器利用公式(9)替换公式(6)。
表15
3 -5 51 -19
5 -2 34 -14
9 51 13 -7
21 63 -8 0
1 -2 44 33
3 -2 27 44
6 2 10 52
11 6 -3 55
1 0 -3 66
2 0 -2 66
1 -1 1 64
1 -1 4 63
1 0 3 61
1 -1 3 61
1 1 3 61
2 2 3 61
具体来说,是需要将MipSizeId的取值为0和1的亮度块的全部MIP模式编号modeId,所对应的全部原始mWeight的第一列取相反。例如,基于上述如表14,对第一列中的权重值取反之后,获得的初步更新mWeight如表15所示。
由于上述表12中fO数值最大的是MIP模式编号modeId为0的34,因此,编码器在对fO进行统一化修改时,可以直接将MipSizeId为0的全部亮度块对应的fO均设置为34,即获得更新后的fO的语法描述如下表16所示,
表16
MipSizeId fO
0 34
同时,编码器可以利用取值为34的fO继续对MIP模式编号modeId为1的亮度块的初步更新mWeight继续更新,即基于上述表15,对表15中的每一个权重值加上34,出从而可以获得更新后的mWeight如表17所示,
表17
37 29 85 15
39 32 68 20
43 85 47 27
55 97 26 34
35 32 78 67
37 32 61 78
40 36 44 86
45 40 31 89
35 34 31 100
36 34 32 100
35 33 35 98
35 33 38 97
35 34 37 95
35 33 37 95
35 35 37 95
36 36 37 95
可以理解的是,在此过程中,如果更新后的mWeight中出现了大于预设权重阈值的权重值,既可以将该权重值钳位至预设权重阈值的范围以内,还可以使用减小sW的方式,使更新后的mWeight中的全部权重值保持在预设权重阈值的范围以内。
通过上述描述可以理解,在本申请中,一方面,编码器可以通过对预存索引序号与偏移量的设定,即通过MipSizeId与fO的对应关系的设定,实现在编码时当前块fO的取值仅与当前块的大小相关,从而可以使MIP的实现更加简洁统一;另一方面,MipSizeId与fO的对应关系可以利用一维数组或具有类似功能的数据结构进行存储,降低了维度,节省了fO本身所占用的存储空间;再一方面,编码器在对fO进行统一化的修改更新时,还可以利用更新后的fO对相应的mWeight进行更新,从而可以避免编码性能的降低。
本申请实施例提供了一种图像编码方法,编码器确定当前块的大小;在利用MIP模式对当前块进行编码时,根据当前块的大小,确定第一偏移量;利用第一偏移量和当前块对应的相邻像素的重建值,计算第二偏移量;根据第二偏移量,确定当前块的第一预测值;基于第一预测值,对当前块进行编码。由此可见,本申请提出的图像编码方法,在利用MIP模式进行编码时,可以根据当前块的大小直接确定出与当前块对应的第一偏移量,然后便可以利用第一偏移量对当前块进行编码处理,也就是说,在本申请中,基于预存索引序号与偏移量的对应关系,可以在确定出当前块的大小对应的MIP块大小索引序号之后,直接获得与MIP块大小索引序号对应的第一偏移量,从而在进行编码处理时,降低MIP算法的复杂度,能够在保证编码性能的基础上,减小编码过程中所需要的存储空间和整体时间,有效地提高编码效率。
在本申请的另一个实施例中,图8为图像解码方法的实现流程示意图,如图8所示,在本申请的实施例中,解码器进行图像解码的方法可以包括以下步骤:
步骤201、解析码流,获得当前块的大小和编码模式。
在本申请的实施例中,解码器可以先确定当前块的大小和编码模式,其中,当前块可以为待解码的当前编码块,也就是说,解码器在对当前块进行解码之前,可以先确定出当前块的具体尺寸大小和编码模式。
需要说明的是,在本申请的实施例中,当前块的编码模式可以为67种传统帧内预测模式或MIP模式。
进一步地,在本申请的实施例中,当前块可以为待解码的亮度块。
需要说明的是,在本申请的实施例中,按照当前块的高度参数H和宽度参数W,当前块的大小可以包括25种尺寸,具体地,标准中规定当前块最大为128×128,但由于变换单元的最大尺寸为64×64,也就是说,当前块在128×128的尺寸下必定需要先进行四叉树划分,因此,当前块的最大尺寸是64×64。
步骤202、当当前块的编码模式为MIP模式时,根据当前块的大小,确定第一偏移量。
在本申请的实施例中,解码器在确定当前块的编码模式为MIP模式之后,可以先根据当前块的大小,确定出当前块对应的第一偏移量。其中,基于上述公式(2),当前块对应的第一偏移量可以为表征mWeight需要减去的数值的fO。
需要说明的是,在本申请的实施例中,对于不同大小的当前块,解码器可以设置有不同的第一偏移量进行解码处理。具体地,解码器可以先根据当前块的大小确定出当前块对应的MIP块大小索引序号,然后可以根据MIP块大小索引序号进一步地确定出当前块对应的第一偏移量。
进一步地,在申请的实施例中,当前块的MIP块大小索引序号即为根据当前块的尺寸大小确定的MipSizeId,当前块的第一偏移量即为当前块的mWeight需要减去的参数的fO。
可以理解的是,在本申请的实施例中,解码器在根据当前块的大小,确定当前块对应的MIP块大小索引序号时,具体可以基于以下步骤进行:
(1)、若当前块的大小为4×4,则MipSizeId取值为0;
(2)、若当前块的大小为4×8、8×4或8×8,则MipSizeId取值为1;
(3)、若当前块的大小为其他情况,则MipSizeId取值为2。
进一步地,在本申请的实施例中,解码器可以预先设置有MipSizeId和fO的对应关系,即解码器设置有预存索引序号与偏移量的对应关系,因此,解码器在确定出当前块对应的MIP块大小索引序号之后,便可以基于预存索引序号与偏移量的对应关系,映射获得当前块对应的第一偏移量。
需要说明的是,在本申请的实施例中,基于预存索引序号与偏移量的对应关系,对于相同的MIP块大小索引序号,对应的第一偏移量也是相同的,也就是说,在本申请的实施例中,解码器在利用MIP模式对当前块进行解码时,解码器可以直接利用当前块对应的MIP块大小索引序号,确定出当前块对应的第一偏移量,从而可以进一步利用第一偏移量进行解码处理。
在本申请的实施例中,进一步地,在按照MIP模式对当前块进行解码之前,解码器可以先对预存索引序号与偏移量的对应关系进行设定。也就是说,解码器需要先对不同的MipSizeId设置不同的fO。
进一步地,在本申请的实施例中,解码器可以在对预存索引序号与偏移量的对应关系进行设定时,对于相同MipSizeId的亮度块,解码器可以将这些亮度块对应的fO设置为相同的数值。也就是说,在本申请中,解码器可以将具有相同MipSizeId的亮度块所对应的fO进行统一化设置。例如,上述表10中,如果当前块的大小为4×4,那么解码器可以确定当前块对应的MIP块大小索引序号为0,解码器便可以通过表10所示的MipSizeId和fO的对应关系,确定当前块对应的第一偏移量为66;上述表11中,如果当前块的大小为4×4,那么编码器可以确定当前块对应的MIP块大小索引序号取值为1,编码器便可以通过表11所示的MipSizeId和fO的对应关系,确定当前块对应的第一偏移量为34。
由此可见,本申请中的上述表10、表11与与上述表9相比,解码器在确定当前块对应的第一偏移量时,不需要再根据MipSizeId和MIP模式编号modeId两个变量的取值确定当前块对应的第一偏移量,而仅仅根据MipSizeId一个参数便可以获得当前块对应的第一偏移量,从而可以降低运算的复杂度,同时节省了用于存储如上述表9为例的fO的二维表的存储开销。
进一步地,在本申请的实施例中,解码器在对预存索引序号与偏移量的对应关系进行设定时,可以先基于原有的fO的语法描述,确定出同一个MipSizeId的不同MIP模式编号modeId所对应的fO中数值最大的fO,然后将该数值最大的fO确定为该一个MipSizeId所对应的第一偏移量。例如,基于如表9所示的原有的fO的语法描述,可以确定MipSizeId为0时,数值最大的fO为模式编号modeId为15时的66,因此,解码器可以将MipSizeId为0的所有模式编号modeId对应的fO均设定为66,即建立MipSizeId为0与fO为66的对应关系;相应地,基于如表9所示的原有的fO的语法描述,可以确定MipSizeId为1时,数值最大的fO为模式编号modeId为3时的45,因此,解码器可以将MipSizeId为1的所有模式编号modeId对应的fO均设定为45,即建立MipSizeId为1与fO为45的对应关系;相应地,基于如表9所示的原有的fO的语法描述,可以确定MipSizeId为2时,数值最大的fO为模式编号modeId为1时的46,因此,解码器可以将MipSizeId为2时的所有模式编号modeId对应的fO均设定为46,即建立MipSizeId为2与fO为46的对应关系。即获得上述表10。
具体地,解码器在利用上述表10、表11进行fO的获取之前,不需要同时确定出当前块对应的MipSizeId和modeId,只需要利用当前块的大小确定出MipSizeId,便可以获得当前块对应的fO。
可以理解的是,在本申请的实施例中,由于上述表10所示的MipSizeId和fO之间的对应关系为的一维数组,因此解码器可以利用一维数组或具有类似功能的数据结构对MipSizeId和fO之间的对应关系进行存储,与上述表9相比,降低了数组的维度,节省了数组本身所占用的存储空间。
步骤203、利用第一偏移量和当前块对应的相邻像素的重建值,计算第二偏移量。
在本申请的实施例中,解码器在根据当前块的大小,确定第一偏移量之后,便可以利用第一偏移量和当前块对应的相邻像素的重建值,计算获得第二偏移量。其中,第二偏移量可以为上述公式(2)中的oW,具体地,第二偏移量可以为控制比特移位操作的偏移量,例如,上述公式(2)中的oW为四舍五入的保留值,可以通过上述公式(3)计算获得。
需要说明的是,在本申请的实施例中,解码器在根据当前块的大小确定出当前块对应的MIP块大小索引序号,并基于预存索引序号与偏移量的对应关系确定出当前块对应的第一偏移量之后,便可以基于上述公式(3),利用第一偏移量计算获得当前块对应的第二偏移量。具体地,解码器在确定第二偏移量时,还需要利用当前块对应的相邻像素的重建值进行计算。
步骤204、根据第二偏移量,确定当前块的第一预测值。
在本申请的实施例中,解码器在基于第一偏移量和当前块对应的相邻像素的重建值,计算第二偏移量之后,可以根据第二偏移量,确定出当前块对应的第一预测值。
需要说明的是,在本申请的实施例中,解码器在根据第二偏移量确定当前块的第一预测值时,可以先通过第二偏移量,计算当前块中的预设位置的像素的第二预测值;然后可以对第二预测值进行滤波处理,从而可以得到当前块中的全部像素的第一预测值。
进一步地,在本申请的实施例中,预设位置可以为当前块中的特定位置,具体地,预设位置可以为当前块中的部分像素的特定位置。也就是说,在本申请中,解码器通过第二偏移量计算第二预测值,并不是当前块中的全部像素的预测值,而是当前块中的部分特定位置像素的预测值。
需要说明的是,在本申请的实施例中,解码器在通过第二偏移量计算获得当前块中的部分特定位置像素的第二预测值之后,可以对第二预测值进行滤波处理,从而可以获得当前块中的全部像素的预测值,即获得当前块对应的第一预测值。
可以理解的是,在本申请的实施例中,第二偏移量,可以用于在计算第二预测值的过程中,控制比特移位操作的偏移量。
步骤205、基于第一预测值,对当前块进行解码。
在本申请的实施例中,解码器在根据第二偏移量,确定当前块的第一预测值之后,便可以基于第一预测值,对当前解码块进行解码处理,从而可以获得当前块对应的码流。
进一步地,在本申请的实施例中,解码器在基于第一预测值,对当前块进行解码时,可以先计算当前块的原始值与第一预测值之间的预测差,然后可以对预测差值进行解码。
需要说明的是,在本申请的实施例中,解码器在对当前块进行解码时,并不是直接对当前块的第一预测值进行解码的,而是基于第一预测值和当前块对应的原始值,确定出二者之间的差值,即预测差,然后对预测差进行解码处理,从而可以有效地提高编解码效率。
进一步地,在本申请的实施例中,解码器在基于第一预测值,确定当前块的重建值之前,可以先通过解析码流,获得当前块的预测差。
相应地,在本申请的实施例中,解码器在确定当前块的预测差,并确定当前块的第一预测值之后,便可以直接计算第一预测值与预测差之间的和值,将和值设定当前块的重建值。也就是说,解码器在基于第一预测值,确定当前块的重建值时,可以对第一预测值和预测差进行加法运算,从而获得当前块的重建值,以完成对当前块的解码处理。
本申请实施例提供了一种图像解码方法,解码器解析码流,获得当前块的大小和编码模式;当当前块的编码模式为MIP模式时,根据当前块的大小,确定第一偏移量;利用第一偏移量和当前块对应的相邻像素的重建值,计算第二偏移量;根据第二偏移量,确定当前块的第一预测值;基于第一预测值,确定当前块的重建值。由此可见,本申请提出的图像解码方法,在利用MIP模式进行解码时,可以根据当前块的大小直接确定出与当前块对应的第一偏移量,然后便可以利用第一偏移量对当前块进行解码处理,也就是说,在本申请中,基于预存索引序号与偏移量的对应关系,可以在确定出当前块的大小对应的MIP块大小索引序号之后,直接获得与MIP块大小索引序号对应的第一偏移量,从而在进行解码处理时,降低MIP算法的复杂度,能够在保证解码性能的基础上,减小解码过程中所需要的存储空间和整体时间,有效地提高解码效率。
基于上述实施例,在本申请的再一实施例中,图9为编码器的组成结构示意图一,如图9所示,本申请实施例提出的编码器300可以包括第一确定部分301、第一计算部分302以及编码部分303。
所述第一确定部分301,配置于确定当前块的大小;以及在利用MIP模式对所述当前块进行编码时,根据所述当前块的大小,确定第一偏移量;
所述第一计算部分302,配置于利用所述第一偏移量和所述当前块对应的相邻像素的重建值,计算第二偏移量;
所述第一确定部分301,还配置于根据所述第二偏移量,确定所述当前块的第一预测值;
所述编码部分303,配置于基于所述第一预测值,对所述当前块进行编码。
图10为编码器的组成结构示意图二,如图10所示,本申请实施例提出的编码器300还可以包括第一处理器304、存储有第一处理器304可执行指令的第一存储器305、第一通信接口306,和用于连接第一处理器304、第一存储器305以及第一通信接口306的第一总线307。
进一步地,在本申请的实施例中,上述第一处理器304,用于确定当前块的大小;在利用MIP模式对所述当前块进行编码时,根据所述当前块的大小,确定第一偏移量;利用所述第一偏移量和所述当前块对应的相邻像素的重建值,计算第二偏移量;根据所述第二偏移量,确定所述当前块的第一预测值;基于所述第一预测值,对所述当前块进行编码。
另外,在本实施例中的各功能模块可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。
集成的单元如果以软件功能模块的形式实现并非作为独立的产品进行销售或使用时,可以存储在一个计算机可读取存储介质中,基于这样的理解,本实施例的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)或processor(处理器)执行本实施例方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(Read OnlyMemory,ROM)、随机存取存储器(Random Access Memory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
本申请实施例提供了一种编码器,该编码器确定当前块的大小;在利用MIP模式对当前块进行编码时,根据当前块的大小,确定第一偏移量;利用第一偏移量和当前块对应的相邻像素的重建值,计算第二偏移量;根据第二偏移量,确定当前块的第一预测值;基于第一预测值,对当前块进行编码。由此可见,本申请提出的图像编码方法,在利用MIP模式进行编码时,可以根据当前块的大小直接确定出与当前块对应的第一偏移量,然后便可以利用第一偏移量对当前块进行编码处理,也就是说,在本申请中,基于预存索引序号与偏移量的对应关系,可以在确定出当前块的大小对应的MIP块大小索引序号之后,直接获得与MIP块大小索引序号对应的第一偏移量,从而在进行编码处理时,降低MIP算法的复杂度,能够在保证编码性能的基础上,减小编码过程中所需要的存储空间和整体时间,有效地提高编码效率。
基于上述实施例,在本申请的另一实施例中,图11为解码器的组成结构示意图一,如图11所示,本申请实施例提出的解码器400可以包括解析部分401,第二确定部分402以及第二计算部分403。
所述解析部分401,配置于解析码流,获得当前块的大小和编码模式;
所述第二确定部分402,配置于当所述当前块的编码模式为MIP模式时,根据所述当前块的大小,确定第一偏移量;
所述第二计算部分403,配置于利用所述第一偏移量和所述当前块对应的相邻像素的重建值,计算第二偏移量;
所述第二确定部分402,还配置于根据所述第二偏移量,确定所述当前块的第一预测值;以及基于所述第一预测值,确定所述当前块的重建值。
图12为解码器的组成结构示意图二,如图12所示,本申请实施例提出的解码器400还可以包括第二处理器404、存储有第二处理器404可执行指令的第二存储器405、第二通信接口406,和用于连接第二处理器404、第饿存储器405以及第二通信接口406的第二总线407。
进一步地,在本申请的实施例中,上述第二处理器404,用于解析码流,获得当前块的大小和编码模式;当所述当前块的编码模式为MIP模式时,根据所述当前块的大小,确定第一偏移量;利用所述第一偏移量和所述当前块对应的相邻像素的重建值,计算第二偏移量;根据所述第二偏移量,确定所述当前块的第一预测值;基于所述第一预测值,确定所述当前块的重建值。
另外,在本实施例中的各功能模块可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。
集成的单元如果以软件功能模块的形式实现并非作为独立的产品进行销售或使用时,可以存储在一个计算机可读取存储介质中,基于这样的理解,本实施例的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)或processor(处理器)执行本实施例方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(Read OnlyMemory,ROM)、随机存取存储器(Random Access Memory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
本申请实施例提供了一种解码器,该解码器解析码流,获得当前块的大小和编码模式;当当前块的编码模式为MIP模式时,根据当前块的大小,确定第一偏移量;利用第一偏移量和当前块对应的相邻像素的重建值,计算第二偏移量;根据第二偏移量,确定当前块的第一预测值;基于第一预测值,确定当前块的重建值。由此可见,本申请提出的图像解码方法,在利用MIP模式进行解码时,可以根据当前块的大小直接确定出与当前块对应的第一偏移量,然后便可以利用第一偏移量对当前块进行解码处理,也就是说,在本申请中,基于预存索引序号与偏移量的对应关系,可以在确定出当前块的大小对应的MIP块大小索引序号之后,直接获得与MIP块大小索引序号对应的第一偏移量,从而在进行解码处理时,降低MIP算法的复杂度,能够在保证解码性能的基础上,减小解码过程中所需要的存储空间和整体时间,有效地提高解码效率。
本申请实施例提供计算机可读存储介质和计算机可读存储介质,其上存储有程序,该程序被处理器执行时实现如上述实施例所述的方法。
具体来讲,本实施例中的一种图像编码方法对应的程序指令可以被存储在光盘,硬盘,U盘等存储介质上,当存储介质中的与一种图像编码方法对应的程序指令被一电子设备读取或被执行时,包括如下步骤:
确定当前块的大小;
在利用MIP模式对所述当前块进行编码时,根据所述当前块的大小,确定第一偏移量;
利用所述第一偏移量和所述当前块对应的相邻像素的重建值,计算第二偏移量;
根据所述第二偏移量,确定所述当前块的第一预测值;
基于所述第一预测值,对所述当前块进行编码。
具体来讲,本实施例中的一种图像解码方法对应的程序指令可以被存储在光盘,硬盘,U盘等存储介质上,当存储介质中的与一种图像解码方法对应的程序指令被一电子设备读取或被执行时,包括如下步骤:
解析码流,获得当前块的大小和编码模式;
当所述当前块的编码模式为MIP模式时,根据所述当前块的大小,确定第一偏移量;
利用所述第一偏移量和所述当前块对应的相邻像素的重建值,计算第二偏移量;
根据所述第二偏移量,确定所述当前块的第一预测值;
基于所述第一预测值,确定所述当前块的重建值。
本领域内的技术人员应明白,本申请的实施例可提供为方法、***、或计算机程序产品。因此,本申请可采用硬件实施例、软件实施例、或结合软件和硬件方面的实施例的形式。而且,本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器和光学存储器等)上实施的计算机程序产品的形式。
本申请是参照根据本申请实施例的方法、设备(***)、和计算机程序产品的实现流程示意图和/或方框图来描述的。应理解可由计算机程序指令实现流程示意图和/或方框图中的每一流程和/或方框、以及实现流程示意图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在实现流程示意图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在实现流程示意图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在实现流程示意图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
以上所述,仅为本申请的较佳实施例而已,并非用于限定本申请的保护范围。
工业实用性
本申请实施例提供了一种图像编解码方法、编码器、解码器以及存储介质,编码器确定当前块的大小;在利用MIP模式对当前块进行编码时,根据当前块的大小,确定第一偏移量;利用第一偏移量和当前块对应的相邻像素的重建值,计算第二偏移量;根据第二偏移量,确定当前块的第一预测值;基于第一预测值,对当前块进行编码。解码器解析码流,获得当前块的大小和编码模式;当当前块的编码模式为MIP模式时,根据当前块的大小,确定第一偏移量;利用第一偏移量和当前块对应的相邻像素的重建值,计算第二偏移量;根据第二偏移量,确定当前块的第一预测值;基于第一预测值,确定当前块的重建值。由此可见,本申请提出的图像编解码方法,在利用MIP模式进行编解码时,可以根据当前块的大小直接确定出与当前块对应的第一偏移量,然后便可以利用第一偏移量对当前块进行编解码处理,也就是说,在本申请中,基于预存索引序号与偏移量的对应关系,可以在确定出当前块的大小对应的MIP块大小索引序号之后,直接获得与MIP块大小索引序号对应的第一偏移量,从而在进行编解码处理时,降低MIP算法的复杂度,能够在保证编解码性能的基础上,减小编解码过程中所需要的存储空间和整体时间,有效地提高编解码效率。

Claims (11)

1.一种图像编码方法,应用于编码器,所述方法包括:
确定当前块的大小;
在利用基于矩阵的帧内预测MIP模式对所述当前块进行编码时,根据所述当前块的大小,利用第一偏移量和所述当前块对应的相邻像素的重建值,计算第二偏移量;其中,所述第一偏移量为固定数值;
通过所述第二偏移量,计算所述当前块中的预设位置的像素的第二预测值;其中,所述预设位置为所述当前块中的特定位置;
对所述第二预测值进行插值,得到所述当前块中的全部像素的第一预测值;
计算所述当前块的原始值与所述第一预测值之间的预测差;
对所述预测差值进行编码。
2.根据权利要求1所述方法,其中,
所述第二偏移量,用于在计算所述第二预测值的过程中,控制比特移位操作结果的偏移量。
3.一种图像解码方法,应用于解码器,所述方法包括:
解析码流,获得当前块的大小、编码模式以及预测差;
当所述当前块的编码模式为MIP模式时,根据所述当前块的大小,利用第一偏移量和所述当前块对应的相邻像素的重建值,计算第二偏移量;其中,所述第一偏移量为固定数值;
通过所述第二偏移量,计算所述当前块中的预设位置的像素的第二预测值;其中,所述预设位置为所述当前块中的特定位置;
对所述第二预测值进行插值,得到所述当前块中的全部像素的第一预测值;
计算所述第一预测值与所述预测差之间的和值,将所述和值设定所述当前块的重建值。
4.根据权利要求3所述方法,其中,
所述第二偏移量,用于在计算所述第二预测值的过程中,控制比特移位操作结果的偏移量。
5.一种编码器,所述编码器包括:第一确定部分,第一计算部分以及编码部分,
所述第一确定部分,配置于确定当前块的大小;
所述第一计算部分,配置于在利用MIP模式对所述当前块进行编码时,根据所述当前块的大小,利用第一偏移量和所述当前块对应的相邻像素的重建值,计算第二偏移量;其中,所述第一偏移量为固定数值;
所述第一确定部分,还配置于通过所述第二偏移量,计算所述当前块中的预设位置的像素的第二预测值;其中,所述预设位置为所述当前块中的特定位置;以及对所述第二预测值进行插值,得到所述当前块中的全部像素的第一预测值;
所述编码部分,配置于计算所述当前块的原始值与所述第一预测值之间的预测差;以及对所述预测差值进行编码。
6.根据权利要求5所述的编码器,其中,所述第二偏移量,用于在计算所述第二预测值的过程中,控制比特移位操作结果的偏移量。
7.一种解码器,所述解码器包括:解析部分,第二确定部分以及第二计算部分,
所述解析部分,配置于解析码流,获得当前块的大小、编码模式以及预测差;
所述第二计算部分,配置于当前块的编码模式为MIP模式时,根据所述当前块的大小,利用第一偏移量和所述当前块对应的相邻像素的重建值,计算第二偏移量;其中,所述第一偏移量为固定数值;
所述第二确定部分,配置于通过所述第二偏移量,计算所述当前块中的预设位置的像素的第二预测值;其中,所述预设位置为所述当前块中的特定位置;以及对所述第二预测值进行插值,得到所述当前块中的全部像素的第一预测值;以及计算所述第一预测值与所述预测差之间的和值;以及将所述和值设定所述当前块的重建值。
8.根据权利要求7所述的解码器,其中,所述第二偏移量,用于在计算所述第二预测值的过程中,控制比特移位操作结果的偏移量。
9.一种编码器,所述编码器包括第一处理器、存储有所述第一处理器可执行指令的第一存储器、第一通信接口,和用于连接所述第一处理器、所述第一存储器以及所述第一通信接口的第一总线,当所述指令被所述第一处理器执行时,实现如权利要求1-2任一项所述的方法。
10.一种解码器,所述解码器包括第二处理器、存储有所述第二处理器可执行指令的第二存储器、第二通信接口,和用于连接所述第二处理器、所述第二存储器以及所述第一通信接口的第二总线,当所述指令被所述第二处理器执行时,实现如权利要求3-4一项所述的方法。
11.一种计算机可读存储介质,其上存储有程序,应用于编码器和解码器中,所述程序被处理器执行时,实现如权利要求1-4任一项所述的方法。
CN202310401510.9A 2019-09-24 2019-09-24 图像编解码方法、编码器、解码器以及存储介质 Pending CN116634157A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202310401510.9A CN116634157A (zh) 2019-09-24 2019-09-24 图像编解码方法、编码器、解码器以及存储介质

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN202310401510.9A CN116634157A (zh) 2019-09-24 2019-09-24 图像编解码方法、编码器、解码器以及存储介质
CN201980060144.7A CN112840652A (zh) 2019-09-24 2019-09-24 图像编解码方法、编码器、解码器以及存储介质
PCT/CN2019/107612 WO2021056223A1 (zh) 2019-09-24 2019-09-24 图像编解码方法、编码器、解码器以及存储介质

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN201980060144.7A Division CN112840652A (zh) 2019-09-24 2019-09-24 图像编解码方法、编码器、解码器以及存储介质

Publications (1)

Publication Number Publication Date
CN116634157A true CN116634157A (zh) 2023-08-22

Family

ID=75166224

Family Applications (4)

Application Number Title Priority Date Filing Date
CN202310401510.9A Pending CN116634157A (zh) 2019-09-24 2019-09-24 图像编解码方法、编码器、解码器以及存储介质
CN202110629410.2A Active CN113905236B (zh) 2019-09-24 2019-09-24 图像编解码方法、编码器、解码器以及存储介质
CN201980060144.7A Pending CN112840652A (zh) 2019-09-24 2019-09-24 图像编解码方法、编码器、解码器以及存储介质
CN202310399573.5A Pending CN116347086A (zh) 2019-09-24 2019-09-24 图像编解码方法、编码器、解码器以及存储介质

Family Applications After (3)

Application Number Title Priority Date Filing Date
CN202110629410.2A Active CN113905236B (zh) 2019-09-24 2019-09-24 图像编解码方法、编码器、解码器以及存储介质
CN201980060144.7A Pending CN112840652A (zh) 2019-09-24 2019-09-24 图像编解码方法、编码器、解码器以及存储介质
CN202310399573.5A Pending CN116347086A (zh) 2019-09-24 2019-09-24 图像编解码方法、编码器、解码器以及存储介质

Country Status (14)

Country Link
US (3) US11159814B2 (zh)
EP (1) EP3863287A4 (zh)
JP (1) JP7461353B2 (zh)
KR (3) KR102602418B1 (zh)
CN (4) CN116634157A (zh)
AU (1) AU2019467372B2 (zh)
BR (1) BR112021008833A2 (zh)
CA (1) CA3116601C (zh)
IL (1) IL282280A (zh)
MX (1) MX2021005546A (zh)
PH (1) PH12021550833A1 (zh)
RU (1) RU2767188C1 (zh)
WO (1) WO2021056223A1 (zh)
ZA (1) ZA202102495B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
SG11202106215XA (en) * 2019-03-12 2021-07-29 Guangdong Oppo Mobile Telecommunications Corp Ltd Intra-frame prediction method and apparatus, and computer-readable storage medium
CN112655215A (zh) 2019-07-10 2021-04-13 Oppo广东移动通信有限公司 图像分量预测方法、编码器、解码器以及存储介质
US20230254507A1 (en) * 2019-10-11 2023-08-10 Interdigital Vc Holdings France Deep intra predictor generating side information

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011259362A (ja) * 2010-06-11 2011-12-22 Sony Corp 画像処理装置および方法
CA2868255C (en) * 2012-04-13 2018-04-17 Mitsubishi Electric Corporation Image encoding device, image decoding device, image encoding method, and image decoding method
EP2901571A1 (en) * 2012-09-28 2015-08-05 Interdigital Patent Holdings, Inc. Wireless communication using multi-dimensional antenna configuration
KR102250092B1 (ko) * 2013-10-14 2021-05-10 삼성전자주식회사 다시점 비디오 부호화 방법 및 장치, 다시점 비디오 복호화 방법 및 장치
WO2016070808A1 (en) * 2014-11-05 2016-05-12 Mediatek Singapore Pte. Ltd. Method and apparatus of video coding with prediction offset
US20180309995A1 (en) * 2015-04-21 2018-10-25 Vid Scale, Inc. High dynamic range video coding
CN117376554A (zh) * 2016-02-25 2024-01-09 株式会社Kt 用于处理视频信号的方法和设备
WO2017209328A1 (ko) * 2016-06-03 2017-12-07 엘지전자 주식회사 영상 코딩 시스템에서 인트라 예측 방법 및 장치
EP3301915A1 (en) 2016-09-30 2018-04-04 Thomson Licensing Method and apparatus for omnidirectional video coding with adaptive intra most probable modes
CN116634182A (zh) * 2016-10-04 2023-08-22 株式会社Kt 对图像进行解码和编码的方法、图像数据的发送方法
WO2018134363A1 (en) * 2017-01-19 2018-07-26 Telefonaktiebolaget Lm Ericsson (Publ) Filter apparatus and methods
CN111133756B (zh) * 2017-10-12 2022-04-19 联发科技股份有限公司 用于视频编码的神经网络方法和装置
CN114145016A (zh) 2019-08-30 2022-03-04 阿里巴巴集团控股有限公司 视频信号的矩阵加权帧内预测
US11184622B2 (en) 2019-09-18 2021-11-23 Sharp Kabushiki Kaisha Video decoding apparatus and video coding apparatus

Also Published As

Publication number Publication date
RU2767188C1 (ru) 2022-03-16
CN112840652A (zh) 2021-05-25
KR20230156810A (ko) 2023-11-14
CN113905236B (zh) 2023-03-28
CN116347086A (zh) 2023-06-27
AU2019467372A1 (en) 2021-05-13
ZA202102495B (en) 2023-02-22
US20210400297A1 (en) 2021-12-23
KR20230157531A (ko) 2023-11-16
CA3116601C (en) 2023-01-03
PH12021550833A1 (en) 2021-10-04
KR20210078536A (ko) 2021-06-28
US20240107050A1 (en) 2024-03-28
WO2021056223A1 (zh) 2021-04-01
EP3863287A1 (en) 2021-08-11
EP3863287A4 (en) 2022-02-23
CA3116601A1 (en) 2021-04-01
JP7461353B2 (ja) 2024-04-03
BR112021008833A2 (pt) 2022-04-12
IL282280A (en) 2021-05-31
MX2021005546A (es) 2021-06-23
AU2019467372B2 (en) 2022-05-19
CN113905236A (zh) 2022-01-07
KR102602418B1 (ko) 2023-11-15
JP2022511877A (ja) 2022-02-01
US11159814B2 (en) 2021-10-26
US11882304B2 (en) 2024-01-23
US20210235104A1 (en) 2021-07-29

Similar Documents

Publication Publication Date Title
CN113068032B (zh) 图像编解码方法、编码器、解码器以及存储介质
JP5612215B2 (ja) クワッドツリーを用いるブロック情報の符号化/復号化方法及びその方法を使用する装置
EP3007447A1 (en) Method for improving intra-prediction of diagonal mode in video coding
CN113785569B (zh) 视频编码的非线性适应性环路滤波方法和装置
CN103503456A (zh) 用于减少环内滤波缓冲区的方法及其装置
CN113905236B (zh) 图像编解码方法、编码器、解码器以及存储介质
KR20220046686A (ko) 비디오 코딩을 위한 제약된 교차 성분 적응형 루프 필터링 방법 및 장치
WO2022116113A1 (zh) 一种帧内预测方法、装置及解码器和编码器
CN116420353A (zh) 用于视频编解码的残差和系数编解码
CN116746148A (zh) 用于视频编解码的残差和系数编解码
CN114830663A (zh) 变换方法、编码器、解码器以及存储介质
CN116803077A (zh) 用于视频编解码的残差和系数编解码
CN113243105B (zh) 亮度分量预测方法、编码器、解码器以及存储介质
WO2022174467A1 (zh) 帧内预测方法、编码器、解码器以及存储介质
TW202404370A (zh) 解碼方法、編碼方法、解碼器、編碼器、電子設備、電腦可讀儲存媒介、電腦程式產品以及碼流
CN114830658A (zh) 变换方法、编码器、解码器以及存储介质
CN118160306A (zh) 帧内预测方法、解码器、编码器及编解码***

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination