CN114079771B - 基于小波变换的图像编解码方法及装置 - Google Patents

基于小波变换的图像编解码方法及装置 Download PDF

Info

Publication number
CN114079771B
CN114079771B CN202010820592.7A CN202010820592A CN114079771B CN 114079771 B CN114079771 B CN 114079771B CN 202010820592 A CN202010820592 A CN 202010820592A CN 114079771 B CN114079771 B CN 114079771B
Authority
CN
China
Prior art keywords
sub
band
wavelet
subband
bands
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010820592.7A
Other languages
English (en)
Other versions
CN114079771A (zh
Inventor
马祥
杨海涛
董存辉
刘�东
张恋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
University of Science and Technology of China USTC
Huawei Technologies Co Ltd
Original Assignee
University of Science and Technology of China USTC
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by University of Science and Technology of China USTC, Huawei Technologies Co Ltd filed Critical University of Science and Technology of China USTC
Priority to CN202010820592.7A priority Critical patent/CN114079771B/zh
Priority to PCT/CN2021/110574 priority patent/WO2022033371A1/zh
Publication of CN114079771A publication Critical patent/CN114079771A/zh
Application granted granted Critical
Publication of CN114079771B publication Critical patent/CN114079771B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/13Adaptive entropy coding, e.g. adaptive variable length coding [AVLC] or context adaptive binary arithmetic coding [CABAC]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124Quantisation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146Data rate or code amount at the encoder output
    • H04N19/147Data rate or code amount at the encoder output according to rate distortion criteria
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/625Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding using discrete cosine transform [DCT]

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Discrete Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Compression Of Band Width Or Redundancy In Fax (AREA)

Abstract

本申请实施例提供一种基于小波变换的图像编解码方法及装置。其中,包括:对图像块K进行N次小波变换,以得到3N+1个子带的小波系数;对所述3N+1个子带的小波系数分别进行量化处理,以得到所述3N+1个子带的量化后的小波系数;根据所述3N+1个子带中任一子带中的量化后的小波系数的上下文信息对所述任一子带进行熵编码,以得到所述任一子带的压缩码流,所述任一子带中小波系数的上下文信息包括已编码的同位子带中的小波系数。通过本申请实施例,通过参考已编码的同位子带中的子带系数,提高了上下文信息的关联性,进而提高了提高了图像熵编码的效率。

Description

基于小波变换的图像编解码方法及装置
技术领域
本申请涉及图像编解码领域,尤其涉及一种基于小波变换的图像编解码方法及装置。
背景技术
数字图像是以数字信号方式记录的图像信息。数字图像(以下简称图像)可看作一个M行K列的二维阵列,包含M×K个采样,每个采样的位置称为采样位置,每个采样的数值称为采样值。
在图像存储、传输等应用中,通常需要对图像做编码操作,以减少存储容量和传输带宽。一个典型的图像编码流程一般包括变换、量化和熵编码三个步骤。针对一幅待编码图像,第一步通过变换对待编码图像进行去相关,得到能量分布更加集中的变换系数;第二步对变换系数进行量化,得到量化系数;第三步对量化系数进行熵编码得到压缩码流。
图像编码中常用的变换方式有离散余弦变换,小波变换等。小波变换是一种局部变换方法,能对图像进行局部化、多尺度分析,聚焦到信号的变化细节,非常适合于图像编码任务。
其中,图像经过小波变换后,形成多个子带,例如,如果一幅图像经过了N次小波变换,将会得到3N+1个子带(或者称为子图像)。针对小波变换得到的多个子带,将对其进行量化和熵编码操作以得到压缩码流。解码操作与编码操作在顺序上相反,解码操作一般包括熵解码、反量化和反变换三个步骤。其中,如对一幅图像经过一次小波变换,则得到4个子带LL1、LH1、HL1、HH1,其中,该四个子带均为一级子带;对其中的子带LL1经过一次小波变换得到4个子带LL2、LH2、HL2、HH2,则该四个子带均为二级子带;依次类推,则经过i次小波变换,可得到i级子带。
针对小波系数的熵编码方法实际上是一种子带编码方法,也就是对所有子带编码。例如,熵编码方法可以采用基于上下文的熵编码方法,使用逐行扫描的方法编码子带中的每个系数,在编码每一个系数时,首先获取当前系数对应的上下文区域中的上下文信息,根据上下文信息对该系数进行概率估计,得到该系数的概率分布信息,根据所述概率分布信息对所述系数进行编码。其中,上下文区域中的上下文信息包括:当前系数子带内的区域大小为3x3、5x5或7x7区域内的上边和左边的已重建的系数信息,或者当前系数子带间的3x3、5x5或7x7区域内的已编码信息。如果区域内的上下文信息不可得,如区域内的系数未编码,或者系数不存在,则填充0系数。
当子带的尺寸发生变化时,对当前第i-1级子带内的系数进行熵编码时,可使用i级已编码子带经过小波逆变换得到与i-1级小波子带相同分辨率的系数块,将该系数块作为当前系数子带间的上下文信息对当前系数进行概率估计。例如,当对1级子带内的变换系数进行熵编码时,对已编码的2级子带内的系数进行小波逆变换,得到系数块LL1’,将系数块LL1’作为1级小波系数熵编码时的子带间的上下文信息对当前系数进行概率估计。
然而采用现有技术,当对当前级的子带内的系数进行编码时,会参考高一级已编码子带小波逆变换后的系数进行编码,其相关性较低;当对边界的系数进行熵编码时,如果上下文信息不可得,填充0系数,则会影响当前系数概率分布的准确性;或者,当对每一级子带内的系数进行编码时,使用的是行扫描方法,其不具有信号自适应性。
综上所述,现有技术的图像编解码效率低下。
发明内容
本申请公开了一种基于小波变换的图像编解码方法及装置,可以提高图像编解码的效率。
第一方面,本申请实施例提供一种基于小波变换的图像编码方法,包括:对图像块K进行N次小波变换,以得到3N+1个子带的小波系数,所述N为大于0的整数;对所述3N+1个子带的小波系数分别进行量化处理,以得到所述3N+1个子带的量化后的小波系数;根据所述3N+1个子带中任一子带中的量化后的小波系数的上下文信息对所述任一子带进行熵编码,以得到所述任一子带的压缩码流,其中,所述任一子带中的量化后的小波系数的上下文信息包括已编码的同位子带中的小波系数;所述同位子带是与所述图像块K相邻的图像块中的子带,且所述同位子带在与所述图像块K相邻的图像块中的位置与所述任一子带在所述图像块K中的位置相同。
通过本申请实施例,在对子带进行熵编码的过程中,通过根据任一子带中小波系数的上下文信息对所述任一子带进行熵编码,以得到任一子带的压缩码流,其中,该上下文信息为已编码的同位子带中的小波系数。通过参考已编码的同位子带中的小波系数来对子带进行熵编码,提高了上下文信息的关联性,进而提高了概率估计的准确度,进一步可提高图像熵编码的效率。
其中,所述同位子带是与所述图像块K空间相邻的图像块中的子带。所述同位子带在与所述图像块K相邻的图像块中的位置与所述任一子带在所述图像块K中的位置相同包括:所述同位子带与所述任一子带为同一级子带,所述同位子带与所述任一子带为同一种类型的子带,所述子带类型包括LL子带,HL子带,LH子带和HH子带中至少一种。
其中,所述任一子带中的量化后的上边界小波系数的上下文信息为已编码的同位子带的下边界的小波系数。
所述任一子带中的量化后的左边界小波系数的上下文信息为已编码的同位子带的右边界的小波系数。
所述任一子带中的量化后的左上边界小波系数的上下文信息为已编码的同位子带的右下边界的小波系数。
其中,所述任一子带中的量化后的小波系数的上下文信息包括所述任一子带的参考子带中的小波系数,所述参考子带通过对比所述任一子带更高一级的子带中已编码的高频子带进行上采样或者小波逆变换得到。所述高频子带为HL,LH和HH中至少一个子带。
其中,小波变换是对每一级低频子带不断分解为多个子带。上述任一子带为对所述图像块K进行N次小波变换后得到的所有子带中的任一一个子带。更高一级的子带为比任一子带多了一次小波变换得到的子带。例如,如果任一子带是i次小波变换得到的子带,则比所述任一子带更高一级的子带为i+1次小波变换得到的子带。
进一步地,所述任一子带中小波系数还包括非边界小波系数。
其中,所述任一子带为子带HHi、子带HLi、子带LHi中的任一个,所述参考子带通过对子带MPi+1以及小波系数均设为0的除子带MPi+1外的各子带进行小波逆变换得到;所述子带MPi+1为子带HHi+1、子带HLi+1、子带LHi+1中的至少一个,i为正整数,用于指示子带的级,所述i不大于N-1,所述子带MPi+1以及所述除子带MPi+1外的各子带通过对子带LLi进行一次小波变换得到。
作为一种可选的实现方式,所述根据所述3N+1个子带中任一子带的量化后的小波系数的上下文信息对所述任一子带进行熵编码包括:根据小波系数扫描次序和所述3N+1个子带中任一子带中的量化后的小波系数的上下文信息对所述任一子带进行熵编码,所述小波系数扫描次序为对所述任一子带中的量化后的小波系数进行熵编码的次序。
其中,所述方法还包括:根据所述图像块K中的低频子带的纹理来确定所述任一子带的小波系数扫描次序;其中,当所述图像块K中的低频子带的纹理为水平纹理时,则所述小波系数扫描次序为水平扫描次序;当所述图像块K中的低频子带的纹理为竖直纹理时,则所述小波系数扫描次序为竖直扫描次序;当所述图像块K中的低频子带的纹理既不是水平纹理也不是竖直纹理时,则所述小波系数扫描次序为Z型扫描次序。
其中,所述任一子带为高频子带,其为子带HH、子带HL、子带LH中的任一个。
可替代的,所述小波系数扫描次序为多种扫描次序中对应率失真值最小的扫描次序;其中,所述多种扫描次序对应的率失真值为根据按照多种扫描次序分别对所述任一子带进行编码得到的压缩码流所确定的。
可替代的,所述小波系数扫描次序为竖直扫描次序或者Z型扫描次序。
其中,所述方法还包括:将所述小波系数扫描次序对应的标识写入码流,以便解码端进行图像解码。
第二方面,本申请实施例提供一种基于小波变换的图像编码方法,包括:对图像块K进行N次小波变换,以得到3N+1个子带的小波系数,所述N为大于0的整数;对所述3N+1个子带的小波系数分别进行量化处理,以得到所述3N+1个子带的量化后的小波系数;根据所述3N+1个子带中任一子带中的量化后的小波系数的上下文信息对所述任一子带进行熵编码,以得到所述任一子带的压缩码流,其中,所述任一子带中的量化后的小波系数的上下文信息包括所述任一子带的参考子带中的小波系数,所述参考子带通过对比所述任一子带更高一级的子带中已编码的高频子带进行上采样或者小波逆变换得到。
通过本申请实施例,在对子带进行熵编码的过程中,通过根据任一子带中小波系数的上下文信息对所述任一子带进行熵编码,以得到任一子带的压缩码流,其中,该上下文信息为任一子带的参考子带中的小波系数,该参考子带通过对比所述任一子带更高一级的子带中已编码的高频子带进行上采样或者小波逆变换得到。通过参考已编码的高频子带的子带系数,避免参考低频子带的子带系数,提高了上下文信息的关联性,进而提高了概率估计的准确度,进一步提高了图像熵编码的效率。
其中,所述任一子带为子带HHi、子带HLi、子带LHi中的任一个,所述参考子带通过对子带MPi+1以及小波系数均设为0的除子带MPi+1外的各子带进行小波逆变换得到;所述子带MPi+1为子带HHi+1、子带HLi+1、子带LHi+1中的至少一个,i为正整数,用于指示子带的级,所述i不大于N-1,所述子带MPi+1以及所述除子带MPi+1外的各子带通过对子带LLi进行一次小波变换得到。
其中,所述根据所述3N+1个子带中任一子带中的量化后的小波系数的上下文信息对所述任一子带进行熵编码包括:根据小波系数扫描次序和所述3N+1个子带中任一子带中的量化后的小波系数的上下文信息对所述任一子带进行熵编码,所述小波系数扫描次序为对所述任一子带中的量化后的小波系数进行熵编码的次序。
其中,所述方法还包括:根据所述图像块K中的低频子带的纹理来确定所述任一子带的小波系数扫描次序;其中,当所述图像块K中的低频子带的纹理为水平纹理时,则所述小波系数扫描次序为水平扫描次序;当所述图像块K中的低频子带的纹理为竖直纹理时,则所述小波系数扫描次序为竖直扫描次序;当所述图像块K中的低频子带的纹理既不是水平纹理也不是竖直纹理时,则所述小波系数扫描次序为Z型扫描次序。
其中,所述任一子带为子带HH、子带HL、子带LH中的任一个。
可替代的,所述小波系数扫描次序为多种扫描次序中对应率失真值最小的扫描次序;其中,所述多种扫描次序对应的率失真值为根据按照多种扫描次序分别对所述任一子带进行编码得到的压缩码流所确定的。
可替代的,所述小波系数扫描次序为竖直扫描次序或者Z型扫描次序。
其中,所述方法还包括:将所述小波系数扫描次序对应的标识写入码流,以便解码端进行图像解码。
第三方面,本申请实施例提供一种基于小波变换的图像编码方法,包括:对图像块K进行N次小波变换,以得到3N+1个子带的小波系数,所述N为大于0的整数;对所述3N+1个子带的小波系数分别进行量化处理,以得到3N+1个子带的量化后的小波系数;按照小波系数扫描次序对所述3N+1个子带中任一子带中的量化后的小波系数进行熵编码,以得到所述任一子带的压缩码流,所述小波系数扫描次序为对所述任一子带中的量化后的小波系数进行熵编码的次序。
通过本申请实施例,通过根据小波系数扫描次序来对子带进行熵编码,使得在对每一个子带系数进行熵编码时按照特定顺序进行编码。该手段提高了图像熵编码的效率。
其中,所述方法还包括:根据所述图像块K中的低频子带的纹理来确定所述任一子带的小波系数扫描次序;其中,当所述图像块K中的低频子带的纹理为水平纹理时,则所述小波系数扫描次序为水平扫描次序;当所述图像块K中的低频子带的纹理为竖直纹理时,则所述小波系数扫描次序为竖直扫描次序;当所述图像块K中的低频子带的纹理既不是水平纹理也不是竖直纹理时,则所述小波系数扫描次序为Z型扫描次序。
其中,所述任一子带为子带HH、子带HL、子带LH中的任一个。
可替代的,所述小波系数扫描次序为多种扫描次序中对应率失真值最小的扫描次序;其中,所述多种扫描次序对应的率失真值为根据按照多种扫描次序分别对所述任一子带进行编码得到的压缩码流所确定的。
可替代的,所述小波系数扫描次序为竖直扫描次序或者Z型扫描次序。
其中,还包括:将所述小波系数扫描次序对应的标识写入码流,以便解码端进行图像解码。
第四方面,本申请实施例提供一种基于小波变换的图像解码方法,包括:根据图像块K的3N+1个子带的上下文信息对包括所述3N+1个子带的压缩码流进行熵解码,以得到3N+1个子带的量化后的小波系数,所述3N+1个子带中任一子带的上下文信息包括已解码的同位子带中的小波系数;所述同位子带是与所述图像块K相邻的图像块中的子带,且所述同位子带在与所述图像块K相邻的图像块中的位置与所述任一子带在所述图像块K中的位置相同,所述N为大于0的整数;对所述3N+1个子带的量化后的小波系数进行反量化,以得到3N+1个子带的小波系数;对所述3N+1个子带的小波系数进行N次小波逆变换,得到所述图像块K的重建图像。
其中,所述任一子带中的量化后的上边界小波系数的上下文信息为已解码的同位子带的下边界的小波系数。
其中,所述任一子带中的量化后的左边界小波系数的上下文信息为已解码的同位子带的右边界的小波系数。
其中,所述任一子带中的量化后的左上边界小波系数的上下文信息为已解码的同位子带的右下边界的小波系数。
其中,所述任一子带中的量化后的小波系数的上下文信息包括所述任一子带的参考子带中的小波系数,所述参考子带通过对比所述任一子带更高一级的子带中已解码的高频子带进行上采样或者小波逆变换得到。
所述任一子带中的量化后的小波系数还包括非边界小波系数。
其中,所述任一子带为子带HHi、子带HLi、子带LHi中的任一个,所述参考子带通过对子带MPi+1以及小波系数均设为0的除子带MPi+1外的各子带进行小波逆变换得到;所述子带MPi+1为子带HHi+1、子带HLi+1、子带LHi+1中的至少一个,i为正整数,用于指示子带的级,所述i不大于N-1,所述子带MPi+1以及所述除子带MPi+1外的各子带通过对子带LLi进行一次小波变换得到。
所述根据图像块K的3N+1个子带的上下文信息对包括所述3N+1个子带的压缩码流进行熵解码包括:根据小波系数扫描次序和所述3N+1个子带的上下文信息对包括所述3N+1个子带的压缩码流进行熵解码。
其中,所述方法还包括:获取所述压缩码流中的标识,根据所述标识确定所述小波系数扫描次序。
第五方面,本申请实施例提供一种基于小波变换的图像解码方法,包括:对压缩码流进行熵解码,以得到3N+1个子带的量化后的小波系数;其中,所述压缩码流包括3N+1个子带的压缩码流,所述3N+1个子带中任一子带中的量化后的小波系数是根据所述3N+1个子带中所述任一子带中的量化后的小波系数的上下文信息对所述任一子带的码流进行熵解码得到的;其中,所述任一子带中的量化后的小波系数的上下文信息包括所述任一子带的参考子带中的小波系数,所述参考子带通过对比所述任一子带更高一级的子带中已解码的高频子带进行上采样或者小波逆变换得到,所述N为大于0的整数;对所述3N+1个子带的量化后的小波系数进行反量化,以得到3N+1个子带的小波系数;对所述3N+1个子带的小波系数进行N次小波逆变换,得到重建图像块。
其中,所述任一子带为子带HHi、子带HLi、子带LHi中的任一个,所述参考子带通过对子带MPi+1以及小波系数均设为0的除子带MPi+1外的各子带进行小波逆变换得到;所述子带MPi+1为子带HHi+1、子带HLi+1、子带LHi+1中的至少一个,i为正整数,用于指示子带的级,所述i不大于N-1,所述子带MPi+1以及所述除子带MPi+1外的各子带通过对子带LLi进行一次小波变换得到。
所述对压缩码流进行熵解码包括:根据小波系数扫描次序对所述压缩码流进行熵解码。
所述方法还包括:获取所述压缩码流中的标识,根据所述标识确定所述小波系数扫描次序。
第六方面,本申请实施例提供一种基于小波变换的图像解码方法,包括:根据小波系数扫描次序对压缩码流进行熵解码,以得到3N+1个子带的量化后的小波系数;其中,所述压缩码流包括3N+1个子带的码流;对所述3N+1个子带的量化后的小波系数进行反量化,以得到3N+1个子带的小波系数;对所述3N+1个子带的小波系数进行N次小波逆变换,得到重建图像块。
其中,所述方法还包括:获取所述压缩码流中的标识,根据所述标识确定所述小波系数扫描次序。
第七方面,本申请实施例提供一种基于小波变换的图像编码装置,包括:小波变换模块,用于对图像块K进行N次小波变换,以得到3N+1个子带的小波系数,所述N为大于0的整数;量化处理模块,用于对所述3N+1个子带的小波系数分别进行量化处理,以得到所述3N+1个子带的量化后的小波系数;编码模块,用于根据所述3N+1个子带中任一子带中的量化后的小波系数的上下文信息对所述任一子带进行熵编码,以得到所述任一子带的压缩码流,其中,所述任一子带中的量化后的小波系数的上下文信息包括已编码的同位子带中的小波系数;所述同位子带是与所述图像块K相邻的图像块中的子带,且所述同位子带在与所述图像块K相邻的图像块中的位置与所述任一子带在所述图像块K中的位置相同。
所述任一子带中的量化后的上边界小波系数的上下文信息为已编码的同位子带的下边界的小波系数。
所述任一子带中的量化后的左边界小波系数的上下文信息为已编码的同位子带的右边界的小波系数。
所述任一子带中的量化后的左上边界小波系数的上下文信息为已编码的同位子带的右下边界的小波系数。
所述任一子带中的量化后的小波系数的上下文信息包括所述任一子带的参考子带中的小波系数,所述参考子带通过对比所述任一子带更高一级的子带中已编码的高频子带进行上采样或者小波逆变换得到。
所述任一子带中的量化后的小波系数还包括非边界小波系数。
其中,所述任一子带为子带HHi、子带HLi、子带LHi中的任一个,所述参考子带通过对子带MPi+1以及小波系数均设为0的除子带MPi+1外的各子带进行小波逆变换得到;所述子带MPi+1为子带HHi+1、子带HLi+1、子带LHi+1中的至少一个,i为正整数,用于指示子带的级,所述i不大于N-1,所述子带MPi+1以及所述除子带MPi+1外的各子带通过对子带LLi进行一次小波变换得到。
其中,所述编码模块,具体用于:根据小波系数扫描次序和所述3N+1个子带中任一子带中的量化后的小波系数的上下文信息对所述任一子带进行熵编码,所述小波系数扫描次序为对所述任一子带中的量化后的小波系数进行熵编码的次序。
所述装置还包括确定模块,用于:根据所述图像块K中的低频子带的纹理来确定所述任一子带的小波系数扫描次序;其中,当所述图像块K中的低频子带的纹理为水平纹理时,则所述小波系数扫描次序为水平扫描次序;当所述图像块K中的低频子带的纹理为竖直纹理时,则所述小波系数扫描次序为竖直扫描次序;当所述图像块K中的低频子带的纹理既不是水平纹理也不是竖直纹理时,则所述小波系数扫描次序为Z型扫描次序。
所述任一子带为子带HH、子带HL、子带LH中的任一个。
所述小波系数扫描次序为多种扫描次序中对应率失真值最小的扫描次序;其中,所述多种扫描次序对应的率失真值为根据按照多种扫描次序分别对所述任一子带进行编码得到的压缩码流所确定的。
所述小波系数扫描次序为竖直扫描次序或者Z型扫描次序。
所述装置还包括写入模块,用于:将所述小波系数扫描次序对应的标识写入码流,以便解码端进行图像解码。
第八方面,本申请实施例提供一种基于小波变换的图像编码装置,包括:小波变换模块,用于对图像块K进行N次小波变换,以得到3N+1个子带的小波系数,所述N为大于0的整数;量化处理模块,用于对所述3N+1个子带的小波系数分别进行量化处理,以得到所述3N+1个子带的量化后的小波系数;编码模块,用于根据所述3N+1个子带中任一子带中的量化后的小波系数的上下文信息对所述任一子带进行熵编码,以得到所述任一子带的压缩码流,其中,所述任一子带中的量化后的小波系数的上下文信息包括所述任一子带的参考子带中的小波系数,所述参考子带通过对比所述任一子带更高一级的子带中已编码的高频子带进行上采样或者小波逆变换得到。
所述任一子带为子带HHi、子带HLi、子带LHi中的任一个,所述参考子带通过对子带MPi+1以及小波系数均设为0的除子带MPi+1外的各子带进行小波逆变换得到;所述子带MPi+1为子带HHi+1、子带HLi+1、子带LHi+1中的至少一个,i为正整数,用于指示子带的级,所述i不大于N-1,所述子带MPi+1以及所述除子带MPi+1外的各子带通过对子带LLi进行一次小波变换得到。
所述编码模块,具体用于:根据小波系数扫描次序和所述3N+1个子带中任一子带中的量化后的小波系数的上下文信息对所述任一子带进行熵编码,所述小波系数扫描次序为对所述任一子带中的量化后的小波系数进行熵编码的次序。
所述装置还包括确定模块,用于:根据所述图像块K中的低频子带的纹理来确定所述任一子带的小波系数扫描次序;其中,当所述图像块K中的低频子带的纹理为水平纹理时,则所述小波系数扫描次序为水平扫描次序;当所述图像块K中的低频子带的纹理为竖直纹理时,则所述小波系数扫描次序为竖直扫描次序;当所述图像块K中的低频子带的纹理既不是水平纹理也不是竖直纹理时,则所述小波系数扫描次序为Z型扫描次序。
所述任一子带为子带HH、子带HL、子带LH中的任一个。
所述小波系数扫描次序为多种扫描次序中对应率失真值最小的扫描次序;其中,所述多种扫描次序对应的率失真值为根据按照多种扫描次序分别对所述任一子带进行编码得到的压缩码流所确定的。
所述小波系数扫描次序为竖直扫描次序或者Z型扫描次序。
所述装置还包括写入模块,用于:将所述小波系数扫描次序对应的标识写入码流,以便解码端进行图像解码。
第九方面,本申请实施例提供一种基于小波变换的图像编码装置,包括:小波变换模块,用于对图像块K进行N次小波变换,以得到3N+1个子带的小波系数,所述N为大于0的整数;量化处理模块,用于对所述3N+1个子带的小波系数分别进行量化处理,以得到3N+1个子带的量化后的小波系数;编码模块,用于按照小波系数扫描次序对所述3N+1个子带中任一子带中的量化后的小波系数进行熵编码,以得到所述任一子带的压缩码流,所述小波系数扫描次序为对所述任一子带中的量化后的小波系数进行熵编码的次序。
所述装置还包括确定模块,用于:根据所述图像块K中的低频子带的纹理来确定所述任一子带的小波系数扫描次序;其中,当所述图像块K中的低频子带的纹理为水平纹理时,则所述小波系数扫描次序为水平扫描次序;当所述图像块K中的低频子带的纹理为竖直纹理时,则所述小波系数扫描次序为竖直扫描次序;当所述图像块K中的低频子带的纹理既不是水平纹理也不是竖直纹理时,则所述小波系数扫描次序为Z型扫描次序。
所述任一子带为子带HH、子带HL、子带LH中的任一个。
所述小波系数扫描次序为多种扫描次序中对应率失真值最小的扫描次序;其中,所述多种扫描次序对应的率失真值为根据按照多种扫描次序分别对所述任一子带进行编码得到的压缩码流所确定的。
所述小波系数扫描次序为竖直扫描次序或者Z型扫描次序。
所述装置还包括写入模块,用于:将所述小波系数扫描次序对应的标识写入码流,以便解码端进行图像解码。
第十方面,本申请实施例提供一种基于小波变换的图像解码装置,包括:解码模块,用于根据图像块K的3N+1个子带的上下文信息对包括所述3N+1个子带的压缩码流进行熵解码,以得到3N+1个子带的量化后的小波系数,所述3N+1个子带中任一子带的上下文信息包括已解码的同位子带中的小波系数;所述同位子带是与所述图像块K相邻的图像块中的子带,且所述同位子带在与所述图像块K相邻的图像块中的位置与所述任一子带在所述图像块K中的位置相同,所述N为大于0的整数;反量化模块,用于对所述3N+1个子带的量化后的小波系数进行反量化,以得到3N+1个子带的小波系数;小波逆变换模块,用于对所述3N+1个子带的小波系数进行N次小波逆变换,得到所述图像块K的重建图像。
所述任一子带中的量化后的上边界小波系数的上下文信息为已解码的同位子带的下边界的小波系数。
所述任一子带中的量化后的左边界小波系数的上下文信息为已解码的同位子带的右边界的小波系数。
所述任一子带中的量化后的左上边界小波系数的上下文信息为已解码的同位子带的右下边界的小波系数。
所述任一子带中的量化后的小波系数的上下文信息包括所述任一子带的参考子带中的小波系数,所述参考子带通过对比所述任一子带更高一级的子带中已解码的高频子带进行上采样或者小波逆变换得到。
所述任一子带中的量化后的小波系数还包括非边界小波系数。
所述任一子带为子带HHi、子带HLi、子带LHi中的任一个,所述参考子带通过对子带MPi+1以及小波系数均设为0的除子带MPi+1外的各子带进行小波逆变换得到;所述子带MPi+1为子带HHi+1、子带HLi+1、子带LHi+1中的至少一个,i为正整数,用于指示子带的级,所述i不大于N-1,所述子带MPi+1以及所述除子带MPi+1外的各子带通过对子带LLi进行一次小波变换得到。
所述解码模块,具体用于:根据小波系数扫描次序和所述3N+1个子带的上下文信息对包括所述3N+1个子带的压缩码流进行熵解码。
所述解码模块还用于:获取所述压缩码流中的标识,根据所述标识确定所述小波系数扫描次序。
第十一方面,本申请实施例提供一种基于小波变换的图像解码装置,包括:解码模块,用于对压缩码流进行熵解码,以得到3N+1个子带的量化后的小波系数;其中,所述压缩码流包括3N+1个子带的压缩码流,所述3N+1个子带中任一子带中的量化后的小波系数是根据所述3N+1个子带中所述任一子带中的量化后的小波系数的上下文信息对所述任一子带的码流进行熵解码得到的;其中,所述任一子带中的量化后的小波系数的上下文信息包括所述任一子带的参考子带中的小波系数,所述参考子带通过对比所述任一子带更高一级的子带中已解码的高频子带进行上采样或者小波逆变换得到,所述N为大于0的整数;反量化模块,用于对所述3N+1个子带的量化后的小波系数进行反量化,以得到3N+1个子带的小波系数;小波逆变换模块,用于对所述3N+1个子带的小波系数进行N次小波逆变换,得到重建图像块。
所述任一子带为子带HHi、子带HLi、子带LHi中的任一个,所述参考子带通过对子带MPi+1以及小波系数均设为0的除子带MPi+1外的各子带进行小波逆变换得到;所述子带MPi+1为子带HHi+1、子带HLi+1、子带LHi+1中的至少一个,i为正整数,用于指示子带的级,所述i不大于N-1,所述子带MPi+1以及所述除子带MPi+1外的各子带通过对子带LLi进行一次小波变换得到。
所述解码模块具体用于:根据小波系数扫描次序对所述压缩码流进行熵解码。
所述解码模块还用于:获取所述压缩码流中的标识,根据所述标识确定所述小波系数扫描次序。
第十二方面,本申请实施例提供一种基于小波变换的图像解码装置,包括:解码模块,用于根据小波系数扫描次序对压缩码流进行熵解码,以得到3N+1个子带的量化后的小波系数;其中,所述压缩码流包括3N+1个子带的码流;反量化模块,用于对所述3N+1个子带的量化后的小波系数进行反量化,以得到3N+1个子带的小波系数;小波逆变换模块,用于对所述3N+1个子带的小波系数进行N次小波逆变换,得到重建图像块。
所述解码模块还用于:获取所述压缩码流中的标识,根据所述标识确定所述小波系数扫描次序。
第十三方面,本申请提供了一种计算机存储介质,包括计算机指令,当所述计算机指令在电子设备上运行时,使得所述电子设备执行如第一方面任一种可能的实施方式和/或第二方面任一种可能的实施方式和/或第三方面任一种可能的实施方式和/或第四方面任一种可能的实施方式和/或第五方面任一种可能的实施方式和/或第六方面任一种可能的实施方式提供的方法。
第十四方面,本申请实施例提供一种计算机程序产品,当计算机程序产品在计算机上运行时,使得计算机执行如第一方面任一种可能的实施方式和/或第二方面任一种可能的实施方式和/或第三方面任一种可能的实施方式和/或第四方面任一种可能的实施方式和/或第五方面任一种可能的实施方式和/或第六方面任一种可能的实施方式提供的方法。
可以理解地,上述提供的第七方面所述的装置、第八方面所述的装置、第九方面所述的装置、第十方面所述的装置、第十一方面所述的装置、第十二方面所述的装置、第十三方面所述的计算机存储介质或者第十四方面所述的计算机程序产品均用于执行第一方面中任一所提供的方法以及第二方面中任一所提供的方法和/或第三方面任一种可能的实施方式和/或第四方面任一种可能的实施方式和/或第五方面任一种可能的实施方式和/或第六方面任一种可能的实施方式提供的方法。因此,其所能达到的有益效果可参考对应方法中的有益效果,此处不再赘述。
附图说明
下面对本申请实施例用到的附图进行介绍。
图1是本申请实施例提供的基于小波变换的图像编码过程的示意图;
图2是本申请实施例提供的一种基于小波变换的图像编码方法的流程示意图;
图3是本申请实施例提供的一种小波变换结构示意图;
图4是本申请实施例提供的一种子带系数上下文信息示意图;
图5是本申请实施例提供的另一种基于小波变换的图像编码方法的流程示意图;
图6是本申请实施例提供的一种子带系数上下文信息示意图;
图7是本申请实施例提供的再一种基于小波变换的图像编码方法的流程示意图;
图8a是本申请实施例提供的一种子带扫描次序示意图;
图8b是本申请实施例提供的小波系数扫描次序中的Z型扫描次序示意图;
图8c是本申请实施例提供的小波系数扫描次序中的水平扫描次序示意图;
图8d是本申请实施例提供的小波系数扫描次序中的竖直扫描次序示意图;
图9是本申请实施例提供的基于小波变换的图像解码过程的示意图;
图10是本申请实施例提供的一种基于小波变换的图像解码方法的流程示意图;
图11是本申请实施例提供的另一种基于小波变换的图像解码方法的流程示意图;
图12是本申请实施例提供的再一种基于小波变换的图像解码方法的流程示意图;
图13是本申请实施例提供的一种基于小波变换的图像编码装置的结构示意图;
图14是本申请实施例提供的一种基于小波变换的图像解码装置的结构示意图。
具体实施方式
下面结合本申请实施例中的附图对本申请实施例进行描述。本申请实施例的实施方式部分使用的术语仅用于对本申请的具体实施例进行解释,而非旨在限定本申请。
首先介绍基于小波变换的图像编码过程,如图1所示,对待编码的目标图像或者图像块进行N次小波变换,以得到3N+1个子带的小波系数;对得到的3N+1个子带的小波系数进行量化处理,以得到3N+1个子带的量化后的小波系数;对上述3N+1个子带的量化后的小波系数进行熵编码,得到压缩码流。
具体参见图2,图2为本申请实施例提供的一种基于小波变换的图像编码方法的流程示意图。如图2所示,该方法包括:
S201、对图像块K进行N次小波变换,以得到3N+1个子带的小波系数,所述N为大于0的整数;
其中,上述图像块K可以是对目标图像进行处理得到的M个图像块中的任一个,M为大于1的整数。该目标图像可以是一幅图像、子图像、条带(slice)、片(patch)等,在此不做限定。
通过对目标图像进行划分可得到M个图像块。具体的,可以采用基于四叉树的划分方法对目标图像进行划分。其中,可把目标图像划分为相同大小的图像块等,例如可平均划分成区域大小为8x8的图像块。
然后对该M个图像块分别进行小波变换。其中,对任一图像块K进行N次小波变换,可得到3N+1个子带的小波系数。
其中,一幅图像经过一次小波变换之后可得到四幅子图像,其中一幅子图像被称为近似图像,该近似图像是原始图像的低分辨率近似;另外三幅子图像被称为细节图像,所述细节图像包含了原始图像的高频信息。在图像编码中,往往对近似图像进行多次迭代小波变换,得到图像的多分辨率表达。例如,如果一幅图像经过了N次小波变换,则可得到3N+1个子带,如图3所示,其中,对一幅图像经过了N次小波变换可得到N级子带,如进行了第一次小波变换后,得到第一级子带;然后对第一级子带中的低频子带进行一次小波变换,得到第二级子带,以此类推。其中,每级子带包含一个或多个小波系数(或者称为子带系数)。
本方案中的小波变换方法可以使用现有技术中的传统小波变换或者基于深度网络的小波变换或者其他类似的变换方法,本方案对此不做具体限定。
S202、对所述3N+1个子带的小波系数分别进行量化处理,以得到所述3N+1个子带的量化后的小波系数;
S203、根据所述3N+1个子带中任一子带中的量化后的小波系数的上下文信息对所述任一子带进行熵编码,以得到所述任一子带的压缩码流,其中,所述任一子带中的量化后的小波系数的上下文信息包括已编码的同位子带中的小波系数;所述同位子带是与所述图像块K相邻的图像块中的子带,且所述同位子带在与所述图像块K相邻的图像块中的位置与所述任一子带在所述图像块K中的位置相同。
其中,上述小波系数的上下文信息可以是已编码的同位子带中的小波系数。其中,该同位子带是M个图像块中与上述图像块K空间相邻的图像块中的子带,且所述同位子带在与所述图像块K相邻的图像块中的位置与所述任一子带在所述图像块K中的位置相同。
需要说明的是,本方案中所述同位子带在与所述图像块K相邻的图像块中的位置与所述任一子带在所述图像块K中的位置相同包括:所述同位子带与所述任一子带为同一级子带,所述同位子带与所述任一子带为同一种类型的子带,所述子带类型包括LL子带,HL子带,LH子带和HH子带中至少一种。
其中,LL子带是由两个方向利用低通小波滤波器卷积后产生的小波系数,它是图像的近似表示。
HL子带是在行方向利用低通小波滤波器卷积后,再用高通小波滤波器在列方向卷积而产生的小波系数,它表示图像的水平方向奇异特性;可称为水平子带。
LH子带是在行方向利用高通小波滤波器卷积后,再用低通小波滤波器在列方向卷积而产生的小波系数,它表示图像的垂直方向奇异特性;可称为垂直子带。
HH子带是由两个方向利用高通小波滤波器卷积后产生的小波系数,它表示图像的对角边缘特性;可称为对角子带。
其中,所述任一子带中的量化后的小波系数可包括边界小波系数,所述边界小波系数位于所述任一子带中的边界区域。
其中,当编码子带内上边界的子带系数时,其上下文信息为同位子带中下边界子带系数,如图4的右上角图所示。
当编码子带内左边界的子带系数时,其上下文信息为同位子带中右边界子带系数,如图4的左下角图所示。
当编码子带内左上边界的子带系数时,其上下文信息为同位子带中右下边界子带系数,如图4的左上角图所示。
上述仅以编码子带上边界、左边界和左上边界为例进行说明,其中,在编码子带下边界、右边界和右下边界时,可相应参照上述描述,如编码子带下边界的子带系数时,其上下文信息为同位子带中上边界子带系数;当编码子带内右边界的子带系数时,其上下文信息为同位子带中左边界子带系数;当编码子带内右下边界的子带系数时,其上下文信息为同位子带中左上边界子带系数等。
其中,在对子带进行熵编码的过程中,通过获取待编码的小波系数的上下文信息;然后根据所述上下文信息得到所述待编码的小波系数的概率分布;进而根据所述待编码的小波系数的概率分布对所述待编码的小波系数进行熵编码。
例如,可以将待编码的小波系数的上下文信息输入到概率估计网络中,得到该待编码的小波系数的概率分布,然后采用该概率分布对该待编码的小波系数进行熵编码得到该待编码的小波系数的编码信息。其中,概率估计网络中使用的概率分布估计方法可包括:基于深度学习网络的概率分布估计方法,例如循环神经网络(Recurrent Neural Network,RNN)和卷积神经网络(Convolutional Neural Network,PixelCNN)等。
通过根据任一子带中小波系数的上下文信息对所述任一子带进行熵编码,以得到所述任一子带的压缩码流。基于上述3N+1个子带的压缩码流可得到图像块K的压缩码流。进而可将压缩码流写入码流。
通过本申请实施例,在对子带进行熵编码的过程中,通过根据任一子带中小波系数的上下文信息对所述任一子带进行熵编码,以得到任一子带的压缩码流,其中,该上下文信息为已编码的同位子带中的小波系数。通过参考已编码的同位子带中的小波系数来对子带进行熵编码,提高了上下文信息的关联性,进而提高了概率估计的准确度,进一步可提高图像熵编码的效率。
参见图5,图5为本申请实施例提供的另一种基于小波变换的图像编码方法的流程示意图。如图5所示,该方法包括:
S501、对图像块K进行N次小波变换,以得到3N+1个子带的小波系数,所述N为大于0的整数;
其中,一幅图像经过一次小波变换之后将得到四幅子图像,其中一幅子图像被称为近似图像,该近似图像是原始图像的低分辨率近似;另外三幅子图像被称为细节图像,所述细节图像包含了原始图像的高频信息。在图像编码中,往往对近似图像进行多次迭代小波变换,得到图像的多分辨率表达。例如,如果一幅图像经过了N次小波变换,将会得到3N+1个子带,如图3所示,其中,对一幅图像经过了N次小波变换可得到N级子带,如进行了第一次小波变换后,得到第一级子带;然后对第一级子带中的低频子带进行一次小波变换,得到第二级子带,以此类推。其中,每级子带包含一个或多个小波系数(或者称为子带系数)。
本方案中的小波变换方法可以使用现有技术中的传统小波变换或者基于深度网络的小波变换或者其他类似的变换方法,在此不做限定。
S502、对所述3N+1个子带的小波系数分别进行量化处理,以得到所述3N+1个子带的量化后的小波系数;
S503、根据所述3N+1个子带中任一子带中的量化后的小波系数的上下文信息对所述任一子带进行熵编码,以得到所述任一子带的压缩码流,其中,所述任一子带中小波系数的上下文信息包括所述任一子带的参考子带中的小波系数,所述参考子带通过对比所述任一子带更高一级的子带中已编码的高频子带进行上采样或者小波逆变换得到。
其中,在对子带进行熵编码的过程中,通过获取待编码的小波系数的上下文信息;然后根据所述上下文信息得到所述待编码的小波系数的概率分布;进而根据所述待编码的小波系数的概率分布对所述待编码的小波系数进行熵编码。
例如,可以将待编码的小波系数的上下文信息输入到概率估计网络中,得到该待编码的小波系数的概率分布,然后采用该概率分布对该待编码的小波系数进行熵编码得到该待编码的小波系数的编码信息。其中,概率估计网络中使用的概率分布估计方法可包括:基于深度学习网络的概率分布估计方法,例如循环神经网络(Recurrent Neural Network,RNN)和卷积神经网络(Convolutional Neural Network,PixelCNN)等。
其中,上述参考子带通过对比所述任一子带更高一级的子带中已编码的高频子带进行上采样或者小波逆变换得到。上述高频子带为子带HH、子带HL、子带LH中的任一个。
具体地,对当前第i-1级子带内的子带系数进行熵编码时,可参考第i级已编码的高频子带的子带系数来构建上下文,避免参考低频子带的子带系数。
作为第一种实现方式,编码第i-1级子带LHi-1中的子带系数时,对第i级子带LHi进行上采样得到与第i-1级子带LHi-1相同尺寸的系数块LHi’,参考使用LHi’的预置区域内的系数作为当前子带系数编码时的上下文。其中,对HLi-1,HHi-1内的子带系数进行编码时可以采用同样的方法,此处不再赘述。如图6所示。
进一步地,作为第二种实现方式,当对当前第i-1级子带内的子带系数LHi-1进行熵编码时,可以参考第i级中更多的高频信息,即对第i级已编码的高频子带中的子带LHi、HHi和HLi均进行上采样得到与第i-1级子带LHi-1相同尺寸的系数块LHi’、H Hi’和HLi’,参考使用其预置区域内的系数作为当前子带系数编码时的上下文。其中,对HLi-1,HHi-1内的子带系数进行编码时可以采用同样的方法。此处并不限定具体参考的高频子带的个数,其可以是3个,也可以是2个,或者1个等。其中,该预置区域的中心位置可以是所述任一子带中待编码的小波系数的空域相同的同位位置。即待编码的小波系数在其所在的子带中的位置与所述预置区域的中心位置在其所在的子带中的位置相同。例如可参阅图6中子带LL2中区域R1和子带LH2中区域R2所示,区域R1即为区域R2的空域相同的同位位置。
作为第三种实现方式,当编码子带MPi时,所述参考子带通过对子带LLi进行一次小波变换得到的子带中除子带MPi+1外的各子带的小波系数均设为0后并进行小波逆变换得到的;所述子带MPi为子带HHi、子带HLi、子带LHi中的任一个,i为正整数,所述i不大于N-1。
具体地,当对当前第i-1级子带内的子带系数LHi-1进行熵编码时,对第i级除子带LHi之外的子带系数均填充0,也就是说,将第i级中的子带HHi、HLi和LLi的子带系数均填充0,然后对处理后的第i级子带进行小波逆变换,得到新的子带LHi’,将LHi’的预置区域内的系数作为当前子带系数编码时的上下文。其中,该预置区域的中心位置可以是所述任一子带中待编码的小波系数的空域相同的同位位置。
作为再一种实现方式,对当前第i-1级子带内的子带系数进行熵编码时,对高级第i级高频子带(LHi、HLi和HHi)内的已编码子带系数进行小波逆变换,得到子带LHi’、HLi’和HHi’,如图6所示。其中仅含高频部分,然后将子带LHi’、HLi’和HHi’中预置区域内的子带系数作为当前第i-1级子带内的子带系数的上下文。其中,上述预置区域的中心位置为所述任一子带中待编码的小波系数的空域相同的同位位置。
通过本申请实施例,在对子带进行熵编码的过程中,通过根据任一子带中小波系数的上下文信息对所述任一子带进行熵编码,以得到任一子带的压缩码流,其中,该上下文信息为任一子带的参考子带中的小波系数,该参考子带通过对比所述任一子带更高一级的子带中已编码的高频子带进行上采样或者小波逆变换得到。通过参考已编码的高频子带的子带系数,避免参考低频子带的子带系数,提高了上下文信息的关联性,进而提高了概率估计的准确度,进一步提高了图像熵编码的效率。
上述各实施例对于各种上下文信息进行说明,其中,上述上下文信息还可以是当前待编码的小波系数所在的子带中的已编码的小波系数。即在处理每个子带系数时,使用相同的子带内的预置区域中已编码的子带系数作为上下文,例如,预置区域大小可以为3x3/5x5/7x7。其中,预置区域大小可表示为sxz,其表示预置区域的宽为s个系数,预置区域的高为z个系数。本方案对预置区域的大小不作具体限定。
参照图7,图7为本申请实施例提供的再一种基于小波变换的图像编码方法的流程示意图。如图7所示,该方法包括:
S701、对图像块K进行N次小波变换,以得到3N+1个子带的小波系数,所述N为大于0的整数;
S702、对所述3N+1个子带的小波系数分别进行量化处理,以得到3N+1个子带的量化后的小波系数;
S703、按照小波系数扫描次序对所述3N+1个子带中任一子带中的量化后的小波系数进行熵编码,以得到所述任一子带的压缩码流,所述小波系数扫描次序为对所述任一子带中的量化后的小波系数进行熵编码的次序。
其中,在处理每个图像块的每个子带时,从高级小波的低频子带开始按照预置的子带扫描次序对每个子带进行处理。如图8a所示,该子带扫描次序可以是Z型扫描次序,其还可以是水平扫描次序或者竖直扫描次序等。
其中,在处理每个子带的小波系数时,可按照预置的小波系数扫描次序对所述任一子带中的量化后的小波系数进行熵编码。
上述小波系数扫描次序可以是使用预设的扫描次序,例如:Z型扫描次序,可如图8b所示;水平扫描次序,可如图8c所示;或竖直扫描次序,可如图8d所示。
可替代的,上述小波系数扫描次序可以是多种扫描次序中对应率失真值最小的扫描次序;其中,所述多种扫描次序对应的率失真值为根据按照多种扫描次序分别对所述任一子带进行编码得到的压缩码流所确定的。
具体地,在编码端,使用率失真优化(RDO)方法选择最优的扫码顺序,即分别使用Z型扫描次序、水平扫描次序或竖直扫描次序对当前图像进行编码,分别得到当前图像的率失真值,通过对比编码率失真值的相对大小,选择率失真值最小的扫描次序作为最优的小波系数扫描次序。其中,编码端使用标识来标记该最优扫描次序,并可将该标识的值写入码流传输到解码端。例如标识对应为第一值,表示小波系数扫描次序为Z型扫描次序;标识对应为第二值时,表示小波系数扫描次序为水平扫描次序;标识对应为第三值时,表示小波系数扫描次序为竖直扫描次序。其中,解码端可从码流中解析标识的值,进而得到该子带的小波系数扫描次序。
作为另一种可选的实现方式,可根据当前图像块内的低频子带(LL)的纹理确定高频子带的小波系数扫描次序。其中,当所述图像块K中的低频子带的纹理为水平纹理时,则所述小波系数扫描次序为水平扫描次序;当所述图像块K中的低频子带的纹理为竖直纹理时,则所述小波系数扫描次序为竖直扫描次序;当所述图像块K中的低频子带的纹理既不是水平纹理也不是竖直纹理时,则所述小波系数扫描次序为Z型扫描次序。
具体地,可通过计算低频子带的系数的梯度值来确定低频子带的纹理方向。例如,使用梯度算子计算当前子带内系数的梯度值;通过比较水平梯度值和竖直梯度值的大小,确定当前低频子带的纹理方向。其中,若水平梯度值大于竖直梯度值,则当前纹理方向可认为是竖直方向;若竖直梯度值大于水平梯度值,则当前纹理方向可认为是水平方向。
下面以一阶梯度算子为例进行说明:
对于当前子带内的每一个系数点L(x,y)计算梯度值的绝对值并进行累加;
Gx=∑xyabs(L(x+1,y)-L(x,y));
Gy=∑xyabs(L(x,y+1)-L(x,y));
其中,Gx为每个系数点处水平梯度值的绝对值的累加和;Gy为每个系数点处竖直梯度值的绝对值的累加和。
如果Gx大于Gy,则认为当前纹理方向为竖直方向;如果Gx小于Gy,则认为当前纹理方向为水平方向。
除了使用一阶梯度算子,还可以使用其他算子计算。例如,sobel算子,canny算子,laplace算子,Robert算子等。具体方法与上述类似,在此不再赘述。
其中,若图像块K中的低频子带的纹理是水平纹理,则高频子带的小波系数扫描次序为水平扫描次序;如果图像块K中的低频子带的纹理是竖直纹理,则高频子带的小波系数扫描次序为竖直扫描次序;否则,使用Z型扫描次序。
其中,获取小波系数扫描次序之后,可将所述小波系数扫描次序对应的标识写入码流,以便解码端进行图像解码。
其中,上述仅以图像块K为例进行说明。需要说明的是,各个图像块可使用不同的小波系数扫描次序。本方案对此不做具体限定。
通过本申请实施例,通过根据小波系数扫描次序来对子带进行熵编码,使得在对每一个子带系数进行熵编码时按照特定顺序进行编码。该手段提高了图像熵编码的效率。
需要说明的是,上述各实施例提供的基于小波变换的图像编码方法可任意组合使用。此处不做具体限定。
下面介绍基于小波变换的图像解码过程,如图9所示,对压缩码流进行熵解码,以得到各子带的量化后的小波系数;对所述各子带的量化后的小波系数进行反量化,以得到各子带的小波系数;对所述各子带的小波系数进行小波逆变换,以得到重建图像。
具体参见图10,图10为本申请实施例提供的一种基于小波变换的图像解码方法的流程示意图。如图10所示,该方法包括:
S1001、根据图像块K的3N+1个子带的上下文信息对包括所述3N+1个子带的压缩码流进行熵解码,以得到3N+1个子带的量化后的小波系数,所述3N+1个子带中任一子带的上下文信息包括已解码的同位子带中的小波系数;所述同位子带是与所述图像块K相邻的图像块中的子带,且所述同位子带在与所述图像块K相邻的图像块中的位置与所述任一子带在所述图像块K中的位置相同,所述N为大于0的整数;
其中,上述同位子带的描述可参阅图2所示实施例中的相关描述,在此不再赘述。
上述任一子带中的量化后的上边界小波系数的上下文信息为已解码的同位子带的下边界的小波系数。所述任一子带中的量化后的左边界小波系数的上下文信息为已解码的同位子带的右边界的小波系数。所述任一子带中的量化后的左上边界小波系数的上下文信息为已解码的同位子带的右下边界的小波系数。
其中,上述具体实施可参阅图2所述实施例,在此不再赘述。
S1002、对所述3N+1个子带的量化后的小波系数进行反量化,以得到3N+1个子带的小波系数;
S1003、对所述3N+1个子带的小波系数进行N次小波逆变换,得到所述图像块K的重建图像。
其中,所述方法还可包括:获取所述压缩码流中的标识,根据所述标识确定所述小波系数扫描次序。进而根据该小波系数扫描次序和所述图像块K的3N+1个子带的上下文信息对包括所述3N+1个子带的压缩码流进行熵解码。
参见图11,图11为本申请实施例提供的另一种基于小波变换的图像解码方法的流程示意图。如图11所示,该方法包括:
S1101、对压缩码流进行熵解码,以得到3N+1个子带的量化后的小波系数;其中,所述压缩码流包括3N+1个子带的压缩码流,所述3N+1个子带中任一子带中的量化后的小波系数是根据所述3N+1个子带中所述任一子带中的量化后的小波系数的上下文信息对所述任一子带的码流进行熵解码得到的;其中,所述任一子带中的量化后的小波系数的上下文信息包括所述任一子带的参考子带中的小波系数,所述参考子带通过对比所述任一子带更高一级的子带中已解码的高频子带进行上采样或者小波逆变换得到,所述N为大于0的整数;
其中,当解码子带MPi时,所述参考子带通过对子带LLi进行一次小波变换得到的子带中除子带MPi+1外的各子带的小波系数均设为0后并进行小波逆变换得到的;所述子带MPi为子带HHi、子带HLi、子带LHi中的任一个,i为正整数,所述i不大于N-1。
其中,所述对压缩码流进行熵解码包括:根据小波系数扫描次序对所述压缩码流进行熵解码。可获取所述压缩码流中的标识,根据所述标识确定所述小波系数扫描次序。
其中,上述具体描述可参阅图5所述实施例,在此不再赘述。
S1102、对所述3N+1个子带的量化后的小波系数进行反量化,以得到3N+1个子带的小波系数;
S1103、对所述3N+1个子带的小波系数进行N次小波逆变换,得到重建图像块。
参见图12,图12为本申请实施例提供的另一种基于小波变换的图像解码方法的流程示意图。如图12所示,该方法包括:
S1201、根据小波系数扫描次序对压缩码流进行熵解码,以得到3N+1个子带的量化后的小波系数;其中,所述压缩码流包括3N+1个子带的码流;
其中,可通过获取所述压缩码流中的标识,根据所述标识确定所述小波系数扫描次序。
S1202、对所述3N+1个子带的量化后的小波系数进行反量化,以得到3N+1个子带的小波系数;
S1203、对所述3N+1个子带的小波系数进行N次小波逆变换,得到重建图像块。
其中,上述各实施例提供的基于小波变换的图像解码方法可任意组合使用。此处不做具体限定。
其中,上述基于小波变换的图像解码方法的具体实施可参阅图7中图像编码方法中的相关描述,在此不再赘述。
如图13所示,本申请实施例还提供一种基于小波变换的图像编码装置,包括:
小波变换模块1301,用于对图像块K进行N次小波变换,以得到3N+1个子带的小波系数,所述N为大于0的整数;
量化处理模块1302,用于对所述3N+1个子带的小波系数分别进行量化处理,以得到所述3N+1个子带的量化后的小波系数;
编码模块1303,用于根据所述3N+1个子带中任一子带中的量化后的小波系数的上下文信息对所述任一子带进行熵编码,以得到所述任一子带的压缩码流,其中,所述任一子带中的量化后的小波系数的上下文信息包括已编码的同位子带中的小波系数;所述同位子带是与所述图像块K相邻的图像块中的子带,且所述同位子带在与所述图像块K相邻的图像块中的位置与所述任一子带在所述图像块K中的位置相同。
所述任一子带中的量化后的上边界小波系数的上下文信息为已编码的同位子带的下边界的小波系数。
所述任一子带中的量化后的左边界小波系数的上下文信息为已编码的同位子带的右边界的小波系数。
所述任一子带中的量化后的左上边界小波系数的上下文信息为已编码的同位子带的右下边界的小波系数。
所述任一子带中的量化后的小波系数的上下文信息包括所述任一子带的参考子带中的小波系数,所述参考子带通过对比所述任一子带更高一级的子带中已编码的高频子带进行上采样或者小波逆变换得到。
所述任一子带中的量化后的小波系数还包括非边界小波系数。
其中,所述任一子带为子带HHi、子带HLi、子带LHi中的任一个,所述参考子带通过对子带MPi+1以及小波系数均设为0的除子带MPi+1外的各子带进行小波逆变换得到;所述子带MPi+1为子带HHi+1、子带HLi+1、子带LHi+1中的至少一个,i为正整数,用于指示子带的级,所述i不大于N-1,所述子带MPi+1以及所述除子带MPi+1外的各子带通过对子带LLi进行一次小波变换得到。
其中,所述编码模块,具体用于:根据小波系数扫描次序和所述3N+1个子带中任一子带中的量化后的小波系数的上下文信息对所述任一子带进行熵编码,所述小波系数扫描次序为对所述任一子带中的量化后的小波系数进行熵编码的次序。
所述装置还包括确定模块,用于:根据所述图像块K中的低频子带的纹理来确定所述任一子带的小波系数扫描次序;其中,当所述图像块K中的低频子带的纹理为水平纹理时,则所述小波系数扫描次序为水平扫描次序;当所述图像块K中的低频子带的纹理为竖直纹理时,则所述小波系数扫描次序为竖直扫描次序;当所述图像块K中的低频子带的纹理既不是水平纹理也不是竖直纹理时,则所述小波系数扫描次序为Z型扫描次序。
所述任一子带为子带HH、子带HL、子带LH中的任一个。
所述小波系数扫描次序为多种扫描次序中对应率失真值最小的扫描次序;其中,所述多种扫描次序对应的率失真值为根据按照多种扫描次序分别对所述任一子带进行编码得到的压缩码流所确定的。
所述小波系数扫描次序为竖直扫描次序或者Z型扫描次序。
所述装置还包括写入模块,用于:将所述小波系数扫描次序对应的标识写入码流,以便解码端进行图像解码。
本申请实施例还提供一种基于小波变换的图像编码装置,包括:
小波变换模块,用于对图像块K进行N次小波变换,以得到3N+1个子带的小波系数,所述N为大于0的整数;
量化处理模块,用于对所述3N+1个子带的小波系数分别进行量化处理,以得到所述3N+1个子带的量化后的小波系数;
编码模块,用于根据所述3N+1个子带中任一子带中的量化后的小波系数的上下文信息对所述任一子带进行熵编码,以得到所述任一子带的压缩码流,其中,所述任一子带中的量化后的小波系数的上下文信息包括所述任一子带的参考子带中的小波系数,所述参考子带通过对比所述任一子带更高一级的子带中已编码的高频子带进行上采样或者小波逆变换得到。
所述任一子带为子带HHi、子带HLi、子带LHi中的任一个,所述参考子带通过对子带MPi+1以及小波系数均设为0的除子带MPi+1外的各子带进行小波逆变换得到;所述子带MPi+1为子带HHi+1、子带HLi+1、子带LHi+1中的至少一个,i为正整数,用于指示子带的级,所述i不大于N-1,所述子带MPi+1以及所述除子带MPi+1外的各子带通过对子带LLi进行一次小波变换得到。
所述编码模块,具体用于:根据小波系数扫描次序和所述3N+1个子带中任一子带中的量化后的小波系数的上下文信息对所述任一子带进行熵编码,所述小波系数扫描次序为对所述任一子带中的量化后的小波系数进行熵编码的次序。
所述装置还包括确定模块,用于:根据所述图像块K中的低频子带的纹理来确定所述任一子带的小波系数扫描次序;其中,当所述图像块K中的低频子带的纹理为水平纹理时,则所述小波系数扫描次序为水平扫描次序;当所述图像块K中的低频子带的纹理为竖直纹理时,则所述小波系数扫描次序为竖直扫描次序;当所述图像块K中的低频子带的纹理既不是水平纹理也不是竖直纹理时,则所述小波系数扫描次序为Z型扫描次序。
所述任一子带为子带HH、子带HL、子带LH中的任一个。
所述小波系数扫描次序为多种扫描次序中对应率失真值最小的扫描次序;其中,所述多种扫描次序对应的率失真值为根据按照多种扫描次序分别对所述任一子带进行编码得到的压缩码流所确定的。
所述小波系数扫描次序为竖直扫描次序或者Z型扫描次序。
所述装置还包括写入模块,用于:将所述小波系数扫描次序对应的标识写入码流,以便解码端进行图像解码。
本申请实施例还提供一种基于小波变换的图像编码装置,包括:
小波变换模块,用于对图像块K进行N次小波变换,以得到3N+1个子带的小波系数,所述N为大于0的整数;
量化处理模块,用于对所述3N+1个子带的小波系数分别进行量化处理,以得到3N+1个子带的量化后的小波系数;
编码模块,用于按照小波系数扫描次序对所述3N+1个子带中任一子带中的量化后的小波系数进行熵编码,以得到所述任一子带的压缩码流,所述小波系数扫描次序为对所述任一子带中的量化后的小波系数进行熵编码的次序。
所述装置还包括确定模块,用于:根据所述图像块K中的低频子带的纹理来确定所述任一子带的小波系数扫描次序;其中,当所述图像块K中的低频子带的纹理为水平纹理时,则所述小波系数扫描次序为水平扫描次序;当所述图像块K中的低频子带的纹理为竖直纹理时,则所述小波系数扫描次序为竖直扫描次序;当所述图像块K中的低频子带的纹理既不是水平纹理也不是竖直纹理时,则所述小波系数扫描次序为Z型扫描次序。
所述任一子带为子带HH、子带HL、子带LH中的任一个。
所述小波系数扫描次序为多种扫描次序中对应率失真值最小的扫描次序;其中,所述多种扫描次序对应的率失真值为根据按照多种扫描次序分别对所述任一子带进行编码得到的压缩码流所确定的。
所述小波系数扫描次序为竖直扫描次序或者Z型扫描次序。
所述装置还包括写入模块,用于:将所述小波系数扫描次序对应的标识写入码流,以便解码端进行图像解码。
如图14所示,本申请实施例还提供一种基于小波变换的图像解码装置,包括:
解码模块1401,用于根据图像块K的3N+1个子带的上下文信息对包括所述3N+1个子带的压缩码流进行熵解码,以得到3N+1个子带的量化后的小波系数,所述3N+1个子带中任一子带的上下文信息包括已解码的同位子带中的小波系数;所述同位子带是与所述图像块K相邻的图像块中的子带,且所述同位子带在与所述图像块K相邻的图像块中的位置与所述任一子带在所述图像块K中的位置相同,所述N为大于0的整数;
反量化模块1402,用于对所述3N+1个子带的量化后的小波系数进行反量化,以得到3N+1个子带的小波系数;
小波逆变换模块1403,用于对所述3N+1个子带的小波系数进行N次小波逆变换,得到所述图像块K的重建图像。
所述任一子带中的量化后的上边界小波系数的上下文信息为已解码的同位子带的下边界的小波系数。
所述任一子带中的量化后的左边界小波系数的上下文信息为已解码的同位子带的右边界的小波系数。
所述任一子带中的量化后的左上边界小波系数的上下文信息为已解码的同位子带的右下边界的小波系数。
所述任一子带中的量化后的小波系数的上下文信息包括所述任一子带的参考子带中的小波系数,所述参考子带通过对比所述任一子带更高一级的子带中已解码的高频子带进行上采样或者小波逆变换得到。
所述任一子带中的量化后的小波系数还包括非边界小波系数。
所述任一子带为子带HHi、子带HLi、子带LHi中的任一个,所述参考子带通过对子带MPi+1以及小波系数均设为0的除子带MPi+1外的各子带进行小波逆变换得到;所述子带MPi+1为子带HHi+1、子带HLi+1、子带LHi+1中的至少一个,i为正整数,用于指示子带的级,所述i不大于N-1,所述子带MPi+1以及所述除子带MPi+1外的各子带通过对子带LLi进行一次小波变换得到。
所述解码模块,具体用于:根据小波系数扫描次序和所述3N+1个子带的上下文信息对包括所述3N+1个子带的压缩码流进行熵解码。
所述解码模块还用于:获取所述压缩码流中的标识,根据所述标识确定所述小波系数扫描次序。
本申请实施例还提供一种基于小波变换的图像解码装置,包括:
解码模块,用于对压缩码流进行熵解码,以得到3N+1个子带的量化后的小波系数;其中,所述压缩码流包括3N+1个子带的压缩码流,所述3N+1个子带中任一子带中的量化后的小波系数是根据所述3N+1个子带中所述任一子带中的量化后的小波系数的上下文信息对所述任一子带的码流进行熵解码得到的;其中,所述任一子带中的量化后的小波系数的上下文信息包括所述任一子带的参考子带中的小波系数,所述参考子带通过对比所述任一子带更高一级的子带中已解码的高频子带进行上采样或者小波逆变换得到,所述N为大于0的整数;
反量化模块,用于对所述3N+1个子带的量化后的小波系数进行反量化,以得到3N+1个子带的小波系数;
小波逆变换模块,用于对所述3N+1个子带的小波系数进行N次小波逆变换,得到重建图像块。
所述任一子带为子带HHi、子带HLi、子带LHi中的任一个,所述参考子带通过对子带MPi+1以及小波系数均设为0的除子带MPi+1外的各子带进行小波逆变换得到;所述子带MPi+1为子带HHi+1、子带HLi+1、子带LHi+1中的至少一个,i为正整数,用于指示子带的级,所述i不大于N-1,所述子带MPi+1以及所述除子带MPi+1外的各子带通过对子带LLi进行一次小波变换得到。
所述解码模块具体用于:根据小波系数扫描次序对所述压缩码流进行熵解码。
所述解码模块还用于:获取所述压缩码流中的标识,根据所述标识确定所述小波系数扫描次序。
本申请实施例还提供一种基于小波变换的图像解码装置,包括:
解码模块,用于根据小波系数扫描次序对压缩码流进行熵解码,以得到3N+1个子带的量化后的小波系数;其中,所述压缩码流包括3N+1个子带的码流;
反量化模块,用于对所述3N+1个子带的量化后的小波系数进行反量化,以得到3N+1个子带的小波系数;
小波逆变换模块,用于对所述3N+1个子带的小波系数进行N次小波逆变换,得到重建图像块。
所述解码模块还用于:获取所述压缩码流中的标识,根据所述标识确定所述小波系数扫描次序。
本申请实施例还提供了一种计算机可读存储介质,该计算机可读存储介质中存储有指令,当其在计算机或处理器上运行时,使得计算机或处理器执行上述任一个方法中的一个或多个步骤。
本申请实施例还提供了一种包含指令的计算机程序产品。当该计算机程序产品在计算机或处理器上运行时,使得计算机或处理器执行上述任一个方法中的一个或多个步骤。
在上述实施例中,可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时,可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时,全部或部分地产生按照本申请实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中,或者通过所述计算机可读存储介质进行传输。所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线)或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质,(例如,软盘、硬盘、磁带)、光介质(例如,DVD)、或者半导体介质(例如,固态硬盘(solid state disk,SSD))等。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,该流程可以由计算机程序来指令相关的硬件完成,该程序可存储于计算机可读取存储介质中,该程序在执行时,可包括如上述各方法实施例的流程。而前述的存储介质包括:ROM或随机存储记忆体RAM、磁碟或者光盘等各种可存储程序代码的介质。
以上所述,仅为本申请实施例的具体实施方式,但本申请实施例的保护范围并不局限于此,任何在本申请实施例揭露的技术范围内的变化或替换,都应涵盖在本申请实施例的保护范围之内。因此,本申请实施例的保护范围应以所述权利要求的保护范围为准。

Claims (56)

1.一种基于小波变换的图像编码方法,其特征在于,包括:
对图像块K进行N次小波变换,以得到3N+1个子带的小波系数,所述N为大于0的整数;
对所述3N+1个子带的小波系数分别进行量化处理,以得到所述3N+1个子带的量化后的小波系数;
根据所述3N+1个子带中任一子带中的量化后的小波系数的上下文信息对所述任一子带进行熵编码,以得到所述任一子带的压缩码流,其中,所述任一子带中的量化后的小波系数的上下文信息包括已编码的同位子带中边界的小波系数;所述同位子带是与所述图像块K相邻的图像块中的子带,且所述同位子带在与所述图像块K相邻的图像块中的位置与所述任一子带在所述图像块K中的位置相同。
2.根据权利要求1所述的方法,其特征在于,所述任一子带中的量化后的上边界小波系数的上下文信息为已编码的同位子带的下边界的小波系数。
3.根据权利要求1所述的方法,其特征在于,所述任一子带中的量化后的左边界小波系数的上下文信息为已编码的同位子带的右边界的小波系数。
4.根据权利要求1所述的方法,其特征在于,所述任一子带中的量化后的左上边界小波系数的上下文信息为已编码的同位子带的右下边界的小波系数。
5.根据权利要求1至4任一项所述的方法,其特征在于,所述根据所述3N+1个子带中任一子带的量化后的小波系数的上下文信息对所述任一子带进行熵编码包括:
根据小波系数扫描次序和所述3N+1个子带中任一子带中的量化后的小波系数的上下文信息对所述任一子带进行熵编码,所述小波系数扫描次序为对所述任一子带中的量化后的小波系数进行熵编码的次序。
6.根据权利要求5所述的方法,其特征在于,所述方法还包括:
根据所述图像块K中的低频子带的纹理来确定所述任一子带的小波系数扫描次序;
其中,当所述图像块K中的低频子带的纹理为水平纹理时,则所述小波系数扫描次序为水平扫描次序;当所述图像块K中的低频子带的纹理为竖直纹理时,则所述小波系数扫描次序为竖直扫描次序;当所述图像块K中的低频子带的纹理既不是水平纹理也不是竖直纹理时,则所述小波系数扫描次序为Z型扫描次序。
7.根据权利要求6所述的方法,其特征在于,所述任一子带为子带HH、子带HL、子带LH中的任一个。
8.根据权利要求5所述的方法,其特征在于,所述小波系数扫描次序为多种扫描次序中对应率失真值最小的扫描次序;其中,所述多种扫描次序对应的率失真值为根据按照多种扫描次序分别对所述任一子带进行编码得到的压缩码流所确定的。
9.根据权利要求5所述的方法,其特征在于,所述小波系数扫描次序为竖直扫描次序或者Z型扫描次序。
10.根据权利要求5所述的方法,其特征在于,所述方法还包括:
将所述小波系数扫描次序对应的标识写入码流,以便解码端进行图像解码。
11.一种基于小波变换的图像编码方法,其特征在于,包括:
对图像块K进行N次小波变换,以得到3N+1个子带的小波系数,所述N为大于0的整数;
对所述3N+1个子带的小波系数分别进行量化处理,以得到所述3N+1个子带的量化后的小波系数;
根据所述3N+1个子带中任一子带中的量化后的小波系数的上下文信息对所述任一子带进行熵编码,以得到所述任一子带的压缩码流,其中,所述任一子带中的量化后的小波系数的上下文信息包括所述任一子带的参考子带中的小波系数,所述参考子带通过对比所述任一子带更高一级的子带中已编码的高频子带进行上采样或者小波逆变换得到。
12.根据权利要求11所述的方法,其特征在于,所述任一子带为子带HHi、子带HLi、子带LHi中的任一个,所述参考子带通过对子带MPi+1以及小波系数均设为0的除子带MPi+1外的各子带进行小波逆变换得到;所述子带MPi+1为子带HHi+1、子带HLi+1、子带LHi+1中的至少一个,i为正整数,用于指示子带的级,所述i不大于N-1,所述子带MPi+1以及所述除子带MPi+1外的各子带通过对子带LLi进行一次小波变换得到。
13.根据权利要求11或12所述的方法,其特征在于,所述根据所述3N+1个子带中任一子带中的量化后的小波系数的上下文信息对所述任一子带进行熵编码包括:
根据小波系数扫描次序和所述3N+1个子带中任一子带中的量化后的小波系数的上下文信息对所述任一子带进行熵编码,所述小波系数扫描次序为对所述任一子带中的量化后的小波系数进行熵编码的次序。
14.根据权利要求13所述的方法,其特征在于,所述方法还包括:
根据所述图像块K中的低频子带的纹理来确定所述任一子带的小波系数扫描次序;
其中,当所述图像块K中的低频子带的纹理为水平纹理时,则所述小波系数扫描次序为水平扫描次序;当所述图像块K中的低频子带的纹理为竖直纹理时,则所述小波系数扫描次序为竖直扫描次序;当所述图像块K中的低频子带的纹理既不是水平纹理也不是竖直纹理时,则所述小波系数扫描次序为Z型扫描次序。
15.根据权利要求14所述的方法,其特征在于,所述任一子带为子带HH、子带HL、子带LH中的任一个。
16.根据权利要求13所述的方法,其特征在于,所述小波系数扫描次序为多种扫描次序中对应率失真值最小的扫描次序;其中,所述多种扫描次序对应的率失真值为根据按照多种扫描次序分别对所述任一子带进行编码得到的压缩码流所确定的。
17.根据权利要求13所述的方法,其特征在于,所述小波系数扫描次序为竖直扫描次序或者Z型扫描次序。
18.根据权利要求14至17任一项所述的方法,其特征在于,所述方法还包括:
将所述小波系数扫描次序对应的标识写入码流,以便解码端进行图像解码。
19.一种基于小波变换的图像解码方法,其特征在于,包括:
根据图像块K的3N+1个子带的上下文信息对包括所述3N+1个子带的压缩码流进行熵解码,以得到3N+1个子带的量化后的小波系数,所述3N+1个子带中任一子带的上下文信息包括已解码的同位子带中边界的小波系数;所述同位子带是与所述图像块K相邻的图像块中的子带,且所述同位子带在与所述图像块K相邻的图像块中的位置与所述任一子带在所述图像块K中的位置相同,所述N为大于0的整数;
对所述3N+1个子带的量化后的小波系数进行反量化,以得到3N+1个子带的小波系数;
对所述3N+1个子带的小波系数进行N次小波逆变换,得到所述图像块K的重建图像。
20.根据权利要求19所述的方法,其特征在于,所述任一子带中的量化后的上边界小波系数的上下文信息为已解码的同位子带的下边界的小波系数。
21.根据权利要求19所述的方法,其特征在于,所述任一子带中的量化后的左边界小波系数的上下文信息为已解码的同位子带的右边界的小波系数。
22.根据权利要求19所述的方法,其特征在于,所述任一子带中的量化后的左上边界小波系数的上下文信息为已解码的同位子带的右下边界的小波系数。
23.根据权利要求19至22任一项所述的方法,其特征在于,所述根据图像块K的3N+1个子带的上下文信息对包括所述3N+1个子带的压缩码流进行熵解码包括:
根据小波系数扫描次序和所述3N+1个子带的上下文信息对包括所述3N+1个子带的压缩码流进行熵解码。
24.根据权利要求23所述的方法,其特征在于,所述方法还包括:
获取所述压缩码流中的标识,根据所述标识确定所述小波系数扫描次序。
25.一种基于小波变换的图像解码方法,其特征在于,包括:
对压缩码流进行熵解码,以得到3N+1个子带的量化后的小波系数;其中,所述压缩码流包括3N+1个子带的压缩码流,所述3N+1个子带中任一子带中的量化后的小波系数是根据所述3N+1个子带中所述任一子带中的量化后的小波系数的上下文信息对所述任一子带的码流进行熵解码得到的;其中,所述任一子带中的量化后的小波系数的上下文信息包括所述任一子带的参考子带中的小波系数,所述参考子带通过对比所述任一子带更高一级的子带中已解码的高频子带进行上采样或者小波逆变换得到,所述N为大于0的整数;
对所述3N+1个子带的量化后的小波系数进行反量化,以得到3N+1个子带的小波系数;
对所述3N+1个子带的小波系数进行N次小波逆变换,得到重建图像块。
26.根据权利要求25所述的方法,其特征在于,所述任一子带为子带HHi、子带HLi、子带LHi中的任一个,所述参考子带通过对子带MPi+1以及小波系数均设为0的除子带MPi+1外的各子带进行小波逆变换得到;所述子带MPi+1为子带HHi+1、子带HLi+1、子带LHi+1中的至少一个,i为正整数,用于指示子带的级,所述i不大于N-1,所述子带MPi+1以及所述除子带MPi+1外的各子带通过对子带LLi进行一次小波变换得到。
27.根据权利要求25所述的方法,其特征在于,所述对压缩码流进行熵解码包括:
根据小波系数扫描次序对所述压缩码流进行熵解码。
28.根据权利要求27所述的方法,其特征在于,所述方法还包括:
获取所述压缩码流中的标识,根据所述标识确定所述小波系数扫描次序。
29.一种基于小波变换的图像编码装置,其特征在于,包括:
小波变换模块,用于对图像块K进行N次小波变换,以得到3N+1个子带的小波系数,所述N为大于0的整数;
量化处理模块,用于对所述3N+1个子带的小波系数分别进行量化处理,以得到所述3N+1个子带的量化后的小波系数;
编码模块,用于根据所述3N+1个子带中任一子带中的量化后的小波系数的上下文信息对所述任一子带进行熵编码,以得到所述任一子带的压缩码流,其中,所述任一子带中的量化后的小波系数的上下文信息包括已编码的同位子带中边界的小波系数;所述同位子带是与所述图像块K相邻的图像块中的子带,且所述同位子带在与所述图像块K相邻的图像块中的位置与所述任一子带在所述图像块K中的位置相同。
30.根据权利要求29所述的装置,其特征在于,所述任一子带中的量化后的上边界小波系数的上下文信息为已编码的同位子带的下边界的小波系数。
31.根据权利要求29所述的装置,其特征在于,所述任一子带中的量化后的左边界小波系数的上下文信息为已编码的同位子带的右边界的小波系数。
32.根据权利要求29所述的装置,其特征在于,所述任一子带中的量化后的左上边界小波系数的上下文信息为已编码的同位子带的右下边界的小波系数。
33.根据权利要求29至32任一项所述的装置,其特征在于,所述编码模块,具体用于:
根据小波系数扫描次序和所述3N+1个子带中任一子带中的量化后的小波系数的上下文信息对所述任一子带进行熵编码,所述小波系数扫描次序为对所述任一子带中的量化后的小波系数进行熵编码的次序。
34.根据权利要求33所述的装置,其特征在于,所述装置还包括确定模块,用于:
根据所述图像块K中的低频子带的纹理来确定所述任一子带的小波系数扫描次序;
其中,当所述图像块K中的低频子带的纹理为水平纹理时,则所述小波系数扫描次序为水平扫描次序;当所述图像块K中的低频子带的纹理为竖直纹理时,则所述小波系数扫描次序为竖直扫描次序;当所述图像块K中的低频子带的纹理既不是水平纹理也不是竖直纹理时,则所述小波系数扫描次序为Z型扫描次序。
35.根据权利要求34所述的装置,其特征在于,所述任一子带为子带HH、子带HL、子带LH中的任一个。
36.根据权利要求33所述的装置,其特征在于,所述小波系数扫描次序为多种扫描次序中对应率失真值最小的扫描次序;其中,所述多种扫描次序对应的率失真值为根据按照多种扫描次序分别对所述任一子带进行编码得到的压缩码流所确定的。
37.根据权利要求33所述的装置,其特征在于,所述小波系数扫描次序为竖直扫描次序或者Z型扫描次序。
38.根据权利要求33所述的装置,其特征在于,所述装置还包括写入模块,用于:
将所述小波系数扫描次序对应的标识写入码流,以便解码端进行图像解码。
39.一种基于小波变换的图像编码装置,其特征在于,包括:
小波变换模块,用于对图像块K进行N次小波变换,以得到3N+1个子带的小波系数,所述N为大于0的整数;
量化处理模块,用于对所述3N+1个子带的小波系数分别进行量化处理,以得到所述3N+1个子带的量化后的小波系数;
编码模块,用于根据所述3N+1个子带中任一子带中的量化后的小波系数的上下文信息对所述任一子带进行熵编码,以得到所述任一子带的压缩码流,其中,所述任一子带中的量化后的小波系数的上下文信息包括所述任一子带的参考子带中的小波系数,所述参考子带通过对比所述任一子带更高一级的子带中已编码的高频子带进行上采样或者小波逆变换得到。
40.根据权利要求39所述的装置,其特征在于,所述任一子带为子带HHi、子带HLi、子带LHi中的任一个,所述参考子带通过对子带MPi+1以及小波系数均设为0的除子带MPi+1外的各子带进行小波逆变换得到;所述子带MPi+1为子带HHi+1、子带HLi+1、子带LHi+1中的至少一个,i为正整数,用于指示子带的级,所述i不大于N-1,所述子带MPi+1以及所述除子带MPi+1外的各子带通过对子带LLi进行一次小波变换得到。
41.根据权利要求39或40所述的装置,其特征在于,所述编码模块,具体用于:
根据小波系数扫描次序和所述3N+1个子带中任一子带中的量化后的小波系数的上下文信息对所述任一子带进行熵编码,所述小波系数扫描次序为对所述任一子带中的量化后的小波系数进行熵编码的次序。
42.根据权利要求41所述的装置,其特征在于,所述装置还包括确定模块,用于:
根据所述图像块K中的低频子带的纹理来确定所述任一子带的小波系数扫描次序;
其中,当所述图像块K中的低频子带的纹理为水平纹理时,则所述小波系数扫描次序为水平扫描次序;当所述图像块K中的低频子带的纹理为竖直纹理时,则所述小波系数扫描次序为竖直扫描次序;当所述图像块K中的低频子带的纹理既不是水平纹理也不是竖直纹理时,则所述小波系数扫描次序为Z型扫描次序。
43.根据权利要求42所述的装置,其特征在于,所述任一子带为子带HH、子带HL、子带LH中的任一个。
44.根据权利要求41所述的装置,其特征在于,所述小波系数扫描次序为多种扫描次序中对应率失真值最小的扫描次序;其中,所述多种扫描次序对应的率失真值为根据按照多种扫描次序分别对所述任一子带进行编码得到的压缩码流所确定的。
45.根据权利要求41所述的装置,其特征在于,所述小波系数扫描次序为竖直扫描次序或者Z型扫描次序。
46.根据权利要求42至45任一项所述的装置,其特征在于,所述装置还包括写入模块,用于:
将所述小波系数扫描次序对应的标识写入码流,以便解码端进行图像解码。
47.一种基于小波变换的图像解码装置,其特征在于,包括:
解码模块,用于根据图像块K的3N+1个子带的上下文信息对包括所述3N+1个子带的压缩码流进行熵解码,以得到3N+1个子带的量化后的小波系数,所述3N+1个子带中任一子带的上下文信息包括已解码的同位子带中边界的小波系数;所述同位子带是与所述图像块K相邻的图像块中的子带,且所述同位子带在与所述图像块K相邻的图像块中的位置与所述任一子带在所述图像块K中的位置相同,所述N为大于0的整数;
反量化模块,用于对所述3N+1个子带的量化后的小波系数进行反量化,以得到3N+1个子带的小波系数;
小波逆变换模块,用于对所述3N+1个子带的小波系数进行N次小波逆变换,得到所述图像块K的重建图像。
48.根据权利要求47所述的装置,其特征在于,所述任一子带中的量化后的上边界小波系数的上下文信息为已解码的同位子带的下边界的小波系数。
49.根据权利要求47所述的装置,其特征在于,所述任一子带中的量化后的左边界小波系数的上下文信息为已解码的同位子带的右边界的小波系数。
50.根据权利要求47所述的装置,其特征在于,所述任一子带中的量化后的左上边界小波系数的上下文信息为已解码的同位子带的右下边界的小波系数。
51.根据权利要求47至50任一项所述的装置,其特征在于,所述解码模块,具体用于:
根据小波系数扫描次序和所述3N+1个子带的上下文信息对包括所述3N+1个子带的压缩码流进行熵解码。
52.根据权利要求51所述的装置,其特征在于,所述解码模块还用于:
获取所述压缩码流中的标识,根据所述标识确定所述小波系数扫描次序。
53.一种基于小波变换的图像解码装置,其特征在于,包括:
解码模块,用于对压缩码流进行熵解码,以得到3N+1个子带的量化后的小波系数;其中,所述压缩码流包括3N+1个子带的压缩码流,所述3N+1个子带中任一子带中的量化后的小波系数是根据所述3N+1个子带中所述任一子带中的量化后的小波系数的上下文信息对所述任一子带的码流进行熵解码得到的;其中,所述任一子带中的量化后的小波系数的上下文信息包括所述任一子带的参考子带中的小波系数,所述参考子带通过对比所述任一子带更高一级的子带中已解码的高频子带进行上采样或者小波逆变换得到,所述N为大于0的整数;
反量化模块,用于对所述3N+1个子带的量化后的小波系数进行反量化,以得到3N+1个子带的小波系数;
小波逆变换模块,用于对所述3N+1个子带的小波系数进行N次小波逆变换,得到重建图像块。
54.根据权利要求53所述的装置,其特征在于,所述任一子带为子带HHi、子带HLi、子带LHi中的任一个,所述参考子带通过对子带MPi+1以及小波系数均设为0的除子带MPi+1外的各子带进行小波逆变换得到;所述子带MPi+1为子带HHi+1、子带HLi+1、子带LHi+1中的至少一个,i为正整数,用于指示子带的级,所述i不大于N-1,所述子带MPi+1以及所述除子带MPi+1外的各子带通过对子带LLi进行一次小波变换得到。
55.根据权利要求53所述的装置,其特征在于,所述解码模块具体用于:
根据小波系数扫描次序对所述压缩码流进行熵解码。
56.根据权利要求55所述的装置,其特征在于,所述解码模块还用于:
获取所述压缩码流中的标识,根据所述标识确定所述小波系数扫描次序。
CN202010820592.7A 2020-08-14 2020-08-14 基于小波变换的图像编解码方法及装置 Active CN114079771B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202010820592.7A CN114079771B (zh) 2020-08-14 2020-08-14 基于小波变换的图像编解码方法及装置
PCT/CN2021/110574 WO2022033371A1 (zh) 2020-08-14 2021-08-04 基于小波变换的图像编解码方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010820592.7A CN114079771B (zh) 2020-08-14 2020-08-14 基于小波变换的图像编解码方法及装置

Publications (2)

Publication Number Publication Date
CN114079771A CN114079771A (zh) 2022-02-22
CN114079771B true CN114079771B (zh) 2023-03-28

Family

ID=80247721

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010820592.7A Active CN114079771B (zh) 2020-08-14 2020-08-14 基于小波变换的图像编解码方法及装置

Country Status (2)

Country Link
CN (1) CN114079771B (zh)
WO (1) WO2022033371A1 (zh)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005341389A (ja) * 2004-05-28 2005-12-08 Ricoh Co Ltd 画像処理装置、画像処理方法、プログラム及び情報記録媒体
CN101192303A (zh) * 2006-11-24 2008-06-04 北京中电华大电子设计有限责任公司 适用于Jpeg2000标准的高速比特平面解码方法及电路
CN105611301A (zh) * 2015-12-23 2016-05-25 四川大学 基于小波域残差的分布式视频编解码方法

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2933457B2 (ja) * 1993-02-18 1999-08-16 日本電気株式会社 ウェーブレット変換符号化方法
KR100366638B1 (ko) * 2001-02-07 2003-01-09 삼성전자 주식회사 웨이블릿 변환을 기본으로하여 트리-구조의 벡터 양자화기법을 이용한 영상 부호화 장치 및 부호화 방법
US7522774B2 (en) * 2004-03-10 2009-04-21 Sindhara Supermedia, Inc. Methods and apparatuses for compressing digital image data
JP4111448B2 (ja) * 2004-04-22 2008-07-02 株式会社リコー 画像処理装置、画像処理方法、プログラム及び情報記録媒体
CN101478672B (zh) * 2008-01-04 2012-12-19 华为技术有限公司 视频编码、解码方法及装置和视频处理***
JP5660361B2 (ja) * 2010-03-26 2015-01-28 ソニー株式会社 画像処理装置および方法、並びにプログラム
CN102447896B (zh) * 2010-09-30 2013-10-09 华为技术有限公司 图像残差块的处理方法、装置和***
CN102595113B (zh) * 2011-01-13 2014-06-04 华为技术有限公司 一种变换系数块的扫描方法、装置和***
CN103581691B (zh) * 2013-11-14 2016-05-18 北京航空航天大学 一种面向稀疏系数的高效可并行图像编码方法
CN106803242A (zh) * 2016-12-26 2017-06-06 江南大学 基于四元数小波变换的多聚焦图像融合方法
CN108718409B (zh) * 2018-06-11 2020-09-18 齐齐哈尔大学 一种遥感影像压缩方法
CN111009018A (zh) * 2019-12-24 2020-04-14 苏州天必佑科技有限公司 基于深度神经网络的图像降维和重建方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005341389A (ja) * 2004-05-28 2005-12-08 Ricoh Co Ltd 画像処理装置、画像処理方法、プログラム及び情報記録媒体
CN101192303A (zh) * 2006-11-24 2008-06-04 北京中电华大电子设计有限责任公司 适用于Jpeg2000标准的高速比特平面解码方法及电路
CN105611301A (zh) * 2015-12-23 2016-05-25 四川大学 基于小波域残差的分布式视频编解码方法

Also Published As

Publication number Publication date
CN114079771A (zh) 2022-02-22
WO2022033371A1 (zh) 2022-02-17

Similar Documents

Publication Publication Date Title
US6163626A (en) Method for digital image compression
Roos et al. Reversible intraframe compression of medical images
JP3993632B2 (ja) 重要度量子化装置を備えたデータ圧縮システム
US6389074B1 (en) Method and apparatus for digital data compression
JP4718609B2 (ja) 多次元デジタル信号のフィルタリング方法及び装置、並びに、関連する符号化/復号化方法及び装置
KR100281165B1 (ko) 효율적 처리를 위한 데이터의 다중 해상도의 무손실/유손실 압축 및 기억 방법 및 그 시스템
US6263110B1 (en) Method for data compression
Chappelier et al. Oriented wavelet transform for image compression and denoising
US6266414B1 (en) Method for digital data compression
EP0971544A2 (en) An image coding method and apparatus for localised decoding at multiple resolutions
WO1993017519A1 (en) Fractal coding of data
JPH10198337A (ja) 高速アスペクト比ズーミング及び圧縮及びシーリングを用いるサムネイル操作
US20100054613A1 (en) Methods and devices for coding and decoding, a telecommunication system and computer program implementing them
KR20100016272A (ko) Pixon 방법을 사용한 이미지 압축 및 압축 해제
US7460722B2 (en) Encoding of digital data with determination of sample path
CN114079771B (zh) 基于小波变换的图像编解码方法及装置
Thakker et al. Lossy Image Compression-A Comparison Between Wavelet Transform, Principal Component Analysis, K-Means and Autoencoders
Devi et al. Gray scale image compression based on wavelet transform and linear prediction
EP0920213A2 (en) Method and apparatus for decoding transform coefficients
KR100950417B1 (ko) 방향성 필터링 기반 웨이블렛 변환에서 문맥 모델링 방법및 웨이블렛 코딩 장치와 이를 위한 기록 매체
AU708489B2 (en) A method and apparatus for digital data compression
AU725719B2 (en) A method of digital image compression
Ho et al. Adaptive predictor based on maximally flat halfband filter in lifting scheme
Arya Devi et al. Compression of gray scale images using linear prediction on wavelet coefficients
EP3046326A1 (en) Method and device of construction of an epitome, coding and decoding methods and coding and decoding devices

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant