CN1725861A - 压缩/解压缩图像的方法和使用该方法的设备 - Google Patents

压缩/解压缩图像的方法和使用该方法的设备 Download PDF

Info

Publication number
CN1725861A
CN1725861A CNA2005100854031A CN200510085403A CN1725861A CN 1725861 A CN1725861 A CN 1725861A CN A2005100854031 A CNA2005100854031 A CN A2005100854031A CN 200510085403 A CN200510085403 A CN 200510085403A CN 1725861 A CN1725861 A CN 1725861A
Authority
CN
China
Prior art keywords
image
layer
bit stream
picture signal
territory
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CNA2005100854031A
Other languages
English (en)
Inventor
金宰贤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN1725861A publication Critical patent/CN1725861A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/12—Selection from among a plurality of transforms or standards, e.g. selection between discrete cosine transform [DCT] and sub-band transform or selection between H.263 and H.264
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H04N19/137—Motion inside a coding unit, e.g. average field, frame or block difference
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/187—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a scalable video layer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Discrete Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

提供了一种压缩和解压缩图像信号的方法和使用该的方法的设备，该方法基于图像内容划分图像域并通过使用比特率和/或互不相同的层比率分级地压缩和解压缩划分的图像域。该方法包括以下操作：将接收到的比特流分级成多个层；对按每一层分级的比特流解码，并获得每一层的解压缩的图像信号；和合成每一层的解压缩的图像信号。因此，可在传输差或存储容量不足的情况下传输或存储重要的图像信息。

Description

压缩/解压缩图像的方法和使用该方法的设备
本申请要求于2004年7月21日在韩国知识产权局提交的第10-2004-0057004号韩国专利申请的优先权，该申请完全公开于此以资参考。
                        技术领域
本发明涉及一种压缩/解压缩图像的方法和使用该方法的设备，更具体地讲，涉及一种分级压缩/解压缩图像信号的方法和使用该方法的设备。
                        背景技术
传统的压缩/解压缩图像以记录和传输高清晰度的图像的技术，需要大量的存储空间和大的传输带宽。然而，随着最近已经提出以低比特率传输和记录图像的设备，例如运动画面电话或移动存储装置，需要这样一种压缩和解压缩图像的技术，该技术在保持传递具有预定的质量水平的信息的能力的同时，能有效地利用存储空间和带宽。因此，提出了多种分级压缩和解压缩图像的技术。
                        发明内容
本发明提供一种压缩和解压缩图像信号的方法和使用该方法的设备，该方法基于图像的内容划分图像域，通过使用不同的比特率和/或层比率分级地压缩和解压缩划分的图像域。
本发明还提供一种压缩和和解压缩图像信号的方法和使用该方法的设备，该方法基于内容的重要性划分图像域，并通过使用取决于内容的重要性、传输/记录环境和应用的目的的层比率和/或比特率，分级地压缩和解压缩划分的图像域。
根据本发明的一方面，提供了一种解压缩图像的方法，该方法包括的操作有：将接收到的比特流分级为多个层；对按每一层分级的比特流解码；获得每一层的解压缩的图像信号；和合成每一层的解压缩的图像信号。
可以以相对应于基于每一层互不相同的目标层比率的压缩率的解压缩率对按每一层分级的比特流解码。基于包括在接收到的比特流中的层信息对层分级。图像层信息可包括能根据内容划分图像域的层模式。根据图像的内容的重要性可确定每一层互不相同的目标层比率。
可以以相对应于基于在编码中使用的目标比特率和每一层互不相同的目标层比率的压缩率的解压缩率，对按每一层分级的比特流解码。
可以以相对应于基于在编码中使用的目标比特率的压缩率的解压缩率，对由每一层分级的比特流解码。
根据本发明的另一方面，提供了一种解压缩图像的方法，该方法包括以下操作：基于图像层信息将接收到的比特流分级成多个层；通过对在多个层中具有最高重要性的层的比特流解码，来获得解压缩图像信号；基于包括在接收到的比特流中的附加信息，从先前解压缩的图像信号中获得与除了在多个层中具有最高重要性的层之外的其他层相对应的图像信号；和将解压缩的图像信号和从先前解压缩的图像信号中获得的图像信号合成，并向解压缩的图像信号输出合成的图像信号。
具有最高重要性的层可包括在图像中具有最高重要性的图像边界域和该图像的中间域之间的至少一个域。
根据本发明的另一方面，提供一种解压缩图像的设备，该设备包括：逆流转化器，如果接收到比特流，则分析比特流以将该比特流分成多个层，并按层发送该比特流；解码部分，按每一层对从逆流转化器中发送的比特流解码，并输出每一层的解压缩的图像信号；和图像合成部分，合成每一层的解压缩的图像信号。
逆流转化器基于包括在接收到的比特流中的层信息将接收到的比特流分级为多个层。
根据本发明的另一方面，提供了一种解压缩图像的设备，该设备包括：逆流转化器，将接收到的比特流分级为多个层，并输出基于具有最高重要性的层的比特流和除了在多个层中具有最高重要性的层之外的其他层的附加信息的读出信息；解码部分，对从逆流转化器发送的比特流解码并输出解压缩的图像信号；图像合成部分，合成每一层的解压缩的图像信号；帧存储器，基于读出信息提供与所述的其他层相对应的图像域的先前解压缩的图像信号；和图像合成部分，合成从解码部分输出的解压缩的图像信号和由帧存储器提供的先前解压缩的图像信号，并输出合成的图像信号。
具有最高重要性的层包括在图像中具有最高重要性的图像边界域和该图像的中间域之间的至少一个域。
根据本发明的另一方面，提供了一种压缩图像的方法，该方法包括以下操作：提取图像特征信息；基于提取的图像特征信息和图像的编码层的数目，来产生图像的层模式；基于层模式分割图像域；按分割的图像域对图像信号编码；和按图像域合成编码的图像信号，并输出合成的图像信号；
编码操作可根据分割的图像域的内容的重要性按分割的图像域以基于互不相同的目标层比率的压缩率，来对分割的图像域的图像信号编码。
编码操作可根据分割的图像域的内容的重要性按分割的图像域以基于互不相同的目标层比率的压缩率，来对分割的图像域的图像信号编码。
编码操作可以以基于目标比特率所确定的压缩率来对分割的图像信号编码。
根据本发明的另一方面，提供了一种压缩图像的方法，该方法包括以下操作：提取图像特征信息；基于提取的图像特征信息和图像的编码层的数目产生来图像的层模式；基于层模式分割图像域；和对在分割的图像域中具有最高重要性的图像域的图像信号编码。
上述方法还可包括操作：将解压缩在分割的图像域中的除了在图像中具有最高重要性的图像域之外的图像域所必须的附加信息和编码的图像信号合成。
根据本发明的另一方面，提供了一种压缩图像的设备，该设备包括：图像特征信息提取部分，提取输入图像的特征信息，并基于已提取的图像特征信息和图像的编码层的数目，来产生与图像相对应的层模式；域分割部分，基于层模式分割图像域；和编码部分，对由域分割部分分割的图像域的图像信号编码。
根据本发明的另一方面，提供了一种压缩图像的设备，该设备包括：图像特征信息提取部分，提取输入图像的特征信息，并基于已提取的图像特征信息和图像的编码层的数目来产生与图像相对应的层模式；域分割部分，基于层模式分割图像域；和编码部分，对在由域分割部分分割的图像域中具有最高重要性的图像域的图像信号编码，并输出该编码的图像信号和对分割的图像域中的没有被编码的其他图像域的图像信号解压缩所必须的附加信息作为比特流。
                        附图说明
通过参考附图对本发明示例性实施例进行详细描述，本发明的上述和其他特点和优点将会变得更加清楚，其中：
图1是表示根据本发明的实施例的压缩图像的设备的方框图；
图2A是检测到的图像特征信息的示例；
图2B是与图2A相对应的层模式的示例；
图3是表示图1的编码部分的方框图；
图4是表示图3的层编码器的方框图；
图5是表示图3的流转化器的方框图；
图6是表示根据本发明的实施例的解压缩图像的设备的方框图；
图7是表示图6的逆流转化器的方框图；
图8是描述根据本发明的实施例的压缩图像的方法的操作的流程图；
图9是描述根据本发明的实施例的解压缩图像的方法的操作的流程图。
                        具体实施方式
现在将参考附图更全面地描述本发明，在附图中显示了本发明示例性的实施例。然而，本发明可以以不同的形式被示例化，不应被解释为限于在此处所阐述的实施例；相反，提供这些实施例是为了使这个公开将会详细、完整，并把本发明的构思传达给本领域的技术人员。
图1是示出根据本发明实施例的压缩图像的设备的方框图。参考图1，压缩图像的设备包括图像特征信息提取部分101，先前帧存储器部分102，域分割部分103和编码部分104。
图像特征信息提取部分101基于输入图像的内容提取图像特征信息，这些图像特征信息能把图像域分成重要性高的图像域和重要性不高的图像域。重要性高的图像域应该包括必定在输入图像中被记录或被发送的内容。
例如，重要性高的图像域可以是对象域。重要性不高的图像域包括在输入图像中可能没有被记录或发送的内容。如果重要性高的图像域是对象域，那么重要性不高的图像域可以是背景域。重要性高的图像域可被定义为对输入图像的其他图像域而言具有最高重要性的图像域。这就是为什么输入图像可被分成两个或多个图像域的原因。
考虑到输入图像的复杂性或活动性等等，图像特征提取部分101能提取图像特征信息。在考虑活动性提取图像特征信息的情况下，首先，图像特征提取部分101将输入图像分割成预定单元的段。然后，图像特征提取部分101计算每段的当前帧的像素数据和先前帧的像素数据以获得空域中的活动性(SEGACT)，如公式1所示，其中，先前帧的像素数据存储在先前帧存储器102中。
[公式1]
SEG - ACT ( i , j ) = Σ x = 0 x = z Σ v = 0 y = z | P t ( x , y ) - P t - 1 ( x , y ) |
在公式1中，Pt(x，y)是当前帧的像素数据，Pt-1(x，y)是先前帧的在相应于Pt(x，y)位置上的像素数据。
在当前帧关于先前帧几乎没有运动的情况下，在每一段的空间域中获得的活动性接近0。因此，如果以段为单位在空间域中获得的活动性接近0，那么图像特征信息提取部分101提取在先前帧中以段为单位获得的频域的活动性作为以段为单位的图像特征信息。通过使用离散余弦变换(DCT)系数获得频域的活动性。频域的活动性从编码部分104被提供。
在当前帧相对于先前帧有运动的情况下，图像特征信息提取部分101提取对于当前帧的以段为单位获得的空间域的活动性作为以段为单位的当前帧的图像特征信息。如果对于当前帧的以段为单位获得的空间域的活动性不接近0，那么可以确定：当前帧相对于先前帧有运动。
如上所述，如果以段为单位提取图像特征信息，那么输入图像信号的图像特征信息可以以段为单位被获得，如图2A所示。图2A示出了：当以段为单位的图像特征信息变得接近0时在输入图像信号中重要性是低的图像域；当以段为单位的图像特征信息变得不接近0时在输入图像信号中重要性是高的图像域。
与此同时，为了实现有效的域分割，邻近重要性高的域的域(如，边界域)或图像特征信息接近0的中间域可被看作重要性低的域。然而，因为这样的域具有相当高的重要性，所以这样的域被归类到具有高重要性的域。
参考图2A，在201图像域中的对应的内容具有最高的重要性，在203图像域中的对应的内容具有最低的重要性，202图像域的内容具有比201图像域的内容低、并且比203图像域的内容高的重要性。因为202图像域是201图像域和203图像域之间的边界域，所以201图像域和202图像域可被归类到具有高重要性的域。
如果以段为单位提取图像特征信息，那么图像特征信息提取部分101基于关于在编码部分104中构成的编码层的层信息归一化以段为单位提取的图像特征信息，并产生与输入图像信号相对应的层模式。
如果编码部分104的编码层被构成为三层，那么图像特征信息提取部分101将提取到的图像特征信息归一化为3，如图2A所示，并产生具有以段为单位的图像特征信息的层模式，如图2B所示。图2B是关于在图2A中获得的图像特征信息的将0和1归一化为层3，将2归一化为层2，将3、4和5归一化为层1的例子。
每一层模式被发送到域分割部分103和编码部分104。
先前帧存储器102存储先前帧的图像信号。如果从图像特征信息提取部分101中产生当前帧的层模式，那么存储在先前帧存储器102里的先前帧图像信号被更新为当前帧图像信号。
如果输入如图2B中显示的层模式，那么域分割部分103基于以段为单位分配的层信息分割当前帧的图像域，并将分割的结果发送到编码部分104。
如果编码部分104包括图3所示的第一到第三层编码器301，302和303，那么域分割部分103将与图2B中的层信息1被分配的段相对应的当前帧图像域的图像信号发送到第一层编码器301。域分割部分103将与图2B中的层信息2被分配的段相对应的当前帧图像域的图像信号发送到第二层编码器302。域分割部分103将与图2B中的层信息3被分配的段相对应的当前帧图像域的图像信号发送到第三层编码器303。为了达到此效果，域分割部分103可包括开关，该开关以段为单位选择性地将图像信号发送到第一到第三层编码器。
域分割部分103根据设定的目标比特率不将被包括在具有低重要性的图像域的段的图像信号发送到编码部分104，或者即使要被发送，可以将其发送以将它以低于具有高重要性的域的比率被压缩。另外，域分割部分103可划分将被发送到编码部分104的按层分割的图像域，从而可以按每层都互不相同的目标层比率压缩按层分割的图像域。
例如，在具有低目标比特率且以某一比特率记录或传输编码信息的***中，例如在运动画面电话或移动存储设备中，域分割部分103不将与层信息3或层信息2和3被分配的段相对应的图像域的图像信息发送到编码部分104，或将其发送以增加其压缩比。具有层信息2和3的图像域的内容的重要性比具有层信息1的图像域的内容的重要性低。
编码部分104分级地对被分割到每层并从域分割部分103被发送的当前帧编码。同时以帧为单位向图像特征提取部分101提供以段为单位的频域的活动性，通过目标比特率控制输出的比特流的比特率，或根据每一层的目标层比率对输入的图像信号编码，或根据目标比特率和每一层的目标层比率对输入的信号编码。
通过使用从图像特征提取部分101发送的层模式，编码部分104还以段为单位或以图2B所示的层为单位输出包括被分配的层信息和相应图像域的位置信息的比特流。
为此，编码部分104包括第一到第三层编码器301、302和303，频域活动性提供部分304和流转化器305，如图3所示。
第一到第三层编码器301，302和303，每个通过组成控制器400、差分检波器401、DCT和量化器402、可变长编码器403、逆DCT/逆量化器404、运动补偿单元406、运动估计单元407和存储器408，如图4所示，来对输入的图像信号编码。
控制器400接收目标比特率、目标层比率和图像特征信息。控制器400按层输出编码器控制信号和层比率信号以基于接收到的目标比特率和/或目标层比率除了控制量化步长还控制层比率，并且控制相应编码器的操作。另外，控制器400基于接收到的图像特征信息控制可变长编码器403，以便通过图2B所示的头部域发送组成层模式的层信息。控制器400控制相应于编码器的操作，以便按层的目标比特率信息和/或目标层比率信息、量化步长信息等能被包括在头部域中。
然而，第一到第三层编码器301、302和303可以以每个互不相同的目标层比率对输入的图像信号编码。也就是说，可通过将具有最高重要性的图像域的目标层比率设置为高并且将具有相对低得重要性的图像域的目标层比率设置为低，来对图像信号编码。在第一到第三编码器301、302和303中使用的每一目标层比率可以根据***目标比特率和相应层的重要性被预先设置，或者可以根据相应层的重要性而不考虑***目标比特率被预先设置。
因此，在第二个层编码器302和第三层编码器303中设置的目标层比率可以比在第一层编码器301中设置的目标层比率小。
根据目标比特率或根据目标比特率和目标层比率或根据目标层比率，可设置第一到第三层编码器301、302和303中的量化步长。例如，在发送的比特率超过目标比特率的情况下，第二个层编码器302和第三层编码器303的量化步长被设置为大；在发送的比特率没有超过目标比特率的情况下，第二个层编码器302和第三层编码器303的每个量化步长被设置为小。
在第一到第三层编码器301、302和303中的每一个控制器400能够根据相应的目标层比率控制第一到第三层编码器301、302和303是否被编码。
在层模式和图像域的位置信息的基础上，基于图像特征信息，从第一到第三层编码器301、302和303输出的比特流中的每一个包括以层单元或以段为单位解压缩所必须的附加信息和在第一到第三层编码器301、302和303中使用的目标层比率和目标比特率。
第一到第三层编码器301、302和303还向频域活动性提供部分304提供从DCT/量化器402计算出的以段为单位的频域活动性。
如果没有输入相应的图像域的图像信号，那么第一到第三层编码器301，302和303不会***作。
频域活动性提供部分304从第一到第三层编码器301，302和303中接收以段为单位的频域活动性，并将它以帧为单位发送到图像特征提取部分101。
流转化器305输出与从第一到第三层编码器301、302和303发送的编码的图像信号相结合的比特流。为此，流转化器305可以如图5所示被构成。换句话说，流转化器305包括第一到第三缓冲器501、502和503，以及开关504。
第一缓冲器501缓冲从第一层编码器301发送的已编码图像信号的比特流。第二缓冲器502缓冲从第二层编码器302发送的已编码图像信号的比特流。第三缓冲器503缓冲从第三层编码器303发送的已编码图像信号的比特流。如果从相应的层编码器中没有发送编码的图像信号的比特流，那么相应的缓冲器不会被缓冲。
开关504选择性地发送从第一到第三缓冲器501、502和503输出的比特流。
图6是示出本发明的实施例的解压缩图像的设备的方框图。参考图6，该解压缩图像的设备包括逆流转化器601、解码部分610、图像合成部分620和帧存储器630。
如果接收到比特流，那么逆流转化器601分析该比特流并将接收到的比特流分级为多个层，以将其按层发送。基于包括在接收到的比特流的头部域中的层模式，通过使用层信息，逆流转化器601将接收到的比特流分级成多个层。层信息是从图1中的图像特征提取部分101提取的图像特征信息。
例如，具有层信息1的比特流被发送到解码部分610的第一层解码器611，具有层信息2的比特流被发送到解码部分610的第二层解码器612，具有层信息3的比特流被发送到解码部分610的第三层解码器613。
如果存在没有接收到图像信号的比特流的层，那么逆转化器601基于对应于该层的图像域的位置信息，来产生帧存储器630的读出信息。产生的读出信息被提供给帧存储器630。
为此，逆转化器601包括比特流分析和分级部分701、以及第四到第六缓冲器702、703，和704。
在编码期间，比特流分析和分级部分701以层为单位或以段为单位分析输入比特流的头部域，并确定输入比特流的层信息。结果，与层1相对应的比特流被发送到第四缓冲器702，与层2相对应的比特流被发送到第五缓冲器703，与层3相对应的比特流被发送到第五缓冲器704。
如果接收到的比特流不包括部分层的编码的图像信号的比特流，那么比特流分析和分级部分701向帧存储器630提供读出信息，该读出信息能获得相应层的先前解压缩的图像信号。不包括编码的图像信号的比特流的层是包括在相应图像中重要性低的内容的图像域，或者由于连续图像没有运动，是具有和先前帧相同的内容的图像域。
第四缓冲器702缓冲从比特流分析和分级部分701发送的比特流，并将该比特流发送到解码部分610的第一层解码器611。第五缓冲器703缓冲从比特流分析和分级部分701发送过来的比特流，并将该比特流发送到解码部分610的第二层解码器612。第六缓冲器704缓冲从比特流分析和分级部分701发送过来的比特流，并将该比特流发送到解码部分610的第三层解码器613。
解码部分610包括第一到第三层解码器611、612和613。第一层解码器611通过使用与第一层编码器301使用的量化步长相等的量化步长，来将从第四缓冲器702发送的比特流解压缩为原始图像信号。根据在编码期间使用的目标层比率或目标比特率或目标层比率和目标比特率，来确定量化步长。量化步长被包括在为了传输向第四缓冲器702发送的比特流中。量化步长被定义为与编码期间的压缩率相对应的解压缩率。
第二层解码器612通过使用与第二层编码器302使用的量化步长相等的量化步长，来将从第五缓冲器703发送的比特流解压缩为原始图像信号。第三层解码器613通过使用与第三层编码器303使用的量化步长相等的量化步长，将从第六缓冲器704中发送出的比特流解压缩为原始图像信号。如上所述，根据目标比特率和/或每个互不相同的目标层比率，解码部分610所包括的第一到第三层解码器611、612和613能对输入的比特流解码。
图像合成部分620合成从第一到第三层解码器611、612和613发送的解压缩的图像信号，并输出解压缩的图像信号。然而，如果解压缩的图像信号从第一到第三层解码器611、612和613中的第一层解码器611发送，并且其他图像域的解压缩的图像信号从帧存储器630被发送，那么图像合成部分620合成这些图像信号并输出解压缩的图像信号。
帧存储器630存储先前帧的解压缩的图像信号。因此，如果从图像合成部分620中解压缩的图像信号被输出，那么存储在帧存储器630中的图像信号被输出的解压缩图像信号更新。
图8是描述根据本发明实施例的解压缩图像的方法的操作的流程图。在操作801中，提取输入图像信号的图像特征信息。具体地讲，如同图1的图像特征提取部分101，提取能按内容划分输入图像域的图像特征信息。例如，提取能够划分与对象域相对应的内容和与背景域相对应的内容的图像特征信息。能够以预定段为单位提取图像特征信息，如图2A所示。还可基于图像信号的活动性或复杂性提取图像特征信息。
接下来，在操作802中产生与基于已定义的编码层所提取的图像特征信息相对应的层模式，如图2B所示。在操作803中，基于组成产生的层模式的层信息来分割输入图像信号的域。
在操作804中，参考图3所述，按每一层对分割的图像信号编码。在分割的图像信号中，只有具有最高重要性的层的图像域的图像信号才能被编码。在编码或传输期间设置的目标比特率为低或连续图像信号几乎没有运动的情况下，只有具有最高重要性的层的图像域的图像信号才能被编码。与具有最高重要性的层相对应的图像域可以是包括相对应的图像中具有最高重要性的内容的图像域。邻近具有最高重要性的层的域或具有低重要性的图像的中间域可以被包括在具有最高重要性的层中。
当按层对图像信号编码时，图像信号可以根据目标比特率和/或目标层比率被编码，其中，目标层比率根据层的重要性、传输/记录环境和应用目的而互不相同。目标层比率和目标比特率可以被预先设置。例如，通过设置具有最高重要性的层的目标层比率高于具有相对低重要性的层的目标层比率，来对图像信号编码。目标比特率可根据传输/记录环境和应用目的被不定地调整。在按层对图像信号编码期间，所使用的目标比特率、目标层比率、量化步长、层信息和图像域的位置信息可以被包括在头部域中。
在操作805中，为了传输，将按层编码的图像信号的比特流进行流转化。
图9是描述根据本发明实施例的解压缩图像的方法的操作的流程图。如果接收到比特流，则在操作901中分析接收到的比特流的头部域。在操作902中，基于分析的头部域信息，将接收到的比特流分级为多个层。头部域信息可包括基于层模式的层信息、相应的图像域的位置信息和在按层编码期间使用的目标层比率和目标比特率。
因此，基于层信息接收到的比特流可以被分级。层信息构成图2B的层模式。
在操作903中，通过使用在图6的编码部分610中的编码期间使用的量化步长，来对分级的分层的比特流解码。
在操作904中，合成解码的分层的图像信号以获得解压缩的图像信号。
图9是所有的分层的比特流都被接收的情况。然而，具有低重要性的层的比特流可能不会被接收，如图6的图像解压缩装置中所描述的。如果存在比特流没有被接收的层，那么与该层相对应的图像域基于被包括在相应头部域中的位置信息从先前解压缩的图像信号中获得解压缩的图像信号，组合该解压缩的图像信号和其他层的解压缩的图像信号，并且产生一帧的解压缩的图像信号。每当产生一帧的解压缩的图像信号，先前解压缩的图像信号被更新。
根据本发明实施例的分级压缩和解压缩图像信号的方法和使用该方法的设备已经参考本发明实施例被详细显示和描述。为描述方便，将单个图像分割为三个域的情况作为了示例。然而，当对具有n层的单个图像编码和解码时，可应用本发明。
同样地，本领域的普通技术人员应该理解，在不脱离由所附的权利要求限定本发明的精神和范围的情况下，可以对其进行形式和细节的各种改变。这些示例性实施例应被认为仅仅是描述意义上的，不是为了限制的目的。因此，本发明的范围不是由本发明详细的描述限定，而是由所附的权利要求限定，在本发明的范围内的差别会被认为包括在本发明内。
如上所述，本发明在保持将被发送的图像中的重要信息(或具有高重要性的内容)的清晰度的同时，根据内容的重要性将图像域分割成多个层，使用根据传输/记录环境和应用目的而变化的目标比特率和/或每个都互不相同的目标层比率来压缩和解压缩图像信号，以使得以低比特率发送或记录图像信号。因此，能提供适合传输差或存储容量不足的情况，例如运动画面电话或移动存储装置的压缩和解压缩图像的设备。

Claims (24)

1、一种解压缩图像的方法，该方法包括以下操作：
将接收到的比特流分级成多个层；
对按每一层分级的比特流解码，并获得每一层的解压缩的图像信号；和
合成每一层的解压缩的图像信号。
2、根据权利要求1所述的方法，其中，以相应于基于每一层互不相同的目标层比率的压缩率的解压缩率，来对按每一层分级的比特流解码，每一层基于包括在接收到的比特流中的层信息被分级。
3、根据权利要求2所述的方法，其中，层信息包括能根据内容划分图像域的层模式。
4、根据权利要求3所述的方法，其中，根据图像的内容的重要性确定互不相同的目标层比率。
5、根据权利要求2所述的方法，其中，以相应于基于在编码中使用的目标比特率和每一层互不相同的目标层比率的压缩率的解压缩率，来对按每一层分级的比特流解码。
6、根据权利要求1所述的方法，其中，以相应于基于在编码中使用的目标比特率的压缩率的解压缩率，来对按每一层分级的比特流解码。
7、一种解压缩图像的方法，该方法包括以下操作：
基于图像层信息将接收到的比特流分级为多个层；
通过对在多个层中具有最高重要性的层的比特流解码来获得解压缩的图像信号；
基于包括在接收到的比特流中的附加信息，获得与在从先前解压缩图像信号中的多个层中除具有最高重要性的其他层相对应的图像信号；
基于包括在接收到的比特流中的附加信息，从先前解压缩的图像信号中获得与除了在多个层中具有最高重要性的层之外的其他层相对应的图像信号；和
将解压缩的图像信号和从先前解压缩的图像信号中获得的图像信号合成，并向解压缩的图像信号输出合成的图像信号。
8、根据权利要求7所述的方法，其中，具有最高重要性的层包括在图像中具有最高重要性的图像边界域和该图像的中间域之间的至少一个域。
9、一种解压缩图像的设备，该设备包括：
逆流转化器，如果接收到比特流，则分析比特流以将该比特流分级成多个层，并按层发送该比特流；
解码部分，按每一层对从逆流转化器中发送的比特流解码，并输出每一层的解压缩的图像信号；和
图像合成部分，合成每一层的解压缩的图像信号。
10、根据权利要求9所述的方法，其中，逆流转化器基于包括在接收到的比特流中的层信息将接收到的比特流分级为多个层。
11、根据权利要求10所述的方法，其中，层信息包括能够按内容划分图像域的层模式。
12、根据权利要求9所述的方法，其中，解码部分使用相应于基于每一层互不相同的目标层比率的压缩率的解压缩率，按每一层对比特流解码。
13、根据权利要求9所述的方法，其中，解码部分通过使用相应于基于在编码期间使用的目标比特率和每一层互不相同的目标层比率的压缩率的解压缩率，按每一层对比特流解码。
14、根据权利要求9所述的方法，其中，解码部分通过使用相应于基于在编码期间使用的目标比特率的压缩率的解压缩率，按每一层对比特流解码。
15、一种解压缩图像的设备，该设备包括：
逆流转化器，将接收到的比特流分级为多个层，并输出基于具有最高重要性的层的比特流和除了在多个层中具有最高重要性的层之外的其他层的附加信息的读出信息；
解码部分，对从逆流转化器发送的比特流解码并输出解压缩的图像信号；
图像合成部分，合成每一层的解压缩的图像信号；
帧存储器，基于读出信息提供与所述的其他层相对应的图像域的先前解压缩的图像信号；和
图像合成部分，合成从解码部分输出的解压缩的图像信号和由帧存储器提供的先前解压缩的图像信号，并输出合成的图像信号。
16、根据权利要求15所述的设备，其中，具有最高重要性的层包括在图像中具有最高重要性的图像边界域和该图像的中间域之间的至少一个域。
17、一种压缩图像的方法，该方法包括以下操作：
提取图像特征信息；
基于提取的图像特征信息和图像的编码层的数目，来产生图像的层模式；
基于层模式分割图像域；
按分割的图像域对图像信号编码；和
按图像域合成编码的图像信号，并输出合成的图像信号；
18、根据权利要求17所述的方法，其中，编码操作根据分割的图像域的内容的重要性按分割的图像域以基于互不相同的目标层比率的压缩率，来对分割的图像域的图像信号编码。
19、根据权利要求17所述的方法，其中，编码操作按分割的图像域以基于目标比特率和互不相同的目标层比率所确定的压缩率，来对分割的图像域的图像信号编码。
20、根据权利要求17所述的方法，其中，编码操作以基于目标比特率所确定的压缩率来对分割的图像信号编码。
21、一种压缩图像的方法，该方法包括以下操作：
提取图像特征信息；
基于提取的图像特征信息和图像的编码层的数目产生来图像的层模式；
基于层模式分割图像域；和
对在分割的图像域中具有最高重要性的图像域的图像信号编码。
22、根据权利要求21所述的方法，该方法还包括操作：将解压缩在分割的图像域中的除了在图像中具有最高重要性的图像域之外的图像域所必须的附加信息和编码的图像信号合成。
23、一种压缩图像的设备，该设备包括：
图像特征信息提取部分，提取输入图像的特征信息，并基于已提取的图像特征信息和图像的编码层的数目，来产生与图像相对应的层模式；
域分割部分，基于层模式分割图像域；和
编码部分，对由域分割部分分割的图像域的图像信号编码。
24、一种压缩图像的设备，该设备包括：
图像特征信息提取部分，提取输入图像的特征信息，并基于已提取的图像特征信息和图像的编码层的数目来产生与图像相对应的层模式；
域分割部分，基于层模式分割图像域；和
编码部分，对在由域分割部分分割的图像域中具有最高重要性的图像域的图像信号编码，并输出该编码的图像信号和对分割的图像域中的没有被编码的其他图像域的图像信号解压缩所必须的附加信息作为比特流。
CNA2005100854031A 2004-07-21 2005-07-18 压缩/解压缩图像的方法和使用该方法的设备 Pending CN1725861A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020040057004A KR20060007765A (ko) 2004-07-21 2004-07-21 영상 압축/복원 방법 및 장치
KR1020040057004 2004-07-21

Publications (1)

Publication Number Publication Date
CN1725861A true CN1725861A (zh) 2006-01-25

Family

ID=35656828

Family Applications (1)

Application Number Title Priority Date Filing Date
CNA2005100854031A Pending CN1725861A (zh) 2004-07-21 2005-07-18 压缩/解压缩图像的方法和使用该方法的设备

Country Status (3)

Country Link
US (1) US20060017985A1 (zh)
KR (1) KR20060007765A (zh)
CN (1) CN1725861A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN100405849C (zh) * 2004-08-31 2008-07-23 联发科技股份有限公司 数字视讯编码与译码的方法与***
CN104376830A (zh) * 2013-08-13 2015-02-25 联发科技股份有限公司 数据处理装置以及相关数据处理方法
CN114630125A (zh) * 2022-03-23 2022-06-14 徐州百事利电动车业有限公司 基于人工智能与大数据的车辆图像压缩方法与***

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2010079790A1 (ja) * 2009-01-08 2010-07-15 日本電気株式会社 配信システムと方法並びに変換装置
KR20120058763A (ko) * 2010-11-30 2012-06-08 삼성전자주식회사 영상 장치에서 영상 데이터를 송신하기 위한 장치 및 방법
WO2018004317A1 (ko) * 2016-07-01 2018-01-04 에스케이텔레콤 주식회사 고해상도 영상 스트리밍을 위한 영상 비트스트림 생성방법 및 장치
US10743000B2 (en) 2016-07-01 2020-08-11 Sk Telecom Co., Ltd. Video bitstream generation method and device for high-resolution video streaming
JP7456994B2 (ja) * 2018-07-18 2024-03-27 ピクセルロット エルティーディー． 映像圧縮に基づくコンテンツレイヤーのためのシステム及び方法

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6091777A (en) * 1997-09-18 2000-07-18 Cubic Video Technologies, Inc. Continuously adaptive digital video compression system and method for a web streamer
US20020021758A1 (en) * 2000-03-15 2002-02-21 Chui Charles K. System and method for efficient transmission and display of image details by re-usage of compressed data
TW567728B (en) * 2001-02-20 2003-12-21 Sanyo Electric Co Method and apparatus for decoding graphic image
US7200277B2 (en) * 2003-07-01 2007-04-03 Eastman Kodak Company Method for transcoding a JPEG2000 compressed image

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN100405849C (zh) * 2004-08-31 2008-07-23 联发科技股份有限公司 数字视讯编码与译码的方法与***
CN104376830A (zh) * 2013-08-13 2015-02-25 联发科技股份有限公司 数据处理装置以及相关数据处理方法
CN104376831A (zh) * 2013-08-13 2015-02-25 联发科技股份有限公司 数据处理装置以及相关数据处理方法
CN104378615A (zh) * 2013-08-13 2015-02-25 联发科技股份有限公司 数据处理装置以及相关数据处理方法
CN104376830B (zh) * 2013-08-13 2017-06-09 联发科技股份有限公司 数据处理装置以及相关数据处理方法
US9875723B2 (en) 2013-08-13 2018-01-23 Mediatek Inc. Data processing apparatus for transmitting/receiving randomly accessible compressed pixel data groups over display interface and related data processing method
CN114630125A (zh) * 2022-03-23 2022-06-14 徐州百事利电动车业有限公司 基于人工智能与大数据的车辆图像压缩方法与***
CN114630125B (zh) * 2022-03-23 2023-10-27 徐州百事利电动车业有限公司 基于人工智能与大数据的车辆图像压缩方法与***

Also Published As

Publication number Publication date
US20060017985A1 (en) 2006-01-26
KR20060007765A (ko) 2006-01-26

Similar Documents

Publication Publication Date Title
CN1224268C (zh) 运动图象编码装置及运动图象解码装置
JP4697557B2 (ja) 符号化装置、符号化方法、記録媒体及び画像処理装置
CN1233160C (zh) 自适应编码和解码运动图像的方法及其装置
CN1151684C (zh) 活动图象编码译码装置及方法
CN1725861A (zh) 压缩/解压缩图像的方法和使用该方法的设备
CN1267817C (zh) 用于衰落补偿的信号指示
CN1976458A (zh) 利用层间相关性编码层内标记的方法、及解码方法和设备
CN1933601A (zh) 用于无损视频编码和解码的方法及设备
CN1684517A (zh) 用于支持运动可缩放性的方法和设备
CN1684495A (zh) 图像和视频的预测无损编码
CN1675932A (zh) 用于视频编码的采用后向自适应的速率失真优化数据分割***和方法
CN1893666A (zh) 视频编码和解码方法及设备
CN101031086A (zh) 视频信息编码方法和视频信息解码方法
CN1723710A (zh) 用于对视频数据编码的***和用于对视频数据解码的***
CN1943244A (zh) 视频编码中的帧间预测方法、视频编码器、视频解码方法和视频解码器
CN1431828A (zh) 在图像和视频的编码/解码中的变换系数的最佳扫描方法
CN1592412A (zh) 图象数据的自适应可变长度编码方法
CN1922884A (zh) 视频解码方法
CN1751521A (zh) 图像解码装置、图像解码方法和图像解码程序
US9077960B2 (en) Non-zero coefficient block pattern coding
CN1770867A (zh) 选择性预测编码和解码方法及选择性预测编码和解码装置
CN1292594C (zh) 使用多个扫描图形的编码和解码方法及装置
CN1149853C (zh) 带有运动补偿的编码和译码装置
CN1822677A (zh) 预测视频块的系数的设备和方法
CN1860791A (zh) 结合高级数据分割和精确粒度可分级以用于有效时空信噪比的可分级视频编码和流式传输的***和方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication