CN1672147A - 用于堆处理并行处理器的***及方法 - Google Patents
用于堆处理并行处理器的***及方法 Download PDFInfo
- Publication number
- CN1672147A CN1672147A CN 03817750 CN03817750A CN1672147A CN 1672147 A CN1672147 A CN 1672147A CN 03817750 CN03817750 CN 03817750 CN 03817750 A CN03817750 A CN 03817750A CN 1672147 A CN1672147 A CN 1672147A
- Authority
- CN
- China
- Prior art keywords
- data
- unusual
- calculating operation
- modulus
- scrambler
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 111
- 238000012545 processing Methods 0.000 title claims abstract description 36
- 238000004590 computer program Methods 0.000 claims abstract description 8
- 230000004087 circulation Effects 0.000 claims description 63
- 238000007906 compression Methods 0.000 claims description 38
- 238000006243 chemical reaction Methods 0.000 claims description 31
- 230000006835 compression Effects 0.000 claims description 30
- 238000004422 calculation algorithm Methods 0.000 claims description 17
- 230000009466 transformation Effects 0.000 claims description 17
- 230000008569 process Effects 0.000 claims description 14
- 238000013139 quantization Methods 0.000 claims description 6
- 238000004020 luminiscence type Methods 0.000 abstract 1
- 230000006870 function Effects 0.000 description 29
- 238000005516 engineering process Methods 0.000 description 16
- 230000008859 change Effects 0.000 description 12
- 238000013213 extrapolation Methods 0.000 description 11
- 238000007792 addition Methods 0.000 description 7
- 230000008901 benefit Effects 0.000 description 7
- 230000000007 visual effect Effects 0.000 description 6
- 230000005856 abnormality Effects 0.000 description 5
- 238000004364 calculation method Methods 0.000 description 5
- 238000007667 floating Methods 0.000 description 5
- 230000009471 action Effects 0.000 description 4
- 230000005540 biological transmission Effects 0.000 description 4
- 238000013144 data compression Methods 0.000 description 4
- 238000013461 design Methods 0.000 description 4
- 230000000694 effects Effects 0.000 description 4
- 238000012360 testing method Methods 0.000 description 4
- 241000023320 Luma <angiosperm> Species 0.000 description 3
- 230000002950 deficient Effects 0.000 description 3
- OSWPMRLSEDHDFF-UHFFFAOYSA-N methyl salicylate Chemical compound COC(=O)C1=CC=CC=C1O OSWPMRLSEDHDFF-UHFFFAOYSA-N 0.000 description 3
- 230000002829 reductive effect Effects 0.000 description 3
- 230000002441 reversible effect Effects 0.000 description 3
- 238000000926 separation method Methods 0.000 description 3
- 238000012546 transfer Methods 0.000 description 3
- ZVQOOHYFBIDMTQ-UHFFFAOYSA-N [methyl(oxido){1-[6-(trifluoromethyl)pyridin-3-yl]ethyl}-lambda(6)-sulfanylidene]cyanamide Chemical compound N#CN=S(C)(=O)C(C)C1=CC=C(C(F)(F)F)N=C1 ZVQOOHYFBIDMTQ-UHFFFAOYSA-N 0.000 description 2
- 230000002159 abnormal effect Effects 0.000 description 2
- 230000006978 adaptation Effects 0.000 description 2
- 238000013459 approach Methods 0.000 description 2
- 239000012141 concentrate Substances 0.000 description 2
- 230000006837 decompression Effects 0.000 description 2
- 230000001419 dependent effect Effects 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 238000006073 displacement reaction Methods 0.000 description 2
- 230000008676 import Effects 0.000 description 2
- 230000002045 lasting effect Effects 0.000 description 2
- 230000007246 mechanism Effects 0.000 description 2
- 238000010606 normalization Methods 0.000 description 2
- 238000011002 quantification Methods 0.000 description 2
- 238000005070 sampling Methods 0.000 description 2
- 230000002123 temporal effect Effects 0.000 description 2
- 241001269238 Data Species 0.000 description 1
- 241001673391 Entandrophragma candollei Species 0.000 description 1
- 240000004859 Gamochaeta purpurea Species 0.000 description 1
- 238000007476 Maximum Likelihood Methods 0.000 description 1
- 230000003044 adaptive effect Effects 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000005764 inhibitory process Effects 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 230000036961 partial effect Effects 0.000 description 1
- 238000005192 partition Methods 0.000 description 1
- 230000008447 perception Effects 0.000 description 1
- 238000005381 potential energy Methods 0.000 description 1
- 238000004886 process control Methods 0.000 description 1
- 230000001681 protective effect Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 230000000717 retained effect Effects 0.000 description 1
- 229920006395 saturated elastomer Polymers 0.000 description 1
- 238000009738 saturating Methods 0.000 description 1
- 230000035945 sensitivity Effects 0.000 description 1
- 238000000638 solvent extraction Methods 0.000 description 1
- GOLXNESZZPUPJE-UHFFFAOYSA-N spiromesifen Chemical compound CC1=CC(C)=CC(C)=C1C(C(O1)=O)=C(OC(=O)CC(C)(C)C)C11CCCC1 GOLXNESZZPUPJE-UHFFFAOYSA-N 0.000 description 1
- 230000001131 transforming effect Effects 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
- 239000002699 waste material Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/30—Arrangements for executing machine instructions, e.g. instruction decode
- G06F9/32—Address formation of the next instruction, e.g. by incrementing the instruction counter
- G06F9/322—Address formation of the next instruction, e.g. by incrementing the instruction counter for non-sequential address
- G06F9/325—Address formation of the next instruction, e.g. by incrementing the instruction counter for non-sequential address for loops, e.g. loop detection or loop counter
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F17/00—Digital computing or data processing equipment or methods, specially adapted for specific functions
- G06F17/10—Complex mathematical operations
- G06F17/14—Fourier, Walsh or analogous domain transformations, e.g. Laplace, Hilbert, Karhunen-Loeve, transforms
- G06F17/148—Wavelet transforms
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/30—Arrangements for executing machine instructions, e.g. instruction decode
- G06F9/30003—Arrangements for executing specific machine instructions
- G06F9/30072—Arrangements for executing specific machine instructions to perform conditional operations, e.g. using predicates or guards
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/30—Arrangements for executing machine instructions, e.g. instruction decode
- G06F9/38—Concurrent instruction execution, e.g. pipeline or look ahead
- G06F9/3861—Recovery, e.g. branch miss-prediction, exception handling
- G06F9/3865—Recovery, e.g. branch miss-prediction, exception handling using deferred exception handling, e.g. exception flags
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/13—Adaptive entropy coding, e.g. adaptive variable length coding [AVLC] or context adaptive binary arithmetic coding [CABAC]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
- H04N19/436—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation using parallelised computational arrangements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
- H04N19/62—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding by frequency transforming in three dimensions
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
- H04N19/63—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding using sub-band based transform, e.g. wavelets
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
- H04N19/91—Entropy coding, e.g. variable length coding [VLC] or arithmetic coding
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Software Systems (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Mathematical Physics (AREA)
- Pure & Applied Mathematics (AREA)
- Mathematical Optimization (AREA)
- Data Mining & Analysis (AREA)
- Computational Mathematics (AREA)
- Mathematical Analysis (AREA)
- Algebra (AREA)
- Databases & Information Systems (AREA)
- Computing Systems (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
- Complex Calculations (AREA)
- Advance Control (AREA)
- Executing Machine-Instructions (AREA)
Abstract
提出了一种用于处理异常的***、方法和计算机程序产品(Fig.12)。提出了另一种包括可变模数的编码器和/或解码器***和方法。还提出了一种用于压缩数据的***和方法,由此按照第一预定速率来更新帧的亮度数据,同时按照小于第一预定速率的第二预定速率来更新帧的色度数据。
Description
技术领域
本发明涉及数据处理。
背景技术
并行处理
当所需的算法有窄的数据宽度、串行数据依赖性、或频繁的控制指令(例如:“if”、“for”、“while”指令)时,对并行处理器进行高容量编程是不容易的。有三种类型的并行机制可用来解决处理器中这样的问题。
第一种类型的并行机制由多功能单元来支持,并且它允许进行数据处理以同时在每一个功能单元内进行。超级计数处理器结构和超长指令字(VLIW)处理器结构允许指令在同一循环中被发布到多个功能单元中的每一个。一般来说,此等待时间,或完成时间,在每一种类型的功能单元中都是不同的。最简单的功能(例如:位级AND)通常在一个循环内即可完成,而一个浮点加法则需要3次或更多次的循环来完成。
第二种类型的并行处理由流水线式操作的独立功能单元来支持。例如,一个浮点ADD可在3次循环内完成,并使用串连3个只需1次循环的子功能来实现。通过在子功能之间放置流水线寄存器,第二浮点加法可以在同一循环内被起动进入第一子功能中,在此循环中,前一个浮点加法可被起动进入进第二子功能中。利用这种方法,即使任一单独的浮点加法需要3次循环来完成,一个浮点加法也可在每个循环内被起动并完成。
第三种类型的并行处理使用一个字中不同的字段分区来实施同一计算的不同实例。例如,32位处理器上的32位的字可以被分成4个8位的字段分区。如果此数据项足够小从而能放入8位内,则利用同一单一指令将可以用来处理所有4个数值。
在每一个循环中,还可能处理的数据项数目等于字段分区的数目乘以功能单元初始化的次数。
循环展开
一般来讲,有一种对多和/或流水线功能单元进行编程的传统和一般方法:找到同一计算方法的多个实例,并根据每一个实例一起执行相应的操作。这些实例可通过已知的循环展开技术或其它同样的计算方法来产生。
虽然循环展开是一种普遍使用的技术,具体的例子对了解此方法的优点有所帮助。例如,考虑下面的程序A。
程序A
for i=0:1:255,{S(i)};
其中程序体S(i)是依赖于i的一序列运算{S1(i);S2(i);S3(i);S4(i);S5(i);},并且其中计算S(i)完全独立于计算S(j),j≠i。不假设运算S1(i);S2(i);S3(i);S4(i);S5(i);彼此独立。相反地,假设从一个运算到下一个运算的依赖性禁止重新排序。
同时,还假设此依赖性要求下一个运算在前一个运算结束后才能开始。如果此流水线运算需要两个循环来完成(即使此流水线的执行单元在每一循环中产生一个新的结果),该5个序列的运算将需要10个循环来完成。另外,此循环分支需要每个循环附加的3个循环,除非编程工具可以重叠S4(i);S5(i);和分支延迟。因此,如果此分支延迟是被重叠的,则程序A需要640(256/4*10)次循环来完成;如果此分支延迟不被重叠,则需要832(256/4*13)次循环来完成。
以下的程序B与程序A等同。
程序B
for n=0:4:255,{S(n);S(n+1);S(n+2);S(n+3);};
此循环已经被“展开”四次。这就将昂贵的流程控制改变的数目减少了4倍。更重要的是,它提供了可以重新将四个S(i)中每一个的运算要素重新排序的机会。所以,程序A和程序B等同于程序C。
程序C
for n=0:4:255,{S1(n);S2(n);S3(n);S4(n);S5(n);
S1(n+1);S2(n+1);S3(n+1);S4(n+1);S5(n+1);
S1(n+2);S2(n+2);S3(n+2);S4(n+2);S5(n+2);
S1(n+3);S2(n+3);S3(n+3);S4(n+3);S5(n+3);
};
利用以上有关依赖性和独立性的假设集合,则可产生等同的程序D。
程序D
for n=0:4:255,{S1(n);S1(n+1);S1(n+2);S1(n+3);
S2(n);S2(n+1);S2(n+2);S2(n+3);
S3(n);S3(n+1);S3(n+2);S3(n+3);
S4(n);S4(n+1);S4(n+2);S4(n+3);
S5(n);S5(n+1);S5(n+2);S5(n+3);
};
在第一循环内可以发出(issue)S1(n);S1(n+1);,在第二循环内可以发出S1(n+2);S1(n+3);。在第三循环开始时,S1(n);S1(n+1);已经完成(已经经过了两次循环),所以可以发出S2(n);S2(n+1);。
因此,接下来的两个运算可在每一个后续循环内发出,因此,可以在相同的10次循环内执行整个程序体。程序D在少于程序A运算时间的四分之一中进行运算。因此,阐明了公知的循环展开的效用。
大多数并行处理器必须具有条件分支指令,此分支指令需要在指令本身和分支实际发生的点之间的多次循环延迟。在此延迟期间,其它指令可被执行。只要足够早地知道此分支条件并且编译器或其它编程工具支持在此延迟期间指令的执行,则此分支可以花费小到一个指令发布时机的时间。这项技术甚至可以被应用到程序A,因为分支条件(i=255)在循环的顶部就已知。
然而,过多的展开可能产生负面作用。首先,一旦利用了所有的起动时机(如在程序D中),附加的展开并不增加速度。第二,每一轮(turn)展开的循环通常需要附加的寄存器来保存该具体轮的状态。所需的寄存器的数目与展开轮的数目成线性比例。如果所需寄存器的数目的总和超过可利用的数目,一些寄存器会溢出到高速缓冲存储器中,然后,在下一个循环轮中被恢复。需要发出指令以支持溢出并且重新载入加长了程序的运行时间。所以,存在最优的次数来展开这种循环。
包含异常处理的展开循环
现在考虑程序A’。
程序A’
for i=0:1:255,{S(i);if C(i)then T(I(i))};
其中C(i)是仅依赖于S(i)的很少存在的异常条件(例如,1/64);,T(I(i))是一个过长的异常处理,例如有1024个操作。I(i)是由异常处理所需的S(i)计算的信息。例如,可以假定T(I(i))平均在程序A的每个循环轮内增加16个运算,此数目超过了循环的主程序体内的4个运算。这种罕见但过长的异常处理是一个编程的普遍问题,不清楚应该怎么处理该问题而不会失去展开的优点。
保护指令
处理这种问题的一种方法是通过使用在许多处理器上便于使用的保护指令(guarded instruction)。保护指令指定一个布尔值作为附加的操作数,其中意味着此指令总是占用期望的功能单元,但是,如果此保护指令是假,则抑制结果的保留。
在实现“if-then-else”中,此保护被作为“if”的条件。由“if”的条件保护“then”语句的指令,由“if”的相反条件保护“else”语句的指令。在任何情况下,两条语句都被执行。“then”语句的结果只更新保护是“真”的实例。此外,“else”语句的结果只更新保护是“假”的实例。所有的实例都执行两条语句的指令,承受该损失好于在控制流程中条件变化所需的流水线延迟损失。
如果,例如在程序A’中该保护很多时候是“真”并且“else”语句较大,则保护方法会遭受较大的损失。在这种情况下,所有实例都要为该较大的“else”语句付出代价,即使只有几个状态受到此语句的影响。如果具有由条件C保护的操作S,则可以将其编程为guard(C,S);
第一展开
如下所示,程序A’可被展开成程序D’:
for n=0:4:255,{S1(n);S1(n+1);S1(n+2);S1(n+3); S2(n);S2(n+1);S2(n+2);S2(n+3); S3(n);S3(n+1);S3(n+2);S3(n+3); S4(n);S4(n+1);S4(n+2);S4(n+3); S5(n);S5(n+1);S5(n+2);S5(n+3); if C(n)then T(I(n)); if C(n+1)then(I(n+1)); if C(n+2)then(I(n+2)); if C(n+3)then T(I(n+3)); };
假设使用上述例子中的参数,在77%的循环轮中不会执行T(I(n)),可能在21%循环中执行一个T(I(n)),并且只在2%的循环中执行多个T(I(n))。显然,交叉运算T(I(n)),T(I(n+1)),T(I(n+2)),和T(I(n+3))并没有多少好处。
因此,需要处理异常的改进技术。
编解码器
编码器是一种按照以下方式将符号的输入序列映射为另一个已编码的符号序列的处理:被称作解码器的另一个处理能够根据已编码的序列符号来重构输入的符号序列。编码器和解码器合称为“编解码器”。
作为简写,通常将符号的有限序列称为流,因此,可以将流称为输入流和已编码流。从输入符号I的相关有限字母表来形成输入流的每一个符号。同样,从代码符号C的相关有限字母表来形成已编码流的每一个符号。
每一个字母表包含可区分符号,称为<end>符号。每一个流在与之相关的<end>符号处终止,并且<end>符号只能出现在每个流的末端。使用<end>符号的目的是能够有序地暂停编解码器的处理。
可以将能够确定输入或代码流的末端的任意方法用于合成真实或虚拟的<end>符号的效果。例如,在许多应用程序中,输入和/或代码流的长度是已知的,该信息可用于替换文字的<end>流。
可以用Φ表示编码器映射,以便如果u是输入流,v是相对应的已编码流,则此关系可写成:v=Φ(u)。同样,解码器映射由Ψ表示,可以写成:u=Ψ(v),其中需要:u=Ψ(Φ(u))。
不需要Φ(Ψ(v))来重构v。如果相关的字母表I和C每个除了<end>符号之外仅包含两个符号,则将编解码器(Φ,Ψ)称为二进制编解码器。如果a,b,和<end>是二进制字母表中的三个符号,则将有用函数~定义为:~a=b,~b=a,~<end>=<end>。
如到目前所述,当输入流的数目(和代码流的数目)无限时,编解码器没有实际的实现。如果没有对编解码器设置更多的结构和限制,其将无法灵活地在有限机内实现,实际的实现则更少。
实际上可以由众所周知的有限状态转换器来实现相当部分的编解码器的子集。有限状态转换器(FST)是一种能够从其起始符号到终止符号<end>顺序地处理流的自动装置,并且当序列化时写入代码流的符号。从输入流的符号顺序地获得信息并最终表示在代码流中。
为了桥接从输入流获得信息和在代码流中表示之间的延迟,FST在序列化时保持并更新状态。从被称为状态空间的可能状态的有限集合中选择出所述状态。状态空间包含两个被称作<start>和<finish>的可区分状态。FST在<start>状态开始其处理并在<finish>状态完成其处理。直到已经从输入流中读取了<end>符号并且已经将<end>符号附在代码流上,才到达<finish>状态。
由于状态空间是有限的,不可能将每一个编码器都表示为FST。为了实用,本说明集中于编码器和解码器都可被描述和执行为FST的编解码器。如果能够将编码器Φ实现为FST,则可以通过更新函数来指定。来自输入流的第一个输入符号a与当前状态s1结合并产生下一个状态s2。有条件地从输入流的开始去除第一个符号。有条件地将所产生的代码符号b附到代码流中。
如果当前状态是<finish>且FST终止了序列化,则函数是未定义。概括为:(s2,b)=(s(s1,a),b(s1,a))=(s1,a)。这里,将s(s1,a)定义为(s1,a)的第一分量,将b(s1,a)定义为(s1,a)的第二分量。
对于包括熵编码的许多应用程序,利用马尔可夫概率结构来配备FST是有用的。假设状态s1和输入符号a,则存在概率Prob(a/s1),假设FST处于状态s1,a将是下一个要读取的符号。根据应用程序,此概率可以被设定,可以静态地从历史数据中估计,或者可以动态地从FST的最近操作中被估计。在后者的情况下,可以在状态空间内编码概率估计所基于的信息。
因此,能够计算假设FST处于状态s1,FST接下来处于状态s2的概率Prob(s2/s1)。这可以通过以下分析计算:Prob(s2/s1)=(s(s1,a)=s2)Prob(a/s1)+(s(s1,~a)=s2)Prob(~a/s1)。
可以将该马尔可夫状态转移概率的集合组合为随机矩阵M,其中Mij=Prob(sj/si)。可以计算渐近(asymptotic)状态概率P(s),作为与最大本征值1相对应的M的右特征向量(right eigenvector)的元素。
视觉方面
视频“编解码器”(压缩器/解压缩器)通过在图像质量、处理器需要(即,成本/功率消耗)和压缩比(即,结果数据率)之间进行平衡来减少数据通信流所需的数据率。目前可用的压缩方法提供了不同程度的折中,并衍生出多个编解码器的概况(profile),其中优化每一个概况来满足具体程序的需要。
有失真数字视频压缩***对数字化的视频序列进行操作以产生更小的数字表述。重构的可视结果看上去很像原始视频,但通常不会完全匹配。对这些***,重要的是,在此处理中丢失的信息与观众不容易注意或不容易看到的视频方面相对应。
典型的数字视频压缩***在一系列级中进行操作,包括变换级、量化级和熵编码级。例如MPEG和其它基于DCT的编解码器算法的某些压缩***添加了其它级,例如运动补偿搜索等。二维和三维的小波是当前基于DCT的编解码器算法的另一选择。由于其令人满意的图像质量和灵活的压缩比,小波已经受到高度关注,促使JPEG委员会在JPEG2000静态图像标准中采取了小波算法。
当在视频压缩器中使用小波变换作为变换级时,这种算法如同一系列滤波器对进行操作,将数据分离为高通或低通分量或波段。标准小波变换按照二维方式在单个图像的空间范围上进行运算。通过结合水平工作的滤波器和垂直工作的滤波器来处理二维情况。典型地,这些滤波器按照交替的序列进行操作,H-V-H-V,尽管不需要严格的交替。现有技术中已知在时间(temporal)方向也使用小波滤波器:对实时来自连续图像的采样进行运算。此外,小波变换可以独立地用于视频信号的亮度或辉度(luma)、颜色差异或色度(chroma)分量。
对于二维空间,可以使用DCT或其它非小波空间,并且在时间方向上使用小波类型的变换。这种混合三维变换用于与小波变换相同的目的。同时,对于三维DCT变换,可以在时间方向上使用短时DCT。
通常,三维小波变换的时间部分因为更短而与空间部分不同。典型的空间变换大小是水平720个像素和垂直480个像素;空间变换的典型大小是二、四、八或十五帧。这些时间长度较小,因为当进行处理时,在过程中处理多个帧会导致不希望的较长延迟,此外需要存储帧,这是昂贵的。
当观众观看画面或视频序列以判断其质量时,或当观众在视觉上比较两个画面或两个视频序列时,某些缺陷或不同会比其它缺陷或不同更难察觉。这是人类的视觉***对于其看到的某些视觉方面比其它方面具有更高敏感度的结果。例如,只有当处于高对比度时,才可以看到非常细微的细节,但是却能看到处于非常精密对比度的中等大小的细节。对压缩来讲,这些区别是重要的。设计压缩处理,用于使这些区别和错误尽可能的不被注意。因而,压缩处理可以在亮度对比度的中等范围产生较好的逼真度,同时细微的细节中出现更多的错误。
因此,存在对于开发不同的心理物理学机会的持续需要,以改进压缩算法,而不会明显地损失所感知的质量。
前面所述的压缩***通常用于个人视频记录器、数字视频记录器、有线机顶盒等。这些应用和其他的共同特点是用户具有暂停视频的可能性,在延长的时间内保持单个帧的显示,作为静态图像。
在现有技术中已知处理视频序列或其它图像序列,来得到比输入图像分辨率更高的单个图像。然而,这种处理在计算中是非常昂贵的,因为其必须识别或匹配场景中的运动目标、摄像机运动、光线转移和其它变化,并且单个地或结合地补偿每一个变化。然而,目前的应用程序还不支持这种用于简单暂停功能的计算浪费。
因此,存在对于开发不同的心理物理学机会的持续需要,以表示实质上比由简单重复解压缩缩视频帧产生的图像具有更高视觉质量的暂停图像。
发明内容
异常处理
提出了一种用于处理异常的***、方法和计算机程序产品。首先,在循环中处理计算操作。此外,在处理所述计算操作的同时识别并存储异常。然后,独立于循环处理这种异常。
在一个实施例中,计算操作可以涉及非重要的数值。例如,此计算操作可以包括对多个零值进行计数。此外,此计算操作可以包括剪辑(clipping)和/或饱和(saturating)操作。
在另一个实施例中,所述异常可以包括重要的数值。例如,所述异常可以包括非零数据。
作为选择,例如,至少可以在使用数据压缩***的变换模块、量化模块和/或熵编码模块的部分中处理该计算操作。因此,该处理可用于压缩数据。可选地,可以利用小波变换、离散余弦变换和/或其它类型的解相关变换来压缩所述数据。
编解码器
提出了一种包括可变模数(variable modulus)的编码器和/或解码器***和方法。
在一个实施例中,所述模数可以反映与压缩算法相关联的概率分布曲线的陡度。例如,此模数可以包括概率分布的负指数。作为选择,所述概率分布与编解码器相关联。
在另一个实施例中,所述模数可以取决于一组先前数据的内容。此外,所述模数可以避免作为运行长度(即,序列中的多个相同位)而增大。
在另一个实施例中,设计编解码器,用于使用提供了预定希望的性能水平的最小计算复杂度。
视觉方面
提出了一种用于压缩数据的***和方法。在使用中,根据第一预定速率更新帧的亮度,同时根据小于第一速率的第二预定速率更新所述帧的色度数据。
因此,增大了压缩数目。为了实现此目的,在一个实施例中,可以省略色度数据的一个或多个频带。此外,可以使用滤波器省略一个或多个频带。这种滤波器可以包括小波滤波器。因此,当视频数据被解压缩时,可以对色度数据的省略部分进行插值。
提出了用于压缩数据的另一种***和方法。这种***和方法涉及压缩视频数据并在已压缩的数据中***暂停信息。因此,当在回放期间暂停视频数据时,可以使用该暂停信息。
在一个实施例中,暂停信息可以用于提高暂停操作期间视频数据的质量。此外,暂停信息可以包括高分辨率帧。此外,暂停信息包括能够用于构造高分辨率帧的数据。
附图说明
图1示出了根据一个实施例的用于压缩/解压缩数据的框架。
图2示出了根据一个实施例的用于处理异常的方法。
图3示出了图2中方法的操作序列的例子。
图4-9示出了根据不同实施例的与多个操作特征相关联的多个图形和表。
图10是计算复杂度对性能水平图,示出了当前所述二元/一元(DM)编解码器框架和其它算法的关系。
图11是示出了根据一个实施例的编码器和解码器更新功能的转移表。
图12示出了根据一个实施例的具有色度(chroma)时间速率减小的压缩数据的方法。
图12A示出了根据一个实施例的在回放期间具有高质量暂停能力的压缩数据的方法。
图13示出了根据一个实施例的压缩/解压缩数据的方法。
图14示出了执行图13中方法时使用的数据结构。
图15示出了根据一个实施例的压缩/解压缩数据的方法。
具体实施方式
图1显示根据一个实施例的用于压缩/解压缩数据的框架100。包括在该框架100内的是编码器部分101和解码器部分103,两者一起形成“编解码器”。编码器部分101包括变换模块102、量化器104和用于压缩数据并存储到文件108中的熵码编码器106。为了执行这种文件108的解压,解码器部分103包括逆变换模块114、解量化器111和用于解压缩数据以使用(即,观看视频数据的情况等)的熵解码器110。
在使用中,为了解相关的目的,变换模块102执行可逆并且通常是线性的多个象素的解相关变换(即,视频数据的情况)。接下来,量化器104进行变换数值的量化,然后,熵编码器106进行响应,用于已量化的变换模数的熵编码。解码器部分103的不同部分实质上进行这种处理的逆处理。
图2示出了根据一个实施例的用于处理异常的方法。在一个实施例中,该方法200可以在图1的框架100的环境中运行。然而,应该注意的是,方法200也可以在任何希望的环境中执行。
首先,在操作202中,在循环内处理计算操作。在本说明的环境下,计算操作可以涉及非重要的数值。例如,计算操作可以包括对多个零值进行计数,此操作经常在数据压缩期间被执行。另外,此计算操作还可包括剪辑和/或饱和操作。在任意情况下,此计算操作可以包括处理相对于其它数值重要性较低的任何数值。
当在循环中执行计算操作时,在操作204-206中识别并存储异常。可选地,存储可以包括存储处理异常所需的任何相关数据。在本说明的环境下,异常可以包括重要的数值。例如,异常可以包括非零数据。在任意情况下,异常可以包括处理相对于其它数值重要性较高的任何数值。
因此,独立于循环来处理异常。参见操作208。在这方面,通过使能够展开循环并因此提高了在分支中出现的性能,异常的处理不会中断循环的“堆(pile)”处理。具体地,本实施例能够进行过长异常语句的并行执行。这可以通过向/从存储器写入和重新读取适当数目的数据来实现。关于与此技术和“堆”处理相关的多种选择的更多信息将在以下详细描述。
作为选择,至少可以在使用数据压缩***的变换模块、量化模块和/或熵编码模块的部分中处理多种计算操作202-208。例如,参见图1中框架100的多个模块。因此,可以执行操作202-208,以压缩/解压缩数据。可选地,可以使用小波变换、离散余弦变换(DCT),和/或任何其它希望的解相关变换来压缩数据。
图3示出了图2的方法200的操作300的示例。尽管现在本发明是在图2的方法200的环境中来描述的,应该注意的是,典型操作300可在任何一种希望的环境中实现。
如图所示,设置了计算操作304的第一栈302,用于在循环306中的处理。当流程通过计算操作304的第一栈302时,可以识别多种异常308。当被识别时,将这种异常308存储到分离的栈中并可以独立地处理。例如,异常308可以在独立的循环310的环境中被处理。
可选的实施例
现在将说明关于在图2的操作环境中可以被执行的这种“堆”处理的多种可选特征的更多信息。在本说明的环境下,“堆”是一种可以被存储在存储器内(即,随机存取存储器)的连续存储对象。堆可用于被顺序地写入并随后从起始被顺序地读取。对于堆对象定义了多种方法。
对于堆和要在并行处理环境种实现的其方法,其实现可以是几个内嵌(即,没有返回子程序的分支)代码的指令。该内嵌代码还可以不包含分支指令。将在以下描述这种方法实现。这种实现可以使堆特别地具有优点。
表1示出了根据一个实施例的可实现堆处理的各种操作。
表1
1)由“Creat_Pile(P)”方法来建立堆。这分配了存储器并初始化内部状态变量。
2)写入堆的基本方法是“Conditional_Append(pile,condition,record)”。如果条件是真,该方法将记录附在堆中。
3)当已经完整地写了一个堆,准备由“Rewind_Pile(P)”方法读取。这调整内部变量,以便从被写入的第一记录开始读取。
4)方法“EOF(P)”产生布尔值,指示了是否已经读取了堆的所有记录。
5)方法“Pile_Read(P,Record)”从堆P中读取下一个连续记录。
6)方法“Destroy_Pile(P)”通过重新分配(deallocating)所有的状态变量来破坏堆P。
使用堆来分离条件处理
因此,可以通过堆P将程序D’(见背景部分)转换为以下程序E’。
程序E’
Creat_Pile(P) For n=0:4:255,{S1(n);S1(n+1);S1(n+2);S1(n+3); S2(n);S2(n+1);S2(n+2);S2(n+3); S3(n);S3(n+1);S3(n+2);S3(n+3); S4(n);S4(n+1);S4(n+2);S4(n+3); S5(n);S5(n+1);S5(n+2);S5(n+3); Conditional_Append(P,C(n),I(n)); Conditional_Append(P,C(n+1),I(n+1)); Conditional_Append(P,C(n+2),I(n+2)); Conditional_Append(P,C(n+3),I(n+3)); }; Rewind_Pile(P); While not EOF(P){ Pile_Read(P,I); T(I); }; Destroy_Pile(P);
程序E’通过在堆P中保存异常计算T所需的信息I来操作。写入与异常条件C(n)相对应的记录I,以使P中记录I的数目(例如,16)少于在原始程序A中的循环轮的数目(例如,256)(参见背景部分)。
之后,独立的“while”循环读取执行所有异常计算T的堆P。因为P只包含在C(n)是真的情况下的记录I,只处理这些情况。
尽管在此例子中数目平均是16,因为第二循环轮的数目是不确定的,因此第二循环可能比第一循环更困难。所以,可以使用“while”循环而不是“for”循环,当文件末端(EOF)方法指示已经从堆中读取了所有记录时,终止循环。
如上和下文所述,可以内嵌且无分支地实现“Conditional_Append”方法调用。这意味着仍然以有效的方式展开第一循环,同时具有很少的无价值发布机会。
展开第二循环
没有展开上述程序E’中的第二循环,因此该程序仍是低效率。然而,可通过四个堆P1、P2、P3、P4将程序E’转换为下面的程序F’。其结果是程序F’同时具有展开的循环和伴随的效率提高。
程序F’
Creat_Pile(P1);Creat_Pile(P2);Creat_Pile(P3);Creat_Pile(P4); for n=0:4:255,{S1(n);S1(n+1);S1(n+2);S1(n+3); S2(n);S2(n+1);S2(n+2);S2(n+3); S3(n);S3(n+1);S3(n+2);S3(n+3); S4(n);S4(n+1);S4(n+2);S4(n+3); S5(n);S5(n+1);S5(n+2);S5(n+3); Conditional_Append(P1,C(n),I(n)); Conditional_Append(P2,C(n+1),I(n+1)); Conditional_Append(P3,C(n+2),I(n+2)); Conditional_Append(P4,C(n+3),I(n+3)); }; Rewind_Pile(P1);Rewind_Pile(P2);Rewind_Pile(P3); Rewind_Pile(P4); While not EOF(Pi){ Pile_Read(P1,I1);Pile_Read(P2,I2);Pile_Read(P3, I3);Pile_Read(P4,I4); guard(not EOF(P1),S);T(I1); guard(not EOF(P2),S);T(I2); guard(not EOF(P3),S);T(I3); guard(not EOF(P4),S);T(I4); ); Destroy_Pile(P1);Destroy_Pile(P2);Destroy_Pile(P3); <!-- SIPO <DP n="15"> --> <dp n="d15"/> Destroy_Pile(P4);
程序F’是具有第二展开循环的程序E’。通过将程序E’的单个堆划分成四个堆来实现此展开,能够独立于其它堆来处理每一个堆。程序F’的第二循环的每一轮处理来自这四堆中每一个的一个记录。由于独立地处理每一个记录,每一个T的操作能够与其它三个T的操作相交错。
可以修改“while”循环的控制,使之进行循环,直到已经处理了所有堆。此外,可以保护在“while”循环体内的T’,因为通常不必在同一循环轮中完成所有的堆。只要两个堆的记录数目彼此区别很大,效率可能会低一些,但是,从概率(即,大数定律)上讲,所述堆可以包含相似数目的记录。
当然,可以递归地应用该堆技术。如果T本身包含一个过长的条件语句T’,可将T’从具有一些附加堆的第二循环中分离出来,并展开第三循环。许多实际应用具有多个这种嵌套的异常语句。
实现堆处理
可以保持该堆对象的实现及其方法的简单,以便满足上述的实施准则。例如,除了Creat_Pile和Destroy_Pile,此方法实现可能只有少量的内嵌码的指令。此外,所述实现不包含分支指令。
在其核心部分,堆可包括存储器(即,RAM)中的已分配线性数组和指针,其当前值是下一个要读或写的记录的位置索引。数组的写大小sz是一个指针,其数值是在堆的写入期间的索引的最大值。EOF方法可以作为内嵌条件(sz≤index)来实现。指针的基值是指向堆中第一写入位置的数值。可由Creat_Pile方法来设置。
Conditional_Append方法将记录复制到从索引的数值开始的堆数组中。然后,将索引增加零或记录的大小(sz_record)的计算量。由于参数条件具有对于真是1,对于假是0的数值,能够如下计算此索引而不使用分支:index=index+condition*sz_record。
当然,此计算存在许多不同的变体,许多变体不涉及变量的给定特定数值的相乘。还可以利用以下保护来计算:
guard(condition,index=index+sz_record)。
应当注意的是,可以将记录复制到堆中而与条件无关。如果条件是假,该记录可能被下一个记录重写。如果此条件是真,在当前记录之后写下一个记录。下一记录可能会或不会被其之后的记录重写。结果,通常最优的是尽可能少的写入堆中,既使这意味着当读取和处理记录时会重新计算(即,冗余)某些数据。
Rewind方法可以简单地通过sz=index;index=base来实现。该操作记录针对EOF方法写入的数据量,然后,将索引复位到起始。
Pile_Read方法将堆的下一部分(长度为sz_record)复制到I,然后如下增加索引:index=index+sz_record。Destroy_Pile重新分配该堆的存储。可以在几个内嵌指令且无分支地实现所有这些技术(除Create_Pile和Destroy_Pile)。
利用字段分区编程
在很大但“else”很少的语句的情况下,保护处理的另一种选择是堆处理。当每一个示例开始时,“else”语句将输入数据传送到可寻址存储器(即,高速缓冲存储器或RAM)中的堆中。在一种环境中,堆如同附在输入数据的文件进行操作。这通过写入存储器中由指针给定的地址来实现。然后,在文件处理中,将指针增加所写入数据的大小,以使下一个写入的数据被附到前一个已完成的数据上。在堆处理中,可以有保护条件地进行指针的增加。如果保护为真,则可以将下一个写入的数据附在前一个已完成数据上。如果保护为假,则指针不会被增加并且下一个写入将覆盖前一个已完成的数据。在保护很少是真的情况下,堆较短,具有“else”操作的堆的后续处理会花费与真保护的数目(即,if条件假)不是示例的总数成比例的时间。此折衷是“else”语句的操作与增加写入和读取的额外开销的节省。
许多处理器具有能够在一个字的分离的字段分区中独立且并行地执行各种算术和逻辑运算的特定指令。当前的说明涉及在每一个字段分区中处理“一次一个位(bit-at-a-time)”的方法。作为运行的示例,考虑包括具有四个8位字段分区的32位字的示例。选择字段分区的8位,使其在字中连续,因此能够在单个字段分区中执行“加法”并且“携带(carry)”传播(propagate)。普通的可用算术字段分区指令禁止从一个字段分区的最高有效位(MSB)到下一个最高有效字段分区的最低有效位(LSB)的携带。
例如,假设所有长度都等于B,一个字长度的除数。此外,字段分区可以专用于算法的独立实例。以下是利用每一个指令同时处理一个字的所有字段分区的一些技术和代码序列。这些技术和代码序列使用表2的技术来避免控制的变化。
表2
A)用逻辑/算术计算代替控制的变化。例如,
if(a<0)thyn c=b else c=d
可以被替换为
c=(a<0?b:d)
然后可以被替换为
c=b*(a<0)+d*(1-(a<0))
B)使用逻辑值来有条件地抑制可变数值的替换
if(a<0)then c=b
变为
c=b*(a<0)+c*(1-(a<0))
处理器通常配备有实现该技术的保护指令。
C)使用逻辑指令来施加条件
b*(a<0)
成为
b&(a<0?0xffff:0x0000)(示例字段是16位,并且常数是十六进制)
D)将逻辑值应用到存储地址和数组下标的计算。这包括聚堆(piling)技术,该技术有条件地抑制一个被顺序写入的数组索引的增加。例如:
if(a<0)then{c[i]=b;i++}
变为
c[i]=b;i+=(a<0)
在这种情况下,两段代码并不完全等同。数组c可能在结尾处需要额外的保护索引。通过检查i的最终值,用户知道是否丢弃c中最后的值。
增加/移位
具有分区算术的处理器经常具有在每一个字段独立执行的ADD指令。这些处理器中的某些具有其它类型的逐字段指令(例如,向右移位的分区右移算术不会从一个字段移到另一个,并且不会将该字段的MSB(符号位)复制到刚刚空出的MSB)。
比较和字段掩蔽(mask)
一些处理器具有逐字段比较指令,产生多个条件位。如果没有,通常使用分区的减法指令来用于此功能。在这种情况下,计算a<b,作为a-b,其中减号表示真,加号表示假。字段的其它位是不相关的。利用具有足够长移位的算术右移,对于真是全1或对于假是全0的字段掩蔽,与表2的C)中示例使用的相同。这导致两个指令中的多字段比较。
如果分区的算术右移是可用的,利用在当代所有处理器上的四个指令,能够根据符号位来创建字段掩蔽。这些如表3所示。
表3
1.通过u=u&0x8000将不相关位设为零
2.移到字段的LSB v=u>>15(用于16位字段的逻辑右移)
3.使字段掩蔽w=(u-v)|u
4.由x+0x7fff执行在正字段x内的分区的零检测,因此,当且仅当x是零时,符号位是零。如果此字段有符号,使用x|x+0x7fff。将符号位转换为如上所述的字段掩蔽。
当然,可以通过将字段的字的总体(没有分区的)与零进行比较来测试单一指令中所有字段是零的条件。
表述(representation)
定义一些常数是有用的。将每一个字段分区的MSB位置中除了“1”的零字称为MSB。将每一个字段分区的LSB位置中除了“1”的零字称为LSB。在位分区中的比特数是B。除非另外说明,所有字都是无符号(Uint),并且所有右移是其中在左边填零的逻辑右移。
多比特字段分区中的单一信息能够按照许多不同的方式表示。掩蔽表达使给定字段分区的所有位彼此相等并且等于信息位。当然,信息位可以从字中的字段分区变化为另一个。
另一个有用的表述是MSB表述。信息位被存储在对应字段分区的MSB位置上并且字段分区位的剩余部分是零。类似地,LSB表述具有LSB位置上的信息位,且所有其它位是零。
另一个有用的表述是ZNZ表述,其中在字段分区中的每一个位,由零来表示零信息位,否则信息位为“1”。所有掩蔽、MSB和LSB表述都是ZNZ表述,但反之则不必要。
转换
表述之间的转换需要一个到几个字长的指令,但是这些指令同时处理所有的字段分区。
MSB->LSB
例如,通过使用字逻辑右移指令y=((Uint)x>>B),能够将MSB表述x转换为LSB表述y。通过使用字逻辑左移指令y=((Unit)<<x),能够将LSB表述x转换为MSB表述y。
掩蔽->LSB
通过清除非MSB位能够掩蔽表述m转换为MSB表述。在大多数处理器中,在单个“andnot”指令(m∧~MSB)中,可以将一个字的所有字段分区从从掩蔽变换到MSB。同样,通过单个“andnot”指令(m∧~MSB),可以将掩蔽表述转换为LSB表述。
MSB->掩蔽
利用字长度指令,利用以下过程可以实现从MSB表述x到掩蔽表述z的转换。见表4。
表4
1.将MSB表述x转换为LSB表述y。
2.从字x减去字y得到v。这是除了作为零的MSB的掩蔽。
3.字v OR字x得到掩蔽结果z。总过程是z=(x-(x>>B))vx。
ZNZ->MSB
如下可以将字的所有字段分区从ZNZ x转换到MSB y。可以使用字加法指令来在MSB位置将ZNZ字加零位,而在其它位置加“1”。加法的结果可使在MSB位置具有适当的位,而其它位位置具有任意位。这可以通过应用“andnot”指令来清除非-MSB位来补救。y=(x+~msb)∧~MSB。
其它
从如上所述的MSB表述能够得到其它表述。
位输出
在一些应用程序中(例如,熵编解码器),可能希望通过将给定位逐一地附在位流的末端来形成位流。当前的说明将阐述如何按照字段分区并行的方式完成此功能。字段分区和有关的位流可以独立彼此,每一个代表一个并行的实例。
此过程按照以下表5所述工作。
表5
1.以掩蔽表述提供输入位和有效条件。
2.有条件地(即,条件是有效真)添附信息位,直到填满字段分区。
3.当填满字段分区时,将其添附在对应字段分区流的末端。通常,该字段分区的长度全部相等并且是字长度的除数。
还没有完全填满的独立字段分组被保存在被称为累加器的单字内。存在相关的位指针字,其中该字的每一个字段分区包含一个“1”位(即,其余为零)。该“1”位位于与累加器内接收用于该字段分区的下一个添附位相对应的位位置。如果累加器的字段分区已被完全填满,将字段分区添附到对应的字段分区流并将累加器字段分区复位为零。
信息位输出
(有条件地)添附输入的信息位是灵活的。将输入位掩蔽、有效掩蔽和位指针逐字地″相加″在一起,然后逐字地与累加器″相与″。在大多数处理器上,这需要3个指令执行每字。
位指针更新
假设将位添附在位流的LSB末端,字段分区的LSB中的非更新位指针位指示填满了该字段分区。在任何情况下,此位指针字可通过将每一个有效字段分区的位指针向右旋转一个位置而被更新。下面的表6中是用于实现此操作的方法。
表6
a)将位指针分离为LSB位和非LSB位。(2字AND指令)
b)将非LSB位字逻辑右移一位。(1字SHIFT指令)
c)将非LSB位字字逻辑左移到MSB位置。(1字SHIFT指令)
d)字OR b)和c)的结果。(1字OR指令)
e)逐位多路复用d)的结果和原始的位指针。使用有效掩蔽来控制多路复用(在大多数的处理器上,1个XOR,2个AND,和1个OR字指令)
累加器已填满
如上所述,如果位指针p的相应字段分区在LSB分区是“1”,则字段分区被填满。由只有位指针p非零的LSB位的字来指示累加器填满的任意字段分区。f=(p∧LSB);full=(f≠0)
通常,被填满的可能性明显小于0.5,因此聚堆(piling)的应用程序是适当的。使用填满作为条件,将累加器a和f聚成堆A1。堆A1的长度可明显小于添附操作的位数目。设计聚堆,以使除了那些整个处理循环的变化,处理不必涉及到控制流程的变化。
之后,通过循环A1中的项来处理堆A1。对于A1中的每一项,按顺序扫描字段分区。每字的字段分区的数目较小,因此通过没有控制变化的直线编码来执行该序列。
可以希望平均来说,字内只有一个字段分区被填满。所以,应该使用(对堆A2)另一个聚堆的应用程序。使用对应的f字段分区作为堆写入条件,将字段分区a和a2的每一个与对应字段分区索引i一起,聚堆到A2。最后,A2只包含那些已填满的字段分区。
之后,通过A2中项的循环来处理堆A2。索引I用于选择应当添附对应a2的位流数组。文件分区的位大小,B,通常被选择为方便的二的幂(例如,8或16位)。存储用于8或16位数值的指令使这些长度变得便利。在上述处理中,除基本循环以外的控制变化不是必需的。
位字段扫描
编解码器所需的共同操作是在字的字段中顺序读取位。由bit_pointer指定从字段x提取的位,bit_pointer是除了单个“1”位其余为零的字段值(例如,0x0200)。将“1”位与被提取的位对准,以便根据所读取位的数值来使x&bit_pointer是零或非零。如上所述,可以将此转换为字段掩蔽。该序列中每一个指令可以同时处理在一个字内的所有字段。
通过沿适当方向移动bit_pointer并重复直到适当的终止条件来完成顺序扫描。由于不是所有字段都可以在同一位位置终止,可以修改上述过程,以便被终止的字段没有产生输出同时未终止的字段产生输出。这通过产生有效字段掩蔽来完成,如果未终止字段,掩蔽全是“1”,或如果字段已被终止则全是“0”。该有效字段掩蔽用作输出条件。持续实际的扫描,直到终止了所有区间,这由全零字的有效来指示。
终止条件通常是bit_pointer中的位,所述bit_pointer到达了由terminal_bit_pointer的字段中“1”位指示的位置。这可以由bit_pointer&terminal_bit_pointer中的“1”位指示。如上所述,这些字段可被转换成有效字段掩蔽。
尽管本说明看起来依赖于顺序并且对于所扫描的每一个位位置都有控制流程变化,可以展开循环以使所需的实际计算时间最少。在位字段扫描的实际应用中,所有字段均具有相同的位数,导致对于所有字段的循环终止条件都相同。
字段分区的一致子区间
如果希望将字w的每个字段分区的位位置c:d添附到相应位流上,可以使每一个字段分区的位位置c中的常数c是只有一个“1”的零字。同样,使每一个字段分区的位位置d中的常数d是只有一个“1”的零字。此外,可执行以下操作。参见表7。
表7
A)初始化bit_pointer q到c q=c;
A1)初始化COND,使之为全真
B)逐字bitand q和w u=q∧w
u是ZNZ表述
C)将u从ZNZ表述转换到掩蔽表述v
D)如上所述,现在可以位流输出v。使用全真的COND。
E)如果cond(q==d)则处理完成;否则逐字地逻辑右移q一位(q>>1)循环回到步骤B)
对于熵编解码器应用,(d-c)的平均值经常是相当小的。操作E)中的测试可与操作B)一起开始,其中延迟到操作E)和操作B)-D)分支是可用的,以覆盖分支流水线的延迟。此外,由于子字段是一致的,展开多个字的处理来覆盖用于字段分区的单个字的指令中的顺序依赖性比较容易。
字段分区的非一致子区间
在字段分区c和d的区间不同的情况下,c和d保持如上所述,但是上述的测试操作E)会因区域的不同变化,而不是所有字节中的区域都一样。在这种情况下,可能希望停止已完成字段分区的扫描输出,直到所有的区间都已经完成。可能需要用表8中的以下方式来修改上述过程。
表8
1)步骤D)需要其中对于已完成的字段分区是假,对于未完成的字段分区是真的条件。这通过添附将cond字与COND“andnot”的操作到操作E)上来完成。COND=(COND∧~cond)
2)需要将步骤E)中if条件修改为循环返回B),除非COND是全假。
因此,操作变成:
A)初始化bit_pointer q到c q=c;
A1)初始化COND,使之为全真
B)逐字地bitand q和w u=q∧w
u使用ZNZ表述
C)将u从ZNZ表述变换到掩蔽表述v
D)如上所述,v现在可以被位流输出。使用为全真的COND。
E1)cond(q==d);COND=(COND∧~cond);
E2)如果COND==0处理已完成;否则,逐字地逻辑右移q一位(q>>1)循环回到步骤B)
二元到一元位字段倒计数
在熵编程中的一个共同操作是将字段从二元变换到一元,从而对于其数值是n的字段,产生n个一后面跟随一个零的流。在大多数应用中,希望数值n具有均值是1的负指数分布,从而平均来讲,希望除了输出末端的零以外,只有一个“1”。
用于首位为零的正字段的字段分区并行方法如下所述。如上所述,设c是除了在字x的每个字段的MSB位置上有一个“1”的全零常数。设d是除了在字x的每个字段的LSB位置上有一个“1”的全零常数。设diff=c-d。初始化掩蔽到diff。
此程序是倒计数(并行地)所讨论的字段,同时创建最初MSB位置为零的c。如果在减法之后的MSB位置是“1”,则此字段的先前值不是零此外,应该输出“1”。如果在减法之后MSB位置是零,则区间的先前值是零且应该输出零。在任何情况下,MSB位置包含要输出的位,用于字X的对应字段分区。
一旦字段到达零并且输出了第一个零,可以抑制其它零的输出。由于X的不同字段分区具有不同的值并输出不同数目的位,抑制来自具有较小数值的字段分区的输出,直到所有字段数值都到达零。利用输入到位输出过程中的掩蔽来实现该抑制,如先前所描述。一旦已经输出了字段分区的第一个零,掩蔽的对应字段分区变为零,从而抑制进一步的输出。
在对于每一个字段分区的diff是相同的通常情况下,不必将diff变到零。否则,将diff与掩蔽相AND。参见表9。
表9
While mask≠0
X=X+diff
Y=ZNZ_2_mask(c∧X);其中ZNZ_2_mask是如上所述从ZNZ到掩蔽的转换
X=X∧~c
如上所述输出具有掩蔽的Y
mask=mask∧ Y
在典型用于跳转的流水线延迟的情况下,可以根据所估计的轮数的概率分布来决定以上展开上述循环。
对于分区计算最优化循环展开
如果存在以下形式的循环:while c,{s},在第i次迭代运算时,c==true的概率是Pi,计算c和循环跳回的代价是C(c),计算s的代价是C(s)。可以假设,s的额外执行不会影响计算的输出,但是会对每一个代价C(s)有影响。
可以将此循环展开n次,从而此计算变换为s;s;s;…s;whilec,{s},其中在while循环之前有n次s的执行。于是,总的代价如表10所示。
表10
nC(s)+(C(c)+Pn(C(s)+C(c)+Pn+1(…)))=nC(s)+C(c)+(Pn+PnPn+1+…)(C(c)+C(s))≈≈(n-1)α+Un=TC(n,α)
其中,Un=(Pn+PnPn+1+...);
作为例子,可以假设每个字有k个独立的字段,并且P是每个字段循环跳回的概率。然后,Pn=1-(1-Pn)k。
图4示出了根据一个实施例的图解Pn的图表400。图5示出了根据一个实施例的图解Un的图表500。每个图表中的曲线对应于k的数值,而灰线对应k=1)。
图6和7示出了图表600和700,分别指示了当α=0.3和α=0.7时的归一化总代价TC(n,α)。图8是根据一个实施例的图800,指示了最小总代价min(TC(n,α))=
TC(α),(虚线),和此初始循环展开的最优数目
n(α),
示例
在熵编码的应用程序中,输出位是一的概率是0.5,是零的概率是0.5。其还是独立的。利用这些假设,则可以进行以下计算。
给定字段分区要求n或者更少输出位(包括终止零)的概率P(n)是P(n)=(1-0.5-n)。设每个字中字段分区的数目是m。则循环中所要求的轮数是n或更小的概率是(P(n))m=(1-0.5-n)m。图9示出了根据一个实施例的表900,其中包括前述方程中的各种数值。如上所示,循环展开2-4次应该是正常的。
编解码器
在一个实施例中,图1所示的编码部分101和/或解码部分103可以包括可变模数。在本说明的情况下,此模数反映了与编解码器框架100所使用的压缩算法相关联的概率分布曲线的陡度。例如,此模数可以包括概率分布的负指数。
虽然此模数可以作为任何希望参数的函数而变化,在一个实施例中,此模数可以取决于先前一组数据的内容,其中这组数据指正在被编解码器框架100的多个模块处理的位集合。此外,模数可以避免作为运行长度(即,序列中的多个相同位)的函数而增大。
因此,设置了二元/一元(DM)的编解码器框架。将会在以下详细阐明有关其中模数取决于先前一组数据的内容的选择方式、模数可以避免作为运行长度的函数而增大等的更多信息。
图10是计算复杂度对性能水平的图形1000,示出了本二元/一元的编解码器框架和其它算法的关系(即,Huffman,Rice Golomb、算术等)。如图所示,可以设计DM编解码器,以使用提供了预定性能水平的最小计算复杂度。
现在将说明有关在图1的编解码器框架环境中实现的多个可选特征的更多信息。在一个实施例中,通过说明其状态空间和更新函数来指定DM编解码器(参见背景技术部分)。
每一个状态具有五个分量:位置P、context、shift、Aregister和Cregister。如上所述,此模数可以根据先前一组数据而变化。根据满足前述“context”的定义的特定实施例,本context包括在输入字母表上长度为k的位流(总共2k个状态)。每一个Aregister和Cregister可以保存小于1的非负倍数2-n(每一个总共2n个状态)。在<start>和<finish>状态中,Aregister和Cregister的值是零。用于<start>状态的内容值,虽然是任意,但有必要对于编码器和解码器是相同的。<start>状态中的P值是开始,在<finish>状态中是结束。shift值与<start>和<finish>状态无关。
作为更新函数φ的的部分说明,存在一些指定的固定函数。参见表11。
表11
1.函数mps将每个context值映射到输入字母表I中的数值。目的在于在给定context的情况下,mps是概率更大的I中的符号。
2.函数delta将2k个context数值的每一个映射到2-m,其中,0<m≤n。函数delta的目的是量化地捕获下一个符号的数值概率的信息。
可以根据DM的限制来选择这两个函数。这些限制和概率信息一起,可以被用来选择mps和delta,并且在重要的应用程序中,能够实现算法简单化和熵编码效率的有用结合。
在一个实施例中,DM限制如表12中所述。
表12
1)二元限制:
delta(context)=2-m,0<m≤n
其中m和n是整数,需要delta是二的负整数次幂。目的在于delta(context)近似了下一个符号不必是由mps(context)给出的条件概率。1-Prob(a==mps(context)|context)≈delta(context)。
2)一元限制:
(1-delta(context))≤(1-delta(2*contextmod2k)+mps(context)))不等式的右手边近似是假设先前读取的符号还具有最大可能性时,读取最可能符号的概率。该一元限制反映可能的情况,其中最可能的符号不会减少下一个符号是最可能符号的概率。
这两个限制提供了有效的熵编解码器。
图11示出了根据一个实施例的转移表1100,示出了用于编码器和解码器的更新函数。每一行代表一组状态,其中组中的状态都满足所在判定列的每一个条件。每一行形成了可允许状态的一部分。
在识别了用于初始状态的行之后,执行该行右手边部分的动作。所使用的所有数值是处于初始状态的数值,所以,在行中的动作序列不必是发出。新状态的每一个分量可以接收唯一数值。整个空白意味着没有改变此状态的分量。
对于编码器,执行来自列的“公共”组的更新动作和来自列的“编码器”组的更新动作。对于解码器,从列的“公共”和“解码器”组中选择动作。在状态转移表1100的底部,设置了动作的准确定义。
DM条件的效果在于Aregister总是上一个相加的detla的倍数(在F13处)。二元条件保证了delta的二进制的表示准确地具有一个“1”位。一元条件保证了delta不会变大,直到产生了代码符号,因此delta中的位只会保持在相同位置或向右移动。保持这种情况,直到产生代码符号,此时Aregister变为0(准确说是因为只保留了上一个delta右边的Aregister位)。
结果,提供了表13的以下一组特征。
表13
a)A是delta的倍数
b)在写入代码符号后,A是零
c)在写入代码符号后,不需要重新归一化
因为同样的原因,DM编码器中不必使用普通算术编码中所需的Cregister。紧接在产生代码符号后,此context中捕获之前状态序列的整个存储。由于context是之前的k个输入符号,DM编解码器具有短期存储器,因此很快适应输入流的局部统计。
本框架的各种实际应用是存在的。例如,在考虑有效函数(significant function)的环境下;图像、视频和信号处理经常涉及到变换,变换的目的是将此信号“浓缩“,即,产生几个大的系数和多个可以忽略的系数(通过用零代替来丢弃此类系数)。非可忽略系数的识别(或位置)通常与该系数的数值一样重要。通常在“有效函数”中捕获该信息,该函数将非可忽略系数映射为“1”而将可忽略系数映射为“0”。
通过按照适当的顺序对这些系数及其有效位进行列表,可以从其前面的数值准确地预测有效位。如果该顺序列表将此系数根据希望的大小以降序排列,则可以得到以“1”显著开始并以“1”显著结束的有效位流。这种统计信息随着流的进行而改变的流被称为非稳定(non-stationary)。这种流的有效的熵编码需要紧接之前的存储器。该存储器可以被充分扩展,以实现良好的预测准确度,并且持续时间足够短,以允许充分快速的适应。
在编码非稳定运行并根据上述定义的环境中,有效函数中的运行包括子位流,此流中除最后一位之外的所有位具有一个数值而最后一位具有其它数值。下一次运行在前一次运行的最后一位之后立即开始。
按照一般规则,context中的位越多(k越大),则编码率越接近熵值的极限。然而,k越大,实现成本越高。将k的范围充分限制在能够检查每一个k的数值。一旦k被选择,在mps(context)和delta(context)函数中完全捕获用于非稳定运行的DM编解码器的性能。如表14所示,可以从经验数据中近似这些函数。
表14
1)mps(context)=1 if Prob(next symbol=1|context)≥0.5
2)Prob(22*delta(context)|context)=0.5
此过程是收集适于该环境的足够经验数据,用于每一个环境构成直方图。由此,可以近似概率函数。能够直接计算函数mps(context)。此外,函数delta(context)可以通过图14中2)的迭代法解法来计算。
因此,DM编解码器将输入流1∶1映射到编码流,当解码时,已编码流产生原始的输入流。不必产生所有的输出流,作为某些输入流的编码。一些输入流可能被编码为较短的已编码流,许多会被编码为较长的已编码流。关于此输入流的长度相对于输入流被编码为的已编码流,描述各种可能输入流的出现概率是有用的。如果编解码器具有有用的压缩特征,则被编码为较短流的输入流的出现概率远大于被编码为较长流的输入流出现的概率。
不必使用动态概率。对于熵编码应用,有效位流的统计信息能够并且会快速变化。自适应概率表不能跟踪这种变化,即使基于多次运行,该表也只能缓慢变化。所以,DM编码器不一定要使用概率表;而是在最后几位或在单个运行中适应。
具有有效位数据的经验测试指示了只通过有效位流的最后几位来获得context大多数优点。作为context的有效位流的最后几位用于以下一位的概率为条件。
重要的概率量Pcontext=Prob(next input bit=LSB|context)。注意,根据LSB的定义,Pcontext<0.5。被添加用来最小程度表示下一位的熵如表15所示。
表15
entropy=-((-Pcontext)*log2(1-Pcontext)+Pcontext*log2(Pcontext))位
然后,delta(context)=entropy/2,这是因为缩放Aregister以输出此2-1位。如果Pcontext~0.5,则下一位要添加的熵近似如以下表16所示。
表16
-(1-0.5)*log2(1-0.5)+0.5*log2(0.5))~1bit
此外,delta(context)=1/2。如果Pcontext<<0.5,下一位要添加的熵近似如以下表17所示。
表17
(1-Pcontext)
*(-Pcontext)-Pcontextlog2(Pcontext)~Pcontext*log2(1/Pcontext)
此外,delta(context)=Pcontext*log2(1/Pcontext)/2。参见以上表14中的方程2)。
视觉方面
图12示出了根据一个实施例的一种具有色度时间速率损失的压缩数据方法1200。在一个实施例中,在图1所示的变换模块102的环境中以执行逆变换的方式执行此方法1200。然而,应该注意的是,方法1200可以在任何希望的环境中执行。
在操作1202中,根据第一预定速率更新帧的亮度(luma)数据。在操作1204中,根据小于第一预定速率的第二预定速率来更新帧的色度(chroma)。
因此,在数字视频压缩***中,可以对于场景的不同分量,改变时间细节的有效传输速率。例如,可以设置数据流,以便比其它分量更频繁地发送已变换信号的某些分量。在这样的例子中,可以计算视频序列的三维(空间+时间)小波变换,并按照全帧(full frame)速率发送结果的luma系数。
此外,对于色度信息,可以从色度信号中省略一个或多个较高频带,因此降低视频的时间响应速率,即时间细节逼真度。在重构已压缩视频用于观看期间,可以利用近似来填入或对已省略信息进行插值,而不是在没有信息发送时显示“零电平“。对于已省略的空间细节可以按照相同的方式进行。通过保持最近接收到的信息直到接收到新的信息是最简单的实现。更一般地,这通过计算逆小波滤波器,使用零或其它默认值代替已省略的信息,来产生具有正确总体电平并减少了时间细节的平滑变化可以实现。
这种色度速率压缩的具体例子如下:对于色度的分量,可以计算横跨空间变换色度值的两帧(四场)的平均值。这可以利用双Haar小波滤波器对并丢弃所有最低频率的分量来实现。可以只发送平均值。当重构时,可以保持色度的横跨两帧(四场)的接收数值。已发现观众不会注意到此,即使当他们在仔细检查压缩方法缺陷时。
视频压缩处理的下一阶段,即量化,通过将相似数值分组并发送代表数值来丢弃信息。该丢弃细节有关区域确切有多亮或是什么颜色。当发现已变换分量接近于零时,选择零作为所述代表数值(在具体尺度显示无变化)。可以省略发送零并使接收者将零假定为默认值。这通过减少发送的数据量有助于压缩。而且,已知人类视觉敏感度水平在亮度和色度之间是不同的。
所以,通过对于亮度和色度分量应用不同的量化水平并丢弃来自色度的更多信息,能够从以上事实中获益更多。当在时间或3一D变换中进行不同的量化时,效果在于减少了色度中的时间细节和空间细节。在典型情况下,对于普通的视频材料,时间变换导致了远大于高频分量的低频分量。然后,将量化应用到该已变换结果上使较小的数值和零被分为一组,导致将其从已压缩的表述中省略并降低了色度分量的时间分辨率。
图12A示出了根据一个实施例的一种在回放期间具有高质量暂停能力的压缩数据的方法1250。在一个实施例中,此方法1250可以在图1的框架的环境中被执行。然而,应该注意的是,可以在任何希望的环境下执行此方法1250。
在操作1252中,视频数据被压缩。在一个实施例中,数据压缩可以在图1的框架的编码器部分101的环境中执行。当然,这种压缩可以在任何希望的环境中执行。
在操作1254中,暂停信息被***到已压缩数据中。在一个实施例中,暂停信息用于提高回放视频数据的质量。此外,暂停信息可以包括高分辨率帧。暂停信息还可以包括能够用于构造高分辨率帧的数据。
所以,在操作1256中,在其回放期间,当暂停视频数据时,可以使用暂停信息。在本方法中,已压缩数据配备了一组特别用于视频暂停时的额外信息。该额外信息可以包括高质量帧,或者差值信息,当所述差值信息与正常压缩帧结合时,导致了高质量帧。
为了将压缩比特率保持在有用的水平,不需要对于每一帧都包括额外信息,而只用于某些帧。典型地,对于大约每15帧可以有一帧包括额外信息,因此在图像中,在1/2秒的时间间隔内出现一次高质量的暂停操作。这可以通过视频暂停行为的观察来完成。然而,可以包括比这更频繁的额外信息,其代价是比特率。还可以包括更少的额外信息以获得更好的压缩性能,其代价是用户的便利。可以从两帧到60帧或更多的范围中进行折中。
在一个实施例中,额外信息包括视频的完整帧,利用不同参数组(例如,经过量化减少信息)或使用不同的压缩方法(例如,在MPEG流中使用JPEG-2000)压缩所述视频。当压缩原始视频计算这些额外帧,并且在压缩视频的发送或存储中,与正常压缩的视频帧一起进行。
在另一个实施例中,额外信息可以包括用于正常解压缩处理使用的额外信息而不是完整的额外图像。例如,在小波视频压缩器中,额外信息包括在正常压缩中被丢弃但当暂停时用于额外视觉清晰度而被保留的数据滤波带。对于另一实例,额外信息包括来自变换系数的额外信息低阶位和附加系数,来自使用为选定的可暂停帧设置的附加较小量化。
在另一个实施例中,额外信息包括用于不同于正常解压缩过程的解压缩过程所使用的数据,并且不是完整的帧。在解压缩之后,该信息可以与由正常处理解压缩的一个或多个帧结合来产生更细致的静态图像。
现在将给出关于典型基于小波变换的更多信息,可以结合图1和12A中的各种特征来使用。然而,应当高度注意,这种基于小波的变换只是为了举例的目的,而不应该被认为是任何形式的限制。例如,设想图1和12A中的多种特征可以在基于DCT的算法等的环境中实现。
图13示出了根据一个实施例压缩/解压缩数据的方法1300。在一个实施例中,可以在图1的变换模块102中并以逆变换的方式执行方法1300。应该注意,方法1300可以在任何希望的情况下执行。
在操作1302中,接收(即,从存储器中识别、检索等)用于压缩数据的插值公式。在本说明的环境,此数据指能够被压缩的任意数据。此外,插值公式可以包括使用插值的任意公式(即,小波滤波器等)。
在操作1304中,确定插值公式是否需要至少一个数据值,其中所需要的数据值是不可用的。这种数据值可以包括前述数据的任意子集。由于是不可用,所需数据值可以是不存在超出范围等。
之后,执行外推(extrapolation)操作以产生所需的不可用数据值。见操作1306。外推公式可以包括使用外推法的任何公式。通过该方案,增强了数据的压缩。
图14示出了在其上执行方法1300的数据结构1400。如图所示,在变换期间,通过涉及多个数据值1402的插值公式1403来实现“最优拟合”1401。注意图13中方法1300的操作1302。如果确定数据值1402之一不可用(见1404),使用外推公式来产生这种不可用的数据值。参考图15期间,将更详细地说明有关前述技术的实现的更多可选细节。
图15示出了根据一个实施例的压缩/解压缩数据的方法1500。作为选择,方法1500可以在图1的变换模块102中以逆变换的方式被执行。然而,应该注意,方法1500可以在任何希望的情况下执行。
方法1500提供了用于产生小波滤波器对的边缘滤波器。首先,在操作1502,分析小波方案以确定小波滤波器近似的局部导数。接下来,在操作1504,根据小波滤波器特征和可用的采样数目来选择多项式的阶数以用于外推。接下来,使用所选择的多项式阶数,推导用于每一个小波滤波器的外推公式。见操作1506。在操作1508,使用在每一种情况具有可用采样的外推公式来推导特定边缘小波情况。
此外,现在将更详细地说明关于典型外推公式和相关信息的更多可选信息。
JPEG-2000标准1)中指定的变换之一是可逆的5-3变换,如方程#1.1和1.2所示。
方程#1.1和1.2
为了从左面近似Y2n-1,可以在左面拟合四级多项式。利用可用数值来近似2N-1处第二导数一半的负值,得出方程#1.1.R。
方程#1.1.R
当点一是最右点时,方程#1.1.R可用于代替方程#1.1。通过移动和加法来完成所示的乘3。而除3比较麻烦。对于当最右的索引是2N-1的情况,使用方程#1.2计算Y2N-2将不是问题。在最右点的索引是偶数时(即2N),方程#1.1不存在任何问题,但是方程#1.2涉及丢失数值。此处的目的是只使用相关的已计算奇数索引Y1和Y3,从偶数X中减去Y的估计值。能够由线性外推得到索引2N处的所需估计,如上所述。该近似公式在方程#1.2.R中给出。
方程#1.2.R
对应情况应用到左边界处。相似边缘滤波器从右(内部)而不是从左使用所需的外推。在这种情况下,近似滤波器由方程#1.1.L和方程#1.2.L表示。
方程#1.2.L和方程#1.2.L
对于这些关于原始变换的外推边界滤波器,可以获得逆变换滤波器,即,通过反向替换。在余使用正边界滤波器精确相同的环境中,可以使用逆变换滤波器来代替标准滤波器。这种滤波器由方程#2.1.Rinv、2.2.Rinv、2.1.L.inv和2.2.L.inv表示。
方程#2.1.Rinv,2.2.Rinv,2.1.L.inv,2.2.L.inv
因此,一个实施例可以使用重新公式化的5-3滤波器,所述滤波器避免已知技术中的附加步骤,同时保持滤波器的视觉属性。例如,见方程#3.1,3.1R,3.2,3.2L。
方程#3.1,3.1R,3.2,3.2L
Y2N+1=(X2N+1+1/2)-(X2N+1/2) eq 3.1R
在这些公式中,利用1/2的偏移量或偏差来计算特定系数,以便避免以上所述的加法。应该注意,虽然在公式中出现了很多1/2的增加,这些加法在实际计算中无需出现。在方程#3.1和3.1R中,可以看到,1/2的增加彼此抵消,所以无需将其应用到输入数据上。相反,括号(Y0+1/2)中的项等可以被理解为实际计算并作为系数存储的量的名称,并被传递到此小波变换金字塔的下一层。
和正向的情况相同,JPEG-2000逆滤波器能够在以下方程#4.2,4.2L,4.1,4.1R中被重新公式化。
方程#4.2,4.2L,4.1,4.1R
(X2N+1+1/2)=Y2N+1+(X2N+1/2) eq 4.1R
从这里可以看到,逆计算的输入值与方程#3.1~3.2L中正计算所产生项相同,无需精确计算校正的1/2。
按照这种方式,减少了小波变换的计算期间执行的算术操作的总数。
尽管以上已经说明了本发明的各种实施例,需要理解的是,只是作为示例来进行说明而不是限制。因此,优选实施例的范围和广度不应被局限于任一上述典型实施例,而应当只根据随后的权利要求及其等同物来限定。
Claims (49)
1.一种处理异常的方法,包括:
处理循环中的计算操作;
当处理计算操作时识别异常;
当处理计算操作时存贮所述异常;和
独立于循环处理所述异常。
2.如权利要求1所述的方法,其特征是计算操作包括非重要的数值。
3.如权利要求2所述的方法,其特征是所述计算操作包括对多个零值进行计数。
4.如权利要求1所述的方法,其特征是所述计算操作包括剪辑和饱和操作的至少之一。
5.如权利要求1所述的方法,其特征是所述异常包括重要的数值。
6.如权利要求5所述的方法,其特征是此异常包括非零数据。
7.如权利要求1所述的方法,其特征是至少在使用变换模块的部分处理计算操作。
8.如权利要求1所述的方法,其特征是至少在使用量化模块的部分处理计算操作。
9.如权利要求1所述的方法,其特征是至少在使用熵编码模块的部分处理计算操作。
10.如权利要求1所述的方法,其特征是所述存储包括存储处理所述异常所需的数据。
11.如权利要求1所述的方法,其特征是执行所述处理以压缩数据。
12.如权利要求11所述的方法,其特征是所述数据使用解相关变换来压缩。
13.如权利要求11所述的方法,其特征是所述数据使用小波变换来压缩。
14.如权利要求11所述的方法,其特征是所述数据使用离散余弦变换来压缩。
15.一种处理异常的计算机程序产品,包括:
用于在循环中处理计算操作的计算机代码;
用于当处理计算操作时识别异常的计算机代码;
用于当处理计算操作时存储所述异常的计算机代码;和
用于独立于所述循环处理所述异常的计算机代码。
16.一种处理异常的***,包括:
至少从包括以下模块的组中选择的数据压缩模块:变换模块、量化模块和熵编码模块,所述至少一个数据压缩模块适于在循环中处理计算操作,当处理计算操作时识别异常,当处理计算操作时存储所述异常,以及独立于所述循环处理所述异常。
17.一种编码器,包括可变模数。
18.如权利要求17所述的编码器,其特征是所述模数反映与压缩算法相关联的概率分布曲线的陡度。
19.如权利要求18所述的编码器,其特征是所述模数包括概率分布的负指数。
20.如权利要求18所述的编码器,其特征是所述概率分布与编解码器相关联。
21.如权利要求18所述的编码器,其特征是设计所述编解码器,以使用提供了预定性能水平的最小计算复杂度。
22.如权利要求17所述的编码器,其特征是所述模数取决于一组先前数据的上下文。
23.如权利要求17所述的编码器,其特征是所述模数避免了作为运行长度的函数而增大。
24.如权利要求23所述的编码器,其特征是所述运行长度包括在序列中的多个相同位。
25.如权利要求17所述的编码器,其特征是所述编码器包括熵编码器。
26.一种解码器,包括可变模数。
27.如权利要求26所述的解码器,其特征是所述模数反映与压缩算法相关联的概率分布曲线的陡度。
28.如权利要求27所述的解码器,其特征是所述模数包括概率分布的负指数。
29.如权利要求27所述的解码器,其特征是所述概率分布与编解码器相关联。
30.如权利要求27所述的解码器,其特征是设计所述编解码器,以使用提供了预定性能水平的最小计算复杂度。
31.如权利要求26所述的解码器,其特征是所述模数取决于一组先前数据的上下文。
32.如权利要求26所述的解码器,其特征是所述模数避免了作为运行长度的函数而增大。
33.如权利要求32所述的解码器,其特征是所述运行长度包括在序列中的多个相同位。
34.如权利要求26所述的解码器,其特征是所述编码器包括熵编码器。
35.一种使用包括可变模数的编解码器的方法,所述可变模数反映了与压缩算法相关联的概率分布曲线的陡度并且不随运行长度而增大。
36.一种压缩视频数据的方法,包括:
根据第一预定的速率来更新帧的亮度数据;和
根据小于第一预定速率的的第二预定速率来更新帧的色度数据。
37.如权利要求36所述的方法,其特征是省略色度数据的一个或多个频带。
38.如权利要求37所述的方法,其特征是利用滤波器来省略所述一个或多个频带。
39.如权利要求38所述的方法,其特征是所述滤波器包括小波滤波器。
40.如权利要求37所述的方法,其特征是还包括当解压缩视频数据时,对所述色度数据已省略部分进行插值。
41.一种用于压缩视频数据的计算机程序产品,包括:
用于根据第一预定的速率来更新帧的亮度数据的计算机代码;和
用于根据小于第一预定速率的的第二预定速率来更新帧的色度数据的计算机代码。
42.如权利要求41所述的计算机程序产品,其特征是省略色度数据的一个或多个频带。
43.如权利要求42所述的计算机程序产品,其特征是使用滤波器来省略所述一个或多个频带。
44.如权利要求43所述的计算机程序产品,其特征是所述滤波器包括小波滤波器。
45.如权利要求42所述的计算机程序产品,其特征是当解压缩视频数据时,对所述色度数据已省略部分进行插值。
46.一种压缩视频数据的方法,包括:
压缩视频数据;
在已压缩的数据中***暂停信息;和
当在回放期间暂停所述视频数据时,使用所述暂停信息。
47.如权利要求46所述的方法,其特征是所述暂停信息用于提高所回放视频数据的质量。
48.如权利要求47所述的方法,其特征是所述暂停信息包括高分辨率帧。
49.如权利要求47所述的方法,其特征是所述暂停信息包括能够用于构造高分辨率帧的数据。
Applications Claiming Priority (10)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US38525002P | 2002-05-28 | 2002-05-28 | |
US38525302P | 2002-05-28 | 2002-05-28 | |
US38525102P | 2002-05-28 | 2002-05-28 | |
US60/385,250 | 2002-05-28 | ||
US60/385,251 | 2002-05-28 | ||
US60/385,253 | 2002-05-28 | ||
US39049202P | 2002-06-21 | 2002-06-21 | |
US39034502P | 2002-06-21 | 2002-06-21 | |
US60/390,345 | 2002-06-21 | ||
US60/390,492 | 2002-06-21 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN1672147A true CN1672147A (zh) | 2005-09-21 |
CN100390781C CN100390781C (zh) | 2008-05-28 |
Family
ID=29587921
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CNB038177501A Expired - Fee Related CN100390781C (zh) | 2002-05-28 | 2003-05-28 | 用于堆处理并行处理器的***及方法 |
Country Status (5)
Country | Link |
---|---|
EP (1) | EP1527396A4 (zh) |
JP (1) | JP2005527911A (zh) |
CN (1) | CN100390781C (zh) |
AU (1) | AU2003232418A1 (zh) |
WO (1) | WO2003100655A1 (zh) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108228312A (zh) * | 2016-12-12 | 2018-06-29 | 卡巴斯基实验室股份制公司 | 通过解释器执行代码的***和方法 |
CN110494867A (zh) * | 2017-03-23 | 2019-11-22 | 三星电子株式会社 | 用于操作机器学习的电子装置和用于操作机器学习的方法 |
US20210144381A1 (en) * | 2018-05-10 | 2021-05-13 | Sharp Kabushiki Kaisha | Systems and methods for performing binary arithmetic coding in video coding |
US20230024560A1 (en) * | 2018-05-10 | 2023-01-26 | Sharp Kabushiki Kaisha | Systems and methods for performing binary arithmetic coding in video coding |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102013213414A1 (de) * | 2013-07-09 | 2015-01-15 | Robert Bosch Gmbh | Verfahren und Vorrichtung zur Durchführung einer Modellberechnungeines datenbasierten Funktionsmodells |
CN104965461A (zh) * | 2015-07-03 | 2015-10-07 | 武汉华中数控股份有限公司 | 一种可支持触摸的总线式手持单元 |
CN112995637B (zh) * | 2021-03-10 | 2023-02-28 | 湘潭大学 | 一种基于三维离散小波变换的多剖面医学图像压缩方法 |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5909572A (en) * | 1996-12-02 | 1999-06-01 | Compaq Computer Corp. | System and method for conditionally moving an operand from a source register to a destination register |
US5893145A (en) * | 1996-12-02 | 1999-04-06 | Compaq Computer Corp. | System and method for routing operands within partitions of a source register to partitions within a destination register |
CN1335952A (zh) * | 1999-10-29 | 2002-02-13 | 株式会社维新克 | 数据库***和信息配送*** |
JP3613454B2 (ja) * | 1999-11-15 | 2005-01-26 | 日本電気株式会社 | コンパイラ装置、および、コンパイラが格納されたコンピュータ読み取り可能な記録媒体 |
JP4267173B2 (ja) * | 2000-05-01 | 2009-05-27 | トヨタ自動車株式会社 | 異常診断システム |
-
2003
- 2003-05-28 AU AU2003232418A patent/AU2003232418A1/en not_active Abandoned
- 2003-05-28 JP JP2004508038A patent/JP2005527911A/ja active Pending
- 2003-05-28 EP EP03755529A patent/EP1527396A4/en not_active Withdrawn
- 2003-05-28 WO PCT/US2003/016908 patent/WO2003100655A1/en active Application Filing
- 2003-05-28 CN CNB038177501A patent/CN100390781C/zh not_active Expired - Fee Related
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108228312A (zh) * | 2016-12-12 | 2018-06-29 | 卡巴斯基实验室股份制公司 | 通过解释器执行代码的***和方法 |
CN108228312B (zh) * | 2016-12-12 | 2021-11-05 | 卡巴斯基实验室股份制公司 | 通过解释器执行代码的***和方法 |
CN110494867A (zh) * | 2017-03-23 | 2019-11-22 | 三星电子株式会社 | 用于操作机器学习的电子装置和用于操作机器学习的方法 |
CN110494867B (zh) * | 2017-03-23 | 2024-06-07 | 三星电子株式会社 | 用于操作机器学习的电子装置和用于操作机器学习的方法 |
US20210144381A1 (en) * | 2018-05-10 | 2021-05-13 | Sharp Kabushiki Kaisha | Systems and methods for performing binary arithmetic coding in video coding |
US11503299B2 (en) * | 2018-05-10 | 2022-11-15 | Sharp Kabushiki Kaisha | Systems and methods for performing binary arithmetic coding in video coding |
US20230024560A1 (en) * | 2018-05-10 | 2023-01-26 | Sharp Kabushiki Kaisha | Systems and methods for performing binary arithmetic coding in video coding |
Also Published As
Publication number | Publication date |
---|---|
EP1527396A1 (en) | 2005-05-04 |
EP1527396A4 (en) | 2008-03-12 |
AU2003232418A1 (en) | 2003-12-12 |
JP2005527911A (ja) | 2005-09-15 |
CN100390781C (zh) | 2008-05-28 |
WO2003100655A1 (en) | 2003-12-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN1252587C (zh) | 移位分组数据的方法、装置和处理数字音频信号的*** | |
CN1104140C (zh) | 可逆子波变换和嵌入代码流处理 | |
CN1150456C (zh) | 图象编码方法和编码设备 | |
CN1306697A (zh) | 可变长度编码与解码的处理电路和处理方法 | |
CN1156171C (zh) | 提高处理效率的图象声音处理装置 | |
CN1482811A (zh) | 使用可逆子波变换和嵌入代码流进行压缩的方法和装置 | |
CN1178460C (zh) | 图象编码方法和图象编码装置 | |
CN1918602A (zh) | 多模α图像处理 | |
CN1145360C (zh) | 利用与像素块分类信息对应的映射系数的图像编码和解码 | |
CN1268135C (zh) | 编码方法、编码装置和记录媒体、以及解码方法、解码装置和记录媒体 | |
CN1857001A (zh) | 混合视频压缩方法 | |
CN1672133A (zh) | 优化的代码生成 | |
CN1943243A (zh) | 二维信号编码/解码方法和设备 | |
CN1200571C (zh) | 正交变换、逆正交变换方法及装置、编码、解码方法及装置 | |
CN1922890A (zh) | 分段可逆视频编码方法、分段可逆视频译码方法、分段可逆视频编码装置、分段可逆视频译码装置和它们的程序及程序记录媒体 | |
CN1606351A (zh) | 用于数字视频加水印的色彩选择方案 | |
CN1182518A (zh) | 编码装置、译码装置和编码、译码方法以及图象处理装置 | |
CN1672147A (zh) | 用于堆处理并行处理器的***及方法 | |
CN100350433C (zh) | 计算路径误差的方法和提取路径断点的方法 | |
CN1104679C (zh) | 数据处理装置和数据处理方法 | |
CN1245030C (zh) | 数据处理*** | |
CN1663257A (zh) | 小波变换***,方法和计算机程序产品 | |
CN1301457C (zh) | 实现流水方式的并行处理的mp3译码器 | |
CN1310192C (zh) | 对位置内插器进行编码和译码的方法和装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
C17 | Cessation of patent right | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20080528 |