CN101072355B - 一种加权预测运动补偿方法 - Google Patents
一种加权预测运动补偿方法 Download PDFInfo
- Publication number
- CN101072355B CN101072355B CN 200610078900 CN200610078900A CN101072355B CN 101072355 B CN101072355 B CN 101072355B CN 200610078900 CN200610078900 CN 200610078900 CN 200610078900 A CN200610078900 A CN 200610078900A CN 101072355 B CN101072355 B CN 101072355B
- Authority
- CN
- China
- Prior art keywords
- value
- macro block
- frame
- weighted
- motion compensating
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
本发明公开了一种对图像帧进行编码时的加权预测运动补偿方法。该方法包括:1)判断是否本帧中所有宏块都不需要使用加权预测运动补偿;2)如果当前帧相对于前一帧有亮度变化,则分别以两帧中对应位置的宏块为基本单位,以使亮度变化最小为条件计算当前帧各个宏块的加权预测参数α和β,其中α表示对比度的变化,β亮度变化;3)判断是否对当前帧中的所有宏块都使用加权预测运动补偿并且在码流语法中进行标注;4)如果本帧中有部分宏块使用加权预测运动补偿并在帧层标注,5)对每个宏块标识该宏块是否需要亮度补偿;6)宏块级的亮度补偿。
Description
技术领域
本发明涉及数字视频处理方法,特别涉及在视频编解码技术中,对于有亮度变化的图像帧进行编码时的预测运动补偿方法。
背景技术
高效的视频编解码技术是实现高质量、低成本多媒体数据存储和传输的关键。目前常用的编码方法有预测编码、正交变换编码、向量量化编码等等。这些方法都是基于信号处理理论的,通常也称为第一代编码技术。现在比较流行的图像编码国际标准都基于这种编码理论,采用的是基于块匹配的运动补偿、离散余弦变换和量化相结合的编码方法,典型的包括国际标准化组织/国际电工技术委员会第一联合技术组(ISO/IEC JCT1)推出的MPEG-1、MPEG-2和MPEG-4等国际标准,以及国际电信联盟(ITU-T)提出的H.26x系列推荐。这些视频编码标准在工业界得到了广泛应用。
上述的视频编码标准都采用了混合视频编码(Hybrid Video Coding)策略,通常包括:预测、变换、量化和信息熵编码等四个主要模块。预测模块的主要功能是利用已经编码并重建的图像对当前要编码的图像进行预测(帧间预测),或者利用图像中已经编码并重建的图像块(或宏块)对当前要编码的图像块(或宏块)进行预测(帧内预测)。变换模块的主要功能是将输入的图像块变换到另外一个空间,使输入信号的能量尽可能地集中在低频变换系数上,进而降低图像块内元素之间的相关性,有利于压缩。量化模块的主要功能是将变换的系数映射到一个有利于编码的有限元素集上;信息熵编码模块的主要功能是根据统计规律,将量化后的变换系数用变长码表示。
视频解码***包含与视频编码相似的模块,主要通过将输入的码流通过熵解码、反量化、反变换等过程重建解码图像。除了上述模块外,视频编解码***中通常还包含一些辅助的编码工具,这些工具也会对整个***的编码性能(压缩化)做出贡献。
视频编码的大部分编码效率来自于预测模块,基于运动补偿预测的主要功能是消除视频序列在时间上的冗余。视频编码过程就是对视频序列的每一帧图像进行编码的过程。常用的视频编码方法对每一帧图像的编码是以宏块为基本单元进行的。在编码每一帧图像时,又可以分为帧内(I帧)编码、预测(P帧)编码和双向预测(B帧)编码等。一般来说,编码时,I帧、P帧和B帧编码是穿插进行的,比如按照IBBPBBP的顺序。
在视频编码中,运动估计和运动补偿技术是去除帧间冗余的关键技术,该技术的前提是视频中对象的运动是刚性运动,并且没有旋转、缩放和亮度变化。然而在实际应用中,这些前提很难得到满足。对于旋转和缩放等非平移运动可以通过细分编码块的大小来进行近似解决。亮度的变化,例如闪光、渐进渐出等,同样也会影响运动估计和运动补偿的准确性,从而影响视频编码效率。然而已有的编码方法对于亮度的变化,没有给出好的解决办法,从而影响视频编码效率。
在现有技术中,对于亮度均匀变化的序列,如渐进渐出等,通常使用基于帧级的加权预测技术,根据亮度变化情况决定在运动补偿之前是否对所有宏块的预测值进行加权处理,这种方法在H.264/AVC视频编码标准中得到应用,对于亮度变化均匀的视频序列,这种技术能够有效的提高编码效率。但是,对于亮度非均匀变化的视频序列,由于聚焦或者闪光等引起的局部亮度变化视频序列,已有技术不能消除局部亮度变化给编码效率带来的影响。
鉴于已有技术的不足,希望消除这种由于局部亮度变化给编码效率带来的影响,理想情况是对帧级和宏块级联合加权预测,即对有亮度变化的区域使用加权预测,而对没有亮度变化的区域则不使用加权预测。
发明内容
本发明的目的是消除视频序列中局部亮度变化给编码效率带来的影响,提供一种基于帧级和宏块级的加权预测补偿方法。
为了达到上述目的,本发明采用的技术方案如下:
一种加权预测运动补偿方法,包括如下步骤:
1)根据亮度象素值,检测当前帧相对于前一帧的亮度变化情况,如果在该相邻两帧中没有检测到亮度变化,则本帧中所有宏块都不需要使用加权预测运动补偿,直接进行视频编码操作,并且在码流语法中进行标注;
2)如果当前帧相对于前一帧有亮度变化,则分别以两帧中对应位置的宏块为基本单位,以使亮度变化最小为条件计算当前帧各个宏块的加权预测参数α和β,其中α表示对比度的变化,β亮度变化。
3)对各个宏块的α值和β值进行量化和统计,对α和β分别设定一个阈值,并对α值和β值的分布集中程度设定一个分布阈值;如果α值和β值小于所述阈值并且分布集中程度小于所述分布阈值,说明分布比较集中,则对当前帧中的所有宏块都使用加权预测运动补偿并且在码流语法中进行标注,加权预测运动补偿参数m,n分别为各个宏块α和β值的平均值;进行运动估计,执行步骤6);
4)如果大于所述阈值的α值和β值达到设定数量并且分布集中程度大于所述分布阈值,说明分布比较分散,则本帧中有部分宏块使用加权预测运动补偿并在帧层标注,加权预测运动补偿参数m,n为出现频度最高的α和β值;执行步骤5);
5)对每个宏块进行运动估计,搜索到最优匹配位置时,分别计算加权预测运动的绝对差之和(SAD)和非加权预测运动的绝对差之和,如果非加权预测运动的绝对差之和较小,则在宏块层中标识宏块不需要亮度补偿;如果加权预测运动的绝对差之和较小,则在宏块层中标识宏块需要亮度补偿;执行步骤6);
6)宏块级的亮度补偿;对需要加权预测的宏块进行加权预测,得到宏块亮度象素值的最终预测值。
在上述技术方案中,所述α和β值的阈值设置为2-12中任一整数。
所述分布阈值的设置是随着视频帧中宏块数的增大而增大。
所述分布阈值设置为视频帧中宏块数的一半。
在上述技术方案中,其中步骤6)中,加权预测的模型为Y’=(m*Y+16)>>5+n,这里Y表示亮度加权之前的象素值,Y’表示亮度加权之后的象素值,m表示亮度对比度的变化,n表示亮度的变化。
上述方法用于在色差加权模型中,色差分量使用和亮度相同的模型和参数。
与现有技术相比,本发明的优点在于:
对于亮度均匀变化的序列,如渐进渐出等,使用基于帧级的加权预测技术,在运动补偿之前对所有的预测值进行加权处理;而对于由于聚焦或者闪光等引起的局部亮度变化区域可以使用基于宏块级的加权预测技术,从而有效的提高亮度变化场景的视频编码效率。
附图说明
图1表示本发明加权预测运动补偿方法实现流程图
具体实施方式
下面结合附图和具体实施方式对本发明作进一步详细描述:
加权预测运动补偿方法实现主要包括:亮度变化检测,确认当前视频帧是否需要进行加权预测;如果需要加权预测,则计算亮度加权预测参数,并且根据亮度预测参数的方差确认是否所有的宏块都需要加权预测;在视频解码语法流中对需要加权的亮度样本和色差样本进行加以标注;根据加权预测参数计算加权预测样本值。
实施例1
如图1流程图所示,加权预测运动补偿方法具体实现步骤如下:
1)根据亮度象素值,检测当前帧相对于前一帧的亮度变化情况,如果在该相邻两帧中没有检测到亮度变化,则本帧中所有宏块都不需要使用加权预测运动补偿,直接进行视频编码操作,并且在码流语法中进行标注;
2)如果当前帧相对于前一帧有亮度变化,则分别以两帧中对应位置的宏块为基本单位,以使亮度变化最小为条件计算当前帧各个宏块的加权预测参数α和β,其中α表示对比度的变化,β亮度变化;
3)对各个宏块的α值和β值进行量化和统计,对α和β分别设定一个阈值,并设定一个分布阈值来表示α值和β值的集中程度,此处阈值的设定为4,此处分布阈值设定为视频帧中宏块数的一半,例如:如果视频帧中的宏块数为K,则分布阈值设置为K/2。;对所有宏块的加权预测参数计算它们的方差,如果α值和β值大于所述阈值并且方差小于所述分布阈值,说明分布比较集中,则对当前帧中的所有宏块都使用加权预测运动补偿并且在码流语法中进行标注,加权预测运动补偿参数m,n分别为各个宏块α和β值的平均值;进行运动估计,执行步骤6);
4)如果大于所述阈值的α值和β值达到设定数量并且方差大于所述分布阈值,说明分布比较分散,此处设定数量和步骤3中的分布阈值相同,则本帧中有部分宏块使用加权预测运动补偿并在帧层标注,加权预测运动补偿参数m,n为出现频度最高的α和β值;执行步骤5);
5)对每个宏块进行运动估计,搜索到最优匹配位置时,分别计算加权预测运动的绝对差之和(SAD)和非加权预测运动的绝对差之和,如果非加权预测运动的绝对差之和较小,则在宏块层中标识宏块不需要亮度补偿;如果加权预测运动的绝对差之和较小,则在宏块层中标识宏块需要亮度补偿;执行步骤6);
6)宏块级的亮度补偿;对需要加权预测的宏块进行加权预测,得到宏块亮度象素值的最终预测值;加权预测的模型为Y’=(m*Y+16)>>5+n,这里Y表示亮度加权之前的象素值,Y’表示亮度加权之后的象素值,m表示亮度对比度的变化,n表示亮度的变化。
实施例2
本发明的加权预测运动补偿方法,对于色差加权模型,色差分量使用和亮度相同的模型和参数,加权预测的模型为Y’=(m*Y+16)>>5+n,这里Y表示色差加权之前的象素值,Y’表示色差加权之后的象素值,m表示色差对比度的变化,n表示色差的变化,其他步骤同实施例1,只是其中的亮度改为色差。
最后所应说明的是,以上实施例仅用以说明本发明的技术方案而非限制。尽管参照实施例对本发明进行了详细说明,本领域的普通技术人员应当理解,对本发明的技术方案进行修改或者等同替换,都不脱离本发明技术方案的精神和范围,其均应涵盖在本发明的权利要求范围当中。
Claims (10)
1.一种加权预测运动补偿方法,包括如下步骤:
1)根据亮度象素值,检测当前帧相对于前一帧的亮度变化情况,如果在该相邻两帧中没有检测到亮度变化,则本帧中所有宏块都不需要使用加权预测运动补偿,直接进行视频编码操作,并且在码流语法中进行标注;
2)如果当前帧相对于前一帧有亮度变化,则分别以两帧中对应位置的宏块为基本单位,以使亮度变化最小为条件计算当前帧各个宏块的加权预测参数α和β,其中α表示对比度的变化,β表示亮度变化;
3)对各个宏块的α值和β值进行量化和统计,对α和β分别设定一个阈值,并对α值和β值的分布集中程度设定一个分布阈值;如果α值和β值大于所述阈值并且分布集中程度小于所述分布阈值,说明分布比较集中,则对当前帧中的所有宏块都使用加权预测运动补偿并且在码流语法中进行标注,加权预测运动补偿参数m,n分别为各个宏块α和β值的平均值;进行运动估计,执行步骤6);
4)如果大于所述阈值的α值和β值达到设定数量并且分布集中程度大于所述分布阈值,说明分布比较分散,则本帧中有部分宏块使用加权预测运动补偿并在帧层标注,加权预测运动补偿参数m,n为出现频度最高的α和β值;执行步骤5);
5)对每个宏块进行运动估计,搜索到最优匹配位置时,分别计算加权预测运动的绝对差之和(SAD)和非加权预测运动的绝对差之和,如果非加权预测运动的绝对差之和较小,则在宏块层中标识宏块不需要亮度补偿;如果加权预测运动的绝对差之和较小,则在宏块层中标识宏块需要亮度补偿;执行步骤6);
6)宏块级的亮度补偿:对需要加权预测的宏块进行加权预测,得到宏块亮度象素值的最终预测值。
2.根据权利要求1所述加权预测运动补偿方法,其特征在于,所述步骤6)中,加权预测的模型为Y’=(m*Y+16)>>5+n,其中Y表示亮度加权之前的象素值,Y’表示亮度加权之后的象素值,加权预测运动补偿参数m表示亮度对比度的变化,n表示亮度的变化。
3.根据权利要求1所述加权预测运动补偿方法,其特征在于,所述步骤3)中,所述α和β值的阈值设置为2-12中任一整数。
4.根据权利要求1所述加权预测运动补偿方法,其特征在于,所述步骤3)中,所述分布阈值的设置是随着视频帧中宏块数的增大而增大。
5.根据权利要求1所述加权预测运动补偿方法,其特征在于,所述步骤3)中,所述分布阈值设置为视频帧中宏块数的一半。
6.一种加权预测运动补偿方法,包括如下步骤:
1)根据色差象素值,检测当前帧相对于前一帧的色差变化情况,如果在该相邻两帧中没有检测到色差变化,则本帧中所有宏块都不需要使用加权预测运动补偿,直接进行视频编码操作,并且在码流语法中进行标注;
2)如果当前帧相对于前一帧有色差变化,则分别以两帧中对应位置的宏块为基本单位,以使色差变化最小为条件计算当前帧各个宏块的加权预测参数α和β,其中α表示对比度的变化,β表示色差变化;
3)对各个宏块的α值和β值进行量化和统计,对α和β分别设定一个阈值,并对α值和β值的分布集中程度设定一个分布阈值;如果α值和β值大于所述阈值并且分布集中程度小于所述分布阈值,说明分布比较集中,则对当前帧中的所有宏块都使用加权预测运动补偿并且在码流语法中进行标注,加权预测运动补偿参数m,n分别为各个宏块α和β值的平均值;进行运动估计,执行步骤6);
4)如果大于所述阈值的α值和β值达到设定数量并且分布集中程度大于所述分布阈值,说明分布比较分散,则本帧中有部分宏块使用加权预测运动补偿并在帧层标注,加权预测运动补偿参数m,n为出现频度最高的α和β值;执行步骤5);
5)对每个宏块进行运动估计,搜索到最优匹配位置时,分别计算加权预测运动的绝对差之和(SAD)和非加权预测运动的绝对差之和,如果非加权预测运动的绝对差之和较小,则在宏块层中标识宏块不需要色差补偿;如果加权预测运动的绝对差之和较小,则在宏块层中标识宏块需要色差补偿;执行步骤6);
6)宏块级的色差补偿:对需要加权预测的宏块进行加权预测,得到宏块色差象素值的最终预测值。
7.根据权利要求6所述加权预测运动补偿方法,其特征在于,所述步骤6)中,加权预测的模型为Y’=(m*Y+16)>>5+n,其中Y表示色差加权之前的象素值,Y’表示色差加权之后的象素值,m表示色差对比度的变化,n表示色差的变化。
8.根据权利要求6所述加权预测运动补偿方法,其特征在于,所述步骤3)中,所述α和β值的阈值设置为2-12中任一整数。
9.根据权利要求6所述加权预测运动补偿方法,其特征在于,所述步骤3)中,所述分布阈值的设置是随着视频帧中宏块数的增大而增大。
10.根据权利要求6所述加权预测运动补偿方法,其特征在于,所述步骤3)中,所述分布阈值设置为视频帧中宏块数的一半。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN 200610078900 CN101072355B (zh) | 2006-05-12 | 2006-05-12 | 一种加权预测运动补偿方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN 200610078900 CN101072355B (zh) | 2006-05-12 | 2006-05-12 | 一种加权预测运动补偿方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN101072355A CN101072355A (zh) | 2007-11-14 |
CN101072355B true CN101072355B (zh) | 2010-07-28 |
Family
ID=38899305
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN 200610078900 Expired - Fee Related CN101072355B (zh) | 2006-05-12 | 2006-05-12 | 一种加权预测运动补偿方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN101072355B (zh) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101216941B (zh) * | 2008-01-17 | 2010-04-21 | 上海交通大学 | 剧烈光照变化下基于角点匹配与光流法的运动估计方法 |
EP2315447A1 (en) * | 2008-08-21 | 2011-04-27 | Panasonic Corporation | Motion detection device |
SG11201400294SA (en) * | 2011-10-17 | 2014-09-26 | Toshiba Kk | Encoding device, decoding device, encoding method, and decoding method |
CN103581690A (zh) * | 2012-08-09 | 2014-02-12 | 联发科技(新加坡)私人有限公司 | 视频译码方法、视频译码器、视频编码方法和视频编码器 |
MX2023009739A (es) * | 2021-02-22 | 2023-08-30 | Guangdong Oppo Mobile Telecommunications Corp Ltd | Metodo de compensacion de iluminacion, codificador, decodificador y medio de almacenamiento. |
CN113422959A (zh) * | 2021-05-31 | 2021-09-21 | 浙江智慧视频安防创新中心有限公司 | 视频编解码的方法、装置、电子设备及存储介质 |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1669323A (zh) * | 2002-07-15 | 2005-09-14 | 汤姆森特许公司 | 视频编码中基准画面的自适应加权 |
-
2006
- 2006-05-12 CN CN 200610078900 patent/CN101072355B/zh not_active Expired - Fee Related
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1669323A (zh) * | 2002-07-15 | 2005-09-14 | 汤姆森特许公司 | 视频编码中基准画面的自适应加权 |
Non-Patent Citations (5)
Title |
---|
DEBING LIU.et al..Linear Transform Based Motion Compensated PredictionforLuminance Intensity Changes.PROCEEDINGS OF THE IEEE INTERNATIONAL SYMPOSIUM ON CIRCUITS AND SYSTEMS.2005,304-307. * |
JP特开2000-299864A 2000.10.24 |
PENG Y.et al..Localized weighted prediction for video coding.PROCEEDINGS OF THE IEEE INTERNATIONAL SYMPOSIUM ON CIRCUITS AND SYSTEMS5.2005,54365-4368. * |
马杜祥 等.基于熵准则的可变大小块匹配双向运动补偿.计算机应用25 9.2005,25(9),2117-2119. |
马杜祥等.基于熵准则的可变大小块匹配双向运动补偿.计算机应用25 9.2005,25(9),2117-2119. * |
Also Published As
Publication number | Publication date |
---|---|
CN101072355A (zh) | 2007-11-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN101072356B (zh) | 一种运动矢量预测方法 | |
CN1212017C (zh) | 转换视频数据流的方法 | |
CN101150719B (zh) | 并行视频编码的方法及装置 | |
CN101411196B (zh) | 用于对与视频压缩相关联的信息进行编码及解码的方法及设备 | |
CN101946515B (zh) | Cabac译码器的二回合量化 | |
CN101098473B (zh) | 一种图像编码方法及装置 | |
CN100593955C (zh) | 用于以帧间或帧内模式编码视频图像的方法和设备 | |
US8090025B2 (en) | Moving-picture coding apparatus, method and program, and moving-picture decoding apparatus, method and program | |
KR100643819B1 (ko) | 페이딩 보정을 위한 파라미터화 | |
KR101200535B1 (ko) | 매크로블록 기반의 조명 변화에 대한 적응적 움직임예측/보상 장치 및 방법 | |
CN104639948A (zh) | 用于视频编码及解码的环内自适应维纳滤波器 | |
CN105359531A (zh) | 针对屏幕内容编码的编码器侧判定 | |
CN101854545A (zh) | 用于视频编码器中的帧内预测的方法和设备 | |
CN1589576A (zh) | 使用较大像素格栅运动补偿的降低复杂性视频解码 | |
CN1525762A (zh) | 一种用于视频编码的编码端/解码端双向预测方法 | |
CN102057680A (zh) | 运动图像编码/解码方法和装置 | |
CN101198051A (zh) | 基于h.264的熵解码器的实现方法及装置 | |
CN101072355B (zh) | 一种加权预测运动补偿方法 | |
CN1902939A (zh) | 数字画面序列的编码方法和解码方法以及编码设备 | |
CN1825976A (zh) | 译码数字影像序列的方法及装置 | |
US20070133689A1 (en) | Low-cost motion estimation apparatus and method thereof | |
CN102696226A (zh) | 复用码流信息的h264转码方法 | |
CN101742301A (zh) | 一种块模式编码方法及装置 | |
CN1457196A (zh) | 基于时空域相关性运动矢量预测的视频编码方法 | |
Wang et al. | Performance analysis of hardware oriented algorithm modifications in H. 264 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20100728 Termination date: 20200512 |