WO2016004667A1

WO2016004667A1 - 增强视频图像光滑度及清晰度的超分辨率重构方法

Info

Publication number: WO2016004667A1
Application number: PCT/CN2014/084447
Authority: WO
Inventors: 胡厚亮; 李�浩; 朱立伟
Original assignee: 深圳市华星光电技术有限公司
Priority date: 2014-07-10
Filing date: 2014-08-15
Publication date: 2016-01-14
Also published as: CN104063875B; CN104063875A

Abstract

提供一种增强视频图像光滑度及清晰度的超分辨率重构方法，包括：步骤1：提供一原始图像，包括数个阵列排布的原图像素点；步骤2：利用Canny_H方式对所述原始图像进行边缘侦测，并考虑4*4区域图像范围的像素边缘信息；步骤3：将边缘像素进行2*2倍插值放大，并根据得出的像素边缘信息判定该区域图像类型为纯色实体区或非纯色实体区；步骤4：对纯色实体区、非纯色实体区分别进行条件插值；步骤5：得到像素2*2倍插值放大后的超分辨率图像。在纯色实体区，采用4*4的边缘信息按照规则进行插值，以保持纯色实体区的边界清晰度，同时可以在有锯齿的地方降低锯齿；在非纯色实体区进行BiCubic_H方式插值，进而增强图像光滑度和清晰度。

Description

增强视频图像光滑度及清晰度的超分辨率重构方法

技术领域

本发明涉及液晶显示技术领域，尤其涉及一种增强视频图像光滑度及清晰度的超分辨率重构方法。背景技术

随着消费者日益增长的市场需求，特别在高端显示领域，需要更加高端的显示设备。从最初的 480P显像管电视机到后来的 720P、 FHD、 2K、 4Κ和 8Κ等分辨率的显示设备，显示分辨率以及显示设备的尺寸是在逐步提升的。

4Κ2Κ, 即高解析度面板，简单来说就是比传统全高清（Full High Definition, FHD) 的解析度还高四倍的新时代显示格式，又称为 "超高解析电视（Quad Full High Definition, QFHD) "。 4K2K的解析度为 RGB4096 X 2048或 3840 X 2160，而全高清电视解析度为 1920 X 1080， 4K2K相当于 4倍全高清规格； 4K2K采用氧化物薄膜电芯片（Oxide)制作，具备高速电子移动速度，呈现画面内容具有高解析度及薄边框，呈现超薄^感，除了使电视机更加轻薄，让画面更加细致之外，还可以应用于棵视 3D荧幕、卫星云图、航空地理情报等，因此， 4K2K将成为大尺寸的主流规格。

为了降低***运行成本，提高画面^量，超分辨率算法（Super

Resolution, S ) 已成为目前高端显示领域中（例如 4K2K) 的主流算法，其是指将低分辨率图像或图像序列恢复成高分辨率图像。

超分辨率算法是增强图像或视频分辨率的技术，指利用一幅或多幅低分辨率（Low Resolution, L ) 图像，通过相应的算法来获得一幅清晰的高分辨率（High Resolution, H ) 图像。通过一系列低分辨率的图像来得到一幅高分辨率的图像过程就是超分辨率重构。也就是，超分辨率算法的目的是使得输出的图像或视频的分辨率比任意一幅输入的图像或输入视频的任意一帧的分辨率都要高。这里所获得的高分辨率图像意味着图像具有高像素密度，可以提供更多的细节，而这些细节在许多实际应用中不可或缺。然而，很多视频源没能达到这么高的分辨率（如全高清），让低分辨率的视频在高解析度面板上出色的播放，目前的超分辨率方式有计算量大的缺陷，会导致成本增加，实用性不强。另一方面，诸如像临近取代算法、双线性插值算法、 Hermite插值算法和 Canny插值算法这些简单快速的超分辨率算法，又使得画面存在锯齿、模糊等问题。

请参阅图 1，为现有线性插值超分辨率算法的像素矩阵图。其中，原图像素 (Pixel) 点分别为 POO点、 P01点、 P10点、 P11点，插值点分别为 A 点、 B 点、 C 点，根据线性插值的概念，可以简单地计算出 A=1/4*P00+1/4*P01+1/4*P10+1/4*P11 、 B=1/2*P00+1/2*P01 、 C=1/2*P00+1/2*P10。请参阅图 2，为现有采用图 1所示线性插值方法的图样效果图。由图 2可以看出，虽然图 1所示的这种超分辨率算法计算简单，但这种方法没有降低锯齿现象，并且存在字体不清晰、光滑度不足的问题。发明内容

本发明的目的在于提供一种增强视频图像光滑度及清晰度的超分辨率重构方法，能够利用较少的资源，较好的提升视频图像的光滑度和清晰度。

为实现上述目的，本发明提供一种增强视频图像光滑度及清晰度的超分辨率重构方法，包括：

步骤 1 : 提供一原始图像，包括数个阵列排布的原图像素点 P;

步骤 2 : 利用 Canny— H方式对所述原始图像进行边缘侦测，并考虑 4*4 区域图像范围的像素边缘信息；

步骤 3 : 将边缘像素进行 2*2倍插值放大，并根据得出的像素边缘信息判定该区域图像类型为纯色实体区或非纯色实体区；

步骤 4 : 对纯色实体区、非纯色实体区分别进行条件插值；

步骤 5 : 得到像素 2*2倍插值放大后的超分辨率图像。

所述步骤 2包括：

-1 -2 -1

3 S S 步骤 20 : 计算梯度方向和梯度值，用 Sobel掩膜矩阵 mask— h= i ²

-1 S i 2 i S @ -I -2

一 © i ¾ g ―

mask— ν=^{→ e} mask_dr=ⁱ — mask— dl^ 分别和每个原图像素点以及它周围的 8个原图像素点组成的 3*3矩阵做点乘以得到 4个梯度值，取 4个梯度值中的最大值作为梯度值并保存其方向；

步骤 21 : 根据每个原图像素点的梯度值及其方向，对每个原图像素点进行 "非极大值" 边缘抑制；

步骤 22 : 对每个原图像素点及其周围的 8个原图像素点做边缘细化。边缘侦测点是原图像素点 P11时，步骤 20判断原图像素点 P11为水平方向的边缘，边缘值为 G(P11)，如果满足 G(Pll)>l/2* G(P01^L G(P11)> 1/2* G(P21), 将原图像素点 Pll 的边缘值记为 G(P11)，否则将原图像素点 Pll 的边缘值记为 0 ;

步骤 20判断原图像素点 P11为垂直方向的边缘，边缘值为 G(P11)，如果满足 G(Pll)>l/2* G(P10)且 G(P11)> 1/2* G(P12),将原图像素点 P11的边缘值记为 G(P11)，否则将原图像素点 Pll的边缘值记为 0 ;

步骤 20判断原图像素点 P11为 45度方向的边缘，边缘值为 G(P11)，如果满足 G(Pll)>l/2* G(P00)且 G(P11)> 1/2* G(P22),将原图像素点 P11的边缘值记为 G(P11)，否则将原图像素点 Pll的边缘值记为 0 ;

步骤 20判断原图像素点 P11为 135度方向的边缘，边缘值为 G(P11)，如果满足 G(Pll)>l/2* G(P02)且 G(P11)> 1/2* G(P20),将原图像素点 P11的边缘值记为 G(P11)，否则将原图像素点 Pll的边缘值记为 0。

所述步骤 3中将边缘像素进行 2*2倍插值放大，其插值顺序为：从第 1 行第 1 列的原图像素点开始，逐行逐列遍历原图像素点，每遍历一个原图像素点，需要*** 3个新像素点。

所述区域图像类型为纯色实体区时，采用 4*4 的边缘信息按照规则进行插值。

所述区域图像类型为非纯色实体区时，在非纯色实体区进行 BiCubic— H 方式插值。

当遍历到原图像素点 P11时，原图像素点 P02、 P12、 P22、 P32是边缘，其他 12个原图像素点不是边缘，那么当：

则判定为纯色实体区，否则判定为非纯色实体区。所述 F P)为原图像素点卩的 RGB值求和，即： F(P)=P(R)+P(G)+P(B)。

所述区域图像判定为纯色实体区时，对应的插值点 A、插值点 B、插值点 C的计算分别为： A=P11+P21， B=P11， C=P11+P21。

当遍历到原图像素点 Pll时，原图像素点 P10、 Pll、 P12、 P13是边缘，其他 12个原图像素点不是边缘，那么当

所述区域图像判定为纯色实体区时，对应的插值点 A、插值点 B、插值点 C的计算分别为： A=P21+P22， B=P11+P12, C=P21。

当遍历到原图像素点 P11时，原图像素点 P22、 P23、 P30、 P31是边缘，其他 12个原图像素点不是边缘，那么当：

所述区域图像判定为纯色实体区时，对应的插值点 A、插值点 B、插值点 C的计算分别为： A=P21+P22， B=P11+P12, C=P11+P21。

当遍历到原图像素点 P11时，原图像素点 P02、 P12、 P20、 P21是边缘，其他 12个原图像素点不是边缘，那么当：

所述区域图像判定为纯色实体区时，对应的插值点 A、插值点 B、插值点 C的计算分别为： A=P21+P22， B=P11， C=P21。

当遍历到原图像素点 P11时，原图像素点 P10、 Pll、 P22、 P32是边缘，其他 12个原图像素点不是边缘，那么当：

所述区域图像判定为纯色实体区时，对应的插值点 A、插值点 B、插值点 C的计算分别为： A=P11+P21， B=P11， C=P11+P21。本发明的有益效果：本发明提供一种增强视频图像光滑度及清晰度的超分辨率重构方法，利用 Canny— H方式对原始图像进行边缘侦测，并考虑 4*4 范围的像素边缘信息，在 Canny— H计算出的像素边缘信息基础上判定该区域图像类型为纯色实体区或非纯色实体区，然后对这两种类型分别进行条件插值。在纯色实体区，采用 4*4 的边缘信息按照规则进行插值，以保持纯色实体区的边界清晰度，同时可以在有锯齿的地方降低锯齿，从而增强其光滑度和清晰度；在非纯色实体区进行 BiCubic— H 方式插值，进而增强图像光滑度和清晰度。

为了能更进一步了解本发明的特征以及技术内容，请参阅以下有关本发明的详细说明与附图，然而附图仅提供参考与说明用，并非用来对本发明加以限制。附图说明

下面结合附图，通过对本发明的具体实施方式详细描述，将使本发明的技术方案及其它有益效果显而易见。

附图中，

图 1为现有线性插值超分辨率算法的像素矩阵图；

图 2为现有采用图 1所示线性插值方法的图样效果图；

图 3 为本发明增强视频图像光滑度及清晰度的超分辨率重构方法的流程图；

图 4为本发明选取的 3*3像素矩阵图；

图 5为图 4中原始像素点 P11为边缘时的 2*3像素矩阵图；

图 6 为本发明第一种判定纯色实体区、非纯色实体区条件对应的像素矩阵图；

图 7 为本发明第二种判定纯色实体区、非纯色实体区条件对应的像素矩阵图；

图 8 为本发明第三种判定纯色实体区、非纯色实体区条件对应的像素矩阵图；

图 9 为本发明第四种判定纯色实体区、非纯色实体区条件对应的像素矩阵图；

图 10为本发明第五种判定纯色实体区、非纯色实体区条件对应的像素矩阵图；

图 11为本发明进行 BiCubic— H插值的像素矩阵图；

图 12a为采用复制放大方法处理的图样仿真结果；图 12b为现有采用图 1所示线性插值方法处理的图样仿真结果；图 12c为采用本发明超分辨率算法处理的图样仿真结果。具体实施方式

为更进一步阐述本发明所采取的技术手段及其效果，以下结合本发明的优选实施例及其附图进行详细描述。

请参阅图 3，为本发明增强视频图像光滑度及清晰度的超分辨率重构方法的流程图。包括：

步骤 1 : 提供一原始图像（Original image) , 包括数个阵列排布的原图像素点 P;

步骤 2 : 利用 Canny— H方式（使用传统的 Canny算子简化改进得到）对所述原始图像进行边缘侦测，并考虑 4*4区域图像范围的像素边缘信息;

-1 —t - e 0 6 步骤 20 : 计算梯度方向和梯度值，用 Sobel掩膜矩阵 mask h= ^{1 2}

& —3 -2

mask V： ask dr mask dl=^ 分别和每个原图像素点以及它周围的 8个原图像素点组成的 3*3矩阵做点乘以得到 4个梯度值，取 4个梯度值中的最大值作为梯度值并保存其方向；

水平方向：请参阅图 4，为本发明选取的 3*3像素矩阵图，包括原图像素点 P00、 P01、 P02、 P10、 Pll、 P12、 P20、 P21、 P22。当边缘侦测点是原图像素点 Pll时，步骤 20判断原图像素点 Pll为水平方向的边缘，边缘值为 G(P11)，如果满足 G(Pll)>l/2* G(P01)且 G(P11)> 1/2* G(P21), 将原图像素点 Pll的边缘值记为 G(P11)，否则将原图像素点 Pll的边缘值记为 0 ; 垂直方向：请参阅图 4，当边缘侦测点是原图像素点 P11 时，步骤 20 判断原图像素点 P11 为垂直方向的边缘，边缘值为 G(P11)，如果满足 G(Pll)>l/2* G(P10)且 G(P11)> 1/2* G(P12), 将原图像素点 P11的边缘值记为 G(P11)，否则将原图像素点 Pll的边缘值记为 0 ;

45度方向：请参阅图 4，当边缘侦测点是原图像素点 P11时，步骤 20 判断原图像素点 P11 为 45 度方向的边缘，边缘值为 G(P11)，如果满足 G(Pll)>l/2* G(P00)且 G(P11)> 1/2* G(P22), 将原图像素点 P11的边缘值记为 G(P11)，否则将原图像素点 Pll的边缘值记为 0 ; 135度方向：请参阅图 4，当边缘侦测点是原图像素点 P11时，步骤 20 判断原图像素点 P11 为 135 度方向的边缘，边缘值为 G(P11)，如果满足 G(Pll)>l/2* G(P02)且 G(P11)> 1/2* G(P20), 将原图像素点 P11的边缘值记为 G(P11)，否则将原图像素点 Pll的边缘值记为 0 ;

步骤 22 : 对每个原图像素点及其周围的 8个原图像素点做边缘细化。经过上述步骤，得到的边缘有的地方存在两个像素宽度边缘的现象，为了便于后续的条件插值，我们对每个原图像素点和周围几个原图像素点做边缘细化，请参阅图 5，为图 4中原始像素点 P11为边缘时的 2*3像素矩阵图。如果原图像素点 P00、 P01为边缘，则将原图像素点 P01边缘值置 0 ; 如果原图像素点 P01、 P02为边缘，则将原图像素点 P01边缘值置 0 ; 如果原图像素点 P00、 P10为边缘，则将原图像素点 P10边缘值置 0。

请参阅图 6，为本发明第一种判定纯色实体区、非纯色实体区条件对应的像素矩阵图，也是像素 2*2 倍插值的放大矩阵图，其中选取的像素点为 4*4矩阵，包括原图像素点 P00、 P01、 P02、 P03、 P10、 Pll、 P12、 P13、 P20、 P21、 P22、 P23 o 将边缘像素 2*2倍插值放大，插值顺序为：从第 1 行第 1 列的原图像素点开始，逐行逐列遍历原图像素点，每遍历一个原图像素点，需要*** 3个新像素点，具体地，如图 6所示，当遍历到原图像素点 P11 时， *** 3个新像素点分别为 A点、 B点、 C点，遍历其它原图像素点时与之类似，最终得到像素 2*2倍超分辨率放大图。

结合边缘取得方式，根据一些具体图像的判定，考虑 4*4 原图像素点矩阵的边缘信息，共有 85种判定纯色实体区、非纯色实体区的条件，这里列举如下 5种条件：

( 1 ) 第一种判定纯色实体区、非纯色实体区的条件，请参阅图 6，当遍历到原图像素点 P11时，原图像素点 P02、 P12、 P22、 P32是边缘，其他 12个原图像素点不是边缘，那么当：

则判定为纯色实体区，否则判定为非纯色实体区，这里 F P)为原图像素点卩的 RGB值求和，即： F(P)=P(R)+P(G)+P(B)，以下同理。

(2) 第二种判定纯色实体区、非纯色实体区的条件，请参阅图 7，为本发明第二种判定纯色实体区、非纯色实体区条件对应的像素矩阵图。当遍历到原图像素点 P11时，原图像素点 P10、 Pll、 P12、 P13是边缘，其他

12个原图像素点不是边缘，那么当

|F(P01)-F(Pll)|<0.125*max(F(P01),F(Pll))

|F(P02)-F(P12)|<0.125*max(F(P02),F(P12))

|F(P21)-F(P31)|<0.125*max(F(P21),F(P31))

|F(P22)-F(P32)|<0.125*max(F(P22),F(P32)),

则判定为纯色实体区，否则判定为非纯色实体区。

(3) 第三种判定纯色实体区、非纯色实体区的条件，请参阅图 8，为本发明第三种判定纯色实体区、非纯色实体区条件对应的像素矩阵图。当遍历到原图像素点 P11时，原图像素点 P22、 P23、 P30、 P31是边缘，其他

12个原图像素点不是边缘，那么当：

则判定为纯色实体区，否则判定为非纯色实体区。

(4) 第四种判定纯色实体区、非纯色实体区的条件，请参阅图 9，为本发明第四种判定纯色实体区、非纯色实体区条件对应的像素矩阵图。当遍历到原图像素点 P11时，原图像素点 P02、 P12、 P20、 P21是边缘，其他

12个原图像素点不是边缘，那么当：

则判定为纯色实体区，否则判定为非纯色实体区。

(5) 第五种判定纯色实体区、非纯色实体区的条件，请参阅图 10，为本发明第五种判定纯色实体区、非纯色实体区条件对应的像素矩阵图。当遍历到原图像素点 P11时，原图像素点 P10、 Pll、 P22、 P32是边缘，其他 12个原图像素点不是边缘，那么当：

步骤 4 : 纯色实体区、非纯色实体区条件插值：

( 1 ) 纯色实体区插值：对应步骤 3 中提到的 85种纯色实体区判定条件，分别有其插值方式。例如步骤 3 中举例的 5种纯色实体区判定情况，如果这 5种情况都判定为纯色实体区，那么这 5种情况分别对应的插值点 A、插值点 B、插值点 C的计算分别为：

第一种如图 6所示： A=P11+P21， B=P11， C=P11+P21 ;

第二种如图 7所示： A=P21+P22， B=P11+P12, C=P21 ;

第三种如图 8所示： A=P21+P22， B=P11+P12, C=P11+P21 ;

第四种如图 9所示： A=P21+P22， B=P11， C=P21；

第五种如图 10所示： A=P11+P21， B=P11， C=P11+P21。

(2) 非纯色实体区插值：请参阅图 11，为本发明进行 BiCubic— H插值的像素矩阵图。假设原图像素点 P00、 P01、 P02、 P03 在一个 3 次方函数 P(x)=ax³+bx²+cx+d中，且可令它们的 x坐标为 -1、 0、 1、 2，由 P(-l)、 P(0)、 P(l)、 P(2)以及一阶导数 P，(0)、 P，(l)可简单的计算出、 b、 c、 d关于 P00、 P01、 P02、 P03 的表达式， yl 对应的 x坐标为 0.5，可计算出 yl=-l/16*P00+9/16*P01+9/16*P02-l/16*P03，令 α =-1/16、 β =-9/16 , 同样可计算出 y2、 y3、 y4、 y5 :

y2= α *P10+ β *P11+ β *P12+ a *P13，

y3= a *Ρ20+ β *Ρ21+ β *P22+ a *P23 ,

y4= a *P30+ β *P31+ β *P32+ a *P33，

y5= a *Ρ01+ β *Ρ11+ β *P21+ a *P31，

对 yl、 y2、 y3、 y4做双立方插值，计算 A值： A= a *yl+ β *y2+ β *y3+ a *y4，另外 B=y2、 C=y5，为了增强对比度，可改变系数值，目前应用表现较好的八、 B、 C计算式系数为： a =-2/16、 β =-10/16。

步骤 5 : 得到像素 2*2倍插值放大后的超分辨率图像。

请参阅图 12a、 12b、及 12c，图 12a为采用复制放大方法处理的图样仿真结果。复制放大的方法，即每个像素复制为 4个像素，进而得到 2*2倍超分辨率结果；图 12b为现有采用图 1 所示线性插值方法处理的图样仿真结果；图 12c为采用本发明超分辨率算法处理的图样仿真结果。由图 12a、 12b、及 12c可以看出，该图样的边界虽然都不是直线，然而经本发明超分辨率算法处理后，仍然能得到明显优于图 12a所示的复制放大方法和图 12b 所示的线性插值方法的视觉效果，且有效的降低了锯齿现象，较好的提升了视频图像的光滑度和清晰度。综上所述，本发明提供一种增强视频图像光滑度及清晰度的超分辨率重构方法，利用 Canny— H方式对原始图像进行边缘侦测，并考虑 4*4范围的像素边缘信息，在 Canny— H计算出的像素边缘信息基础上判定该区域图像类型为纯色实体区或非纯色实体区，然后对这两种类型分别进行条件插值。在纯色实体区，采用 4*4 的边缘信息按照规则进行插值，以保持纯色实体区的边界清晰度，同时可以在有锯齿的地方降低锯齿，从而增强其光滑度和清晰度；在非纯色实体区进行 BiCubic— H 方式插值，进而增强图像光滑度和清晰度。

以上所述，对于本领域的普通技术人员来说，可以根据本发明的技术方案和技术构思作出其他各种相应的改变和变形，而所有这些改变和变形都应属于本发明权利要求的保护范围。

Claims

权利要求

1、一种增强视频图像光滑度及清晰度的超分辨率重构方法，包括：步骤 1: 提供一原始图像，包括数个阵列排布的原图像素点（P);

步骤 2:利用 Canny— H方式对所述原始图像进行边缘侦测，并考虑 4*4 区域图像范围的像素边缘信息；

步骤 3:将边缘像素进行 2*2倍插值放大，并根据得出的像素边缘信息判定该区域图像类型为纯色实体区或非纯色实体区；

步骤 4: 对纯色实体区、非纯色实体区分别进行条件插值；

步骤 5: 得到像素 2*2倍插值放大后的超分辨率图像。

2、如权利要求 1所述的增强视频图像光滑度及清晰度的超分辨率重构方法，其中，所述步骤 2包括：

-1 —2 -I

S 0 § 步骤 20:计算梯度方向和梯度值，用 Sobel掩膜矩阵 mask h=^{1 2} 、

mask

分别和每个原图像素点以及它周围的 8个原图像素点组成的 3*3矩阵做点乘以得到 4个梯度值，取 4个梯度值中的最大值作为梯度值并保存其方向；

步骤 21: 根据每个原图像素点的梯度值及其方向，对每个原图像素点进行 "非极大值" 边缘抑制；

步骤 22: 对每个原图像素点及其周围的 8个原图像素点做边缘细化。

3、如权利要求 2所述的增强视频图像光滑度及清晰度的超分辨率重构方法，其中，边缘侦测点是原图像素点（P11) 时，步骤 20判断原图像素点（P11)为水平方向的边缘，边缘值为 G(P11)，如果满足 G(Pll)>l/2* G(P01) 且 GPli;)>l/2*GP2i;)，将原图像素点（P11) 的边缘值记为 GPll), 否则将原图像素点（P11) 的边缘值记为 0;

步骤 20判断原图像素点（P11) 为垂直方向的边缘，边缘值为 G(P11)，如果满足 G(Pll)>l/2* G(P10)且 G(P11)> 1/2* G(P12), 将原图像素点（P11) 的边缘值记为 G(P11)，否则将原图像素点（P11) 的边缘值记为 0;

步骤 20判断原图像素点（P11)为 45度方向的边缘，边缘值为 G(P11)，如果满足 G(Pll)>l/2* G(P00)且 G(P11)> 1/2* G(P22), 将原图像素点（P11) 的边缘值记为 G(P11)，否则将原图像素点（P11) 的边缘值记为 0; 步骤 20判断原图像素点（PI 1 )为 135度方向的边缘，边缘值为 G(P11)，如果满足 G(Pll)>l/2* G(P02)且 G(P11)> 1/2* G(P20), 将原图像素点（P11 ) 的边缘值记为 G(P11)，否则将原图像素点（P11 ) 的边缘值记为 0。

4、如权利要求 1所述的增强视频图像光滑度及清晰度的超分辨率重构方法，其中，所述步骤 3 中将边缘像素进行 2*2倍插值放大，其插值顺序为：从第 1 行第 1 列的原图像素点开始，逐行逐列遍历原图像素点，每遍历一个原图像素点，需要*** 3个新像素点。

5、如权利要求 1所述的增强视频图像光滑度及清晰度的超分辨率重构方法，其中，所述区域图像类型为纯色实体区时，采用 4*4 的边缘信息按照规则进行插值。

6、如权利要求 1所述的增强视频图像光滑度及清晰度的超分辨率重构方法，其中，所述区域图像类型为非纯色实体区时，在非纯色实体区进行 BiCubic— H方式插值。

7、如权利要求 1所述的增强视频图像光滑度及清晰度的超分辨率重构方法，其中，当遍历到原图像素点（P11 ) 时，原图像素点（P02)、（P12)、

(P22)、 (P32) 是边缘，其他 12个原图像素点不是边缘，那么当：

|F(P10)-F(Pll)|<0.125*max(F(P10),F(Pll)) 且

|F(P20)-F(P21)|<0.125*max(F(P20),F(P21)) 且

|F(P12)-F(P13)|<0.125*max(F(P12),F(P13)) 且 |F(P22)-F(P23)|<0.125*max(F(P22),F(P23)),

则判定为纯色实体区，否则判定为非纯色实体区。

8、如权利要求 7所述的增强视频图像光滑度及清晰度的超分辨率重构方法，其中，所述（F(P) ) 为原图像素点（P) 的 RGB 值求和，即： F(P)=P( )+P(G)+P(B) ; 所述区域图像判定为纯色实体区时，对应的插值点 (A)、插值点（B)、插值点（C) 的计算分别为： A=P11+P21， B=P11， C=Pll+P21 o

9、如权利要求 1所述的增强视频图像光滑度及清晰度的超分辨率重构方法，其中，当遍历到原图像素点（P11 ) 时，原图像素点（P10)、（Pll )、

(P12)、 (P13) 是边缘，其他 12个原图像素点不是边缘，那么当

|F(P01)-F(Pll)|<0.125*max(F(P01),F(Pll)) 且

|F(P02)-F(P12)|<0.125*max(F(P02),F(P12)) 且

|F(P21)-F(P31)|<0.125*max(F(P21),F(P31)) 且 |F(P22)-F(P32)|<0.125*max(F(P22),F(P32)),

则判定为纯色实体区，否则判定为非纯色实体区。

10、如权利要求 9 所述的增强视频图像光滑度及清晰度的超分辨率重构方法，其中，所述（F(P)) 为原图像素点（P) 的 RGB 值求和，即： F(P)=P( )+P(G)+P(B) ; 所述区域图像判定为纯色实体区时，对应的插值点

(A)、插值点（B)、插值点（C) 的计算分别为： A=P21+P22， B=P11+P12, C=P21 o

11、如权利要求 1 所述的增强视频图像光滑度及清晰度的超分辨率重构方法，其中，当遍历到原图像素点（P11 ) 时，原图像素点（P22)、（P23 )、

(P30)、 (P31 ) 是边缘，其他 12个原图像素点不是边缘，那么当：

|F(P02)-F(P12)|<0.125*max(F(P02),F(P12)) 且 |F(P03)-F(P13)|<0.125*max(F(P03),F(P13)) 且

|F(P22)-F(P32)|<0.125*max(F(P22),F(P32)) 且 |F(P23)-F(P33)|<0.125*max(F(P23),F(P33)),

则判定为纯色实体区，否则判定为非纯色实体区。

12、如权利要求 11所述的增强视频图像光滑度及清晰度的超分辨率重构方法，其中，所述（F(P)) 为原图像素点（P) 的 RGB 值求和，即：

F(P)=P( )+P(G)+P(B) ; 所述区域图像判定为纯色实体区时，对应的插值点 (A)、插值点（B)、插值点（C) 的计算分别为： A=P21+P22， B=P11+P12, C=Pll+P21 o

13、如权利要求 1 所述的增强视频图像光滑度及清晰度的超分辨率重构方法，其中，当遍历到原图像素点（P11 ) 时，原图像素点（P02)、（P12)、

(P20)、 (P21 ) 是边缘，其他 12个原图像素点不是边缘，那么当：

|F(P01)-F(Pll)|<0.125*max(F(P01),F(Pll)) 且

|F(P02)-F(P12)|<0.125*max(F(P02),F(P12)) 且

|F(P21)-F(P31)|<0.125*max(F(P21),F(P31)) 且 |F(P22)-F(P23)|<0.125*max(F(P22),F(P23)),

则判定为纯色实体区，否则判定为非纯色实体区。

14、如权利要求 13所述的增强视频图像光滑度及清晰度的超分辨率重构方法，其中，所述（F(P)) 为原图像素点（P) 的 RGB 值求和，即： F(P)=P( )+P(G)+P(B) ; 所述区域图像判定为纯色实体区时，对应的插值点 (A)、插值点（B )、插值点（C) 的计算分别为： A=P21+P22， B=P11， C=P21。

15、如权利要求 1 所述的增强视频图像光滑度及清晰度的超分辨率重构方法，其中，当遍历到原图像素点（P11 ) 时，原图像素点（P10)、（Pll )、

则判定为纯色实体区，否则判定为非纯色实体区。

16、如权利要求 15所述的增强视频图像光滑度及清晰度的超分辨率重构方法，其中，所述（F(P)) 为原图像素点（P) 的 RGB 值求和，即： F(P)=P( )+P(G)+P(B) ; 所述区域图像判定为纯色实体区时，对应的插值点

(A)、插值点（B)、插值点（C) 的计算分别为： A=P11+P21， B=P11， C=Pll+P21 o