CN102968759A - 一种基于组稀疏编码的图像放大方法 - Google Patents
一种基于组稀疏编码的图像放大方法 Download PDFInfo
- Publication number
- CN102968759A CN102968759A CN2012104704156A CN201210470415A CN102968759A CN 102968759 A CN102968759 A CN 102968759A CN 2012104704156 A CN2012104704156 A CN 2012104704156A CN 201210470415 A CN201210470415 A CN 201210470415A CN 102968759 A CN102968759 A CN 102968759A
- Authority
- CN
- China
- Prior art keywords
- image
- picture
- low
- resolution image
- resolution
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 32
- 238000005070 sampling Methods 0.000 claims abstract description 8
- 238000013507 mapping Methods 0.000 claims abstract description 5
- 238000011478 gradient descent method Methods 0.000 claims abstract description 4
- 239000004744 fabric Substances 0.000 claims description 5
- 230000004304 visual acuity Effects 0.000 claims description 5
- 238000005516 engineering process Methods 0.000 abstract description 8
- 230000008569 process Effects 0.000 abstract description 5
- 230000000007 visual effect Effects 0.000 abstract description 3
- 238000012545 processing Methods 0.000 description 9
- 230000004438 eyesight Effects 0.000 description 4
- 230000003321 amplification Effects 0.000 description 3
- 230000008901 benefit Effects 0.000 description 3
- 238000007906 compression Methods 0.000 description 3
- 230000006835 compression Effects 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 238000000605 extraction Methods 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 230000010365 information processing Effects 0.000 description 3
- 238000003199 nucleic acid amplification method Methods 0.000 description 3
- 230000003044 adaptive effect Effects 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 2
- 238000013459 approach Methods 0.000 description 2
- 238000013528 artificial neural network Methods 0.000 description 2
- 210000004027 cell Anatomy 0.000 description 2
- 239000011159 matrix material Substances 0.000 description 2
- 238000005457 optimization Methods 0.000 description 2
- 238000003909 pattern recognition Methods 0.000 description 2
- 238000011084 recovery Methods 0.000 description 2
- 239000000758 substrate Substances 0.000 description 2
- 210000000857 visual cortex Anatomy 0.000 description 2
- 241000124008 Mammalia Species 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000000903 blocking effect Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 239000012141 concentrate Substances 0.000 description 1
- 238000013144 data compression Methods 0.000 description 1
- 238000000354 decomposition reaction Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 238000002474 experimental method Methods 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 210000000653 nervous system Anatomy 0.000 description 1
- 230000001537 neural effect Effects 0.000 description 1
- 210000002569 neuron Anatomy 0.000 description 1
- 210000001328 optic nerve Anatomy 0.000 description 1
- 230000008447 perception Effects 0.000 description 1
- 238000012805 post-processing Methods 0.000 description 1
- 238000011002 quantification Methods 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
- 238000012549 training Methods 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
Images
Landscapes
- Image Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
本发明公开了一种基于组稀疏编码的图像放大方法,包括:建立高低分辨率图像间的映射关系;输入一幅低分辨率图像的图片,并提取出其亮度通道;将输入的低分辨率图像的图片分成3×3的具有重复的逻辑小图片;利用低分辨率字典并加入稀疏约束得出该低分辨率图像的稀疏系数;将该稀疏系数乘以高分辨率字典得到一个初始高分辨率图像的图片;利用梯度下降法,约束当前得到的高分辨率图像经下采样后接近当前输入图像,得到最终的高分辨率图像的图片。整个技术实现过程简单明了,过使用比之前算法约束更加严格的组稀疏约束,使得本论文最终放大的图像拥有很高的信噪比,且得到更好的视觉效果。
Description
技术领域
本发明涉及图像处理技术领域,具体涉及一种基于组稀疏编码的图像放大方法。
背景技术
图像放大是图像处理的基本操作之一,它广泛应用于医学图像、遥感图像、网页制作以及一些商用图像处理软件中。图像放大即将一幅低分辨率的图像转换为高分辨率图像的一种图像处理技术,对一幅图像进行放大,实质上是对图像插值的过程。图像放大目前已经有了很多实用化的方法,它们有各自的特点、优点和不足。图像放大算法的选择直接影响到放大图像的质量,所以寻找合适的算法是提高放大图像质量的关键。
生物学实验表明,视皮层对外界刺激的处理采用神经稀疏表示原则。稀疏编码源于视神经网络的研究,是对只有一小部分神经元同时处于活跃状态的多维数据的神经网络的表示方法,在视神经细胞的响应特性和外部环境刺激的统计特性之间建立一种科学的数量联系,逐渐成为一种有效理解人类神经***信息加工机制的理论工具,在盲源信号分离、语音信号处理、自然图像特征提取、自然图像去噪以及模式识别方面等方面取得了许多成果,具有重要的实用价值。自然图像的稀疏编码模型,是一种模拟哺乳动物视觉***主视皮层VI区简单细胞感受野的人工神经网络方法,其编码方式不依赖于输入数据性质,仅仅依靠外界感知信息的统计特性,是一种自适应的信号统计方法。稀疏编码方法能充分利用自然图像数据中的高阶统计信息,获得好的分析处理效果。
研究表明,基于稀疏编码的自然图像处理方法,与建立在数字信息处理和概率基础上的传统图像处理方法相比,具有独特的优势,为图像处理提供一种基于视觉信息处理的新途径。
目前主要的图像放大方法大致可以分为两类:第一类是常规插值,包括最邻近点插值、双线性插值、拉格朗日插值及三次样条插值等,这类方法是根据离散的点建立一个连续函数,用这个重建的函数求出任意位置处的函数值。第二类是利用图像中包含不同的高、低频成分的特点,经过对图像的数学统计特征的分析,采用不同的方式对图像不同部分进行插值的非线性的、移变得插值方法。
基于超完备字典的图像稀疏表示是一种新的图像表示理论,利用超完备字典的冗余性可以有效地捕捉图像的各种结构特征,从而实现图像的有效表示.
对比各种基础图像放大方法并结合实验数据,现将效果参数列举如下表:
除此之外最新的基于稀疏编码的图像放大技术由于稀疏约束力度不足,导致图像放大的质量依然存在提高的空间。
发明内容
本发明通过将相似逻辑小块图像进行组稀疏约束且结合其梯度特征等相关约束,从而得到更高质量的放大图像。
本发明提供一种基于组稀疏编码的图像放大方法,包括:
建立高低分辨率图像间的映射关系;
输入一幅低分辨率图像的图片,并提取出其亮度通道;
将输入的低分辨率图像的图片分成3*3的具有重复的逻辑小图片;
利用低分辨率字典并加入稀疏约束得出该低分辨率图像的稀疏系数;
将该稀疏系数乘以高分辨率字典得到一个初始高分辨率图像的图片;
利用梯度下降法,约束当前得到的高分辨率图像经下采样后接近当前输入图像,得到最终的高分辨率图像的图片。
在将该稀疏系数乘以高分辨率字典得到一个初始高分辨率图像的图片之后还包括:
利用引入反馈算法处理初始高分辨率图像的图片。
通过实施本发明,整个技术实现过程简单明了,过使用比之前算法约束更加严格的组稀疏约束,使得本论文最终放大的图像拥有很高的信噪比,且得到更好的视觉效果。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其它的附图。
图1是本发明实施例中的基于边缘保持全变分模型的色调映射方法流程图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其它实施例,都属于本发明保护的范围。
通过将相似逻辑小块图像进行组稀疏约束且结合其梯度特征等相关约束,从而得到更高质量的放大图像。归纳起来分为以下三部分:
2.1.1构造超完备字典
建立字典背景:随着数字化多媒体技术的迅速发展,人们对各种数字图像的需求日益增长。由于图像具有信息量巨大的特点,因此在传输、存储前需要对其进行数据压缩。在目前主流的视频和图像编码标准中广泛使用以去除图像中的冗余信息为目的块级离散余弦变换压缩编码技术。然而为了达到高压缩率,离散余弦变换和随后的量化过程会导致原始信息过多的损失,从而引起相邻图像块亮度不一致的问题,人们称之为块效应;另外,由于量化会导致图像中高频信息的丢失,从而会在图像内容的边缘处产生振铃效应。这样,无论是图像的主观质量,或是客观质量都受到较大的损失,很难满足人们对图像质量的要求,所以,人么迫切需要一些高效的针对压缩图像的后处理方法。
对图像进行表示时,人们通常使用完备的正交基,因为完备的正交基可以使表示简单直观,而且表示是唯一的.近几年随着多尺度几何分析和压缩传感技术在图像处理领域的兴起,人们发现使用超完备基来表示图像会更加有效,能够得到更加稀疏的表示.与完备的正交基不同,超完备基的基底通常是冗余的,即基底的个数大于基元素的维数,超完备基又被称为超完备字典,基元素被称为字典的原子.稀疏表示使得图像的能量只集中于较少的原子,而这些具有非零表示系数的原子揭示了图像的主要特征和内在结构.目前,稀疏表示已广泛应用到图像处理和模式识别领域,如图像恢复图像压缩人脸识别等.图像在超完备字典中的稀疏表示可按照以下模型进行描述:N×M的矩阵D为超完备字典,求解图像y在超完备字典D中的最稀疏表示等同于求解minx0s.t. y=Dx (*)
本文采用基于梯度特征的双字典训练思想并基于K-SVD的图像放大:这一方法基于一种新颖的自适应的字典学习算法—K奇异值分解方法,用学习得到的图像块的稀疏编码表示样例图像块。在图像恢复时,要将对小图像块的稀疏表示推广到一幅完整图像上,建立合适的目标函数,采用适当的更新策略,经过多次迭代最终可以得到满足人类视觉的高质量的恢复图像。
2.1.2求解优化问题
总而言之,该技术要实现的便是下列优化问题:
其中F表示对原图的一种特征提取操作(由于人眼对图像的高频内容更加的敏感,故提取放大前后图像的高频梯度特征进行控制,从而得到更加符合视觉的效果图。),
DI表示低分辨率图对应的字典,Ai表示与第i个低分辨率图片块相似的所有图片块组成的矩阵。
2.1.3优化约束问题
为了保证我们得到的放大图片经过下采样与我们目前的低分辨率图片更好地接近且更好地控制由下式(2)产生的噪声,我们增加了一个正规约束项:
其中S表示对高分辨率图像X的下采样操作,H表示对X的一种模糊操作。
图1示出了本发明实施例中的基于组稀疏编码的图像放大方法,具体包括如下步骤:
步骤1:基于自然界高分辨率图片训练高低分辨率字典Dh和DI(即建立高低分辨率图像间的映射关系)
步骤2:输入一幅低分辨率图像y0,并提取出其亮度通道y
步骤3:将上述输入图片分成3*3的具有重复的逻辑小图片
步骤4:利用低分辨率字典并加入稀疏约束得出该低分辨率图像的稀疏系数,于是将该稀疏稀疏乘以高分辨率字典便得到一个初始高分辨率图像x0
需要说明的是,在步骤4中还可以引入反馈算法Backprojection对得到的初始高分辨率图像进行处理,优化图像的性能等。
步骤5:利用梯度下降法,约束当前得到的高分辨率图像经下采样后接近当前输入图像,且接近上述第四步骤得到的初始图,求解得出最终的高分辨率图像x。
2.2.2、用数学公式归纳可表示如下:
Y=SHX (2)(假设输入的低分辨率图像y是经过高分辨率图像x下采样并模糊化所得)
其中,
综上,整个技术实现过程简单明了,过使用比之前算法约束更加严格的组稀疏约束,使得本论文最终放大的图像拥有很高的信噪比,且得到更好的视觉效果。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,该程序可以存储于一计算机可读存储介质中,存储介质可以包括:只读存储器(ROM,Read Only Memory)、随机存取存储器(RAM,Random AccessMemory)、磁盘或光盘等。
以上对本发明实施例所提供的基于组稀疏编码的图像放大方法进行了详细介绍,本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。
Claims (2)
1.一种基于组稀疏编码的图像放大方法,其特征在于,包括:
建立高低分辨率图像间的映射关系;
输入一幅低分辨率图像的图片,并提取出其亮度通道;
将输入的低分辨率图像的图片分成3*3的具有重复的逻辑小图片;
利用低分辨率字典并加入稀疏约束得出该低分辨率图像的稀疏系数;
将该稀疏系数乘以高分辨率字典得到一个初始高分辨率图像的图片;
利用梯度下降法,约束当前得到的高分辨率图像经下采样后接近当前输入图像,得到最终的高分辨率图像的图片。
2.如权利要求1所述的基于组稀疏编码的图像放大方法,其特征在于,在将该稀疏系数乘以高分辨率字典得到一个初始高分辨率图像的图片之后还包括:
利用引入反馈算法处理初始高分辨率图像的图片。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN2012104704156A CN102968759A (zh) | 2012-11-19 | 2012-11-19 | 一种基于组稀疏编码的图像放大方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN2012104704156A CN102968759A (zh) | 2012-11-19 | 2012-11-19 | 一种基于组稀疏编码的图像放大方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN102968759A true CN102968759A (zh) | 2013-03-13 |
Family
ID=47798889
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN2012104704156A Pending CN102968759A (zh) | 2012-11-19 | 2012-11-19 | 一种基于组稀疏编码的图像放大方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN102968759A (zh) |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102156875A (zh) * | 2011-03-25 | 2011-08-17 | 西安电子科技大学 | 基于多任务ksvd字典学习的图像超分辨率重构方法 |
CN102722865A (zh) * | 2012-05-22 | 2012-10-10 | 北京工业大学 | 一种超分辨率稀疏重建方法 |
-
2012
- 2012-11-19 CN CN2012104704156A patent/CN102968759A/zh active Pending
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102156875A (zh) * | 2011-03-25 | 2011-08-17 | 西安电子科技大学 | 基于多任务ksvd字典学习的图像超分辨率重构方法 |
CN102722865A (zh) * | 2012-05-22 | 2012-10-10 | 北京工业大学 | 一种超分辨率稀疏重建方法 |
Non-Patent Citations (1)
Title |
---|
孙玉宝,韦志辉,肖亮,张铮嵘: "基于稀疏表示的图像超分辨率重建快速算法", 《***工程与电子技术》, vol. 32, no. 12, 31 December 2010 (2010-12-31), pages 2696 - 2700 * |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106204449A (zh) | 一种基于对称深度网络的单幅图像超分辨率重建方法 | |
CN112508077B (zh) | 一种基于多模态特征融合的社交媒体情感分析方法及*** | |
CN109711383B (zh) | 基于时频域的卷积神经网络运动想象脑电信号识别方法 | |
CN107644006A (zh) | 一种基于深度神经网络的手写体中文字库自动生成方法 | |
CN107516304A (zh) | 一种图像去噪方法及装置 | |
CN108197294A (zh) | 一种基于深度学习的文本自动生成方法 | |
CN108121975A (zh) | 一种联合原始数据和生成数据的人脸识别方法 | |
CN106570474A (zh) | 一种基于3d卷积神经网络的微表情识别方法 | |
CN109508379A (zh) | 一种基于加权词向量表示和组合相似度的短文本聚类方法 | |
Jiang et al. | Video image defogging recognition based on recurrent neural network | |
CN103136728B (zh) | 基于字典学习和非局部总变差的图像超分辨方法 | |
CN103455988A (zh) | 基于结构自相似性与稀疏表示的超分辨率图像重构方法 | |
CN106127689A (zh) | 图像视频超分辨率方法和装置 | |
CN109544451A (zh) | 一种基于渐进式迭代反投影的图像超分辨率重建方法和*** | |
CN105335929A (zh) | 一种深度图超分辨方法 | |
CN112070668A (zh) | 一种基于深度学习和边缘增强的图像超分辨方法 | |
CN104408697B (zh) | 基于遗传算法和正则先验模型的图像超分辨重建方法 | |
Xu et al. | Singular vector sparse reconstruction for image compression | |
CN107154021A (zh) | 基于深层门限卷积神经网络的图像超分辨方法 | |
CN104799852A (zh) | 基于超限学习机自编码的运动想象脑电信号特征的提取方法 | |
CN106934458A (zh) | 基于深度学习的多层自动编码方法及*** | |
CN116167920A (zh) | 一种基于超分辨率和先验知识的图像压缩与重建方法 | |
Guan et al. | Construction of science and technology achievement transfer and transformation platform based on deep learning and data mining technology | |
Ding et al. | Deep attentive style transfer for images with wavelet decomposition | |
CN102842123A (zh) | 图像上采样中边缘清晰度提升的稀疏域残差补偿修正方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C12 | Rejection of a patent application after its publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20130313 |