CN105260986A - 一种抗模糊的图像放大方法 - Google Patents
一种抗模糊的图像放大方法 Download PDFInfo
- Publication number
- CN105260986A CN105260986A CN201510669656.7A CN201510669656A CN105260986A CN 105260986 A CN105260986 A CN 105260986A CN 201510669656 A CN201510669656 A CN 201510669656A CN 105260986 A CN105260986 A CN 105260986A
- Authority
- CN
- China
- Prior art keywords
- image
- sharpening
- input picture
- interpolation
- amplification
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 42
- 230000003321 amplification Effects 0.000 title claims abstract description 26
- 238000003199 nucleic acid amplification method Methods 0.000 title claims abstract description 26
- 238000001914 filtration Methods 0.000 claims description 5
- 241000233855 Orchidaceae Species 0.000 claims description 4
- 239000011159 matrix material Substances 0.000 claims description 3
- 230000009452 underexpressoin Effects 0.000 claims description 3
- 230000000694 effects Effects 0.000 abstract description 11
- 238000003707 image sharpening Methods 0.000 abstract description 4
- 238000005516 engineering process Methods 0.000 description 6
- 238000013461 design Methods 0.000 description 4
- 238000012544 monitoring process Methods 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 238000012549 training Methods 0.000 description 2
- 241001235689 Hemifusus ternatanus Species 0.000 description 1
- 238000012952 Resampling Methods 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000000052 comparative effect Effects 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 239000007799 cork Substances 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 230000001737 promoting effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
- G06T3/4084—Scaling of whole images or parts thereof, e.g. expanding or contracting in the transform domain, e.g. fast Fourier transform [FFT] domain scaling
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/73—Deblurring; Sharpening
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10016—Video; Image sequence
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20172—Image enhancement details
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Image Processing (AREA)
- Facsimile Image Signal Circuits (AREA)
Abstract
本发明公开了一种抗模糊的图像放大方法,根据输入图像的梯度获得图像模糊程度的评价指标,再结合放大倍数、图像分辨率,求取图像锐化强度参数,在该参数的控制下,执行与输入图像质量等级相适应的锐化;进而将图像的总体放大过程分解为若干个小倍率的逐级放大,采用普通的插值方法每次放大图像宽高1.2倍,直到满足总体放大倍数要求。本发明在不明显增加运算复杂度的前提下,有效消除了插值方法固有的模糊效应,显著改善了放大图像的清晰度。
Description
技术领域
本发明属于图像处理技术领域,涉及一种图像插值放大方法,具体涉及一种抗模糊的图像放大方法。
技术背景
当前,数码相机或摄像头可以轻松地拍摄高分辨率的视频,但出于节省存储或传输成本的考虑,在视频监控、视频会议以及网络电视等应用场合依然存在大量的低分辨率视频内容。视频放大技术因而被广泛地用于提升图像的空间分辨率,以适应屏幕实际显示区域的要求。一些特殊的应用,例如视频监控,还涉及到对图像局部区域进行放大以便能辨识图像的细节内容。
大量的视频图像缩放技术被发展起来,从简单的插值到复杂的图像超分辨率。图像超分辨率技术尽管可以获得更清晰的放大效果,但运算复杂度居高不下;更不方便的是,图像超分辨率一般都要事先训练样本库,在实际应用中缺乏普适性和可操作性。因此,目前的视频应用软件或媒体播放器中采用的图像放大技术主要以简单、快速的插值方法为主,例如双线性插值(Bilinear)、双立方插值(Bicubic)、兰兹插值(Lanczos)等。然而,这些经典的插值放大方法同时也存在一个严重的缺陷,当原始图像清晰度不高(例如经过压缩的图像)或放大倍数过大时,插值放大后的图像存在明显的模糊效应,影响观看者的主观体验。
空间锐化滤波器是一种高通滤波器,可以强化数字图像的高频分量,恰好与插值滤波的低通作用相反。因此,如果在图像插值放大之前安插一个锐化操作,将有可能一定程度上抵消插值带来的模糊效应。此外,图像单次放大的倍数越高越易造成模糊,相反,放大倍数越低模糊越轻。因此,如果将高倍数放大过程转换为若干个低倍数的逐级放大,将有助于放大图像质量的提升。基于这两个角度,本发明提出一种抗模糊的图像放大方法。
发明内容
为了解决上述技术问题,本发明将图像锐化运算和插值运算级联成一个整体,通过锐化预处理加强图像的轮廓细节,为插值运算贡献高频成分提升的信号源,从而消除插值过程的低通模糊效应影响。
本发明所采用的技术方案是:一种抗模糊的图像放大方法,其特征在于,包括以下步骤:
步骤1:采用图像的梯度特征衡量图像模糊程度,计算输入图像的模糊度指标;
步骤2:综合输入图像的模糊度指标、总体放大倍数、图像分辨率三个要素,计算输入图像的锐化强度参数;
步骤3:根据计算得到的锐化强度常数,调用锐化算法对输入图像进行锐化;
步骤4:将总体放大倍数为R的放大操作分解为若干个小倍率的逐级放大,确定逐级放大的执行次数n;
步骤5:执行n次逐级插值放大运算。
作为优选,步骤1中所述的模糊度指标的计算,采用如下方法:
将模糊度指标Fb定义为能量归一化的梯度:
其中,Gx、Gy分别表示水平和垂直梯度图,通过Sobel、Roberts或Prewitt梯度算子求取;E为输入图像的能量,用输入图像像素I计算“.*”表示矩阵点积运算。
作为优选,步骤2中所述的锐化强度参数λ的计算,采用如下方法:
其中,Fb为模糊度指标,R是总体放大倍数,S为输入图像的面积,等于长乘高,Scif为一以CIF格式图像面积为基准的常数。
作为优选,步骤3中所述的锐化操作,是将输入图像的高通滤波版本经过调校后叠加到原始输入图像上,计算公式为:
y(n,m)=x(n,m)+λz(n,m);
这里,x,y分别表示原始输入图像和锐化后的输入图像,z表示高通滤波后的输入图像,用二维Laplacian微分算子获得,λ为锐化强度参数。
作为优选,步骤4中所述的确定逐级放大的执行次数n,采用如下规则:
每次将图像的宽度和高度放大1.2倍,若总体放大倍数为R,则每次放大1.2倍、逐次放大到R倍的执行次数n计算为符号表示下取整。
作为优选,步骤5中所述的执行n次逐级插值放大运算,其插值方法包括但不限于双线性插值法、双立方插值法、兰兹插值法。
与现有的图像放大方案相比,本发明具有以下优点和积极效果:
(1)本发明在简单的插值方法的前面施加一个锐化预处理,在不明显增加运算复杂度的前提下,有效消除了插值方法固有的模糊效应,显著改善了放大图像的清晰度;
(2)与复杂的超分辨率方案相比,本发明方法不牵涉样本图像训练,具有实现简单,处理效率高,普适性强的优点;
(3)本发明方法基于的锐化算法和插值算法均来自成熟技术,便于组装现有的模块集成实现。
附图说明
图1:本发明实施例的处理流程图;
图2:本发明实施例的放大效果对比示例图,其中(a)为原始图像经普通双线性放大4倍效果图,(b)为原始图像经本发明的方法放大4倍效果图,(c)为解码图像经普通双线性放大4倍效果图,(d)为解码图像经本发明的方法放大4倍效果图。
具体实施方式
为了便于本领域普通技术人员理解和实施本发明,下面结合附图及实施例对本发明作进一步的详细描述,应当理解,此处所描述的实施示例仅用于说明和解释本发明,并不用于限定本发明。
本发明提供的一种抗模糊的图像放大方法,将图像锐化运算和插值运算级联成一个整体。锐化操作的强度应与输入图像自身质量相适应,清晰的图像应弱锐化,模糊的图像应强锐化,否则,锐化不仅不能为后续的插值操作提供高频成分增强的预处理图像,反而会损伤图像、降低视觉保真度。导致图像模糊的因素来自多个方面,如目标和摄像机的相对运动产生的运动模糊,镜头散焦,大气散射,图像压缩、降噪和重采样等滤波过程,等等。这些过程无一例外地造成图像细节丢失及削弱目标边缘轮廓梯度,因此,采用图像的梯度特征刻画图像的模糊程度,清晰图像的梯度图锐利,模糊图像的梯度图平坦。
图像锐化算法通常用一个锐化强度参数控制锐化程度,对输入图像施加多大程度的锐化最少应考虑三个因素。首先,也是最重要的是图像的模糊程度,可用模糊度指标衡量;其次是图像的放大倍数,放大倍数越高越容易引起低通插值模糊效应,相应地应该执行更强的锐化来补偿放大的模糊效应;最后是输入图像自身的分辨率,分辨率越低的图像的细节保持度越差,越需要通过锐化来增强细节。
基于以上考虑,本发明方法完整的处理流程如图1所示,包含以下步骤:
步骤1:采用图像的梯度特征衡量图像模糊程度,计算输入图像的模糊度指标;
综合图像强度的影响,将模糊度指标Fb定义为能量归一化的梯度
这里,Gx、Gy分别表示水平和垂直梯度图,可通过Sobel,Roberts,Prewitt等经典的梯度算子求取,E为输入图像的能量,用输入图像像素I计算“.*”表示矩阵点积运算。
步骤2:综合输入图像的模糊度指标、总体放大倍数、图像分辨率三个要素,计算输入图像的锐化强度参数;
结合经验数据,锐化强度参数λ的计算,采用如下方法:
其中,Fb为模糊度指标,R是总体放大倍数,S为输入图像的面积,等于长乘高,Scif为一以CIF格式图像面积(352x288)为基准的常数。
步骤3:根据计算得到的锐化强度常数,调用锐化算法对输入图像进行锐化;
本发明采用的锐化算法是,将输入图像图像的高通滤波版本经过调校后叠加到原始输入图像图像上,计算公式为
y(n,m)=x(n,m)+λz(n,m);
这里,x,y分别表示原始输入图像图像和锐化后的输入图像图像,z表示高通滤波后的输入图像图像,用二维Laplacian微分算子获得,λ为锐化强度参数。
步骤4:将总体放大倍数为R的放大操作分解为若干个小倍率的逐级放大,确定逐级放大的执行次数n;
每次将图像的宽度和高度放大1.2倍,若总体放大倍数为R,则每次放大1.2倍、逐次放大到R倍的执行次数n计算为符号表示下取整。
步骤5:执行n次逐级插值运算,可供选择的插值方法包括但不限于双线性插值、双立方插值、兰兹插值。
应当理解的是,本说明书未详细阐述的部分均属于现有技术。
应当理解的是,上述针对较佳实施例的描述较为详细,并不能因此而认为是对本发明专利保护范围的限制,本领域的普通技术人员在本发明的启示下,在不脱离本发明权利要求所保护的范围情况下,还可以做出替换或变形,均落入本发明的保护范围之内,本发明的请求保护范围应以所附权利要求为准。
Claims (6)
1.一种抗模糊的图像放大方法,其特征在于,包括以下步骤:
步骤1:采用图像的梯度特征衡量图像模糊程度,计算输入图像的模糊度指标;
步骤2:综合输入图像的模糊度指标、总体放大倍数、图像分辨率三个要素,计算输入图像的锐化强度参数;
步骤3:根据计算得到的锐化强度常数,调用锐化算法对输入图像进行锐化;
步骤4:将总体放大倍数为R的放大操作分解为若干个小倍率的逐级放大,确定逐级放大的执行次数n;
步骤5:执行n次逐级插值放大运算。
2.根据权利要求1所述的抗模糊的图像放大方法,其特征在于:步骤1中所述的模糊度指标的计算,采用如下方法:
将模糊度指标Fb定义为能量归一化的梯度:
其中,Gx、Gy分别表示水平和垂直梯度图,通过Sobel、Roberts或Prewitt梯度算子求取;E为输入图像的能量,用输入图像像素I计算“.*”表示矩阵点积运算。
3.根据权利要求1所述的抗模糊的图像放大方法,其特征在于:步骤2中所述的锐化强度参数λ的计算,采用如下方法:
其中,Fb为模糊度指标,R是总体放大倍数,S为输入图像的面积,等于长乘高,Scif为一以CIF格式图像面积为基准的常数。
4.根据权利要求1所述的抗模糊的图像放大方法,其特征在于:步骤3中所述的锐化操作,是将输入图像的高通滤波版本经过调校后叠加到原始输入图像上,计算公式为:
y(n,m)=x(n,m)+λz(n,m);
这里,x,y分别表示原始输入图像和锐化后的输入图像,z表示高通滤波后的输入图像,用二维Laplacian微分算子获得,λ为锐化强度参数。
5.根据权利要求1所述的抗模糊的图像放大方法,其特征在于:步骤4中所述的确定逐级放大的执行次数n,采用如下规则:
每次将图像的宽度和高度放大1.2倍,若总体放大倍数为R,则每次放大1.2倍、逐次放大到R倍的执行次数n计算为符号表示下取整。
6.根据权利要求1所述的抗模糊的图像放大方法,其特征在于:步骤5中所述的执行n次逐级插值放大运算,其插值方法包括但不限于双线性插值法、双立方插值法、兰兹插值法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510669656.7A CN105260986B (zh) | 2015-10-13 | 2015-10-13 | 一种抗模糊的图像放大方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510669656.7A CN105260986B (zh) | 2015-10-13 | 2015-10-13 | 一种抗模糊的图像放大方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN105260986A true CN105260986A (zh) | 2016-01-20 |
CN105260986B CN105260986B (zh) | 2018-06-29 |
Family
ID=55100661
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201510669656.7A Active CN105260986B (zh) | 2015-10-13 | 2015-10-13 | 一种抗模糊的图像放大方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN105260986B (zh) |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106709873A (zh) * | 2016-11-11 | 2017-05-24 | 浙江师范大学 | 一种基于三次样条插值和迭代更新的超分辨率方法 |
CN106875350A (zh) * | 2017-01-05 | 2017-06-20 | 宇龙计算机通信科技(深圳)有限公司 | 对模糊图片进行清晰化处理的方法、装置和终端 |
CN110446071A (zh) * | 2019-08-13 | 2019-11-12 | 腾讯科技(深圳)有限公司 | 基于神经网络的多媒体处理方法、装置、设备及介质 |
CN111028182A (zh) * | 2019-12-24 | 2020-04-17 | 北京金山云网络技术有限公司 | 图像锐化方法、装置、电子设备及计算机可读存储介质 |
CN111245816A (zh) * | 2020-01-08 | 2020-06-05 | 窦翠云 | 基于内容检测的数据上传***及方法 |
CN111654627A (zh) * | 2020-06-09 | 2020-09-11 | 展讯通信(上海)有限公司 | 一种数字变焦方法、装置、设备及存储介质 |
CN111737665A (zh) * | 2019-04-27 | 2020-10-02 | 常英梅 | 手持移动终端分等级显示方法 |
CN112037135A (zh) * | 2020-09-11 | 2020-12-04 | 上海瞳观智能科技有限公司 | 选择图像关键主体放大并显示的方法 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6421468B1 (en) * | 1999-01-06 | 2002-07-16 | Seiko Epson Corporation | Method and apparatus for sharpening an image by scaling elements of a frequency-domain representation |
WO2007027893A2 (en) * | 2005-08-30 | 2007-03-08 | The Regents Of The University Of California, Santa Cruz | Kernel regression for image processing and reconstruction |
CN102547067A (zh) * | 2011-12-31 | 2012-07-04 | 中山大学 | 改进的双三次插值视频缩放方法 |
CN102844786A (zh) * | 2010-03-01 | 2012-12-26 | 夏普株式会社 | 图像放大装置、图像放大程序、存储图像放大程序的存储介质和显示装置 |
CN103299609A (zh) * | 2011-01-07 | 2013-09-11 | Tp视觉控股有限公司 | 用于将输入图像数据转换成输出图像数据的方法、用于将输入图像数据转换成输出图像数据的图像转换单元、图像处理装置、显示设备 |
CN104933679A (zh) * | 2015-07-06 | 2015-09-23 | 福州瑞芯微电子有限公司 | 一种放大图像的方法及其对应*** |
-
2015
- 2015-10-13 CN CN201510669656.7A patent/CN105260986B/zh active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6421468B1 (en) * | 1999-01-06 | 2002-07-16 | Seiko Epson Corporation | Method and apparatus for sharpening an image by scaling elements of a frequency-domain representation |
WO2007027893A2 (en) * | 2005-08-30 | 2007-03-08 | The Regents Of The University Of California, Santa Cruz | Kernel regression for image processing and reconstruction |
CN102844786A (zh) * | 2010-03-01 | 2012-12-26 | 夏普株式会社 | 图像放大装置、图像放大程序、存储图像放大程序的存储介质和显示装置 |
CN103299609A (zh) * | 2011-01-07 | 2013-09-11 | Tp视觉控股有限公司 | 用于将输入图像数据转换成输出图像数据的方法、用于将输入图像数据转换成输出图像数据的图像转换单元、图像处理装置、显示设备 |
CN102547067A (zh) * | 2011-12-31 | 2012-07-04 | 中山大学 | 改进的双三次插值视频缩放方法 |
CN104933679A (zh) * | 2015-07-06 | 2015-09-23 | 福州瑞芯微电子有限公司 | 一种放大图像的方法及其对应*** |
Cited By (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106709873A (zh) * | 2016-11-11 | 2017-05-24 | 浙江师范大学 | 一种基于三次样条插值和迭代更新的超分辨率方法 |
CN106709873B (zh) * | 2016-11-11 | 2020-12-18 | 浙江师范大学 | 一种基于三次样条插值和迭代更新的超分辨率方法 |
CN106875350A (zh) * | 2017-01-05 | 2017-06-20 | 宇龙计算机通信科技(深圳)有限公司 | 对模糊图片进行清晰化处理的方法、装置和终端 |
CN111737665A (zh) * | 2019-04-27 | 2020-10-02 | 常英梅 | 手持移动终端分等级显示方法 |
CN110446071A (zh) * | 2019-08-13 | 2019-11-12 | 腾讯科技(深圳)有限公司 | 基于神经网络的多媒体处理方法、装置、设备及介质 |
CN111028182A (zh) * | 2019-12-24 | 2020-04-17 | 北京金山云网络技术有限公司 | 图像锐化方法、装置、电子设备及计算机可读存储介质 |
CN111028182B (zh) * | 2019-12-24 | 2024-04-26 | 北京金山云网络技术有限公司 | 图像锐化方法、装置、电子设备及计算机可读存储介质 |
CN111245816A (zh) * | 2020-01-08 | 2020-06-05 | 窦翠云 | 基于内容检测的数据上传***及方法 |
CN111654627A (zh) * | 2020-06-09 | 2020-09-11 | 展讯通信(上海)有限公司 | 一种数字变焦方法、装置、设备及存储介质 |
CN111654627B (zh) * | 2020-06-09 | 2021-11-26 | 展讯通信(上海)有限公司 | 一种数字变焦方法、装置、设备及存储介质 |
CN112037135A (zh) * | 2020-09-11 | 2020-12-04 | 上海瞳观智能科技有限公司 | 选择图像关键主体放大并显示的方法 |
CN112037135B (zh) * | 2020-09-11 | 2023-06-09 | 上海瞳观智能科技有限公司 | 选择图像关键主体放大并显示的方法 |
Also Published As
Publication number | Publication date |
---|---|
CN105260986B (zh) | 2018-06-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN105260986A (zh) | 一种抗模糊的图像放大方法 | |
DE602004002618T2 (de) | Verfahren und System zur Kantenhervorhebung | |
JP3786910B2 (ja) | 映像の輪郭線向上装置及び方法 | |
CN101981911B (zh) | 图像处理方法和装置 | |
CN100388755C (zh) | 图像噪声去除方法 | |
CN102201109B (zh) | 图像处理方法及使用了该方法的放射线拍摄装置 | |
US20100239173A1 (en) | Image output apparatus, edge enhancement method, and recording medium | |
CN101188671A (zh) | 视频图像的锐化方法 | |
US11574391B2 (en) | Median based frequency separation local area contrast enhancement | |
WO2014102876A1 (ja) | 画像処理装置、および、画像処理方法 | |
CN101272452B (zh) | 用于减小视频信号中的运动模糊的设备和方法 | |
US9848163B2 (en) | Image processing apparatus and image processing method | |
US9495732B2 (en) | Image enhancing device and image enhancement method | |
WO2012124591A1 (ja) | 信号処理装置、制御プログラム、および集積回路 | |
JP5403450B1 (ja) | 画像処理装置、画像処理方法 | |
CN101316320B (zh) | 用于图像处理***的图像处理方法及其相关图像处理装置 | |
JP5730362B2 (ja) | 画像処理装置及び画像処理方法 | |
CN112132749A (zh) | 应用参数化Thiele连分式插值的图像处理方法及装置 | |
CN104992413A (zh) | 人脸和/或车牌图像的处理方法 | |
US20240193734A1 (en) | Display device system and method for adaptively enhancing image quality | |
Cımtay | Towards Real Time Image Dehazing on Android Operating System | |
CN104378531A (zh) | 一种高清电影摄像机专用的图像增益放大器 | |
Wang et al. | An algorithm for repairing low-quality video enhancement techniques based on trained filter | |
CN104335568A (zh) | 图像增强装置、图像增强方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
TR01 | Transfer of patent right |
Effective date of registration: 20200930 Address after: 519000 unit 1, No. 33, Haihe street, Hengqin New District, Zhuhai City, Guangdong Province Patentee after: ZHUHAI DAHENGQIN TECHNOLOGY DEVELOPMENT Co.,Ltd. Address before: 430072 Hubei Province, Wuhan city Wuchang District of Wuhan University Luojiashan Patentee before: WUHAN University |
|
TR01 | Transfer of patent right |