CN106204958B - 一种通过虹膜进行识别的atm机输入装置 - Google Patents
一种通过虹膜进行识别的atm机输入装置 Download PDFInfo
- Publication number
- CN106204958B CN106204958B CN201610548331.8A CN201610548331A CN106204958B CN 106204958 B CN106204958 B CN 106204958B CN 201610548331 A CN201610548331 A CN 201610548331A CN 106204958 B CN106204958 B CN 106204958B
- Authority
- CN
- China
- Prior art keywords
- iris
- submodule
- iris image
- point
- lbp
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Classifications
-
- G—PHYSICS
- G07—CHECKING-DEVICES
- G07F—COIN-FREED OR LIKE APPARATUS
- G07F19/00—Complete banking systems; Coded card-freed arrangements adapted for dispensing or receiving monies or the like and posting such transactions to existing accounts, e.g. automatic teller machines
- G07F19/20—Automatic teller machines [ATMs]
- G07F19/201—Accessories of ATMs
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/18—Eye characteristics, e.g. of the iris
- G06V40/193—Preprocessing; Feature extraction
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/18—Eye characteristics, e.g. of the iris
- G06V40/197—Matching; Classification
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- General Health & Medical Sciences (AREA)
- Human Computer Interaction (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Health & Medical Sciences (AREA)
- Ophthalmology & Optometry (AREA)
- Business, Economics & Management (AREA)
- Finance (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Accounting & Taxation (AREA)
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
- Collating Specific Patterns (AREA)
- Image Input (AREA)
- Image Analysis (AREA)
Abstract
本发明一种通过虹膜进行识别的ATM机输入装置,包括ATM机输入装置和与ATM机输入装置电信号连接的虹膜识别器,所述虹膜识别器包括:(1)采样模块;(2)预处理模块;(3)特征编码模块,用于对虹膜图像的特征进行提取和编码,其包括第一次LBP算子处理子模块、第二次LBP算子处理子模块、第三次LBP算子处理子模块和第四次LBP算子处理子模块;(4)编码匹配模块。本发明增加了中心点与周围其它邻域的关联性,能够满足不同尺度和频率的图像纹理,经过多次LBP算子处理子模块处理后,在不影响中心点与周围邻域的关联性下,不断降低编码长度,节约了存储空间,减少了计算量,提高了识别速度,增强了识别准确率,得到了较高的鲁棒性。
Description
技术领域
本发明涉及ATM机输入装置设计领域,具体涉及一种通过虹膜进行识别的ATM机输入装置。
背景技术
相关技术中,通过虹膜进行识别的ATM机输入装置通常采用基本LBP(局部二值模式)算子对虹膜图像特征进行提取和编码,LBP算子是一种描述图像灰度范围内纹理特征的方法,对于光照变化来说有很强的鲁棒性,从而被广泛地应用在图像的纹理特征提取上。
基本LBP算子一般定义为:在3×3窗口内由中心点nc和其周围8个邻域n0,...n7组成,其中定义纹理T为:T=(n0-nc,n1-nc,...,n7-nc),对其进行二值化处理,以nc为阈值,邻域的8个点与nc比较,若大于中心点的值标记为1,否则标记为0。二值化后的纹理T为:T=(sgn(n0-nc),sgn(n1-nc),...,sgn(n7-nc)),其中经过计算,将得到以nc为中心的8个二进制数,然后对不同像素位置进行加权求和便得到中心点的LBP值,其中LBP值的计算公式为:对图像中每个像素都进行LBP运算,便可以得到图像的LBP纹理描述。
然而,由于基本LBP算子只覆盖了中心点的8个邻域像素,使其与周围其它邻域的关联性不够全面,无法满足不同尺度和频率的图像纹理。
发明内容
针对上述问题,本发明提供一种识别速度快、识别范围广的一种通过虹膜进行识别的ATM机输入装置,解决相关技术中采用基本LBP算子对虹膜图像特征进行提取和编码的ATM机输入装置***不能处理不同尺度和频率的图像纹理的问题。
本发明的目的采用以下技术方案来实现:
一种通过虹膜进行识别的ATM机输入装置,包括ATM机输入装置和与ATM机输入装置电信号连接的虹膜识别器,所述ATM机输入装置包括:
外框;
触控式屏幕模块包括一芯片,所述触控式屏幕模块嵌入所述外框内;
随机模块用以随机产生包括0-9及点号的一组数字,定义为随机数组,所述随机数组中的点号以及0-9中的每个数字至少出现一次;
处理器用以处理数据,且所述处理器通过导线连接于所述随机模块以及所述触控式屏幕模块的所述芯片。
优选地,其特征是,上述连结装置具有:
所述触控式屏幕模块上提供一键盘区,所述随机数组每一次均于所述键盘区显示出来,键盘区中所述点号以及0-9这10个符号的位置随机生成。
优选地,其特征是,所述随机数组内的数字和点号分布成四行呈矩阵排列。
优选地,其特征是,所述虹膜识别器包括:
(1)采样模块,用于获取、校正虹膜图像并采集虹膜图像的信息,由于实际获得的虹膜图像与标准采集的虹膜图像之间在同一个平面上会略有偏差,需要对实际获得的虹膜图像进行平面校正,设定图像校正子模块,所述图像校正子模块采用的校正公式为:
其中,I(x,y)A表示实际获得的虹膜图像,I(x,y)B表示标准采集的虹膜图像,实际获得的虹膜图像与标准采集的虹膜图像的各像素点值之间的标准差;
(2)预处理模块,用于对获取的虹膜图像进行定位和归一化处理,其包括光斑点填充子模块,所述光斑点填充子模块用于对虹膜图像中检测出的每个光斑点进行填充,填充时利用与光斑点相邻的非光斑区域中的上下左右四个包络点的灰度值来计算光斑点的灰度值,定义虹膜图像中的一个光斑点为P0(x0,y0),所述四个包络点依次为P1(x1,y1)、P2(x2,y2)、P3(x3,y3)、P4(x4,y4),定义光斑点的灰度值计算公式为:
优选地,其特征是,所述虹膜识别器还包括:
(3)特征编码模块,用于对虹膜图像的特征进行提取和编码,包括:
a、第一次LBP算子处理子模块:用于对虹膜图像中的任意一点nc与5×5窗内的K个像素点进行比较来计算LBP值,所述K个像素点以点nc为中心分布在点nc***,设nc的坐标为(xc,yc),LBP值的计算公式为:
其中,所述K个像素点标记为n0~nK,K的取值范围为[20,24],1st-LBP(xc,yc)的取值范围为[0,K];
b、第二次LBP算子处理子模块,用于在保证编码长度的前提下加强所述点nc与周围邻域的关联性,其以点nc的8个邻域像素点作为副中心点,记作nvc0,nvc1,...,nvc7,使用3×3窗,用窗内全体像素的均值代替副中心点的值,再使用LBP算子对中心点nc进行计算,计算公式为:
c、第三次LBP算子处理子模块,用于缩短经第二次LBP算子处理子模块处理后的矩形图像的特征编码长度,其以点nc为中心,在3×3的窗口中根据自定义函数{nvcj,|nvcj-nc|=rank4(nvci-nc|,i=0,1,...,7),j=0,1,2,3}选择4个副中心点进行计算,计算公式为:
其中,rank4(|nvci-nc|,i=0,1,...,7)表示对7个|nvci-nc|的值进行从小到大排列后取前4个数,nvcj表示选取的4个副中心点;
d、第四次LBP算子处理子模块:用于在第三次LBP算子处理子模块处理后的基础上继续降低编码长度,计算公式为:
计算完后输出表示虹膜图像特征的编码;
(4)编码匹配模块,用于接收所述表示虹膜图像特征的编码并将其与数据库中的特征编码进行比对,完成对身份的识别。
其中,所述预处理模块还包括:
(1)粗定位子模块:与光斑点填充子模块连接,用于对虹膜图像进行切割并初步定位瞳孔位置,切割时以所述瞳孔位置为中心、5倍的半径来对填充光斑后的虹膜图像进行切割;
(2)精定位子模块:与粗定位子模块连接,用于精确定位虹膜区域;
(3)归一化子模块,用于将定位后的虹膜区域展开成固定分辨率的虹膜图像。
其中,所述精定位子模块包括依次连接的下采样单元、初次定位单元和再次定位单元,所述下采样单元用于对切割后的虹膜图像进行下采样,所述初次定位单元用于通过改进的Canny边缘检测算子和Hough圆检测对虹膜内外圆进行定位,所述再次定位单元用于以初次定位单元定位的参数在虹膜图像上进行精确定位。
其中,所述改进的Canny边缘检测算子为只对垂直方向进行非极大值的抑制的Canny边缘检测算子。
其中,所述改进的Canny边缘检测算子为只采用高阈值进行强边缘检测的Canny边缘检测算子。
本发明的有益效果为:
1、设置图像校正子模块,并定义了校正公式,提高了图像处理的精度;
2、设置光斑点填充子模块,并定义了光斑点的灰度值计算公式,很好地保留了虹膜图像的结构信息,填充后的虹膜图像可以有效地进行定位;
3、设置的初次定位单元,其通过改进的Canny边缘检测算子和Hough圆检测对虹膜内外圆进行定位,便于虹膜的定位且提高了虹膜的速度;
4、设置的第一次LBP算子处理子模块,增加了中心点与周围其它邻域的关联性,能够满足不同尺度和频率的图像纹理;
5、设置的第二次LBP算子处理子模块、第三次LBP算子处理子模块和第四次LBP算子处理子模块,在不影响中心点与周围邻域的关联性下,不断降低编码长度,节约了存储空间,减少了计算量,提高了识别速度,增强了识别准确率,得到了较高的鲁棒性。
附图说明
利用附图对本发明作进一步说明,但附图中的实施例不构成对本发明的任何限制,对于本领域的普通技术人员,在不付出创造性劳动的前提下,还可以根据以下附图获得其它的附图。
图1是本发明的虹膜识别器连接示意图。
具体实施方式
结合以下实施例对本发明作进一步描述。
实施例1
参见图1,本实施例一种通过虹膜进行识别的ATM机输入装置,包括ATM机输入装置和与ATM机输入装置电信号连接的虹膜识别器,所述ATM机输入装置包括:
外框;
触控式屏幕模块包括一芯片,所述触控式屏幕模块嵌入所述外框内;
随机模块用以随机产生包括0-9及点号的一组数字,定义为随机数组,所述随机数组中的点号以及0-9中的每个数字至少出现一次;
处理器用以处理数据,且所述处理器通过导线连接于所述随机模块以及所述触控式屏幕模块的所述芯片。
优选地,其特征是,上述连结装置具有:
所述触控式屏幕模块上提供一键盘区,所述随机数组每一次均于所述键盘区显示出来,键盘区中所述点号以及0-9这10个符号的位置随机生成。
优选地,其特征是,所述随机数组内的数字和点号分布成四行呈矩阵排列。
优选地,其特征是,所述虹膜识别器包括:
(1)采样模块,用于获取虹膜图像并采集虹膜图像的信息;
(2)预处理模块,用于获取、校正虹膜图像并采集虹膜图像的信息,由于实际获得的虹膜图像与标准采集的虹膜图像之间在同一个平面上会略有偏差,需要对实际获得的虹膜图像进行平面校正,设定图像校正子模块,所述图像校正子模块采用的校正公式为:
其中,I(x,y)A表示实际获得的虹膜图像,I(x,y)B表示标准采集的虹膜图像,实际获得的虹膜图像与标准采集的虹膜图像的各像素点值之间的标准差;
优选地,其特征是,所述虹膜识别器还包括:
(3)特征编码模块,用于对虹膜图像的特征进行提取和编码,包括:
a、第一次LBP算子处理子模块:用于对虹膜图像中的任意一点nc与5×5窗内的20个像素点进行比较来计算LBP值,所述20个像素点以点nc为中心分布在点nc***,设nc的坐标为(xc,yc),LBP值的计算公式为:
其中,所述20个像素点标记为n0~n20,1st-LBP(xc,yc)的取值范围为[0,20];
b、第二次LBP算子处理子模块,用于在保证编码长度的前提下加强所述点nc与周围邻域的关联性,其以点nc的8个邻域像素点作为副中心点,记作nvc0,nvc1,...,nvc7,使用3×3窗,用窗内全体像素的均值代替副中心点的值,再使用LBP算子对中心点nc进行计算,计算公式为:
c、第三次LBP算子处理子模块,用于缩短经第二次LBP算子处理子模块处理后的矩形图像的特征编码长度,其以点nc为中心,在3×3的窗口中根据自定义函数{nvcj,|nvcj-nc|=rank4(nvci-nc|,i=0,1,...,7),j=0,1,2,3}选择4个副中心点进行计算,计算公式为:
其中,rank4(|nvci-nc|,i=0,1,...,7)表示对7个|nvci-nc|的值进行从小到大排列后取前4个数,nvcj表示选取的4个副中心点;
d、第四次LBP算子处理子模块:用于在第三次LBP算子处理子模块处理后的基础上继续降低编码长度,计算公式为:
计算完后输出表示虹膜图像特征的编码;
(4)编码匹配模块,用于接收所述表示虹膜图像特征的编码并将其与数据库中的特征编码进行比对,完成对身份的识别。
其中,所述预处理模块包括:
(1)光斑点填充子模块:用于对虹膜图像中检测出的每个光斑点进行填充,填充时利用与光斑点相邻的非光斑区域中的上下左右四个包络点的灰度值来计算光斑点的灰度值,定义虹膜图像中的一个光斑点为P0(x0,y0),所述四个包络点依次为P1(x1,y1)、P2(x2,y2)、P3(x3,y3)、P4(x4,y4),定义光斑点的灰度值计算公式为:
(2)粗定位子模块:与光斑点填充子模块连接,用于对虹膜图像进行切割并初步定位瞳孔位置,切割时以所述瞳孔位置为中心、5倍的半径来对填充光斑后的虹膜图像进行切割;
(3)精定位子模块:与粗定位子模块连接,用于精确定位虹膜区域;
(4)归一化子模块,用于将定位后的虹膜区域展开成固定分辨率的虹膜图像。
其中,所述精定位子模块包括依次连接的下采样单元、初次定位单元和再次定位单元,所述下采样单元用于对切割后的虹膜图像进行下采样,所述初次定位单元用于通过改进的Canny边缘检测算子和Hough圆检测对虹膜内外圆进行定位,所述再次定位单元用于以初次定位单元定位的参数在虹膜图像上进行精确定位。
其中,所述改进的Canny边缘检测算子为只对垂直方向进行非极大值的抑制的Canny边缘检测算子。
其中,所述改进的Canny边缘检测算子为只采用高阈值进行强边缘检测的Canny边缘检测算子。
本实施例设置光斑点填充子模块,很好地保留了虹膜图像的结构信息,填充后的虹膜图像可以有效地进行定位;设置的初次定位单元,其通过改进的Canny边缘检测算子和Hough圆检测对虹膜内外圆进行定位,便于虹膜的定位且提高了虹膜的速度;设置的第一次LBP算子处理子模块,增加了中心点与周围其它邻域的关联性,能够满足不同尺度和频率的图像纹理;设置的第二次LBP算子处理子模块、第三次LBP算子处理子模块和第四次LBP算子处理子模块,在不影响中心点与周围邻域的关联性下,不断降低编码长度,节约了存储空间,减少了计算量,提高了识别速度,增强了识别准确率,得到了较高的鲁棒性,使用CASIAV1.0虹膜库进行测试时,结果如下:
实施例2
参见图1,本实施例一种通过虹膜进行识别的ATM机输入装置,包括ATM机输入装置和与ATM机输入装置电信号连接的虹膜识别器,所述ATM机输入装置包括:
外框;
触控式屏幕模块包括一芯片,所述触控式屏幕模块嵌入所述外框内;
随机模块用以随机产生包括0-9及点号的一组数字,定义为随机数组,所述随机数组中的点号以及0-9中的每个数字至少出现一次;
处理器用以处理数据,且所述处理器通过导线连接于所述随机模块以及所述触控式屏幕模块的所述芯片。
优选地,其特征是,上述连结装置具有:
所述触控式屏幕模块上提供一键盘区,所述随机数组每一次均于所述键盘区显示出来,键盘区中所述点号以及0-9这10个符号的位置随机生成。
优选地,其特征是,所述随机数组内的数字和点号分布成四行呈矩阵排列。
优选地,其特征是,所述虹膜识别器包括:
(1)采样模块,用于获取虹膜图像并采集虹膜图像的信息;
(2)预处理模块,用于获取、校正虹膜图像并采集虹膜图像的信息,由于实际获得的虹膜图像与标准采集的虹膜图像之间在同一个平面上会略有偏差,需要对实际获得的虹膜图像进行平面校正,设定图像校正子模块,所述图像校正子模块采用的校正公式为:
其中,I(x,y)A表示实际获得的虹膜图像,I(x,y)B表示标准采集的虹膜图像,实际获得的虹膜图像与标准采集的虹膜图像的各像素点值之间的标准差;
优选地,其特征是,所述虹膜识别器还包括:
(3)特征编码模块,用于对虹膜图像的特征进行提取和编码,包括:
a、第一次LBP算子处理子模块:用于对虹膜图像中的任意一点nc与5×5窗内的21个像素点进行比较来计算LBP值,所述21个像素点以点nc为中心分布在点nc***,设nc的坐标为(xc,yc),LBP值的计算公式为:
其中,所述21个像素点标记为n0~n21,1st-LBP(xc,yc)的取值范围为[0,21];
b、第二次LBP算子处理子模块,用于在保证编码长度的前提下加强所述点nc与周围邻域的关联性,其以点nc的8个邻域像素点作为副中心点,记作nvc0,nvc1,...,nvc7,使用3×3窗,用窗内全体像素的均值代替副中心点的值,再使用LBP算子对中心点nc进行计算,计算公式为:
c、第三次LBP算子处理子模块,用于缩短经第二次LBP算子处理子模块处理后的矩形图像的特征编码长度,其以点nc为中心,在3×3的窗口中根据自定义函数{nvcj,|nvcj-nc|=rank4(|nvci-nc|,i=0,1,...,7),j=0,1,2,3}选择4个副中心点进行计算,计算公式为:
其中,rank4(|nvci-nc|,i=0,1,...,7)表示对7个|nvci-nc|的值进行从小到大排列后取前4个数,nvcj表示选取的4个副中心点;
d、第四次LBP算子处理子模块:用于在第三次LBP算子处理子模块处理后的基础上继续降低编码长度,计算公式为:
计算完后输出表示虹膜图像特征的编码;
(4)编码匹配模块,用于接收所述表示虹膜图像特征的编码并将其与数据库中的特征编码进行比对,完成对身份的识别。
其中,所述预处理模块包括:
(1)光斑点填充子模块:用于对虹膜图像中检测出的每个光斑点进行填充,填充时利用与光斑点相邻的非光斑区域中的上下左右四个包络点的灰度值来计算光斑点的灰度值,定义虹膜图像中的一个光斑点为P0(x0,y0),所述四个包络点依次为P1(x1,y1)、P2(x2,y2)、P3(x3,y3)、P4(x4,y4),定义光斑点的灰度值计算公式为:
(2)粗定位子模块:与光斑点填充子模块连接,用于对虹膜图像进行切割并初步定位瞳孔位置,切割时以所述瞳孔位置为中心、5倍的半径来对填充光斑后的虹膜图像进行切割;
(3)精定位子模块:与粗定位子模块连接,用于精确定位虹膜区域;
(4)归一化子模块,用于将定位后的虹膜区域展开成固定分辨率的虹膜图像。
其中,所述精定位子模块包括依次连接的下采样单元、初次定位单元和再次定位单元,所述下采样单元用于对切割后的虹膜图像进行下采样,所述初次定位单元用于通过改进的Canny边缘检测算子和Hough圆检测对虹膜内外圆进行定位,所述再次定位单元用于以初次定位单元定位的参数在虹膜图像上进行精确定位。
其中,所述改进的Canny边缘检测算子为只对垂直方向进行非极大值的抑制的Canny边缘检测算子。
其中,所述改进的Canny边缘检测算子为只采用高阈值进行强边缘检测的Canny边缘检测算子。
本实施例设置光斑点填充子模块,很好地保留了虹膜图像的结构信息,填充后的虹膜图像可以有效地进行定位;设置的初次定位单元,其通过改进的Canny边缘检测算子和Hough圆检测对虹膜内外圆进行定位,便于虹膜的定位且提高了虹膜的速度;设置的第一次LBP算子处理子模块,增加了中心点与周围其它邻域的关联性,能够满足不同尺度和频率的图像纹理;设置的第二次LBP算子处理子模块、第三次LBP算子处理子模块和第四次LBP算子处理子模块,在不影响中心点与周围邻域的关联性下,不断降低编码长度,节约了存储空间,减少了计算量,提高了识别速度,增强了识别准确率,得到了较高的鲁棒性,使用CASIAV1.0虹膜库进行测试时,结果如下:
实施例3
参见图1,本实施例一种通过虹膜进行识别的ATM机输入装置,包括ATM机输入装置和与ATM机输入装置电信号连接的虹膜识别器,所述ATM机输入装置包括:
外框;
触控式屏幕模块包括一芯片,所述触控式屏幕模块嵌入所述外框内;
随机模块用以随机产生包括0-9及点号的一组数字,定义为随机数组,所述随机数组中的点号以及0-9中的每个数字至少出现一次;
处理器用以处理数据,且所述处理器通过导线连接于所述随机模块以及所述触控式屏幕模块的所述芯片。
优选地,其特征是,上述连结装置具有:
所述触控式屏幕模块上提供一键盘区,所述随机数组每一次均于所述键盘区显示出来,键盘区中所述点号以及0-9这10个符号的位置随机生成。
优选地,其特征是,所述随机数组内的数字和点号分布成四行呈矩阵排列。
优选地,其特征是,所述虹膜识别器包括:
(1)采样模块,用于获取、校正虹膜图像并采集虹膜图像的信息,由于实际获得的虹膜图像与标准采集的虹膜图像之间在同一个平面上会略有偏差,需要对实际获得的虹膜图像进行平面校正,设定图像校正子模块,所述图像校正子模块采用的校正公式为:
其中,I(x,y)A表示实际获得的虹膜图像,I(x,y)B表示标准采集的虹膜图像,实际获得的虹膜图像与标准采集的虹膜图像的各像素点值之间的标准差;
(2)预处理模块,用于对获取的虹膜图像进行定位和归一化处理;
优选地,其特征是,所述虹膜识别器还包括:
(3)特征编码模块,用于对虹膜图像的特征进行提取和编码,包括:
a、第一次LBP算子处理子模块:用于对虹膜图像中的任意一点nc与5×5窗内的22个像素点进行比较来计算LBP值,所述22个像素点以点nc为中心分布在点nc***,设nc的坐标为(xc,yc),LBP值的计算公式为:
其中,所述22个像素点标记为n0~n21,1st-LBP(xc,yc)的取值范围为[0,22];
b、第二次LBP算子处理子模块,用于在保证编码长度的前提下加强所述点nc与周围邻域的关联性,其以点nc的8个邻域像素点作为副中心点,记作nvc0,nvc1,...,nvc7,使用3×3窗,用窗内全体像素的均值代替副中心点的值,再使用LBP算子对中心点nc进行计算,计算公式为:
c、第三次LBP算子处理子模块,用于缩短经第二次LBP算子处理子模块处理后的矩形图像的特征编码长度,其以点nc为中心,在3×3的窗口中根据自定义函数{nvcj,|nvcj-nc|=rank4(nvci-nc|,i=0,1,...,7),j=0,1,2,3}选择4个副中心点进行计算,计算公式为:
其中,rank4(|nvci-nc|,i=0,1,...,7)表示对7个|nvci-nc|的值进行从小到大排列后取前4个数,nvcj表示选取的4个副中心点;
d、第四次LBP算子处理子模块:用于在第三次LBP算子处理子模块处理后的基础上继续降低编码长度,计算公式为:
计算完后输出表示虹膜图像特征的编码;
(4)编码匹配模块,用于接收所述表示虹膜图像特征的编码并将其与数据库中的特征编码进行比对,完成对身份的识别。
其中,所述预处理模块包括:
(1)光斑点填充子模块:用于对虹膜图像中检测出的每个光斑点进行填充,填充时利用与光斑点相邻的非光斑区域中的上下左右四个包络点的灰度值来计算光斑点的灰度值,定义虹膜图像中的一个光斑点为P0(x0,y0),所述四个包络点依次为P1(x1,y1)、P2(x2,y2)、P3(x3,y3)、P4(x4,y4),定义光斑点的灰度值计算公式为:
(2)粗定位子模块:与光斑点填充子模块连接,用于对虹膜图像进行切割并初步定位瞳孔位置,切割时以所述瞳孔位置为中心、5倍的半径来对填充光斑后的虹膜图像进行切割;
(3)精定位子模块:与粗定位子模块连接,用于精确定位虹膜区域;
(4)归一化子模块,用于将定位后的虹膜区域展开成固定分辨率的虹膜图像。
其中,所述精定位子模块包括依次连接的下采样单元、初次定位单元和再次定位单元,所述下采样单元用于对切割后的虹膜图像进行下采样,所述初次定位单元用于通过改进的Canny边缘检测算子和Hough圆检测对虹膜内外圆进行定位,所述再次定位单元用于以初次定位单元定位的参数在虹膜图像上进行精确定位。
其中,所述改进的Canny边缘检测算子为只对垂直方向进行非极大值的抑制的Canny边缘检测算子。
其中,所述改进的Canny边缘检测算子为只采用高阈值进行强边缘检测的Canny边缘检测算子。
本实施例设置光斑点填充子模块,很好地保留了虹膜图像的结构信息,填充后的虹膜图像可以有效地进行定位;设置的初次定位单元,其通过改进的Canny边缘检测算子和Hough圆检测对虹膜内外圆进行定位,便于虹膜的定位且提高了虹膜的速度;设置的第一次LBP算子处理子模块,增加了中心点与周围其它邻域的关联性,能够满足不同尺度和频率的图像纹理;设置的第二次LBP算子处理子模块、第三次LBP算子处理子模块和第四次LBP算子处理子模块,在不影响中心点与周围邻域的关联性下,不断降低编码长度,节约了存储空间,减少了计算量,提高了识别速度,增强了识别准确率,得到了较高的鲁棒性,使用CASIAV1.0虹膜库进行测试时,结果如下:
实施例4
参见图1,本实施例一种通过虹膜进行识别的ATM机输入装置,包括ATM机输入装置和与ATM机输入装置电信号连接的虹膜识别器,所述ATM机输入装置包括:
外框;
触控式屏幕模块包括一芯片,所述触控式屏幕模块嵌入所述外框内;
随机模块用以随机产生包括0-9及点号的一组数字,定义为随机数组,所述随机数组中的点号以及0-9中的每个数字至少出现一次;
处理器用以处理数据,且所述处理器通过导线连接于所述随机模块以及所述触控式屏幕模块的所述芯片。
优选地,其特征是,上述连结装置具有:
所述触控式屏幕模块上提供一键盘区,所述随机数组每一次均于所述键盘区显示出来,键盘区中所述点号以及0-9这10个符号的位置随机生成。
优选地,其特征是,所述随机数组内的数字和点号分布成四行呈矩阵排列。
优选地,其特征是,所述虹膜识别器包括:
(1)采样模块,用于获取、校正虹膜图像并采集虹膜图像的信息,由于实际获得的虹膜图像与标准采集的虹膜图像之间在同一个平面上会略有偏差,需要对实际获得的虹膜图像进行平面校正,设定图像校正子模块,所述图像校正子模块采用的校正公式为:
其中,I(x,y)A表示实际获得的虹膜图像,I(x,y)B表示标准采集的虹膜图像,实际获得的虹膜图像与标准采集的虹膜图像的各像素点值之间的标准差;
(2)预处理模块,用于对获取的虹膜图像进行定位和归一化处理;
优选地,其特征是,所述虹膜识别器还包括:
(3)特征编码模块,用于对虹膜图像的特征进行提取和编码,包括:
a、第一次LBP算子处理子模块:用于对虹膜图像中的任意一点nc与5×5窗内的23个像素点进行比较来计算LBP值,所述23个像素点以点nc为中心分布在点nc***,设nc的坐标为(xc,yc),LBP值的计算公式为:
其中,所述23个像素点标记为n0~n21,1st-LBP(xc,yc)的取值范围为[0,23];
b、第二次LBP算子处理子模块,用于在保证编码长度的前提下加强所述点nc与周围邻域的关联性,其以点nc的8个邻域像素点作为副中心点,记作nvc0,nvc1,...,nvc7,使用3×3窗,用窗内全体像素的均值代替副中心点的值,再使用LBP算子对中心点nc进行计算,计算公式为:
c、第三次LBP算子处理子模块,用于缩短经第二次LBP算子处理子模块处理后的矩形图像的特征编码长度,其以点nc为中心,在3×3的窗口中根据自定义函数{nvcj,|nvcj-nc|=rank4(nvci-nc|,i=0,1,...,7),j=0,1,2,3}选择4个副中心点进行计算,计算公式为:
其中,rank4(|nvci-nc|,i=0,1,...,7)表示对7个|nvci-nc|的值进行从小到大排列后取前4个数,nvcj表示选取的4个副中心点;
d、第四次LBP算子处理子模块:用于在第三次LBP算子处理子模块处理后的基础上继续降低编码长度,计算公式为:
计算完后输出表示虹膜图像特征的编码;
(4)编码匹配模块,用于接收所述表示虹膜图像特征的编码并将其与数据库中的特征编码进行比对,完成对身份的识别。
其中,所述预处理模块包括:
(1)光斑点填充子模块:用于对虹膜图像中检测出的每个光斑点进行填充,填充时利用与光斑点相邻的非光斑区域中的上下左右四个包络点的灰度值来计算光斑点的灰度值,定义虹膜图像中的一个光斑点为P0(x0,y0),所述四个包络点依次为P1(x1,y1)、P2(x2,y2)、P3(x3,y3)、P4(x4,y4),定义光斑点的灰度值计算公式为:
(2)粗定位子模块:与光斑点填充子模块连接,用于对虹膜图像进行切割并初步定位瞳孔位置,切割时以所述瞳孔位置为中心、5倍的半径来对填充光斑后的虹膜图像进行切割;
(3)精定位子模块:与粗定位子模块连接,用于精确定位虹膜区域;
(4)归一化子模块,用于将定位后的虹膜区域展开成固定分辨率的虹膜图像。
其中,所述精定位子模块包括依次连接的下采样单元、初次定位单元和再次定位单元,所述下采样单元用于对切割后的虹膜图像进行下采样,所述初次定位单元用于通过改进的Canny边缘检测算子和Hough圆检测对虹膜内外圆进行定位,所述再次定位单元用于以初次定位单元定位的参数在虹膜图像上进行精确定位。
其中,所述改进的Canny边缘检测算子为只对垂直方向进行非极大值的抑制的Canny边缘检测算子。
其中,所述改进的Canny边缘检测算子为只采用高阈值进行强边缘检测的Canny边缘检测算子。
本实施例设置光斑点填充子模块,很好地保留了虹膜图像的结构信息,填充后的虹膜图像可以有效地进行定位;设置的初次定位单元,其通过改进的Canny边缘检测算子和Hough圆检测对虹膜内外圆进行定位,便于虹膜的定位且提高了虹膜的速度;设置的第一次LBP算子处理子模块,增加了中心点与周围其它邻域的关联性,能够满足不同尺度和频率的图像纹理;设置的第二次LBP算子处理子模块、第三次LBP算子处理子模块和第四次LBP算子处理子模块,在不影响中心点与周围邻域的关联性下,不断降低编码长度,节约了存储空间,减少了计算量,提高了识别速度,增强了识别准确率,得到了较高的鲁棒性,使用CASIAV1.0虹膜库进行测试时,结果如下:
实施例5
参见图1,本实施例一种通过虹膜进行识别的ATM机输入装置,包括ATM机输入装置和与ATM机输入装置电信号连接的虹膜识别器,所述ATM机输入装置包括:
外框;
触控式屏幕模块包括一芯片,所述触控式屏幕模块嵌入所述外框内;
随机模块用以随机产生包括0-9及点号的一组数字,定义为随机数组,所述随机数组中的点号以及0-9中的每个数字至少出现一次;
处理器用以处理数据,且所述处理器通过导线连接于所述随机模块以及所述触控式屏幕模块的所述芯片。
优选地,其特征是,上述连结装置具有:
所述触控式屏幕模块上提供一键盘区,所述随机数组每一次均于所述键盘区显示出来,键盘区中所述点号以及0-9这10个符号的位置随机生成。
优选地,其特征是,所述随机数组内的数字和点号分布成四行呈矩阵排列。
优选地,其特征是,所述虹膜识别器包括:
(1)采样模块,用于获取、校正虹膜图像并采集虹膜图像的信息,由于实际获得的虹膜图像与标准采集的虹膜图像之间在同一个平面上会略有偏差,需要对实际获得的虹膜图像进行平面校正,设定图像校正子模块,所述图像校正子模块采用的校正公式为:
其中,I(x,y)A表示实际获得的虹膜图像,I(x,y)B表示标准采集的虹膜图像,实际获得的虹膜图像与标准采集的虹膜图像的各像素点值之间的标准差;
(2)预处理模块,用于对获取的虹膜图像进行定位和归一化处理;
优选地,其特征是,所述虹膜识别器还包括:
(3)特征编码模块,用于对虹膜图像的特征进行提取和编码,包括:
a、第一次LBP算子处理子模块:用于对虹膜图像中的任意一点nc与5×5窗内的24个像素点进行比较来计算LBP值,所述24个像素点以点nc为中心分布在点nc***,设nc的坐标为(xc,yc),LBP值的计算公式为:
其中,所述24个像素点标记为n0~n21,1st-LBP(xc,yc)的取值范围为[0,24];
b、第二次LBP算子处理子模块,用于在保证编码长度的前提下加强所述点nc与周围邻域的关联性,其以点nc的8个邻域像素点作为副中心点,记作nvc0,nvc1,...,nvc7,使用3×3窗,用窗内全体像素的均值代替副中心点的值,再使用LBP算子对中心点nc进行计算,计算公式为:
c、第三次LBP算子处理子模块,用于缩短经第二次LBP算子处理子模块处理后的矩形图像的特征编码长度,其以点nc为中心,在3×3的窗口中根据自定义函数{nvcj,|nvcj-nc|=rank4(|nvci-nc|,i=0,1,...,7),j=0,1,2,3}选择4个副中心点进行计算,计算公式为:
其中,rank4(|nvci-nc|,i=0,1,...,7)表示对7个|nvci-nc|的值进行从小到大排列后取前4个数,nvcj表示选取的4个副中心点;
d、第四次LBP算子处理子模块:用于在第三次LBP算子处理子模块处理后的基础上继续降低编码长度,计算公式为:
计算完后输出表示虹膜图像特征的编码;
(4)编码匹配模块,用于接收所述表示虹膜图像特征的编码并将其与数据库中的特征编码进行比对,完成对身份的识别。
其中,所述预处理模块包括:
(1)光斑点填充子模块:用于对虹膜图像中检测出的每个光斑点进行填充,填充时利用与光斑点相邻的非光斑区域中的上下左右四个包络点的灰度值来计算光斑点的灰度值,定义虹膜图像中的一个光斑点为P0(x0,y0),所述四个包络点依次为P1(x1,y1)、P2(x2,y2)、P3(x3,y3)、P4(x4,y4),定义光斑点的灰度值计算公式为:
(2)粗定位子模块:与光斑点填充子模块连接,用于对虹膜图像进行切割并初步定位瞳孔位置,切割时以所述瞳孔位置为中心、5倍的半径来对填充光斑后的虹膜图像进行切割;
(3)精定位子模块:与粗定位子模块连接,用于精确定位虹膜区域;
(4)归一化子模块,用于将定位后的虹膜区域展开成固定分辨率的虹膜图像。
其中,所述精定位子模块包括依次连接的下采样单元、初次定位单元和再次定位单元,所述下采样单元用于对切割后的虹膜图像进行下采样,所述初次定位单元用于通过改进的Canny边缘检测算子和Hough圆检测对虹膜内外圆进行定位,所述再次定位单元用于以初次定位单元定位的参数在虹膜图像上进行精确定位。
其中,所述改进的Canny边缘检测算子为只对垂直方向进行非极大值的抑制的Canny边缘检测算子。
其中,所述改进的Canny边缘检测算子为只采用高阈值进行强边缘检测的Canny边缘检测算子。
本实施例设置光斑点填充子模块,很好地保留了虹膜图像的结构信息,填充后的虹膜图像可以有效地进行定位;设置的初次定位单元,其通过改进的Canny边缘检测算子和Hough圆检测对虹膜内外圆进行定位,便于虹膜的定位且提高了虹膜的速度;设置的第一次LBP算子处理子模块,增加了中心点与周围其它邻域的关联性,能够满足不同尺度和频率的图像纹理;设置的第二次LBP算子处理子模块、第三次LBP算子处理子模块和第四次LBP算子处理子模块,在不影响中心点与周围邻域的关联性下,不断降低编码长度,节约了存储空间,减少了计算量,提高了识别速度,增强了识别准确率,得到了较高的鲁棒性,使用CASIAV1.0虹膜库进行测试时,结果如下:
最后应当说明的是,以上实施例仅用以说明本发明的技术方案,而非对本发明保护范围的限制,尽管参照较佳实施例对本发明作了详细地说明,本领域的普通技术人员应当理解,可以对本发明的技术方案进行修改或者等同替换,而不脱离本发明技术方案的实质和范围。
Claims (7)
1.一种通过虹膜进行识别的ATM机输入装置,其特征是,ATM机输入装置电信号连接虹膜识别器,所述ATM机输入装置包括:
外框;
触控式屏幕模块,所述触控式屏幕模块包括一芯片,所述触控式屏幕模块嵌入所述外框内;
随机模块,所述随即模块用以随机产生包括0-9及点号的一组数字,定义为随机数组,所述随机数组中的点号以及0-9中的每个数字至少出现一次;
处理器,所述处理器用以处理数据,且所述处理器通过导线连接于所述随机模块以及所述触控式屏幕模块的所述芯片;
所述虹膜识别器包括:
(1)采样模块,用于获取、校正虹膜图像并采集虹膜图像的信息,由于实际获得的虹膜图像与标准采集的虹膜图像之间在同一个平面上会略有偏差,需要对实际获得的虹膜图像进行平面校正,设定图像校正子模块,所述图像校正子模块采用的校正公式为:
其中,I(x,y)A表示实际获得的虹膜图像,I(x,y)B表示标准采集的虹膜图像,σb表示实际获得的虹膜图像与标准采集的虹膜图像的各像素点值之间的标准差;
(2)预处理模块,用于对获取的虹膜图像进行定位和归一化处理,其包括光斑点填充子模块,所述光斑点填充子模块用于对虹膜图像中检测出的每个光斑点进行填充,填充时利用与光斑点相邻的非光斑区域中的上下左右四个包络点的灰度值来计算光斑点的灰度值,定义虹膜图像中的一个光斑点为P0(x0,y0),所述四个包络点依次为P1(x1,y1)、P2(x2,y2)、P3(x3,y3)、P4(x4,y4),定义光斑点的灰度值计算公式为:
(3)特征编码模块,用于对虹膜图像的特征进行提取和编码,包括:
a、第一次LBP算子处理子模块:用于对虹膜图像中的任意一点nc与5×5窗内的K个像素点进行比较来计算LBP值,所述K个像素点以点nc为中心分布在点nc***,设nc的坐标为(xc,yc),LBP值的计算公式为:
其中,所述K个像素点标记为n0~nK,K的取值范围为[20,24],1st-LBP(xc,yc)的取值范围为[0,K];
b、第二次LBP算子处理子模块,用于在保证编码长度的前提下加强所述点nc与周围邻域的关联性,其以点nc的8个邻域像素点作为副中心点,记作nvc0,nvc1,...,nvc7,使用3×3窗,用窗内全体像素的均值代替副中心点的值,再使用LBP算子对中心点nc进行计算,计算公式为:
c、第三次LBP算子处理子模块,用于缩短经第二次LBP算子处理子模块处理后的虹膜图像的特征编码长度,其以点nc为中心,在3×3的窗口中根据自定义函数{nvcj,|nvcj-nc|=rank4(|nvci-nc|,i=0,1,...,7),j=0,1,2,3}选择4个副中心点进行计算,计算公式为:
其中,rank4(|nvci-nc|,i=0,1,...,7)表示对7个|nvci-nc|的值进行从小到大排列后取前4个数,nvcj表示选取的4个副中心点;
d、第四次LBP算子处理子模块:用于在第三次LBP算子处理子模块处理后的基础上继续降低编码长度,计算公式为:
计算完后输出表示虹膜图像特征的编码;
(4)编码匹配模块,用于接收所述表示虹膜图像特征的编码并将其与数据库中的特征编码进行比对,完成对身份的识别。
2.根据权利要求1所述的一种通过虹膜进行识别的ATM机输入装置,其特征是,上述ATM机输入装置具有:
所述触控式屏幕模块上提供一键盘区,所述随机数组每一次均于所述键盘区显示出来,键盘区中所述点号以及0-9这10个符号的位置随机生成。
3.根据权利要求2所述的一种通过虹膜进行识别的ATM机输入装置,其特征是,所述随机数组内的数字和点号分布成四行呈矩阵排列。
4.根据权利要求3所述的一种通过虹膜进行识别的ATM机输入装置,其特征是,所述预处理模块还包括:
(1)粗定位子模块:与光斑点填充子模块连接,用于对虹膜图像进行切割并初步定位瞳孔位置,切割时以所述瞳孔位置为中心、5倍的瞳孔半径来对填充光斑后的虹膜图像进行切割;
(2)精定位子模块:与粗定位子模块连接,用于精确定位虹膜区域;
(3)归一化子模块,用于将精确定位后的虹膜区域展开成固定分辨率的虹膜图像。
5.根据权利要求4所述的一种通过虹膜进行识别的ATM机输入装置,其特征是,所述精定位子模块包括依次连接的下采样单元、初次定位单元和再次定位单元,所述下采样单元用于对切割后的虹膜图像进行下采样,所述初次定位单元用于通过改进的Canny边缘检测算子和Hough圆检测对虹膜内外圆进行定位,所述再次定位单元用于以初次定位单元定位的参数在虹膜图像上进行精确定位。
6.根据权利要求5所述的一种通过虹膜进行识别的ATM机输入装置,其特征是,所述改进的Canny边缘检测算子为只对垂直方向进行非极大值的抑制的Canny边缘检测算子。
7.根据权利要求6所述的一种通过虹膜进行识别的ATM机输入装置,其特征是,所述改进的Canny边缘检测算子为只采用高阈值进行强边缘检测的Canny边缘检测算子。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610548331.8A CN106204958B (zh) | 2016-07-08 | 2016-07-08 | 一种通过虹膜进行识别的atm机输入装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610548331.8A CN106204958B (zh) | 2016-07-08 | 2016-07-08 | 一种通过虹膜进行识别的atm机输入装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN106204958A CN106204958A (zh) | 2016-12-07 |
CN106204958B true CN106204958B (zh) | 2018-10-02 |
Family
ID=57477192
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201610548331.8A Expired - Fee Related CN106204958B (zh) | 2016-07-08 | 2016-07-08 | 一种通过虹膜进行识别的atm机输入装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN106204958B (zh) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107424347B (zh) * | 2017-04-12 | 2018-12-21 | 深圳市创智成科技股份有限公司 | 一种基于虹膜识别的atm取现*** |
CN107273834A (zh) * | 2017-06-06 | 2017-10-20 | 宋友澂 | 一种虹膜识别方法及识别器 |
CN107609370A (zh) * | 2017-08-29 | 2018-01-19 | 深圳怡化电脑股份有限公司 | 一种身份识别***、方法及其装置 |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012108796A (ja) * | 2010-11-18 | 2012-06-07 | Hitachi Omron Terminal Solutions Corp | 自動取引システム、自動取引方法、および自動取引装置 |
KR102179156B1 (ko) * | 2013-07-12 | 2020-11-16 | 삼성전자주식회사 | 전자 장치의 입력 장치 및 그를 이용한 입력 방법 |
CN104063965A (zh) * | 2013-11-25 | 2014-09-24 | 苏州天鸣信息科技有限公司 | 一种atm机输入装置 |
-
2016
- 2016-07-08 CN CN201610548331.8A patent/CN106204958B/zh not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
CN106204958A (zh) | 2016-12-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111723585B (zh) | 一种风格可控的图像文本实时翻译与转换方法 | |
Chen et al. | An end-to-end shape modeling framework for vectorized building outline generation from aerial images | |
CN109029381B (zh) | 一种隧道裂缝的检测方法、***及终端设备 | |
US9829309B2 (en) | Depth sensing method, device and system based on symbols array plane structured light | |
CN101882210B (zh) | 矩阵式二维条码解码芯片及其解码方法 | |
CN109146892A (zh) | 一种基于美学的图像裁剪方法及装置 | |
CN108694393A (zh) | 一种基于深度卷积的证件图像文本区域提取方法 | |
CN108416791A (zh) | 一种基于双目视觉的并联机构动平台位姿监测与跟踪方法 | |
CN109299720A (zh) | 一种基于轮廓片段空间关系的目标识别方法 | |
CN106204958B (zh) | 一种通过虹膜进行识别的atm机输入装置 | |
CN111079683A (zh) | 基于卷积神经网络的遥感图像云雪检测方法 | |
CN101908128B (zh) | Aztec Code条码解码芯片及其解码方法 | |
CN110634131B (zh) | 一种裂缝图像识别与建模方法 | |
CN112529827A (zh) | 遥感图像融合模型的训练方法及装置 | |
CN106248070B (zh) | 一种基于虹膜识别启动的导航仪 | |
CN117095275A (zh) | 一种数据中心资产盘点方法、***、装置及存储介质 | |
WO2014020820A1 (ja) | 符号読取装置および符号読取方法 | |
CN117058367A (zh) | 高分辨率遥感影像建筑物语义分割方法及装置 | |
CN105959121B (zh) | 一种具有身份验证功能的移动终端 | |
CN113658195B (zh) | 图像分割方法、装置及电子设备 | |
CN111079749A (zh) | 一种带姿态校正的端到端商品价签文字识别方法和*** | |
CN112884824B (zh) | 一种基于卷积网络多尺度特征融合的鞋印身高估计方法 | |
CN106206112B (zh) | 一种通过虹膜识别的控制开关 | |
CN106022320B (zh) | 一种基于虹膜识别的自动控制装置 | |
CN111476308B (zh) | 基于先验几何约束的遥感影像分类方法、装置和电子设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
TA01 | Transfer of patent application right |
Effective date of registration: 20180815 Address after: 224000 5, Blaupunkt road 199, Yancheng City environmental protection science and Technology City, Jiangsu (28) Applicant after: Yancheng Kuang Zhi Technology Co., Ltd. Address before: No. 32, Zhenhai District, Zhejiang Province, Zhenhai District, Drum Tower East Road, Ningbo, Zhejiang Applicant before: Zhong Linchao |
|
TA01 | Transfer of patent application right | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20181002 Termination date: 20210708 |
|
CF01 | Termination of patent right due to non-payment of annual fee |