CN105930786A - 一种银行自助厅异常行为检测方法 - Google Patents
一种银行自助厅异常行为检测方法 Download PDFInfo
- Publication number
- CN105930786A CN105930786A CN201610237880.3A CN201610237880A CN105930786A CN 105930786 A CN105930786 A CN 105930786A CN 201610237880 A CN201610237880 A CN 201610237880A CN 105930786 A CN105930786 A CN 105930786A
- Authority
- CN
- China
- Prior art keywords
- target
- image
- moving
- abnormal behavior
- tracking
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 206010000117 Abnormal behaviour Diseases 0.000 title claims abstract description 30
- 238000001514 detection method Methods 0.000 title claims abstract description 18
- 238000004422 calculation algorithm Methods 0.000 claims abstract description 30
- 238000000034 method Methods 0.000 claims abstract description 19
- 238000001914 filtration Methods 0.000 claims abstract description 9
- 230000005484 gravity Effects 0.000 claims abstract description 9
- 230000008569 process Effects 0.000 claims abstract description 6
- 241001424438 Surendra Species 0.000 claims abstract description 5
- 230000003287 optical effect Effects 0.000 claims description 26
- 238000007781 pre-processing Methods 0.000 claims description 7
- 230000008859 change Effects 0.000 claims description 5
- 238000004364 calculation method Methods 0.000 claims description 4
- 238000000605 extraction Methods 0.000 claims description 3
- 238000012545 processing Methods 0.000 claims description 3
- 235000002566 Capsicum Nutrition 0.000 claims description 2
- 239000006002 Pepper Substances 0.000 claims description 2
- 235000016761 Piper aduncum Nutrition 0.000 claims description 2
- 235000017804 Piper guineense Nutrition 0.000 claims description 2
- 244000203593 Piper nigrum Species 0.000 claims description 2
- 235000008184 Piper nigrum Nutrition 0.000 claims description 2
- 150000003839 salts Chemical class 0.000 claims description 2
- 238000012706 support-vector machine Methods 0.000 claims 1
- 230000006399 behavior Effects 0.000 abstract description 14
- 230000002159 abnormal effect Effects 0.000 abstract description 7
- 238000004458 analytical method Methods 0.000 description 3
- 238000012544 monitoring process Methods 0.000 description 3
- 239000013598 vector Substances 0.000 description 3
- 230000006866 deterioration Effects 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000013461 design Methods 0.000 description 1
- 238000002474 experimental method Methods 0.000 description 1
- 230000004927 fusion Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000003909 pattern recognition Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/20—Movements or behaviour, e.g. gesture recognition
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/24—Classification techniques
- G06F18/241—Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
- G06F18/2411—Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches based on the proximity to a decision surface, e.g. support vector machines
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Data Mining & Analysis (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Evolutionary Computation (AREA)
- Bioinformatics & Computational Biology (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Artificial Intelligence (AREA)
- Life Sciences & Earth Sciences (AREA)
- Evolutionary Biology (AREA)
- General Health & Medical Sciences (AREA)
- Psychiatry (AREA)
- Social Psychology (AREA)
- Human Computer Interaction (AREA)
- Multimedia (AREA)
- Image Analysis (AREA)
Abstract
本发明公开了一种银行自助厅中异常行为检测方法,旨在检测ATM自助厅中的跌倒、打架以及抢劫等异常行为。该方法包括以下步骤:使用基于帧间—背景差分相结合的Surendra移动物体检测算法,对ATM自助厅中移动目标进行检测,提取前景目标;使用基于Kalman滤波的CamShift跟踪算法对移动目标进行跟踪定位;在异常动作检测识别方面,对当前帧中运动目标所具有的一些特征信息进行提取,包括所处的重心位置到搜索窗底部之间的距离,物体移动过程中呈现出的光流信息;通过SVM建立行为检测器来对ATM自助厅中出现的异常行为进行分类判断。本发明能够有效的识别出ATM自助厅中出现的异常行为,进而减少犯罪行为发生。
Description
技术领域
本发明涉及行为识别监控***设计,具体说是对视频序列中的运动目标进行检测与跟踪处理,并对目标的异常行为进行分析和识别,如果发现异常行为则驱动报警装置进行报警。
背景技术
在犯罪行为高发并配备监控设施的背景下,为了以较少工作人员来进行高质量高效率的安防工作,有必要研究、实现一套基于嵌入式***和模式识别的人员异常行为分析与检测***,当检测到异常行为时,则立即对该行为目标进行警告,同时通知安防人员及时干预、处理异常情况,减少案件恶化发展的可能性。
发明内容
本发明的目的是提出一种银行自助厅异常行为检测方法,旨在检测ATM自助厅中的跌倒、打架以及抢劫等异常行为。
本发明的目的是按以下方式实现的,首先,对视频图像进行预处理;然后,对目标进行检测;其次,对目标进行跟踪;再次,为了对异常动作进行检测识别;最后,通过SVM建立行为检测器来对ATM自助厅中出现的异常行为进行分类判断。具体算法如下:
首先,对视频图像进行预处理:利用直方图均衡化算法对图像进行处理,将采集到的彩色图像转化成单通道的灰度图像,采用中值滤波来对采集的图像进行去噪处理。
然后,对目标进行检测:采用基于帧间—背景差分相结合的Surendra移动物体检测算法,对移动目标进行检测,提取前景目标。
其次,对目标进行跟踪:使用基于Kalman滤波的CamShift跟踪算法对移动目标进行跟踪定位。
再次,为了对异常动作进行检测识别,对当前帧中运动目标所具有的两类特征信息进行提取。
最后,通过SVM建立行为检测器来对ATM自助厅中出现的异常行为进行分类判断。
本发明的优异效果如下:该发明提出银行自助厅异常行为检测方法,可以帮助实现一套异常行为识别监控***,当检测到异常行为时,则立即对该行为目标进行警告,同时通知安防人员及时干预、处理异常情况,减少案件恶化发展的可能性。
附图说明
本发明有如下附图:
图1:异常行为分析方法总体流程图,图2:Surendra检测算法流程图,图3:Kalman-CamShift跟踪算法流程图,图4:基于SVM的行为识别算法总体架构,图5,运动跟踪对象窗信息结构体。
具体实施方式
参照说明书附图对本发明作以下详细地说明。
本发明包含以下内容,首先使用基于帧间—背景差分相结合的Surendra移动物体检测算法,对ATM自助厅中移动目标进行检测,提取前景目标;然后使用基于Kalman滤波的CamShift跟踪算法对移动目标进行跟踪定位;其次在异常动作检测识别方面,对当前帧中运动目标所具有的某些特征信息进行提取,包括所处的重心位置到搜索窗底部之间的距离,物体移动过程中呈现出的光流信息;最后通过SVM建立行为检测器来对ATM自助厅中出现的异常行为进行分类判断。具体算法如下:
首先,对视频图像进行预处理:利用直方图均衡化算法对图像进行处理,进而减少因光线变化而产生的图像模糊现象;将采集到的彩色图像转化成单通道的灰度图像,进而减少计算量;采用中值滤波来对采集的图像进行去噪处理,去除图像当中的椒盐噪声。
然后,对目标进行检测:采用基于帧间—背景差分相结合的Surendra移动物体检测算法,对移动目标进行检测,提取前景目标。
其基本思路是根据当前帧与上一帧做差值运算,获取二值化前景目标,确定目标的移动区域与剩余的静态区域。如果出现移动区域,则进行背景更新,接着使用背景差分法进行前景检测;
该算法可以分成以下几个步骤:
步骤1:将第一帧图像I0作为背景B0;
步骤2:设置二值化阈值T(根据实验效果选取80),当前的循环次数m=1,最大迭代次数m=MAX-STEPS。
步骤3:根据帧间差分法的原理计算当前帧Ii与前一帧Ii-1的帧差,其二值化图像Di为:
其中,Ii表示视频数据的当前帧,Ii-1表示视频数据的上一帧图片,|Ii-Ii-1|为当前帧与前一帧的帧差,Di(x,y)为帧差法后的二值化图像在(x,y)处的灰度值。
步骤4:根据步骤3中所得到的Di(x,y)更新背景图像Bi,即:
其中,Bi(x,y)表示背景图像在像素点(x,y)处的灰度值,α表示迭代更新系数,实验证明,当α为0.005时,可以得到较好的背景图像。
步骤5:迭代次数m=m+1,返回步骤3;当迭代次数m=MAX-STEPS时结束,此时,背景图像Bi为当前背景图像。
步骤6:当前帧图像Ii与当前背景图像Bi进行背景差分运算,即:
di(x,y)=|Ii(x,y)-Bi(x,y)| (3-8)
其中,di(x,y)为进行背景差分计算后的点(x,y)处的灰度值;DBi(x,y)为di(x,y)的二值化结果。
其次,对目标进行跟踪:使用基于Kalman滤波的CamShift跟踪算法对移动目标进行跟踪定位;该跟踪算法实现步骤如下:
步骤1:初始化。通过连续时间段的前景目标信息来获得输入数据信息,将CamShift算法的搜索窗进行初始化;同时初始化Kalman滤波器并对其进行分配,使用搜索窗的初始位置来对其状态向量xk中的变量xk,yk进行初始化,vxk,vyk初始化为零。
步骤2:预测。依据移动目标在上一帧中的位置、方向、速度等内容,使用Kalman方法来判断物体在当前帧中所具有的特征。
步骤3:匹配。为了获取当前帧中目标的准确信息,首先可以通过Kalman获取其预测信息,根据Kalman得到的结果再利用跟踪算法通过匹配搜索,搜索范围在预测信息的领域范围内。
步骤4:更新。根据跟踪算法得到的目标的准确信息对滤波器的观测值进行赋值,来更新滤波器中的各个参数。
当产生移动物体相互遮拦时,可以通过卡尔曼滤波的CamShift连续自适应运动目标跟踪算法在遮拦还未发生时对目标物体在下一帧中的位置进行精确定位;当移动物体发生遮挡或者相互之间产生干扰时也可以进行正确的跟踪定位,该融合算法可以有效地改善对移动物体跟踪的鲁棒性。
再次,为了对异常动作进行检测识别,对当前帧中运动目标所具有的两类特征信息进行提取:包括所处的重心位置到搜索窗底部之间的距离,物体移动过程中呈现出的光流信息特征。其具体的算法实现步骤如下:
步骤1:重心特征的提取:
当人体正常行走时,重心位置几乎没有变化。当有异常行为发生时,重心位置的变化是剧烈的。对移动目标在每一帧中的坐标进行定位,并对每一个运动目标分配计算数据结构,将跟踪到的每个运动目标的位置信息以及跟踪窗信息放到该结构体中。
结构体中的点(x,y)存储目标跟踪窗的重心坐标,近似认为其为目标的质心坐标;目标对象矩形区域的尺寸大小则由width和height表示。
则运动过程中重心到跟踪窗底部的高度表示为:
步骤2:光流特征的提取:
运动过程中,图像会显示物体所包含的光流信息,可以根据视频中一段连续时间段内,某区域内的像素变化情况来计算该区域内物体的运动信息。结合Lucas-Kanade算法对图像中的光流值进行计算,并提取光流值的变化特征。
使用Lucas-Kanade算法对图像中的光流值进行计算,得到水平和垂直方向上的光流矢量:
其中并且分别代表图像f(x,y,t)中点(x,y)处的光流,fx,fy和ft分别表示图像在点(x,y,t)上相应方向的差分。
根据光流矢量计算光流幅值:v越大目标运动越剧烈。
设运动目标的总光流的幅值为β,则β表示为:
其中vt(x,y)表示运动目标在t时刻时点(x,y)处的光流值的大小。β表示运动目标在t时刻时所有光流值的总和。它反映了该帧中所有目标的运动激烈程度,β越大,则该图像帧中所有目标行为程度越剧烈;反之所有目标的行为比较平缓。
设该图像帧中光流的像素个数为nt(nt不为0),则nt定义如下:
设该图像帧中目标光流的平均值为avgt,则avgt定义如下:
设该图像帧中目标的最大光流的幅值为γ,则γ定义如下:
其中,代表目标在t时刻时所有光流的上限值。γ表示运动目标在t时刻时光流值的最大值,它反映了当前帧中是否有突发性异常行为,比如抢取款人包裹的行为;γ值越大,则容易发生越激烈的行为;反之则趋于正常行为。
最后,通过SVM建立行为检测器来对ATM自助厅中出现的异常行为进行分类判断。结合提取的重心运动特征和光流运动特征进行检测和判断。
最后说明的是,以上所述仅为本发明的较佳实例而已,并不用以限制本发明,凡在本发明的精神和原则之内所作的任何修改,等同替换和改进等,均应包含在本发明的保护范围之内。
Claims (5)
1.一种银行自助厅异常行为检测方法,其特征在于,包括以下步骤:
步骤一、图像预处理:对采集到的视频图像进行预处理操作;
步骤二、运动目标检测:对预处理操作后的视频图像中的运动目标进行前景提取;
步骤三、运动目标跟踪:采用基于Kalman滤波的Camshift跟踪算法对提取到的前景目标进行跟踪定位;
步骤四、运动目标特征1提取:计算前景目标重心位置到搜索窗底部之间的距离;
步骤五、运动目标特征2提取:计算物体移动过程中呈现出的光流信息;
步骤六、判断识别:根据所计算的两种特征,使用支持向量机建立异常行为检测器,利用采集的视频数据对检测器进行训练,根据训练好的检测器来检测视频图像中是否有异常行为发生。
2.如权利要求1所示的一种银行自助厅异常行为检测方法,其特征在于:所述步骤一中的图像预处理包括如下步骤:
步骤S1:利用直方图均衡化算法对图像进行处理,进而减少因光线变化而产生的图像模糊现象;
步骤S2:将采集到的彩色图像转化成单通道的灰度图像,进而减少计算量;
步骤S3:采用中值滤波来对采集的图像进行去噪处理,去除图像当中的椒盐噪声。
3.如权利要求1所示的一种银行自助厅异常行为检测方法,其特征在于:所述步骤二中运动目标检测方法是使用基于帧间—背景差分相结合的Surendra检测算法来提取视频中运动目标的前景。
4.如权利要求1所示的一种银行自助厅异常行为检测方法,其特征在于:所述步骤三中运动目标跟踪包含如下步骤:
步骤S1、初始化搜索窗以及分配并初始化Kalman滤波器;
步骤S2、根据上一帧中目标位置使用kalman滤波器预测目标在当前帧中的位置;
步骤S3、使用Camshift跟踪算法对预测领域范围内对目标进行搜索匹配从而进行跟踪。
5.如权利要求1所示的一种银行自助厅异常行为检测方法,其特征在于:所述步骤五中运动目标特征2提取包含如下步骤:
步骤S1、利用Lucas-Kanade算法求取运动目标的光流;
步骤S2、计算目标总光流幅值:
步骤S3、计算目标光流的平均值:
光流的像素个数为nt;
步骤S4、计算目标的最大光流幅值:
。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610237880.3A CN105930786A (zh) | 2016-04-18 | 2016-04-18 | 一种银行自助厅异常行为检测方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610237880.3A CN105930786A (zh) | 2016-04-18 | 2016-04-18 | 一种银行自助厅异常行为检测方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN105930786A true CN105930786A (zh) | 2016-09-07 |
Family
ID=56839219
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201610237880.3A Pending CN105930786A (zh) | 2016-04-18 | 2016-04-18 | 一种银行自助厅异常行为检测方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN105930786A (zh) |
Cited By (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106482711A (zh) * | 2016-10-18 | 2017-03-08 | 哈尔滨工业大学 | 一种基于灰度特征提取和稠密光流法的室内定位方法 |
CN106981104A (zh) * | 2017-03-24 | 2017-07-25 | 北京悦畅科技有限公司 | 一种收费监控方法、装置、服务器和*** |
CN108257149A (zh) * | 2017-12-25 | 2018-07-06 | 翟玉婷 | 一种基于光流场的舰船目标实时跟踪检测方法 |
CN109842738A (zh) * | 2019-01-29 | 2019-06-04 | 北京字节跳动网络技术有限公司 | 用于拍摄图像的方法和装置 |
CN110276781A (zh) * | 2018-03-13 | 2019-09-24 | 天津工业大学 | 运动目标跟踪方法 |
CN110895671A (zh) * | 2018-09-13 | 2020-03-20 | 纬创资通股份有限公司 | 跌倒检测方法以及使用此方法的电子*** |
CN111325073A (zh) * | 2018-12-17 | 2020-06-23 | 上海交通大学 | 基于运动信息聚类的监控视频异常行为检测方法 |
CN113052147A (zh) * | 2021-04-30 | 2021-06-29 | 北京邮电大学 | 一种行为识别方法及装置 |
CN113792624A (zh) * | 2021-08-30 | 2021-12-14 | 河南林业职业学院 | 一种银行atm机预警安防监控的方法 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP1868162A2 (en) * | 2006-06-16 | 2007-12-19 | National Institute of Advanced Industrial Science and Technology | Unusual action detection based on image analysis involving CHLAC feature extraction |
CN103150579A (zh) * | 2013-02-25 | 2013-06-12 | 东华大学 | 一种基于视频序列的人体异常行为检测方法 |
-
2016
- 2016-04-18 CN CN201610237880.3A patent/CN105930786A/zh active Pending
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP1868162A2 (en) * | 2006-06-16 | 2007-12-19 | National Institute of Advanced Industrial Science and Technology | Unusual action detection based on image analysis involving CHLAC feature extraction |
CN103150579A (zh) * | 2013-02-25 | 2013-06-12 | 东华大学 | 一种基于视频序列的人体异常行为检测方法 |
Non-Patent Citations (6)
Title |
---|
冯伟兴 等: "《Visual C++数字图像模式识别典型案例详解》", 31 July 2012 * |
王聪: "基于银行自助厅监控视频的打斗、抢劫检测算法", 《哈尔滨工业大学》 * |
胡加佩 等: "微空间场景与视频分析相结合的审讯室异常行为检测", 《地球信息科学学报》 * |
莫林 等: "一种基于背景减除与三帧差分的运动目标检测算法", 《微计算机信息》 * |
赵春晖 等: "《视频图像运动目标分析》", 30 June 2011 * |
马平华 等: "基于改进型Camshift和卡尔曼滤波器的车辆跟踪算法", 《井冈山大学学报(自然科学版)》 * |
Cited By (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106482711A (zh) * | 2016-10-18 | 2017-03-08 | 哈尔滨工业大学 | 一种基于灰度特征提取和稠密光流法的室内定位方法 |
CN106482711B (zh) * | 2016-10-18 | 2018-10-09 | 哈尔滨工业大学 | 一种基于灰度特征提取和稠密光流法的室内定位方法 |
CN106981104A (zh) * | 2017-03-24 | 2017-07-25 | 北京悦畅科技有限公司 | 一种收费监控方法、装置、服务器和*** |
CN108257149A (zh) * | 2017-12-25 | 2018-07-06 | 翟玉婷 | 一种基于光流场的舰船目标实时跟踪检测方法 |
CN110276781A (zh) * | 2018-03-13 | 2019-09-24 | 天津工业大学 | 运动目标跟踪方法 |
CN110895671A (zh) * | 2018-09-13 | 2020-03-20 | 纬创资通股份有限公司 | 跌倒检测方法以及使用此方法的电子*** |
CN110895671B (zh) * | 2018-09-13 | 2022-11-08 | 纬创资通股份有限公司 | 跌倒检测方法以及使用此方法的电子*** |
CN111325073A (zh) * | 2018-12-17 | 2020-06-23 | 上海交通大学 | 基于运动信息聚类的监控视频异常行为检测方法 |
CN111325073B (zh) * | 2018-12-17 | 2024-02-20 | 上海交通大学 | 基于运动信息聚类的监控视频异常行为检测方法 |
CN109842738A (zh) * | 2019-01-29 | 2019-06-04 | 北京字节跳动网络技术有限公司 | 用于拍摄图像的方法和装置 |
CN113052147A (zh) * | 2021-04-30 | 2021-06-29 | 北京邮电大学 | 一种行为识别方法及装置 |
CN113792624A (zh) * | 2021-08-30 | 2021-12-14 | 河南林业职业学院 | 一种银行atm机预警安防监控的方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN105930786A (zh) | 一种银行自助厅异常行为检测方法 | |
CN107527009B (zh) | 一种基于yolo目标检测的遗留物检测方法 | |
CN112016414A (zh) | 一种检测高空抛物事件的方法、装置及楼面智能监控*** | |
Saravanakumar et al. | Multiple human object tracking using background subtraction and shadow removal techniques | |
CN111881853B (zh) | 一种超大桥隧中异常行为识别方法和装置 | |
Sengar et al. | Detection of moving objects based on enhancement of optical flow | |
Johnsen et al. | Real-time object tracking and classification using a static camera | |
Kumar et al. | Multiple cameras using real time object tracking for surveillance and security system | |
Jiang et al. | Multiple pedestrian tracking using colour and motion models | |
Tripathi et al. | A framework for abandoned object detection from video surveillance | |
Patel et al. | Moving object tracking techniques: A critical review | |
KR101243294B1 (ko) | 이동 객체 추출 및 추적 방법 및 장치 | |
WO2012141663A1 (en) | A method for individual tracking of multiple objects | |
Zhang et al. | A KLT-based approach for occlusion handling in human tracking | |
Din et al. | Abandoned object detection using frame differencing and background subtraction | |
CN110580708B (zh) | 一种快速移动检测方法、装置及电子设备 | |
JP5679760B2 (ja) | 侵入物体検出装置 | |
Patel et al. | Human tracking in video surveillance | |
Wang | Research and implementation of intrusion detection algorithm in video surveillance | |
JP5222908B2 (ja) | 崩落検知システム及び崩落検知方法 | |
Lee et al. | Hostile intent and behaviour detection in elevators | |
phadke | Robust multiple target tracking under occlusion using Fragmented Mean Shift and Kalman Filter | |
Goswami et al. | Unusual event detection in low resolution video for enhancing ATM security | |
Pavithradevi et al. | Detection of suspicious activities in public areas using staged matching technique | |
Tripathi et al. | A framework for suspicious object detection from surveillance video |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20160907 |
|
RJ01 | Rejection of invention patent application after publication |