CN108460330A - 一种非可控条件下快速准确的人脸识别装置 - Google Patents
一种非可控条件下快速准确的人脸识别装置 Download PDFInfo
- Publication number
- CN108460330A CN108460330A CN201810046396.1A CN201810046396A CN108460330A CN 108460330 A CN108460330 A CN 108460330A CN 201810046396 A CN201810046396 A CN 201810046396A CN 108460330 A CN108460330 A CN 108460330A
- Authority
- CN
- China
- Prior art keywords
- image
- face
- information
- conditions
- controllable
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000002452 interceptive effect Effects 0.000 claims abstract description 20
- 238000000605 extraction Methods 0.000 claims abstract description 8
- 239000000523 sample Substances 0.000 claims abstract description 7
- 238000012544 monitoring process Methods 0.000 claims abstract description 6
- 238000012545 processing Methods 0.000 claims description 12
- 239000003086 colorant Substances 0.000 claims description 8
- 238000001514 detection method Methods 0.000 claims description 8
- 230000001815 facial effect Effects 0.000 claims description 7
- 238000005286 illumination Methods 0.000 claims description 6
- 238000007781 pre-processing Methods 0.000 claims description 6
- 238000006243 chemical reaction Methods 0.000 claims description 4
- 230000009471 action Effects 0.000 claims description 2
- 238000000034 method Methods 0.000 abstract description 23
- 230000008569 process Effects 0.000 abstract description 10
- 230000000875 corresponding effect Effects 0.000 abstract description 2
- 210000001508 eye Anatomy 0.000 description 17
- 238000010606 normalization Methods 0.000 description 11
- 238000001914 filtration Methods 0.000 description 8
- 238000005516 engineering process Methods 0.000 description 7
- 238000011160 research Methods 0.000 description 7
- 239000000203 mixture Substances 0.000 description 3
- 238000010586 diagram Methods 0.000 description 2
- 230000008030 elimination Effects 0.000 description 2
- 238000003379 elimination reaction Methods 0.000 description 2
- 230000004807 localization Effects 0.000 description 2
- 210000001747 pupil Anatomy 0.000 description 2
- 238000000926 separation method Methods 0.000 description 2
- 241001062009 Indigofera Species 0.000 description 1
- 238000013528 artificial neural network Methods 0.000 description 1
- 210000005252 bulbus oculi Anatomy 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000007689 inspection Methods 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 230000000877 morphologic effect Effects 0.000 description 1
- 230000009897 systematic effect Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/161—Detection; Localisation; Normalisation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/161—Detection; Localisation; Normalisation
- G06V40/162—Detection; Localisation; Normalisation using pixel segmentation or colour matching
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/168—Feature extraction; Face representation
- G06V40/171—Local features and components; Facial parts ; Occluding parts, e.g. glasses; Geometrical relationships
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Oral & Maxillofacial Surgery (AREA)
- General Health & Medical Sciences (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Image Processing (AREA)
- Image Analysis (AREA)
Abstract
本发明公开了一种非可控条件下快速准确的人脸识别装置,其包括:视频和红外光电图像采集设备、图像处理计算机,显示交互设备,图像采集设备与图像处理计算机连接,图像处理计算机与显示交互设备连接,图像采集设备通过探测单元采集实时监控图像信息数据并进行处理,为图像处理计算机提供图像信息,图像处理计算机进行人脸检测与人眼定位以及特征提取与人脸识别,为显示交互设备提供识别信息,显示交互设备通过显示控制台显示场景信息以及识别信息,根据用户事先设置好的识别提示阈值做相应动作。本发明提高了在非可控条件下的人脸识别速度、识别率。
Description
技术领域
本发明涉及一种计算机图像处理装置,特别是涉及一种非可控条件下快速准确的人脸识别计算机图像处理装置。
背景技术
人脸识别技术是生物识别领域中基于生理特征的一种识别技术,是以通过计算机提取人脸的特征,并据这些特征进行身份验证的一种技术。人脸的生物特征的唯一性和不易被复制的良好特性为身份鉴别提供了必要的前提,同其它生物特征识别技术相比,人脸识别技术具有操作简单、结果直观、隐蔽性好的优越性。因此,该问题引起国、内外众多方面的研究,提出多种方法。当前很多国家展开的有关人脸识别的研究,主要有美国、欧洲国家、日本等,著名的研究机构。研究的方法主要集中在模板匹配、示例学习、将神经网络用于人脸检测、基于隐马尔可夫模型的方法等几个方面。国内关于人脸自动识别的研究工作主要是集中在三大类方法的研究:基于几何特征的人脸正面自动识别方法、基于代数特征的人脸正面自动识别方法和基于连接机制的人脸正面自动识别方法。
众多人力和物力的投入使人脸识别的研究取得了***的成果。积累了许多成功的算法。可控条件下的人脸识别已趋于成熟,并逐步应用到现实生活中。
但由于非可控条件下的人脸图像的获取过程中的不确定性、人脸模式的多样性、人脸塑性变形的不确定性等。基于计算机视觉的人脸识别还达不到实际应用的要求,人脸识别的应用基本局限在信息安全、刑事侦破、出入口控制等邻域。
发明内容
本发明所要解决非可控条件下的人脸识别图像的获取过程中的不确定性、人脸模式的多样性、人脸塑性变形的不确定性等技术问题。本发明的目的是提供一种非可控条件下快速准确的人脸识别装置,以提高人脸识别速度、识别率。
本发明是通过以下技术方案实现的:
一种非可控条件下快速准确的人脸识别装置,其特征在于,包括图像采集设备、图像处理计算机、显示交互设备,其中所述图像采集设备与所述图像处理计算机连接,所述图像处理计算机与所述显示交互设备连接,所述图像采集设备包括探测单元和图像预处理单元,所述探测单元采集实时监控图像信息数据,所述图像预处理单元进行图像信息数据的预处理,并为所述图像处理计算机提供图像信息,所述图像处理计算机进行人脸检测与人眼定位以及特征提取与人脸识别,为所述显示交互设备提供识别信息,所述显示交互设备通过显示控制台显示场景信息以及识别信息,根据用户事先设置好的识别提示阈值做相应动作。
上述技术方案中,所述图像采集设备分别安装在人的正前方、前左方、前右方,所述图像采集设备包括视频监测设备和红外光电检测器,其中所述视频监测设备与所述红外光电监测器配合监测。
上述技术方案中,所述人脸检测检测图像中是否有人脸存在,如果有,就将人脸图像从背景中分离出来,并确定其在图像中的大小和位置,而人脸图像分为彩色图像和灰度图像,所述彩色图像的像素点是由红色、绿色、蓝色三原色混合而成,不同含量的红色、绿色、蓝色组成不同的颜色,所述灰度图像只含亮度信息,其亮度是连续变化的,灰度图像要把亮度值进行量化,分为0~255共256个等级,对图像进行光照补偿,然后将256个亮度等级的灰度图像通过适当的阀值选取,获得反应图像整体或局部特征的二值化图像。
上述技术方案中,所述人眼定位对人眼瞳孔位置进行了检测定位,采用形态学滤波的方法快速对眼睛位置粗略定位,再用精确眼睛区域二次定位法就可在短时间内找出眼睛位置,再通过几何归一化进行图像坐标旋转、缩放,把图像中的人脸变化到同一位置和大小。
上述技术方案中,所述特征提取与人脸识别对脸形、五官、肤色提取200多特征点,待识别的人脸特征被提取出来后,根据分类按照一对一或者一对多的方式进行特征匹配,提高特征匹配速度。
上述技术方案中,所述显示交互设备包括显示器控制台,所述显示器控制台叠加识别信息、视频信息以及控制和监测界面,操作员通过所述显示器控制台进行遥控操作、信息同步连续实时记录、存储和回放。
与现有技术相比,本发明具有如下的有益效果:
本发明图像处理单元采用全局处理滤波模块、几何归一化模块和灰度归一化模块、人眼定位模块、按脸形等分类进行特征的匹配模块,提高在非可控条件下,人脸识别速度、识别率。
附图说明
通过阅读参照以下附图对非限制性实施例所作的详细描述,本发明的其它特征、目的和优点将会变得更明显:
图1为本发明一种非可控条件下快速准确的人脸识别装置的结构示意图。
具体实施方式
下面结合具体实施例对本发明进行详细说明。以下实施例将有助于本领域的技术人员进一步理解本发明,但不以任何形式限制本发明。应当指出的是,对本领域的普通技术人员来说,在不脱离本发明构思的前提下,还可以做出若干变化和改进。这些都属于本发明的保护范围。
图1为本发明一种非可控条件下快速准确的人脸识别装置的结构示意图,如图1所示,本发明的一种非可控条件下快速准确的人脸识别装置,其特征在于,包括图像采集设备、图像处理计算机、显示交互设备,其中所述图像采集设备与所述图像处理计算机连接,所述图像处理计算机与所述显示交互设备连接,所述图像采集设备包括探测单元和图像预处理单元,所述探测单元采集实时监控图像信息数据,所述图像预处理单元进行图像信息数据的预处理,并为所述图像处理计算机提供图像信息,所述图像处理计算机进行人脸检测与人眼定位以及特征提取与人脸识别,为所述显示交互设备提供识别信息,所述显示交互设备通过显示控制台显示场景信息以及识别信息,根据用户事先设置好的识别提示阈值做相应动作。此外在***实时运行过程中将向用户提供对***参数进行调整的交互接口。
上述技术方案中,所述图像采集设备分别安装在人的正前方、前左方、前右方,所述图像采集设备包括视频监测设备和红外光电检测器,其中所述视频监测设备与所述红外光电监测器配合监测,可有效地解决复杂背景和目标的分离问题。
人脸检测检测图像中是否有人脸存在,如果有,就将人脸图像从背景中分离出来,并确定其在图像中的大小和位置。一般情况下,***获取的原始图像由于受到各种条件的限制和干扰,往往不能直接使用,必须在图像处理的早期阶段对它进行灰度校正、噪声过滤等图像预处理(高层的图像预处理)。图像增强就是有选择性地突出图像中用户感兴趣的特征。
图像的滤波是为了改善图像质量,避免噪声对抽取图像特征的影响,需要消除图像的噪声。全局处理(包括Wiener滤波、Kalman滤波等方法)滤波。高层的图像预处理还包括灰度归一化和几何归一化。
而人脸图像分为彩色图像和灰度图像,所述彩色图像的像素点是由红色、绿色、蓝色三原色混合而成,不同含量的红色、绿色、蓝色组成不同的颜色,所述灰度图像只含亮度信息,其亮度是连续变化的,灰度图像要把亮度值进行量化,分为0~255共256个等级,对图像进行光照补偿,以此克服光照对识别的影响。然后将256个亮度等级的灰度图像通过适当的阀值选取,获得反应图像整体或局部特征的二值化图像。凸现出感兴趣的轮廓,在人脸识别中二值化用以把人的头发、眼睛、脸的轮廓及背影与人脸的亮域分开。
特征提取与人脸识别对脸形、五官、肤色提取200多特征点,待识别的人脸特征被提取出来后,根据分类按照一对一或者一对多的方式进行特征匹配,提高特征匹配速度。“一对一”是确定输入的图像是图像库中的一个人;“一对多”是验证输入图像的人的身份是否属实。
显示交互设备包括显示器控制台,所述显示器控制台叠加识别信息、视频信息以及控制和监测界面,操作员通过所述显示器控制台进行遥控操作、信息同步连续实时记录、存储和回放。
关键信息处理通过综合图像处理单元(图像处理计算机)主要完成本项目的核心流程,考虑移植的方便以及管理维护的便利,相关算法采用模块封装,由全局处理滤波模块、几何归一化模块和灰度归一化模块、人眼定位模块、按脸形等分类进行特征的匹配模块等组成。
程序模块是实现算法(一定功能)的程序段,功能如下:
全局处理滤波模块、滤波是为了改善图像质量,避免噪声对抽取图像特征的影响,需要消除图像的噪声。全局处理(包括Wiener滤波、Kalman滤波等方法)滤波。
几何归一化模块进行图像坐标旋转、缩放,把图像中的人脸变化到同一位置和大小,便于特征匹配。
灰度归一化模块、人脸图像分为彩色图像和灰度图像,彩色图像的像素点是由红色、绿色、蓝色三原色混合而成,不同含量的红色、绿色、蓝色组成不同的颜色,灰度图像只含亮度信息,其亮度是连续变化的,灰度图像要把亮度值进行量化,分为0~255共256 个等级,对图像进行光照补偿,以此克服光照对识别的影响。然后将256个亮度等级的灰度图像通过适当的阀值选取,获得反应图像整体或局部特征的二值化图像。凸现出感兴趣的轮廓,在人脸识别中二值化用以把人的头发、眼睛、脸的轮廓及背影与人脸的亮域分开。
人眼定位模块、对人眼瞳孔位置进行了检测定位,采用形态学滤波的方法快速对眼睛位置粗略定位,再用精确眼睛区域二次定位法就可在短时间内找出眼睛位置,再通过几何归一化进行图像坐标旋转、缩放,把图像中的人脸变化到同一位置和大小。
按脸形等分类进行特征的匹配模块特征提取与人脸识别对脸形、五官、肤色提取200 多特征点,待识别的人脸特征被提取出来后,根据分类按照一对一或者一对多的方式进行特征匹配,提高特征匹配速度。“一对一”是确定输入的图像是图像库中的一个人;“一对多”是验证输入图像的人的身份是否属实。
综上所述,本发明可用于非可控条件下的人脸识别。图像采集设备的视频监测设备具有弱光高清探测,与选配红外光电监测器配合,可有效地解决复杂背景和目标的分离问题。图像处理单元(图像处理计算机)采用全局处理滤波模块、几何归一化模块和灰度归一化模块、人眼定位模块、按脸形等分类进行特征的匹配模块,提高在非可控条件下,人脸识别速度、识别率。显示交互设备由显示器控制台组成,显示器可叠加识别信息、视频信息,***的控制和监测界面等,操作员可通过显示器控制台对设备进行遥控操作,适用范围广。
本领域技术人员知道,除了以纯计算机可读程序代码方式实现本发明提供的***及其各个装置、模块、单元以外,完全可以通过将方法步骤进行逻辑编程来使得本发明提供的***及其各个装置、模块、单元以逻辑门、开关、专用集成电路、可编程逻辑控制器以及嵌入式微控制器等的形式来实现相同程序。所以,本发明提供的***及其各项装置、模块、单元可以被认为是一种硬件部件,而对其内包括的用于实现各种程序的装置、模块、单元也可以视为硬件部件内的结构;也可以将用于实现各种功能的装置、模块、单元视为既可以是实现方法的软件程序又可以是硬件部件内的结构。
以上对本发明的具体实施例进行了描述。需要理解的是,本发明并不局限于上述特定实施方式,本领域技术人员可以在权利要求的范围内做出各种变化或修改,这并不影响本发明的实质内容。在不冲突的情况下,本申请的实施例和实施例中的特征可以任意相互组合。
Claims (5)
1.一种非可控条件下快速准确的人脸识别装置,其特征在于,包括图像采集设备、图像处理计算机、显示交互设备,其中所述图像采集设备与所述图像处理计算机连接,所述图像处理计算机与所述显示交互设备连接,所述图像采集设备包括探测单元和图像预处理单元,所述探测单元采集实时监控图像信息数据,所述图像预处理单元进行图像信息数据的预处理,并为所述图像处理计算机提供图像信息,所述图像处理计算机进行人脸检测与人眼定位以及特征提取与人脸识别,为所述显示交互设备提供识别信息,所述显示交互设备通过显示控制台显示场景信息以及识别信息,根据用户事先设置好的识别提示阈值做相应动作。
2.根据权利要求1所述的一种非可控条件下快速准确的人脸识别装置,其特征在于,所述图像采集设备分别安装在人的正前方、前左方、前右方,所述图像采集设备包括视频监测设备和红外光电检测器,其中所述视频监测设备与所述红外光电监测器配合监测。
3.根据权利要求1所述的一种非可控条件下快速准确的人脸识别装置,其特征在于,所述人脸检测检测图像中是否有人脸存在,如果有,就将人脸图像从背景中分离出来,并确定其在图像中的大小和位置,而人脸图像分为彩色图像和灰度图像,所述彩色图像的像素点是由红色、绿色、蓝色三原色混合而成,不同含量的红色、绿色、蓝色组成不同的颜色,所述灰度图像只含亮度信息,其亮度是连续变化的,灰度图像要把亮度值进行量化,分为0~255共256个等级,对图像进行光照补偿,然后将256个亮度等级的灰度图像通过适当的阀值选取,获得反应图像整体或局部特征的二值化图像。
4.根据权利要求1所述的一种非可控条件下快速准确的人脸识别装置,其特征在于,所述特征提取与人脸识别对脸形、五官、肤色提取200多特征点,待识别的人脸特征被提取出来后,根据分类按照一对一或者一对多的方式进行特征匹配,提高特征匹配速度。
5.根据权利要求1所述的一种非可控条件下快速准确的人脸识别装置,其特征在于,所述显示交互设备包括显示器控制台,所述显示器控制台叠加识别信息、视频信息以及控制和监测界面,操作员通过所述显示器控制台进行遥控操作、信息同步连续实时记录、存储和回放。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810046396.1A CN108460330A (zh) | 2018-01-17 | 2018-01-17 | 一种非可控条件下快速准确的人脸识别装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810046396.1A CN108460330A (zh) | 2018-01-17 | 2018-01-17 | 一种非可控条件下快速准确的人脸识别装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN108460330A true CN108460330A (zh) | 2018-08-28 |
Family
ID=63220594
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810046396.1A Pending CN108460330A (zh) | 2018-01-17 | 2018-01-17 | 一种非可控条件下快速准确的人脸识别装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN108460330A (zh) |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102915434A (zh) * | 2012-09-26 | 2013-02-06 | 上海交通大学 | 一种基于低功耗嵌入式平台的人脸识别*** |
CN103778360A (zh) * | 2012-10-26 | 2014-05-07 | 华为技术有限公司 | 一种基于动作分析的人脸解锁的方法和装置 |
CN105005779A (zh) * | 2015-08-25 | 2015-10-28 | 湖北文理学院 | 基于交互式动作的人脸验证防伪识别方法及*** |
CN105243357A (zh) * | 2015-09-15 | 2016-01-13 | 深圳市环阳通信息技术有限公司 | 一种基于身份证件的人脸识别方法及人脸识别装置 |
CN105427421A (zh) * | 2015-11-16 | 2016-03-23 | 苏州市公安局虎丘分局 | 基于人脸识别的门禁控制方法 |
-
2018
- 2018-01-17 CN CN201810046396.1A patent/CN108460330A/zh active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102915434A (zh) * | 2012-09-26 | 2013-02-06 | 上海交通大学 | 一种基于低功耗嵌入式平台的人脸识别*** |
CN103778360A (zh) * | 2012-10-26 | 2014-05-07 | 华为技术有限公司 | 一种基于动作分析的人脸解锁的方法和装置 |
CN105005779A (zh) * | 2015-08-25 | 2015-10-28 | 湖北文理学院 | 基于交互式动作的人脸验证防伪识别方法及*** |
CN105243357A (zh) * | 2015-09-15 | 2016-01-13 | 深圳市环阳通信息技术有限公司 | 一种基于身份证件的人脸识别方法及人脸识别装置 |
CN105427421A (zh) * | 2015-11-16 | 2016-03-23 | 苏州市公安局虎丘分局 | 基于人脸识别的门禁控制方法 |
Non-Patent Citations (2)
Title |
---|
刘晓敏: "《基于虹膜识别的商务会馆管理***的实现》", 31 August 2015, 湖南师范大学出版社, pages: 51 - 54 * |
王炳锡等: "《目标探测多谱图像复原方法与应用》", 31 August 2007, 西安:西安电子科技大学出版社, pages: 141 - 143 * |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN105095829B (zh) | 一种人脸识别方法及*** | |
CN105979210B (zh) | 一种基于多枪多球摄像机阵列的行人识别*** | |
CN106022209B (zh) | 一种基于人脸检测的距离估算和处理的方法及装置 | |
US9323979B2 (en) | Face recognition performance using additional image features | |
CN104517104B (zh) | 一种基于监控场景下的人脸识别方法及*** | |
CN104794458A (zh) | 一种从模糊视频中识别人员的方法 | |
CN110414381A (zh) | 追踪式人脸识别*** | |
CN102542246A (zh) | Atm机异常人脸检测方法 | |
CN109325408A (zh) | 一种手势判断方法及存储介质 | |
Lee et al. | An automated video-based system for iris recognition | |
Selvaraj et al. | Raspberry Pi based automatic door control system | |
CN112906453A (zh) | 智能识别并实时反馈的洗手监测*** | |
JP2012212969A (ja) | 画像監視装置 | |
CN105844282A (zh) | 一种运用线扫描相机检测喷油嘴O-Ring缺陷的方法 | |
CN107220623A (zh) | 一种人脸识别方法及*** | |
CN113435280A (zh) | 人证校验方法 | |
CN108460330A (zh) | 一种非可控条件下快速准确的人脸识别装置 | |
CN110135362A (zh) | 一种基于红外摄像头下的人脸快速识别方法 | |
CN114565531A (zh) | 一种图像修复方法、装置、设备和介质 | |
Séguier | A very fast adaptive face detection system | |
CN110443134B (zh) | 一种基于视频流的人脸识别跟踪的***及工作方法 | |
CN113673378A (zh) | 基于双目摄像头的人脸识别方法、装置和存储介质 | |
CN106340139A (zh) | 一种自动识别人脸的vtm机 | |
CN110991223A (zh) | 一种基于迁移学习的美瞳识别方法及*** | |
Dey et al. | Facial landmark detection using FAST Corner Detector of UGC-DDMC Face Database of Tripura tribes |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |