CN105528777B - 用于确定三维畸变的方法和装置 - Google Patents

用于确定三维畸变的方法和装置 Download PDF

Info

Publication number
CN105528777B
CN105528777B CN201510681560.2A CN201510681560A CN105528777B CN 105528777 B CN105528777 B CN 105528777B CN 201510681560 A CN201510681560 A CN 201510681560A CN 105528777 B CN105528777 B CN 105528777B
Authority
CN
China
Prior art keywords
distortion
image
shape
reflective article
reflection
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201510681560.2A
Other languages
English (en)
Other versions
CN105528777A (zh
Inventor
R·库比亚克
C·里柏达
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Isra Glass Vision GmbH
Original Assignee
Isra Glass Vision GmbH
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Isra Glass Vision GmbH filed Critical Isra Glass Vision GmbH
Publication of CN105528777A publication Critical patent/CN105528777A/zh
Application granted granted Critical
Publication of CN105528777B publication Critical patent/CN105528777B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00Measuring arrangements characterised by the use of optical techniques
    • G01B11/24Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures
    • G01B11/25Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures by projecting a pattern, e.g. one or more lines, moiré fringes on the object
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0004Industrial image inspection
    • G06T7/0006Industrial image inspection using a design-rule based approach
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01MTESTING STATIC OR DYNAMIC BALANCE OF MACHINES OR STRUCTURES; TESTING OF STRUCTURES OR APPARATUS, NOT OTHERWISE PROVIDED FOR
    • G01M11/00Testing of optical apparatus; Testing structures by optical methods not otherwise provided for
    • G01M11/005Testing of reflective surfaces, e.g. mirrors
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01MTESTING STATIC OR DYNAMIC BALANCE OF MACHINES OR STRUCTURES; TESTING OF STRUCTURES OR APPARATUS, NOT OTHERWISE PROVIDED FOR
    • G01M11/00Testing of optical apparatus; Testing structures by optical methods not otherwise provided for
    • G01M11/08Testing mechanical properties
    • G01M11/081Testing mechanical properties by using a contact-less detection method, i.e. with a camera
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/88Investigating the presence of flaws or contamination
    • G01N21/8806Specially adapted optical and illumination features
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/88Investigating the presence of flaws or contamination
    • G01N21/95Investigating the presence of flaws or contamination characterised by the material or shape of the object to be examined
    • G01N21/958Inspecting transparent materials or objects, e.g. windscreens
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/88Investigating the presence of flaws or contamination
    • G01N21/95Investigating the presence of flaws or contamination characterised by the material or shape of the object to be examined
    • G01N21/958Inspecting transparent materials or objects, e.g. windscreens
    • G01N2021/9586Windscreens
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30108Industrial image inspection

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Chemical & Material Sciences (AREA)
  • Analytical Chemistry (AREA)
  • Engineering & Computer Science (AREA)
  • General Health & Medical Sciences (AREA)
  • Biochemistry (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Immunology (AREA)
  • Pathology (AREA)
  • Health & Medical Sciences (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Quality & Reliability (AREA)
  • Theoretical Computer Science (AREA)
  • Length Measuring Devices By Optical Means (AREA)

Abstract

本发明涉及一种用于确定对象(5)的通过在反射物件(1)处的反射而形成的图像的畸变的方法。为了简单和节省成本地确定所述畸变,首先确定所述物件(1)的表面(2)的三维形状,随后基于所述表面(2)的已知三维形状由不同的视向计算出所述对象(5)的图像的畸变,并由此确定三维畸变。此外还描述了一种相应的装置。

Description

用于确定三维畸变的方法和装置
技术领域
本发明涉及一种用于确定通过在反射物件处的反射形成的对象图像的畸变/失真的方法以及一种用于该方法的装置。
背景技术
当对象在配备有反射表面的物件中被镜反射时,特别是由于物件表面上的不规则性而形成诸如形状变化、变小、变大或弯曲变化的畸变。这些畸变导致对象的图像看上去与对象实际所见不同。
在观察反射物件如汽车的窗玻璃或镜反射正面时经常要求在这个物件的反射表面上尽可能没有畸变地再现外界。再现对象时的畸变经常导致关于镜反射的物件本身的美观问题。例如在汽车的情况中应该感知尽可能均匀的轮廓。反射中的较大畸变会导致观察者对汽车的不可接受的感知。
发明内容
因此本发明的目的在于,提出一种用于对在通过在反射物件处的反射而形成的对象图像中的畸变进行评判的简单、节省成本和快速的方法以及提供一种用于实施该方法的简单并节省成本的装置。
上述目的通过一种方法得以实现,在该方法中,首先确定反射物件的表面的三维形状,随后基于所述表面的已知三维形状由不同的视向计算出所述对象的图像的畸变并从中确定三维畸变。
上述发明涉及如下知识:由于弯曲、特别是由于曲率的变化会引起反射中的光学畸变。当观察角度例如由于镜反射物件相对于观察者的运动而发生变化时,曲率的较大变化、特别是较短距离内的较大变化会导致反射物件的可见的运动。镜反射物件的表面中的弯曲或曲率变化也可表示为此处折射值/光焦度(Brechwert)的变化。
因此根据本发明首先确定反射物件的表面的三维形状。所述表面的三维形状包括关于表面的在其所有点上的弯曲/曲率的信息。在物件的表面的特定位置处的弯曲对应于在该位置处的相应折射值。
在优选的实施例中,借助于摄像机利用反射测量术/反射计来确定反射物件的表面的三维形状和因此表面在每个点上的弯曲。利用反射测量可以检测物件的三维形状,而不需要参考标记。为此可以在具有较大表面的较大镜反射物件的情况下这样做,即首先利用多个摄像机局部地测量镜反射物件。由这些测量值可以将表面形状以计算的方式拼合/组合成该表面的三维整体形状。另选地,反射物件的表面的三维形状可以借助具有参考标记的方法、借助纯机械的触觉测量或借助通过三角测量法进行的漫反射表面的测量来确定。
如上所述,可以由反射物件的对于特定视向和表面特定点有效的弯曲来计算确定在该点上的折光力。在这方面可以看到,当观察者在不同观察角度下看向反射物件时,可由这些弯曲计算出的折光力发生变化。因此在由于观察角度的变化而产生的畸变方面的效果可以基于物件的已知三维表面形状来确定。为此在计算时假设:在每个期望的视向上布置一个虚拟摄像机。对象的由这样的虚拟摄像机的视角看到的反射图像然后被确定。由不同观察角度得出的对象图像的畸变也可以概括为术语“三维畸变”。
根据本发明的方法具有以下优点,即可以在仅一次测量反射物件后确定三维畸变。通过根据本发明的方法,用于评判镜反射物件的三维畸变的时间成本被最小化,这是因为仅须确定镜反射物件的三维表面形状。通过根据本发明的方法,不再需要改建用于通过真实摄像机由不同视角确定三维畸变的测量装置,从而用于评判反射物件的时间成本也被减到最小。
根据本发明的方法的另一优点在于,该方法可以用于任意待成像对象。例如该对象可以是矩形格栅/光栅或任意二维或三维对象。
此外还可以针对看向反射物件的表面的任意视角检查畸变。因此根据本发明的方法是非常灵活的并且可以在视角方面快速匹配不同的分别由任务发出者预给定的要求。
优选根据本发明的方法在反射物件的自动质量检验的范围内使用。如上所述,为此确定表面的三维形状并由此自动基于任务发出者针对反射物件例如在视角和/或对象的形状和/或位置方面的要求确定三维畸变。关于畸变的数据然后与任务发出者的在畸变方面的要求进行比较。然后根据基于表面的三维形状所确定的畸变数据与预给定的畸变数据的比较判断:反射物件是否满足任务发出者的质量要求。假如其与任务发出者的质量要求不符,则例如报告瑕疵/缺陷(例如光学地和/或声学地指示出瑕疵)和/或从生产过程剔除相应物件。
在根据本发明的方法的范围内,反射物件不必具有100%的反射率,因为这种反射率在计算三维畸变的范围内可以被改变。反射表面所具有的反射率可以被调整到任意值、例如100%。在此反射率理解为反射光强与入射光强之间的比例。利用根据本发明的方法甚至可以为非反射物件指派100%的反射率并检查三维畸变。
上述目的此外还通过一种装置得以实现,该装置被设置用于,首先(例如借助相应的确定单元)确定反射物件的表面的三维形状并随后基于所述表面的已知三维形状借助计算单元由不同的其它的视向计算出所述对象的图像的畸变并由此确定三维畸变。
根据本发明的装置特别设置用于由不同视向计算出对象图像的畸变,其中为此该计算单元在每个期望的视向上布置一个虚拟摄像机并基于关于表面三维形状的数据确定所述对象的由该虚拟摄像机的视角看到的反射图像。
根据本发明的装置的确定单元借助一摄像机优选利用反射测量术/反射计来确定物件表面形状。
根据本发明的装置的计算单元此外还设置用于,针对所述表面的每个点确定所述对象的图像在如下视向上的畸变,该视向在各个点上对应于物件的表面上的法线。
此外还可以借助计算单元改变物件的表面的反射率。
根据本发明的装置具有与上述方法相同的优点并且设置用于实施上述方法步骤。
利用所确定的结果可以例如在质量检验的范围内在反射时按照对象的形状、形状变化、弯曲、弯曲变化、变大或变小这些标准评判反射物件(或者非反射物件),例如机动车的窗玻璃或正面玻璃。为此可以通过根据本发明的方法或根据本发明的装置检查不同的极限值,这些极限值在任务发出者为制造这种反射物件而设的不同要求目录中预给定。
在一种优选实施例中,针对反射物件的表面的每个点确定在如下视向上对象图像的畸变,该视向相应于特定点(即看向表面的视线的着眼点)上的表面法线。这种方法尤其在工业产品(其是反射物件)方面具有优点,因为由此可以确定不可避免地由镜反射物件的形状预给定的最小光学效果。
本发明的其它优点、特征和应用可能性也可以由以下对一种实施例的描述和附图得出。在此所有描述的和/或图示的特征自身或以任意组合构成本发明的主题,并且也独立于其在权利要求书中的综合或其引用关系。
附图说明
在附图中:
图1示意性示出用于确定三维畸变的本发明装置的第一子***的侧视图,和
图2示意性示出用于确定三维畸变的本发明装置的第二子***。
附图标记列表:
1 窗玻璃
2 窗玻璃的表面
3 摄像机
5 格栅
7 虚拟摄像机
具体实施方式
图1中示出的是具有反射表面2的用于机动车车窗的窗玻璃1形式的反射物件,通过摄像机(真实摄像机)3对该反射表面进行观察。摄像机3尤其观察格栅、例如规则格栅(例如正方形格栅5)形式的对象的通过在窗玻璃1的表面2处的反射而产生的图像。任意其它对象同样可以用于反射测量。在窗玻璃1较大的情况下也可以使用多个摄像机检测窗玻璃1的表面的不同区域。
借助反射测量术/反射计,通过本发明装置的确定单元基于借助摄像机3拍摄的对象图像确定窗玻璃1的表面2的三维形状。在使用多个摄像机的情况下,由不同的测量拼合出窗玻璃1的表面2的三维形状。
为了确定格栅5的三维畸变,根据本发明的装置现在如图2所示借助相应设置的计算单元基于所确定的表面2三维形状、表面2的所有点上的由此得出的弯曲和在不同视向下的折光力从不同视向计算出格栅5的畸变。为此计算单元假设:虚拟摄像机7由各自视向看向镜反射物件1。由此例如借助光线跟踪(Ray Tracing)计算出在格栅5在物件1的表面2处反射时(虚拟)格栅5的图像和其畸变。由此计算单元可以轻易确定观察角度变化时的畸变效果、即三维畸变。格栅5为了计算三维畸变同样作为虚拟格栅被提供。
在质量检验的范围内可以通过计算单元对窗玻璃的所确定的三维畸变与任务发出者的要求进行比较,并判断所确定的窗玻璃1畸变是否符合所述要求。如果情况并非如此,则将窗玻璃1剔除出生产过程。

Claims (8)

1.一种用于确定对象(5)的图像的畸变的方法,所述图像通过在反射物件(1)处的反射而形成,其中,所述对象(5)布置在距离物件(1)预定距离处,其中,首先确定物件(1)的表面(2)的三维形状,
其特征在于,
随后基于所述表面(2)的已知三维形状由不同视向计算出所述对象(5)的图像的畸变,并由此确定三维畸变,其中,所述对象(5)的图像通过在物件(1)的表面(2)上的反射而形成,其中,为了由不同的视向计算出所述对象(5)的图像的畸变,在每个期望的视向上布置虚拟摄像机(7)并由该虚拟摄像机(7)的视角确定所述对象(5)的在物件(1)处反射的图像。
2.根据权利要求1所述的方法,其特征在于,借助于摄像机(3)利用反射测量术来确定所述反射物件的表面(2)的形状。
3.根据权利要求1或2所述的方法,其特征在于,针对所述表面(2)的每个点,确定所述对象(5)的图像在如下视向上的畸变,该视向在各个点上对应于所述反射物件(1)的表面(2)的法线。
4.根据权利要求1或2所述的方法,其特征在于,使物件的表面的反射率发生改变。
5.一种用于确定对象(5)的通过在反射物件(1)处的反射而形成的图像的畸变的装置,该装置具有摄像机(3),其中,所述对象(5)布置在距离物件(1)预定距离处,其中,该装置被设置用于:首先确定物件(1)的表面(2)的三维形状,
其特征在于,
该装置还被设置用于:随后基于所述表面(2)的已知三维形状由不同的视向计算出所述对象(5)的图像的畸变,并由此确定三维畸变,其中,所述对象(5)的图像通过在物件(1)的表面(2)上的反射而形成,其中,为了由不同的视向计算出所述对象的图像的畸变,在每个期望的视向上布置有虚拟摄像机(7)并由该虚拟摄像机(7)的视角确定所述对象(5)的在物件(1)处反射的图像。
6.根据权利要求5所述的装置,其特征在于,该装置被设置用于:借助于所述摄像机(3)利用反射测量术来确定物件的表面(2)的形状。
7.根据权利要求5或6所述的装置,其特征在于,该装置被设置用于:针对所述表面(2)的每个点,确定所述对象(5)的图像在如下视向上的畸变,该视向在各个点上对应于物件(1)的表面(2)的法线。
8.根据权利要求5或6所述的装置,其特征在于,物件的表面的反射率是可变的。
CN201510681560.2A 2014-10-21 2015-10-20 用于确定三维畸变的方法和装置 Active CN105528777B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
DE102014115331.6 2014-10-21
DE102014115331.6A DE102014115331A1 (de) 2014-10-21 2014-10-21 Verfahren und Vorrichtung zur Ermittlung einer dreidimensionalen Verzerrung

Publications (2)

Publication Number Publication Date
CN105528777A CN105528777A (zh) 2016-04-27
CN105528777B true CN105528777B (zh) 2018-11-09

Family

ID=54359828

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510681560.2A Active CN105528777B (zh) 2014-10-21 2015-10-20 用于确定三维畸变的方法和装置

Country Status (6)

Country Link
EP (1) EP3012578B1 (zh)
JP (1) JP6199938B2 (zh)
KR (1) KR101841630B1 (zh)
CN (1) CN105528777B (zh)
DE (1) DE102014115331A1 (zh)
ES (1) ES2874101T3 (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3561446A1 (de) 2018-04-23 2019-10-30 Carl Zeiss Vision International GmbH Verfahren und vorrichtung zum vermessen einer optischen linse für individuelle tragesituationen eines nutzers

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1729381A (zh) * 2002-11-29 2006-02-01 Obe奥马赫特&鲍姆格特纳有限公司 光学形状测量和/或评定的方法及装置
CN102159917A (zh) * 2008-09-18 2011-08-17 欧姆龙株式会社 三维计测装置及其方法

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05272949A (ja) * 1992-03-30 1993-10-22 Nippon Sheet Glass Co Ltd ガラス板表面評価方法
JPH10111953A (ja) * 1996-10-07 1998-04-28 Canon Inc 画像処理方法および装置および記憶媒体
DE10217068B4 (de) * 2002-04-17 2005-09-15 Michael Dr.-Ing. Gandyra Verfahren zum optischen Messen der Form reflektierender und streuender Freiformflächen
AU2003286179A1 (en) * 2002-11-29 2004-06-23 Obe Ohnmacht And Baumgartner Gmbh And Co. Kg Method and device for optical form measurement and/or estimation
DE102004033526A1 (de) * 2004-07-08 2006-02-02 Universität Karlsruhe (TH) Institut für Mess- und Regelungstechnik Verfahren und Vorrichtung zur Analyse zumindest partiell reflektierender Oberflächen
JP4667161B2 (ja) * 2005-08-10 2011-04-06 大日本印刷株式会社 表面に繊維シートを張り付けた三次元仮想物体に基づく二次元画像生成方法および生成装置
DE102006015792A1 (de) * 2006-04-05 2007-10-18 Isra Surface Vision Gmbh Verfahren und System zur Formmessung einer reflektierenden Oberfläche
US9767599B2 (en) * 2006-12-29 2017-09-19 X-Rite Inc. Surface appearance simulation
JP4998711B2 (ja) * 2007-03-12 2012-08-15 Jfeスチール株式会社 面歪の測定装置及び方法
US8224066B2 (en) * 2007-05-29 2012-07-17 Gerd Haeusler Method and microscopy device for the deflectometric detection of local gradients and the three-dimensional shape of an object
US8415648B2 (en) * 2008-02-15 2013-04-09 Pilkington Group Limited Method of determination of glass surface shapes and optical distortion by reflected optical imaging
JP5083052B2 (ja) * 2008-06-06 2012-11-28 ソニー株式会社 立体視画像生成装置、立体視画像生成方法およびプログラム
FR2951544A1 (fr) * 2009-10-21 2011-04-22 Saint Gobain Procede d'analyse de la qualite d'un vitrage
CN102243074B (zh) * 2010-05-13 2014-06-18 中国科学院遥感应用研究所 基于光线追踪技术的航空遥感成像几何变形仿真方法

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1729381A (zh) * 2002-11-29 2006-02-01 Obe奥马赫特&鲍姆格特纳有限公司 光学形状测量和/或评定的方法及装置
CN102159917A (zh) * 2008-09-18 2011-08-17 欧姆龙株式会社 三维计测装置及其方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
Measuring the refractive power with deflectometry in transmission;Markus C. Knauer 等;《DGaO Proceedings 2008》;20080131;全文 *
条纹反射法测量镜面手机外壳多尺度三维形貌;宋雷 等;《光电子·激光》;20121130;第23卷(第11期);全文 *

Also Published As

Publication number Publication date
ES2874101T3 (es) 2021-11-04
DE102014115331A1 (de) 2016-04-21
JP6199938B2 (ja) 2017-09-20
CN105528777A (zh) 2016-04-27
KR20160046745A (ko) 2016-04-29
EP3012578A2 (de) 2016-04-27
EP3012578B1 (de) 2021-03-31
JP2016080709A (ja) 2016-05-16
KR101841630B1 (ko) 2018-03-23
EP3012578A3 (de) 2016-06-01

Similar Documents

Publication Publication Date Title
JP6368872B1 (ja) 眼鏡の個別データ測定
CN106164653B (zh) 检查***和检查方法
CN103940822A (zh) 一种基于机器视觉的产品外表面缺陷图像采集装置
CN105527248B (zh) 用于确定局部折射值的方法及其装置
JP2014515107A5 (zh)
CN203824928U (zh) 一种基于机器视觉的产品外表面缺陷图像采集装置
JP6162681B2 (ja) 光媒体を通じた3次元的な光検知
Perard et al. Three-dimensional measurement of specular free-form surfaces with a structured-lighting reflection technique
CN207894591U (zh) 一种hud前挡玻璃检测设备
CA2961398C (en) Method for accurately determining optical parameters of a test subject in order to adapt a pair of eyeglasses to the test subject, and immobile video centering system
US20160307322A1 (en) Image recording simulation in a coordinate measuring machine
CN105528777B (zh) 用于确定三维畸变的方法和装置
CN109373904A (zh) 三维视觉检测装置及三维视觉检测方法
CN204027528U (zh) 一种视觉检测装置
CN104180772A (zh) 一种视觉检测装置
US10289895B2 (en) Method and device for determining a three-dimensional distortion
Hodgson et al. Novel metrics and methodology for the characterisation of 3D imaging systems
CN108303040A (zh) 一种基于平面复眼和同轴结构光的三维测量***及使用方法
Yamazaki et al. Dense 3D reconstruction of specular and transparent objects using stereo cameras and phase-shift method
Burke Inspection of reflective surfaces with deflectometry
CN210664372U (zh) 一种基于双目视觉的三维检测装置
Matthias et al. Single image geometry inspection using inverse endoscopic fringe projection
Ribbens Development and validation of a time-domain fringe pattern analysis technique for the measurement of object shape and deformation
Ohtani et al. Laser rangefinder calibration based on genetic algorithm
Bergay Multi-line Triangulation 3D Imaging for Educational Applications

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant