CN110412885A - 一种基于计算机视觉的家居智能控制*** - Google Patents
一种基于计算机视觉的家居智能控制*** Download PDFInfo
- Publication number
- CN110412885A CN110412885A CN201910815756.4A CN201910815756A CN110412885A CN 110412885 A CN110412885 A CN 110412885A CN 201910815756 A CN201910815756 A CN 201910815756A CN 110412885 A CN110412885 A CN 110412885A
- Authority
- CN
- China
- Prior art keywords
- user
- kinsfolk
- intelligent control
- module
- control model
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000000007 visual effect Effects 0.000 claims abstract description 13
- 238000000034 method Methods 0.000 claims description 12
- 230000006399 behavior Effects 0.000 description 10
- 238000004378 air conditioning Methods 0.000 description 5
- 238000000151 deposition Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 230000009471 action Effects 0.000 description 1
- 230000003542 behavioural effect Effects 0.000 description 1
- 238000005034 decoration Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012797 qualification Methods 0.000 description 1
- 230000008439 repair process Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B15/00—Systems controlled by a computer
- G05B15/02—Systems controlled by a computer electric
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B19/00—Programme-control systems
- G05B19/02—Programme-control systems electric
- G05B19/418—Total factory control, i.e. centrally controlling a plurality of machines, e.g. direct or distributed numerical control [DNC], flexible manufacturing systems [FMS], integrated manufacturing systems [IMS] or computer integrated manufacturing [CIM]
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B2219/00—Program-control systems
- G05B2219/20—Pc systems
- G05B2219/26—Pc applications
- G05B2219/2642—Domotique, domestic, home control, automation, smart house
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Automation & Control Theory (AREA)
- Manufacturing & Machinery (AREA)
- Quality & Reliability (AREA)
- Selective Calling Equipment (AREA)
- Air Conditioning Control Device (AREA)
Abstract
本发明公开了一种基于计算机视觉的家居智能控制***，该***包括：摄像机，用于在用户进入家门时，采集用户视频；处理器，用于利用视觉识别算法判断用户视频中的用户为家庭成员时，在模型库中查找用户对应的智能控制模型；控制器，用于依据所述智能控制模型对家居设备进行控制。可见，该***实现符合用户需求，提升用户满意度。
Description
技术领域
本发明涉及家居控制技术领域，特别是涉及一种基于计算机视觉的家居智能控制***。
背景技术
目前，智能家居的智能控制，一般都是通过用户自己设定一些定时任务，或者根据设备采集的数据，比如温度湿度，这些数据指标和相应的条件来控制家里的智能设备，或者按照用户的操作控制行为统计来判断控制智能设备的依据。但是这些方式存在很多问题，一个家里基本都是好几个家庭成员，每个成员的习惯，使用设备的方法各不相同。家里有的家庭成员比较节俭，开灯比较晚；有的家庭成员在30摄氏度开空调，有的家庭成员会在34摄氏度才开空调。如果使用传统的条件方法，只是根据温度这些指标控制空调，那么对与空调的控制就不符合具体的用户的需求，用户满意度较低。
另外，如果利用用户操作行为统计来判断，家里成员A会在30摄氏度开空调开了5次，成员B在34度开了空调2次，这时候B在家，从统计角度，自动化控制***会在30度就开空调了，不符合成员B的习惯和需求，仅仅依靠这样的自动化控制是不智能的，不能满足所有成员的需求。
发明内容
本发明的目的是提供一种基于计算机视觉的家居智能控制***，以实现符合用户需求，提升用户满意度。
为解决上述技术问题，本发明提供一种基于计算机视觉的家居智能控制***，该***包括：
摄像机，用于在用户进入家门时，采集用户视频；
处理器，用于利用视觉识别算法判断用户视频中的用户为家庭成员时，在模型库中查找用户对应的智能控制模型；
控制器，用于依据所述智能控制模型对家居设备进行控制。
优选的，所述摄像机还用于若多个用户进入家门，采集每个用户的视频获取多个用户视频；
所述处理器还包括：
标记模块，用于对于每个用户视频，利用视觉识别算法判断用户视频中的用户为家庭成员时，将用户标记为家庭成员；
确定模块，用于获取每个家庭成员在房间的停留时间，确定停留时间最长的家庭成员；
查找模块，用于在模型库中查找所述停留时间最长的家庭成员对应的智能控制模型，并将查找到的智能控制模型标记为优选智能控制模型；
所述控制器还用于利用所述优选智能控制模块对家居设备进行控制。
优选的，所述处理器还包括：
设置模块，用于对于每个家庭成员，设置家庭成员的通用控制模型；
获取模块，用于在家庭成员每次对家居设备进行控制时，获取家居设备对应的状态信息；
迭代模块，用于将状态信息在通用控制模型中进行跌代，得到智能控制模型。
优选的，所述状态信息包括温度、湿度、PM2.5、时间、天气、设备名、设备操作事件、家庭成员信息和房间信息。
优选的，所述设置模块还包括：存储单元，用于获取每个家庭成员的照片并进行存储。
优选的，所述控制器包括：
识别模块，用于通过视觉识别算法对用户的行为进行识别，得到用户的行为状态；
开启模块，用于利用智能控制模型确定所述行为状态对应的操作指令，依据操作指令开启家居设备。
本发明所提供的一种基于计算机视觉的家居智能控制***，包括：摄像机，用于在用户进入家门时，采集用户视频；处理器，用于利用视觉识别算法判断用户视频中的用户为家庭成员时，在模型库中查找用户对应的智能控制模型；控制器，用于依据所述智能控制模型对家居设备进行控制。可见，该***中，处理器会通过视觉识别算法识别出家庭里具体的在家的家庭成员，每一个家庭成员对应有各自的智能控制模型，不再是一个条件控制，或者一个对家庭的控制模型，而是针对家庭中每一个成员设置有智能控制模型，每个家庭成员的智能控制模型是符合家庭成员自身需求的，控制器依据智能控制模型来控制家居设备，这样的设备控制符合用户需求，提高用户满意度。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。
图1为本发明所提供的一种基于计算机视觉的家居智能控制***结构示意图；
图2为处理器通过计算机视觉为每个家庭成员建模的流程图；
图3为家居智能控制的具体流程图。
具体实施方式
本发明的核心是提供一种基于计算机视觉的家居智能控制***，以实现符合用户需求，提升用户满意度。
为了使本技术领域的人员更好地理解本发明方案，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
请参考图1，图1为本发明所提供的一种基于计算机视觉的家居智能控制***结构示意图，该***包括：
摄像机101，用于在用户进入家门时，采集用户视频；
处理器102，用于利用视觉识别算法判断用户视频中的用户为家庭成员时，在模型库中查找用户对应的智能控制模型；
控制器103，用于依据智能控制模型对家居设备进行控制。
可见，该***中，处理器会通过视觉识别算法识别出家庭里具体的在家的家庭成员，每一个家庭成员对应有各自的智能控制模型，不再是一个条件控制，或者一个对家庭的控制模型，而是针对家庭中每一个成员设置有智能控制模型，每个家庭成员的智能控制模型是符合家庭成员自身需求的，控制器依据智能控制模型来控制家居设备，这样的设备控制符合用户需求，提高用户满意度。
基于上述***，进一步的，摄像机还用于若多个用户进入家门，采集每个用户的视频获取多个用户视频。
其中，处理器还包括：
标记模块，用于对于每个用户视频，利用视觉识别算法判断用户视频中的用户为家庭成员时，将用户标记为家庭成员；
确定模块，用于获取每个家庭成员在房间的停留时间，确定停留时间最长的家庭成员；
查找模块，用于在模型库中查找停留时间最长的家庭成员对应的智能控制模型，并将查找到的智能控制模型标记为优选智能控制模型。
其中，控制器还用于利用优选智能控制模块对家居设备进行控制。
可见，本***通过视觉算法识别出家庭里具体的在家的成员，会跟踪他的运动轨迹和对智能家居的操作习惯，对每一个家庭成员建立智能家居的控制模型。在条件控制中，摄像头会对每一个家庭成员进行识别，判断是否根据现有的家庭成员的模型进行实际的家居智能控制，满足用户的习惯和需求。如果在一个房间里有多个家庭成员存在，智能控制***会根据这些家庭成员的习惯和判断条件，选取折中的控制方法进行控制，比如开空调的温度，***会折中出家庭成员都能基本接受的温度进行控制，例如有的家庭成员在30度开空调，有的家庭成员在34度开空调，那么***会设置在32度时空调开始进行自动化的控制。
进一步的，处理器还包括：
设置模块，用于对于每个家庭成员，设置家庭成员的通用控制模型；
获取模块，用于在家庭成员每次对家居设备进行控制时，获取家居设备对应的状态信息；
迭代模块，用于将状态信息在通用控制模型中进行跌代，得到智能控制模型。
其中，状态信息包括温度、湿度、PM2.5、时间、天气、设备名、设备操作事件、家庭成员信息和房间信息。请参考图2，图2为处理器通过计算机视觉为每个家庭成员建模的流程图。具体的，根据用户信息和成员照片到***里查找，是否有该用户的智能控制模型，如果有，直接设置该成员的控制模型，如果没有，先为用户设置一个基本的通用控制模型作为***的冷启动。其中，在成员每次对智能家居进行主动控制和纠正的时候，摄像头会进行识别家庭成员，记录下用户的操作行为发送给***，***并且记录下当前的环境数据，时间数据等信息。具体的，记录的元组为用户，温度，湿度，PM2.5，时间，天气，房间，设备名，以及设备操作事件，智能控制***将元组迭代到该家庭成员的智能控制模型中，经过长时间多次的不停的迭代，最终就产生了该家庭成员的准确的智能控制模型，为用户后续的智能控制提供决策。
进一步的，设置模块还包括：存储单元，用于获取每个家庭成员的照片并进行存储。为了能够通过计算机视觉识别出用户，需要对房屋入口，每个房间部署一个摄像头，用来跟踪和识别家庭成员。安装完摄像头后，需要在***中录入家庭成员的照片，除了照片，如果有账户，录入账号，便于***能够精准识别，对每个家庭成员建模更加准确。
进一步的，控制器包括：识别模块，用于通过视觉识别算法对用户的行为进行识别，得到用户的行为状态；开启模块，用于利用智能控制模型确定行为状态对应的操作指令，依据操作指令开启家居设备。
本***通过计算机视觉算法，在房间里的人不同，根据具体的人的具体控制习惯和设备的采集的数据条件，对人进行更具体的个性化控制，让用户在智能家居的使用过程中，更加舒服，贴心。不再是一个条件控制，或者一个对家庭的控制模型。而是变成针对家庭中每一个成员的控制建模，为每一个家庭成员定制智能的控制***，达到智能家居的真正的智能化控制。请参考图3，图3为家居智能控制的具体流程图。
详细的，当一位家庭成员进入家里的时候，门口的摄像头识别出家庭成员，传给智能控制***，智能控制***定位到此成员的智能控制模型，开始控制必要的智能设备。进入家里后，各个房间的摄像头会跟踪成员，当成员进入一个房间里，除了立刻打开非常必要设备，比如灯光外，根据计算机视觉算法识别出来的成员的行为，就坐，坐沙发，躺床上睡觉等，启动智能控制***，在这个房间针对该成员做智能化控制，比如开启空调，开启阅读模式的灯光，开启娱乐设备，或者开启睡觉模式的灯光。根据用户的不同行为，为他自动智能开启相应的设备。
当在一个房间里存在多于一个家庭成员的时候，智能控制***会根据几个维度做判断，房间里的家庭成员谁在这个房间的时间多很多，如果多很多，以时间多的家庭成员智能模型去做智能控制。如果差不多，且这些家庭成员控制模型差别不大，则按照房间最常用的控制模型去做智能控制。如果差别比较大，***会根据这些差别，采用平衡算法，在差别中找到控制的平衡性去做智能的设备控制。
专业人员还可以进一步意识到，结合本文中所公开的实施例描述的各示例的模块及算法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。
以上对本发明所提供的一种基于计算机视觉的家居智能控制***进行了详细介绍。本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想。应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以对本发明进行若干改进和修饰，这些改进和修饰也落入本发明权利要求的保护范围内。
Claims (6)
1.一种基于计算机视觉的家居智能控制***，其特征在于，包括：
摄像机，用于在用户进入家门时，采集用户视频；
处理器，用于利用视觉识别算法判断用户视频中的用户为家庭成员时，在模型库中查找用户对应的智能控制模型；
控制器，用于依据所述智能控制模型对家居设备进行控制。
2.如权利要求1所述的***，其特征在于，所述摄像机还用于若多个用户进入家门，采集每个用户的视频获取多个用户视频；
所述处理器还包括：
标记模块，用于对于每个用户视频，利用视觉识别算法判断用户视频中的用户为家庭成员时，将用户标记为家庭成员；
确定模块，用于获取每个家庭成员在房间的停留时间，确定停留时间最长的家庭成员；
查找模块，用于在模型库中查找所述停留时间最长的家庭成员对应的智能控制模型，并将查找到的智能控制模型标记为优选智能控制模型；
所述控制器还用于利用所述优选智能控制模块对家居设备进行控制。
3.如权利要求2所述的***，其特征在于，所述处理器还包括：
设置模块，用于对于每个家庭成员，设置家庭成员的通用控制模型；
获取模块，用于在家庭成员每次对家居设备进行控制时，获取家居设备对应的状态信息；
迭代模块，用于将状态信息在通用控制模型中进行跌代，得到智能控制模型。
4.如权利要求3所述的方法，其特征在于，所述状态信息包括温度、湿度、PM2.5、时间、天气、设备名、设备操作事件、家庭成员信息和房间信息。
5.如权利要求4所述的方法，其特征在于，所述设置模块还包括：存储单元，用于获取每个家庭成员的照片并进行存储。
6.如权利要求1所述的***，其特征在于，所述控制器包括：
识别模块，用于通过视觉识别算法对用户的行为进行识别，得到用户的行为状态；
开启模块，用于利用智能控制模型确定所述行为状态对应的操作指令，依据操作指令开启家居设备。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910815756.4A CN110412885A (zh) | 2019-08-30 | 2019-08-30 | 一种基于计算机视觉的家居智能控制*** |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910815756.4A CN110412885A (zh) | 2019-08-30 | 2019-08-30 | 一种基于计算机视觉的家居智能控制*** |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN110412885A true CN110412885A (zh) | 2019-11-05 |
Family
ID=68369825
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201910815756.4A Pending CN110412885A (zh) | 2019-08-30 | 2019-08-30 | 一种基于计算机视觉的家居智能控制*** |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN110412885A (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112068454A (zh) * | 2020-11-10 | 2020-12-11 | 广东恩胜科技有限公司 | 自适应调节的智能家居控制方法、***、装置及存储介质 |
Citations (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20150323939A1 (en) * | 2014-05-12 | 2015-11-12 | Wen-Sung Lee | Home intellectual air conditioning system |
| CN105607508A (zh) * | 2016-03-24 | 2016-05-25 | 重庆邮电大学 | 基于用户行为分析的智能家居设备控制方法及*** |
| CN106127896A (zh) * | 2016-06-23 | 2016-11-16 | 成都启英泰伦科技有限公司 | 一种智能门锁控制***及方法 |
| CN106647645A (zh) * | 2015-11-02 | 2017-05-10 | 中兴通讯股份有限公司 | 一种家居控制调节的方法及*** |
| CN108039988A (zh) * | 2017-10-31 | 2018-05-15 | 珠海格力电器股份有限公司 | 设备控制处理方法及装置 |
| CN108287478A (zh) * | 2017-12-13 | 2018-07-17 | 海尔优家智能科技（北京）有限公司 | 家电设备的控制方法、装置、存储介质及计算机设备 |
| CN108986281A (zh) * | 2018-07-20 | 2018-12-11 | 清华大学苏州汽车研究院（吴江） | 基于人脸识别的家庭成员智能认证*** |
| CN109522782A (zh) * | 2018-09-04 | 2019-03-26 | 上海交通大学 | 家居成员识别*** |
| CN109917666A (zh) * | 2019-03-28 | 2019-06-21 | 深圳慧安康科技有限公司 | 智慧家庭的实现方法及智能装置 |
| CN109976169A (zh) * | 2019-03-08 | 2019-07-05 | 佛山市云米电器科技有限公司 | 基于自学习技术的互联网电视智能控制方法及控制*** |
| CN110087131A (zh) * | 2019-05-28 | 2019-08-02 | 海信集团有限公司 | 电视***中的电视控制方法及主控终端 |
-
2019
- 2019-08-30 CN CN201910815756.4A patent/CN110412885A/zh active Pending
Patent Citations (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20150323939A1 (en) * | 2014-05-12 | 2015-11-12 | Wen-Sung Lee | Home intellectual air conditioning system |
| CN106647645A (zh) * | 2015-11-02 | 2017-05-10 | 中兴通讯股份有限公司 | 一种家居控制调节的方法及*** |
| CN105607508A (zh) * | 2016-03-24 | 2016-05-25 | 重庆邮电大学 | 基于用户行为分析的智能家居设备控制方法及*** |
| CN106127896A (zh) * | 2016-06-23 | 2016-11-16 | 成都启英泰伦科技有限公司 | 一种智能门锁控制***及方法 |
| CN108039988A (zh) * | 2017-10-31 | 2018-05-15 | 珠海格力电器股份有限公司 | 设备控制处理方法及装置 |
| CN108287478A (zh) * | 2017-12-13 | 2018-07-17 | 海尔优家智能科技（北京）有限公司 | 家电设备的控制方法、装置、存储介质及计算机设备 |
| CN108986281A (zh) * | 2018-07-20 | 2018-12-11 | 清华大学苏州汽车研究院（吴江） | 基于人脸识别的家庭成员智能认证*** |
| CN109522782A (zh) * | 2018-09-04 | 2019-03-26 | 上海交通大学 | 家居成员识别*** |
| CN109976169A (zh) * | 2019-03-08 | 2019-07-05 | 佛山市云米电器科技有限公司 | 基于自学习技术的互联网电视智能控制方法及控制*** |
| CN109917666A (zh) * | 2019-03-28 | 2019-06-21 | 深圳慧安康科技有限公司 | 智慧家庭的实现方法及智能装置 |
| CN110087131A (zh) * | 2019-05-28 | 2019-08-02 | 海信集团有限公司 | 电视***中的电视控制方法及主控终端 |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112068454A (zh) * | 2020-11-10 | 2020-12-11 | 广东恩胜科技有限公司 | 自适应调节的智能家居控制方法、***、装置及存储介质 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN105700363B (zh) | 一种智能家居设备语音控制装置的唤醒方法及*** | |
| CN106444471B (zh) | 智能控制器和用于自动学习控制时间表的方法 | |
| CN110286601A (zh) | 控制智能家居设备的方法、装置、控制设备及存储介质 | |
| CN107528753A (zh) | 智能家居语音控制方法、智能设备及具有存储功能的装置 | |
| CN110119093A (zh) | 一种智能家居控制方法、终端及存储介质 | |
| CN108153158A (zh) | 家居场景的切换方法、装置、存储介质及服务器 | |
| CN109887144A (zh) | 一种访客识别方法、装置和计算机可读存储介质 | |
| CN105987518A (zh) | 热水器的控制方法和装置 | |
| CN110799978B (zh) | 居住环境中的人脸识别 | |
| CN109683576A (zh) | 一种基于人工智能的智能家居控制方法、***及装置 | |
| CN106295313A (zh) | 对象身份管理方法、装置和电子设备 | |
| CN111063067A (zh) | 一种基于语音控制的智能门禁*** | |
| CN101128787A (zh) | 电子设备控制装置、电子设备控制方法、电子设备控制程序及记录了电子设备控制程序的计算机可读取的记录介质 | |
| JP2004007297A (ja) | 自動制御装置及び自動制御方法及び自動制御システム、並びに端末。 | |
| CN107085380A (zh) | 一种智能家居***用户位置判断方法及电子设备 | |
| CN110908340A (zh) | 智能家居的控制方法及装置 | |
| CN108181837B (zh) | 控制方法及控制装置 | |
| US11544924B1 (en) | Investigation system for finding lost objects | |
| WO2011006364A1 (zh) | 一种远程协作***和方法 | |
| CN110471303A (zh) | 一种基于计算机视觉的家居智能控制方法 | |
| CN111459388A (zh) | 一种智慧家居信息的息屏显示方法、显示设备及存储介质 | |
| CN114821236A (zh) | 智慧家庭环境感知方法、***、存储介质及电子装置 | |
| CN110471300B (zh) | 一种多智能化场景的冲突协调方法及*** | |
| CN110147047A (zh) | 智能家居设备筛选方法、装置、计算机设备和存储介质 | |
| CN111897234A (zh) | 一种基于5g网络的智能家居控制*** |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20191105 |