CN110379221A - 一种英语发音测试与评价*** - Google Patents

一种英语发音测试与评价*** Download PDF

Info

Publication number
CN110379221A
CN110379221A CN201910734693.XA CN201910734693A CN110379221A CN 110379221 A CN110379221 A CN 110379221A CN 201910734693 A CN201910734693 A CN 201910734693A CN 110379221 A CN110379221 A CN 110379221A
Authority
CN
China
Prior art keywords
mouth
module
shape
pronunciation
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910734693.XA
Other languages
English (en)
Inventor
王雨
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shaanxi Xueqian Normal University
Original Assignee
Shaanxi Xueqian Normal University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shaanxi Xueqian Normal University filed Critical Shaanxi Xueqian Normal University
Priority to CN201910734693.XA priority Critical patent/CN110379221A/zh
Publication of CN110379221A publication Critical patent/CN110379221A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20—Movements or behaviour, e.g. gesture recognition
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B19/00—Teaching not covered by other main groups of this subclass
    • G09B19/06—Foreign languages
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B5/00—Electrically-operated educational appliances
    • G09B5/06—Electrically-operated educational appliances with both visual and audible presentation of the material to be studied
    • G09B5/065—Combinations of audio and video presentations, e.g. videotapes, videodiscs, television systems
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/78—Detection of presence or absence of voice signals

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Business, Economics & Management (AREA)
  • Multimedia (AREA)
  • Educational Administration (AREA)
  • Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Educational Technology (AREA)
  • Computational Linguistics (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Signal Processing (AREA)
  • Acoustics & Sound (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Health & Medical Sciences (AREA)
  • Psychiatry (AREA)
  • Social Psychology (AREA)
  • Electrically Operated Instructional Devices (AREA)

Abstract

本发明公开了一种英语发音测试与评价***，包括人机交互模块、音频数据采集模块、口型数据采集模块、口型识别模块、口型标准评估模块、发音标准评估模块和中央处理器。本发明集测试、评估以及训练为一体，将英语口语练习与三维模型互动结合在一起，在为英语口语训练提供良好氛围的同时，提高了学生的学习兴趣。本发明基于三维姿态传感器进行口型动态图谱的采集，相比于现有的图像采集识别，具有较高的识别率、计算速度和精确度，适应性强。

Description

一种英语发音测试与评价***
技术领域
本发明涉及英语发音测试评价领域，具体涉及一种英语发音测试与评价***。
背景技术
目前，现有的英语发音测试***大多仅依赖音频数据实现发音情况的检测，检测结果单一。同时这类***大多仅依靠用户反复听标准音频数据的方式实现发音训练，训练效率即为低下。
发明内容
为解决上述问题，本发明提供了一种英语发音测试与评价***，基于音频和口型实现了用户发音情况的检测分析，使得用户可以更加全面的了解自己的发音情况，同时以及标准口型协同标准音频的方式进行标准资料的反馈，大大提高了学习效率。
为实现上述目的，本发明采取的技术方案为：
一种英语发音测试与评价***，包括：
人机交互模块，用于完成用户的注册，控制命令以及数据需求命令的输入；
还用于进行测试模式、测试场景以及测试试题的选择；
音频数据采集模块，用于通过麦克风进行测试者发音音频数据的采集；
口型数据采集模块，用于通过黏贴设置在测试者嘴巴周围的三维姿态传感器进行测试者整个测试过程中上嘴唇、下嘴唇、嘴角的姿态变化数据的采集，并将采集到的数据发送到口型识别模块；
口型识别模块，用于通过上嘴唇、下嘴唇、嘴角的姿态变化数据进行测试者整个测试过程中口型变化图谱以及口型变化特征参数的输出；
口型标准评估模块，用于将计算所得的口型变化特征参数与口型标准数据库内的对应的标准口型变化特征参数进行对比，如果差距小于某个门限，则认为口型标准，否则认为不标准，并输出正确的口型变化图谱、发音音频；
发音标准评估模块，用于采用MapReduce提取音频数据的特征数据，并基于对应的发音标准评估模型输出评估结果；
中央处理器，用于接收人机交互模块输入的控制命令和需求命令，并按照预设的算法发送到对应的模块进行执行；用于用户注册、权限管理以及密码的修改；还用于进行用户身份的认证。
进一步地，所述三维姿态传感器之间通过连接Zigebee模块以自组网的方式与主控制器连接起来，形成一个有效的内部网络；三维姿态传感器将采集到的数据经内部网络以无线的方式传输至主控制器。
进一步地，所述三维姿态传感器包括橡胶外壳以及内嵌安装在橡胶外壳内的传感单元、存储组件、处理单元以及电源单元，所述的传感单元负责感知姿态参数信息，将感知到的数据送到处理单元加以处理，处理器单元包含存储组件和嵌入式处理组件两个部分；存储组件负责存储收集到的数据信息，执行设计存储好的程序代码，以协调融合不同传感器之间的信息；处理组件根据原先所存储的程序或主控制器发出的指令，启动感知单元收集环境的信息，并将所收集的数据融合处理后送到通信单元；通信单元负责数据信息在传感器节点之间传递；电源单元作为整个三维姿态传感器的基础模块，保证节点正常顺利工作。
进一步地，所述三维姿态传感器通过水胶体敷料层黏贴设置在上嘴唇、下嘴唇和嘴角。
进一步地，还包括一口语训练模块，包括单机模式和联机模式；
在单机模式下，所述口语训练模块根据人机交互模块输入的控制命令在素材库内调用相应的素材资料构建各种互动三维人物模型，所述互动三维人物模型根据语音识别模块识别的结果，在素材库内挖掘相应的对话内容与用户完成对话交流；
在联机模式下，所述口语训练模块根据人机交互模块输入的控制命令在素材库内调用相应的素材资料构建各种动态三维人物模型，所述服务器接收并将各账户输入的语音数据转发到对应的账户经播放器进行播放，从而实现各账户的联机口语训练。
进一步地，还包括一素材库，内设有多种测试模式、测试场景以及测试试题资料，且连接有一数据更新模块，用于通过有线或无线的方式进行数据库内数据的更新。
进一步地，还包括一评估单生成模块，用于将人机交互模块选中的测试模式、测试场景以及测试试题、音频数据采集模块采集到的音频数据、口型识别模块输出的口型变化图谱、发音音频，口型标准评估模块输出的评估结果和/或正确的口型变化图谱、以及发音标准评估输出的评估结果一起填入预制的latex模版生成评估单。
本发明具有以下有益效果：
本发明基于音频和口型实现了用户发音情况的检测分析，使得用户可以更加全面的了解自己的发音情况，同时以评估单的方式进行评估结果的反馈，便于用户后续的模仿训练，大大提高了学习效率。
本发明集测试、评估以及训练为一体，将英语口语练习与三维模型互动结合在一起，在为英语口语训练提供良好氛围的同时，提高了学生的学习兴趣。
本发明基于三维姿态传感器进行口型动态图谱的采集，相比于现有的图像采集识别，具有较高的识别率、计算速度和精确度，适应性强。
附图说明
图1为本发明实施例一种英语发音测试与评价***的***框图。
图2为本发明实施例中三维姿态传感器的布置方式示意图。
具体实施方式
为了使本发明的目的及优点更加清楚明白，以下结合实施例对本发明进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。
如图1所示，本发明实施例提供了一种英语发音测试与评价***，包括：
人机交互模块，用于完成用户的注册，控制命令以及数据需求命令的输入；
还用于进行测试模式、测试场景以及测试试题的选择；
音频数据采集模块，用于通过麦克风进行测试者发音音频数据的采集；
口型数据采集模块，用于通过黏贴设置在测试者嘴巴周围的三维姿态传感器1进行测试者整个测试过程中上嘴唇、下嘴唇、嘴角的姿态变化数据的采集，并将采集到的数据发送到口型识别模块；
口型识别模块，用于通过上嘴唇、下嘴唇、嘴角的姿态变化数据进行测试者整个测试过程中口型变化图谱以及口型变化特征参数的输出；
口型标准评估模块，用于将计算所得的口型变化特征参数与口型标准数据库内的对应的标准口型变化特征参数进行对比，如果差距小于某个门限，则认为口型标准，否则认为不标准，并输出正确的口型变化图谱、发音音频；
发音标准评估模块，用于采用MapReduce提取音频数据的特征数据，并基于对应的发音标准评估模型输出评估结果；
口语训练模块，包括单机模式和联机模式；
在单机模式下，所述口语训练模块根据人机交互模块输入的控制命令在素材库内调用相应的素材资料构建各种互动三维人物模型，所述互动三维人物模型根据语音识别模块识别的结果，在素材库内挖掘相应的对话内容与用户完成对话交流；
在联机模式下，所述口语训练模块根据人机交互模块输入的控制命令在素材库内调用相应的素材资料构建各种动态三维人物模型，所述服务器接收并将各账户输入的语音数据转发到对应的账户经播放器进行播放，从而实现各账户的联机口语训练；
评估单生成模块，用于将人机交互模块选中的测试模式、测试场景以及测试试题、音频数据采集模块采集到的音频数据、口型识别模块输出的口型变化图谱、发音音频，口型标准评估模块输出的评估结果和/或正确的口型变化图谱、以及发音标准评估输出的评估结果一起填入预制的latex模版生成评估单；
中央处理器，用于接收人机交互模块输入的控制命令和需求命令，并按照预设的算法发送到对应的模块进行执行；用于用户注册、权限管理以及密码的修改；还用于进行用户身份的认证。
本实施例中，所述三维姿态传感器之间通过连接Zigebee模块以自组网的方式与主控制器连接起来，形成一个有效的内部网络；三维姿态传感器将采集到的数据经内部网络以无线的方式传输至主控制器。所述三维姿态传感器包括橡胶外壳以及内嵌安装在橡胶外壳内的传感单元、存储组件、处理单元以及电源单元，所述的传感单元负责感知姿态参数信息，将感知到的数据送到处理单元加以处理，处理器单元包含存储组件和嵌入式处理组件两个部分；存储组件负责存储收集到的数据信息，执行设计存储好的程序代码，以协调融合不同传感器之间的信息；处理组件根据原先所存储的程序或主控制器发出的指令，启动感知单元收集环境的信息，并将所收集的数据融合处理后送到通信单元；通信单元负责数据信息在传感器节点之间传递；电源单元作为整个三维姿态传感器的基础模块，保证节点正常顺利工作。
本实施例中，所述三维姿态传感器通过水胶体敷料层黏贴设置在上嘴唇、下嘴唇和嘴角，水胶体敷料层为一次性用品，每一次使用后均需直接将水胶体敷料层丢弃，下一次使用时开启新的，使用时，先将水胶体敷料层与橡胶外壳的下底面粘结，然后再将粘附有水胶体敷料层的三维姿态传感器黏贴到上嘴唇、下嘴唇和嘴角，完成粘附后，通过主控制器开启三维姿态传感器进行工作。
本实施例中，素材库，内设有多种测试模式、测试场景以及测试试题资料，且连接有一数据更新模块，用于通过有线或无线的方式进行数据库内数据的更新。
本实施例中，在口语训练模块启动时，用户可根据需要进行口型数据采集模块、口型识别模块、口型标准评估模块、发音标准评估模块的启闭；同时整个训练过程采用脚本录制的方式进行记录，用户可以通过脚本回放的方式进行训练数据的查看。
以上所述仅是本发明的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以作出若干改进和润饰，这些改进和润饰也应视为本发明的保护范围。

Claims (7)

1.一种英语发音测试与评价***，其特征在于，包括：
人机交互模块，用于完成用户的注册，控制命令以及数据需求命令的输入；
还用于进行测试模式、测试场景以及测试试题的选择；
音频数据采集模块，用于通过麦克风进行测试者发音音频数据的采集；
口型数据采集模块，用于通过黏贴设置在测试者嘴巴周围的三维姿态传感器进行测试者整个测试过程中上嘴唇、下嘴唇、嘴角的姿态变化数据的采集，并将采集到的数据发送到口型识别模块；
口型识别模块，用于通过上嘴唇、下嘴唇、嘴角的姿态变化数据进行测试者整个测试过程中口型变化图谱以及口型变化特征参数的输出；
口型标准评估模块，用于将计算所得的口型变化特征参数与口型标准数据库内的对应的标准口型变化特征参数进行对比，如果差距小于某个门限，则认为口型标准，否则认为不标准，并输出正确的口型变化图谱、发音音频；
发音标准评估模块，用于采用MapReduce提取音频数据的特征数据，并基于对应的发音标准评估模型输出评估结果；
中央处理器，用于接收人机交互模块输入的控制命令和需求命令，并按照预设的算法发送到对应的模块进行执行；用于用户注册、权限管理以及密码的修改；还用于进行用户身份的认证。
2.如权利要求1所述的一种英语发音测试与评价***，其特征在于，所述三维姿态传感器之间通过连接Zigebee模块以自组网的方式与主控制器连接起来，形成一个有效的内部网络；三维姿态传感器将采集到的数据经内部网络以无线的方式传输至主控制器。
3.如权利要求1所述的一种英语发音测试与评价***，其特征在于，所述三维姿态传感器包括橡胶外壳以及内嵌安装在橡胶外壳内的传感单元、存储组件、处理单元以及电源单元，所述的传感单元负责感知姿态参数信息，将感知到的数据送到处理单元加以处理，处理器单元包含存储组件和嵌入式处理组件两个部分；存储组件负责存储收集到的数据信息，执行设计存储好的程序代码，以协调融合不同传感器之间的信息；处理组件根据原先所存储的程序或主控制器发出的指令，启动感知单元收集环境的信息，并将所收集的数据融合处理后送到通信单元；通信单元负责数据信息在传感器节点之间传递；电源单元作为整个三维姿态传感器的基础模块，保证节点正常顺利工作。
4.如权利要求1所述的一种英语发音测试与评价***，其特征在于，所述三维姿态传感器通过水胶体敷料层黏贴设置在上嘴唇、下嘴唇和嘴角。
5.如权利要求1所述的一种英语发音测试与评价***，其特征在于，还包括一口语训练模块，包括单机模式和联机模式；
在单机模式下，所述口语训练模块根据人机交互模块输入的控制命令在素材库内调用相应的素材资料构建各种互动三维人物模型，所述互动三维人物模型根据语音识别模块识别的结果，在素材库内挖掘相应的对话内容与用户完成对话交流；
在联机模式下，所述口语训练模块根据人机交互模块输入的控制命令在素材库内调用相应的素材资料构建各种动态三维人物模型，所述服务器接收并将各账户输入的语音数据转发到对应的账户经播放器进行播放，从而实现各账户的联机口语训练。
6.如权利要求1所述的一种英语发音测试与评价***，其特征在于，还包括一素材库，内设有多种测试模式、测试场景以及测试试题资料，且连接有一数据更新模块，用于通过有线或无线的方式进行数据库内数据的更新。
7.如权利要求1所述的一种英语发音测试与评价***，其特征在于，还包括一评估单生成模块，用于将人机交互模块选中的测试模式、测试场景以及测试试题、音频数据采集模块采集到的音频数据、口型识别模块输出的口型变化图谱、发音音频，口型标准评估模块输出的评估结果和/或正确的口型变化图谱、以及发音标准评估输出的评估结果一起填入预制的latex模版生成评估单。
CN201910734693.XA 2019-08-09 2019-08-09 一种英语发音测试与评价*** Pending CN110379221A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910734693.XA CN110379221A (zh) 2019-08-09 2019-08-09 一种英语发音测试与评价***

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910734693.XA CN110379221A (zh) 2019-08-09 2019-08-09 一种英语发音测试与评价***

Publications (1)

Publication Number Publication Date
CN110379221A true CN110379221A (zh) 2019-10-25

Family

ID=68258780

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910734693.XA Pending CN110379221A (zh) 2019-08-09 2019-08-09 一种英语发音测试与评价***

Country Status (1)

Country Link
CN (1) CN110379221A (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111639220A (zh) * 2020-05-14 2020-09-08 广东小天才科技有限公司 一种口语测评方法及装置、电子设备、存储介质
CN111639635A (zh) * 2020-05-26 2020-09-08 广东小天才科技有限公司 一种拍摄图片的处理方法及装置、电子设备、存储介质
CN111968461A (zh) * 2020-09-08 2020-11-20 王萍 一种英语教学用口型对照装置
CN112885168A (zh) * 2021-01-21 2021-06-01 绍兴市人民医院 一种基于ai的沉浸式言语反馈训练***
CN113257056A (zh) * 2021-05-14 2021-08-13 焦作大学 一种英语教学用口语发声训练装置
CN115132228A (zh) * 2022-06-28 2022-09-30 北京信息科技大学 一种语言能力分级方法及***

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20110134119A (ko) * 2010-06-08 2011-12-14 시소러스주식회사 외국어 학습을 위한 자청 학습 방법 및 학습기
CN106157212A (zh) * 2016-07-05 2016-11-23 太原理工大学 一种基于ema的发音障碍中文评估方法
CN106409030A (zh) * 2016-12-08 2017-02-15 河南牧业经济学院 一种个性化外语口语学习***
CN107945625A (zh) * 2017-11-20 2018-04-20 陕西学前师范学院 一种英语发音测试与评价***
CN108510988A (zh) * 2018-03-22 2018-09-07 深圳市迪比科电子科技有限公司 一种用于聋哑人的语言识别***及方法
CN109067879A (zh) * 2018-08-08 2018-12-21 四川理工学院 一种物联网多参数水质在线监测***
CN109637215A (zh) * 2019-01-16 2019-04-16 陕西国际商贸学院 一种大学英语教学用口语训练***

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20110134119A (ko) * 2010-06-08 2011-12-14 시소러스주식회사 외국어 학습을 위한 자청 학습 방법 및 학습기
CN106157212A (zh) * 2016-07-05 2016-11-23 太原理工大学 一种基于ema的发音障碍中文评估方法
CN106409030A (zh) * 2016-12-08 2017-02-15 河南牧业经济学院 一种个性化外语口语学习***
CN107945625A (zh) * 2017-11-20 2018-04-20 陕西学前师范学院 一种英语发音测试与评价***
CN108510988A (zh) * 2018-03-22 2018-09-07 深圳市迪比科电子科技有限公司 一种用于聋哑人的语言识别***及方法
CN109067879A (zh) * 2018-08-08 2018-12-21 四川理工学院 一种物联网多参数水质在线监测***
CN109637215A (zh) * 2019-01-16 2019-04-16 陕西国际商贸学院 一种大学英语教学用口语训练***

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111639220A (zh) * 2020-05-14 2020-09-08 广东小天才科技有限公司 一种口语测评方法及装置、电子设备、存储介质
CN111639635A (zh) * 2020-05-26 2020-09-08 广东小天才科技有限公司 一种拍摄图片的处理方法及装置、电子设备、存储介质
CN111639635B (zh) * 2020-05-26 2024-02-27 广东小天才科技有限公司 一种拍摄图片的处理方法及装置、电子设备、存储介质
CN111968461A (zh) * 2020-09-08 2020-11-20 王萍 一种英语教学用口型对照装置
CN111968461B (zh) * 2020-09-08 2021-02-09 山东劳动职业技术学院 一种英语教学用口型对照装置
CN112885168A (zh) * 2021-01-21 2021-06-01 绍兴市人民医院 一种基于ai的沉浸式言语反馈训练***
CN113257056A (zh) * 2021-05-14 2021-08-13 焦作大学 一种英语教学用口语发声训练装置
CN115132228A (zh) * 2022-06-28 2022-09-30 北京信息科技大学 一种语言能力分级方法及***
CN115132228B (zh) * 2022-06-28 2024-06-07 北京信息科技大学 一种语言能力分级方法及***

Similar Documents

Publication Publication Date Title
CN110379221A (zh) 一种英语发音测试与评价***
CN107945625A (zh) 一种英语发音测试与评价***
US11241789B2 (en) Data processing method for care-giving robot and apparatus
CN106448701B (zh) 一种声乐综合训练***
CN106097828B (zh) 一种声乐教学演唱技能检测***
CN106898363A (zh) 一种声乐学习电子辅助发音***
CN106934830B (zh) 一种基于深度图像的非接触式体能测试***及测试方法
CN104202466B (zh) 一种行进中使用手机进行安全提示的方法
CN105513114B (zh) 三维动画生成的方法和装置
CN100352622C (zh) 机器人设备、信息处理方法和程序
CN105129004B (zh) 平衡车驻留方法和装置
CN103778661B (zh) 一种生成说话人三维运动模型的方法、***及计算机
CN107292778A (zh) 一种基于认知情感感知的云课堂学习评价方法及其装置
CN110415681A (zh) 一种语音识别效果测试方法及***
CN109117952B (zh) 一种基于深度学习的机器人情感认知的方法
CN101197084A (zh) 自动化英语口语评测学习***
CN105740779A (zh) 人脸活体检测的方法和装置
CN107281710A (zh) 一种矫正动作误差的方法
CN106097829B (zh) 一种声乐练习辅助器
CN203149569U (zh) 一种语音手势交互翻译装置
CN107625527B (zh) 一种测谎方法及装置
CN108831232A (zh) 一种ct虚拟仿真训练***及方法
CN109935226A (zh) 一种基于深度神经网络的远场语音识别增强***及方法
CN107123330A (zh) 一种自动体外除颤器培训考核设备及培训考核方法
CN107833503A (zh) 配网核心作业增强现实仿真培训***

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20191025

RJ01 Rejection of invention patent application after publication