CN113593556A - 一种车载语音操作***人机互动方法及装置 - Google Patents

一种车载语音操作***人机互动方法及装置 Download PDF

Info

Publication number
CN113593556A
CN113593556A CN202110841638.8A CN202110841638A CN113593556A CN 113593556 A CN113593556 A CN 113593556A CN 202110841638 A CN202110841638 A CN 202110841638A CN 113593556 A CN113593556 A CN 113593556A
Authority
CN
China
Prior art keywords
voice
vehicle
operating system
data
command
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202110841638.8A
Other languages
English (en)
Inventor
胡凯文
胡世民
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen 800 Online Technology Co ltd
Original Assignee
Shenzhen 800 Online Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen 800 Online Technology Co ltd filed Critical Shenzhen 800 Online Technology Co ltd
Priority to CN202110841638.8A priority Critical patent/CN113593556A/zh
Publication of CN113593556A publication Critical patent/CN113593556A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/06—Creation of reference templates; Training of speech recognition systems, e.g. adaptation to the characteristics of the speaker's voice
    • G10L15/065—Adaptation
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/08—Speech classification or search
    • G10L15/18—Speech classification or search using natural language modelling
    • G10L15/1822—Parsing for meaning understanding
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223—Execution procedure of a spoken command
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/225—Feedback of the input speech

Landscapes

  • Engineering & Computer Science (AREA)
  • Computational Linguistics (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Artificial Intelligence (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明公开了一种车载语音操作***人机互动方法及装置，通过语音唤醒，启动车载语音操作***，在车内安装的多个语音收发器，用于收集多音源的声音，并将收集到的音频发送至音频处理器进行处理，得到用户语音数据；并对无法识别的语音进行重新匹配加入到新增语音指令中，便于以后人员再次使用该指令时，语音***能够进行识别并作出相应动作，避免因用户使用方言而导致同一语句多次使用时***无法解析而降低用户体验感，使得语音***更加完善；在语音解析识别过程中，用户新增的语音指令数据保存在本地数据库中，具有较好的私密性；***优先与本地数据进行比对，便于实现快速查询比对，提升运行效率。

Description

一种车载语音操作***人机互动方法及装置
技术领域
本发明涉及人机语音交互***技术领域，尤其涉及一种车载语音操作***人机互动方法及装置。
背景技术
汽车操作***作为汽车的大脑，相关技术也在不断进步，但市场上的车辆操作***却一直没有足够颠覆的用户体验，最大的原因是用户需要进行诸多手动操作，而在用户驾车时手动操作需要用户转移注意力和时间，这对用户来说不仅不够便捷，对于驾车这种特别需要用户专注的行为来说有时候将是致命的。
语音识别、控制技术的不断成熟，其被更广泛的应用到各个领域，也有更多的汽车的智能操作***开始使用语音识别与控制技术。然而现行的语音识别、控制技术应用到操作***中仍有一些问题需要解决。
为了解决上述问题，人们开始研究车载人机语音交互***，人员发出语音指令通过车载语音交互***处理后，***指导车载器件进行相关动作，以此简化人员的操作步骤，减少人员手上的动作，使得司机能够更加专心的从事驾驶工作，提高专注力，可以有效降低因为司机分神导致的交通事故发生的几率。但是，现有的车载***任然存在一些不足，因为车载语音操作***在接收到人员的语音指令后，将语音信息进行编码并与语音数据库进行比对、查询出相关机械指令，进而指导机器动作，若司机或车内其他人员使用方言进行人机交互时，***往往因为无法识别该语音内容进而无法作出对应的动作，影响人员的使用体验。
发明内容
本发明的目的是为了解决现有技术中存在的缺点，而提出了一种车载语音操作***人机互动方法及装置。
本发明提出的一种车载语音操作***人机互动方法，包括以下步骤：
S1：语音唤醒，车内人员使用指定的唤醒语句启动车载语音操作***；
S2：在车内安装多个语音收发器，用于收集声音，并将收集到的音频发送至音频处理器进行处理，得到用户语音数据；
S3：对用户语音进行识别判断语义，若语义识别成功则执行S4，并将无法识别信号标识int_flag_a置0；若语义无法识别则提醒用户重新说，将本次无法识别的语音数据保存到本地语音数据库，同时将无法识别信号标识int_flag_a置1，并回到步骤S2；
S4：将车载语音操作***识别的指令显示在显示器上，并检测无法识别信号的标识值，若无法识别信号标识int_flag_a为0，表示***记载没有记录到无法识别的语义，执行S6；若无法识别信号标识int_flag_a为1，表示有***记录到有无法识别的语义，并询问是否进入语音指令新增模块；
S5：若S4中用户选择进入语音指令新增模块，则语音操作***将当前本地语音数据库中存储的无法识别的指令与本次识别成功的指令进行匹配关联并保存至在线语音数据库，以此扩充语句指令，便于下次用户再次使用该无法识别的语句指令时***能够完成识别；若S4中用户选择不进入语音指令新增模块，则语音操作***将当前本地语音数据中存储的无法识别的指令删除后执行S6；
S6：人员确定是否执行识别的指令，若是，则执行S7；若否，这执行S9；
S7：语音***自动将本次语音指令与***中的动作指令进行匹配，并将匹配后的动作指令发送到汽车的中央处理器；
S8：中央处理器接收到动作指令后，控制相关设备进行动作；
S9：结束本次语音操作，车载语音操作***进入待唤醒状态。
优选地，音频处理器用于除杂滤波，分离出不同音源的声音，并将语音文件转化为文本文件显示在显示器上。
优选地，S3步骤中语义为音频处理器解析分段整合的数据，若整合后的数据能格式化为标准语句，则表明语义可识别；若整合后的数据不能格式化为标准语句，则表明语义不可识别。
优选地，语音指令与动作指令为多对一的关系，便于在添加新的语音指令后，使用新的语音指令控制设备动作。
优选地，步骤S8中设备动作为硬件设备作出响应或软件停止/开始运行。
一种车载语音操作***人机互动装置，包括语音收发器、数据存储器、显示器、按键、音频处理器、基于SIM卡的网络通讯器、车载中控器和后台服务器。
优选地，语音收发器为麦克风，且麦克风个数至少为四，分布安装于车辆的内部四周。
优选地，数据存储器包含有以下数据分类：指令数据库和语音数据库，语音数据库中包含有本地数据库和在线数据库，本地语音数据库为两个区域，其一为临时区域，该区域用于存储***运行过程中无法识别的语音数据，该区域数据掉电丢失；另一区域为存储区域，该区域用于存储匹配成功后的新增语音数据，参与语音比对遍历。
优选地，按键的个数至少为五，按键均位于车辆的方向盘上，显示器为触摸屏。
本发明的有益效果为：
本发明通过人员语音唤醒功能启动车载语音操作***，在车内安装的多个语音收发器，用于收集多音源的声音，并将收集到的音频发送至音频处理器进行处理，得到用户语音数据；并对无法识别的语音进行重新匹配加入到新增语音指令中，便于以后人员再次使用该指令时，语音***能够进行识别并作出相应动作，避免因用户使用方言而导致同一语句多次使用时***无法解析而降低用户体验感，使得语音***更加完善；在语音解析识别过程中，用户可以放弃语义匹配，以实现***的可选择性，用户新增的语音指令数据保存在本地数据库中，具有较好的私密性，在数据比对时，***优先与本地数据进行比对，以此便于实现快速查询比对，提升运行效率。
附图说明
图1为本发明提出的一种车载语音操作***人机互动方法的执行流程图；
图2为本发明提出的一种车载语音操作***人机互动装置的结构框图；
图3为本发明提出的一种车载语音操作***人机互动装置的数据库框图。
具体实施方式
下面详细描述本专利的实施例，所述实施例的示例在附图中示出，其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的，仅用于解释本专利，而不能理解为对本专利的限制。
在本专利的描述中，需要理解的是，术语“中心”、“上”、“下”、“前”、“后”、“左”、“右”、“竖直”、“水平”、“顶”、“底”、“内”、“外”等指示的方位或位置关系为基于附图所示的方位或位置关系，仅是为了便于描述本专利和简化描述，而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作，因此不能理解为对本专利的限制。
在本专利的描述中，需要说明的是，除非另有明确的规定和限定，术语“安装”、“相连”、“连接”、“设置”应做广义理解，例如，可以是固定相连、设置，也可以是可拆卸连接、设置，或一体地连接、设置。对于本领域的普通技术人员而言，可以根据具体情况理解上述术语在本专利中的具体含义。
参照图1-3，一种车载语音操作***人机互动方法，包括以下步骤：
S1：语音唤醒，车内人员使用指定的唤醒语句启动车载语音操作***；
S2：在车内安装多个语音收发器，用于收集声音，并将收集到的音频发送至音频处理器进行处理，得到用户语音数据；
S3：对用户语音进行识别判断语义，若语义识别成功则执行S4，并将无法识别信号标识int_flag_a置0；若语义无法识别则提醒用户重新说，将本次无法识别的语音数据保存到本地语音数据库，同时将无法识别信号标识int_flag_a置1，并回到步骤S2；
S4：将车载语音操作***识别的指令显示在显示器上，并检测无法识别信号的标识值，若无法识别信号标识int_flag_a为0，表示***记载没有记录到无法识别的语义，执行S6；若无法识别信号标识int_flag_a为1，表示有***记录到有无法识别的语义，并询问是否进入语音指令新增模块；
S5：若S4中用户选择进入语音指令新增模块，则语音操作***将当前本地语音数据库中存储的无法识别的指令与本次识别成功的指令进行匹配关联并保存至在线语音数据库，以此扩充语句指令，便于下次用户再次使用该无法识别的语句指令时***能够完成识别；若S4中用户选择不进入语音指令新增模块，则语音操作***将当前本地语音数据中存储的无法识别的指令删除后执行S6；
S6：人员确定是否执行识别的指令，若是，则执行S7；若否，这执行S9；
S7：语音***自动将本次语音指令与***中的动作指令进行匹配，并将匹配后的动作指令发送到汽车的中央处理器；
S8：中央处理器接收到动作指令后，控制相关设备进行动作；
S9：结束本次语音操作，车载语音操作***进入待唤醒状态。
本发明中，音频处理器用于除杂滤波，分离出不同音源的声音，并将语音文件转化为文本文件显示在显示器上。
本发明中，S3步骤中语义为音频处理器解析分段整合的数据，若整合后的数据能格式化为标准语句，则表明语义可识别；若整合后的数据不能格式化为标准语句，则表明语义不可识别，如本车***中不包含有语音中提到的需要动作的设备。
本发明中，语音指令与动作指令为多对一的关系，便于在添加新的语音指令后，使用新的语音指令控制设备动作。
本发明中，步骤S8中设备动作为硬件设备作出响应或软件停止/开始运行。
一种车载语音操作***人机互动装置，包括语音收发器、数据存储器、显示器、按键、音频处理器、基于SIM卡的网络通讯器、车载中控器和后台服务器。
本发明中，语音收发器为麦克风，且麦克风个数至少为四，分布安装于车辆的内部四周，用于接收多位置的声音信号。
本发明中，数据存储器包含有以下数据分类：指令数据库和语音数据库，语音数据库中包含有本地数据库和在线数据库，本地语音数据库为两个区域，其一为临时区域，该区域用于存储***运行过程中无法识别的语音数据，该区域数据掉电丢失；另一区域为存储区域，该区域用于存储匹配成功后的新增语音数据，参与语音比对遍历。
本发明中，按键的个数至少为五，按键均位于车辆的方向盘上，具有翻阅和确认功能，显示器为触摸屏。
以上所述，仅为本发明较佳的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，根据本发明的技术方案及其发明构思加以等同替换或改变，都应涵盖在本发明的保护范围之内。

Claims (9)

1.一种车载语音操作***人机互动方法，其特征在于，包括以下步骤：
S1：语音唤醒，车内人员使用指定的唤醒语句启动车载语音操作***；
S2：在车内安装多个语音收发器，用于收集声音，并将收集到的音频发送至音频处理器进行处理，得到用户语音数据；
S3：对用户语音进行识别判断语义，若语义识别成功则执行S4，并将无法识别信号标识int_flag_a置0；若语义无法识别则提醒用户重新说，将本次无法识别的语音数据保存到本地语音数据库，同时将无法识别信号标识int_flag_a置1，并回到步骤S2；
S4：将车载语音操作***识别的指令显示在显示器上，并检测无法识别信号的标识值，若无法识别信号标识int_flag_a为0，表示***记载没有记录到无法识别的语义，执行S6；若无法识别信号标识int_flag_a为1，表示有***记录到有无法识别的语义，并询问是否进入语音指令新增模块；
S5：若S4中用户选择进入语音指令新增模块，则语音操作***将当前本地语音数据库中存储的无法识别的指令与本次识别成功的指令进行匹配关联并保存至在线语音数据库，以此扩充语句指令，便于下次用户再次使用该无法识别的语句指令时***能够完成识别；若S4中用户选择不进入语音指令新增模块，则语音操作***将当前本地语音数据中存储的无法识别的指令删除后执行S6；
S6：人员确定是否执行识别的指令，若是，则执行S7；若否，这执行S9；
S7：语音***自动将本次语音指令与***中的动作指令进行匹配，并将匹配后的动作指令发送到汽车的中央处理器；
S8：中央处理器接收到动作指令后，控制相关设备进行动作；
S9：结束本次语音操作，车载语音操作***进入待唤醒状态。
2.根据权利要求1所述的一种车载语音操作***人机互动方法，其特征在于，所述音频处理器用于除杂滤波，分离出不同音源的声音，并将语音文件转化为文本文件显示在显示器上。
3.根据权利要求1所述的一种车载语音操作***人机互动方法及装置，其特征在于，S3步骤中所述语义为音频处理器解析分段整合的数据，若整合后的数据能格式化为标准语句，则表明语义可识别；若整合后的数据不能格式化为标准语句，则表明语义不可识别，如本车***中不包含有语音中提到的需要动作的设备。
4.根据权利要求1所述的一种车载语音操作***人机互动方法，其特征在于，所述语音指令与动作指令为多对一的关系，便于在添加新的语音指令后，使用新的语音指令控制设备动作。
5.根据权利要求1所述的一种车载语音操作***人机互动方法，其特征在于，所述步骤S8中设备动作为硬件设备作出响应或软件停止/开始运行。
6.一种车载语音操作***人机互动装置，其特征在于，包括语音收发器、数据存储器、显示器、按键、音频处理器、基于SIM卡的网络通讯器、车载中控器和后台服务器。
7.根据权利要求6所述的一种车载语音操作***人机互动装置，其特征在于，所述语音收发器为麦克风，且麦克风个数至少为四，分布安装于车辆的内部四周，用于接收多位置的声音信号。
8.根据权利要求6所述的一种车载语音操作***人机互动装置，其特征在于，所述数据存储器包含有以下数据分类：指令数据库和语音数据库，语音数据库中包含有本地数据库和在线数据库，本地语音数据库为两个区域，其一为临时区域，该区域用于存储***运行过程中无法识别的语音数据，该区域数据掉电丢失；另一区域为存储区域，该区域用于存储匹配成功后的新增语音数据，参与语音比对遍历。
9.根据权利要求6至8中任一所述的一种车载语音操作***人机互动装置，其特征在于，所述按键的个数至少为五，按键均位于车辆的方向盘上，具有翻阅和确认功能，显示器为触摸屏。
CN202110841638.8A 2021-07-26 2021-07-26 一种车载语音操作***人机互动方法及装置 Pending CN113593556A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110841638.8A CN113593556A (zh) 2021-07-26 2021-07-26 一种车载语音操作***人机互动方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110841638.8A CN113593556A (zh) 2021-07-26 2021-07-26 一种车载语音操作***人机互动方法及装置

Publications (1)

Publication Number Publication Date
CN113593556A true CN113593556A (zh) 2021-11-02

Family

ID=78249845

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110841638.8A Pending CN113593556A (zh) 2021-07-26 2021-07-26 一种车载语音操作***人机互动方法及装置

Country Status (1)

Country Link
CN (1) CN113593556A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114333828A (zh) * 2022-03-08 2022-04-12 深圳市华方信息产业有限公司 用于数码产品的快速语音识别***

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080243498A1 (en) * 2007-03-30 2008-10-02 Verizon Data Services, Inc. Method and system for providing interactive speech recognition using speaker data
CN107199971A (zh) * 2017-05-03 2017-09-26 深圳车盒子科技有限公司 车载语音交互方法、终端及计算机可读存储介质
CN108766425A (zh) * 2018-05-29 2018-11-06 广东好帮手环球科技有限公司 一种车载设备语音控制方法
CN110675863A (zh) * 2018-07-03 2020-01-10 上海智臻智能网络科技股份有限公司 语音语料生成方法及装置、语音识别方法及装置
CN110942765A (zh) * 2019-11-11 2020-03-31 珠海格力电器股份有限公司 一种构建语料库的方法、设备、服务器和存储介质
CN111986651A (zh) * 2020-09-02 2020-11-24 上海优扬新媒信息技术有限公司 一种人机交互方法、装置及智能交互终端
CN112885351A (zh) * 2021-04-30 2021-06-01 浙江非线数联科技股份有限公司 一种基于迁移学习的方言语音识别方法及装置

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080243498A1 (en) * 2007-03-30 2008-10-02 Verizon Data Services, Inc. Method and system for providing interactive speech recognition using speaker data
CN107199971A (zh) * 2017-05-03 2017-09-26 深圳车盒子科技有限公司 车载语音交互方法、终端及计算机可读存储介质
CN108766425A (zh) * 2018-05-29 2018-11-06 广东好帮手环球科技有限公司 一种车载设备语音控制方法
CN110675863A (zh) * 2018-07-03 2020-01-10 上海智臻智能网络科技股份有限公司 语音语料生成方法及装置、语音识别方法及装置
CN110942765A (zh) * 2019-11-11 2020-03-31 珠海格力电器股份有限公司 一种构建语料库的方法、设备、服务器和存储介质
CN111986651A (zh) * 2020-09-02 2020-11-24 上海优扬新媒信息技术有限公司 一种人机交互方法、装置及智能交互终端
CN112885351A (zh) * 2021-04-30 2021-06-01 浙江非线数联科技股份有限公司 一种基于迁移学习的方言语音识别方法及装置

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114333828A (zh) * 2022-03-08 2022-04-12 深圳市华方信息产业有限公司 用于数码产品的快速语音识别***

Similar Documents

Publication Publication Date Title
EP1853465B1 (de) Verfahren und vorrichtung zur sprachsteuerung eines gerätes oder eines systems in einem kraftfahrzeug
EP0852051B1 (de) Verfahren zur automatischen steuerung eines oder mehrerer geräte durch sprachkommandos oder per sprachdialog im echtzeitbetrieb und vorrichtung zum ausführen des verfahrens
EP1018109B1 (en) Apparatus and method for distinguishing similar-sounding utterances in speech recognition
CN104240700B (zh) 一种面向车载终端设备的全局语音交互方法及***
CN113031905A (zh) 语音交互方法、车辆、服务器、***和存储介质
CN108382155B (zh) 一种带提醒功能的空调语音控制装置
CN110880321B (zh) 基于语音的智能刹车方法、装置、设备及存储介质
DE102013007502A1 (de) Computer-implementiertes Verfahren zum automatischen Trainieren eins Dialogsystems und Dialogsystem zur Erzeugung von semantischen Annotationen
CN206595039U (zh) 一种车载语音交互***
JP2000315096A (ja) 音声認識装置を備えたマンマシンシステム
CN109545207A (zh) 一种语音唤醒方法及装置
CN109994106B (zh) 一种语音处理方法及设备
CN105681579A (zh) 终端及其处于导航状态时的屏幕控制方法以及装置
CN113593556A (zh) 一种车载语音操作***人机互动方法及装置
CN111916088A (zh) 一种语音语料的生成方法、设备及计算机可读存储介质
CN113593565B (zh) 一种智能家庭设备管控方法和***
DE102021212744A1 (de) Dialogsystem, fahrzeug mit demselben und verfahren zum steuern eines dialogsystems
CN110588524B (zh) 一种信息显示的方法及车载辅助显示***
JP2017068359A (ja) 対話装置及び対話制御方法
CN111951798A (zh) 基于语音的车窗升降控制方法及***
CN105955698B (zh) 一种语音操控方法及装置
DE102017211447B4 (de) Verfahren zum Auswählen eines Listeneintrags aus einer Auswahlliste einer Bedienvorrichtung mittels Sprachbedienung sowie Bedienvorrichtung
CN114999482A (zh) 基于视线的语音识别方法、装置、设备及存储介质
CN109192211A (zh) 一种语音信号识别的方法、装置及设备
CN113870857A (zh) 一种语音控制场景方法和语音控制场景***

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20211102