CN112037808B - 一种用于电梯轿厢的回音消除方法及其装置 - Google Patents

一种用于电梯轿厢的回音消除方法及其装置 Download PDF

Info

Publication number
CN112037808B
CN112037808B CN202010901443.3A CN202010901443A CN112037808B CN 112037808 B CN112037808 B CN 112037808B CN 202010901443 A CN202010901443 A CN 202010901443A CN 112037808 B CN112037808 B CN 112037808B
Authority
CN
China
Prior art keywords
echo
signal
audio
current
loudspeaker
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010901443.3A
Other languages
English (en)
Other versions
CN112037808A (zh
Inventor
章兢
麻旺勇
高升
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hangzhou Suifeng Information Technology Co ltd
Original Assignee
Hangzhou Suifeng Information Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hangzhou Suifeng Information Technology Co ltd filed Critical Hangzhou Suifeng Information Technology Co ltd
Priority to CN202010901443.3A priority Critical patent/CN112037808B/zh
Publication of CN112037808A publication Critical patent/CN112037808A/zh
Application granted granted Critical
Publication of CN112037808B publication Critical patent/CN112037808B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/0208Noise filtering
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00Circuits for transducers, loudspeakers or microphones
    • H04R3/02Circuits for transducers, loudspeakers or microphones for preventing acoustic reaction, i.e. acoustic oscillatory feedback
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/0208Noise filtering
    • G10L2021/02082Noise filtering the noise being echo, reverberation of the speech
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2203/00Details of circuits for transducers, loudspeakers or microphones covered by H04R3/00 but not provided for in any of its subgroups

Landscapes

  • Engineering & Computer Science (AREA)
  • Acoustics & Sound (AREA)
  • Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Quality & Reliability (AREA)
  • Computational Linguistics (AREA)
  • Multimedia (AREA)
  • General Health & Medical Sciences (AREA)
  • Otolaryngology (AREA)
  • Cable Transmission Systems, Equalization Of Radio And Reduction Of Echo (AREA)
  • Indicating And Signalling Devices For Elevators (AREA)

Abstract

本发明涉及一种用于电梯轿厢的回音消除方法,包括以下步骤:S1:远端音频信号通过音频输入接口输入至MCU处理后由扬声器产生当前回音信号;S2:远端音频信号还输入至自适应滤波器,输出当前回音估计信号;S3:麦克风收集近端音频信号、当前回音信号以及上轮回音信号;S4:根据预先设置在MCU中的回音消除算法,麦克风收集到的信号、当前回音估计信号以及上轮回音估计信号进行计算,获得纯净回音信号,由音频输出接口输出;S5:保存当前回音估计信号作为下一轮回音消除信号的参考参数使用。本发明的技术方案在结构上采用扬声器和麦克垂直摆放,能够减少回音的产生,同时扬声器朝向轿厢地面,扬声器与地面距离较远能够减弱回音的产生。

Description

一种用于电梯轿厢的回音消除方法及其装置
技术领域
本发明属于回音消除技术领域,具体涉及一种用于电梯轿厢的回音消除方法及其装置。
背景技术
在电梯物联网领域中,当电梯发生困人事件时,救援人员将会和被困人员进行语音安抚和沟通。但是由于电梯轿厢是封闭空间,且空间较小,在双向语音的过程中,会造成较大的回音,导致语音效果不好,救援人员与轿厢内部人员沟通起来有较大的阻碍,导致救援实施困难。
传统的回音消除(Acousticechocancellation,AEC)用以消除免持通话的不想要的回音,通常利用适应性滤波器模型化回音路径脉冲,而将回音自麦克风输出信号中移除。
而因轿厢的特殊环境,回音中存在当前的回音和上一次的回音的多重回音交杂,回音在被麦克风接收时与扬声器播放的声音的强度有所差别,传统的回音消除技术会因此出现计算不准确导致无法精准的去除回音信号而耽搁电梯救援行动的实行。
发明内容
为了解决上述问题,本发明提供了一种用于电梯轿厢的回音消除方法及其装置,通过装置中麦克和喇叭的特殊摆放位置以及内部继承自主研发的双重消除回音算法,实现回音的消除,改善通话质量,在电梯物联网中得到很好的应用。
一种用于电梯轿厢的回音消除方法,包括以下步骤:
S1:远端音频信号通过音频输入接口输入至MCU调制后由扬声器产生当前回音信号;
S2:远端音频信号还输入至自适应滤波器,并由自适应滤波器计算输出当前回音估计信号;
S3:麦克风收集近端音频信号、步骤S1中扬声器产生的当前回音信号以及上一轮回音消除中的扬声器产生的上轮回音信号;
S4:根据预先设置在MCU中的回音消除算法,对步骤S3中麦克风收集到的信号、步骤S2中的当前回音估计信号以及保存在MCU中的上轮回音估计信号进行计算,获得纯净回音信号,由音频输出接口输出;
S5:保存当前回音估计信号作为下一轮回音消除信号的参考参数使用。
优选的,所述步骤S2中的当前回音估计信号的计算公式为:
其中r’n为当前回音估计信号,wT n为当前的系数矩阵,yn为远端输入信号。
优选的,所述wT n的获取过程为:
计算回音估计误差,计算公式为:en=dn–(λr’n-1+r’n),其中dn=xn+rn+rn-1
通过迭代计算得到minJ=en 2,其中迭代步长:迭代方程为Wn+1=wnn*en*yn
当J为最小值时,通过上述迭代计算获得当前的系数矩阵wT n
其中,en为回音估计误差,dn为步骤S3中麦克风收集的音频信号总和,r’n-1为上轮回音估计信号,r’n为当前回音估计信号,xn为近端输入信号,rn为当前回音信号,rn-1为上轮回音信号,J为值为en 2的指代符号,ηn为迭代步长,yT n为远端输入信号yn的转置矩阵,Wn+1为保存wnn*en*yn的值的指代符号,λ为弱化系数。
优选的,所述步骤S4中的纯净回音信号的计算公式为:un=(xn+rn+rn-1)–(λr’n-1+r’n),其中un为纯净回音信号,r’n-1为上轮回音估计信号,r’n为当前回音估计信号,λ为弱化系数,xn为近端输入信号,rn为当前回音信号,rn-1为上轮回音信号。
优选的,步骤S5中的当前回音估计信号的保存在算法中表现为令rn=rn-1,将当前回音估计信号作为下一轮中上一轮回音的弱化参数。
本发明还提供了一种用于电梯轿厢的回音消除装置,包括:
音频输入接口:用于接收远端音频信号;
扬声器:用于产生回音信号;
自适应滤波器:用于根据远端音频信号生成回音估计信号;
麦克风:用于接收回音以及近端音频信号;
MCU:用于存储回音消除算法,接收上述设备输出的各项音频信号进行处理,得到纯净回音;
音频输出接口:用于输出纯净回音信号。
优选的,所述扬声器与轿厢地面垂直,所述扬声器麦克垂直摆放。
优选的,还包括音频编码器和音频解码器,所述音频编码器将接收的音频信号解码成数字信号后发送至MCU处理,MCU处理完后的音频信号再由音频解码器解码后输出。
本发明的有益效果为:本发明的技术方案在结构上采用扬声器和麦克垂直摆放,能够减少回音的产生,同时扬声器朝向轿厢地面,扬声器与地面距离较远能够减弱回音的产生。
本发明在算法上采用双重消除回音,由于轿厢的特殊环境,回音中存在当前的回音和上一次的回音的多重回音交杂,本发明使用的算法采用双重消除能够将回音降到最少;同时算法考虑的回音在被麦克风接收时与扬声器播放的声音的强度有所差别,在估计回音路径时加上了回音弱化系数,更好的拟合回音,将最终的回音降到最低。
附图说明
图1为本发明的提供的方法的流程图。
图2为本发明提供的装置的内部连接框图。
图3为本发明提供的装置的外部构造图。
其中,1、音频输入接口;2、扬声器;3、麦克风;4、音频输出接口。
具体实施方式
下面将结合说明书附图对本发明的实施例进行详细说明。
如图1所示,本发明实施例提供的一种用于电梯轿厢的回音消除方法,包括以下步骤:
1、远端音频信号通过音频输入接口输入至MCU调制后由扬声器产生当前回音信号。
2、远端音频信号还输入至自适应滤波器,并由自适应滤波器计算输出当前回音估计信号。当前回音估计信号的计算公式为:
其中r’n为当前回音估计信号,wT n为当前的系数矩阵,yn为远端输入信号,wn和yn-i代表累计和,wn为n取值0到N-1,yn-i同理。
wT n的获取过程为:
计算回音估计误差,计算公式为:en=dn–(λr’n-1+r’n),其中dn=xn+rn+rn-1
通过迭代计算得到minJ=en 2,其中迭代步长:迭代方程为:
Wn+1=wnn*en*yn
当J为最小值时,通过上述迭代计算获得当前的系数矩阵wT n
其中,en为回音估计误差,dn为步骤S3中麦克风收集的音频信号总和,r’n-1为上轮回音估计信号,r’n为当前回音估计信号,xn为近端输入信号,rn为当前回音信号,rn-1为上轮回音信号,J为值为en 2的指代符号,ηn为迭代步长,yT n为远端输入信号yn的转置矩阵,Wn+1为保存wnn*en*yn的值的指代符号,λ为弱化系数。
3、麦克风收集近端音频信号、步骤S1中扬声器产生的当前回音信号以及上一轮回音消除中的扬声器产生的上轮回音信号。
4、根据回音消除算法,对步骤S3中麦克风收集到的信号、步骤S2中的当前回音估计信号以及保存在MCU中的上轮回音估计信号进行计算,获得纯净回音信号,由音频输出接口输出。纯净回音信号的计算公式为:un=(xn+rn+rn-1)–(λr’n-1+r’n),其中un为纯净回音信号,r’n-1为上轮回音估计信号,r’n为当前回音估计信号,λ为弱化系数,xn为近端输入信号,rn为当前回音信号,rn-1为上轮回音信号。
5、保存当前回音估计信号作为下一轮回音消除信号的参考参数使用。当前回音估计信号的保存在算法中表现为令rn=rn-1,将当前回音估计信号作为下一轮中上一轮回音的弱化参数。
如图2和图3所示,本发明实施例还提供了一种用于电梯轿厢的回音消除装置,包括接收远端音频信号的音频输入接口1、产生回音信号的扬声器2、根据远端音频信号生成回音估计信号的自适应滤波器、接收回音以及近端音频信号的麦克风3、用于存储回音消除算法,接收上述设备输出的各项音频信号进行处理,得到纯净回音的MCU、用于输出纯净回音信号的音频输出接口4。
由于输入的音频不是MCU能直接处理的数据,本装置还包括音频编码器和音频解码器,音频编码器将接收的音频信号解码成数字信号后发送至MCU处理,MCU处理完后的音频信号再由音频解码器解码后输出。
作为本发明的的一个实施例,扬声器与轿厢地面垂直,扬声器麦克垂直摆放。
本发明实施例提供的装置的工作原理如上述提供的一种用于电梯轿厢的回音消除方法方法所示。
最后应说明的是:以上所述实施例,仅为本发明的具体实施方式,用以说明本发明的技术方案,而非对其限制,本发明的保护范围并不局限于此,尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,其依然可以对前述实施例所记载的技术方案进行修改或可轻易想到变化,或者对其中部分技术特征进行等同替换;而这些修改、变化或者替换,并不使相应技术方案的本质脱离本发明实施例技术方案的精神和范围。都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应所述以权利要求的保护范围为准。

Claims (5)

1.一种用于电梯轿厢的回音消除方法,其特征在于,包括以下步骤:
S1:远端音频信号通过音频输入接口输入至MCU处理后由扬声器产生当前回音信号;
S2:远端音频信号还输入至自适应滤波器,并由自适应滤波器计算输出当前回音估计信号;
S3:麦克风收集近端音频信号、步骤S1中扬声器产生的当前回音信号以及上一轮回音消除中的扬声器产生的上轮回音信号;
S4:根据预先设置在MCU中的回音消除算法,对步骤S3中麦克风收集到的信号、步骤S2中的当前回音估计信号以及保存在MCU中的上轮回音估计信号进行计算,获得纯净回音信号,由音频输出接口输出;
S5:保存当前回音估计信号作为下一轮回音消除信号的参考参数使用;
所述步骤S2中的当前回音估计信号的计算公式为:
其中r’n为当前回音估计信号,wT n为当前的系数矩阵,yn为远端输入信号,wn和yn-i代表累计和,wn为n取值0到N-1,yn-i同理;
所述wT n的获取过程为:
计算回音估计误差,计算公式为:en=dn-(λr’n-1+r’n),其中dn=xn+rn+rn-1;通过迭代计算得到min J=en 2,其中迭代步长:迭代方程为Wn+1=wnn*en*yn
当J为最小值时,通过上述迭代计算获得当前的系数矩阵wT n
其中,en为回音估计误差,dn为步骤S3中麦克风收集的音频信号总和,r’n-1为上轮回音估计信号,r’n为当前回音估计信号,xn为近端输入信号,rn为当前回音信号,rn-1为上轮回音信号,J为值为en 2的指代符号,ηn为迭代步长,yT n为远端输入信号yn的转置矩阵,Wn+1为保存wnn*en*yn的值的指代符号,λ为弱化系数。
2.根据权利要求1所述的用于电梯轿厢的回音消除方法,其特征在于,所述步骤S4中的纯净回音信号的计算公式为:un=(xn+rn+rn-1)-(λr’n-1+r’n),其中un为纯净回音信号,r’n-1为上轮回音估计信号,r’n为当前回音估计信号,λ为弱化系数,xn为近端输入信号,rn为当前回音信号,rn-1为上轮回音信号。
3.根据权利要求2所述的用于电梯轿厢的回音消除方法,其特征在于,步骤S5中的当前回音估计信号的保存在算法中表现为令rn=rn-1,将当前回音估计信号作为下一轮中上一轮回音的弱化参数。
4.一种用于电梯轿厢的回音消除装置,使用如权利要求1所述的回音消除方法,其特征在于,包括:
音频输入接口:用于接收远端音频信号;
扬声器:用于产生回音信号;
自适应滤波器:用于根据远端音频信号生成回音估计信号;
麦克风:用于接收回音以及近端音频信号;
MCU:用于存储回音消除算法,接收音频输入接口、扬声器、自适应滤波器和麦克风输出的各项音频信号进行处理,得到纯净回音;
音频输出接口:用于输出纯净回音信号;
所述扬声器与轿厢地面垂直,所述扬声器麦克风垂直摆放。
5.根据权利要求4中所述的用于电梯轿厢的回音消除装置,其特征在于,还包括音频编码器和音频解码器,所述音频编码器将接收的音频信号解码成数字信号后发送至MCU处理,MCU处理完后的音频信号再由音频解码器解码后输出。
CN202010901443.3A 2020-09-01 2020-09-01 一种用于电梯轿厢的回音消除方法及其装置 Active CN112037808B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010901443.3A CN112037808B (zh) 2020-09-01 2020-09-01 一种用于电梯轿厢的回音消除方法及其装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010901443.3A CN112037808B (zh) 2020-09-01 2020-09-01 一种用于电梯轿厢的回音消除方法及其装置

Publications (2)

Publication Number Publication Date
CN112037808A CN112037808A (zh) 2020-12-04
CN112037808B true CN112037808B (zh) 2024-04-19

Family

ID=73587029

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010901443.3A Active CN112037808B (zh) 2020-09-01 2020-09-01 一种用于电梯轿厢的回音消除方法及其装置

Country Status (1)

Country Link
CN (1) CN112037808B (zh)

Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1687894A (zh) * 2005-04-08 2005-10-26 北京中星微电子有限公司 一种消除回音的方法
CN1798217A (zh) * 2004-12-14 2006-07-05 哈曼贝克自动***-威美科公司 限制接收音频的***
CN101179296A (zh) * 2006-11-10 2008-05-14 索尼株式会社 回音消除器和话音处理装置
CN101227761A (zh) * 2006-11-07 2008-07-23 美商富迪科技股份有限公司 自动消除啸音的声音处理装置与方法
CN101262530A (zh) * 2008-04-29 2008-09-10 中兴通讯股份有限公司 一种消除移动终端回音的装置
CN101370323A (zh) * 2007-08-15 2009-02-18 美商富迪科技股份有限公司 执行声学回音消除的装置及其方法
CN101877750A (zh) * 2009-04-28 2010-11-03 索尼公司 回音消除设备、回音消除方法和通信设备
CN103999478A (zh) * 2011-12-16 2014-08-20 高通股份有限公司 通过动态补偿移动装置中的扬声器与麦克风之间的可变距离来优化音频处理功能
CN104980601A (zh) * 2014-04-02 2015-10-14 想象技术有限公司 用于动态调谐回音消除器的增益控制***及方法
CN106297815A (zh) * 2016-07-27 2017-01-04 武汉诚迈科技有限公司 一种语音识别场景中回音消除的方法
CN106657507A (zh) * 2015-11-03 2017-05-10 中移(杭州)信息技术有限公司 一种声学回声消除方法及装置
CN109688284A (zh) * 2018-12-28 2019-04-26 广东美电贝尔科技集团股份有限公司 一种回音延时检测方法
CN110310653A (zh) * 2019-07-09 2019-10-08 杭州国芯科技股份有限公司 一种回声消除方法
CN110769352A (zh) * 2018-07-25 2020-02-07 西安中兴新软件有限责任公司 一种信号处理方法、装置以及计算机存储介质

Patent Citations (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1798217A (zh) * 2004-12-14 2006-07-05 哈曼贝克自动***-威美科公司 限制接收音频的***
CN1687894A (zh) * 2005-04-08 2005-10-26 北京中星微电子有限公司 一种消除回音的方法
CN101227761A (zh) * 2006-11-07 2008-07-23 美商富迪科技股份有限公司 自动消除啸音的声音处理装置与方法
CN101179296A (zh) * 2006-11-10 2008-05-14 索尼株式会社 回音消除器和话音处理装置
CN101370323A (zh) * 2007-08-15 2009-02-18 美商富迪科技股份有限公司 执行声学回音消除的装置及其方法
CN101262530A (zh) * 2008-04-29 2008-09-10 中兴通讯股份有限公司 一种消除移动终端回音的装置
CN101877750A (zh) * 2009-04-28 2010-11-03 索尼公司 回音消除设备、回音消除方法和通信设备
CN103999478A (zh) * 2011-12-16 2014-08-20 高通股份有限公司 通过动态补偿移动装置中的扬声器与麦克风之间的可变距离来优化音频处理功能
CN104980601A (zh) * 2014-04-02 2015-10-14 想象技术有限公司 用于动态调谐回音消除器的增益控制***及方法
CN110225214A (zh) * 2014-04-02 2019-09-10 想象技术有限公司 控制向自适应滤波器反馈的方法、衰减单元、***和介质
CN106657507A (zh) * 2015-11-03 2017-05-10 中移(杭州)信息技术有限公司 一种声学回声消除方法及装置
CN106297815A (zh) * 2016-07-27 2017-01-04 武汉诚迈科技有限公司 一种语音识别场景中回音消除的方法
CN110769352A (zh) * 2018-07-25 2020-02-07 西安中兴新软件有限责任公司 一种信号处理方法、装置以及计算机存储介质
CN109688284A (zh) * 2018-12-28 2019-04-26 广东美电贝尔科技集团股份有限公司 一种回音延时检测方法
CN110310653A (zh) * 2019-07-09 2019-10-08 杭州国芯科技股份有限公司 一种回声消除方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
一种计算复杂度低的双端通话检测算法;余力;;计算机工程与应用;20110601(第16期) *

Also Published As

Publication number Publication date
CN112037808A (zh) 2020-12-04

Similar Documents

Publication Publication Date Title
CN110838300B (zh) 回声消除的处理方法及处理***
CN104158990B (zh) 用于处理音频信号的方法和音频接收电路
CN202534346U (zh) 语音增强装置及头戴式降噪通信耳机
EP3058710B1 (en) Detecting nonlinear amplitude processing
CN105391879B (zh) 一种无回声残留双端通话鲁棒的声学回声消除方法
CN107636758A (zh) 声学回声消除***和方法
JP5125690B2 (ja) 音響エコー除去装置
KR102111185B1 (ko) 에코 제거
CN106448691B (zh) 一种用于扩音通信***的语音增强方法
CN104395957A (zh) 一种通用可重构回声消除***
US8693678B2 (en) Device and method for controlling damping of residual echo
CN110956975B (zh) 回声消除方法及装置
CN106571147A (zh) 用于网络话机声学回声抑制的方法
CN110995951B (zh) 基于双端发声检测的回声消除方法、装置及***
CN111145771A (zh) 语音信号处理方法、处理装置、终端及其存储介质
KR20040030817A (ko) 통신 시스템, 에코 제거 수단 및 에코 제거 방법
CN109273019A (zh) 用于回声抑制的双重通话检测的方法及回声抑制
EP2741481B1 (en) Subband domain echo masking for improved duplexity of spectral domain echo suppressors
JP2010081004A (ja) エコーキャンセル装置、通信装置、及びエコーキャンセル方法
CN101958122B (zh) 一种回声消除的方法和装置
CN107071196B (zh) 一种自适应回声消除方法
CN110148421A (zh) 一种残余回声检测方法、终端和装置
CN112037808B (zh) 一种用于电梯轿厢的回音消除方法及其装置
JP4403776B2 (ja) エコーキャンセラ
JP4396449B2 (ja) 残響除去方法及びその装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant