CN107431869A - 听力装置 - Google Patents
听力装置 Download PDFInfo
- Publication number
- CN107431869A CN107431869A CN201680014387.3A CN201680014387A CN107431869A CN 107431869 A CN107431869 A CN 107431869A CN 201680014387 A CN201680014387 A CN 201680014387A CN 107431869 A CN107431869 A CN 107431869A
- Authority
- CN
- China
- Prior art keywords
- signal
- microphone
- hearing
- unit
- microphone signal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012545 processing Methods 0.000 claims abstract description 23
- 230000003044 adaptive effect Effects 0.000 claims description 23
- 230000000694 effects Effects 0.000 claims description 20
- 238000000034 method Methods 0.000 abstract description 8
- 230000002708 enhancing effect Effects 0.000 description 17
- 230000008901 benefit Effects 0.000 description 7
- 239000013598 vector Substances 0.000 description 7
- 230000007423 decrease Effects 0.000 description 5
- 241000209140 Triticum Species 0.000 description 4
- 235000021307 Triticum Nutrition 0.000 description 4
- 210000005069 ears Anatomy 0.000 description 4
- 238000005070 sampling Methods 0.000 description 4
- 230000005540 biological transmission Effects 0.000 description 3
- 230000000903 blocking effect Effects 0.000 description 3
- 238000004891 communication Methods 0.000 description 3
- 239000011159 matrix material Substances 0.000 description 3
- 230000005236 sound signal Effects 0.000 description 3
- 241000209219 Hordeum Species 0.000 description 2
- 235000007340 Hordeum vulgare Nutrition 0.000 description 2
- 230000002238 attenuated effect Effects 0.000 description 2
- 230000001364 causal effect Effects 0.000 description 2
- 230000003111 delayed effect Effects 0.000 description 2
- 230000004069 differentiation Effects 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 230000009467 reduction Effects 0.000 description 2
- 238000011160 research Methods 0.000 description 2
- 208000016621 Hearing disease Diseases 0.000 description 1
- 208000032041 Hearing impaired Diseases 0.000 description 1
- 230000002411 adverse Effects 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 230000001934 delay Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 230000008030 elimination Effects 0.000 description 1
- 238000003379 elimination reaction Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 230000007274 generation of a signal involved in cell-cell signaling Effects 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 238000010606 normalization Methods 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
- 238000007493 shaping process Methods 0.000 description 1
- 208000027765 speech disease Diseases 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R25/00—Deaf-aid sets, i.e. electro-acoustic or electro-mechanical hearing aids; Electric tinnitus maskers providing an auditory perception
- H04R25/40—Arrangements for obtaining a desired directivity characteristic
- H04R25/407—Circuits for combining signals of a plurality of transducers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R25/00—Deaf-aid sets, i.e. electro-acoustic or electro-mechanical hearing aids; Electric tinnitus maskers providing an auditory perception
- H04R25/55—Deaf-aid sets, i.e. electro-acoustic or electro-mechanical hearing aids; Electric tinnitus maskers providing an auditory perception using an external connection, either wireless or wired
- H04R25/552—Binaural
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R25/00—Deaf-aid sets, i.e. electro-acoustic or electro-mechanical hearing aids; Electric tinnitus maskers providing an auditory perception
- H04R25/55—Deaf-aid sets, i.e. electro-acoustic or electro-mechanical hearing aids; Electric tinnitus maskers providing an auditory perception using an external connection, either wireless or wired
- H04R25/554—Deaf-aid sets, i.e. electro-acoustic or electro-mechanical hearing aids; Electric tinnitus maskers providing an auditory perception using an external connection, either wireless or wired using a wireless connection, e.g. between microphone and amplifier or using Tcoils
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
- G10L21/0208—Noise filtering
- G10L21/0216—Noise filtering characterised by the method used for estimating noise
- G10L2021/02161—Number of inputs available containing the signal or the noise to be suppressed
- G10L2021/02165—Two microphones, one receiving mainly the noise signal and the other one mainly the speech signal
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R5/00—Stereophonic arrangements
- H04R5/027—Spatial or constructional arrangements of microphones, e.g. in dummy heads
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Neurosurgery (AREA)
- Otolaryngology (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Signal Processing (AREA)
- Computer Networks & Wireless Communication (AREA)
- Circuit For Audible Band Transducer (AREA)
Abstract
操作听力装置(1)的方法以及听力装置(1),包括:第一麦克风(4)和第二麦克风(5)中的至少一个,其分别生成第一麦克风信号(yL)和第二麦克风信号(yR),所述第一麦克风(4)和所述第二麦克风(5)被布置在第一听力设备(2)和第二听力设备(3)中的至少一个中,第三麦克风(11),其生成第三麦克风信号(z),所述第三麦克风(11)被布置在外部设备(10)中,以及信号处理单元(14),其中,在所述信号处理单元(14)中,所述第三麦克风信号(z)以及所述第一麦克风信号(yL)和所述第二麦克风信号(yR)中的至少一个一起被处理,由此产生与所述第一麦克风信号(yR)和/或所述第二麦克风信号(yL)相比具有增强的信噪比的输出信号(zenh)。
Description
技术领域
本发明涉及一种听力装置以及一种用于操作听力装置的方法。所述听力装置具体包括第一麦克风和第二麦克风中的至少一个,所述第一麦克风和所述第二麦克风被布置在第一听力设备和第二听力设备中的至少一个中。所述听力装置还包括第三麦克风,被布置在外部设备中,具体地在蜂窝电话中、智能电话中或声学传感器网络中。具体地说,所述听力装置包括第一听力设备和第二听力设备,其互连以形成双耳听力设备。
背景技术
例如,在EP 2 161 949 A2中公开了一种使用一个或多个外部麦克风以甚至当使用全向麦克风时使得方向性效应成为可能的听力装置。
发明内容
本发明的目的是指定一种听力装置以及一种操作听力装置的方法,其使得能够改进待输出到用户的音频信号的信噪比。
根据本发明,通过一种听力装置实现该目的,所述听力装置包括:第一麦克风和第二麦克风中的至少一个,其分别生成第一麦克风信号和第二麦克风信号,所述第一麦克风和所述第二麦克风被布置在第一听力设备和第二听力设备中的至少一个中;第三麦克风,其生成第三麦克风信号,所述第三麦克风被布置在外部设备中(即外部麦克风);以及信号处理单元,其中,在所述信号处理单元中,所述第三麦克风信号以及所述第一麦克风信号和所述第二麦克风信号中的至少一个一起被处理和/或组合为与所述第一麦克风信号和/或所述第二麦克风信号相比具有增强的信噪比(SNR)的输出信号。具体地说,所述听力设备实施为听力辅助器,并且在以下描述中,为了简明,其进一步一般指代听力辅助器。
对于给定的噪声情形,外部麦克风的策略放置方式可以提供空间信息以及比自身内部麦克风所生成的听力辅助器信号更好的信噪比。附近的麦克风可以在衰减噪声信号中利用听力辅助器用户的身体。例如,当外部麦克风放置在前部并且靠近听力辅助器用户的身体时,身体屏蔽出自后部方向的的噪声,从而外部麦克风拾取与听力辅助器相比更加衰减的噪声信号。这称为身体屏蔽效应。受益于身体屏蔽效应的外部麦克风信号于是与听力辅助器的信号组合,以用于听力辅助器信号增强。
外部麦克风(即并未布置在听力设备中的麦克风)当前主要用作听力辅助器附件;然而,信号并未与听力辅助器信号组合以用于进一步增强。当前应用仅将外部麦克风信号流送到听力辅助器。普通应用包括教室设置,其中,目标演讲者(例如教师)佩戴FM麦克风,并且听力辅助器用户收听所流送的FM麦克风信号。见例如Boothroyd,A.,"Hearing AidAccessories for Adults:The Remote FM Microphone",Ear and Hearing,25(1):22-33,2004;Hawkins,D.,"Comparisons of Speech Recognition in Noise by Mildly-to-Moderately Hearing-Impaired Children Using Hearing Aids and FM Systems",Journal of Speech and Hearing Disorders,49:409-418,1984;Pittman,A.,Lewis,D.,Hoover,B.,Stelmachowicz P.,"Recognition Performance for Four Combinations ofFM System and Hearing Aid Microphone Signals in Adverse ListeningConditions",Ear and Hearing,20(4):279,1999。
在使用无线声学传感器网络(WASN)以用于听力辅助器算法中的信号估计或参数估计中也存在增长的研究;然而,WASN的应用关注于将麦克风放置在所标定的演讲者附近或噪声源附近,以产生所标定的演讲者或噪声的估计。见例如Bertrand,A.,Moonen,M."Robust Distributed Noise Reduction in Hearing Aids with External AcousticSensor Nodes",EURASIP,20(4):279,1999。
根据本发明优选实施例,听力装置包括左听力设备和右听力设备,其互连以形成双耳听力设备。具体地说,建立右听力设备与左听力设备之间的双耳通信链路,以在各听力设备之间交换或发送音频信号。有利地,双耳通信链路是无线链路。更优选地,听力装置中所使用的所有麦克风是通过无线通信链路连接的。
优选地,外部设备是移动设备(例如便携式计算机)、智能电话、声学传感器以及作为声学传感器网络的部分的声学传感器元件之一。移动电话或智能电话可以有策略地放置在听力设备用户的前部,以从前部目标演讲者接收直接信号,或在与前部目标演讲者的对话期间当其穿戴在口袋中时已经处于优异的位置中。无线声学传感器网络用在很多不同技术应用中,包括汽车或视频会议中的免提电话、声学监控和环境智能。
根据又一优选实施例,输出信号耦合到第一听力设备和第二听力设备中的至少一个的输出耦合器中,以用于生成声学输出信号。根据该实施例,听力设备用户接收由信号处理单元使用外部麦克风信号经由听力设备用户的听力设备的输出耦合器或接收机输出的增强的音频信号。
信号处理单元不一定位于听力设备之一内。信号处理单元也可以是外部设备的部分。具体地说,信号处理是在外部设备(例如移动计算机或智能电话)内执行的,并且是可以由听力设备用户下载的特定软件应用的部分。
如上所述,听力设备是例如听力辅助器。根据又一有利实施例,听力设备实施为耳中(in-the-ear,ITE)听力设备,具体地实施为完全耳道中(completely-in-canal,CIC)听力设备。优选地,所使用的听力设备之一包括一个单独全向麦克风。相应地,第一听力设备包括第一麦克风,并且第二听力设备包括第二麦克风。然而,本发明确实还覆盖单个听力设备(具体地说,单个听力辅助器)包括第一麦克风和第二麦克风的实施例。
在本发明另一优选实施例中,信号处理单元包括自适应噪声消除器单元,第三麦克风信号以及第一麦克风信号和第二麦克风信号中的至少一个馈送到其中并且进一步组合,以获得增强的输出信号。第三麦克风信号(例如波束成形的信号)具体地用于通过空间滤波增强信噪比。归因于其策略性放置,第三麦克风信号故此展示自然的方向性。
有利地,在自适应噪声消除器单元内,第一麦克风信号和第二麦克风信号中的至少一个被预处理,以产生噪声基准信号,并且所述第三麦克风信号与所述噪声基准信号组合,以获得输出信号。归因于前述身体屏蔽效应,第一麦克风信号和/或第二麦克风信号具体地用于噪声估计。
优选地,在自适应噪声消除器单元中,第一麦克风信号和第二麦克风信号组合,以产生噪声基准信号,具体地说,形成第一麦克风信号和第二麦克风信号的差信号。在前部演讲者以及包括左麦克风和右麦克风的双耳听力装置的情况下,差信号可以看作噪声信号的估计。
根据本发明又一优选实施例,自适应噪声消除器单元还包括目标均衡单元,其中,第一麦克风信号和第二麦克风信号关于目标位置分量被均衡,并且其中,所均衡的第一麦克风信号和所均衡的第二麦克风信号组合,以产生噪声基准信号。假设已知的目标方向,根据优选实施例,仅延迟可以与信号之一相加。当假设0°的目标方向(即前部演讲者)时,归因于对称性,双耳听力设备的左麦克风信号和右麦克风信号近似相等。
优选地,自适应噪声消除器单元还包括比较设备,其中,关于目标话音检测比较第一麦克风信号和第二麦克风信号,比较设备生成控制信号,以用于控制自适应噪声消除器单元,具体地从而自适应噪声消除器单元仅在缺少目标话音活动期间进行适配。该实施例具有防止归因于目标话音泄漏导致的目标信号消除的特定优点。
根据另一有利实施例,信号处理单元还包括校准单元和/或均衡单元,其中,第三麦克风信号以及第一麦克风信号和第二麦克风信号中的至少一个馈送到校准单元中,以用于群延迟补偿,和/或馈送到所述均衡单元中,以用于电平和相位补偿,并且其中,所补偿的麦克风信号馈送到自适应噪声消除器单元中。通过实现延迟时间的各内部麦克风信号之间以及内部麦克风信号与外部麦克风信号之间的校准单元和/或均衡单元差,相位或电平得以补偿。
本发明利用外部麦克风中的身体屏蔽效应的益处,以用于听力设备信号增强。外部麦克风具体地放置得靠近身体,以用于衰减后部方向性噪声信号。身体屏蔽效应的益处在单个麦克风听力辅助器设备(例如完全耳道中(CIC)听力辅助器)中是特别有用的,其中,在180°的后部方向性噪声的衰减不是可行的。当仅使用听力辅助器***的麦克风时,归因于沿着身体的中间平面存在的对称性,前部(0°)位置与后部(180°)位置之间的差异化是不同的。由于后部方向性噪声被衰减,因此受益于针对听力辅助器的身体屏蔽效应的外部麦克风并不遭受这种前部后部模糊性。由此可以增强听力辅助器麦克风的信号,以通过将听力辅助器的信号与外部麦克风的信号组合减少后部方向性噪声。
本发明具体地提供对听力设备的附加信号增强,而非简单地流送外部麦克风信号。通过将听力辅助器的信号与外部麦克风的信号组合提供信号增强。在麦克风处于听力辅助器用户附近的情况下,外部麦克风的放置利用身体屏蔽效应。与无线声学传感器网络不同,麦克风的放置并非放置为在所标定的演讲者或噪声源附近。
附图说明
本发明的其它细节和优点基于附图从若干实施例的随后解释变得清楚,附图并非限制本发明。在附图中:
图1示出受益于身体屏蔽效应的外部麦克风的可能设置,
图2示出具有听力辅助器和智能电话麦克风、目标演讲者和干扰演讲者的设置,
图3描述信号组合方案的概述,以及
图4示出自适应噪声消除单元的更详细视图。
具体实施方式
图1示出改进的听力装置1,其包括第一左听力设备2和第二右听力设备3。第一左听力设备2包括第一左麦克风4,第二右听力设备3包括第二右麦克风5。第一听力设备2和第二听力设备3互连,并且形成双耳听力设备6,以用于听力设备用户7。前部目标演讲者8位于0°处。干扰演讲者9位于180°处。具有外部麦克风11的智能电话10放置在听力设备用户7与前部目标演讲者8之间。在用户7后面,归因于身体屏蔽效应,存在后部方向性衰减的区带12。当使用听力辅助器设备6的内部麦克风4、5时,归因于沿着身体的中间平面存在的对称性,前部(0°)位置与后部(180°)位置之间的差异化是不同的。由于后部方向性噪声被衰减,因此受益于身体屏蔽效应的外部麦克风11并不遭受这种前部后部模糊性。由此可以通过将听力设备麦克风4、5的信号与外部麦克风11的信号组合增强听力设备麦克风4、5的信号,以减少后部方向性噪声。
图2描述与图1所示的情形稍微不同的情形。干扰演讲者9位于135°的方向处。智能电话10的第三外部麦克风11(以下又称为EMIC)放置在听力设备用户7与前部目标演讲者8之间。听力设备2、3是例如完全耳道中(CIC)听力辅助器(HA),其在每个设备中具有一个麦克风4、5。整个听力装置1包括三个麦克风4、5、11。
设yL,raw(t)、yR,raw(t)和zraw(t)表示在离散时间采样t分别在左听力设备2和右听力设备3处以及第三外部麦克风11处接收到的麦克风信号。通过k和n索引这些信号的子带表示,其中,k指代子带时间索引n时的第k子带频率。在组合两个设备2、3之间的麦克风信号之前,需要硬件校准,以匹配外部麦克风11与听力设备2、3的麦克风4、5的麦克风特性。在示例性方法中,外部麦克风11(EMIC)被校准,以匹配充当基准麦克风的内部麦克风4、5之一。校准后的EMIC信号表示为zcalib。在该实施例中,首先完成校准,然后对EMIC信号应用其它处理。
为了关于设备的差异进行校准,必须考虑设备固有的群延迟和麦克风特性。归因于模数转换和音频缓冲的音频延迟很可能在外部设备10与听力设备2、3之间是不同的,因此需要注意补偿这种时间延迟的差。内部听力设备麦克风4、5正接收的输入信号与听力辅助器接收机(演讲者)处的输出信号之间的处理的群延迟比复杂设备(例如智能电话)中更小若干量级。优选地,外部设备10的群延迟首先被测量,然后如果需要则被补偿。为了测量外部设备10的群延迟,随着输入麦克风信号作为***的输出而得以发送,我们可以简单地估计其经历的传递函数的群延迟。在智能电话10的情况下,输入信号是前部麦克风信号,并且输出是通过耳机端口获得的。为了补偿群延迟,根据优选实施例,yL,raw和yR,raw被延迟达所测量的EMIC设备的群延迟。被延迟的信号分别表示为yL和yR。
在补偿不同的设备时延之后,推荐使用均衡滤波器(EQ),其关于麦克风特性补偿电平差和相位差。EQ滤波器应用于匹配EMIC信号与yL或yR,其充当表示为yRef的基准。EQ滤波器系数hcal得以离线地计算,然后于在线处理期间得以应用。为了离线地计算这些权重,首先进行白噪声信号的记录,其中,基准麦克风和EMIC在自由场中保持在大致相同的位置中。然后采取最小二乘法以通过使得代价函数最小化估计输入Zraw对于输出yRef(k,n)的相对传递函数:
其中,zraw(k,n)是zraw(k,n)的当前和过去Lcal-1个值的矢量,Lcal是hcal(k)的长度。
在校准之后,在示例性研究中,考虑外部麦克风11(EMIC)的策略位置。关于信号增强,已经探索EMIC与内部麦克风4、5的信号相比具有更好的SNR的位置。关注于图2所示的情形,其中,外部麦克风11居中并且在20cm的距离(其对于智能电话用途是典型距离)处处于听力设备用户7的身体的前部。目标演讲者7位于0°处,而噪声干扰者9的位置在听力设备用户7周围沿着1m半径变化。话音干扰者9的位置按45°增量变化,并且每个位置具有带有不同声压级的唯一话音干扰者9。当单个话音干扰者9连同目标演讲者8一起是有效的时,EMIC和CIC听力辅助器2、3的SNR于是相当。因此,示出的是,当噪声干扰者8正出自135-225°的范围中的角度时,原始EMIC信号具有比原始听力辅助器信号更高的SNR。此外,示出的是,EMIC的SNR具有使用两个麦克风耳后(behind-the-ear,BTE)听力设备上所实现的自适应一阶差分波束成形器(FODBF)所处理的信号的相似性能。应注意,由于FODBF将需要每个设备中的至少两个麦克风,因此不能在单个麦克风听力辅助器设备(例如CIC)上实现FODBF。因此,添加外部麦克风11可以带来关于单个麦克风听力辅助器设备2、3衰减出自后部方向的噪声的可能性。
假设两个听力设备2、3之间的双耳链路,以下示例性实施例提出使用广义旁瓣消除器(GSC)结构以用于根据图1或图2所示的情形使用三个麦克风创建增强的双耳信号的组合方案。还假设具有同步采样的外部麦克风11(EMIC)与听力设备2、3之间的理想数据传输链路。
为了组合三个麦克风信号,考虑GSC结构的变形。GSC波束成形器包括固定波束成形器、阻塞矩阵(BM)和自适应噪声消除器(ANC)。图3中示出总体组合方案,其中,首先对外部麦克风的信号执行硬件校准,后接用于噪声减少的GSC组合方案,产生增强的单音信号(称为zenh)。相应地,信号处理单元14包括校准单元15和均衡单元16。校准单元15和均衡单元16的输出信号然后馈送到GSC类型处理单元17,其又称为自适应噪声消除器单元(包括ANC)。
类似于GSC的固定波束成形器,归因于EMIC信号的身体屏蔽益处,使用EMIC信号代替波束成形的信号。BM组合听力设备配对信号中的信号,以产生噪声基准。使用归一化最小均方(NLMS)滤波器实现ANC。GSC结构或自适应噪声消除器单元17的结构分别示出于图4中,并且实现于子带域中。以标号18表示阻塞矩阵BM。以标号19表示ANC。
对于BM所使用的方案在图4中变得清楚,其中,yL,EQ和yR,EQ指代(目标均衡单元20中的)目标均衡之后的左听力设备信号和右听力设备信号,nBM指代噪声基准信号。假设已知的目标方向,目标均衡单元20均衡HA配对中的目标话音分量。实际上,因果延迟与基准信号相加,以确保因果***。例如,如果yL选取为用于目标EQ的基准信号,则
yL,EQ(k,n)=yL(k,n-DtarEQ)
其中,DtarEQ是所加入的因果延迟。于是,yR被滤波,从而目标信号匹配于yL,EQ:
其中,yR是yR的当前和过去LtarEQ-1个值的矢量,LtarEQ是htarEQ的长度。噪声基准nBM(k,n)于是给出为:
nBM(k,n)=yL,EQ(k,n)-yR,EQ(k,n)
实际上,在HA应用中普遍使用零度目标位置的假设。这样假设听力设备用户想要听到出自居中前部的声音,这是自然的,因为我们在对话期间倾向于面对期望的演讲者。当假设0°的目标方向时,归因于对称性,左听力设备目标演讲者信号和右听力设备目标演讲者信号近似相等。在此情况下,目标均衡并非关键的,并且进行以下假设:
yL,EQ(k,n)≈yL(k,n)and yR,EQ(k,n)≈yR(k,n)
通过子带NLMS算法实现ANC。ANC的目的是估计并且移除EMIC信号zcalib中的噪声。结果是增强的EMIC信号。ANC的输入之一是nBM,包含nBM的当前和LANC-1个过去值的长度LANC的矢量。因果延迟D引入到zcalib,以确保因果***。
d(k,n)=zcalib(k,n-D)
其中,d(k,n)是对NLMS的主要输入。
zenh(k,n)=e(k,n)=d(k,n)-hANC(k,n)HnBM(k,n)
并且滤波器系数矢量hANC(k,n)更新为:
其中,μ(k)是NLMS步长大小。正则化因子δ(k)计算为δ(k)=αPz(k),其中,Pz(k)是在校准之后的EMIC麦克风噪声的平均功率,α是常数标量。发现α=1.5对于避免在以上计算期间除零的除法是足够的。
为了防止归因于nBM中的目标话音泄漏导致的目标信号消除,控制NLMS滤波器,从而其仅在缺少目标话音活动期间得以适用。通过在比较设备21(见图4)中比较以下功率比率与阈值Tk确定目标话音活动。功率比率考虑大于总和的平均功率的HA信号的差的平均功率。
当目标话音是有效的时,以上公式中的比率的分子小于分母。这是因为HA配对之间的目标信号分量的均衡,由此减法带来目标信号的消除。作为点源的干扰者所生成的噪声分量是不相关的,并且将不消除。噪声分量的差针对和的功率将大致是相同的。当以上公式中的比率小于预定阈值Tk时,目标活动性出现。
使用分离的话音记录和噪声记录,使用用于估计噪声减少算法的Hagerman方法以分离地估计GSC处理的对话音和噪声的影响。分别通过s和n的下标表示目标话音和噪声信号,以在目标话音与噪声之间进行区分。设s(k,n)表示目标话音信号的矢量,并且n(k,n)表示噪声信号的矢量,其中,s(k,n)=[yL,s(k,n),yR,s(k,n),zs(k,n)],并且n(k,n)=[yL,n(k,n),yR,n(k,n),zn(k,n)]。我们于是定义执行GSC处理的输入信号的两个矢量,ain(k,n)=s(k,n)+n(k,n)和bin(k,n)=s(k,n)-n(k,n)。所得的被处理的输出分别表示为aout(k,n)和bout(k,n)。GSC处理的输出是增强的EMIC信号,如图3所示。使用zenh,s(k,n)=0.5(aout(k,n)+bout(k,n))估计所处理的目标话音信号,并且使用zenh,n(k,n)=0.5(aout(k,n)–bout(k,n))估计所处理的噪声信号。在图2中的设置之后,在各种后部方向性噪声情形中测试GSC方法。使用分离地处理的信号zenh,s(k,n)和zenh,n(k,n),GSC增强的信号和原始麦克风信号的SNR值以分贝为单位得以计算,并且在以下表1中得以概括。使用30ms的块大小和50%重叠在时域中计算分段SNR。
表1:以dB为单位的GSC性能的测量。
比较校准后的外部麦克风信号对于HA配对的SNR,清楚的是,EMIC提供显著SNR改进。在没有GSC处理的情况下,EMIC的策略放置产生与较好耳朵的原始CIC麦克风信号相比的平均至少5dB SNR改进。当存在位于135°或225°处的噪声干扰者时,GSC处理的结果带来平均至少2dB的进一步增强。
除了SNR之外,在时域中还估计话音失真和噪声减少,以量化源自GSC处理的话音畸变和噪声减少的程度。通过在N个采样的M个帧上在GSC处理之前比较ds(d中的目标话音信号)和的增强的信号Zenh,s估计话音失真Ps_dist。N选取为对应于30ms的采样,并且帧具有50%的重叠。所使用的公式是:
使用以下公式估计噪声减少:
其中,dn指代d中的噪声信号。这些测度是以分贝为单位表示的,并且也示出于表1中。
外部麦克风已经证明当放置在其受益于高SNR的策略位置中时是有用的听力设备附件。解决关于单麦克风双耳听力设备对于衰减来自后部方向的噪声的无能力,本发明归因于身体屏蔽效应带来后部干扰者的衰减。所提出的GSC噪声减少方案提供具有最小话音失真的关于SNR改进的EMIC信号的进一步增强。
标号列表
1.听力装置
2.第一左听力设备
3.第二右听力设备
4.第一左麦克风
5.第二右麦克风
6.双耳听力设备
7.听力设备用户
8.前部演讲者
9.干扰演讲者
10.外部设备(例如智能电话)
11.第三外部麦克风
12.衰减的区带
14.信号处理单元
15.校准单元
16.均衡单元
17.自适应噪声消除器单元
18.阻塞矩阵
19.自适应噪声消除器
20.目标均衡单元
21.比较设备
Claims (11)
1.一种听力装置(1),包括:
第一麦克风(4)和第二麦克风(5)中的至少一个,其分别生成第一麦克风信号(yL)和第二麦克风信号(yR),所述第一麦克风(4)和所述第二麦克风(5)被布置在第一听力设备(2)和第二听力设备(3)中的至少一个中,
第三麦克风(11),其生成第三麦克风信号(z),所述第三麦克风(11)被布置在外部设备(10)中,以及
信号处理单元(14),
其中,在所述信号处理单元(14)中,所述第三麦克风信号(z)以及所述第一麦克风信号(yL)和所述第二麦克风信号(yR)中的至少一个一起被处理,由此产生与所述第一麦克风信号(yR)和/或所述第二麦克风信号(yL)相比具有增强的信噪比的输出信号(zenh)。
2.如权利要求1所述的听力装置(1),
其中,所述外部设备(10)是移动设备、智能电话、声学传感器和作为声学传感器网络的部分的声学传感器元件之一。
3.如前述权利要求之一所述的听力装置(1),
其中,所述输出信号(zenh)耦合到所述第一听力设备(2)和所述第二听力设备(3)的至少一个的输出耦合器(16),以用于生成声学输出信号。
4.如前述权利要求之一所述的听力装置(1),
其中,所述第一听力设备(2)和所述第二听力设备(3)均实施为耳中听力设备,具体地实施为完全耳道中听力设备。
5.如前述权利要求之一所述的听力装置(1),
其中,所述第一听力设备(2)包括所述第一麦克风(4),并且其中,所述第二听力设备(3)包括所述第二麦克风(5)。
6.如前述权利要求之一所述的听力装置(1),
其中,所述信号处理单元(12)包括自适应噪声消除器单元(17),所述第三麦克风信号(z)以及所述第一麦克风信号(yL)和所述第二麦克风信号(yR)的至少一个馈送到其中并且进一步组合以获得所述输出信号(zenh)。
7.如权利要求6所述的听力装置(1),
其中,在所述自适应噪声消除器单元(17)中,所述第一麦克风信号(yL)和所述第二麦克风信号(yR)的至少一个被预处理,以产生噪声基准信号(nEM),并且所述第三麦克风信号(z)与所述噪声基准信号(nEM)组合,以获得输出信号(zenh)。
8.如权利要求7所述的听力装置(1),
其中,在所述自适应噪声消除器单元(17)中,所述第一麦克风信号(yL)和所述第二麦克风信号(yR)组合,以产生所述噪声基准信号(nEM)。
9.如权利要求8所述的听力装置(1),
其中,所述自适应噪声消除器单元(17)还包括目标均衡单元(20),其中,所述第一麦克风信号(yL)和所述第二麦克风信号(yR)关于目标位置分量被均衡,并且其中,所均衡的第一麦克风信号(yL,EQ)和所均衡的第二麦克风信号(yR,EQ)组合,以产生所述噪声基准信号(nEM)。
10.如权利要求6至9之一所述的听力装置(1),
其中,所述自适应噪声消除器单元(17)还包括比较设备(21),其中,关于目标话音检测比较所述第一麦克风信号(yL)和所述第二麦克风信号(yR),所述比较设备(21)生成控制信号(spVAD),以用于控制所述自适应噪声消除器单元(17),具体地从而所述自适应噪声消除器单元(17)仅在缺少目标话音活动期间进行适配。
11.如权利要求6至10之一所述的听力装置(1),
其中,所述信号处理单元(14)还包括校准单元(15)和/或均衡单元(16),其中,所述第三麦克风信号(z)以及所述第一麦克风信号(yL)和所述第二麦克风信号(yR)中的至少一个馈送到所述校准单元(15)中,以用于群延迟补偿,和/或馈送到所述均衡单元(16)中,以用于电平和相位补偿,并且其中,所补偿的麦克风信号馈送到所述自适应噪声消除器单元(17)中。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
EP15162497 | 2015-04-02 | ||
EP15162497.0 | 2015-04-02 | ||
PCT/EP2016/057271 WO2016156595A1 (en) | 2015-04-02 | 2016-04-01 | Hearing apparatus |
Publications (2)
Publication Number | Publication Date |
---|---|
CN107431869A true CN107431869A (zh) | 2017-12-01 |
CN107431869B CN107431869B (zh) | 2020-01-14 |
Family
ID=52814861
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201680014387.3A Active CN107431869B (zh) | 2015-04-02 | 2016-04-01 | 听力装置 |
Country Status (6)
Country | Link |
---|---|
US (1) | US10798494B2 (zh) |
EP (1) | EP3278575B1 (zh) |
JP (1) | JP6479211B2 (zh) |
CN (1) | CN107431869B (zh) |
DK (1) | DK3278575T3 (zh) |
WO (1) | WO2016156595A1 (zh) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113450819B (zh) * | 2021-05-21 | 2024-06-18 | 音科思(深圳)技术有限公司 | 信号处理方法及相关产品 |
CN113689875B (zh) * | 2021-08-25 | 2024-02-06 | 湖南芯海聆半导体有限公司 | 一种面向数字助听器的双麦克风语音增强方法和装置 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20020037088A1 (en) * | 2000-09-13 | 2002-03-28 | Thomas Dickel | Method for operating a hearing aid or hearing aid system, and a hearing aid and hearing aid system |
WO2008098590A1 (en) * | 2007-02-14 | 2008-08-21 | Phonak Ag | Wireless communication system and method |
US20120020503A1 (en) * | 2009-01-22 | 2012-01-26 | Mitsuru Endo | Hearing aid system |
CN103269465A (zh) * | 2013-05-22 | 2013-08-28 | 歌尔声学股份有限公司 | 一种强噪声环境下的耳机通讯方法和一种耳机 |
US20140029777A1 (en) * | 2012-07-27 | 2014-01-30 | Algor Korea Co., Ltd. | Wireless in-the-ear type hearing aid system having remote control function and control method thereof |
CN103686575A (zh) * | 2013-11-28 | 2014-03-26 | 清华大学 | 助听装置 |
CN103916807A (zh) * | 2012-12-28 | 2014-07-09 | Gn瑞声达A/S | 空间线索和反馈 |
Family Cites Families (27)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH10294989A (ja) * | 1997-04-18 | 1998-11-04 | Matsushita Electric Ind Co Ltd | 騒音制御ヘッドセット |
US8942387B2 (en) * | 2002-02-05 | 2015-01-27 | Mh Acoustics Llc | Noise-reducing directional microphone array |
AU2003229529B2 (en) | 2003-05-09 | 2009-09-03 | Widex A/S | Hearing aid system, a hearing aid and a method for processing audio signals |
DE60325699D1 (de) * | 2003-05-13 | 2009-02-26 | Harman Becker Automotive Sys | Verfahren und System zur adaptiven Kompensation von Mikrofonungleichheiten |
CN1939040B (zh) | 2004-03-31 | 2011-05-25 | 瑞士电信公司 | 用于集成声通信***的眼镜架和相应的方法 |
WO2007028250A2 (en) * | 2005-09-09 | 2007-03-15 | Mcmaster University | Method and device for binaural signal enhancement |
US8068619B2 (en) * | 2006-05-09 | 2011-11-29 | Fortemedia, Inc. | Method and apparatus for noise suppression in a small array microphone system |
JP4475468B2 (ja) * | 2006-08-07 | 2010-06-09 | リオン株式会社 | 通信聴取システム |
EP2408222A1 (en) | 2006-12-20 | 2012-01-18 | Phonak AG | Wireless communication system |
US7817808B2 (en) | 2007-07-19 | 2010-10-19 | Alon Konchitsky | Dual adaptive structure for speech enhancement |
US8391523B2 (en) | 2007-10-16 | 2013-03-05 | Phonak Ag | Method and system for wireless hearing assistance |
KR101449433B1 (ko) * | 2007-11-30 | 2014-10-13 | 삼성전자주식회사 | 마이크로폰을 통해 입력된 사운드 신호로부터 잡음을제거하는 방법 및 장치 |
US8223988B2 (en) * | 2008-01-29 | 2012-07-17 | Qualcomm Incorporated | Enhanced blind source separation algorithm for highly correlated mixtures |
DK2088802T3 (da) | 2008-02-07 | 2013-10-14 | Oticon As | Fremgangsmåde til estimering af lydsignalers vægtningsfunktion i et høreapparat |
DE102008046040B4 (de) | 2008-09-05 | 2012-03-15 | Siemens Medical Instruments Pte. Ltd. | Verfahren zum Betrieb einer Hörvorrichtung mit Richtwirkung und zugehörige Hörvorrichtung |
US20120314890A1 (en) | 2010-02-12 | 2012-12-13 | Phonak Ag | Wireless hearing assistance system and method |
US20110288860A1 (en) * | 2010-05-20 | 2011-11-24 | Qualcomm Incorporated | Systems, methods, apparatus, and computer-readable media for processing of speech signals using head-mounted microphone pair |
US9053697B2 (en) * | 2010-06-01 | 2015-06-09 | Qualcomm Incorporated | Systems, methods, devices, apparatus, and computer program products for audio equalization |
US8855341B2 (en) | 2010-10-25 | 2014-10-07 | Qualcomm Incorporated | Systems, methods, apparatus, and computer-readable media for head tracking based on recorded sound signals |
CN102300140B (zh) * | 2011-08-10 | 2013-12-18 | 歌尔声学股份有限公司 | 一种通信耳机的语音增强方法及降噪通信耳机 |
US9071900B2 (en) * | 2012-08-20 | 2015-06-30 | Nokia Technologies Oy | Multi-channel recording |
US9549253B2 (en) * | 2012-09-26 | 2017-01-17 | Foundation for Research and Technology—Hellas (FORTH) Institute of Computer Science (ICS) | Sound source localization and isolation apparatuses, methods and systems |
KR102011550B1 (ko) | 2012-10-05 | 2019-08-16 | 시러스 로직 인터내셔널 세미컨덕터 리미티드 | 바이노럴 청취 시스템 및 방법 |
EP2984855B1 (en) | 2013-04-09 | 2020-09-30 | Sonova AG | Method and system for providing hearing assistance to a user |
US9036845B2 (en) | 2013-05-29 | 2015-05-19 | Gn Resound A/S | External input device for a hearing aid |
EP2840807A1 (en) * | 2013-08-19 | 2015-02-25 | Oticon A/s | External microphone array and hearing aid using it |
DK2849462T3 (en) | 2013-09-17 | 2017-06-26 | Oticon As | Hearing aid device comprising an input transducer system |
-
2016
- 2016-04-01 DK DK16716013.4T patent/DK3278575T3/da active
- 2016-04-01 JP JP2017551306A patent/JP6479211B2/ja active Active
- 2016-04-01 CN CN201680014387.3A patent/CN107431869B/zh active Active
- 2016-04-01 EP EP16716013.4A patent/EP3278575B1/en not_active Revoked
- 2016-04-01 WO PCT/EP2016/057271 patent/WO2016156595A1/en active Application Filing
-
2017
- 2017-10-02 US US15/722,318 patent/US10798494B2/en active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20020037088A1 (en) * | 2000-09-13 | 2002-03-28 | Thomas Dickel | Method for operating a hearing aid or hearing aid system, and a hearing aid and hearing aid system |
WO2008098590A1 (en) * | 2007-02-14 | 2008-08-21 | Phonak Ag | Wireless communication system and method |
US20120020503A1 (en) * | 2009-01-22 | 2012-01-26 | Mitsuru Endo | Hearing aid system |
US20140029777A1 (en) * | 2012-07-27 | 2014-01-30 | Algor Korea Co., Ltd. | Wireless in-the-ear type hearing aid system having remote control function and control method thereof |
CN103916807A (zh) * | 2012-12-28 | 2014-07-09 | Gn瑞声达A/S | 空间线索和反馈 |
CN103269465A (zh) * | 2013-05-22 | 2013-08-28 | 歌尔声学股份有限公司 | 一种强噪声环境下的耳机通讯方法和一种耳机 |
CN103686575A (zh) * | 2013-11-28 | 2014-03-26 | 清华大学 | 助听装置 |
Also Published As
Publication number | Publication date |
---|---|
EP3278575B1 (en) | 2021-06-02 |
JP2018521520A (ja) | 2018-08-02 |
US10798494B2 (en) | 2020-10-06 |
CN107431869B (zh) | 2020-01-14 |
DK3278575T3 (da) | 2021-08-16 |
US20180027340A1 (en) | 2018-01-25 |
EP3278575A1 (en) | 2018-02-07 |
WO2016156595A1 (en) | 2016-10-06 |
JP6479211B2 (ja) | 2019-03-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9723422B2 (en) | Multi-microphone method for estimation of target and noise spectral variances for speech degraded by reverberation and optionally additive noise | |
CN105898651B (zh) | 包括用于拾取用户自我话音的分立传声器单元的听力*** | |
CN110089130B (zh) | 两用双边麦克风阵列 | |
CN105407440B (zh) | 包括定向***的听力装置 | |
US11729557B2 (en) | Hearing device comprising a microphone adapted to be located at or in the ear canal of a user | |
US8542855B2 (en) | System for reducing acoustic feedback in hearing aids using inter-aural signal transmission, method and use | |
CN104254029A (zh) | 一种具有麦克风的耳机 | |
US9060232B2 (en) | Hearing aid device with a directional microphone system and method for operating a hearing aid device having a directional microphone system | |
EP3799444A1 (en) | A hearing aid comprising a directional microphone system | |
US20230300516A1 (en) | Ear-wearable device with active noise cancellation system that uses internal and external microphones | |
US11825269B2 (en) | Feedback elimination in a hearing aid | |
US20120243716A1 (en) | Hearing apparatus with feedback canceler and method for operating the hearing apparatus | |
WO2019147494A1 (en) | Non-occluding feedback-resistant hearing device | |
US20240007802A1 (en) | Hearing aid comprising a combined feedback and active noise cancellation system | |
CN107431869A (zh) | 听力装置 | |
US20230308817A1 (en) | Hearing system comprising a hearing aid and an external processing device | |
US11671767B2 (en) | Hearing aid comprising a feedback control system | |
EP4390922A1 (en) | A method for training a neural network and a data processing device | |
US20230186934A1 (en) | Hearing device comprising a low complexity beamformer | |
US20230421971A1 (en) | Hearing aid comprising an active occlusion cancellation system | |
Essafi et al. | A comparative study between different pre-whitening decorrelation based acoustic feedback cancellers |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |