CN111149369A - 头戴式受话器耳上状态检测 - Google Patents

头戴式受话器耳上状态检测 Download PDF

Info

Publication number
CN111149369A
CN111149369A CN201880063689.9A CN201880063689A CN111149369A CN 111149369 A CN111149369 A CN 111149369A CN 201880063689 A CN201880063689 A CN 201880063689A CN 111149369 A CN111149369 A CN 111149369A
Authority
CN
China
Prior art keywords
ear
signal
headphones
parameter
microphone
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201880063689.9A
Other languages
English (en)
Other versions
CN111149369B (zh
Inventor
V·萨博兹耐科夫
T·I·哈维
N·埃夫安赛义迪
R·卢克
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Cirrus Logic International Semiconductor Ltd
Original Assignee
Cirrus Logic International Semiconductor Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Cirrus Logic International Semiconductor Ltd filed Critical Cirrus Logic International Semiconductor Ltd
Priority to CN202210286334.4A priority Critical patent/CN114466301A/zh
Publication of CN111149369A publication Critical patent/CN111149369A/zh
Application granted granted Critical
Publication of CN111149369B publication Critical patent/CN111149369B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones
    • H04R1/1041—Mechanical or electronic switches, or control elements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones
    • H04R1/1008—Earpieces of the supra-aural or circum-aural type
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones
    • H04R1/1091—Details not provided for in groups H04R1/1008 - H04R1/1083
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R29/00—Monitoring arrangements; Testing arrangements
    • H04R29/001—Monitoring arrangements; Testing arrangements for loudspeakers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2460/00—Details of hearing devices, i.e. of ear- or headphones covered by H04R1/10 or H04R5/033 but not provided for in any of their subgroups, or of hearing aids covered by H04R25/00 but not provided for in any of its subgroups
    • H04R2460/03—Aspects of the reduction of energy consumption in hearing devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2460/00—Details of hearing devices, i.e. of ear- or headphones covered by H04R1/10 or H04R5/033 but not provided for in any of their subgroups, or of hearing aids covered by H04R25/00 but not provided for in any of its subgroups
    • H04R2460/15—Determination of the acoustic seal of ear moulds or ear tips of hearing devices

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Acoustics & Sound (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Otolaryngology (AREA)
  • Headphones And Earphones (AREA)

Abstract

一种用于检测头戴式受话器是否在耳上的方法和设备。生成用于来自扬声器(Si)的声学回放的探测信号(Vi)。接收来自麦克风(Ei)的麦克风信号(XEi)，所述麦克风信号包括在所述麦克风处所接收的所述探测信号的至少一部分。所述麦克风信号被传送至状态估计器(350)，以产生对所述麦克风信号中所包含的所述探测信号的所述部分的至少一个参数(
Figure DDA0002430990110000011
)的估计。处理对所述至少一个参数的估计，以确定所述头戴式受话器是否在耳上。

Description

头戴式受话器耳上状态检测
技术领域
本发明涉及头戴式受话器(headset)，尤其涉及被配置为确定头戴式受话器是否在用户的耳上或耳内就位的头戴式受话器，且涉及用于进行这种确定的方法。
背景技术
头戴式受话器是一种流行的用于传递声音至用户的一只耳朵或两只耳朵的设备，诸如用于音乐或音频文件或电话信号的回放。头戴式受话器典型地还捕获来自周围环境的声音，诸如用于语音记录或语音电话的用户的语音，或者用于增强由设备处理的信号的背景噪声信号。头戴式受话器可以提供广泛的信号处理功能。
例如，一种这样的功能是主动噪声消除(ANC，也称为主动噪声控制)，它将噪声消除信号与回放信号组合，且经由扬声器输出经组合的信号，以使得噪声消除信号分量在声学上消除周边噪声，而用户仅听到或主要听到感兴趣的回放信号。ANC处理通常将由参考(前馈)麦克风所提供的周边噪声信号以及误差(反馈)麦克风所提供的回放信号作为输入。即使取下了头戴式受话器，ANC处理仍持续地消耗大量功率。
因此，在ANC中且类似地在头戴式受话器的许多其他信号处理功能中，期望的是，知晓在任何特定时间是否佩戴了头戴式受话器。例如，期望的是，知晓贴耳型头戴式受话器是否放置在用户的耳廓上或上方，以及耳塞(earbud)型头戴式受话器是否已经放置在用户的耳道或外耳内。这两种使用情形在本文中都被称为各自的头戴式受话器处于“耳上(onear)”。诸如当头戴式受话器被戴在用户的脖子上或者被完全去除时的未使用状态在本文中被称为处于“离耳(off ear)”。
用于耳上检测(on ear detection)的先前方法包括使用专用传感器，诸如电容性传感器、光学传感器或红外传感器，所述专用传感器可以检测何时将头戴式受话器戴在耳上或耳附近。然而，提供这样的非声学传感器增大了硬件成本且增大了功率消耗。用于耳上检测的另一先前方法是提供一种感测麦克风，该感测麦克风被定位为在佩戴时检测头戴式受话器内部的声学声音，这是基于与头戴式受话器离耳时相比，耳道和/或耳廓内部的声学混响将导致感测麦克风信号的功率的可检测到的上升。然而，感测麦克风信号功率会受到诸如风噪声的噪声源的影响，因此这种方法在实际中头戴式受话器离耳且受噪声影响时可能输出头戴式受话器处于耳上的错误肯定(false positive)。当头戴式受话器握在用户的手中、放在盒子中等时，用于耳上检测的这些和其他方法也可能输出错误肯定。
本说明书中已经包括的对文件、动作、材料、设备、物品等的任何讨论仅出于提供本发明的上下文的目的。不应被认为是承认这些事项中的任何事项或所有事项由于在本申请的每个权利要求的优先权日之前存在而形成现有技术基础的一部分或是与本发明相关领域内的公共常识。
贯穿本说明书，词语“包括(comprise)”或诸如“包括(comprises)”或“包括(comprising)”之类的变体将被理解为暗示包括所陈述的元件、整数或步骤，或元件组、整数组或步骤组，但不排除任何其他元件、整数或步骤，或元件组、整数组或步骤组。
在本说明书中，元件可以是选项列表中的“至少一个”的陈述应被理解为，该元件可以是所列出的选项中的任何一个，或者可以是所列出的选项中的两个或更多个的任何组合。
发明内容
根据第一方面，本发明提供了一种用于头戴式受话器的耳上检测的信号处理设备，该设备包括：
探测信号生成器，所述探测信号生成器被配置为生成用于来自扬声器的声学回放的探测信号；
输入，所述输入用于接收来自麦克风的麦克风信号，所述麦克风信号包括在所述麦克风处所接收的所述探测信号的至少一部分；以及
处理器，所述处理器被配置为对所述麦克风信号应用状态估计，以产生对所述麦克风信号中所包含的所述探测信号的所述部分的至少一个参数的估计，所述处理器进一步被配置为处理对所述至少一个参数的估计，以确定所述头戴式受话器是否在耳上。
根据第二方面，本发明提供了一种用于头戴式受话器的耳上检测的方法，该方法包括：
生成用于来自扬声器的声学回放的探测信号；
接收来自麦克风的麦克风信号，所述麦克风信号包括在所述麦克风处所接收的所述探测信号的至少一部分；
对所述麦克风信号应用状态估计，以产生对所述麦克风信号中所包含的所述探测信号的所述部分的至少一个参数的估计，以及
由对所述至少一个参数的估计来确定所述头戴式受话器是否在耳上。
根据第三方面，本发明提供了一种用于头戴式受话器的耳上检测的非暂时性计算机可读介质，所述非暂时性计算机可读介质包括指令，当由一个或多个处理器执行时，所述指令导致执行以下操作：
生成用于来自扬声器的声学回放的探测信号；
接收来自麦克风的麦克风信号，所述麦克风信号包括在所述麦克风处所接收的所述探测信号的至少一部分；
对所述麦克风信号应用状态估计，以产生对所述麦克风信号中所包含的所述探测信号的所述部分的至少一个参数的估计，以及
由对所述至少一个参数的估计来确定所述头戴式受话器是否在耳上。
根据第四方面，本发明提供了一种用于头戴式受话器的耳上检测的***，该***包括处理器和存储器，所述存储器包含由所述处理器能执行的指令，且其中该***能操作以：
生成用于来自扬声器的声学回放的探测信号；
接收来自麦克风的麦克风信号，所述麦克风信号包括在所述麦克风处所接收的所述探测信号的至少一部分；
对所述麦克风信号应用状态估计，以产生对所述麦克风信号中所包含的所述探测信号的所述部分的至少一个参数的估计，以及
由对所述至少一个参数的估计来确定所述头戴式受话器是否在耳上。
在本发明的一些实施方案中，所述处理器被配置为处理对所述至少一个参数的估计，以通过将经估计的参数与一个阈值进行比较来确定所述头戴式受话器是否在耳上。
在本发明的一些实施方案中，所述至少一个参数是所述探测信号的幅度。在一些实施方案中，当所述幅度高于一个阈值时，所述处理器被配置为指示所述头戴式受话器在耳上。
在本发明的一些实施方案中，所述探测信号包括单音调。在本发明的其他实施方案中，所述探测信号包括经加权的多音调信号。在本发明的一些实施方案中，所述探测信号被限制至不可听(inaudiable)频率范围。在本发明的一些实施方案中，所述探测信号被限制至小于典型的人类听力范围以下的阈值频率的一个频率范围。在本发明的一些实施方案中，所述探测信号随时间变化。例如，所述探测信号可以响应于所述探测信号的频率范围内的周边噪声的水平改变而变化。
本发明的一些实施方案可以进一步包括降频转换器(down converter)，该降频转换器被配置为在所述状态估计之前对所述麦克风信号进行降频转换，以降低所述状态估计所需要的计算负担。
在本发明的一些实施方案中，卡尔曼滤波器实现所述状态估计。在这样的实施方案中，由所述探测信号生成器所生成的所述探测信号的副本可以被传送至所述卡尔曼滤波器的预测模块。
在本发明的一些实施方案中，判定设备模块被配置为由所述至少一个参数生成所述头戴式受话器在耳上的第一概率以及所述头戴式受话器离耳的第二概率，且所述处理器被配置为使用所述第一概率和/或所述第二概率来确定所述头戴式受话器是否在耳上。在这样的实施方案中，判定设备模块可以将所述至少一个参数与一个上限阈值水平进行比较，以确定所述第一概率。在一些实施方案中，所述状态估计产生对所述至少一个参数的逐样本估计(sample-by-sample estimate)，且基于帧来考虑所述估计，以确定所述头戴式受话器是否在耳上，每帧包括N个估计，且针对每帧，所述第一概率被计算为NON/N，其中NON是该帧中所述至少一个参数超过所述上限阈值的样本数目。
在本发明的一些实施方案中，所述判定设备模块可以将所述至少一个参数与一个下限阈值水平进行比较，以确定所述第二概率。在一些实施方案中，所述状态估计产生对所述至少一个参数的逐样本估计，且其中基于帧来考虑所述估计，以确定所述头戴式受话器是否在耳上，每帧包括N个估计，且其中针对每帧，所述第二概率被计算为NOFF/N，其中NOFF是该帧中所述至少一个参数小于所述下限阈值的样本数目。
在本发明的一些实施方案中，所述判定设备模块被配置为由所述至少一个参数生成不确定性概率，该不确定性概率反映所述头戴式受话器是在耳上还是离耳的不确定性，且所述处理器被配置为使用该不确定性概率来确定所述头戴式受话器是否在耳上。在一些实施方案中，所述状态估计可以产生对所述至少一个参数的逐样本估计，且其中基于帧来考虑所述估计，以确定所述头戴式受话器是否在耳上，每帧包括N个估计，且其中针对每帧，该不确定性概率被计算为NUNC/N，其中NUNC是该帧中所述至少一个参数大于所述下限阈值且小于所述上限阈值的样本数目。在一些这样的实施方案中，所述处理器可以被配置为当该不确定性概率超过一个不确定性阈值时，不改变关于所述头戴式受话器是否在耳上的先前确定。
在本发明的一些实施方案中，做出关于所述头戴式受话器是否在耳上的确定的改变具有从离耳至耳上的第一判定时延，且具有从耳上至离耳的第二判定时延，所述第一判定时延小于所述第二判定时延，从而使所述确定偏向于耳上确定。
在本发明的一些实施方案中，可以使所述探测信号的水平动态地改变，以补偿变化的头戴式受话器堵塞。这样的实施方案可以进一步包括用于接收来自所述头戴式受话器的用于捕获外部环境声音的参考麦克风的麦克风信号的输入，且其中所述处理器还被配置为对所述参考麦克风信号应用状态估计，以产生对所述探测信号的所述至少一个参数的第二估计，且其中所述处理器还被配置为将所述第二估计与所述估计进行比较，以将周边噪声与耳上堵塞区分开。
在本发明的一些实施方案中，所述***是头戴式受话器，诸如耳塞。在一些实施方案中，误差麦克风被安装在所述头戴式受话器上，使得当佩戴所述头戴式受话器时，所述误差麦克风感测所述头戴式受话器和用户的耳膜之间的空间内所出现的声音。在一些实施方案中，参考麦克风被安装在所述头戴式受话器上，使得当佩戴所述头戴式受话器时，所述参考麦克风感测所述头戴式受话器的外部所出现的声音。在本发明的一些实施方案中，所述***是与所述头戴式受话器能交互操作的智能电话或其他这样的主设备。
附图说明
现在将参考附图来描述本发明的实施例，在附图中：
图1a和图1b例示了包括无线耳塞型头戴式受话器的信号处理***，其中实施了耳上检测；
图2是具有所提出的耳上检测器的ANC头戴式受话器的概括性示意图；
图3是图2的ANC头戴式受话器的更详细的框图，更详细地例示了本发明的耳上检测器的状态跟踪；
图4是由图2和图3的耳上检测器所实施的卡尔曼幅度***的框图；
图5a至图5e例示了应用多个判定阈值和判定概率来改进耳上检测器输出的稳定性；
图6是根据本发明的另一实施方案的耳上检测器的框图，该耳上检测器实施探测信号的动态控制；以及
图7是例示图6的实施方案中的探测信号的动态控制的流程图。
贯穿附图，相应的附图标记指示相应的部件。
具体实施方式
图1a和图1b例示了一种ANC头戴式受话器100，在该ANC头戴式受话器100中实施了耳上检测。头戴式受话器100包括两个无线耳塞120和150，每个无线耳塞分别包括两个麦克风121、122和151、152。图1b是耳塞120的***示意图。耳塞150以与耳塞120基本相同的方式配置，因此未单独示出或描述。耳塞120的数字信号处理器124被配置为接收来自耳塞麦克风121和122的麦克风信号。麦克风121是参考麦克风，且被定位为感测来自耳道外部和耳塞外部的周边噪声。相反地，麦克风122是误差麦克风，且在使用中被定位在耳道内部，以便感测耳道内的包括扬声器128的输出的声学声音。当耳塞120被定位在耳道内时，麦克风122在一定程度上与外部周边声学环境堵塞，但是保持与扬声器128的输出的良好耦合，而此时麦克风121在一定程度上与扬声器128的输出堵塞，但是保持与外部周边声学环境的良好耦合。头戴式受话器100被配置为用于用户听音乐或音频、打电话，以及将语音命令传递至语音识别***，以及其他这样的音频处理功能。
处理器124还被配置为响应于一个耳塞或两个耳塞被放置在耳上或从耳上取下，来适配这种音频处理功能的操纵。耳塞120进一步包括存储器125，该存储器125实际上可以被设置为单部件或多部件。存储器125被设置用于存储数据和程序指令。耳塞120进一步包括收发器126，该收发器126被设置用于允许耳塞120能够与外部设备(包括耳塞150)无线通信。在替代实施方案中，耳塞之间的这种通信可以包括有线通信，其中在头戴式受话器的左侧和右侧之间直接地(诸如，在头顶带(overhead band)内)或者经由中间设备(诸如，智能电话)来设置合适的线。耳塞120还包括扬声器128，用于将声音传递至用户的耳道。耳塞120由电池供电，且可以包括其他传感器(未示出)。
图2是ANC头戴式受话器100的概括性示意图，更详细地例示了根据本发明的实施方案的耳上检测的过程。在下文中，左参考麦克风121也被表示为RL，而右参考麦克风151也被表示为RR。左右参考麦克风分别生成信号XRL和XRR。左误差麦克风122也被表示为EL，而右误差麦克风152也被表示为ER，且这两个误差麦克风分别生成信号XEL和XER。左耳塞扬声器128也被表示为SL，右耳塞扬声器158也被表示为SR。左耳塞回放音频信号被表示为UPBL，右耳塞回放音频信号被表示为UPBR。
根据本发明的当前实施方案，耳塞120的处理器124执行耳上检测器130或OEDL，以便在声学上检测耳塞120是在用户的耳上还是在用户的耳内。耳塞150执行等效的OEDR160。在该实施方案中，相应的耳上检测器130、160的输出作为启用信号或禁用信号被传送至相应的声学探测生成器GENL、GENR。当声学探测生成器被启用时，声学探测生成器将产生不可听声学探测信号UIL、UIR，所述不可听声学探测信号将与相应的回放音频信号相加。相应的耳上检测器130、160的输出也作为信号DL、DR传送至判定组合器180，该判定组合器180产生总体耳上判定D∑。
在下文中，i被用来表示L[左]或R[右]，且应理解的是，根据本发明的多个实施方案，所描述的处理可以仅在一个头戴式受话器中操作、在两个头戴式受话器中独立地操作或者在两个头戴式受话器中彼此协作地操作。如图2所示出的，每个耳机(headphone)都配备有扬声器Si、参考麦克风Ri和误差麦克风Ei。为了回放来自主机回放设备的信号UPBi，可以依赖于来自控制模块的“启用”标志的值来添加不可听探测信号UIi：1-添加探测；0-不添加探测。不可听探测UIi由对应的探测生成器GENi生成。“启用”标志的特定值0或1依赖于多种因素，诸如设备的操作环境条件、周边噪声水平、回放的存在、头戴式受话器设计以及其他此类因素。所得到的信号被传送通过ANCi，该ANCi提供常见的ANC功能，该常见的ANC功能添加构成一定量经估计的不想要的反相噪声的信号。为此，ANCi从参考麦克风Ri和误差麦克风Ei获取输入。然后，ANCi的输出被传送至扬声器Si，以播放至用户的耳中。因此，ANC要求存在麦克风121和122以及扬声器128，且本发明的耳上检测解决方案不需要附加的麦克风、扬声器或传感器。来自扬声器的输出生成信号XRi，该信号XRi包含i参考麦克风中的一定量的未经补偿噪声；类似地，它生成i误差麦克风中的信号XEi。
图3是根据本发明的一个实施方案的包括耳上检测器的ANC头戴式受话器100的i耳机的框图。每个耳机120、150配备有扬声器Si、参考麦克风Ri和误差麦克风Ei。来自主机回放设备的回放信号Ui与不可听探测信号Vi相加，该不可听探测信号Vi由对应的探测生成器GENi320生成。可以用高通滤波器HPFi 310对回放信号进行滤波，以防止回放内容Ui和探测Vi之间的频谱重叠。由求和所得到的信号被传送至ANCi 330，ANCi 330提供常见的ANC功能，该常见的ANC功能添加一定量经估计的不想要的反相噪声。由ANCi所产生的信号XSi被传送至扬声器Si，该扬声器Si声学回放该信号。来自扬声器Si的输出生成信号XRi，该信号XRi包含参考麦克风Ri中的一定量的未经补偿噪声；类似地，它生成误差麦克风Ei中的信号XEi。
误差麦克风信号XEi在降频转换器↓Ni 340中被降频转换为必要的采样率，然后被馈入状态***350中。状态***350执行状态估计，以连续地估计或跟踪经降频转换的误差麦克风信号
Figure BDA0002430990090000081
中所存在的探测信号的一个或多个选定参数。例如，状态***350可以跟踪经降频转换的误差麦克风信号
Figure BDA0002430990090000091
中所存在的探测信号的幅度。经估计的探测信号参数
Figure BDA0002430990090000092
被传送至判定设备DD 360，在判定设备DD中产生关于相应的耳机是否在耳上的判定Di。以这种方式在左侧耳机和右侧耳机这二者中所产生的单独判定Di可以独立使用，或可以组合(例如，进行“与”运算)，以产生关于相应的头戴式受话器是否在耳上或这两个头戴式受话器是否都在耳上的总体判定。
在本实施方案中，通过将探测信号限制为具有位于标称人类可听阈值以下的频谱内容BIPS而使探测信号不可听，在本实施方案中BIPS≤20Hz。在其他实施方案中，探测信号可以占据略微较高的频率分量，而不是严格地不可听。
重要的是，根据本发明，探测信号所必须采取的形式是能够使用状态估计或状态空间表示而被跟踪的，以跟踪来自回放扬声器的探测信号与麦克风的声学耦合。这是重要的，因为相当大的噪声可能以与探测信号相同的频率产生，诸如风噪声。然而，本发明认识到，这种噪声通常具有不相干的可变相位，因此将不趋向于破坏或欺骗状态空间估计器，该状态空间估计器被调谐以寻求已知的相干信号。这与简单地监视被探测信号所占据的频带中的功率相反，因为这样的功率监视将被噪声破坏。
根据本发明的一个实施方案的不可听探测信号的实施例可以表示如下：
Figure BDA0002430990090000093
Figure BDA0002430990090000094
其中，N是谐波分量的数量；wn∈[0，1]是对应分量的权重；An、f0n和fs分别是幅度、基频和采样频率。例如，如果N＝1且w1＝1，则探测信号是具有幅度A和频率f0的余弦波。在本发明的范围内的其他实施方案中，可以设想使用许多其他合适的探测信号。
由状态***350所输出的经估计的幅度
Figure BDA0002430990090000095
(或经估计的幅度
Figure BDA0002430990090000096
的总和，
Figure BDA0002430990090000097
)可以被用作耳上检测特征。这可以通过限定较高的
Figure BDA0002430990090000098
值对应于耳上状态来实现，因为在此状态期间，由于耳道的堵塞和扬声器输出在耳道内的限制，更多的探测信号能量被误差麦克风捕获。相反，可以将较低的
Figure BDA0002430990090000101
值限定为对应于离耳状态，因为在此状态期间，由扬声器所输出的探测信号的更多声压逸出至自由空间中而不受耳道的限制，因此较少的探测信号被误差麦克风捕获。
在下文中，为清楚起见，讨论了单分量探测，但是应理解，在本发明的范围内，本发明的其他实施方案可以等效地利用根据EQ1的经加权的多音调探测，或由状态空间模型可表示的任何其他探测。
为清楚起见，我们现在省略索引i，且引入k表示样本。重要的是注意，对于给定的第n个基频f0，探测Vk可以按如下方式递归地生成：
Figure BDA0002430990090000102
其中V1,k是时刻k的同相(余弦)分量，V2,k是时刻k的正交(正弦)分量，V1,k-1是时刻k-1的同相(余弦)分量，V2,k-1是时刻k-1的正交(正弦)分量，且φ由EQ2限定。
所生成的探测的幅度由初始状态矢量
Figure BDA0002430990090000103
限定且可以按照如下方式计算：
Figure BDA0002430990090000104
以矩阵形式，EQ3可以写成
Figure BDA0002430990090000105
Figure BDA0002430990090000106
EQ1中的每第n个分量具有专用的递归生成器矩阵Φn。
其他类型的递归正交生成器是可能的。由EQ3所描述的正交生成器仅作为实施例给出。
在此实施方案中，HPF 310对输入音频滤波，以防止回放内容和探测之间的频谱重叠。例如，如果探测是具有频率f0＝20Hz的余弦波(EQ1，N＝1)，则应选择HPF的截止频率，以使得f0不受HPF阻带衰减的影响。再次，在本发明的范围内的替代实施方案可以利用较高的截止频率，如预期用途所允许的，且应注意，这种滤波将去除感兴趣的回放信号的低频分量，这可能变为不期望的。
探测生成器GEN 320生成不可听探测信号，该不可听探测信号的频谱内容位于标称人类可听阈值以下。这里考虑的一个实施例是，探测信号是幅度为A且基频为f0的余弦波，如由EQ1给出的(N＝1，w1＝1)。
不可听探测可以是连续的平稳信号，或者其参数可以随时间变化，同时在本发明的范围内保留合适的信号。探测信号的特性(例如，分量的数目N、频率f0n、幅度An、频谱形状wn)可以依赖于预先配置的序列或响应于其他传感器上的信号而变化。例如，如果大量的周边噪声以与探测相同的频率出现，则可以通过GEN 320来调节探测信号，以改变探测频率或任何探测信号参数(幅度、频率、频谱形状等)，从而即使在存在这样的周边噪声的情况下，也保持探测信号能清晰地可观测。
探测生成器GEN 320可以被实施为硬件音调/多音调生成器、递归软件生成器、查找表以及任何其他合适的信号生成方式。
再次转至降频转换器↓N 340，注意到，误差麦克风信号中最高f0n以上的频谱内容对于耳上检测是不必要的，耳上检测必须仅考虑探测信号所占据的低频带。因此，在此实施方案中，首先由降频转换器↓N 340将误差麦克风信号采样率fs进行降频转换，以减少由耳上检测所添加的计算负担，且进一步降低耳上检测器的功率消耗。降频转换器↓N 340可以被实施为低通滤波器(LPF)，之后跟随有降采样器。例如，通过相应选择的LPF截止频率和降采样率，可以将耳上检测器的采样频率降低至值fs≥2*f0n。自然地，探测生成器320的采样率和降频转换器↓N 340的输出应当是相同的。对于f0n＝20 Hz，建议使用fs∈[60，120]Hz。
图4更详细地例示了状态***350。在此实施方案中，耳上状态***350基于用作幅度估计器/***的卡尔曼滤波器。再次，回放音频信号在310处被高通滤波，然后与由探测生成器320所生成的探测信号V1,K相加。所得到的音频信号通过扬声器S 128播放。应强调的是，不可听探测并非必须由递归生成器Φ(EQ5)生成。如此示出仅为了突出本发明所采用的方法的状态空间性质。在实际中，探测V1,K可以由硬件音调/多音调生成器、递归软件生成器、查找表或其他合适的方式生成。
由扬声器S 128声学输出的音频信号被误差麦克风E 122捕获，且在降频转换器↓N340所提供的速率降低之后，信号
Figure BDA0002430990090000111
被输入至状态***350中。基于卡尔曼滤波器的状态***350包括“预测”模块410和“更新”模块420。在“预测”步骤期间，对应的子模块410本地重新生成探测信号V1,K。在此同样地，不可听探测并非必须由递归生成器Φ(EQ5)生成，但是它被如此示出是为了突出本发明所采用的方法的状态空间性质。在本发明范围内的其他实施方案中，探测可以由硬件音调/多音调生成器、递归软件生成器、查找表等在模块410中生成。
“更新”模块420获取经降频转换的误差麦克风信号
Figure BDA0002430990090000121
以及由模块410所提供的不可听探测信号V1,K的本地副本，且实施这两者的凸组合：
Figure BDA0002430990090000122
其中G是卡尔曼增益。可以使用卡尔曼滤波器理论“即时(on the fly)”计算卡尔曼增益G，因此不再进一步讨论。替代地，在卡尔曼增益计算不依赖于实时数据的情况下，可以预先计算增益G，以减少实时计算负荷。
在完成预测/更新步骤之后，通过幅度估计器(AE 430)根据EQ4来估计探测信号的幅度。
返回图3，探测信号的经估计的幅度
Figure BDA0002430990090000123
被馈送至判定设备DD 360，在判定设备DD360中，它可以从当前采样率积分至所要求的检测时间分辨率(在一个实施例中，一个合适的时间分辨率值是200 ms)且与一个预限定的阈值TD进行比较，以产生二进制判定D。更详细地，此步骤按照如下方式实现：
Figure BDA0002430990090000124
判定设备360被输入有来自卡尔曼幅度***350的瞬时(逐样本)探测幅度估计，且以由tD所限定的时间分辨率来产生二进制耳上判定。
尽管在一些应用中，此实施方案中由DD 360所做出的简单阈值判定可能就足够了，但是在一些情况下这可能会返回关于头戴式受话器是否在耳上的较高比率的错误肯定或错误否定，或者可能在耳上判定与离耳判定之间的交替过度变化无常。
因此，还提出了本发明的以下实施方案，以向判定设备360提供更精细的方法，从而改进耳上检测输出的鲁棒性和稳定性。图5a至图5e的信号图中例示了该解决方案的推导。
产生图5a至图5e的数据的测试场景包括一个具有模具的丽声(LiSheng)头戴式受话器、处于公共酒吧环境中且具有用户自己的语音，且没有回放音频。所使用的探测信号包括产生66dB SPL的20Hz音调。ANC已关闭，且不存在风噪声。图5a示出了经降频转换的误差麦克风信号(估计基于所述经降频转换的误差麦克风信号)，且图5b示出了卡尔曼***350的输出，该输出是经估计的音调幅度。图5a和图5b的视觉检查可能地表明在约样本4000处去除了耳塞，然后在约样本7500处将耳塞返回至耳上，但是也可以看出，用户操纵耳塞的过程使这些转变变得不清楚且不是瞬时的，特别是在样本7,000至样本8,500的时段左右。
图5c是由***350所产生的原始音调幅度估计的曲线图。值得注意的是，很难使用任何一个阈值作为头戴式受话器是在耳上还是离耳的判定点，因为如果仅利用一个判定阈值来评估图5c的数据，则将必然会出现许多错误肯定和/或错误否定。如图5c中所示出的，替代地，此实施方案中的卡尔曼***和判定模块不是施加一个检测阈值，而是施加两个阈值，上限阈值(upper threshold)TUpper和下限阈值(lower threshold)TLower。然后，将此实施方案中的原始音调幅度估计AEST划分为ND-样本帧，且与Tupper和TLower进行比较。应注意，依赖于扬声器和麦克风硬件、头戴式受话器形状因子及头戴式受话器在佩戴时的堵塞程度以及回放探测信号时的功率，阈值Tupper和TLower被设置成的值会变化，因此选择低于“耳上”幅度且高于“离耳”幅度的合适的这种阈值将是一个实施步骤。
图5d例示了这种二阈值判定设备的应用。针对头戴式受话器离耳的概率(POFF)、头戴式受话器在耳上的概率(PON)和不确定性概率(PUNC)进行计算。如果PUNC小于不确定性阈值Tunc，则通过将POFF与置信度阈值TConfidence进行比较来更新耳上检测判定。如果PUNC超过不确定性阈值Tunc，则将保留先前的状态，因为存在太多不确定性而无法做出任何新的判定。尽管在整个约7,500样本至8,500样本的时段存在不确定性(这在图5a至图5d中很明显)，但是如图5e中示出的，此实施方案所描述的方法仍然输出明确的耳上判断或离耳判断。此实施方案的进一步改进是将最终判定偏向于耳上判定而不是离耳判定，因为大多数DSP功能应在设备处于耳上时迅速启用，而在设备离耳时可以更缓慢地禁用。为此，图5d中的置信度阈值大于0.5。此外，应用了这样的规则，即，仅在以至少连续最少次数指示离耳状态时，才将状态判定从耳上改变至离耳。
因此，在图5的实施方案中，增大tD从而跨越多个数据点的窗口，以降低与瞬时(逐样本)判定相关联的易变性，应注意，用户不可能以甚至接近采样率的速率来更改头戴式受话器的位置。另外，值得注意的是，考虑了两个阈值以提高耳上判定或离耳判定的置信度以及创建一个中间的“不确定”状态，当置信度低时，该“不确定”状态对于禁用耳上状态判定改变很有用。换言之，引入了置信度，使得仅在置信度足以改变输出状态指示时才这么做，且随着时间的推移反复改变，这将一定滞后引入至输出指示中，从而降低输出中的易变性，如图5e中明显示出的。
应用算法以实现图5中所例示的过程如下。首先，传入的经估计的音调幅度AEST各自被有条件地细分为具有ND个样本的多个帧，从而ND＝tD*FS，其中FS是降频转换后的采样频率(例如，125Hz)。然后，将ND个幅度估计中的每个与两个预限定阈值Tupper和TLower进行比较，以产生三个概率：pON，pOFF和pUNC(分别是头戴式受话器在耳上的概率、头戴式受话器离耳的概率以及处于不确定状态的概率)如下：
a.如果AEST<TLower，则递增离耳计数器NOFF
b.如果AEST>Tupper，则递增耳上计数器NON
c.如果AEST>＝TLower且AEST<＝Tupper，则递增不确定性计数器NUNC
d.在已经处理了所有ND个样本之后，估计所述概率：
FOFF＝NOFF/ND；PON＝NON/ND；PUNC＝NUNC/ND，
因此，每ND个样本(或等效地，每tD秒)更新所述概率。
如果不确定性概率较低(低于预限定的阈值TUNC)，使得PUNC<TUNC，则按如下方式更新耳上判定，其中低PUNC表示可靠的估计：
a.如果POFF>＝TConf，则DECISION＝OFF-EAR(“1”)，其中TConf是预限定的置信度水平
b.如果POFF<TConf，则DECISION＝ON-EAR(“0”)
如果不确定性概率很高(高于预限定的阈值TUNC)，使得PUNC>＝TUNC，则将保留在前一判定间隔tD处所做出的耳上判定。高PUNC表示不可靠的估计(如可能是由于松配合或高水平的低频噪声所导致的低SNR引起的)。
如果不确定，则所产生的耳上判定被进一步偏向于耳上。为此，仅一个“肯定”判定(DECISION＝＝ON-EAR)足以从离耳状态切换至耳内状态。这意味着，此情形中的判定时延恰好是tD秒。然而，对于从耳上状态转变至离耳状态，M个连续的“肯定”判定(例如，4个)是必要的。这意味着，针对此情形的时延是至少M*tD秒。因此，如果DECISION＝＝ON-EAR，则将其原样传送至检测器的输出。如果DECISION＝＝OFF-EAR，则对应的计数器COFF递增。如果在M个判定间隔期间，DECISION不等于OFF-EAR，则将COFF复位。如果COFF＝＝M，则仅将DECISION＝＝OFF-EAR传送至输出。
根据本发明的任何实施方案的耳上检测可以针对每只耳朵独立地执行。然后(例如，通过对左声道和右声道做出的判定进行“与”运算)可以将所产生的判定组合在一个整体判定中。
已经示出，上文所描述的实施方案在耳上检测的任务中表现良好，特别是如果从耳道内部至外部环境存在相当大的堵塞，因为在这种情形中，在误差麦克风信号中存在高的探测噪声比。
另一方面，本发明的以下实施方案可能特别适合于堵塞不佳的头戴式受话器形状因子，例如，可能由于头戴式受话器设计不佳、用户解剖结构不同、定位不当、在耳塞上使用不适当的尖端而发生。当存在高水平的低频噪声时，以下实施方案可能附加地或替代地是合适的。这些场景有效地反映了降低的SNR(在这种语境下，它指的是探测-噪声比)。在检测器接收到较少的探测信号的意义上，SNR可以“从上方”降低，和/或当大量的低频噪声使SNR恶化时可以“从下方”降低SNR。以下实施方案通过在闭环控制***内实施卡尔曼状态***来解决这种场景。
图6是耳上检测器的另一实施方案的框图，其特别地允许响应于不良的堵塞和/或高噪声来动态地控制探测信号的幅度。具体地，图6的耳上检测器包括一个闭环控制***，在该闭环控制***中，使探测信号的水平动态地改变，从而补偿不良堵塞的影响。
在图6中，扬声器S 628以标称(响亮)水平发射探测信号，以便在误差麦克风622处维持标称声音水平。探测信号由生成器620产生，且与回放音频相混合，由HPF 610高通滤波，以去除与探测信号占据相同频带的(不可听)频率内容。应注意，混合是以回放音频的采样率完成的。与音频回放内容相混合的探测信号由扬声器628播放，且被误差麦克风E 622捕获，在降频转换器↓模块640中降采样至更低的采样率。此具有的效果是，从误差麦克风信号中很大程度上去除了回放内容。通过“Kalman E”幅度***650估计且跟踪在误差麦克风处所生成的探测信号的水平。
一旦检测到堵塞，即误差麦克风622信号水平的增大，就通过应用增益G来动态地降低来自生成器620的探测信号的水平。在增益插值模块680中计算且内插增益G，且增益G被用于控制扬声器S 628处的探测信号的水平，从而在误差传声器E 622处维持期望水平。G还被判定设备DD 690用作度量标准，以辅助做出有关耳机是耳上还是离耳的判定。如果增益G变低(大的负数)，则会指示和/或输出耳上状态。
此实施方案还认识到，如果仅误差麦克风622信号被用于检测，则可能会过度经常地发生错误肯定(当实际上头戴式受话器离耳时，判定设备690指示头戴式受话器在耳上的情形)。这是因为当误差麦克风622的信号水平由于带内周边噪声(这不表示耳上状态)增大时，它对检测器的影响可能与堵塞(这表示耳上状态)相同，导致错误肯定。因此，在图6的实施方案中，出于确定误差麦克风622信号水平中的增大是否是由于堵塞的目的，通过利用参考麦克风624来解决此问题。
当存在带内周边噪声时，参考麦克风R 624将遭受与误差麦克风E622相同(或在一定范围Δ内)的噪声水平增大。因此，提供了另外的卡尔曼状态***卡尔曼R 652来跟踪参考麦克风624的信号水平。然后可以增大增益G来放大探测信号(直至最大水平)，以补偿带内噪声，从而将SNR维持在用于可靠检测所必需的范围内。这是通过同时跟踪误差麦克风E 622和参考麦克风R 624处的探测信号水平来实施的。反过来，当在扬声器处施加至探测的增益G提供PERR>PREF+Δ时，判定设备690报告头戴式受话器在耳上，其中PERR是误差麦克风622处的经跟踪的探测水平，PREF是参考麦克风624处的经跟踪的探测水平，且Δ是预限定的常数。如果不满足此条件且扬声器628达到其最大值，则判定设备690报告头戴式受话器离耳。
图7是进一步例示图6的实施方案的流程图。图7的OED在700处以离耳状态(对应于辐射探测信号的标称水平)开始，在710处将增益G设置为GMAX且在720处将判定状态设置为离耳。然后，过程继续至730，其中包含参考麦克风信号(加上恒定偏移Δ)和误差麦克风信号之间的差的“控制”信号被用来调节增益G，如以上所描述的。在步骤740处，将G与GMAX进行比较。如果通过步骤730输出的经调节的增益小于最大增益GMAX，则在750处，该判定被更新以指示头戴式受话器在耳上。否则，在720处，该判定被更新以指示头戴式受话器离耳。
在类似于图6的另一实施方案中，扬声器处的探测信号的水平可以用作检测度量标准。这利用了这样的观测：扬声器处的探测信号的水平越低，头戴式受话器在耳上的可能性越大。因此，本发明的这样的其他实施方案可以提供另一卡尔曼滤波器“卡尔曼S”，以出于此目的跟踪扬声器S处的探测信号的水平。
本发明的其他实施方案可以在改变头戴式受话器是在耳上还是离耳的判定中提供平均化的或经平滑的滞后。这可以应用至单阈值实施方案，诸如DD 360的实施方案，或者可以应用至多阈值实施方案，诸如图5中所示出的实施方案。特别地，在这样的其他实施方案中，可以例如通过规定仅在判定设备指示头戴式受话器在耳上持续超过1秒之后才是从离耳改变至耳上的状态指示来实现滞后。类似地，仅在判定设备指示头戴式受话器离耳持续超过3秒之后，才是从耳上改变至离耳的状态指示。在此建议1秒和3秒的时间段仅是出于例示性的目的，且可以替代地采用本发明范围内的任何其他合适的值。
优选的实施方案还规定，一旦头戴式受话器已经离耳超过5分钟(或任何合适的相当时间段)就自动关闭OED 130。此允许OED能够在头戴式受话器经常使用且经常在耳上移动时提供有用的作用，而且还允许头戴式受话器能够在离耳持续长时段时节省功率，此后，在设备下次开机或被激活用于回放时可以重新激活OED 130。
本发明的实施方案可以包括具有USB线缆连接的USB头戴式受话器，该USB线缆连接实现与主设备的数据连接且实现来自主设备的电源。在提供仅需要一个或多个声学麦克风和一个或多个声学扬声器的耳上检测中，本发明在这样的实施方案中可能是特别有利的，因为USB耳塞通常需要非常小的部件且具有非常低的价格点，启发省去非声学传感器，诸如电容性传感器、红外传感器或光学传感器。省去非声学传感器的另一益处是避免了在线缆连接中提供额外的数据线和/或电力线的要求，否则额外的数据线和/或电力线必须专用于这种非声学传感器。因此，在此情形中，提供一种不需要非声学部件的耳上检测方法是特别有利。
本发明的其他实施方案可以包括具有与主设备的无线数据连接的无线头戴式受话器(诸如，蓝牙头戴式受话器)，且具有板载电源(诸如，电池)。在这样的实施方案中，本发明还可以在避免对于由非声学耳上传感器部件所消耗的有限电池供电的需求方面提供特殊的优势。
因此，本发明试图仅通过声学方式(即，通过使用头戴式受话器的现存的扬声器/驱动器、误差麦克风和参考麦克风)来解决耳上检测。
知晓头戴式受话器是否在耳上可以在简单的情形中被用于禁用或启用头戴式受话器的一个或多个信号处理功能。此可以节省电力。此还可以避免当头戴式受话器不在预期位置(无论在耳上或离耳)时，信号处理功能不利地影响设备性能的不期望的场景。在其他实施方案中，知晓头戴式受话器是否在耳上可以被用于修改头戴式受话器的一个或多个信号处理功能或回放功能的操作，使得这样的功能自适应地响应于头戴式受话器是否在耳上。
本领域技术人员将理解，在不背离如宽泛描述的本发明的实质或范围的情况下，可以对如特定实施方案中所示出的本发明进行多种变化和/或修改。
例如，虽然在所描述的实施方案中状态***是基于用作幅度估计器/***的卡尔曼滤波器，但是本发明范围内的其他实施方案可以替代地或附加地使用状态估计的其他技术来估计来自扬声器的探测信号与麦克风的声学耦合，诸如H∞(H无限)滤波器、非线性卡尔曼滤波器、无迹卡尔曼滤波器或粒子滤波器。
因此，当前实施方案在所有方面都应被认为是例示性的而非限制性的。
因此，本领域技术人员将认识到，上文所描述的装置和方法的一些方面(例如，由处理器所执行的计算)可以体现为例如位于非易失性载体介质(诸如，磁盘、CD-ROM或DVD-ROM、程序化存储器诸如只读存储器(固件))上或位于数据载体(诸如，光学信号载体或电信号载体)上的处理器控制代码。对于许多应用，本发明的实施方案将被实施在DSP(数字信号处理器)、ASIC(专用集成电路)或FPGA(现场可编程门阵列)上。因此，代码可以包括常规程序代码或微代码或例如用于设立或控制ASIC或FPGA的代码。代码还可以包括用于动态地配置可重新配置的装置(诸如，可重新编程逻辑门阵列)的代码。类似地，代码可以包括用于硬件描述语言(诸如，Verilog TM或VHDL(超高速集成电路硬件描述语言))的代码。如本领域技术人员将理解，代码可以被分布在彼此通信的多个经耦合的部件之间。在适当的情况下，还可以使用在现场可(重新)编程模拟阵列或类似的设备上运行以配置模拟硬件的代码来实施所述实施方案。
本发明的实施方案可以被布置为音频处理电路的一部分，例如可以设置在主机设备中的音频电路。根据本发明的实施方案的电路可以被实施为集成电路。
实施方案可以被实施在主机设备中，尤其是便携式和/或电池供电的主机设备(例如，移动电话、音频播放器、视频播放器、PDA、移动计算平台诸如膝上型计算机或平板计算机和/或例如游戏设备)中。本发明的实施方案还可以全部或部分地实施成可附接至主机设备的附件，例如实施成有源扬声器或头戴式受话器等。实施方案可以被实施成其他形式的设备，诸如远程控制器设备、玩具、机器(诸如机器人)、家庭自动化控制器等。
应注意，以上提及的实施方案例示而非限制本发明，且本领域技术人员将能够在不背离所附权利要求的范围情况下设计许多替代实施方案。本文中“一(a)”或“一个(an)”的使用不排除多个，且单个特征或其他单元可以实现权利要求中所记载的若干单元的功能。权利要求中的任何参考符号均不应被解释为限制权利要求的范围。

Claims (56)

1.一种用于头戴式受话器的耳上检测的信号处理设备，该设备包括：
探测信号生成器，所述探测信号生成器被配置为生成用于来自扬声器的声学回放的探测信号；
输入，所述输入用于接收来自麦克风的麦克风信号，所述麦克风信号包括在所述麦克风处所接收的所述探测信号的至少一部分；以及
处理器，所述处理器被配置为对所述麦克风信号应用状态估计，以产生对所述麦克风信号中所包含的所述探测信号的所述部分的至少一个参数的估计，所述处理器还被配置为处理对所述至少一个参数的估计，以确定所述头戴式受话器是否在耳上。
2.根据权利要求1所述的设备，其中所述处理器被配置为处理对所述至少一个参数的估计，以通过将经估计的参数与一个阈值进行比较来确定所述头戴式受话器是否在耳上。
3.根据权利要求1或权利要求2所述的设备，其中所述至少一个参数是所述探测信号的幅度。
4.根据权利要求3所述的设备，其中当所述幅度高于一个阈值时，所述处理器被配置为指示所述头戴式受话器在耳上。
5.根据权利要求1至4中的任一项所述的设备，其中所述探测信号包括单音调。
6.根据权利要求1至4中的任一项所述的设备，其中所述探测信号包括经加权的多音调信号。
7.根据权利要求1至6中的任一项所述的设备，其中所述探测信号被限制至一个不可听频率范围。
8.根据权利要求1至7中的任一项所述的设备，其中所述探测信号被限制至小于典型的人类听力范围以下的阈值频率的一个频率范围。
9.根据权利要求1至8中的任一项所述的设备，其中所述探测信号随时间变化。
10.根据权利要求9所述的设备，其中所述探测信号响应于所述探测信号的频率范围内的周边噪声的水平改变而变化。
11.根据权利要求1至10中的任一项所述的设备，进一步包括降频转换器，该降频转换器被配置为在所述状态估计之前对所述麦克风信号进行降频转换，以降低所述状态估计所需要的计算负担。
12.根据权利要求1至11中的任一项所述的设备，其中所述处理器被配置为实施卡尔曼滤波器，以实现所述状态估计。
13.根据权利要求11所述的设备，其中由所述探测信号生成器所生成的所述探测信号的副本被传送至所述卡尔曼滤波器的预测模块。
14.根据权利要求1至13中的任一项所述的设备，包括判定设备模块，所述判定设备模块被配置为从所述至少一个参数生成所述头戴式受话器在耳上的第一概率以及所述头戴式受话器离耳的第二概率，且其中所述处理器被配置为使用所述第一概率和/或所述第二概率来确定所述头戴式受话器是否在耳上。
15.根据权利要求14所述的设备，其中所述判定设备模块将所述至少一个参数与一个上限阈值水平进行比较，以确定所述第一概率。
16.根据权利要求15所述的设备，其中所述状态估计产生对所述至少一个参数的逐样本估计，且其中基于帧来考虑所述估计，以确定所述头戴式受话器是否在耳上，每帧包括N个估计，且其中针对每帧，所述第一概率被计算为NON/N，其中NON是该帧中所述至少一个参数超过所述上限阈值的样本数目。
17.根据权利要求14至16中的任一项所述的设备，其中所述判定设备模块将所述至少一个参数与一个下限阈值水平进行比较，以确定所述第二概率。
18.根据权利要求17所述的设备，其中所述状态估计产生对所述至少一个参数的逐样本估计，且其中基于帧来考虑所述估计，以确定所述头戴式受话器是否在耳上，每帧包括N个估计，且其中针对每帧，所述第二概率被计算为NOFF/N，其中NOFF是该帧中所述至少一个参数小于所述下限阈值的样本数目。
19.根据权利要求14至18中的任一项所述的设备，其中所述判定设备模块被配置为由所述至少一个参数生成一个不确定性概率，所述不确定性概率反映关于所述头戴式受话器是在耳上还是离耳的不确定性，且其中所述处理器被配置为使用所述不确定性概率来确定所述头戴式受话器是否在耳上。
20.根据权利要求19所述的设备，其中所述状态估计产生对所述至少一个参数的逐样本估计，且其中基于帧来考虑所述估计，以确定所述头戴式受话器是否在耳上，每帧包括N个估计，且其中针对每帧，所述不确定性概率被计算为NUNC/N，其中NUNC是该帧中所述至少一个参数大于所述下限阈值且小于所述上限阈值的样本数目。
21.根据权利要求19或权利要求20所述的设备，其中所述处理器被配置为当所述不确定性概率超过一个不确定性阈值时，不改变关于所述头戴式受话器是否在耳上的先前确定。
22.根据权利要求1至21中的任一项所述的设备，其中做出关于所述头戴式受话器是否在耳上的确定的改变具有从离耳至耳上的第一判定时延，且具有从耳上至离耳的第二判定时延，所述第一判定时延小于所述第二判定时延，从而使所述确定偏向于耳上确定。
23.根据权利要求1至22中的任一项所述的设备，其中所述处理器被配置为使所述探测信号的水平动态地改变，以补偿变化的头戴式受话器堵塞。
24.根据权利要求23所述的设备，进一步包括用于接收来自所述头戴式受话器的捕获外部环境声音的参考麦克风的麦克风信号的输入，且其中所述处理器还被配置为对所述参考麦克风信号应用状态估计，以产生对所述探测信号的所述至少一个参数的第二估计，且其中所述处理器还被配置为将所述第二估计与该估计进行比较，以将周边噪声与耳上堵塞区分开。
25.一种用于头戴式受话器的耳上检测的方法，该方法包括：
生成用于来自扬声器的声学回放的探测信号；
接收来自麦克风的麦克风信号，所述麦克风信号包括在所述麦克风处所接收的所述探测信号的至少一部分；
对麦克风信号应用状态估计，以产生对所述麦克风信号中所包含的所述探测信号的所述部分的至少一个参数的估计，以及
由对所述至少一个参数的估计来确定所述头戴式受话器是否在耳上。
26.根据权利要求25所述的方法，其中确定所述头戴式受话器是否在耳上包括将经估计的参数与一个阈值进行比较。
27.根据权利要求25或权利要求26所述的方法，其中所述至少一个参数是所述探测信号的幅度。
28.根据权利要求27所述的方法，包括当所述幅度高于一个阈值时，指示所述头戴式受话器在耳上。
29.根据权利要求25至28中的任一项所述的方法，其中所述探测信号包括单音调。
30.根据权利要求25至28中的任一项所述的方法，其中所述探测信号包括经加权的多音调信号。
31.根据权利要求25至30中的任一项所述的方法，其中所述探测信号被限制至一个不可听频率范围。
32.根据权利要求25至31中的任一项所述的方法，其中所述探测信号被限制至小于典型的人类听力范围以下的阈值频率的一个频率范围。
33.根据权利要求25至32中的任一项所述的方法，其中所述探测信号随时间变化。
34.根据权利要求33所述的方法，其中所述探测信号响应于所述探测信号的频率范围内的周边噪声的水平改变而变化。
35.根据权利要求25至34中的任一项所述的方法，还包括在所述状态估计之前对所述麦克风信号进行降频转换，以降低所述状态估计所需要的计算负担。
36.根据权利要求25至35中的任一项所述的方法，其中通过卡尔曼滤波器实现应用状态估计。
37.根据权利要求35所述的方法，其中所述探测信号的副本被传送至所述卡尔曼滤波器的预测模块。
38.根据权利要求25至37中的任一项所述的方法，包括由所述至少一个参数生成所述头戴式受话器在耳上的第一概率以及所述头戴式受话器离耳的第二概率，以及使用所述第一概率和/或所述第二概率来确定所述头戴式受话器是否在耳上。
39.根据权利要求38所述的方法，包括将所述至少一个参数与一个上限阈值水平进行比较，从而确定所述第一概率。
40.根据权利要求39所述的方法，其中产生对所述至少一个参数的逐样本估计，且其中基于帧来考虑所述估计，以确定所述头戴式受话器是否在耳上，每帧包括N个估计，且其中针对每帧，第一概率被计算为NON/N，其中NON是该帧中所述至少一个参数超过所述上限阈值的样本数目。
41.根据权利要求38至40中的任一项所述的方法，进一步包括将所述至少一个参数与一个下限阈值水平进行比较，以确定所述第二概率。
42.根据权利要求41所述的方法，其中产生对所述至少一个参数的逐样本估计，且其中基于帧来考虑所述估计，以确定所述头戴式受话器是否在耳上，每帧包括N个估计，且其中针对每帧，所述第二概率被计算为NOFF/N，其中NOFF是该帧中所述至少一个参数小于所述下限阈值的样本数目。
43.根据权利要求38至42中的任一项所述的方法，还包括从所述至少一个参数生成一个不确定性概率，所述不确定性概率反映关于所述头戴式受话器是在耳上还是离耳的不确定性，且使用所述不确定性概率来确定所述头戴式受话器是否在耳上。
44.根据权利要求43所述的方法，其中所述状态估计产生对所述至少一个参数的逐样本估计，且其中基于帧来考虑所述估计，以确定所述头戴式受话器是否在耳上，每帧包括N个估计，且其中针对每帧，所述不确定性概率被计算为NUNC/N，其中NUNC是该帧中所述至少一个参数大于所述下限阈值且小于所述上限阈值的样本数目。
45.根据权利要求43或权利要求44所述的方法，其中当所述不确定性概率超过一个不确定性阈值时，不改变关于所述头戴式受话器是否在耳上的先前确定。
46.根据权利要求25至45中的任一项所述的方法，其中做出关于所述头戴式受话器是否在耳上的确定的改变具有从离耳至耳上的第一判定时延，且具有从耳上至离耳的第二判定时延，所述第一判定时延小于所述第二判定时延，从而使所述确定偏向于耳上确定。
47.根据权利要求25至46中的任一项所述的方法，其中使所述探测信号的水平动态地改变，从而补偿变化的头戴式受话器堵塞。
48.根据权利要求47所述的方法，进一步包括接收来自捕获外部环境声音的参考麦克风的麦克风信号，且进一步包括对所述参考麦克风信号应用状态估计，以产生对所述探测信号的所述至少一个参数的第二估计，且将所述第二估计与该估计进行比较，以将周边噪声和耳上堵塞区分开。
49.一种用于头戴式受话器的耳上检测的非暂时性计算机可读介质，所述非暂时性计算机可读介质包括指令，当由一个或多个处理器执行所述指令时，所述指令将导致执行以下操作：
生成用于来自扬声器的声学回放的探测信号；
接收来自麦克风的麦克风信号，所述麦克风信号包括在所述麦克风处所接收的所述探测信号的至少一部分；
对所述麦克风信号应用状态估计，以产生对所述麦克风信号中所包含的所述探测信号的所述部分的至少一个参数的估计，以及
由对所述至少一个参数的估计来确定所述头戴式受话器是否在耳上。
50.根据权利要求49所述的非暂时性计算机可读介质，还被配置为执行根据权利要求26至48中的任一项所述的方法。
51.一种用于头戴式受话器的耳上检测的***，该***包括处理器和存储器，所述存储器包含由处理器能执行的指令，且其中该***能操作以：
生成用于来自扬声器的声学回放的探测信号；
接收来自麦克风的麦克风信号，所述麦克风信号包括在所述麦克风处所接收的所述探测信号的至少一部分；
对所述麦克风信号应用状态估计，以产生对所述麦克风信号中所包含的所述探测信号的所述部分的至少一个参数的估计，以及
由对所述至少一个参数的估计来确定所述头戴式受话器是否在耳上。
52.根据权利要求51所述的***，其中所述***是头戴式受话器。
53.根据权利要求52所述的***，其中所述头戴式受话器是耳塞。
54.根据权利要求51所述的***，其中所述***是智能手机。
55.根据权利要求52-53中的任一项所述的***，其中误差麦克风被安装在所述头戴式受话器上，使得当佩戴所述头戴式受话器时，所述误差麦克风感测所述头戴式受话器与用户的鼓膜之间的空间内所出现的声音。
56.根据权利要求52、53和55中的任一项所述的***，其中参考麦克风被安装在所述头戴式受话器上，使得当佩戴所述头戴式受话器时，所述参考麦克风感测所述头戴式受话器的外部所出现的声音。
CN201880063689.9A 2017-10-10 2018-06-29 头戴式受话器耳上状态检测 Active CN111149369B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210286334.4A CN114466301A (zh) 2017-10-10 2018-06-29 头戴式受话器耳上状态检测

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201762570374P 2017-10-10 2017-10-10
US62/570,374 2017-10-10
PCT/GB2018/051836 WO2019073191A1 (en) 2017-10-10 2018-06-29 DETECTION OF THE GOOD PLACEMENT OF A HELMET ON THE EARS

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN202210286334.4A Division CN114466301A (zh) 2017-10-10 2018-06-29 头戴式受话器耳上状态检测

Publications (2)

Publication Number Publication Date
CN111149369A true CN111149369A (zh) 2020-05-12
CN111149369B CN111149369B (zh) 2022-05-31

Family

ID=62873496

Family Applications (2)

Application Number Title Priority Date Filing Date
CN202210286334.4A Pending CN114466301A (zh) 2017-10-10 2018-06-29 头戴式受话器耳上状态检测
CN201880063689.9A Active CN111149369B (zh) 2017-10-10 2018-06-29 头戴式受话器耳上状态检测

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN202210286334.4A Pending CN114466301A (zh) 2017-10-10 2018-06-29 头戴式受话器耳上状态检测

Country Status (5)

Country Link
US (2) US10812889B2 (zh)
KR (1) KR102470977B1 (zh)
CN (2) CN114466301A (zh)
GB (2) GB2581596B (zh)
WO (1) WO2019073191A1 (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113453112A (zh) * 2021-06-15 2021-09-28 台湾立讯精密有限公司 耳机及耳机状态检测方法
CN113825055A (zh) * 2020-06-20 2021-12-21 苹果公司 空间音频应用中的头部姿态跟踪的头部到头戴式受话器旋转变换估计
WO2022205635A1 (zh) * 2021-04-02 2022-10-06 歌尔股份有限公司 耳机佩戴状态的检测方法、装置、耳机及介质
WO2022247673A1 (zh) * 2021-05-27 2022-12-01 Oppo广东移动通信有限公司 检测方法、装置、耳机和计算机可读存储介质

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20190335267A1 (en) 2018-04-27 2019-10-31 Avnera Corporation Earbud operation during earbud insertion detection
WO2020014151A1 (en) * 2018-07-09 2020-01-16 Avnera Corporation Headphone off-ear detection
JP7028339B2 (ja) * 2018-12-19 2022-03-02 日本電気株式会社 情報処理装置、装着型機器、情報処理方法及び記憶媒体
KR102607566B1 (ko) * 2019-04-01 2023-11-30 삼성전자주식회사 음향 장치의 착용 감지 방법 및 이를 지원하는 음향 장치
CN112653956B (zh) * 2019-10-11 2023-07-14 Oppo广东移动通信有限公司 耳机盒、耳机装置、移动终端及无线耳机的充电方法
US11064282B1 (en) * 2020-04-24 2021-07-13 Bose Corporation Wearable audio system use position detection
US11122350B1 (en) * 2020-08-18 2021-09-14 Cirrus Logic, Inc. Method and apparatus for on ear detect
KR20220034530A (ko) * 2020-09-11 2022-03-18 삼성전자주식회사 소리를 출력하는 전자 장치와 이의 동작 방법
USD991904S1 (en) * 2021-06-08 2023-07-11 Bang & Olufsen A/S Headphones
TWI773382B (zh) * 2021-06-15 2022-08-01 台灣立訊精密有限公司 耳機及耳機狀態檢測方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090080670A1 (en) * 2007-09-24 2009-03-26 Sound Innovations Inc. In-Ear Digital Electronic Noise Cancelling and Communication Device
US20110158419A1 (en) * 2009-12-30 2011-06-30 Lalin Theverapperuma Adaptive digital noise canceller
CN103002373A (zh) * 2012-11-19 2013-03-27 青岛歌尔声学科技有限公司 一种耳机和一种检测耳机佩戴状态的方法
US20170013345A1 (en) * 2015-07-10 2017-01-12 Avnera Corporation Off-ear and on-ear headphone detection
CN106937196A (zh) * 2015-12-30 2017-07-07 Gn瑞声达A/S 头戴式听力设备

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7406179B2 (en) * 2003-04-01 2008-07-29 Sound Design Technologies, Ltd. System and method for detecting the insertion or removal of a hearing instrument from the ear canal
WO2008061260A2 (en) * 2006-11-18 2008-05-22 Personics Holdings Inc. Method and device for personalized hearing
CN103329566A (zh) * 2010-12-20 2013-09-25 峰力公司 用于房间中的语音增强的方法和***
JP5880340B2 (ja) * 2012-08-02 2016-03-09 ソニー株式会社 ヘッドホン装置、装着状態検出装置、装着状態検出方法
US9264823B2 (en) * 2012-09-28 2016-02-16 Apple Inc. Audio headset with automatic equalization
US9106989B2 (en) * 2013-03-13 2015-08-11 Cirrus Logic, Inc. Adaptive-noise canceling (ANC) effectiveness estimation and correction in a personal audio device
US20150124977A1 (en) * 2013-11-07 2015-05-07 Qualcomm Incorporated Headset in-use detector
CN104581485A (zh) * 2014-12-31 2015-04-29 周祥宇 一种遥感控制的耳机***及其命令的识别执行方法
EP3248393B1 (en) * 2015-01-22 2018-07-04 Sonova AG Hearing assistance system
US9946509B2 (en) * 2015-11-18 2018-04-17 Gaudio Lab, Inc. Apparatus and method for processing audio signal
CN106375576B (zh) * 2016-08-31 2019-08-20 维沃移动通信有限公司 一种音频通路控制方法及移动终端
CN110291581B (zh) * 2016-10-24 2023-11-03 爱浮诺亚股份有限公司 头戴耳机离耳检测
US9894452B1 (en) * 2017-02-24 2018-02-13 Bose Corporation Off-head detection of in-ear headset

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090080670A1 (en) * 2007-09-24 2009-03-26 Sound Innovations Inc. In-Ear Digital Electronic Noise Cancelling and Communication Device
US20110158419A1 (en) * 2009-12-30 2011-06-30 Lalin Theverapperuma Adaptive digital noise canceller
CN103002373A (zh) * 2012-11-19 2013-03-27 青岛歌尔声学科技有限公司 一种耳机和一种检测耳机佩戴状态的方法
US20170013345A1 (en) * 2015-07-10 2017-01-12 Avnera Corporation Off-ear and on-ear headphone detection
CN106937196A (zh) * 2015-12-30 2017-07-07 Gn瑞声达A/S 头戴式听力设备

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113825055A (zh) * 2020-06-20 2021-12-21 苹果公司 空间音频应用中的头部姿态跟踪的头部到头戴式受话器旋转变换估计
CN113825055B (zh) * 2020-06-20 2024-05-03 苹果公司 空间音频应用中的头部姿态跟踪的头部到头戴式受话器旋转变换估计
WO2022205635A1 (zh) * 2021-04-02 2022-10-06 歌尔股份有限公司 耳机佩戴状态的检测方法、装置、耳机及介质
WO2022247673A1 (zh) * 2021-05-27 2022-12-01 Oppo广东移动通信有限公司 检测方法、装置、耳机和计算机可读存储介质
CN113453112A (zh) * 2021-06-15 2021-09-28 台湾立讯精密有限公司 耳机及耳机状态检测方法

Also Published As

Publication number Publication date
CN114466301A (zh) 2022-05-10
GB2596953A (en) 2022-01-12
US11451898B2 (en) 2022-09-20
CN111149369B (zh) 2022-05-31
GB202004483D0 (en) 2020-05-13
GB2581596B (en) 2021-12-01
WO2019073191A1 (en) 2019-04-18
US20190110121A1 (en) 2019-04-11
GB202114555D0 (en) 2021-11-24
US20200389717A1 (en) 2020-12-10
GB2581596A (en) 2020-08-26
KR102470977B1 (ko) 2022-11-25
KR20200070290A (ko) 2020-06-17
GB2596953B (en) 2022-09-07
US10812889B2 (en) 2020-10-20

Similar Documents

Publication Publication Date Title
CN111149369B (zh) 头戴式受话器耳上状态检测
US11710473B2 (en) Method and device for acute sound detection and reproduction
US11614916B2 (en) User voice activity detection
US10951972B2 (en) Dynamic on ear headset detection
CN109196877B (zh) 个人声音设备的头上/头外检测
US10848887B2 (en) Blocked microphone detection
KR102578147B1 (ko) 통신 어셈블리에서의 사용자 음성 액티비티 검출을 위한 방법, 그것의 통신 어셈블리
EP4029007A1 (en) Active noise reduction audio devices and systems
US11638094B2 (en) Techniques for howling detection
CN115735362A (zh) 语音活动检测
CN115039415A (zh) 用于头戴式送受话器的耳上检测的***和方法
EP2701143A1 (en) Model selection of acoustic conditions for active noise control
US11533555B1 (en) Wearable audio device with enhanced voice pick-up
US20240055011A1 (en) Dynamic voice nullformer

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant