CN108781331A - 用于头戴式扬声器的音频增强 - Google Patents

用于头戴式扬声器的音频增强 Download PDF

Info

Publication number
CN108781331A
CN108781331A CN201780018587.0A CN201780018587A CN108781331A CN 108781331 A CN108781331 A CN 108781331A CN 201780018587 A CN201780018587 A CN 201780018587A CN 108781331 A CN108781331 A CN 108781331A
Authority
CN
China
Prior art keywords
sound channel
channel
frequency
generate
gain
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201780018587.0A
Other languages
English (en)
Other versions
CN108781331B (zh
Inventor
扎卡里·塞尔迪斯
詹姆斯·特蕾西
艾伦·克雷默
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Cloud Acceleration 360 Co
Boomcloud 360 Inc
Original Assignee
Cloud Acceleration 360 Co
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Cloud Acceleration 360 Co filed Critical Cloud Acceleration 360 Co
Publication of CN108781331A publication Critical patent/CN108781331A/zh
Application granted granted Critical
Publication of CN108781331B publication Critical patent/CN108781331B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00—Circuits for transducers, loudspeakers or microphones
    • H04R3/12—Circuits for transducers, loudspeakers or microphones for distributing signals to two or more loudspeakers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
    • H04S7/30—Control circuits for electronic adaptation of the sound field
    • H04S7/302—Electronic adaptation of stereophonic sound system to listener position or orientation
    • H04S7/303—Tracking of listener position or orientation
    • H04S7/304—For headphones
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00—Circuits for transducers, loudspeakers or microphones
    • H04R3/04—Circuits for transducers, loudspeakers or microphones for correcting frequency response
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00—Circuits for transducers, loudspeakers or microphones
    • H04R3/12—Circuits for transducers, loudspeakers or microphones for distributing signals to two or more loudspeakers
    • H04R3/14—Cross-over networks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R5/00—Stereophonic arrangements
    • H04R5/033—Headphones for stereophonic communication
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S1/00—Two-channel systems
    • H04S1/002—Non-adaptive circuits, e.g. manually adjustable or static, for enhancing the sound image or the spatial distribution
    • H04S1/005—For headphones
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S3/00—Systems employing more than two channels, e.g. quadraphonic
    • H04S3/008—Systems employing more than two channels, e.g. quadraphonic in which the audio signals are in digital form, i.e. employing more than two discrete digital channels
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S2400/00—Details of stereophonic systems covered by H04S but not provided for in its groups
    • H04S2400/13—Aspects of volume control, not necessarily automatic, in stereophonic sound systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S2420/00—Techniques used stereophonic systems covered by H04S but not provided for in its groups
    • H04S2420/07—Synergistic effects of band splitting and sub-band processing

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Otolaryngology (AREA)
  • Multimedia (AREA)
  • Stereophonic System (AREA)

Abstract

本文的实施方式主要在用于产生具有增强的空间可检测性和串扰模拟的声音的***、方法和非暂态计算机可读介质的背景下描述。音频处理***接收音频输入信号的左输入声道和右输入声道，并且执行音频处理以生成输出音频信号。该***通过对左输入声道和右输入声道的边侧子带分量和中间子带分量进行增益调整来生成左空间增强信号和右空间增强信号。音频处理***例如通过将滤波器和时间延迟应用于左输入声道和右输入声道来生成左串扰声道和右串扰声道，并且将空间增强声道与串扰声道进行混合。在一些实施方式中，该***包括根据输入声道导出的、可以与输出音频信号混合的高/低频增强声道和直通声道。

Description

用于头戴式扬声器的音频增强
技术领域
本公开内容的实施方式一般地涉及双声道和立体声音频信号处理领域，并且更特别地，涉及对用于在头戴式扬声器例如立体声耳机上再现的音频信号进行优化。
背景技术
立体声声音再现涉及使用两个或更多个换能器对包含声场的空间特性的信号进行编码和再现。立体声声音使收听者能够感知声场中的空间感。在典型的立体声声音再现***中，位于收听区域中的固定位置处的两个“现场”扬声器将立体声信号转换为声波。来自每个现场扬声器的声波通过空间朝向收听者的双耳传播，以产生从声场内的各个方向听到声音印象。
头戴式扬声器例如头戴式耳机或者入耳式耳机通常包括用于向左耳发出声音的专用左扬声器，以及用于向右耳发出声音的专用右扬声器。由头戴式扬声器生成的声波与由现场扬声器生成的声波不同地操作，并且收听者可以感知到这种差异。相同的输入立体声信号从头戴式扬声器输出和从现场扬声器输出时可能产生不同的收听体验，并且有时可能产生不太好的收听体验。
发明内容
音频处理***通过针对每个输出声道产生模拟的对侧串扰信号，并且将这些模拟的信号与空间增强的信号进行组合来适应性地产生用于再现的两个或更多个输出声道。音频处理***可以增强头戴式扬声器的收听体验，并且可以针对包括音乐、电影和游戏的各种内容有效地工作。音频处理***包括灵活的配置(例如，滤波器、增益和延迟)，该配置提供激动人心的声学上的令人满意的体验，特别是增强由收听者所体验的空间声场。例如，音频处理***可以向头戴式扬声器提供与通过现场扬声器收听立体声内容时所体验的声场相当的声场。
在一些实施方式中，音频处理***接收包括左输入声道和右输入声道的输入音频信号。使用左输入声道和右输入声道，音频处理***生成空间增强的左声道和空间增强的右声道、左串扰声道和右串扰声道、低频增强声道和高频增强声道、中间声道以及直通声道。音频处理***例如通过对声道应用不同的增益来混合所生成的声道以生成左输出声道和右输出声道。在一方面，音频处理***通过对作为现场扬声器的声波特性的特征的对侧信号分量进行模拟而改善了音频输入信号在输出至头戴式扬声器时的收听体验。模拟的对侧信号既考虑了由相对声道扬声器造成的额外延迟，也考虑了由收听者的头部和耳朵造成的滤波效果。针对相应的音频声道，过滤效果由用于头影效应的滤波器功能来提供。因此，改善了声场的空间感并且扩展了声场，从而为头戴式扬声器带来更愉快的收听体验。
空间增强声道还通过对左输入声道和右输入声道的边侧子带分量和中间子带分量进行增益调整来增强声场的空间感。低频声道和高频声道分别增强输入声道的低频分量和高频分量。中间声道和直通声道控制(例如，非空间增强的)输入音频信号对输出声道的贡献。
一些实施方式包括一种用于生成输出声道的方法，包括：接收包括左输入声道和右输入声道的输入音频信号；通过对左输入声道和右输入声道的边侧子带分量和中间子带分量进行增益调整来生成空间增强的左声道和空间增强的右声道；通过对左输入声道进行滤波和时间延迟来生成左串扰声道；通过对右输入声道进行滤波和时间延迟来生成右串扰声道；通过将空间增强的左声道与右串扰声道进行混合来生成左输出声道；通过将空间增强的右声道与左串扰声道进行组合来生成右输出声道。
一些实施方式包括一种音频处理***，包括：子带空间增强器，其被配置成通过对左输入声道和右输入声道的边侧子带分量和中间子带分量进行增益调整来生成空间增强的左声道和空间增强的右声道；串扰模拟器，其被配置成：通过对左输入声道进行滤波和时间延迟来生成左串扰声道；以及通过对右输入声道进行滤波和时间延迟来生成右串扰声道；以及混合器，其被配置成：通过将空间增强的左声道与右串扰声道进行混合来生成左输出声道；以及通过将空间增强的右声道与左串扰声道进行组合来生成右输出声道。
一些实施方式可以包括一种非暂态计算机可读介质，其被配置成存储程序代码，该程序代码包括当由处理器执行时使该处理器执行以下操作的指令：接收包括左输入声道和右输入声道的输入音频信号；通过对左输入声道和右输入声道的边侧子带分量和中间子带分量进行增益调整来生成空间增强的左声道和空间增强的右声道；通过对左输入声道进行滤波和时间延迟来生成左串扰声道；通过对右输入声道进行滤波和时间延迟来生成右串扰声道；通过将空间增强的左声道与右串扰声道进行混合来生成左输出声道；以及通过将空间增强的右声道与左串扰声道进行混合来生成右输出声道。
附图说明
图1示出了立体声音频再现***。
图2示出了根据一个实施方式的示例音频处理***。
图3A示出了根据一个实施方式的子带空间增强器的频带划分器。
图3B示出了根据一个实施方式的子带空间增强器的频带增强器。
图3C示出了根据一个实施方式的子带空间增强器的增强频带组合器。
图4示出了根据一个实施方式的子带组合器。
图5示出了根据一个实施方式的串扰模拟器。
图6示出了根据一个实施方式的直通。
图7示出了根据一个实施方式的高/低频增强器。
图8示出了根据一个实施方式的混合器。
图9示出了根据一个实施方式的对用于头戴式扬声器的音频信号进行优化的示例方法。
图10示出了根据一个实施方式的根据输入音频信号生成空间增强声道的方法。
图11示出了根据一个实施方式的根据音频输入信号生成串扰声道的方法。
图12示出了根据一个实施方式的根据音频输入信号生成左直通声道和右直通声道以及中间声道的方法
图13示出了根据一个实施方式的根据音频输入信号生成低频增强声道和高频增强声道的方法。
图14至18示出了根据一个实施方式的由音频处理***生成的声道信号的频率响应图的示例。
具体实施方式
说明书中描述的特征和优点并非包括一切，并且特别地，鉴于附图、说明书和权利要求书，许多附加特征和优点对于本领域普通技术人员而言将是明显的。此外，应当注意的是，说明书中使用的语言主要是出于可读性和指导的目的而选择的，并且可能未被选择以划出或限制本发明的主题。
附图(图)和以下描述仅通过说明的方式涉及优选实施方式。应当注意的是，根据以下讨论，在不偏离本发明的原理的情况下，本文所公开的结构和方法的替选实施方式将容易地被认识作为可以采用的可行的替选方案。
现在将详细参照本发明的若干实施方式，其示例在附图中示出。注意，在可行的情况下，可以在附图中使用相似或相同的附图标记，并且可以指示相似或相同的功能。附图仅出于说明的目的来描绘实施方式。本领域技术人员根据以下描述将容易地认识到，在不偏离本文所描述的原理的情况下，可以采用本文所示的结构和方法的替选实施方式。
示例音频处理***
参照图1，位于收听区域中的固定位置处的两个现场扬声器110A和110B将立体声信号转换为声波，该声波通过空间朝向收听者120传播以产生从声场内的各个方向(例如，假想声源160)听到声音的印象。
头戴式扬声器例如头戴式耳机或入耳式耳机包括用于向左耳125L发出声音的专用左扬声器130L和用于向右耳125R发出声音的专用右扬声器130R。因此，头戴式扬声器的信号再现以各种方式与现场扬声器110A和110B中的信号再现不同地操作。
与头戴式扬声器不同，例如，位于距收听者一定距离的扬声器110A和110B各自产生在收听者120的左耳125L和右耳125R二者处接收的“过耳”声波。右耳125R接收来自扬声器110A的信号分量112L的时间相对于左耳125L接收来自扬声器110A的信号分量118L的时间略微延迟。信号分量112L相对于信号分量118L的时间延迟是由与扬声器110A和左耳125L之间的距离相比的扬声器110A和右耳125R之间的较大距离引起的。类似地，左耳125L接收来自扬声器110B的信号分量112R的时间相对于右耳125R接收来自扬声器110B的信号分量118R的时间略微延迟。
头戴式扬声器发出靠近用户的耳朵的声波，因此产生较低的过耳声波传播或没有过耳声波传播，因此没有对侧分量。收听者120的每个耳朵从相应的扬声器接收同侧声音分量，而不从另一扬声器接收对侧串扰声音分量。因此，收听者120将通过头戴式扬声器感知不同的且通常较小的声场。
图2示出了根据一个实施方式的用于处理头戴式扬声器的音频信号的音频处理***200的示例。音频处理***200包括子带空间增强器210、串扰模拟器215、直通220、高/低频增强器225、混合器230以及子带组合器255。音频处理***200的部件可以在电子电路中实现。例如，硬件部件可以包括被配置成执行本文所公开的特定操作的专用电路或逻辑(例如，被配置成专用处理器，例如数字信号处理器(DSP)、现场可编程门阵列(FPGA)或者专用集成电路(ASIC))。
***200接收包括两个输入声道(左输入声道XL和右输入声道XR)的输入音频信号X。输入音频信号X可以是具有不同的左输入声道和右输入声道的立体声音频信号。使用输入音频信号X，该***生成包括两个输出声道OL、OR的输出音频信号O。如下面更详细讨论的，输出音频信号O是基于输入音频信号X的空间增强信号、模拟串扰信号、低/高频增强信号和/或其他处理输出的混合。当输出至头戴式扬声器280L和280R时，输出音频信号O例如在声场大小、空间声音控制和音调特性方面提供与较大现场扬声器***的收听体验相当的收听体验。
子带空间增强器210接收输入音频信号X，并且生成包括空间增强的左声道YL和空间增强的右声道YR的空间增强的信号Y。子带空间增强器210包括频带划分器240、频带增强器245和增强子带组合器250。频带划分器240接收左输入声道XL和右输入声道XR，并且将左输入声道XL划分成左子带分量EL(1)至EL(n)，以及将右输入声道XR划分成右子带分量ER(1)至ER(n)，其中，n是子带的数目(例如，4)。n个子带限定一组n个频带，其中，每个子带对应于该频带中的一个频带。
频带增强器245通过改变左子带分量EL(1)至EL(n)的中间子带分量与边侧子带分量之间的强度比，以及改变右子带分量ER(1)至ER(n)的中间子带分量与边侧子带分量之间的强度比来增强输入音频信号X的空间分量。针对每个频带，频带增强器根据相应的左子带分量和右子带分量(例如，EL(1)和ER(1))生成中间子带分量和边侧子带分量(例如，针对频带n＝1为Em(1)和Es(1))，将不同的增益应用于中间子带分量和边侧子带分量以生成增强的中间子带分量和增强的边侧子带分量(例如，Ym(1)和Ys(1))，然后将增强的中间子带分量和增强的边侧子带分量转换成左增强子带声道和右增强子带声道(例如，YL(1)和YR(1))。因此，频带增强器245生成增强的左子带声道YL(1)至YL(n)和增强的右子带声道YR(1)至YR(n)，其中，n是子带分量的数目。
增强子带组合器250根据增强的左子带声道YL(1)至YL(n)生成空间增强的左声道YL，并且根据增强的右子带声道YR(1)至YR(n)生成空间增强的右声道YR。
子带组合器255通过将左子带分量EL(1)至EL(n)进行组合来生成左子带混合声道EL，并且通过将右子带分量ER(1)至ER(n)进行组合来生成右子带混合声道ER。左子带混合声道EL和右子带混合声道ER用作串扰模拟器215、直通220和/或高/低频增强器225的输入。在一些实施方式中，子带频带组合器255与子带空间增强器210、串扰模拟器215、直通220或者高/低频增强器225中的一者集成在一起。例如，如果子带频带组合器255是串扰模拟器215的一部分，则串扰模拟器215可以向直通220和/或高/低频增强器225提供左子带混合声道EL和右子带混合声道ER。
在一些实施方式中，从***200中省略子带组合器255。例如，串扰模拟器215、直通220和/或高/低频增强器225可以接收和处理原始音频输入声道XL和XR，而不接收和处理子带混合声道EL和ER。
串扰模拟器215根据音频输入信号X生成“头影效应”。头影效应是指由收听者的头部周围和穿过收听者的头部的过耳波传播引起的声波的变换，例如如图1所示在音频输入信号X从扬声器110A和110B传输至收听者120的左耳125L和右耳125R中的每一个的情况下，该过耳波传播会被收听者感知到。例如，串扰模拟器215根据左声道EL生成左串扰声道CL、根据右声道ER生成右串扰声道CR。可以通过对左子带混合声道EL应用低通滤波器、延迟和增益来生成左串扰声道CL。可以通过对右子带混合声道ER应用低通滤波器、延迟和增益来生成右串扰声道CR。在一些实施方式中，可以使用低架滤波器或陷波滤波器而不是低通滤波器来生成左串扰声道CL和右串扰声道CR。
直通220通过将左子带混合声道EL与右子带混合声道ER加起来来生成中间(L+R)声道。中间声道表示左子带混合声道EL与右子带混合声道ER二者共有的音频数据。中间声道可以被分成左中间声道ML和右中间声道MR。直通220生成左直通声道PL和右直通声道PR。直通声道表示原始的左音频输入信号XL和右音频输入信号XR、或者由频带划分器245根据音频输入信号XL和XR生成的左子带混合声道EL和右子带混合声道ER。
高/低频增强器225根据音频输入信号X生成低频声道LFL和LFR以及高频声道HFL和HFR。低频声道和高频声道表示对音频输入信号X的频率相关增强。在一些实施方式中，频率相关增强的类型或质量可以由用户设置。
混合器230将子带空间增强器210、串扰模拟器215、直通220以及高/低频增强器225的输出进行组合以生成包括左输出信号OL和右输出信号OR的音频输出信号O。左输出信号OL被提供至左扬声器235L，并且右输出信号OR被提供至右扬声器235R。
由混合器230生成的输出信号O是来自子带空间增强器210、串扰模拟器215、直通220以及高/低频增强器225的输出的加权组合。例如，左输出声道OL包括空间增强的左声道YL、右串扰声道CR(例如，表示经由过耳声音传播由左耳听到的来自右扬声器的对侧信号)的组合，并且优选地还包括左中间声道ML、左直通声道PL、左低频声道LFL以及左高频声道HFL的组合。右输出声道OR包括空间增强的右声道YR、左串扰声道CL(例如，表示经由过耳声音传播由右耳听到的来自左扬声器的对侧信号)的组合，并且优选地还包括右中间声道MR、右直通声道PR、右低频声道LFR和右高频声道HFR的组合。输入至混合器230的信号的相对权重可以通过应用到每个输入的增益来控制。
子带空间增强器210、子带频带组合器255、串扰模拟器215、直通220、高/低频增强器225以及混合器230的详细示例实施方式在图3A至图8中示出，并且在下面进行更详细的讨论。
图3A示出了根据一个实施方式的子带空间增强器210的频带划分器240。频带划分器240针对所限定的n个频率子带k将左输入声道XL划分成左子带分量EL(k)，并且将右输入声道XR划分成右子带分量ER(k)。频带划分器240包括输入增益302和交叉网络304。输入增益302接收左输入声道XL和右输入声道XR，并且对左输入声道XL和右输入声道XR中的每一个应用预定义的增益。在一些实施方式中，对左输入声道XL和右输入声道XR中的每一个应用相同的增益。在一些实施方式中，输入增益302对输入音频信号X应用-2dB增益。在一些实施方式中，输入增益302与频带划分器240分开，或者从***200中省略，使得不对输入音频信号X应用增益。
交叉网络304从输入增益302接收输入音频信号X，并且将输入音频信号X划分成子带信号E(K)。交叉网络304可以使用以例如串联、并联、衍生中的各种电路拓扑的任一种拓扑布置的各种类型的滤波器，只要得到的输出形成用于连续子带的一组信号即可。包括在交叉网络304中的示例滤波器类型可以包括无限脉冲响应(IIR)或者有限脉冲响应(FIR)带通滤波器、IIR峰值和搁置滤波器、Linkwitz-Riley等。滤波器针对每个频率子带k将左输入声道XL划分成左子带分量EL(k)，并且将右输入声道XR划分成右子带分量ER(k)。在一种方法中，采用多个带通滤波器、或者采用低通滤波器、带通滤波器和高通滤波器的任何组合来近似人耳的临界频带的组合。临界频带对应于第二音调能够掩蔽现有主音调的带宽。例如，每个频率子带可以对应于一组统一的Bark标度临界频带。例如，交叉网络304将左输入声道XL划分成分别与0至300Hz(对应于Bark标度频带1至3)、300至510Hz(例如，Bark标度频带4至5)、510至2700Hz(例如，Bark标度频带6至15)以2700Hz至奈奎斯特频率(例如，Bark标度7至24)相对应的四个左子带分量EL(1)到EL(4)，并且类似地，针对相应的频带将右输入声道XR划分成右子带分量ER(1)到ER(4)。确定一组统一的临界频带的处理包括使用来自各种音乐类型的音频样本的语料库，并且从样本中确定24个Bark标度临界频带上的中间分量与边侧分量的长期平均能量比率。然后将具有类似长期平均比率的连续频带分组在一起以形成该组临界频带。在其他实现中，滤波器将左输入声道和右输入声道分成少于或多于四个子带。频带的范围可以是可调节的。针对k＝1至n，交叉网络304输出一对左子带分量EL(k)和右子带分量ER(k)，其中，n是子带的数目(例如，在图3A中n＝4)。
交叉网络304将左子带分量EL(1)至EL(n)和右子带分量EL(1)至EL(n)提供至子带空间增强器210的频带增强器245。如下面更详细讨论的，左子带分量EL(1)至EL(n)和右子带分量EL(1)至EL(n)也可以被提供至串扰模拟器215、直通220以及高/低频增强器225。
图3B示出了根据一个实施方式的子带空间增强器210的频带增强器245。频带增强器245根据左子带分量EL(1)至EL(n)和右子带分量EL(1)至EL(n)生成空间增强的左子带分量YL(1)至YL(n)和空间增强的右子带分量YR(1)至YR(n)。
针对每个子带k(其中k＝1至n)，频带增强器245包括L/R到M/S转换器320(k)、中间/边侧处理器330(k)以及M/S到L/R转换器340(k)。每个L/R到M/S转换器320(k)接收一对增强子带分量EL(k)和ER(k)，并且将这些输入转换成中间子带分量Em(k)和边侧子带分量Es(K)。中间子带分量Em(k)是与左子带分量EL(k)与右子带分量ER(k)之间的相关部分相对应的非空间子带分量，因此包括非空间信息。在一些实施方式中，中间子带分量Em(k)被计算为子带分量EL(k)与ER(k)之和。边侧子带分量Es(k)是与左子带分量EL(k)与右子带分量ER(k)之间的非相关部分相对应的非空间子带分量，因此包括空间信息。在一些实施方式中，边侧子带分量Es(k)被计算为左子带分量EL(k)与右子带分量ER(k)之间的差。在一个示例中，L/R到M/S转换器320根据以下等式获得频带k的非空间子带分量Em(k)和空间子带分量Es(k)：
Em(k)＝EL(k)+ER(k) 等式(1)
Es(k)＝EL(k)-ER(k) 等式(2)
针对每个子带k，中间/边侧处理器330(k)调整所接收的边侧子带分量Es(k)以生成增强空间的边侧子带分量Ys(k)，并且调整所接收的中间子带分量Em(k)以生成增强的中间子带分量Ym(k)。在一个实施方式中，中间/边侧处理器330(k)通过相应的增益系数Gm(k)调整中间子带分量Em(k)，并且通过相应的延迟函数Dm将放大后的非空间子带分量Gm(k)*Em(k)延迟以生成增强的中间子带分量Ym(k)。类似地，中间/边侧处理器330(k)通过相应的增益系数Gs(k)调整所接收的边侧子带分量Es(k)，并且通过相应的延迟函数Ds将放大后的空间子带分量Gs(k)*Xs(k)延迟以生成增强的边侧子带分量Ys(k)。增益系数和延迟量可以是可调节的。增益系数和延迟量可以根据扬声器参数来确定，或者可以针对一组假定参数值是固定的。频率子带k的中间/边侧处理器430(k)根据以下等式生成增强的中间子带分量Ym(k)和增强的边侧子带分量Ym(k)：
Ym(k)＝Gm(k)*Dm(Em(k),k) 等式(3)
Ys(k)＝Gs(k)*Ds(Es(k),k) 等式(4)
每个中间/边侧处理器330(k)将中间(非空间)子带分量Ym(k)和边侧(空间)子带分量Ys(k)输出至相应频带k的相应的M/S到L/R转换器340(k)。
下表1中列出了增益和延迟系数的示例。
表1.中间/边侧处理器的示例配置
在一些实施方式中，用于0至300Hz子带的中间/边侧处理器330(1)对中间子带分量Em(1)应用0.5dB增益，并且对边侧子带分量Es(1)应用4.5dB增益。用于300至510Hz子带的中间/边侧处理器330(2)对中间子带分量Em(2)应用0dB增益，并且对边侧子带分量Es(2)应用4dB增益。用于510至2700Hz子带的中间/边侧处理器330(3)对中间子带分量Em(3)应用0.5dB增益，并且对边侧子带分量Es(3)应用4.5dB增益。用于2700Hz至奈奎斯特频率子带的中间/边侧处理器330(4)对中间子带分量Em(4)应用0dB增益，并且对边侧子带分量Es(3)应用4dB增益。
每个M/S到L/R转换器340(k)接收增强的子带中间分量Ym(k)和增强的子带边侧分量Ys(k)，并且将它们转换成增强的左子带分量YL(k)和增强的右子带分量YR(k)。如果L/R到M/S转换器320(k)根据上面的等式(1)和等式(2)生成中间子带分量Em(k)和边侧子带分量Es(k)，则M/S到L/R转换器340(k)根据以下等式生成频率子带k的增强的左子带分量YL(k)和增强的右子带分量YR(k)：
YL(k)＝(Ym(k)+Ys(k))/2 等式(5)
YR(k)＝(Ym(k)-Ys(k))/2 等式(6)
在一些实施方式中，等式(1)和等式(2)中的EL(k)和ER(k)可以互换，在这种情况下，等式(5)和等式(6)中的YL(k)和YR(k)也互换。
图3C示出了根据一个实施方式的子带空间增强器210的增强子带组合器250。增强子带组合器250将来自M/S到L/R转换器340(1)至340(n)的(频带k＝1至n的)增强的左子带分量YL(1)至YL(n)进行组合以生成左空间增强音频声道YL，并且将来自M/S到L/R转换器340(1)至340(n)的(频带k＝1至n的)增强的右子带分量YR(1)至YL(n)进行组合以生成右空间增强音频声道YR。增强子带组合器250可以包括将增强的左子带分量YL(k)进行组合的左汇总352、将增强的右子带分量YR(k)进行组合的右汇总354，以及对左汇总352和右汇总354的输出应用增益的子带增益346。在一些实施方式中，子带增益356应用0dB增益。在一些实施方式中，根据以下等式，左汇总组合增强的左子带分量YL(k)，并且右汇总354组合增强的右子带分量YR(k)：
YL＝∑YL(k),针对k＝1至n 等式(7)
YR＝∑YR(k),针对k＝1至n 等式(8)
在一些实施方式中，增强子带组合器250将子带分量中间子带分量Ym(k)和边侧子带分量Ys(k)进行组合以生成组合的中间子带分量Ym和组合的边侧子带分量YS，然后每个声道应用单个M/S到L/R转换以由Ym和Ys生成YL和YR。中间/边侧增益应用于每个子带，并且可以以各种方式重新组合。
图4示出了根据一个实施方式的音频处理***200的子带组合器255。子带组合器255包括左汇总402和右汇总404。左汇总402将从频带划分器240输出的左子带分量EL(1)至EL(n)转换成子带混合左声道EL。右汇总404将从频带划分器240输出的右子带分量ER(1)至ER(n)组合成子带混合右声道ER。子带组合器255将子带混合左声道EL和子带混合右声道ER提供至串扰模拟器215、直通220以及高/低频增强器225。在一些实施方式中，作为子带混合左声道EL和子带混合右声道ER的替代，将原始音频输入声道XL和XR提供至串扰模拟器215、直通220以及高/低频增强器225。这里，子带组合器255可以从***200中省略。在另一示例中，子带组合器255可以将来自频带划分器240的子带混合左声道EL和子带混合右声道ER解码成原始输入声道XL和XR。在一些实施方式中，子带组合器255与串扰模拟器215或者***200的一些其他部件集成在一起。
图5示出了根据一个实施方式的音频处理***200的串扰模拟器215。串扰模拟器根据左子带混合声道EL和右子带混合声道ER生成左串扰声道CL和右串扰声道CR。当与最终输出信号O混合时，左串扰声道CL和右串扰声道CR将通过收听者的头部的模拟的过耳声波传播并入至输出信号O中。例如，左串扰声道CL表示可以(例如，通过混合器230)与右同侧声音分量(例如，空间增强的右声道YR)混合以生成右输出声道OR的对侧声音分量。右串扰声道CR表示可以与左同侧声音分量(例如，空间增强的右声道YL)混合以生成左输出声道OL的对侧声音分量。
串扰模拟器215生成对侧声音分量以输出至头戴式扬声器235L和235R，从而在头戴式扬声器235L和235R上提供类似扬声器的收听体验。返回至图5，串扰模拟器215包括：处理左子带混合声道EL的头影低通滤波器502和串扰延迟504；处理右子带混合声道ER的头影低通滤波器506和串扰延迟508；以及对串扰延迟504和串扰延迟508的输出应用增益的头影增益510。头影低通滤波器502接收左子带混合声道EL，并且应用模拟通过收听者的头部之后的信号的频率响应的调制。头影低通滤波器502的输出被提供至串扰延迟504，串扰延迟504对头影低通滤波器502的输出应用时间延迟。时间延迟表示对侧声音分量相对于同侧声音分量移位的过耳距离。可以基于经验试验来生成频率响应以确定收听者的头部的声波调制的频率相关特性。参见，例如，J.F.Yu，Y.S.Chen，“The Head Shadow Phenomenon Affectedby Sound Source:In Vitro Measurement”，应用力学与材料(Applied Mechanics andMaterials)，第284至287卷，第1715至1720页，2013年；Areti Andreopoulou，AgnieszkaRogińska，Hariharan Mohanraj，“Analysis of the Spectral Variations in RepeatedHead-Related Transfer Function Measurements,”第19届国际听觉显示会议(PRoceedings of the 19th International Conference on Auditory DisPLay(ICAD2013)).Lodz,Poland.2013年7月6日至2013年7月9日，国际听觉显示组织(International Community for Auditory DisPLay),2013。例如并且参照图1，可以通过使用表示来自过耳传播的声波调制的频率响应对同侧声音分量118L进行滤波和时间延迟来导出传播至右耳125R的对侧声音分量112L，该时间延迟模拟对侧声音分量112L(相对于同侧声音分量118R)行进至到达右耳125R所增加的距离。在一些实施方式中，在头影低通滤波器502之前应用串扰延迟504。
类似地，对于右子带混合声道ER，头影低通滤波器506接收右子带混合声道ER，并且应用模拟收听者的头部的频率响应的调制。头影低通滤波器506的输出被提供至串扰延迟508，串扰延迟508对头影低通滤波器504的输出应用时间延迟。在一些实施方式中，在头影低通滤波器506之前应用串扰延迟508。
头影增益510将对串扰延迟504的输出应用增益以生成左串扰声道CL，并且对串扰延迟506的输出应用增益以生成右串扰声道CR。
在一些实施方式中，头影低通滤波器502和头影低通滤波器506具有2023Hz的截止频率。串扰延迟504和串扰延迟508应用0.792毫秒的延迟。头影增益510应用-14.4dB增益。
图6示出了根据一个实施方式的音频处理***200的直通220。直通220根据音频输入信号X生成中间(L+R)声道M和直通声道P。例如，直通220根据左子带混合声道EL和右子带混合声道ER生成左中间声道ML和右中间声道MR，并且根据左子带混合声道EL和右子带混合声道ER生成左直通声道PL和右直通声道PR。
直通220包括L+R组合器602、L+R直通增益604以及L/R直通增益606。L+R组合器602接收左子带混合声道EL和右子带混合声道ER，并且将左子带混合声道EL与右子带混合声道ER相加以生成左子带混合声道EL和右子带混合声道ER共有的音频数据。L+R直通增益604向L+R组合器602的输出添加增益以生成左中间声道ML和右中间声道MR。中间声道ML和MR表示左子带混合声道EL和右子带混合声道ER共有的音频数据。在一些实施方式中，左中间声道ML与右中间声道MR相同。在另一示例中，L+R直通增益604对中间声道应用不同的增益以生成不同的左中间声道ML和右中间声道MR。
L/R直通增益606接收左子带混合声道EL和右子带混合声道ER，并且向子带混合声道EL添加增益以生成左直通声道PL，并且向右子带混合声道ER添加增益以生成右直通声道PR。在一些实施方式中，对左子带混合声道EL应用第一增益以生成左直通声道PL，并且对右子带混合声道ER应用第二增益以生成右直通声道PR，其中，第一增益和第二是不同的。在一些实施方式中，第一增益和第二增益是相同的。
在一些实施方式中，直通220接收并处理原始的音频输入信号XL和XR。这里，中间声道M表示左输入信号XL和右输入信号XR共有的音频数据，并且直通声道P表示原始的音频信号X(例如，未通过频带划分器240编码至频率子带中以及通过子带频带组合器255重新组合成左子带混合声道EL和右子带混合声道ER)。
在一些实施方式中，L+R直通增益604对L+R组合器602的输出应用-18dB增益。L/R直通增益606对左子带混合声道EL和右子带混合声道ER应用负无穷大dB增益。
图7示出了根据一个实施方式的音频处理***200的高/低频增强器225。高/低频增强器225根据左子带混合声道EL和右子带混合声道ER生成低频声道LFL和LFR，以及高频声道HFL和HFR。低频声道和高频声道表示对音频输入信号X的频率相关增强。
高/低频增强器225包括第一低频(LF)增强带通滤波器702、第二LF增强带通滤波器704、LF滤波器增益705、高频(HF)增强高通滤波器708和HF滤波器增益710。LF增强带通滤波器702接收左子带混合声道EL和右子带混合声道ER，并且应用对频带之外或频率扩展的信号分量进行衰减的调制，从而使得频带内的(例如，低频)信号分量能够通过。LF增强带通滤波器704接收LF增强带通滤波器704的输出，并且应用衰减频带外的信号分量的另一调制。
LF增强带通滤波器702和LF增强带通滤波器704提供用于低频增强的级联谐振器。在一些实施方式中，LF增强带通滤波器702和LF增强带通滤波器704具有58.175Hz的中心频率和可调整的质量(Q)因子。可以基于用户设置或编程配置来调整Q因子。例如，默认设置可以包括2.5的Q因子，而更积极的设置可以包括1.3的Q因子。谐振器被配置成表现出欠阻尼响应(Q>0.5)以增强低频内容的时间包络。
LF滤波器增益706对LF增强带通滤波器704的输出应用增益以生成左LF声道LFL和右LF声道LFR。在一些实施方式中，LF滤波器增益706对LF增强带通滤波器704的输出应用12dB增益。
HF增强高通滤波器708接收左子带混合声道EL和右子带混合声道ER，并且应用对具有频率低于截止频率的信号分量进行衰减的调制，从而使得具有高于截止频率的频率的信号分量能够通过。在一些实施方式中，HF增强高通滤波器708是具有4573Hz的截止频率的二阶巴特沃斯高通滤波器。
HF滤波器增益710对HF增强高通滤波器704的输出应用增益以生成左HF声道HFL和右HF声道HFR。在一些实施方式中，HF滤波器增益710对HF增强高通滤波器708的输出应用0dB增益。
图8示出了根据一个实施方式的音频处理***200的混合器230。混合器230基于来自子带空间增强器210、串扰模拟器215、直通220和高/低频增强器225的输出的加权组合来生成输出声道OL和OR。混合器230将左输出声道OL提供至左扬声器235L，并且将右输出信号OR提供至右扬声器235R。
混合器230包括左汇总802、右汇总804以及输出增益806。左汇总802接收来自子带空间增强器210的空间增强的左声道YL、来自串扰模拟器215的右串扰声道CR、来自直通220的左中间声道ML和左直通声道PL以及来自高/低频增强器225的左低频声道LFL和左高频声道HFL，并且左汇总802将这些声道进行组合。类似地，右汇总804接收来自子带空间增强器210的空间增强的左声道YR、来自串扰模拟器215的左串扰声道CL、来自直通220的右中间声道MR和右直通声道PR以及来自高/低频增强器225的右低频声道LFR和右高频声道HFR，并且右汇总804将这些声道进行组合。
输出增益806对左汇总802的输出应用增益以生成左输出声道OL，并且对右汇总804的输出应用增益以生成右输出声道OR。在一些实施方式中，输出增益806对左汇总802和右汇总804的输出应用0dB增益。在一些实施方式中，子带增益356、头影增益510、L+R直通增益604、L/R直通增益606、LF滤波器增益706和/或HF滤波器增益710与混合器230集成在一起。这里，混合器230控制输入声道对输出声道OL和OR贡献的相对权重。
图9示出了根据一个实施方式的对用于头戴式扬声器的音频信号进行优化的方法900。音频处理***200可以并行地执行步骤、以不同顺序执行步骤、或者执行不同的步骤。
***200接收905包括左输入声道XL和右输入声道XR的输入音频信号X。音频输入信号X可以是其中左输入声道XL和右输入声道XR彼此不同的立体声信号。
***200例如子带空间增强器210通过对左输入声道XL和右输入声道XR的边侧子带分量和中间子带分量进行增益调整来生成910空间增强的左声道YL和空间增强的右声道YR。空间增强的左声道YL和右声道YR通过改变从左输入声道XL和右输入声道XR导出的中间子带分量与边侧子带分量之间的强度比来改善声场中的空间感，如下面结合图10更详细地讨论的。
***200例如串扰模拟器215通过对左输入声道XL进行过滤和时间延迟来生成915左串扰声道CL，并且通过对右输入声道XR进行过滤和时间延迟来生成右串扰声道CR。串扰声道CL和CR模拟在例如如图1所示从扬声器输出左输入声道XL和右输入声道XR的情况下到达收听者的左输入声道XL和右输入声道XR的过耳、对侧串扰。生成串扰声道在下面结合图11进行更详细地讨论。
***200例如直通220根据左输入声道XL生成920左直通声道PL，根据右输入声道XR生成右直通声道PR。***200例如直通220通过将左输入声道XL与右输入声道XR进行组合来生成925左中间声道ML和右中间声道MR。直通声道可以用于控制未处理的输入声道X对输出声道O的相对贡献，以及中间声道可以用于控制左输入声道XL和右输入声道XR的共有音频数据的相对贡献。生成直通声道和中间声道在下面结合图12进行更详细地讨论。
***200例如高/低频增强器225通过对左输入声道XL和右输入声道XR应用级联谐振器来生成930左低频声道LFL和右低频声道LFR。低频声道LFL和LFR控制输入声道X的低频音频分量对输出声道O的相对增强。
***200例如高/低频增强器255通过对左输入声道XL和右输入声道XR应用高通滤波器来生成935左高频声道HFL和右高频声道HFR。高频声道HFL和HFR控制输入声道X的高频音频分量对输出声道O的相对增强。生成LF声道和HF声道在下面结合图13进行更详细地讨论。
***200例如混合器230生成940输出声道OL和输出声道OR。输出声道OL可以被提供至头戴式扬声器235L，并且右输出声道OR被提供至右扬声器235R。输出声道OL是根据来自子带空间增强器210的空间增强的左声道YL、来自串扰模拟器215的右串扰声道CR、来自直通220的左中间声道ML和左直通声道PL以及来自高/低频增强器225的左低频声道LFL和左高频声道HFL的加权组合生成的。输出声道OR是根据来自子带空间增强器210的空间增强的左声道YR、来自串扰模拟器215的左串扰声道CL、来自直通220的右中间声道MR和右直通声道PR以及来自高/低频增强器225的右低频声道LFR和右高频声道HFR的加权组合生成的。
混合器230的输入的相对权重可以通过如上所述的声道源处的增益滤波器例如输入增益302、子带增益356、头影增益510、L+R直通增益604、L/R直通增益606、LF滤波器增益706以及HF滤波器增益710来控制。例如，增益滤波器可以降低声道的信号幅度以降低该声道对输出声道O的贡献，或者增加信号幅度以增加该声道对输出声道O的贡献。在一些实施方式中，一个或更多个声道的信号幅度可以设置为0或者基本为0，从而导致该一个或更多个声道对输出声道O没有贡献。
在一些实施方式中，子带增益356应用-12至6dB增益，头影增益510应用负无穷大至0dB增益，LF滤波器增益706应用0至20dB增益，HF滤波器增益710应用0至20dB增益，L/R直通增益606应用负无穷大至0dB增益，以及L+R直通增益604应用负无穷大至0dB增益。增益的相对值可以是可调节的以提供不同的调节。在一些实施方式中，音频处理***使用预定义的增益值集。例如，子带增益356应用0dB增益，头影增益510应用-14.4dB增益，LF滤波器增益706应用12dB增益，HF滤波器增益710应用0dB增益，L/R直通增益606应用负无穷大dB增益，以及L+R直通增益604应用-18dB增益。
如上所述，方法900中的步骤可以以不同的顺序执行。在一个示例中，并行地执行步骤910至步骤935，使得输入声道Y、C、M、LF以及HF在基本相同的时间对于混合器230来说可用以用于组合。
图10示出了根据一个实施方式的根据输入音频信号X生成空间增强声道YL和YR的方法1000。方法1000可以例如通过***200的子带空间增强器210在方法900的910处执行。
子带空间增强器210例如频带划分器240的交叉网络304将输入声道XL划分1010成子带混合子带声道EL(1)至EL(n)，并且将输入声道XR划分成子带混合子带声道ER(1)至ER(n)。N是子带声道的预定义数目，并且在一些实施方式中，子带声道为分别与0至300Hz、300至510Hz、510至2700Hz以及2700Hz至奈奎斯特频率相对应的四个子带声道。如上所述，n个子带声道接近人耳的临界频带。n个子带声道是通过使用来自各种音乐类型的音频样本的语料库并且从样本中确定24个Bark标度临界频带上的中间分量与边侧分量的长期平均能量比而确定的一组统一的临界频带。然后将具有类似长期平均比率的连续频带分组在一起以形成n个临界频带的集合。
子带空间增强器210例如频带增强器245的L/R到M/S转换器320(k)针对每个子带k(其中k＝1至n)生成1020空间子带分量Es(k)和非空间子带分量Em(k)。例如，每个L/R到M/S转换器320(k)接收一对子带混合子带分量EL(k)和ER(k)，并且根据上面讨论的等式(1)和等式(2)将这些输入转换成中间子带分量Em(k)和边侧子带分量Es(k)。对于n＝4，L/R到M/S转换器320(1)至320(4)生成空间子带分量Es(1)、Es(2)、Es(3)和Es(4)，以及非空间子带分量Em(1)、Em(2)、Em(3)和Em(4)。
子带空间增强器210例如频带增强器245的中间/边侧处理器330(k)针对每个子带k生成1030增强空间子带分量Ys(k)和增强非空间子带分量Ym(k)。例如，每个中间/边侧处理器330(k)根据等式(3)通过应用增益Gm(k)和延迟函数D将中间子带分量Em(k)转换成增强空间子带分量Ym(k)。每个中间/边侧处理器330(k)根据等式(4)通过应用增益Gs(k)和延迟函数D将边侧子带分量Es(k)转换成增强空间子带分量Ys(k)。
在一些实施方式中，用于每个子带k的增益Gm(k)和Gs(k)的值是基于对来自音频样本的语料库例如来自各种音乐类型的子带k上的中间分量与边侧分量的长期平均能量比进行采样而初始确定的。在一些实施方式中，音频样本可以包括不同类型的音频内容，例如电影、电影和游戏。在另一示例中，可以使用已知包括期望空间特性的音频样本来执行采样。这些中间与边侧能量比用作计算用于中间子带分量Ym(k)和增强边侧子带分量Ys(k)的增益Gm和Gs的起点。然后如上所述通过关于大量音频样本的专家主观收听测试来限定最终的子带增益。在一些实施方式中，增益Gm和Gs以及延迟Dm和Ds可以根据扬声器参数来确定，或者针对假定的参数值集可以是固定的。
子带空间增强器210例如频带增强器245的M/S到L/R转换器340(k)针对每个子带k生成1040空间增强的左子带分量YL(k)和空间增强的右子带分量的YR(k)。每个M/S到L/R转换器340(k)接收增强的中间分量Ym(k)和增强的边侧分量Ys(k)，并且例如根据等式(5)和等式(6)将它们转换成空间增强的左子带分量YL(k)和空间增强的右子带分量YR(k)。这里，空间增强的左子带分量YL(k)是基于将增强的中间分量Ym(k)与增强的边侧分量Ys(k)相加而生成的，并且空间增强的右子带分量YR(k)是基于从增强的中间分量Ym(k)减去增强的边侧分量Ys(k)而生成的。对于n＝4个子带，M/S到L/R转换器340(1)至340(4)生成增强的左子带分量YL(1)至YL(4)和增强的右子带分量YR(1)至YR(4)。
子带空间增强器210例如增强子带组合器250通过组合增强的左子带分量YL(1)至YL(n)生成1050空间增强的左声道YL，并且通过组合增强的右子带分量YR(1)至YR(n)生成空间增强的右声道YR。可以基于如上所述的等式(5)和等式(6)执行这些组合。在一些实施方式中，增强子带组合器250还可以对空间增强的左声道YL和空间增强的左声道YR应用子带增益，其控制空间增强的左声道YL对左输出声道OL的贡献以及空间增强的右声道YR对右输出声道OR的贡献。在一些实施方式中，子带增益为0dB增益以用作基线水平，其中，本文讨论的其他增益相对于0dB增益进行设置。在一些实施方式中，例如当输入增益302不同于-2dB增益时，可以相应地调整子带增益(例如，达到用于空间增强的左声道YL和空间增强的左声道YR的期望基线水平)。
在各种实施方式中，方法1000中的步骤可以以不同的顺序执行。例如，可以组合子带k＝1至n的增强空间子带分量Ys(k)以生成Ys，以及可以组合子带k＝1至n的增强非空间子带分量Ym(k)以生成Ym。可以使用M/S到L/R转换将Ys和Ym转换成空间增强声道YL和YR。
图11示出了根据一个实施方式的根据音频输入信号生成串扰声道的方法1100。方法1100可以在方法900的915处执行。表示对侧串扰信号的串扰声道CL和CR是基于对同侧输入声道XL和XR应用滤波器和时间延迟生成的。
***200的子带频带组合器255通过组合子带混合子带声道EL(1)至EL(n)来生成1110子带混合左声道EL，并且通过组合子带混合子带声道ER(1)至ER(n)来生成1110子带混合右声道ER。左子带混合声道EL和右子带混合声道ER用作串扰模拟器215、直通220和/或高/低频增强器225的输入。在一些实施方式中，作为子带混合声道EL和ER的替代，串扰模拟器215、直通220和/或高/低频增强器225可以接收并处理原始的音频输入声道XL和XR。这里，不执行步骤1100，并且使用音频输入声道XL和XR执行方法1100的后续处理步骤。在一些实施方式中，子带频带组合器255将子带混合左子带声道EL(1)至EL(n)解码成左输入声道XL，并且将子带混合右子带声道ER(1)至ER(n)解码成右输入声道XR。
***200的串扰模拟器215对子带混合左声道EL应用1120第一低通滤波器。第一低通滤波器可以是串扰模拟器215的头影低通滤波器502，其应用对在通过收听者的头部之后信号的频率响应进行模拟的调制。如上所述，头影低通滤波器502可以具有2023Hz的截止频率，其中，子带混合左声道EL的超过截止频率的频率分量被衰减。***200的串扰模拟器215的其他实施方式可以采用低架滤波器或陷波滤波器用于头影低通滤波器。该滤波器可以具有2023Hz的截止/中心频率和0.5至1.0之间的Q以及-6dB至-24dB之间的增益。
串扰模拟器215对第一低通滤波器的输出应用1130第一串扰延迟。例如，交叉延迟504提供对如图1所示来自左扬声器110A的对侧声音分量112L相对于来自右扬声器110B的同侧声音分量118R行进至到达收听者120的右耳125R所增加的过耳距离(并且因此增加的行进时间)进行模拟的时间延迟。在一些实施方式中，交叉延迟504对经滤波的子带混合左声道EL应用0.792毫秒的串扰延迟。在一些实施方式中，步骤1120和1130被调换，使得在第一低通滤波器之前应用第一串扰延迟。
串扰模拟器215对子带混合右声道ER应用1140第二低通滤波器。第二低通滤波器可以是串扰模拟器215的头影低通滤波器506，其应用对信号在通过收听者的头部之后的频率响应进行模拟的调制。在一些实施方式中，头影低通滤波器506可以具有2023Hz的截止频率，其中，子带混合右声道ER的超过截止频率的频率分量被衰减。***200的串扰模拟器215的其他实施方式可以采用低架滤波器或陷波滤波器用于头影低通滤波器。该滤波器可以具有2023Hz的截止频率和0.5与1.0之间的Q以及-6dB与-24dB之间的增益。
串扰模拟器215对第二低通滤波器的输出应用1150第二串扰延迟。第二时间延迟对如图1所示的来自右扬声器110B的对侧声音分量112R相对于来自左扬声器110B的同侧声音分量118L行进至到达收听者120的左耳125L所增加的过耳距离进行模拟。在一些实施方式中，交叉延迟508对经滤波的子带混合左声道ER应用0.792毫秒的串扰延迟。在一些实施方式中，步骤1140和步骤1150被调换，使得在第二低通滤波器之前应用第二串扰延迟。
串扰模拟器215对第一串扰延迟的输出应用1160第一增益以生成左串扰声道CL。串扰模拟器215对第二串扰延迟的输出应用1170第二增益以生成右串扰声道CR。在一些实施方式中，头影增益510应用-14.4dB增益以生成左串扰声道CL和右串扰声道CR。
在各种实施方式中，方法1100中的步骤可以以不同的顺序执行。例如，步骤1120和步骤1130可以与步骤1140和步骤1150并行地执行以并行地处理左声道和右声道，并且并行地生成左串扰声道CL和右串扰声道CR。
图12示出了根据一个实施方式的根据音频输入信号生成左直通声道和右直通声道和中间声道的方法1200。方法1200可以在方法900的920和925处执行。直通声道控制非空间增强的输入声道X对输出声道O的贡献，并且中间声道控制非空间增强的左输入声道XL与非空间右输入声道XR的共有音频数据对输出声道O的贡献。
音频处理***200的直通220对子带混合左声道EL应用1210增益以生成直通声道PL，并且对子带混合右声道ER应用增益以生成直通声道PR。在一些实施方式中，直通220的L/R直通增益606对左子带混合声道EL和右子带混合声道ER应用负无穷大dB增益。这里，直通声道PL和PR被完全衰减并且对输出信号O没有贡献。可以调整增益水平以控制非空间增强输入信号对输出信号O贡献的量。
直通220将子带混合左声道EL与子带混合右声道ER进行组合1230以生成中间(L+R)声道。例如，直通220的L+R组合器602将左子带混合声道EL与右子带混合声道ER相加以生成具有左子带混合声道EL与右子带混合声道ER二者共有的音频数据的声道。
直通220对中间声道应用1240增益以生成左中间声道ML，并且对中间声道应用增益以生成右中间声道MR。在一些实施方式中，L+R直通增益604对L+R组合器602的输出应用-18dB增益以生成左中间声道ML和右中间声道MR。可以调整增益水平以控制非空间增强的中间输入信号对输出信号O贡献的量。在一些实施方式中，对中间声道应用单个增益，并且应用增益的中间声道被用于左中间声道ML和右中间声道MR。
在各种实施方式中，可以以不同的顺序执行方法1200中的步骤。例如，可以并行地执行步骤1210和步骤1230以并行地生成直通声道和中间声道。
图13示出了根据一个实施方式的根据音频输入信号生成低频增强声道和高频增强声道的方法1300。方法1300可以在方法900的930和935处执行。LF增强声道控制非空间增强的输入声道X的低频分量对输出声道O的贡献。HF增强声道控制非空间增强的输入声道X的高频分量对输出声道O的贡献。
音频处理***200的高/低频增强器225对子带混合左声道EL和子带混合右声道ER应用1310第一带通滤波器，并且对第一带通滤波器的输出应用第二带通滤波器。例如，LF增强带通滤波器702和LF增强带通滤波器704提供用于低频增强的级联谐振器。第一带通滤波器和第二带通滤波器的特征可以是可调整的，例如具有预定义Q因子和/或带通滤波器的中心频率的不同设置。在一些实施方式中，中心频率被设置为预定义水平(例如，58.175Hz)，并且Q因子是可调整的。在一些实施方式中，用户可以从用于带通滤波器的预定义设置集中进行选择。级联带通滤波器***选择性地增强通常通过现场扬声器***中的单独的低音炮处理、但是当在头戴式扬声器(即头戴式耳机)上呈现时通常没有充分表示的信号中的能量。四阶滤波器设计(即两个级联的二阶带通滤波器)在激励时表现出清晰的时间响应，为混音中的关键低频要素增加了“冲击”，例如低音鼓和低音吉他敲击，同时避免在使用二阶带通滤波器、低架滤波器或者峰值滤波器在低频频谱中的较宽频带上简单增加低频能量的情况下可能发生的整体“混浊”。
高/低频增强器225对第二带通滤波器的输出应用1320增益以生成低频声道LFL和LFR。例如，LF滤波器增益706对LF增强带通滤波器704的输出应用增益以生成左LF声道LFL和右LF声道LFR。LF滤波器增益706控制低频声道LFL和LFR对音频输出声道OL和OR的贡献。
高/低频增强器225对子带混合左声道EL和子带混合右声道ER应用1330高通滤波器。例如，HF增强高通滤波器708应用对具有低于HF增强高通滤波器708的截止频率的频率的信号分量进行衰减的调制。如上所述，HF增强高通滤波器708可以是具有4573Hz的截止频率的二阶巴特沃斯滤波器。在一些实施方式中，高通滤波器的特性是可调整的，例如截止频率和增益的不同设置被应用于高通滤波器的输出。通过增加这种高通滤波器实现的整体高频放大用于强调典型音乐信号中的有影响的音色、频谱和时间信息(例如诸如钹的高频打击乐器、声学空间响应的高频要素等)。此外，所述增强用于增加空间信号增强的感知效果，同时避免低频和中频非空间信号要素(通常是人声和低音吉他)中的过度着色。
高/低频增强器225对高通滤波器的输出应用1340增益以生成高频声道HFL和HFR。可以调整增益水平以控制高频声道HFL和HFR对音频输出声道OL和OR的贡献。在一些实施方式中，HF滤波器增益710对HF增强高通滤波器708的输出应用0dB增益。
在各种实施方式中，方法1300中的步骤可以以不同的顺序执行。例如，步骤1310和步骤1330可以与步骤1330和1340并行地执行，以并行地生成低频声道和高频声道。
图14示出了根据一个实施方式的音频声道的频率图1400。在图1400中，音频处理***200在默认设置下操作，其中，高/低频增强器225的级联谐振器(例如，LF增强带通滤波器702和LF增强带通滤波器704)具有58.175Hz的中心频率和2.5的Q因子。线1410是左输入声道XL上的白噪声的音频输入信号X的频率响应。线1420是在给定相同的XL白噪声输入信号的情况下，生成空间增强声道Y的子带空间增强器210的频率响应。线1430是在给定相同的XL白噪声输入信号的情况下，生成串扰声道C的串扰模拟器215的频率响应。线1440是在给定相同的XL白噪声输入信号的情况下生成低频声道LF和高频声道HF的高/低频增强器225的频率响应。L/R直通增益606在默认设置中被设置为负无穷大dB，从而消除直通声道P对输出信号O的贡献。
图15示出了根据一个实施方式的音频声道的频率图1500。线1510是左输入声道XL上的白噪声的音频输入信号X的频率响应。就像图1400中那样，高/低频增强器225的级联谐振器(例如，LF增强带通滤波器702和LF增强带通滤波器704)在默认设置下操作，其中，带通滤波器具有58.175Hz的中心频率和2.5的Q因子。线1520是在给定相同的XL白噪声输入信号的情况下，生成左输出声道OL的混合器230的频率响应。线1530是在给定相关的立体声白噪声输入信号(即，左信号和右信号相同)的情况下，生成左输出声道OL的混合器230的频率响应。线1540是在给定不相关的白噪声输入信号(即右声道是左声道的反相形式)的情况下，生成左输出声道OL的混合器230的频率响应。
图16示出了根据一个实施方式的声道信号的频率图1600。音频处理***200以增强设置操作，其中，高/低频增强器225的级联谐振器(例如，LF增强带通滤波器702和LF增强带通滤波器704)具有58.175Hz的中心频率和1.3的Q因子。线1610是左输入声道XL上的白噪声的音频输入信号X的频率响应。线1620是在给定相同的XL白噪声输入信号的情况下，生成空间增强声道Y的子带空间增强器210的频率响应。线1630是在给定相同的XL白噪声输入信号的情况下生成串扰声道C的串扰模拟器215的频率响应。线1640是在给定相同的XL白噪声输入信号的情况下，在增强设置下高/低频增强器225和直通230的组合频率响应。
图17示出了上面的线1640的各个分量。线1710是上面的低频增强的频率响应。线1720是上面的高频滤波器增强的频率响应。线1730是上面的直通220的频率响应。线1710、线1720和线1730表示针对在增强设置下操作的音频处理***200的图16中所示的线1640的组合滤波器响应的分量。
图18示出了根据一个实施方式的音频声道的频率图1800。音频处理***200在增强设置下操作。线1810是左输入声道XL上的白噪声的音频输入信号X的频率响应。线1820是在给定相同的XL白噪声输入信号的情况下，生成左输出声道OL的混合器230的频率响应。线1830是在给定相关的立体声白噪声输入信号(即，左信号和右信号相同)的情况下，生成左输出声道OL的混合器230的频率响应图。线1840是在给定不相关的白噪声输入信号(即右声道是左声道的反相形式)的情况下，生成左输出声道OL的混合器230的频率响应。
在阅读本公开内容后，本领域技术人员将通过本文所公开的原理理解另外的替选实施方案。因此，虽然已经示出和描述了特定实施方式和应用，但是应当理解的是，所公开的实施方式不限于本文所公开的精确构造和部件。在不偏离本文所描述的范围的情况下，可以对本文所公开的方法和装置的布置、操作和细节进行将对本领域技术人员而言明显的各种修改、改变和变化。
本文描述的任何步骤、操作或过程可以单独地或者与其他设备结合地执行或者使用一个或更多个硬件模块或软件模块实现。在一个实施方式中，软件模块使用包括含计算机程序代码的计算机可读介质(例如，非暂态计算机可读介质)的计算机程序产品实现，所述计算机程序代码可以由计算机处理器执行以用于执行所描述的步骤、操作或处理中的任一者或全部。

Claims (20)

1.一种方法，包括：
接收包括左输入声道和右输入声道的输入音频信号；
通过对所述左输入声道和所述右输入声道的边侧子带分量和中间子带分量进行增益调整来生成空间增强的左声道和空间增强的右声道；
通过对所述左输入声道进行滤波和时间延迟来生成左串扰声道；
通过对所述右输入声道进行滤波和时间延迟来生成右串扰声道；
通过将所述空间增强的左声道与所述右串扰声道进行混合来生成左输出声道；以及
通过将所述空间增强的右声道与所述左串扰声道进行混合来生成右输出声道。
2.根据权利要求1所述的方法，其中：
所述方法还包括通过以下操作来生成左低频声道和右低频声道：
对所述左输入声道和所述右输入声道应用第一带通滤波器；
对所述第一带通滤波器的输出应用第二带通滤波器；以及
对所述第二带通滤波器的输出应用增益；以及
生成所述左输出声道包括将所述空间增强的左声道、所述右串扰声道以及所述左低频声道进行混合；以及
生成所述右输出声道包括将所述空间增强的右声道、所述左串扰声道以及所述右低频声道进行混合。
3.根据权利要求2所述的方法，其中，所述第一带通滤波器和所述第二带通滤波器各自具有中心频率和可调整的质量(Q)因子。
4.根据权利要求1所述的方法，其中：
所述方法还包括通过以下操作生成左高频声道和右高频声道：
对所述左输入声道和所述右输入声道应用高通滤波器；以及
对所述高通滤波器的输出应用增益；以及
生成所述左输出声道包括将所述空间增强的左声道、所述右串扰声道以及所述左高频声道进行混合；以及
生成所述右输出声道包括将所述空间增强的右声道、所述左串扰声道和所述右高频声道进行混合。
5.根据权利要求4所述的方法，其中，所述高通滤波器是二阶巴特沃斯高通滤波器。
6.根据权利要求1所述的方法，其中：
所述方法还包括通过对所述左输入声道和所述右输入声道应用增益来生成左直通声道和右直通声道；
生成所述左输出声道包括将所述空间增强的左声道、所述右串扰声道以及所述左直通声道进行混合；以及
生成所述右输出声道包括将所述空间增强的右声道、所述左串扰声道以及所述右直通声道进行混合。
7.根据权利要求1所述的方法，其中：
所述方法还包括通过以下操作生成中间声道：
将所述左输入声道与所述右输入声道相加；以及
对相加的左输入声道和右输入声道应用增益；
生成所述左输出声道包括将所述空间增强的左声道、所述右串扰声道以及所述中间声道进行混合；以及
生成所述右输出声道包括将所述空间增强的右声道、所述左串扰声道以及所述中间声道进行混合。
8.根据权利要求1所述的方法，其中，通过对所述左输入声道和所述右输入声道的边侧子带分量和中间子带分量进行增益调整来生成所述空间增强的左声道和所述空间增强的右声道包括：
将所述左输入声道划分成左子带分量，所述左子带分量中的每一个对应于一组频带中的一个频带；
将右输入声道划分成右子带分量，所述右子带分量中的每一个对应于所述一组频带中的一个频带；
根据所述左子带分量和所述右子带分量生成所述中间子带分量和所述边侧子带分量；
相对于所述中间子带分量来调整所述边侧子带分量的增益；以及
将经增益调整的中间子带分量和边侧子带分量重新组合以生成所述左空间增强声道和所述右空间增强声道。
9.根据权利要求1所述的方法，其中：
生成所述空间增强的左声道和所述空间增强的右声道包括对所述左输入声道和所述右输入声道的边侧子带分量和中间子带分量应用第一增益；
生成所述左串扰声道包括对所述经滤波和时间延迟的左输入声道应用第二增益；
生成所述右串扰声道包括对所述经滤波和时间延迟的右输入声道应用所述第二增益；
所述方法还包括：
通过以下操作生成左低频声道和右低频声道：
对所述左输入声道和所述右输入声道应用第一带通滤波器；以及
对所述第一带通滤波器的输出应用第二带通滤波器；
对所述第二带通滤波器的输出应用第三增益；以及
通过以下操作生成左高频声道和右高频声道：
对所述左输入声道和所述右输入声道应用高通滤波器；以及
对所述高通滤波器的输出应用第四增益；
通过对所述左输入声道和所述右输入声道应用第五增益来生成左直通声道和右直通声道；
通过以下操作生成中间声道：
将所述左输入声道和所述右输入声道相加；以及
对相加的左输入声道和右输入声道应用第六增益；
生成所述左输出声道包括将所述空间增强的左声道、所述右串扰声道、所述左低频声道、所述左高频声道、所述左直通声道以及所述中间声道进行混合；以及
生成所述右输出声道包括将所述空间增强的右声道、所述左串扰声道、所述右低频声道、所述右高频声道、所述右直通声道以及所述中间声道进行混合。
10.根据权利要求9所述的方法，其中：
所述第一增益为-12至6dB增益；
所述第二增益为负无穷大至0dB增益；
所述第三增益为0至20dB增益；
所述第四增益为0至20dB增益；
所述第五增益为负无穷大至0dB增益；
所述第六增益为负无穷大至0dB增益。
11.一种音频处理***，包括：
子带空间增强器，其被配置成通过对左输入声道和右输入声道的边侧子带分量和中间子带分量进行增益调整来生成空间增强的左声道和空间增强的右声道；
串扰模拟器，其被配置成：
通过对所述左输入声道进行滤波和时间延迟来生成左串扰声道；以及
通过对所述右输入声道进行滤波和时间延迟来生成右串扰声道；以及
混合器，其被配置成：
通过将所述空间增强的左声道与所述右串扰声道进行混合来生成左输出声道；以及
通过将所述空间增强的右声道与所述左串扰声道进行混合来生成右输出声道。
12.根据权利要求11所述的***，其中：
所述***还包括频率增强器，其被配置成生成左低频声道和右低频声道，所述频率增强器包括：
第一带通滤波器，其被配置成对所述左输入声道和所述右输入声道进行滤波；以及
第二带通滤波器，其被配置成对所述第一带通滤波器的输出进行滤波；
低频滤波器增益，其用于对所述第二带通滤波器的输出应用增益；
被配置成生成所述左输出声道的所述混合器包括被配置成将所述空间增强的左声道、所述右串扰声道以及所述左低频声道进行混合的混合器；以及
被配置成生成所述右输出声道的所述混合器包括被配置成将所述空间增强的右声道、所述左串扰声道和所述右低频声道进行混合的混合器。
13.根据权利要求12所述的***，其中，所述第一带通滤波器和所述第二带通滤波器各自具有中心频率和可调整的质量(Q)因子。
14.根据权利要求11所述的***，其中：
所述***还包括：频率增强器，其被配置成生成左高频声道和右高频声道，所述频率增强器包括：
高通滤波器，其被配置成对所述左输入声道和所述右输入声道进行滤波；以及
高频滤波器增益，其用于对所述高通滤波器的输出应用增益；
被配置成生成所述左输出声道的所述混合器包括被配置成将所述空间增强的左声道、所述右串扰声道以及所述左高频声道进行混合的混合器；以及
被配置成生成所述右输出声道的所述混合器包括被配置成将所述空间增强的右声道、所述左串扰声道以及所述右高频声道进行混合的混合器。
15.根据权利要求14所述的***，其中，所述高通滤波器是二阶巴特沃斯高通滤波器。
16.根据权利要求11所述的***，其中：
所述***还包括直通，其被配置成生成左直通声道和右直通声道，所述直通包括被配置成对所述左输入声道和所述右输入声道应用增益的直通增益；
被配置成生成所述左输出声道的所述混合器包括被配置成将所述空间增强的左声道、所述右串扰声道以及所述左直通声道进行混合的混合器；以及
被配置成生成所述右输出声道的所述混合器包括被配置成将所述空间增强的右声道、所述左串扰声道以及所述右直通声道进行混合的混合器。
17.根据权利要求11所述的***，其中：
所述***还包括直通，其被配置成生成中间声道，所述直通包括：
组合器，其被配置成将所述左输入声道和所述右输入声道相加；以及
中间增益，其被配置成对相加的左输入声道和右输入声道应用增益；
被配置成生成所述左输出声道的所述混合器包括被配置成将所述空间增强的左声道、所述右串扰声道以及所述左中间声道进行混合的混合器；以及
被配置成生成所述右输出声道的所述混合器包括被配置成将所述空间增强的右声道、所述左串扰声道以及所述右中间声道进行混合的混合器。
18.根据权利要求11所述的***，其中，被配置成通过对所述左输入声道和所述右输入声道的边侧子带分量和中间子带分量进行增益调整来生成所述空间增强的左声道和所述空间增强的右声道的所述子带空间增强器包括所述子带空间增强器被配置成进行以下操作：
将所述左输入声道划分成左子带分量，所述左子带分量中的每一个对应于一组频带中的一个频带；
将所述右输入声道划分成右子带分量，所述右子带分量中的每一个对应于所述一组频带中的一个频带；
根据所述左子带分量和所述右子带分量生成所述中间子带分量和所述边侧子带分量；
相对于所述中间子带分量来调整所述边侧子带分量的增益；以及
将经增益调整的中间子带分量和边侧子带分量重新组合以生成所述左空间增强声道和所述右空间增强声道。
19.根据权利要求11所述的***，其中：
被配置成生成所述空间增强的左声道和所述空间增强的右声道的所述子带空间增强器包括被配置成对所述左输入声道和所述右输入声道的边侧子带分量和中间子带分量应用第一增益的子带空间增强器；
被配置成生成所述左串扰声道的所述串扰模拟器包括被配置成对所述经滤波和时间延迟的左输入声道应用第二增益的串扰模拟器；
被配置成生成所述右串扰声道的所述串扰模拟器包括被配置成对所述经滤波和时间延迟的右输入声道应用所述第二增益的串扰模拟器；
所述***还包括：
频率增强器，其被配置成生成左低频声道、右低频声道、左高频声道和右高频声道，所述频率增强器包括：
第一带通滤波器，其被配置成对所述左输入声道和所述右输入声道进行滤波；以及
第二带通滤波器，其被配置成对所述第一带通滤波器的输出进行滤波；
低频滤波器增益，其被配置成对所述第二带通滤波器的输出应用第三增益以生成所述左低频声道和所述右低频声道；
高通滤波器，其被配置成对所述左输入声道和所述右输入声道进行滤波；以及
高频滤波器增益，其被配置成对所述高通滤波器的输出应用第四增益以生成所述左高频声道和所述右高频声道；
直通，其被配置成生成左直通声道、右直通声道和中间声道，所述直通包括：
直通增益，其被配置成对所述左输入信号和所述右输入信号应用第五增益以生成所述左直通声道和所述右直通声道；
组合器，其被配置成将所述左输入声道和所述右输入声道相加；以及
中间增益，其被配置成对相加的左输入声道和右输入声道应用第六增益以生成所述左中间声道和所述右中间声道；
被配置成生成所述左输出声道的所述混合器包括被配置成将所述空间增强的左声道、所述右串扰声道、所述左低频声道、所述左高频声道、所述左直通声道以及所述中间声道进行混合的混合器；以及
被配置成生成所述右输出声道的所述混合器包括被配置成将所述空间增强的右声道、所述左串扰声道、所述右低频声道、所述右高频声道、所述右直通声道以及所述中间声道进行混合的混合器。
20.一种非暂态计算机可读介质，其被配置成存储程序代码，所述程序代码包括当由处理器执行时使所述处理器执行以下操作的指令：
接收包括左输入声道和右输入声道的输入音频信号；
通过增益调整所述左输入声道和所述右输入声道的边侧子带分量和中间子带分量来生成空间增强的左声道和空间增强的右声道；
通过对所述左输入声道进行滤波和时间延迟来生成左串扰声道；
通过对所述右输入声道进行滤波和时间延迟来生成右串扰声道；
通过将所述空间增强的左声道与所述右串扰声道进行混合来生成左输出声道；以及
通过将所述空间增强的右声道与所述左串扰声道进行混合来生成右输出声道。
CN201780018587.0A 2016-01-19 2017-01-12 用于头戴式扬声器的音频增强 Active CN108781331B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201662280121P 2016-01-19 2016-01-19
US62/280,121 2016-01-19
US201662388367P 2016-01-29 2016-01-29
US62/388,367 2016-01-29
PCT/US2017/013249 WO2017127286A1 (en) 2016-01-19 2017-01-12 Audio enhancement for head-mounted speakers

Publications (2)

Publication Number Publication Date
CN108781331A true CN108781331A (zh) 2018-11-09
CN108781331B CN108781331B (zh) 2020-11-06

Family

ID=59362451

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201780018587.0A Active CN108781331B (zh) 2016-01-19 2017-01-12 用于头戴式扬声器的音频增强

Country Status (11)

Country Link
US (1) US10009705B2 (zh)
EP (2) EP4307718A3 (zh)
JP (3) JP6546351B2 (zh)
KR (1) KR101858918B1 (zh)
CN (1) CN108781331B (zh)
AU (1) AU2017208916B2 (zh)
BR (1) BR112018014724B1 (zh)
CA (1) CA3011694C (zh)
NZ (1) NZ745422A (zh)
TW (1) TWI620171B (zh)
WO (1) WO2017127286A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111065020A (zh) * 2019-11-07 2020-04-24 华为终端有限公司 音频数据处理的方法和装置
CN112470218A (zh) * 2018-06-12 2021-03-09 奇跃公司 低频信道间相干性控制
WO2022088425A1 (zh) * 2020-10-28 2022-05-05 歌尔股份有限公司 音频组件的控制方法以及智能头戴设备

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10225657B2 (en) 2016-01-18 2019-03-05 Boomcloud 360, Inc. Subband spatial and crosstalk cancellation for audio reproduction
WO2018086701A1 (en) * 2016-11-11 2018-05-17 Huawei Technologies Co., Ltd. Apparatus and method for weighting stereo audio signals
US10499153B1 (en) * 2017-11-29 2019-12-03 Boomcloud 360, Inc. Enhanced virtual stereo reproduction for unmatched transaural loudspeaker systems
US10524078B2 (en) * 2017-11-29 2019-12-31 Boomcloud 360, Inc. Crosstalk cancellation b-chain
US10674266B2 (en) * 2017-12-15 2020-06-02 Boomcloud 360, Inc. Subband spatial processing and crosstalk processing system for conferencing
US10764704B2 (en) * 2018-03-22 2020-09-01 Boomcloud 360, Inc. Multi-channel subband spatial processing for loudspeakers
US10575116B2 (en) * 2018-06-20 2020-02-25 Lg Display Co., Ltd. Spectral defect compensation for crosstalk processing of spatial audio signals
US10715915B2 (en) * 2018-09-28 2020-07-14 Boomcloud 360, Inc. Spatial crosstalk processing for stereo signal
US10993061B2 (en) 2019-01-11 2021-04-27 Boomcloud 360, Inc. Soundstage-conserving audio channel summation
EP3928315A4 (en) * 2019-03-14 2022-11-30 Boomcloud 360, Inc. SPATIALLY SENSITIVE MULTIBAND COMPRESSION SYSTEM WITH PRIORITY
US11032644B2 (en) * 2019-10-10 2021-06-08 Boomcloud 360, Inc. Subband spatial and crosstalk processing using spectrally orthogonal audio components
US10841728B1 (en) 2019-10-10 2020-11-17 Boomcloud 360, Inc. Multi-channel crosstalk processing
KR102465792B1 (ko) * 2020-10-24 2022-11-09 엑스멤스 랩스 인코포레이티드 사운드 생성 디바이스

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101040565A (zh) * 2004-10-14 2007-09-19 杜比实验室特许公司 用于移动立体声内容的改善的头相关传递函数
US20090262947A1 (en) * 2008-04-16 2009-10-22 Erlendur Karlsson Apparatus and Method for Producing 3D Audio in Systems with Closely Spaced Speakers
CN1941073B (zh) * 2005-09-26 2010-10-13 三星电子株式会社 用于消除音频信号中的人声分量的设备和方法
WO2013181172A1 (en) * 2012-05-29 2013-12-05 Creative Technology Ltd Stereo widening over arbitrarily-configured loudspeakers
US20150036826A1 (en) * 2013-05-08 2015-02-05 Max Sound Corporation Stereo expander method
CN104519444A (zh) * 2013-10-07 2015-04-15 新唐科技股份有限公司 音频信号处理电路以及音频***

Family Cites Families (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE2244162C3 (de) * 1972-09-08 1981-02-26 Eugen Beyer Elektrotechnische Fabrik, 7100 Heilbronn «system
US4748669A (en) * 1986-03-27 1988-05-31 Hughes Aircraft Company Stereo enhancement system
FI113147B (fi) * 2000-09-29 2004-02-27 Nokia Corp Menetelmä ja signaalinkäsittelylaite stereosignaalien muuntamiseksi kuulokekuuntelua varten
US7003467B1 (en) * 2000-10-06 2006-02-21 Digital Theater Systems, Inc. Method of decoding two-channel matrix encoded audio to reconstruct multichannel audio
WO2003104924A2 (en) 2002-06-05 2003-12-18 Sonic Focus, Inc. Acoustical virtual reality engine and advanced techniques for enhancing delivered sound
JP2004023486A (ja) 2002-06-17 2004-01-22 Arnis Sound Technologies Co Ltd ヘッドホンによる再生音聴取における音像頭外定位方法、及び、そのための装置
FI118370B (fi) * 2002-11-22 2007-10-15 Nokia Corp Stereolaajennusverkon ulostulon ekvalisointi
JP4887420B2 (ja) 2006-03-13 2012-02-29 ドルビー ラボラトリーズ ライセンシング コーポレイション 中央チャンネルオーディオのレンダリング
US8619998B2 (en) 2006-08-07 2013-12-31 Creative Technology Ltd Spatial audio enhancement processing method and apparatus
KR101137359B1 (ko) 2006-09-14 2012-04-25 엘지전자 주식회사 다이알로그 증폭 기술
US8612237B2 (en) 2007-04-04 2013-12-17 Apple Inc. Method and apparatus for determining audio spatial quality
US8705748B2 (en) 2007-05-04 2014-04-22 Creative Technology Ltd Method for spatially processing multichannel signals, processing module, and virtual surround-sound systems
CN101884065B (zh) 2007-10-03 2013-07-10 创新科技有限公司 用于双耳再现和格式转换的空间音频分析和合成的方法
US9247369B2 (en) 2008-10-06 2016-01-26 Creative Technology Ltd Method for enlarging a location with optimal three-dimensional audio perception
TWI449442B (zh) * 2009-01-14 2014-08-11 Dolby Lab Licensing Corp 用於無回授之頻域主動矩陣解碼的方法與系統
US8705769B2 (en) * 2009-05-20 2014-04-22 Stmicroelectronics, Inc. Two-to-three channel upmix for center channel derivation
CN102598715B (zh) * 2009-06-22 2015-08-05 伊尔莱茵斯公司 光耦合骨传导设备、***及方法
JP5850216B2 (ja) 2010-04-13 2016-02-03 ソニー株式会社 信号処理装置および方法、符号化装置および方法、復号装置および方法、並びにプログラム
US9107021B2 (en) 2010-04-30 2015-08-11 Microsoft Technology Licensing, Llc Audio spatialization using reflective room model
US20110288860A1 (en) 2010-05-20 2011-11-24 Qualcomm Incorporated Systems, methods, apparatus, and computer-readable media for processing of speech signals using head-mounted microphone pair
US8660271B2 (en) 2010-10-20 2014-02-25 Dts Llc Stereo image widening system
KR101785379B1 (ko) 2010-12-31 2017-10-16 삼성전자주식회사 공간 음향에너지 분포 제어장치 및 방법
JP2013013042A (ja) 2011-06-02 2013-01-17 Denso Corp 立体音響装置
JP5772356B2 (ja) * 2011-08-02 2015-09-02 ヤマハ株式会社 音響特性制御装置及び電子楽器
EP2560161A1 (en) 2011-08-17 2013-02-20 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Optimal mixing matrices and usage of decorrelators in spatial audio processing
TW201532035A (zh) 2014-02-05 2015-08-16 Dolby Int Ab 預測式ｆｍ立體聲無線電雜訊降低

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101040565A (zh) * 2004-10-14 2007-09-19 杜比实验室特许公司 用于移动立体声内容的改善的头相关传递函数
CN1941073B (zh) * 2005-09-26 2010-10-13 三星电子株式会社 用于消除音频信号中的人声分量的设备和方法
US20090262947A1 (en) * 2008-04-16 2009-10-22 Erlendur Karlsson Apparatus and Method for Producing 3D Audio in Systems with Closely Spaced Speakers
WO2013181172A1 (en) * 2012-05-29 2013-12-05 Creative Technology Ltd Stereo widening over arbitrarily-configured loudspeakers
US20150036826A1 (en) * 2013-05-08 2015-02-05 Max Sound Corporation Stereo expander method
CN104519444A (zh) * 2013-10-07 2015-04-15 新唐科技股份有限公司 音频信号处理电路以及音频***

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112470218A (zh) * 2018-06-12 2021-03-09 奇跃公司 低频信道间相干性控制
CN112470218B (zh) * 2018-06-12 2024-06-21 奇跃公司 低频信道间相干性控制
CN111065020A (zh) * 2019-11-07 2020-04-24 华为终端有限公司 音频数据处理的方法和装置
WO2022088425A1 (zh) * 2020-10-28 2022-05-05 歌尔股份有限公司 音频组件的控制方法以及智能头戴设备

Also Published As

Publication number Publication date
BR112018014724A2 (pt) 2018-12-11
JP2019506803A (ja) 2019-03-07
CA3011694C (en) 2019-04-02
EP4307718A2 (en) 2024-01-17
EP3406085A1 (en) 2018-11-28
WO2017127286A1 (en) 2017-07-27
BR112018014724B1 (pt) 2020-11-24
JP2019193291A (ja) 2019-10-31
JP7378515B2 (ja) 2023-11-13
TWI620171B (zh) 2018-04-01
CA3011694A1 (en) 2017-07-27
AU2017208916A1 (en) 2018-09-06
NZ745422A (en) 2019-09-27
KR20170127570A (ko) 2017-11-21
JP6546351B2 (ja) 2019-07-17
US20170230777A1 (en) 2017-08-10
EP3406085B1 (en) 2024-05-01
EP4307718A3 (en) 2024-04-10
JP2022058913A (ja) 2022-04-12
AU2017208916B2 (en) 2019-01-31
US10009705B2 (en) 2018-06-26
CN108781331B (zh) 2020-11-06
TW201732782A (zh) 2017-09-16
EP3406085A4 (en) 2019-12-04
KR101858918B1 (ko) 2018-05-16

Similar Documents

Publication Publication Date Title
CN108781331A (zh) 用于头戴式扬声器的音频增强
US7519188B2 (en) Electroacoustical transducing
US7490044B2 (en) Audio signal processing
EP3340660B1 (en) Binaural filters for monophonic compatibility and loudspeaker compatibility
US11611828B2 (en) Systems and methods for improving audio virtualization
CN109565632B (zh) 有源监听耳机及其校准方法
CN109565633B (zh) 有源监听耳机及其双声道方法
CN109155895B (zh) 有源监听耳机及用于正则化其反演的方法
US20240056735A1 (en) Stereo headphone psychoacoustic sound localization system and method for reconstructing stereo psychoacoustic sound signals using same
JP2017126944A (ja) 音響装置、電子鍵盤楽器およびプログラム
Faller Upmixing and beamforming in professional audio

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant