CN107278376A - 在多个用户之间共享立体声的技术 - Google Patents
在多个用户之间共享立体声的技术 Download PDFInfo
- Publication number
- CN107278376A CN107278376A CN201680011668.3A CN201680011668A CN107278376A CN 107278376 A CN107278376 A CN 107278376A CN 201680011668 A CN201680011668 A CN 201680011668A CN 107278376 A CN107278376 A CN 107278376A
- Authority
- CN
- China
- Prior art keywords
- signal
- audio
- user
- source
- output
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000005516 engineering process Methods 0.000 title description 14
- 230000005236 sound signal Effects 0.000 claims description 72
- 238000000034 method Methods 0.000 claims description 45
- 230000003044 adaptive effect Effects 0.000 claims description 10
- 239000002131 composite material Substances 0.000 claims description 9
- 230000000694 effects Effects 0.000 claims description 7
- 238000012545 processing Methods 0.000 claims description 7
- 230000005611 electricity Effects 0.000 claims description 4
- 238000001914 filtration Methods 0.000 claims description 3
- 230000003595 spectral effect Effects 0.000 claims description 2
- 230000008030 elimination Effects 0.000 claims 4
- 238000003379 elimination reaction Methods 0.000 claims 4
- 230000008878 coupling Effects 0.000 claims 2
- 238000010168 coupling process Methods 0.000 claims 2
- 238000005859 coupling reaction Methods 0.000 claims 2
- 238000007781 pre-processing Methods 0.000 claims 1
- 230000006870 function Effects 0.000 description 11
- 238000004891 communication Methods 0.000 description 10
- 238000010586 diagram Methods 0.000 description 8
- 238000004590 computer program Methods 0.000 description 5
- 210000000988 bone and bone Anatomy 0.000 description 4
- 230000008901 benefit Effects 0.000 description 3
- 238000006243 chemical reaction Methods 0.000 description 3
- 240000006409 Acacia auriculiformis Species 0.000 description 2
- 230000009471 action Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 210000005069 ears Anatomy 0.000 description 2
- 238000000926 separation method Methods 0.000 description 2
- 238000012546 transfer Methods 0.000 description 2
- 241000272525 Anas platyrhynchos Species 0.000 description 1
- 241001269238 Data Species 0.000 description 1
- 241000196324 Embryophyta Species 0.000 description 1
- 241000209140 Triticum Species 0.000 description 1
- 235000021307 Triticum Nutrition 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000001427 coherent effect Effects 0.000 description 1
- 210000000613 ear canal Anatomy 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 210000004218 nerve net Anatomy 0.000 description 1
- 230000007935 neutral effect Effects 0.000 description 1
- 210000003733 optic disk Anatomy 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 238000002203 pretreatment Methods 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 230000000717 retained effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
- 230000010415 tropism Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R3/00—Circuits for transducers, loudspeakers or microphones
- H04R3/005—Circuits for transducers, loudspeakers or microphones for combining the signals of two or more microphones
-
- H—ELECTRICITY
- H03—ELECTRONIC CIRCUITRY
- H03G—CONTROL OF AMPLIFICATION
- H03G3/00—Gain control in amplifiers or frequency changers
- H03G3/20—Automatic control
- H03G3/30—Automatic control in amplifiers having semiconductor devices
- H03G3/32—Automatic control in amplifiers having semiconductor devices the control being dependent upon ambient noise level or sound level
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
- G10L21/0208—Noise filtering
-
- H—ELECTRICITY
- H03—ELECTRONIC CIRCUITRY
- H03G—CONTROL OF AMPLIFICATION
- H03G7/00—Volume compression or expansion in amplifiers
- H03G7/002—Volume compression or expansion in amplifiers in untuned or low-frequency amplifiers, e.g. audio amplifiers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R5/00—Stereophonic arrangements
- H04R5/02—Spatial or constructional arrangements of loudspeakers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R5/00—Stereophonic arrangements
- H04R5/033—Headphones for stereophonic communication
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
- G10L21/0208—Noise filtering
- G10L2021/02082—Noise filtering the noise being echo, reverberation of the speech
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R2420/00—Details of connection covered by H04R, not provided for in its groups
- H04R2420/03—Connection circuits to selectively connect loudspeakers or headphones to amplifiers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R2420/00—Details of connection covered by H04R, not provided for in its groups
- H04R2420/07—Applications of wireless loudspeakers or wireless microphones
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R27/00—Public address systems
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R3/00—Circuits for transducers, loudspeakers or microphones
- H04R3/02—Circuits for transducers, loudspeakers or microphones for preventing acoustic reaction, i.e. acoustic oscillatory feedback
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Signal Processing (AREA)
- Health & Medical Sciences (AREA)
- Multimedia (AREA)
- Otolaryngology (AREA)
- General Health & Medical Sciences (AREA)
- Computational Linguistics (AREA)
- Quality & Reliability (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Circuit For Audible Band Transducer (AREA)
- Stereophonic System (AREA)
- Headphones And Earphones (AREA)
Abstract
与第一用户相关联的第一数字信号处理器(DSP)经由第一耳机向所述第一用户输出音频，并且经由第一麦克风从所述第一用户捕获语音。类似地，与第二用户相关联的第二DSP经由第二耳机向所述第二用户输出音频，并且经由第二麦克风从所述第二用户捕获语音。所述第一DSP耦接到所述第二DSP，以便允许所述第一用户和所述第二用户分享音乐并彼此交流。所述第一用户可以对着所述第一麦克风讲话，并且所述第一DSP和所述第二DSP然后可以互操作以将所述语音输出给所述第二用户，而基本上不会中断向所述第二用户的音频输出。所述第一用户和所述第二用户中的每一个还可以在可分别耦接到所述第一DSP和所述第二DSP的所述第一音频源和所述第二音频源之间进行选择。
Description
相关申请的交叉引用
本申请要求于2015年2月27日提交的美国专利申请序列号14/634,687的权益，所述专利申请特此通过引用的方式并入本文。
技术领域
所公开的实施例总体地涉及音频装置，并且更具体地涉及用于在多个用户之间共享立体声的技术。
背景技术
常规的个人音频装置通常包括被配置为将音频信号输出到一组耳机的音频插孔。例如，MP3播放器可以包括3.5mm音频插孔，耳罩式耳机或入耳式耳塞可耦接到所述音频插孔。个人音频装置通常输出立体声音频信号，意味着这种装置的音频插孔同时输出与左声道相关联的左音频信号和与右声道相关联的右音频信号。当耳机耦接到音频插孔时，左侧耳机输出左音频信号，右侧耳机输出右音频信号。当用户佩戴该组耳机时，用户左耳听到左音频信号，右耳听到右音频信号。
保持上述左右方向性是重要的，因为音频经常在左声道和右声道之间声像。例如，当混合所述音频用于一段音乐时，音响师可以将某些乐器声向到左声道并将其他乐器声向到右声道。这种类型的声像可能反映了一种美学选择，旨在增加这段音乐的听觉体验。在另一示例中，当混合音频用于电影时，音响师可以在左声道和右声道之间声像某些声音效果，以使这些效果听起来从特定方向发出。例如，如果电影显示一个人物关闭电影屏幕右侧的门，则音响师可以将关门的声音效果声像到右声道。这种类型的声像是为了使电影的观看体验更加逼真。
当传统耳机佩戴在用户的左耳朵和右耳中时，这些耳机输出的音频的立体声性质得以保留。然而，由于种种原因，用户经常会彼此共享耳机。例如，两个朋友可能希望听同样的音乐，但只有一组耳机。一个常见的解决方案是一个朋友使用左耳机，而另一个朋友使用右耳机。在另一个例子中，假设一对夫妇希望在膝上型计算机上一起观看电影而不打扰别人。这对夫妇可以使用上述相同的解决方案，并将左耳机和右耳机在相应的左耳和右耳之间分开。
上述情况的一个问题是音频的立体声性质被破坏，因此每个用户仅体验到预期音频的一半。因此，每个用户可能仅体验到与给定音乐片段相关联的乐器的一部分，或仅听到与电影相关联的部分声音。在音频被完全声像到一侧的情况下，一个用户可以听到所有的声音，而另一个用户听不到任何声音。通常，以这种方式分割立体声严重地破坏了预期的用户体验。与分割立体声相关联的另一个问题是，尽管可能具有不同的音量偏好，两个用户都需要以相同的音量收听音频。
此外，在用户希望彼此共享音频并且实际上具有单独组耳机的情况下，可以采用输出两个单独的立体声信号的Y-分离器。使用Y-分离器方式，每个用户都佩戴输出立体声的不同的一组耳机。然而，在这些用户希望共享收听音频的体验的情况下，由于每个用户的耳朵都被耳机覆盖或***，因此这些用户不能彼此有效地交流。
如上所述，常规的耳机不能在不破坏某些音频信号的立体声性质的情况下在用户之间共享。依靠多个耳机的解决方案必然会使用户彼此隔离，由此破坏了共享收听体验的最初目的。因此，有用的是用于在多个用户之间共享立体声的技术，其允许这些用户之间的交流。
发明内容
所阐述的一个或多个实施例包括一种用于生成音频信号的计算机实现方法，所述方法包括从第一音频源接收第一信号、使与第一用户相关联的输出元件输出所述第一信号、从与第二用户相关联的输入元件接收第二信号、将所述第一信号与所述第二信号组合以产生组合信号并且使与所述第一用户相关联的所述输出元件输出所述组合信号。
所公开的实施例的至少一个优点是希望收听到相同立体声音频的两个用户可以这样做，而不会破坏该音频的立体声性质。此外，尽管左耳和右耳都被耳机占据，但是这些用户可以保持彼此的交流。
附图说明
为了能够详细地理解上文阐述的一个或多个实施方案的特征的方式，对上文简单概述的一个或多个实施例的更具体的描述可以通过参考某些特定实施例来进行，其中一些特定实施例示出于附图中。然而，应注意，附图仅示出了典型的实施例，因此本发明的范围也将不以任何方式被视为对其范围的限制，因为本发明的范围也包括其他的实施例。
图1示出了根据各种实施例的被配置为在用户之间共享音频和语音信号的***；
图2示出了根据各种实施例的图1的数字信号处理器(DSP)被配置为响应于语音信号而对音频信号进行闪避(duck)的实现方式；
图3示出了根据各种实施例的图1的DSP被配置为消除由麦克风反馈引起的回声的另一实现方式；
图4是根据各种实施例的用于在用户之间共享音频和语音信号的方法步骤的流程图；
图5示出了根据各种实施例的被配置为在用户之间选择性地共享多个音频源和语音信号的图1的***；
图6示出了根据各种实施例的图5的DSP被配置为在不同音频源之间进行选择的实现方式；
图7A至图7B示出了根据各种实施例的被配置为从不同源路由音频的图6的路由电路之一；
图8示出了根据各种实施例的图5的DSP被配置为在用户之间共享音频和语音信号时执行各种信号处理操作的另一实现方式；以及
图9是根据各种实施例的用于在与不同用户相关联的音频源之间进行选择的方法步骤的流程图。
具体实施方式
在下面的描述中，阐述了许多具体细节以提供对某些特定实施例的更彻底的理解。然而，对于本领域技术人员显而易见的是，可以在没有这些具体细节中的一个或多个或具有附加的具体细节的情况下实践其他实施例。
共享来自单个音频源的立体声音频信号
图1示出了根据各种实施例的被配置为在用户之间共享音频和语音信号的***。如图所示，***100包括数字信号处理器(DSP)110(A)和110(B)。DSP 110(A)和110(B)表示被配置为允许两个不同的用户收听相同立体声音频源的单元的类似实例，同时允许这些用户保持彼此的语言交流。图1提供了当耦接到单个音频源时DSP 110(A)和110(B)的总体概览。图2-4描述了当耦接到单个音频源时DSP 110(A)和110(B)的各种实施例的操作。图5提供了当耦接到多个音频源时DSP 110(A)和110(B)的概览。图6-9描述当耦接到多个音频源时DSP 110(A)和110(B)的各种实施例的操作。
在图1中，DSP 110(A)和110(B)耦接到音频源120，并经由通信链路130耦接在一起。DSP 110(A)和110(B)还分别耦接到耳机140(A)和140(B)，以及分别耦接到麦克风150(A)和150(B)。用户160(A)佩戴耳机140(A)和麦克风150(A)，而用户160(B)佩戴耳机140(B)和麦克风150(B)。
在下面的公开内容中，类似的元件的相似实例用类似的数字和不同的字母数字字符表示，这取决于这些元件与之相关联的特定用户。例如，但不限于，与用户160(A)相关联的每个元件在括号中使用“A”标记，而与用户160(B)相关联的每个元件在括号中用“B”标记。在括号中具有不同的字母数字部分的具有相似数字标签的元件可以反映相似元件的不同实例。
DSP 110(A)包括耦接到耳机140(A)的耳机输出112(A)，被示为“HP OUT”112(A)。DSP 110(A)还包括耦接到麦克风150(A)的麦克风输入，被示为“MIC IN”114(A)。此外，DSP110(A)包括耦接到音频源120的音频输入，被示为“AUDIO IN”116(A)。类似地，DSP 110(B)包括耦接到耳机140(B)的耳机输出112(B)，耦接到麦克风150(B)的麦克风输入114(B)，以及耦接到音频源120的音频输入116(B)。
DSP 110(A)被配置为经由音频输入116(A)从音频源120接收音频，然后经由耳机输出112(A)和耳机140(A)将该音频输出到用户160(A)。DSP110(A)还被配置为经由麦克风输入114(A)从麦克风150(A)接收语音信号，然后将这些语音信号发送到DSP 110(B)以输出给用户160(B)，由此允许用户160(A)与用户160(B)通话。以类似的方式，DSP 110(B)被配置为经由音频输入116(B)从音频源120接收音频，然后经由耳机输出112(B)和耳机140(B)将该音频输出给用户160(B)。DSP 110(B)还被配置为经由麦克风输入114(B)从麦克风150(B)接收语音信号，然后将这些语音信号发送到DSP110(A)以输出给用户160(A)，由此允许用户160(B)与用户160(A)通话。利用这种方法，当DSP 110(A)和110(B)经由通信链路130耦接在一起并且都耦接到音乐源120时，用户160(A)和160(B)都可以收听由音频源120提供的立体声音频，同时保留彼此口头交流的能力。
本领域技术人员应认识到，图1所示的各种元件可以通过各种各样的不同类型的硬件和/或软件来实现。例如但不限于，DSP 110(A)和110(B)中的每一个可以由执行信号处理应用的智能手机、被配置为执行包括微代码的固件的硬件、专用硬件单元等来实现。此外，但不限于，mp3播放器、立体声***、计算机***音频播放器等可以实现音频源120。另外，通信链路130可以是例如但不限于双向带状连接器或无线通信链路。耳机140(A)和140(B)可以是例如耳罩式耳机、入耳式耳塞、骨传导耳机等，但不限于此。麦克风150(A)和150(B)可以是传统的声学麦克风、骨传导麦克风或任何其他技术上可行的音频转换装置或输入元件，但不限于此。
此外，本领域技术人员还应理解，图1所示的各种元件可以根据各种不同架构彼此集成。例如但不限于，DSP 110(A)和110(B)可以分别集成到耳机140(A)和140(B)中，或者以所示的方式耦接到所述耳机。单个单元可以执行DSP 110(A)和110(B)的功能，或者那些DSP可以组合成单个DSP。DSP 110(A)和110(B)也可以集成到音频源120中，或者在使用多个音频源的情况下，如下面结合图5-9所述，每个这样的音频源可以包括DSP 110的不同实例，但不限于此。此外，麦克风150(A)和150(B)可分别集成到耳机140(A)和140(B)中，或者耦接到与那些耳机相关联的导线以及其他可能性，但不限于此。
图2示出了根据各种实施例的图1的DSP被配置为响应于语音信号而对音频信号进行闪避的实现方式。在图2中，麦克风150(A)和150(B)通常分别位于用户160(A)和160(B)的耳朵外部。例如但不限于，麦克风150(A)和150(B)可以分别与将耳机140(A)和140(B)耦接到DSP 110(A)和110(B))的线缆一起布置。本领域技术人员应理解，麦克风150(A)和150(B)的替代实现方式也落在本发明的范围内，如下面更详细描述的。
如图所示，DSP 110(A)-1包括闪避器200(A)、求和单元210(A)和语音提取器220(A)，并耦接到输出元件240(A)。语音提取器220(A)可以包括高通滤波器(HPF)、门、神经网络或被配置为从麦克风150(A)提取语音信号的任何其他技术上可行的电路的任何组合。输出元件240(A)可以是包括在图1所示的耳机140(A)内的扬声器。类似地，DSP 110(B)-1包括闪避器200(B)、求和单元210(B)和语音提取器220(B)，并且耦接到输出元件240(B)。语音提取器220(B)可以包括高通滤波器(HPF)、门、神经网络或被配置为从麦克风150(B)提取语音信号的任何其他技术上可行的电路的任何组合。输出元件240(B)可以是包括在图1所示的耳机140(B)内的扬声器。在某些实施例中，DSP 110(A)和110(B)分别集成到耳机140(A)和140(B)中。在这样的实施例中，输出元件240(A)和240(B)可以分别包括在DSP 110(A)和110(B)内或直接耦接到所述DSP。通信链路130包括被配置为将来自用户160(A)的语音传送到DSP 110(B)-1的子链路232(A)，被配置为将来自用户160(B)的语音传送到DSP 110(A)-1的子链路232(B)和被配置为将共享音频从音频源120传送到用户160(A)和160(B)的子链路234。
在操作中，音频源120经由闪避器200(A)和200(B)和求和单元210(A)和210(B)向输出元件240(A)和240(B)输出音频。闪避器200(A)和200(B)被配置为暂时中断从音频源120获得的音频的至少一部分，以便并入分别从麦克风150(B)和150(A)接收到的语音信号。
例如，当用户160(B)对着麦克风150(B)讲话时，语音提取器220(B)预处理由麦克风150(B)转换的语音信号，然后沿着连接232(B)将语音信号输出到闪避器200(A)。语音提取器220(B)通常减少与环境和用户160(B)相关联的杂散声音。闪避器200(A)然后暂时地闪避从音频源120接收到的一些或全部音频，以便适应该语音信号。在一个实施例中，闪避器200(A)是全频带闪避器。
在另一个实施例中，闪避器200(A)仅仅闪避音频信号的中间部分，以适应通常与语音信号相关联的中等范围频率。在另一个实施例中，辅助滤波器将语音信号分离成包括低范围频率、中等范围频率和高范围频率在内的频率上的不同范围，然后选择性地将音频信号中的某些频率与语音信号的这些不同频率范围的振幅成比例的闪避。在本公开的上下文中，低频范围信号可以包括低于400Hz的频率，中间范围信号可以包括在400Hz和4kHz之间的频率，高范围信号可以包括高于4kHz的频率。
求和单元210(A)然后将经闪避的音频信号与语音信号相结合，以输出给用户160(A)。由于闪避器200(A)基于语音信号中的对应频率降低了音频信号中的某些频率，如上所述，因此可以将经闪避的音频信号与语音信号安全地组合，而基本上不会引起相似频率之间的相干干扰。因此，用户160(A)可以从用户160(B)听到清晰的讲话，同时继续收听来自音频源120的音频。当用户160(A)对着麦克风150(A)讲话时，发生类似的过程，闪避器200(B)暂时地闪避从音频源120接收到的音频信号的至少一部分，以适应从用户160(A)接收到的语音信号。在某些实施例中，依据与麦克风150(A)和150(B)相关联的信噪比，可以省略闪避器200(A)和200(B)。
利用这种方法，用户160(A)和160(B)可以收听相同的立体声音频源并彼此交流，而没有该音频源和语音信号之间的干扰。再次，闪避器200(A)和200(B)被配置闪避来自音频源120的音频信号以减小通常与人类讲话相关联的频率的振幅，使得当用户160中的一个讲话时，与该讲话相关联的频率不会被过度干扰。
在麦克风150(A)和150(B))位于用户160(A)和160(B)的相应耳道内的情况下，视情况而定，如图2所示的DSP 110(A)和110(B)的实现方式可以分别在输出元件240(A)和240(B)以及麦克风150(A)和150(B)之间引入可能引起回声效应的反馈。例如，当用户160(B)对着麦克风150(B)讲话，并且输出元件240(A)随后输出包含该语音信号的音频信号时，麦克风150(A)可能拾取该音频信号然后将该信号发送回输出元件240(B)。当这种情况发生时，用户160(B)会听到刚刚对着麦克风150(B)的讲话的语音的延迟版本(即，回声)。当例如但不限于使用骨骼麦克风来实现麦克风150(A)和150(B)时，可能发生上述情况。为了减轻回声，DSP 110(A)和110(B)可以包括额外的电路，如下面结合图3描述的实施例所示。
图3示出了根据各种实施例的图1的DSP被配置为消除由麦克风反馈引起的回声的另一实现方式。在图3中，麦克风150(A)和150(B)通常分别位于用户160(A)和160(B)的耳道内部。例如但不限于，麦克风150(A)和150(B)可以是安置在耳机140(A)和140(B)内并且被配置为检测用户160(A)和160(B)的耳道内的振动的骨骼麦克风。本领域技术人员应理解，麦克风150(A)和150(B)的替代实现方式也落在本发明的范围内，如下面更详细描述的。
如图所示，DSP 110(A)-2和110(B)-2包括与图2所示的DSP 110(A)-1和110(B)-2相同的一些元件。DSP 110(A)-2现在还包括滤波器300(A)和自适应回声消除器310(A)，DSP110(B)-2现在同样地包括滤波器300(B)和自适应回声消除器310(B)。
滤波器300(A)和300(B)可以是自适应滤波器或频谱减法器。滤波器300(A)和300(B)被配置为分别从麦克风150(A)和150(B)转换的麦克风信号中减少或去除经闪避的音频信号。因此，在输出元件240(A)或240(B)的输出分别流入麦克风150(A)或150(B)的情况下，该输出可以被最小化。换句话说，滤波器300(A)减少由麦克风150(A)捕获的麦克风信号中的音频声音，使得用户160(B)主要听到来自用户160(A)的语音，而不是音乐。滤波器300(B)执行类似的功能。当麦克风150(A)和/或150(B)分别是可以更容易地拾取输出元件240(A)和/或240(B)的输出的骨传导麦克风时，该方法特别有用。
自适应回声消除器310(A)和310(B)彼此连接，使得自适应回声消除器310(A)的输出控制向自适应回声消除器310(B)的输入，并且自适应回声消除器310(B)的输出控制向自适应回声消除器310(A)的输入。利用这种配置，可以减少或消除输出元件240(A)和/或240(B)与麦克风150(A)和/或150(B)之间的反馈，由此减轻回声。例如但不限于，当用户160(B)对着麦克风150(B)讲话，并且输出元件240(A)然后将该语音信号输出到用户160(A)时，麦克风150(A)可能能够拾取该语音信号。然而，该相同的语音信号还驱动自适应回声消除器310(A)，其然后从麦克风150(A)的输出消除该语音信号。在一个实施例中，语音提取器220(A)和220(B)的输出还驱动闪避器200(A)和200(B)，使得在分别由麦克风150(B)和150(A)捕获的输入之前要从由音频源120输出的音频信号中消除的任何杂散音频信号(例如音乐，但不限于此)被并入该信号中。在本文所述的实施例中，闪避器200(A)和200(B)可以是被配置为在低、中和高范围内对音频进行闪避的全频带闪避器。
本领域技术人员应认识到，本文描述的配置可以适用于各种不同类型的硬件，包括例如但不限于声学扬声器和麦克风以及骨传导扬声器和麦克风。迄今为止描述的各种技术也在下面结合图4以逐步的方式描述。
图4是根据各种实施例的用于在用户之间共享音频和语音信号的方法步骤的流程图。尽管结合图1-3的***描述了方法步骤，但是本领域技术人员应理解，被配置为以任何顺序执行该方法步骤的任何***都在本发明的范围内。
实际上，DSP 110(A)或110(B)的某些实现方式可以执行下面讨论的特定方法步骤。例如但不限于，DSP 110(A)-1和110(B)-1和110(A)-2和110(B)-2可以执行步骤402、404、406、408和410。然而，由于只有DSP110(A)-2和110(B)-2分别包括滤波器300(A)和300(B)和自适应回声消除器310(A)和310(B)，因此只有那些DSP可以执行步骤412和414。本领域技术人员应认识到，某些方法步骤可应用于DSP 110(A)和110(B)的具体实现。另外，DSP110(A)和110(B)中的任何一个均可以执行下面描述的方法步骤，但为了简单起见，关于描述图4，所述方法步骤作为仅由DSP 110(A)执行来讨论。
如图所示，方法400从步骤402开始，其中DSP 110(A)从音频源120接收音频信号。音频源120可以是MP3播放器、立体声***输出、膝上型计算机音频输出等，但不限于此。
在步骤404，DSP 110(A)从DSP 110(B)接收由反映用户160(B)的语音的麦克风150(B)捕获的语音信号。麦克风150(B)可以是例如传统的空气传导麦克风、骨传导麦克风等，但不限于此。
在步骤406，闪避器200(A)基于在步骤404接收到的语音信号，闪避在步骤402中接收到的音频信号。闪避器200(A)可以在接收到语音信号的同时仅仅中断该音频信号，或者闪避器200(A)可以基于与该语音信号相关联的频率执行更复杂的闪避。例如，闪避器200(A)可以仅闪避与音频信号相关联的中等范围的频率，以便适应通常在语音信号中发现的中等范围频率，但不限于此。或者，辅助滤波器可以将该语音信号分离成包括低范围频率、中等范围频率和高范围频率在内的频率上的不同范围，然后基于这些不同频率范围的振幅选择性地对音频信号中的对应频率进行闪避。
在步骤408，求和单元210(A)将在步骤406生成的经闪避的音频信号与在步骤402接收到的音频信号组合，以生成组合音频信号。耳机140(A)内的输出元件240(A)将组合音频信号输出给用户160(A)。
在步骤410，麦克风150(A)接收来自用户160(A)的第二语音信号。麦克风150(A)可以是例如传统的空气传导麦克风、骨传导麦克风等，但不限于此。
在步骤412，滤波器300(A)处理第二语音信号以减少可能由耳机140(A)内的输出元件240(A)的渗漏引起的噪声和其他干扰。具体地说，在某些情况下，音频信号可能从输出元件240(A)行进到麦克风150(A)，从而可能引起干扰。然而，由于滤波器300(A)由该音频信号控制，因此滤波器300(A)可以减少与音频信号相关联的干扰。
在步骤414，自适应回声消除器310(A)处理该语音信号以减少可能已被引入该语音信号中的回声。当语音信号被输出到DSP 110(B)然后从输出元件240(B)行进经过麦克风150(B)，且然后返回到DSP 110(A)以输出给用户160(A)时，可能发生回声。在这种情况下，用户160(A)在说话时可能听到回声。自适应回声消除器310(A)可以减少或消除该潜在回声，因为向该回声消除器的输入由DSP 110(B)的输出驱动。因此，在发送到DSP 110(B)之前，从DSP 110(A)的输出中移除DSP 110(B)的输出。
如上所述，DSP 110(A)和110(B)的具体实施例可以被配置为执行方法400的部分或全部步骤。例如但不限于，由于DSP 110(A)-2和110(B)-2分别包括滤波器300(A)和300(B)，那些DSP可以执行步骤412。类似地，由于DSP 110(A)-2和110(B)-2分别包括自适应回声消除器310(A)和310(B)，因此那些DSP可以执行步骤414，但不限于此。通过实现本文描述的技术，DSP 110(A)和110(B)允许用户160(A)和160(B)彼此共享音乐和其他类型的音频，同时保留该音频的立体声性质。此外，上述技术还允许用户160(A)和160(B)保持彼此的言语交流，而不会在共享音频中引入不需要的噪声、反馈和其他类型的干扰。在一个实施例中，DSP 110(A)和110(B)分别向用户160(A)和160(B)提供独立的音量控制。
如下面结合图5-9更详细地描述，本质上与DSP 110(A)和110(B)类似的DSP的附加版本可以耦接到不同的音频源，从而允许每个用户160(A)和160(B)选择性地收听特定的音频源，同时仍然赋予上面结合图1-4所述的优点。
共享来自多个音频源的立体声音频信号
图5示出了根据各种实施例的被配置为在用户之间选择性地共享多个音频源和语音信号的图1的***。如图所示，***100包括与图1所示相同的一些元件。然而，***100现在包括分别耦接到不同音频源120(A)和120(B)的DSP 510(A)和510(B)。如下面结合图6-9更详细描述，DSP 510(A)和510(B)包括与图1-3的DSP 110(A)和110(B)相同的一些元件。然而，DSP 510(A)和510(B)还包括允许用户160(A)和160(B)共享音频源120(A)和120(B)的附加电路。
类似于DSP 110(A)和110(B)，DSP 510(A)和510(B)可以被实现为硬件和/或软件的任何组合，包括例如在计算装置上执行的应用、由微处理器执行的微代码等，但不限于此。此外，DSP 510(A)和510(B)中的每一个可以分别集成到耳机140(A)和140(B)中，或者分别集成到音乐源120(A)和120(B)中，但不限于此。音频源120(A)和120(B)中的每一个可以实现为mp3播放器、立体声***、计算机***音频输出等，但不限于此。音频源120(A)和120(B)可以相似或不同，但这些源中的每一个被配置为输出音频信号。
在操作中，DSP 510(A)经由音频输入116(A)从音频源120(A)接收音频信号，然后可以基于该音频信号经由耳机140(A)将音频输出给用户160(A)。在这样做时，DSP 510(A)可以实现以上结合图1-4所描述的技术中的任何技术。类似地，DSP 510(B)经由音频输入116(B)从音频源120(B)接收音频信号，然后可以基于该音频信号经由耳机140(B)将音频输出给用户160(B)。类似于DSP 510(A)，DSP 510(B)可以实现以上结合图1-4所描述的技术中的任何技术。
此外，DSP 510(A)和510(B)被配置为通过通信链路130共享从相应的音频源120(A)和120(B)接收到的音频信号。具体地，DSP 510(A)可以将通过通信链路130将从音频源120(A)接收到的音频信号输出到DSP 510(B)，从而允许用户160(B)收听到从音频源120(A)获得的音频。以类似的方式，DSP 510(B)可以通过通信链路130将从音频源120(B)接到收的音频信号输出到DSP 510(A)，从而允许用户160(A)收听到从音频源120(B)获得的音频。
如下面结合图6-7B所详细描述，DSP 510(A)和510(B)中的每一个包括路由电路，其选择性地路由来自耦接到其的特定音频源120(A)或120(B)或来自耦接到其的其他DSP的音频。利用这种方法，DSP 510(A)和510(B)可以链接在一起，从而允许用户160(A)和160(B)收听由这些用户之一提供的共享音频，或者收听不同的音频。此外，DSP 510(A)和510(B)还可以被配置为实现上面结合图1-4所描述的各种技术，由此允许用户160(A)和160(B)之间以最小的反馈、干扰等交流。本领域技术人员应理解，图1的DSP 110(A)和110(B)还可以包括才上描述并在下面更详细地描述的路由电路。然而，当DSP 110(A)和110(B)仅耦接到单个音频源时，如图1-3所示，这样的路由电路不一定允许以下面描述的方式进行选择性地路由。
图6示出了根据各种实施例的图5的DSP被配置为在不同音频源之间进行选择的实现方式。在图6中，麦克风150(A)和150(B)通常分别位于用户160(A)和160(B)的耳朵外部。例如但不限于，麦克风150(A)和150(B)可以分别与将耳机140(A)和140(B)耦接到DSP 110(A)和110(B))的线缆一起布置。本领域技术人员应理解，麦克风150(A)和150(B)的替代实现方式也落在本发明的范围内。
如图所示，DSP 510(A)-1和510(B)-1包括与图2所示的DSP 110(A)-1和110(B)-1相同的一些元件。DSP 510(A)-1还包括路由电路600(A)，并且DSP 510(B)-1现在类似地包括路由电路600(B)。
路由电路600(A)被配置为选择性地路由来自音频源120(A)或DSP 510(B)-1之一的音频，这取决于被配置为控制内部交换机的控制信号和一对多路复用器(mux)的状态。当该控制信号为低电平并且开关因此闭合时，路由电路600(A)经由该一对多路复用器将来自音频源120(A)的音频信号路由到输出元件240(A)，并还通过子链路234将该音频信号输出到DSP 510(B)-1。当该控制信号为高电平并且开关因此打开时，路由电路600(A)经由子链路234和一对多路复用器从DSP 510(B)-1接收音频信号，以经由输出元件240(A)输出给用户160(A)。
类似于路由电路600(A)，路由电路600(B)被配置为根据类似的控制信号和类似的一对多路复用器的状态来选择性地路由来自音频源120(B)或DSP 510(A)-1之一的音频。当该控制信号为低电平(开关闭合)时，路由电路600(B)经由一对多路复用器将来自音频源120(B)的音频信号路由到输出元件240(B)，并还通过子链路234将该音频信号输出到DSP510(A)-1。当该控制信号为高电平(开关断开)时，路由电路600(B)经由子链路234和一对多路复用器从DSP 510(A)-1接收音频信号，以经由输出元件240(B)输出给用户160(B)。
通常，路由电路600(A)和600(B)以类似的方式操作。为了示例的目的，图7A-7B分别示出了当控制信号为低电平以及当该控制信号为高电平时的路由电路600(A)。本领域技术人员应认识到，结合这些图描述的功能也可应用于路由电路600(B)。
图7A示出了根据各种实施例的被配置为路由来自音频源120(A)的音频信号的图6的路由电路600(A)。如图所示，路由电路600(A)包括耦接到多路复用器710(A)和多路复用器720(A)的开关700(A)。多路复用器710(A)和720(A)都耦接到音频源120(A)。多路复用器710(A)耦接到子链路234，并且多路复用器720(A)耦接到闪避器200(A)(此处未示出)。控制信号C选择开关700(A)的状态以及多路复用器710(A)和720(A)的状态。
当控制信号C为零时，如图所示，开关700(A)闭合，并且多路复用器710(A)和720(A)中的每一个选择下部通路。因此，来自音频源120(A)的音频信号沿着路径730(A)行进到闪避器200(A)，以经由输出元件240(A)输出给用户160(A)。该音频信号还经由子链路234沿着路径740(A)行进到DSP 510(B)-1，以经由输出元件140(B)输出给用户160(B)。在这种配置中，DSP 510(A)-1与DSP 510(B)-1共享来自音频源120(A)的音频用于输出给用户160(B)，同时还向用户160(A)输出该音频。
图7B示出了根据各种实施例的被配置成路由从音频源120(B)获得的音频信号的路由电路600(A)。当控制信号C为1时，如图所示，开关700(A)打开，并且多路复用器710(A)和720(A)中的每一个选择上部通路。因此，可以经由子链路234从DSP 510(B)-1接收音频信号。通常该音频信号源自音频源120(B)。所接收到的音频信号然后沿着路径750(A)行进到闪避器200(A)，以经由输出元件240(A)输出给用户160(A)。在该配置中，音频源120(A)被绕过，并且DSP 510(A)-1从音频源120(B)接收音频。
总体地参考图6-7B，与路由电路600(A)和600(B)相关联的控制信号共同具有四个不同的状态，但通常仅使用这些状态中的三个状态。在第一状态下，路由电路600(A)被配置为C＝0，路由电路600(B)被配置为C＝1，从而允许用户160(A)收听到音频源120(A)并与用户160(B)共享该音频源。在第二状态下，路由电路600(A)被配置为C＝1，路由电路600(B)被配置为C＝0，从而允许用户160(B)收听到音频源120(B)并与用户160(A)共享该音频源。在第三状态下，路由电路600(A)被配置为C＝0，路由电路600(B)被配置为C＝0，从而允许用户160(A)和160(B)分别收听到音频源120(A)和120(B)。在较不常用的第四状态下，路由电路600(A)和600(B)都可以被配置为C＝1，但在这种配置中，两个用户都不从音频源120(A)或120(B)接收音频。然而，可以实现该状态以允许用户之间的交流，而不引入来自那些音频源120的音频。
路由电路600(A)和600(B)中的控制信号的状态可以由用户160(A)和160(B)直接控制，或者可以经由耦接到那些路由电路的控制电路来控制，如以下结合图8详细说明的。用户160(A)和160(B)可以例如但不限于手动按下按钮来完成所需的音乐路由，或者，上述控制电路可以基于哪个音频源120(A)或120(B)当前是活动的来确定适当的路由。特别地，如果只有音频源120(A)或120(B)中的一个当前是活动的，则控制电路可以配置路由电路600(A)和600(B)内的控制信号，以仅路由来自该音频源的音频。结合图6-7B描述的切换技术也可以与上面结合图3描述的滤波技术组合，以产生下面结合图8描述的DSP 510(A)和510(B)的又一个实施例。
图8示出了根据各种实施例的图5的DSP被配置为在用户之间共享音频和语音信号时执行各种信号处理操作的另一实现方式。在图8中，麦克风150(A)和150(B)通常分别位于用户160(A)和160(B)的耳道内部。例如但不限于，麦克风150(A)和150(B)可以是安置在耳机140(A)和140(B)内并且被配置为检测用户160(A)和160(B)的耳道内的振动的骨骼麦克风。本领域技术人员将理解，麦克风150(A)和150(B)的替代实现方式也落在本发明的范围内。
如图所示，DSP 510(A)-2和510(B)-2分别包括图3所示的DSP 110(A)-2和110(B)-2的元件，并且分别包括图6所示的DSP 510(A)-1和510(B)-1的路由电路600(A)和600(B)。
DSP 510(A)-2和510(B)-2还包括分别耦接到路由电路600(A)和600(B)以及音频源120(A)和120(A)的控制电路800(A)和800(B)。控制电路800(A)和800(B)可以是硬件或软件单元，或其组合。控制电路800(A)和800(B)被配置为基于音频源120(A)和120(B)的状态来调整路由电路600(A)和600(B)内的开关和多路复用器的状态。在一个实施例中，控制电路800(A)和800(B)可以是被配置为检测哪个音频源120(A)和/或120(B)是活动状态的信号检测器。
在操作中，控制电路800(A)和800(B)可以设定与路由电路600(A)和600(B)相关联的控制信号的状态，使得音频被以特定的方式路由到每个用户160(A)和160(B)。例如但不限于，如果只有一个音频源120是活动的，则控制电路800(A)和800(B)可以互操作以设定这些控制信号以将来自活动音频源的音频路由到用户160(A)和160(B)。或者，如果两个音频源120都是活动的，则控制电路800(A)和800(B)可以允许手动配置控制信号，由此允许用户160(A)和160(B)独立地选择所需的音频源。
类似于DSP 110(A)和110(B)，DSP 510(A)-2和510(B)-2凭借闪避器200(A)和200(B)允许用户160(A)和160(B)分别经由麦克风150(A)和150(B)交流，而不干扰从音频源120(A)和120(B)获得的音频。闪避器200(A)和200(B)可以被配置为闪避一些或所有音频。在本文所述的实施例中，闪避器200(A)和200(B)可以是被配置为在低、中和高范围内对音频进行闪避的全频带闪避器。DSP 510(A)-2和510(B)-2还包括被配置为减少干扰的滤波器300(A)和300(B)以及用于在这种交流期间减少回声的自适应回声消除器310(A)和310(B)，如前所述。此外，DSP 510(A)-2和510(B)-2经由路由电路600(A)和600(B)允许用户160(A)和160(B)在音频源120(A)和120(B)之间选择，如上所述。简而言之，DSP 510(A)-2和510(B)-2组合了结合图1-7B所描述的DSP 110(A)和110(B)以及510(A)和510(B)的不同实施例的各种特征和功能。图9以逐步的方式讨论了DSP 510(A)-2和510(B)-2的功能。
图9是根据各种实施例的用于在与不同用户相关联的音频源之间进行选择的方法步骤的流程图。尽管结合图1-3和图5-8的***描述了方法步骤，但是本领域技术人员应将理解，被配置为以任何顺序执行该方法步骤的任何***都在本发明的范围内。
在实践中，DSP 510(A)-2或510(B)-2之一可以执行下面讨论的所有或一些方法步骤。然而，为了简化针对图9的描述，该方法步骤被讨论为由DSP 510(A)-2执行。
如图所示，方法900在步骤902开始，其中控制电路800(A)确定是否音频源120(A)和120(B)中仅有一个是活动的。控制电路800(A)可以是耦接到音频源120(A)并被配置为确定音频源120(A)的状态的信号检测器。为了确定音频源120(B)是否是活动的，控制电路800(A)还可以耦接到音频源120(B)或被配置为与控制电路800(B)互操作。
如果在步骤902，控制电路800(A)确定有且仅有一个音频源120是活动的，则方法900进行到步骤904。在步骤904，控制电路800(A)设定控制信号C，以便能够路由来自所述活动音频源的音频信号。如果音频源120(A)是活动的，并且音频源120(B)是不活动的，则控制电路800(A)设定C＝0，由此关闭路由电路600(A)内的开关700(A)并经由多路复用器710(A)和710(B)将音频源120(A)耦接到输出元件240(A)。或者，如果音频源120(B)是活动的，并且音频源120(A)是不活动的，则控制电路800(A)设定C＝1，由此打开路由电路600(A)内的开关700(A)并经由多路复用器710(A)和720(B)将音频源120(B)耦接到输出元件240(A)。控制电路800(B)以与控制电路800(A)类似的方式操作，并且因此在音频源120(B)是活动的情况下，控制电路800(B)配置类似的控制信号以使得能够沿着子链路234进行路由。方法900然后进行到步骤910。
在步骤910，DSP 510(A)-2执行各种闪避、滤波和回声消除，以便在输出给用户160(A)和160(B)之前处理音频和语音信号。一般来说，在步骤910，DSP 510(A)-2可以执行上面结合图1-4所描述的技术中的任何技术。
返回到步骤902，如果控制电路800(A)确定音频源120都不是活动的，或者确定多于一个音频源是活动的，则该方法进行到步骤906。在步骤906，控制电路800(A)确定音频源120是否都是活动的。如果音频源都不是活动的，则方法900重复直到音频源120中的一个或两个变为活动。否则，方法900进行到步骤908。
在步骤908，控制电路800(A)使得路由电路600(A)根据控制信号C路由来自音频源120(A)或120(B)之一的音频。控制信号C在音频源120(A)或120(B)之间进行选择。方法900然后进行到步骤910并如上所述进行。
通过实现方法900，DSP 510(A)-2和510(B)-2允许用户160(A)和160(B)在不同的立体声音频源之间进行选择，由此进一步扩展了这些DSP的功能。由于DSP 510(A)-2和510(B)-2包括与结合图1-3所描述的相似的信号处理硬件，那些DSP可以实现用户160(A)和160(B)之间的高质量交流，减少干扰、噪声、回波等。本领域技术人员应认识到，本文描述的DSP110(A)、510(A)、110(B)和510(B)的不同实现方式可以被链接在一起以实现某些功能。例如，DSP 110(A)-1可以链接到DSP 510(B)-2以允许用户160(A)和160(B)之间的交流，并且使得能够在用户之间共享音乐。通常，本文描述的DSP的任何技术上可行的链接都落在所公开的实施例的范围内。
总之，与第一用户相关联的第一数字信号处理器(DSP)经由第一组耳机向第一用户输出音频，并且经由第一麦克风从第一用户捕获语音。类似地，与第二用户相关联的第二DSP经由第二组耳机向第二用户输出音频，并且经由第二麦克风从第二用户捕获语音。第一DSP耦接到第二DSP，以便允许第一用户和第二用户分享音乐并彼此交流。第一用户可以对着第一麦克风讲话，并且第一DSP和第二DSP然后可以互操作以将该语音输出给第二用户，而基本上不会中断向第二用户的音频输出。两个DSP还互操作，以减少可能由反馈引起的干扰和回声。第一用户和第二用户中的每一个可以在耦接到第一DSP的第一音频源和耦接到第二DSP的第二音频源之间进行选择。
所公开的实施例的至少一个优点是希望收听到相同立体声音频的两个用户可以这样做，而不会破坏该音频的立体声性质。此外，尽管左耳和右耳都被耳机遮挡，但是这些用户可以保持彼此交流。此外，可以减少由反馈引起的干扰和回声，由此促进积极的用户体验，而不会扰乱声音。最后，两个用户还可以在不同的音频源之间进行选择，从而允许用户在保持彼此交流的同时收听相同的音频或收听不同的音频。
已经出于说明的目的呈现各种实施例的描述，但是所述描述并非意在是详尽的或限制为所公开的实施例。在不脱离所描述的实施例的范围和精神的情况下，许多修改和变化对于本领域普通技术人员而言将是明显的。
本实施例的各方面可以体现为***、方法或计算机程序产品。因此，本公开的各方面可以采用纯硬件实施例、纯软件实施例(包括固件、常驻软件、微代码等)或结合了在本文中通常可以全部称为“电路”、“模块”或“***”的软件和硬件方面的实施例的形式。此外，本公开的各方面可以采用计算机程序产品的形式，所述计算机程序产品体现于上面体现了计算机可读程序代码的一个或多个计算机可读介质。
可以利用一个或多个计算机可读介质的任何组合。计算机可读介质可为计算机可读信号介质或计算机可读存储介质。计算机可读存储介质可以是例如但不限于：电子、磁性、光学、电磁、红外或半导体***、设备或装置，或者以上各项的任何合适的组合。计算机可读存储媒体的更多特定实例(非详尽列表)将包括以下：具有一个或多个电线的电连接；便携式计算机磁盘；硬盘；随机存取存储器(RAM)；只读存储器(ROM)；可擦除可编程只读存储器(EPROM或快闪存储器)；光纤；便携式光盘只读存储器(CD-ROM)；光学存储装置；磁性存储装置或以上的任何合适组合。在本文件的上下文中，计算机可读存储介质可以是可以含有或存储供指令执行***、设备或装置使用或与之结合使用的程序的任何有形介质。
以上参考根据本公开的实施例案的方法、设备(***)和计算机程序产品的流程图图示和/或方框图描述了本公开的各方面。应理解，流程图图示和/或方框图的每个方框以及流程图图示和/或方框图中的方框的组合可以通过计算机程序指令来实施。这些计算机程序指令可以被提供给通用计算机、专用计算机或用来生产机器的其他可编程数据处理设备的处理器，使得经由计算机或其他可编程数据处理设备的处理器而执行的指令使得能够实施一个或多个流程图和/或方框图方框中指定的功能/动作。这样的处理器可以是但不限于通用处理器，专用处理器，应用专用处理器或现场可编程处理器。
附图中的流程图和方框图示出根据本公开的各种实施例的***、方法和计算机程序产品的可能实现方式的架构、功能性和操作。就此而言，流程图或框图中的每一框可表示代码的模块、区段或部分，所述代码包括用于实现指定的逻辑功能的一个或多个可执行指令。还应注意，在一些替代实现中，方框中提到的功能可以不按附图中提到的次序出现。例如，连续显示的两个方框实际上可以基本上同时执行，或者所述方框有时可以按相反的次序执行，这取决于所涉及的功能性。还应注意，方框图和/或流程图图解的每个方框以及方框图和/或流程图图解中的方框的组合可以由执行指定功能或动作的、基于专用硬件的***或者专用硬件和计算机指令的组合来实施。
虽然前述内容涉及本公开的实施例，但是在不脱离本公开的基本范围的情况下可设想本公开的其他和更多实施例，并且本公开的范围由所附权利要求书确定。
Claims (26)
1.一种用于生成音频信号的计算机实现方法，所述方法包括：
从第一音频源接收第一信号；
将所述第一信号发送到与第一用户相关联的输出元件以供输出；
从与第二用户相关联的输入元件接收第二信号；
将所述第一信号与所述第二信号组合以产生组合信号；以及
将所述组合信号发送到与所述第一用户相关联的所述输出元件以供输出。
2.根据权利要求1所述的计算机实现方法，其中将所述第一信号与所述第二信号组合包括：
响应于所述第二信号而闪避所述第一信号以生成经闪避的第一信号；以及
将所述经闪避的第一信号添加到所述第二信号。
3.根据权利要求2所述的计算机实现方法，其中闪避所述第一信号包括：基于与所述第二信号相关联并对应于第二频率范围的振幅来调整与所述第一信号相关联并对应于第一频率范围的振幅。
4.根据权利要求3所述的计算机实现方法，其中所述第一频率范围与所述第二频率范围基本上相同。
5.根据权利要求1所述的计算机实现方法，其还包括预处理所述第二信号以通过与所述第二用户相关联的所述输出元件来过滤掉输入到与所述第二用户相关联的所述输入元件的第三信号的至少一部分。
6.根据权利要求1所述的计算机实现方法，其还包括预处理所述第二信号以过滤掉输入到与所述第一用户相关联的输入元件的第四信号的至少一部分。
7.根据权利要求1所述的计算机实现方法，其中所述第一音频源与所述第一用户相关联，并且所述方法还包括：响应于所述第一用户选择所述第一音频源而使与所述第一用户相关联的所述输出元件将所述第一信号输出给所述第一用户。
8.根据权利要求1所述的计算机实现方法，其中所述第一音频源与所述第二用户相关联，并且所述方法还包括：响应于所述第一用户选择所述第一音频源而使与所述第一用户相关联的所述输出元件将所述第一信号输出给所述第一用户。
9.根据权利要求1所述的计算机实现方法，其中所述第一音频源与所述第一用户或所述第二用户相关联，并且所述方法还包括：响应于确定第二音频源当前不活动而使与所述第一用户相关联的所述输出元件将所述第一信号输出给所述第一用户。
10.一种用于生成音频信号的***，其包括：
第一输出元件，其与第一用户相关联并被配置为产生音频信号；
第一输入元件，其与所述第一用户相关联并被配置为接收音频信号；
第一音频源，其被配置为生成音频信号；
第一电路元件，其耦接到所述第一输出元件、所述第一输入元件和所述第一音频源，并且被配置为：
从所述第一音频源接收第一信号；
将所述第一信号发送到所述第一输出元件以供输出；
从与第二用户相关联的第二输入元件接收第二信号；
将所述第一信号与所述第二信号组合以产生组合信号；以及
将所述组合信号发送到所述第一输出元件以供输出。
11.根据权利要求10所述的***，其中所述第一电路元件包括闪避器，所述闪避器耦接到所述第一输入元件并且被配置为基于由所述第一输入元件接收到的所述音频信号来闪避所述第一信号。
12.根据权利要求10所述的***，其中所述第一电路元件包括闪避器，所述闪避器耦接到所述第一输入元件和所述第一音频源并且被配置为基于所述第二信号来闪避所述第一信号以生成经闪避的第一信号，其中闪避所述第一信号包括：基于与所述第二信号相关联并对应于第二频率范围的振幅来调整与所述第一信号相关联并对应于第一频率范围的振幅。
13.根据权利要求12所述的***，其中所述第一电路元件还包括求和单元，所述求和单元耦接到所述第二输入元件并且被配置为组合音频信号，其中所述求和单元将所述经闪避的第一信号添加到所述第二信号以生成所述组合信号。
14.根据权利要求12所述的***，其中所述第一电路元件包括耦接到所述第一输入元件的滤波器，其中所述滤波器被配置为从由所述第一输入元件接收到的第三信号中过滤掉所述第一信号的至少一部分或所述经闪避的第一信号以生成第四信号，并且其中所述滤波器包括自适应滤波器或频谱减法器。
15.根据权利要求14所述的***，其中所述第一电路元件还包括第一自适应回声消除单元，所述第一自适应回声消除单元被配置为耦接到与所述第二用户相关联的第二处理单元内的第二自适应消除单元。
16.根据权利要求15所述的***，其中与所述第一自适应回声消除单元相关联的输出耦接到与所述第二自适应回声消除单元相关联的输入，并且与所述第二自适应回声消除单元相关联的输出耦接到与所述第一自适应回声消除单元相关联的输入。
17.根据权利要求16所述的***，其中所述第一自适应回声消除单元被配置为基于由所述第二自适应回声消除单元输出的第五信号来过滤所述第四信号，以减少与所述第四信号相关联的回声，并且其中所述第五信号由所述第二输入元件接收。
18.根据权利要求10所述的***，其中所述第一电路元件还包括路由电路，所述路由电路被配置为：
当以第一配置操作时，将所述第一音频源耦接到所述第一输出元件和第二输出元件；并且
当以第二配置操作时，将第二音频源耦接到所述第一输出元件。
19.根据权利要求18所述的***，其还包括控制电路，所述控制电路耦接到所述路由电路并被配置为：
当所述第一音频源是活动的并且所述第二音频源是不活动的时，使所述路由电路以所述第一配置操作；并且
当所述第一音频源是不活动的并且所述第二音频源是活动的时，使所述路由电路以所述第二配置操作。
20.根据权利要求18所述的***，其中所述路由电路还被配置为基于所述路由电路内的开关的状态而以所述第一配置或所述第二配置操作。
21.一种存储程序指令的非暂时性计算机可读介质，所述程序指令当由处理单元执行时，使所述处理单元通过执行以下步骤来生成音频信号：
从第一音频源接收第一信号；
将所述第一信号发送到与第一用户相关联的输出元件以供输出；
从与第二用户相关联的输入元件接收第二信号；
将所述第一信号与所述第二信号组合以产生组合信号；以及
将所述组合信号发送到与所述第一用户相关联的所述输出元件以供输出。
22.根据权利要求19所述的非暂时性计算机可读介质，其中将所述第一信号与所述第二信号组合的所述步骤包括：
基于与所述第二音频信号相关联并对应于第二频率范围的振幅来调整与所述第一信号相关联并对应于第一频率范围的振幅以生成经闪避的第一信号；以及
将所述经闪避的第一信号与所述第二信号相加。
23.一种用于访问来自两个不同音频源的音频信号的***，所述***包括：
第一路由电路，其耦接到第一音频源；以及
第一输出元件，其耦接到所述第一路由电路，
其中在第一状态下，所述第一路由电路被配置为将来自所述第一音频源的音频信号路由到第一输出元件以供输出，并且
其中在第二状态下，所述第一路由电路被配置为将来自第二音频源的音频信号路由到所述第一输出元件以供输出。
24.根据权利要求23所述的***，其中所述第一路由电路包括第一多路复用器，并且在所述第一状态下，所述第一多路复用器被配置为在所述第一状态下将来自所述第一音频源的所述音频信号传递到所述第一输出元件。
25.根据权利要求24所述的***，其中所述第一路由电路还包括第二多路复用器，并且在所述第二状态下，所述第二多路复用器被配置为将来自所述第二音频源的所述音频信号传递到所述第一多路复用器，并且在所述第二状态下，所述第一多路复用器被配置为将来自所述第二音频源的所述音频信号传递到所述第一输出元件，并被配置为不将来自所述第一音频源的所述音频信号传递到所述第一输出元件。
26.根据权利要求25所述的***，其中所述第一路由电路还包括开关，所述开关控制所述第一多路复用器和所述第二多路复用器的所述配置以及来自所述第一音频源的所述音频信号和来自所述第二音频源的所述音频信号如何通过所述第一路由电路来路由。
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| US14/634,687 | 2015-02-27 | ||
| US14/634,687 US11418874B2 (en) | 2015-02-27 | 2015-02-27 | Techniques for sharing stereo sound between multiple users |
| PCT/US2016/015460 WO2016137652A1 (en) | 2015-02-27 | 2016-01-28 | Techniques for sharing stereo sound between multiple users |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN107278376A true CN107278376A (zh) | 2017-10-20 |
Family
ID=56789802
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201680011668.3A Pending CN107278376A (zh) | 2015-02-27 | 2016-01-28 | 在多个用户之间共享立体声的技术 |
Country Status (6)
| Country | Link |
|---|---|
| US (1) | US11418874B2 (zh) |
| EP (1) | EP3262851B1 (zh) |
| JP (1) | JP2018512754A (zh) |
| KR (1) | KR102524590B1 (zh) |
| CN (1) | CN107278376A (zh) |
| WO (1) | WO2016137652A1 (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113196800A (zh) * | 2018-12-13 | 2021-07-30 | 谷歌有限责任公司 | 无线头戴式耳机的混合麦克风 |
Families Citing this family (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN108366360B (zh) * | 2018-01-05 | 2020-07-24 | 广东小天才科技有限公司 | 基于麦克风的歌唱互动方法、装置、***及存储介质 |
| EP4270987A1 (en) * | 2020-12-28 | 2023-11-01 | Shenzhen Shokz Co., Ltd. | Audio signal processing method and system for suppressing echo |
| CN117707467B (zh) * | 2024-02-04 | 2024-05-03 | 湖北芯擎科技有限公司 | 音频通路多主机控制方法、***、装置及存储介质 |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6493450B1 (en) * | 1998-12-08 | 2002-12-10 | Ps Engineering, Inc. | Intercom system including improved automatic squelch control for use in small aircraft and other high noise environments |
| US20050160270A1 (en) * | 2002-05-06 | 2005-07-21 | David Goldberg | Localized audio networks and associated digital accessories |
| CN102350970A (zh) * | 2010-03-02 | 2012-02-15 | 通用汽车环球科技运作有限责任公司 | 改善汽车内部通讯的装置 |
| WO2014161091A1 (en) * | 2013-04-04 | 2014-10-09 | Rand James S | Unified communications system and method |
| CN105637892A (zh) * | 2013-08-27 | 2016-06-01 | 伯斯有限公司 | 在收听音频的同时辅助对话 |
Family Cites Families (16)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US4677674A (en) * | 1985-04-03 | 1987-06-30 | Seth Snyder | Apparatus and method for reestablishing previously established settings on the controls of an audio mixer |
| US5228093A (en) | 1991-10-24 | 1993-07-13 | Agnello Anthony M | Method for mixing source audio signals and an audio signal mixing system |
| CA2125220C (en) * | 1993-06-08 | 2000-08-15 | Joji Kane | Noise suppressing apparatus capable of preventing deterioration in high frequency signal characteristic after noise suppression and in balanced signal transmitting system |
| US7260231B1 (en) | 1999-05-26 | 2007-08-21 | Donald Scott Wedge | Multi-channel audio panel |
| JP2003249996A (ja) | 2002-02-25 | 2003-09-05 | Kobe Steel Ltd | 音声信号入出力装置 |
| JP2003263872A (ja) | 2002-03-11 | 2003-09-19 | Alpine Electronics Inc | オーディオ出力装置 |
| US7215765B2 (en) * | 2002-06-24 | 2007-05-08 | Freescale Semiconductor, Inc. | Method and apparatus for pure delay estimation in a communication system |
| US20050032500A1 (en) | 2003-08-08 | 2005-02-10 | Visteon Global Technologies, Inc. | Wireless/IR headphones with integrated rear seat audio control for automotive entertainment system |
| JP4804014B2 (ja) | 2005-02-23 | 2011-10-26 | 沖電気工業株式会社 | 音声会議装置 |
| JP2010516122A (ja) | 2007-01-05 | 2010-05-13 | エスワイエヌシー１ リミテッド ライアビリティー カンパニー | 自己内臓式デュアルイヤバッドまたはイヤホンシステムおよびその用途 |
| US8295500B2 (en) * | 2008-12-03 | 2012-10-23 | Electronics And Telecommunications Research Institute | Method and apparatus for controlling directional sound sources based on listening area |
| US20110026745A1 (en) | 2009-07-31 | 2011-02-03 | Amir Said | Distributed signal processing of immersive three-dimensional sound for audio conferences |
| JP5356160B2 (ja) * | 2009-09-04 | 2013-12-04 | アルプス電気株式会社 | ハンズフリー通信システム及び近距離無線通信装置 |
| US9609141B2 (en) | 2012-10-26 | 2017-03-28 | Avago Technologies General Ip (Singapore) Pte. Ltd. | Loudspeaker localization with a microphone array |
| US20140161274A1 (en) | 2012-12-10 | 2014-06-12 | Silverplus, Inc. | Dual-Mode Wire/Wireless Headphone with Wireless Audio Gateway Functionalities to Support Multiple Wireless Headphones |
| US20140363008A1 (en) | 2013-06-05 | 2014-12-11 | DSP Group | Use of vibration sensor in acoustic echo cancellation |
-
2015
- 2015-02-27 US US14/634,687 patent/US11418874B2/en active Active
-
2016
- 2016-01-28 CN CN201680011668.3A patent/CN107278376A/zh active Pending
- 2016-01-28 WO PCT/US2016/015460 patent/WO2016137652A1/en active Application Filing
- 2016-01-28 KR KR1020177022897A patent/KR102524590B1/ko active IP Right Grant
- 2016-01-28 JP JP2017542869A patent/JP2018512754A/ja active Pending
- 2016-01-28 EP EP16756032.5A patent/EP3262851B1/en active Active
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6493450B1 (en) * | 1998-12-08 | 2002-12-10 | Ps Engineering, Inc. | Intercom system including improved automatic squelch control for use in small aircraft and other high noise environments |
| US20050160270A1 (en) * | 2002-05-06 | 2005-07-21 | David Goldberg | Localized audio networks and associated digital accessories |
| CN102350970A (zh) * | 2010-03-02 | 2012-02-15 | 通用汽车环球科技运作有限责任公司 | 改善汽车内部通讯的装置 |
| WO2014161091A1 (en) * | 2013-04-04 | 2014-10-09 | Rand James S | Unified communications system and method |
| CN105637892A (zh) * | 2013-08-27 | 2016-06-01 | 伯斯有限公司 | 在收听音频的同时辅助对话 |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113196800A (zh) * | 2018-12-13 | 2021-07-30 | 谷歌有限责任公司 | 无线头戴式耳机的混合麦克风 |
| CN113196800B (zh) * | 2018-12-13 | 2023-06-23 | 谷歌有限责任公司 | 无线头戴式耳机的混合麦克风 |
Also Published As
| Publication number | Publication date |
|---|---|
| US11418874B2 (en) | 2022-08-16 |
| US20160255436A1 (en) | 2016-09-01 |
| KR20170125021A (ko) | 2017-11-13 |
| JP2018512754A (ja) | 2018-05-17 |
| EP3262851B1 (en) | 2024-04-24 |
| EP3262851A4 (en) | 2019-02-20 |
| EP3262851A1 (en) | 2018-01-03 |
| WO2016137652A1 (en) | 2016-09-01 |
| KR102524590B1 (ko) | 2023-04-21 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6600634B2 (ja) | ユーザが制御可能な聴覚環境のカスタマイズのためのシステム及び方法 | |
| EP3413590B1 (en) | Audio output device, audio output method, program, and audio system | |
| WO2016063613A1 (ja) | 音響再生装置 | |
| US8488820B2 (en) | Spatial audio processing method, program product, electronic device and system | |
| EP3005362B1 (en) | Apparatus and method for improving a perception of a sound signal | |
| CN107278376A (zh) | 在多个用户之间共享立体声的技术 | |
| JP2018520391A (ja) | ノイズ除去機能が備わったイヤホン装置及びノイズ除去方法 | |
| Albrecht et al. | A mobile augmented reality audio system with binaural microphones | |
| US20200301653A1 (en) | System and method for processing audio between multiple audio spaces | |
| US10547927B1 (en) | Systems and methods for processing an audio signal for replay on stereo and multi-channel audio devices | |
| EP2009891B1 (fr) | Transmission de signal audio dans un système de conférence audio immersive | |
| US20210211810A1 (en) | Partial hrtf compensation or prediction for in-ear microphone arrays | |
| US10291759B2 (en) | Data return type voice input/output device for smart phone | |
| EP3599775A1 (en) | Systems and methods for processing an audio signal for replay on stereo and multi-channel audio devices | |
| US20220122630A1 (en) | Real-time augmented hearing platform | |
| WO2021005806A1 (ja) | スピーカシステム、音処理装置、音処理方法及びプログラム | |
| Rämö | Equalization techniques for headphone listening | |
| JP2019066601A (ja) | 音響処理装置、プログラム及び方法 | |
| US20230319492A1 (en) | Adaptive binaural filtering for listening system using remote signal sources and on-ear microphones | |
| Liski | Adaptive Hear-Through Headset | |
| JP2022019619A (ja) | 聴覚デバイスを含む電子デバイスにおける方法 | |
| Gamper et al. | Spatialisation in audio augmented reality using finger snaps | |
| Pirro et al. | A fixed beamforming based approach for stereophonic audio-conference systems | |
| WO2017211448A1 (en) | Method for generating a two-channel signal from a single-channel signal of a sound source | |
| Bouserhal et al. | Modeling speech production in noise for the assessment of vocal effort for use with communication headsets |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20171020 |