CN104270693A - 虚拟耳机 - Google Patents
虚拟耳机 Download PDFInfo
- Publication number
- CN104270693A CN104270693A CN201410504403.XA CN201410504403A CN104270693A CN 104270693 A CN104270693 A CN 104270693A CN 201410504403 A CN201410504403 A CN 201410504403A CN 104270693 A CN104270693 A CN 104270693A
- Authority
- CN
- China
- Prior art keywords
- audio
- auricle
- processing system
- processor
- virtual
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000005236 sound signal Effects 0.000 claims abstract description 28
- 238000000034 method Methods 0.000 claims abstract description 23
- 230000005540 biological transmission Effects 0.000 claims abstract description 8
- 230000008569 process Effects 0.000 claims description 10
- 230000000694 effects Effects 0.000 description 16
- 210000003128 head Anatomy 0.000 description 11
- 240000006409 Acacia auriculiformis Species 0.000 description 8
- 210000005069 ears Anatomy 0.000 description 8
- 230000008859 change Effects 0.000 description 5
- 238000010586 diagram Methods 0.000 description 5
- 238000005562 fading Methods 0.000 description 4
- 230000006870 function Effects 0.000 description 4
- 238000004891 communication Methods 0.000 description 3
- 230000003321 amplification Effects 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 2
- 230000003111 delayed effect Effects 0.000 description 2
- 238000003384 imaging method Methods 0.000 description 2
- 238000009434 installation Methods 0.000 description 2
- 239000000203 mixture Substances 0.000 description 2
- 238000003199 nucleic acid amplification method Methods 0.000 description 2
- 238000010422 painting Methods 0.000 description 2
- 230000000644 propagated effect Effects 0.000 description 2
- CVOFKRWYWCSDMA-UHFFFAOYSA-N 2-chloro-n-(2,6-diethylphenyl)-n-(methoxymethyl)acetamide;2,6-dinitro-n,n-dipropyl-4-(trifluoromethyl)aniline Chemical compound CCC1=CC=CC(CC)=C1N(COC)C(=O)CCl.CCCN(CCC)C1=C([N+]([O-])=O)C=C(C(F)(F)F)C=C1[N+]([O-])=O CVOFKRWYWCSDMA-UHFFFAOYSA-N 0.000 description 1
- 108010022579 ATP dependent 26S protease Proteins 0.000 description 1
- 239000010752 BS 2869 Class D Substances 0.000 description 1
- 240000007594 Oryza sativa Species 0.000 description 1
- 235000007164 Oryza sativa Nutrition 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 238000004422 calculation algorithm Methods 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 230000008094 contradictory effect Effects 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 230000001934 delay Effects 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 210000000624 ear auricle Anatomy 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 238000009432 framing Methods 0.000 description 1
- 230000001788 irregular Effects 0.000 description 1
- 230000004807 localization Effects 0.000 description 1
- 238000009828 non-uniform distribution Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 239000011148 porous material Substances 0.000 description 1
- 235000009566 rice Nutrition 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 238000004088 simulation Methods 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
Landscapes
- Stereophonic System (AREA)
- Circuit For Audible Band Transducer (AREA)
Abstract
虚拟耳机,包括位置传感器和音频处理***,以及与音频处理***连接的扬声器阵列,所述扬声器阵列包括至少四个扬声器;所述位置传感器能够对目标收听者的耳廓进行定位,并将定位信息发送至音频处理***;所述音频处理***由依次信号连接的音频信号接收头、AD转换器、处理器和与处理器连接的多个音频发射通道组成,所述音频发射通道由DA转换器和音频放大器组成,所述DA转换器连接处理器,音频放大器连接扬声器。本发明还公开了一种虚拟耳机音频聚焦方法。本发明给收听者提供了一个隐秘的私人声音环境,既保护了隐私又不会对其他人员形成干扰。
Description
技术领域
本发明属于电子通信领域,涉及一种无线音频信号传输装置,特别是涉及一种虚拟耳机。
背景技术
在某些特殊场合如室内环境、车载环境等,有时需要为个人创造私人的听觉空间。如驾驶员驾车过程中接听电话时,为安全起见必须免提接听电话,现有的车载免提设备均使用车载音响设备,实际使用中,这些车载免提设备虽然能免提通话,却无法提供隐秘通话功能,如果通话内容涉及隐私而不想为车内其他成员听到,驾驶员只能使用有线耳机或者蓝牙耳机接听电话,佩戴不舒适,操作繁琐,而且使用过程中存在一定的安全隐患。再如一些老年人家庭中,有听力障碍的老年人在收听收音机或者看电视的时候总是需要很大的音量,而这么大的音量超出其他听力正常的人的接受范围,从而带来很多负面影响。类似的场景不一一列举,使用传统扬声器装置均不能很好的解决问题。
发明内容
为克服传统扬声器所存在的缺陷,本发明公开了一种虚拟耳机。
本发明所述虚拟耳机,包括位置传感器和音频处理***,以及与音频处理***连接的扬声器阵列,所述扬声器阵列包括至少两个扬声器;
所述位置传感器能够对目标收听者的耳廓进行定位,并将定位信息发送至音频处理***;
所述音频处理***由依次信号连接的音频信号接收头、AD转换器、处理器和与处理器连接的多个音频发射通道组成,所述音频发射通道由DA转换器和音频放大器组成,所述DA转换器连接处理器,音频放大器连接扬声器;
所述处理器与位置传感器连接,所述处理器根据定位信息控制扬声器阵列中每一扬声器对应的音频发射通道的输入信号的延时长短与幅度大小,使不同扬声器发出的声信号到达耳廓所处位置的时间和幅度均相同。
优选的,所述位置传感器为双目视觉图像定位装置。
进一步的,所述双目视觉图像定位装置还包括照明装置,所述照明装置上设置有光线传感器,所述照明装置的控制端与光线传感器和处理器连接。
优选的,所述扬声器阵列为共形阵。
优选的,扬声器阵列的物理口径尺寸D>(R×λ/2)1/2;
其中D为阵列物理口径尺寸,R为目标收听者与扬声器阵列中心位置的距离,λ为音频信号波长。
具体的,所述音频处理***为具备多通道输出的音频处理器,包括但不限于 LM48901、LM48903、ADAU1701、CS47048。
优选的,所述扬声器阵列包括至少四个扬声器。
本发明还公开了一种虚拟耳机音频聚焦方法,包括如下步骤:
S1位置传感器对目标收听者的耳廓进行定位,并将定位信息发送至音频处理***中的处理器;
S2处理器根据定位信息计算扬声器阵列中每一扬声器与目标收听者耳廓的距离,并控制对应音频发射通道的输入音频信号的延时长短与幅度大小,使不同扬声器发出的声信号到达耳廓所处位置的时间相同、幅度相同。
优选的,所述位置传感器对目标收听者的耳廓进行定位的方法采用双目视觉图像定位方法。
优选的,所述步骤S2具体为:
S21处理器根据耳廓定位信息计算出每一扬声器与目标收听者的耳廓距离分别为R1、R2、……RN,对应的声波传播延时分别为t1、t2、……tN,N为扬声器总数;
S22根据α=e-β×R/2计算各个扬声器到达耳廓的声波传输衰减α1、α2、……αN,其中β为声波距离衰减因子;
S23找出声波传输延时中的最大值tmax和声波传输衰减中的最大值αmax,则处理器对各音频通道的延时量为τi=tmax-ti,i=1,……N,幅度加权值为Ai=αmax/αi,i=1,……N。
与现有技术相比,本发明的有益效果是:通过位置传感器获取收听者耳廓位置,并由音频处理***控制各个不同声音通道的延时和幅度,从而使得扬声器阵列中不同声音通道的能量准确在收听者耳廓处聚焦,而在场景内其他位置处均不能聚焦。由此给收听者提供了一个隐秘的私人声音环境,既保护了隐私又不会对其他人员形成干扰。
附图说明
图1为本发明所述虚拟耳机内部结构示意图;
图2为实施例1示出的虚拟耳机在车内安装的平面示意图;
图3为双目视觉图像定位原理图
图4为实施例1所述虚拟耳机的内部结构示意图;
图5为具体实施例1的效果曲线图;
图6为实施例2示出虚拟耳机在车内安装的平面示意图;
图7为实施例2所述虚拟耳机的内部结构示意图;
图8为具体实施例2的效果曲线图;
图9为实施例3示出虚拟耳机在室内安装示意图;
图10为具体实施例3的效果曲线图。
具体实施方式
下面结合附图,对本发明的具体实施方式作进一步的详细说明。
本发明所述虚拟耳机,如图1所示,包虚拟耳机,其特征在于,包括位置传感器和音频处理***,以及与音频处理***连接的扬声器阵列,所述扬声器阵列包括至少四个扬声器;
所述位置传感器能够对目标收听者的耳廓进行定位,并将定位信息发送至音频处理***;
所述音频处理***由依次信号连接的音频信号接收头、AD转换器、处理器和与处理器连接的多个音频发射通道组成,所述音频发射通道由DA转换器和音频放大器组成,所述DA转换器连接处理器,音频放大器连接扬声器;
所述处理器与位置传感器连接,所述处理器根据定位信息,计算扬声器阵列中每一扬声器与目标收听者耳廓的距离,并控制对应音频发射通道的输入音频信号的延时长短与幅度大小,使不同扬声器发出的声信号到达耳廓所处位置的时间相同、幅度相同。
扬声器阵列由至少两个普通小型扬声器单元组成,但当阵元数小于四个时,目标位置与空间其它位置的声音强度差别不大,不能保证虚拟耳机发出的声音仅能被目标位置的人听到,因此优选设置为四个扬声器单元。扬声器阵列安装在较开阔的位置,只要是能够直接在虚拟耳机目标收听者左耳或者右耳处产生聚焦效果而不受物体遮挡的位置均可。扬声器阵列优选为共形阵,即各扬声器单元安装在载体表面,其排列与载体表面形状一致,载体可以是任何物体,如墙壁或天花板某片区域、壁画边框、汽车车顶、汽车车门边框等。扬声器阵列可以是线状阵列,也可以是面状阵列,所有扬声器单元可以在一个平面上,也可以不在同一个平面,其阵列单元可以均匀分布也可以非均匀分布。扬声器阵列的尺寸不能过小,须保证目标收听者可能活动的区域均处于扬声器阵列的近场,根据天线的近场条件,可知阵列物理口径尺寸需满足D>(R×λ/2)1/2,其中R为在本发明装置作用区域内目标收听者与扬声器阵列中心位置的最大距离,λ为音频信号波长,发明装置保证在语音信号频率范围(300Hz~3.4KHz)内正常使用,因此取语音信号波长的最大值,即λ=1.13m进行近似计算。扬声器阵列中的每个扬声器单元相互独立,但功能相同,都是将音频电信号转换成声音信号。扬声器阵列的信号输入端与音频处理***的信号输出端相连,各扬声器单元的输入音频电信号分别由音频处理***的各音频通道给出。
音频处理***中的音频信号接收头与音频信号源(如车载电话、收音机、电视机)的信号输出端相连。其输入音频电信号经过AD转换器转换成数字音频信号,并发送至处理器。处理器根据位置传感器对目标收听者耳廓进行定位得到的信息,对数字音频信号进行不同延时和幅度加权处理得到多路数字音频信号,并输入到各个音频发射通道,分别经过DA转换器转换成模拟音频信号并由音频放大器进行放大,最后传输给扬声器阵列中的特定扬声器单元。
扬声器阵列中各个扬声器均与对应的音频发射通道连接,其作用是将不同的声音通道的音频电信号转换成声音能量。为实现声音聚焦,声波从不同扬声器单元到达目标收听者耳朵的时间应该相同,信号幅度也应该相同。由于各个扬声器单元到达的传播距离不同,因此不同通道的声波从发出到接收的延时和幅度衰减都不同。扬声器阵列产生的能量要能够准确地在目标收听者耳廓处聚焦,则需要处理器对不同通道的音频信号进行精确的延时和幅度加权控制。
具体而言,设扬声器阵列中阵元数目为N,处理器根据位置传感器提供的位置信息和扬声器阵元位置信息(已知)计算出N个扬声器阵元与目标收听者的耳廓距离分别为R1、R2、……RN,其对应的声波传播延时分别为t1、t2、……tN(利用公式t=R/v获得,其中v为声波传播速度,可以取v=340m/s),对应的声波传播衰减分别为α1、α2、……αN(利用公式α=e-β×R/2获得,其中β为声波距离衰减因子,可以取β=0.25dB/m)。找出t1~tN中的最大值tmax,α1~αN中的最大值αmax,则处理器对各音频通道的延时量为τi=tmax-ti,i=1,……N,幅度加权值为Ai=αmax/αi,i=1,……N。
不同通道的音频信号经过不同延时和不同幅度加权,传输到各个对应的扬声器单元转换成声波,声波经过不同路径的传播,产生不同的延时和幅度衰减最终到达目标收听者耳廓。经过处理器对各声音通道的延时和幅度加权处理,以及声信号经过不同路径传播实际产生的延时和幅度衰减,最终效果是不同声音通道发出的声信号在到达目标收听者耳廓处时的总延时相同,幅度也相同,因此能够能量聚焦,所有扬声器单元的声音能量在目标位置叠加达到最佳收听效果,而在场景内的其他位置,声音能量均无以上聚焦效果,因此通过控制整体音量,可以使得其他人员无法听到声音而只有目标人员能接收扬声器阵列播放的内容。
实际环境中,由于目标收听者头部位置并不固定,如人员走动或晃动均使得收听者耳廓位置的不是固定在某一特定位置,而是在一片区域内无规律分布。为了使目标收听者在任何位置均能正常使用本发明装置,发明装置中还包括位置传感器,它能够实时获取收听者耳廓的三维位置信息。当收听者头部移动时,位置传感器向处理器实时地提供收听者耳廓的位置,处理器根据当前耳廓的位置控制不同音频通道的延时量与幅度加权值,使得声音能量始终刚好在收听者的耳廓处聚焦,实现一种声波束自动跟踪收听者耳朵的效果。使得不论收听者如何移动,其始终能准确接收扬声器阵列所发出的声音。
与现有技术相比,本发明的有益效果是:使用共形扬声器阵列传播声音能量,通过位置传感器获取收听者耳廓位置,并由音频处理***控制各个不同声音通道的延时和幅度,从而使得扬声器阵列中不同音频通道的能量准确在收听者耳廓处聚焦,而在场景内其他位置处均不能聚焦。由此给收听者提供了一个隐秘的私人声音环境,既保护了隐私又不会对其他人员形成干扰。
以下给出本发明的三个具体实施例,
实施例一
本实施例是本发明的一种实现方式,应用场景在汽车中。图2是车载虚拟耳机在车内安装的平面图。卡车、公交车、轮船、飞机等其他类型的交通工具也可以安装本发明的虚拟耳机,在本实施例中,该交通工具是汽车。虚拟耳机包括独立的的小型扬声器阵列201、位置传感器202、203和音频处理***205。
该扬声器阵列201包括多个扬声器单元。扬声器阵列分布在位于车内驾驶员一侧的A柱以及A柱向上延伸(前车窗与车顶结合部位)所构成的弧形区域,扬声器阵列沿着该弧形区域呈线形非均匀排列,按行车方向从后往前由稀变密。扬声器阵列中的扬声器是宽带的,频率范围为300Hz到3.4KHz。此外,扬声器单元的直径可以很小,本实施例采用直径大约12.5mm的扬声器单元,扬声器单元数目为16个,扬声器阵列的物理孔径必须足够大,保证目标收听者可能活动的区域均在扬声器阵列的近场内,本实施例中的扬声器阵列孔径D为1.26m,目标收听者与扬声器阵列中心的距离R的范围为0.3~1m,音频信号波长λ为0.1~1.13m,分别取最大值进行计算R=1m、λ=1.13m,则(R×λ/2)1/2≈0.75m,可知阵列孔径始终满足条件 D>(R×λ/2)1/2,即目标收听者的耳廓始终在扬声器阵列的近场范围内。
本实施例中,位置传感器为双目视觉图像定位装置,具体包括两个***头202和203,其中一个摄像头203位于B柱与车顶结合的部位,另一个摄像头202位于A柱与车顶结合的部位。两个***头均对准驾驶员头部左侧进行成像,由处理器进行图像处理并计算出驾驶员左耳廓的三维位置信息,并发送至音频处理***中的处理器。本实施例中图像处理获取位置信息的功能由音频处***中的处理器完成,即摄像头202和203直接与音频处理***中的处理器相连。
下面具体阐述双目视觉图像定位装置定位方法:设两个摄像机采用交向摆放对称姿态,即两光轴不平行,如图3所示。设两摄像机坐标系分别为O1X1Y1Z1、O2X2Y2Z2,轴Z1与轴Z2相交于P,两坐标系原点间距为L。世界坐标系OwXwYwZw与O1X1Y1Z1重合。轴Z与轴Z与对称轴偏角为θ。设两摄像头完全相同,焦距均为f。设目标收听者耳廓处于点Q(x,y,z),其对应的像点坐标分别为(x1,y1)、(x2,y2)。根据小孔成像原理及坐标变换理论可得耳廓的三维坐标分别为【参考文献:1.机器人双目视觉定位技术研究.林琳.西安电子科技大学硕士学位论文.2. 基于CMOS的双目视觉定位***的设计.郑志强.国防科技大学学报】:
为了保证在夜间行车时本发明装置仍能正常使用,虚拟耳机还需要一个照明装置204,具体包括一个低亮度的光源,和一个自动开关,当有来电且摄像头的图像亮度不足时自动打开,本实施例中照明光源位于车内靠驾驶员一侧的B柱与前车门结合的部位,对准驾驶员左耳可能的活动区域。
音频处理***205包括AD转换器、处理器以及多个DA转换器和音频放大器组成的音频发射通道。AD转换器由一个ADC芯片构成,设采样率为1MHz,将手机输出的音频信号采集成数字音频信号并传输给处理器。所述处理器用现场可编程门阵列(FPGA)或者数字信号处理器(DSP)实现。音频发射通道中的DA转换器使用多片DAC芯片,其采样率为1MHz,用于将对应音频通道中的数字音频信号转换成模拟音频信号。音频放大器组采用多片音频放大芯片实现。对应音频通道与扬声器阵列中的对应扬声器单元相连。
实施例所示出的装置的具体结构如图4所示。处理器接收双目视觉图像定位装置得到的驾驶员左耳廓的三维位置信息,结合事先已知的各个扬声器单元的位置信息,计算出各个扬声器单元与驾驶员耳廓的距离,从而确定各个音频通道延时的时间,通过多个数字延时滤波器,对ADC输出的数字音频信号进行对应的延时处理,产生多路数字音频信号,各路数字音频信号经过DAC转换芯片和音频放大芯片处理,最终传输给对应扬声器单元转换成声音能量。
对于驾驶员而言,每一个扬声器单元发出的声波相当于从一个声源发出并经过不同路径传播后同时等幅到达耳廓,其效果相当于同时收听到16个扬声器单元叠加的声音能量,可以通过调整音量达到正常入耳式耳塞的音量大小。此时,车内其他位置均只能接收到单个扬声器单元的声音能量,因此不足以听到通话内容。当驾驶员头部位置移动时,双目视觉图像定位装置实时捕获其耳廓的新的位置发送给处理器,处理器通过调整各个音频通道的延时量,使得声波束自动跟踪驾驶员耳廓,不论驾驶员头部如何移动,都能准确接收虚拟耳机发送的内容。当在夜间行车有来电时,照明装置自动打开,照亮驾驶员头部左侧,使得发明装置在夜间也能正常工作。
使用Matlab对本实施例的效果进行的仿真,设车内空间在水平面的投影为1.5×2.5米的矩形,如图建立直角坐标系,设驾驶员左耳的位置坐标为(0.27,1.50,-0.2)(单位:米,下同),16个扬声器阵元的坐标及各扬声器阵元的延时与幅度加权值如下表所示。
如图5所示,图中三条曲线表示三个位置处的声音强度随频率变化的曲线,其中三个位置分别为驾驶员左耳处(虚拟耳机的目标位置)、副驾左耳处(坐标为(1,1.5,-0.2))以及后排乘客中间位置(坐标为(0.65,0.3,-0.2)),后两个位置是随机选取的车上乘客可能的位置。频率范围覆盖语音信号频率300KHz~3.4KHz。从图中易看出目标位置处的声音强度曲线平稳,而在后两个位置处的声音强度有较大衰减,而且不同频率衰减程度不同,存在明显的失真。仿真中选取的副驾左耳处以及后排乘客中间位置是车上乘客具有代表性的位置,选择其他可能的位置得到的效果相同,均存在明显的失真现象,可见只有驾驶员左耳处能正常接收虚拟耳机播放的内容。
实施例二
本实施例是本发明的另一种实现方式。在本实施例中,应用场景仍然是汽车。车载虚拟耳机包括独立的小型扬声器阵列401、位置传感器402、403、406和音频处理***405,图6是虚拟耳机在车内安装的平面示意图。
与实施例一中所示出的车载虚拟耳机不同的是本实施例中的装置的位置不同,本实施例中所有装置均针对驾驶员右侧耳廓安装。扬声器单元与实施例一相同,但是所组成的扬声器阵列为方阵,布置位置为驾驶员右耳对应的车内顶部,扬声器单元共16个,采用均匀分布形式,照明装置紧靠着扬声器阵列。位置传感器与实施例一相同,采用双目视觉图像定位装置,具体包括两个摄像头402、403,且仍然需要照明装置404来保证夜晚行车时正常使用,其位置位于扬声器阵列的前后两侧(沿行车方向)。本实施例中的负责图像处理并计算出耳廓位置的处理器是一个独立的处理器406,其计算出驾驶员耳廓位置信息并传输给音频处理***。
发明装置中的音频处理***可以直接使用立体声空间阵列集成电路通过级联构成,所述立体声空间阵列集成电路为具备多通道输出的音频处理器,现有的多款集成电路芯片可以实现,例如LM48901、LM48903、ADAU1701、CS47048等。
本实施例中的音频处理***采用4片LM48901组成,如图7所示。LM48901是内建4通道音频空间阵列芯片,它整合空间处理DSP、4通道D类放大器、18位元立体声类比/数位转换器(ADC)、锁相回路(PLL),采用菊花链结构可以轻松产生多通道音频信号。本实施例中采用一片LM48901作为主控芯片,主控芯片通过I2C接口挂接其余3片LM48901。主控芯片中的ADC对手机输出的音频信号进行采样变换成数字音频信号,并传输给DSP模块,同时DSP模块接收双目视觉图像定位装置发送的驾驶员右耳廓的三维位置信息,对其进行处理后得到扬声器阵列中不同扬声器单元到驾驶员右耳廓的距离,再计算出所有扬声器单元的延时量和幅度衰减量,并利用数字延时滤波器对ADC所采集的数字音频信号进行对应的延时处理和幅度加权处理,最终得到16路音频信号,分别传送给对应的扬声器单元。
本实施例与实施例一所示出的装置不同,但是其最终效果相同。不论是白天还是夜晚,不论驾驶员身高如何,体形如何,驾车姿势如何,虚拟耳机均能自动将声波束对准其右耳廓,保证其在正常驾车的同时,准确接收手机通话内容,舒适的通信。
使用Matlab对本实施例的效果进行的仿真,设车内空间在水平面的投影为1.5×2.5米的矩形,如图建立直角坐标系,设驾驶员右耳的位置在坐标为(0.47,1.5,-0.2)的位置,16个扬声器阵元的坐标分别为(0.55,1.25,0)、(0.625,1.25,0)、(0.70,1.25,0)、(0.775,1.25,0)、(0.55,1.40,0)、(0.625,1.40,0)、(0.70,1.40,0)、(0.775,1.40,0)、(0.55,1.55,0)、(0.625,1.55,0)、(0.70,1.55,0)、(0.775,1.55,0)、(0.55,1.70,0)、(0.625,1.70,0)、(0.70,1.70,0)、(0.775,1.70,0)。
如图8所示,图中三条曲线表示三个位置处的声音强度随频率变化的曲线,其中三个位置分别为驾驶员右耳处(虚拟耳机的目标位置)、副驾左耳处(坐标为(1,1.5,-0.2))以及后排乘客中间位置(坐标为(0.65,0.3,-0.2))。同实施例一,易从图中看出在其他位置处的声音强度有较大衰减,而且不同频率衰减程度不同,存在明显的失真,而只有目标位置(驾驶员右耳)处的声音强度曲线平稳,能正常接收虚拟耳机播放的内容。
实施例三
本实施例与前两个实施例不同的是应用场景是在室内,针对有特殊需求的个人,如听力有障碍的老年人等。如图9所示,虚拟耳机包括独立的的小型扬声器阵列601、位置传感器602、603和音频处理***605。
扬声器阵列601包含至少4个扬声器单元,安装的载体可以是室内的任何物体表面,如墙壁或天花板、壁画边框等。本实施例示出的虚拟耳机采用16个扬声器单元,其均匀分布在室内客厅天花板的正方形灯具外壳边缘,呈矩形均匀分布,每条边布置4个扬声器单元,扬声器单元采用直径12.5mm的小型扬声器。
位置传感器采用双目视觉图像定位装置,具体包括两个摄像头602、603位于室内同一面墙角两侧,镜头对准室内空间,采集室内图像。
本实施例中的音频处理***605与实施例一中的音频处理***205的结构和功能均相同,安装位置位于扬声器阵列所在的灯具内部。考虑到本实施例的场景是室内家居环境,发明装置的信号输入可能是电视机或收音机等家电输出的音频信号,其频率范围为20Hz~20KHz,为了保证虚拟耳机的性能,音频处理***需要对输入信号进行额外的带通滤波处理,仅保留语音信号频率范围300Hz~3.4KHz。处理后音频信号的频率范围与前两个实施例完全相同,音频信号波长λ为0.1~1.13m。本实施例中取目标收听者与扬声器阵列中心的距离R的范围为1.3~4.3m。分别取最大值进行计算R=4.3m、λ=1.13m,则(R×λ/2)1/2≈1.56m,可知要保证目标收听者的耳廓始终在扬声器阵列的近场范围内,阵列孔径需满足条件 D>1.56m。本实施例中取扬声器阵列孔径D为1.92m即满足要求。
利用Matlab对本实施例进行仿真,设房间长6米,宽5米,高3米,如图9所示以房间的某底角为坐标原点建立XYZ三坐标直角坐标系,设虚拟耳机的目标收听者某时刻处于某位置,其面向两个摄像头的耳朵耳廓坐标为(3,3.5,1.55),选取房间内其他任意两个位置,其位置坐标分别为位置1(4.5,1.5,1.55)和位置2(1.1,1.4,1.55)。假设16个扬声器单元均匀分布在房间天花板正中间位置的灯具之四周,相邻单元的间距约0.4米。设扬声器输入信号为电视机的音频输出信号,通过音频处理***605控制各扬声器单元输入信号的延时和幅度,使得所有扬声器单元发出的声音在目标收听者耳廓处聚焦,且仅在这一位置处聚焦。仿真结果如图10所示,图中三条曲线分别反映了房间内三个位置接收虚拟耳机声音的情况,易知房间内其他两个位置相比目标收听者位置接收到的声音衰减很大,而且衰减程度与频率有关,部分频率衰减到接近0。当目标收听者在室内走动时,双目视觉图像定位装置实时采集室内图像数据并进行处理得出目标收听者耳廓位置信息,音频处理***利用该信息改变各音频通道的延时和幅度,使得各扬声器单元发出的声音始终在目标收听者位置处聚焦。
本发明中所公开的实施例描述的方法或算法的步骤可以直接用硬件、处理器执行的软件模块,或者二者的结合来实施。软件模块可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质中。
前文所述的为本发明的各个优选实施例,各个优选实施例中的优选实施方式如果不是明显自相矛盾或以某一优选实施方式为前提,各个优选实施方式都可以任意叠加组合使用,所述实施例以及实施例中的具体参数仅是为了清楚表述发明人的发明验证过程,并非用以限制本发明的专利保护范围,本发明的专利保护范围仍然以其权利要求书为准,凡是运用本发明的说明书及附图内容所作的等同结构变化,同理均应包含在本发明的保护范围内。
Claims (10)
1.虚拟耳机,其特征在于,包括位置传感器和音频处理***,以及与音频处理***连接的扬声器阵列,所述扬声器阵列包括至少两个扬声器;
所述位置传感器能够对目标收听者的耳廓进行定位,并将定位信息发送至音频处理***;
所述音频处理***由依次信号连接的音频信号接收头、AD转换器、处理器和与处理器连接的多个音频发射通道组成,所述音频发射通道由DA转换器和音频放大器组成,所述DA转换器连接处理器,音频放大器连接扬声器;
所述处理器与位置传感器连接,所述处理器根据定位信息控制扬声器阵列中每一扬声器对应的音频发射通道的输入信号的延时长短与幅度大小,使不同扬声器发出的声信号到达耳廓所处位置的时间和幅度均相同。
2.如权利要求1所述的虚拟耳机,其特征在于,所述位置传感器为双目视觉图像定位装置。
3. 如权利要求2所述的图像定位装置,其特征在于,所述双目视觉图像定位装置还包括照明装置,所述照明装置上设置有光线传感器,所述照明装置的控制端与光线传感器和处理器连接。
4.如权利要求1所述的虚拟耳机,其特征在于,所述扬声器阵列为共形阵。
5. 如权利要求1所述的虚拟耳机,其特征在于,扬声器阵列的物理口径尺寸D>(R×λ/2)1/2;
其中D为阵列物理口径尺寸,R为目标收听者与扬声器阵列中心位置的距离,λ为音频信号波长。
6.如权利要求1所述的虚拟耳机,其特征在于,所述音频处理***为具备多通道输出的音频处理器,包括但不限于 LM48901、LM48903、ADAU1701、CS47048。
7.如权利要求1所述的虚拟耳机,其特征在于,所述扬声器阵列包括至少四个扬声器。
8.虚拟耳机音频聚焦方法,其特征在于,包括如下步骤:
S1位置传感器对目标收听者的耳廓进行定位,并将定位信息发送至音频处理***中的处理器;
S2处理器根据定位信息计算扬声器阵列中每一扬声器与目标收听者耳廓的距离,并控制对应音频发射通道的输入音频信号的延时长短与幅度大小,使不同扬声器发出的声信号到达耳廓所处位置的时间相同、幅度相同。
9.如权利要求8所述的虚拟耳机音频聚焦方法,其特征在于,所述位置传感器对目标收听者的耳廓进行定位的方法采用双目视觉图像定位方法。
10.如权利要求8所述的虚拟耳机音频聚焦方法,其特征在于,所述步骤S2具体为:
S21处理器根据耳廓定位信息计算出每一扬声器与目标收听者的耳廓距离分别为R1、R2、……RN,对应的声波传播延时分别为t1、t2、……tN,N为扬声器总数;
S22根据α=e-β×R/2计算各个扬声器到达耳廓的声波传输衰减α1、α2、……αN,其中β为声波距离衰减因子;
S23找出声波传输延时中的最大值tmax和声波传输衰减中的最大值αmax,则处理器对各音频通道的延时量为τi=tmax-ti,i=1,……N,幅度加权值为Ai=αmax/αi,i=1,……N。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410504403.XA CN104270693A (zh) | 2014-09-28 | 2014-09-28 | 虚拟耳机 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410504403.XA CN104270693A (zh) | 2014-09-28 | 2014-09-28 | 虚拟耳机 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN104270693A true CN104270693A (zh) | 2015-01-07 |
Family
ID=52162170
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201410504403.XA Pending CN104270693A (zh) | 2014-09-28 | 2014-09-28 | 虚拟耳机 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN104270693A (zh) |
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104618837A (zh) * | 2015-01-29 | 2015-05-13 | 深圳华侨城文化旅游科技有限公司 | 一种影视跳楼机的音箱控制方法及*** |
CN106303787A (zh) * | 2016-10-18 | 2017-01-04 | 杨跃龙 | 逼真还原音源方位的耳机*** |
CN106507006A (zh) * | 2016-11-15 | 2017-03-15 | 四川长虹电器股份有限公司 | 智能电视定向传声的***与方法 |
CN106658306A (zh) * | 2017-01-26 | 2017-05-10 | 苏州佳世达电通有限公司 | 分音装置 |
CN108271098A (zh) * | 2018-02-06 | 2018-07-10 | 深圳市歌美迪电子技术发展有限公司 | 音响机构以及音响*** |
CN108834030A (zh) * | 2018-09-28 | 2018-11-16 | 广州小鹏汽车科技有限公司 | 一种车内声场调节方法及音频*** |
CN110035339A (zh) * | 2018-01-09 | 2019-07-19 | 丰田自动车株式会社 | 对话装置 |
CN111294706A (zh) * | 2020-01-16 | 2020-06-16 | 珠海格力电器股份有限公司 | 一种语音电器控制方法、装置、存储介质及语音电器 |
CN111694156A (zh) * | 2020-05-26 | 2020-09-22 | Oppo广东移动通信有限公司 | 眼镜及其音效的控制方法 |
CN112216266A (zh) * | 2020-10-20 | 2021-01-12 | 傅建玲 | 一种相控多声道声波定向发射方法及*** |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101379875A (zh) * | 2005-12-02 | 2009-03-04 | 雅马哈株式会社 | 位置检测***、用于该位置检测***的音频装置及终端装置 |
US20090304211A1 (en) * | 2008-06-04 | 2009-12-10 | Microsoft Corporation | Loudspeaker array design |
CN101656908A (zh) * | 2008-08-19 | 2010-02-24 | 深圳华为通信技术有限公司 | 控制声音聚焦的方法、通讯设备及通讯*** |
CN101820564A (zh) * | 2010-03-16 | 2010-09-01 | 电子科技大学 | 微型多声道声频定向扬声器 |
CN102555982A (zh) * | 2012-01-20 | 2012-07-11 | 江苏大学 | 基于机器视觉的安全带佩带识别方法及装置 |
CN102860041A (zh) * | 2010-04-26 | 2013-01-02 | 剑桥机电有限公司 | 对收听者进行位置跟踪的扬声器 |
WO2014138134A2 (en) * | 2013-03-05 | 2014-09-12 | Tiskerling Dynamics Llc | Adjusting the beam pattern of a speaker array based on the location of one or more listeners |
-
2014
- 2014-09-28 CN CN201410504403.XA patent/CN104270693A/zh active Pending
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101379875A (zh) * | 2005-12-02 | 2009-03-04 | 雅马哈株式会社 | 位置检测***、用于该位置检测***的音频装置及终端装置 |
US20090304211A1 (en) * | 2008-06-04 | 2009-12-10 | Microsoft Corporation | Loudspeaker array design |
CN101656908A (zh) * | 2008-08-19 | 2010-02-24 | 深圳华为通信技术有限公司 | 控制声音聚焦的方法、通讯设备及通讯*** |
CN101820564A (zh) * | 2010-03-16 | 2010-09-01 | 电子科技大学 | 微型多声道声频定向扬声器 |
CN102860041A (zh) * | 2010-04-26 | 2013-01-02 | 剑桥机电有限公司 | 对收听者进行位置跟踪的扬声器 |
CN102555982A (zh) * | 2012-01-20 | 2012-07-11 | 江苏大学 | 基于机器视觉的安全带佩带识别方法及装置 |
WO2014138134A2 (en) * | 2013-03-05 | 2014-09-12 | Tiskerling Dynamics Llc | Adjusting the beam pattern of a speaker array based on the location of one or more listeners |
Non-Patent Citations (1)
Title |
---|
贺梅英,黄沛天: "声速测量实验中声波衰减现象的研究", 《物理测试》 * |
Cited By (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104618837A (zh) * | 2015-01-29 | 2015-05-13 | 深圳华侨城文化旅游科技有限公司 | 一种影视跳楼机的音箱控制方法及*** |
CN106303787A (zh) * | 2016-10-18 | 2017-01-04 | 杨跃龙 | 逼真还原音源方位的耳机*** |
CN106507006A (zh) * | 2016-11-15 | 2017-03-15 | 四川长虹电器股份有限公司 | 智能电视定向传声的***与方法 |
CN106658306A (zh) * | 2017-01-26 | 2017-05-10 | 苏州佳世达电通有限公司 | 分音装置 |
CN110035339A (zh) * | 2018-01-09 | 2019-07-19 | 丰田自动车株式会社 | 对话装置 |
CN110035339B (zh) * | 2018-01-09 | 2021-02-05 | 丰田自动车株式会社 | 对话装置 |
CN108271098A (zh) * | 2018-02-06 | 2018-07-10 | 深圳市歌美迪电子技术发展有限公司 | 音响机构以及音响*** |
CN108834030A (zh) * | 2018-09-28 | 2018-11-16 | 广州小鹏汽车科技有限公司 | 一种车内声场调节方法及音频*** |
WO2020062978A1 (zh) * | 2018-09-28 | 2020-04-02 | 广州小鹏汽车科技有限公司 | 一种车内声场调节方法及音频*** |
CN111294706A (zh) * | 2020-01-16 | 2020-06-16 | 珠海格力电器股份有限公司 | 一种语音电器控制方法、装置、存储介质及语音电器 |
CN111694156A (zh) * | 2020-05-26 | 2020-09-22 | Oppo广东移动通信有限公司 | 眼镜及其音效的控制方法 |
CN112216266A (zh) * | 2020-10-20 | 2021-01-12 | 傅建玲 | 一种相控多声道声波定向发射方法及*** |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN104270693A (zh) | 虚拟耳机 | |
US10575117B2 (en) | Directional sound modification | |
JP4243612B2 (ja) | 乗物のスピーカー配置 | |
JP2008035472A (ja) | 車内外音響伝送システム | |
KR20140098835A (ko) | 차량에서 사운드를 지향시키기 위한 시스템, 방법, 및 장치 | |
CN102342131A (zh) | 带摄像机的扬声器、信号处理装置以及av*** | |
US20100027806A1 (en) | Distributed emitter voice lift system | |
CN101189912A (zh) | 音频装置和声束控制方法 | |
JP2002538747A (ja) | 指向性マイクロフォン列のシステム | |
US20080123877A1 (en) | Dual-tweeter loudspeaker | |
US9230534B2 (en) | Suppression device for outdoor noise in indoor space | |
US20190014430A1 (en) | Loudspeaker-room system | |
EP4358537A2 (en) | Directional sound modification | |
US20220174395A1 (en) | Auditory augmented reality using selective noise cancellation | |
US20190349551A1 (en) | Surveillance system | |
CN1956607A (zh) | 多通道音频***及用于产生虚拟扬声器声音的方法 | |
US20070165866A1 (en) | Method and apparatus to facilitate conveying audio content | |
EP3198721A1 (en) | Mobile cluster-based audio adjusting method and apparatus | |
JP2006229738A (ja) | 無線接続制御装置 | |
EP0873667B1 (en) | Sound system | |
CN208724209U (zh) | 一种集体优听增益*** | |
WO2005034574A1 (ja) | ヘッドホンによる立体音響再生装置 | |
JP3422296B2 (ja) | 指向性拡声装置 | |
CN109923877B (zh) | 对立体声音频信号进行加权的装置和方法 | |
CN204014074U (zh) | 一种飞翔影院立体声声效装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20150107 |