CN105183421B - 一种虚拟现实三维音效的实现方法及*** - Google Patents

一种虚拟现实三维音效的实现方法及*** Download PDF

Info

Publication number
CN105183421B
CN105183421B CN201510490923.4A CN201510490923A CN105183421B CN 105183421 B CN105183421 B CN 105183421B CN 201510490923 A CN201510490923 A CN 201510490923A CN 105183421 B CN105183421 B CN 105183421B
Authority
CN
China
Prior art keywords
head
user
updated
xcos
relative
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201510490923.4A
Other languages
English (en)
Other versions
CN105183421A (zh
Inventor
林谋广
罗笑南
李占嵩
谭常健
王安正
庄秋雄
朱伟琦
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sun Yat Sen University
Original Assignee
Sun Yat Sen University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sun Yat Sen University filed Critical Sun Yat Sen University
Priority to CN201510490923.4A priority Critical patent/CN105183421B/zh
Publication of CN105183421A publication Critical patent/CN105183421A/zh
Application granted granted Critical
Publication of CN105183421B publication Critical patent/CN105183421B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Stereophonic System (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本发明公开了一种虚拟现实三维音效的实现方法及***，其中，该方法包括：获取用户的头部相对于竖直方向的偏转角度；判断用户的头部相对于竖直方向的偏转角度是否大于阈值；若是，则根据用户的头部相对于竖直方向的偏转角度对用户的头部在虚拟空间中的相对位置坐标进行更新，并根据更新结果对头部相关脉冲响应函数进行更新，采用更新后的头部相关脉冲响应函数对声音进行叠加，获取叠加组成的第一信号，将第一信号输出到用户的耳机上；若否，则采用头部相关脉冲响应函数对声音叠加组成，获取叠加组成的第二信号，将第二信号输出到用户的耳机上。实施本发明实施例，可以通过简单的头部动作控制实现虚拟现实三维音效效果，极大提高了用户的体验感。

Description

一种虚拟现实三维音效的实现方法及***
技术领域
本发明涉及虚拟现实三维音效技术领域，尤其涉及一种虚拟现实三维音效的实现方法及***。
背景技术
目前常见的立体声回放技术，环绕声效果，常见于商业影院以及家庭影院的音响***。简单地讲，环绕声就是在人的不同方向放置发声装置，从而实现使得听者能够分辨来自各个方向的声音，增加声音的立体和真实感。和环绕声一样，虚拟三维音效也希望能够提高声音的立体感，但只需要使用两个声源，例如耳机的两个发声单元或者两个音箱。虚拟三维音效是利用对人类听觉空间定位，尝试还原人在自然环境中对声音的定位。由于人在声音定位时输入源只有左耳和右耳鼓膜的振动信息，因此我们理论上我们只需要两个声道即能模拟自然界中任意位置的外部声源。
但是很多的时候，只有单个声源的时候，人们也想体验立体三维音效，这时候，往往是不能得到满足的；或是听力出现障碍的人群，若是想享受一下立体三维音效的效果，那就是难上加难了；因此，用户急需一种在单个声源的情况下或在听力出现障碍的情况下，都能让用户体验到立体三维音效的效果的设备。
发明内容
本发明的目的是在于克服现有技术的不足，本发明提供了一种虚拟现实三维音效的实现方法及***，以使用户得到更好的体验效果。
为了解决上述问题，本发明提出了一种虚拟现实三维音效的实现方法，所述方法包括：
获取用户的头部相对于竖直方向的偏转角度；
根据获取的所述用户的头部相对于竖直方向的偏转角度，判断所述头部相对于竖直方向的偏转角度是否大于阈值；
若是，则根据所述用户的头部相对于竖直方向的偏转角度对所述用户的头部在虚拟空间中的相对位置坐标进行更新，获取更新结果，根据所述更新结果对头部相关脉冲响应函数进行更新，利用更新后的头部相关脉冲响应函数对声音进行叠加，获取叠加组成的第一信号，将所述第一信号输出到所述用户的耳机上；
若否，采用头部相关脉冲响应函数对声音叠加组成，获取叠加组成的第二信号，将所述第二信号输出到所述用户的耳机上。
优选地，所述获取用户的头部相对于竖直方向的偏转角度包括：
采用结合加速仪和陀螺仪的卡尔曼滤波器获取用户的头部相对于竖直方向的偏转角度。
优选地，所述对所述用户的头部在虚拟空间中的相对位置坐标进行更新的步骤包括：
根据所述用户的头部相对于竖直方向的偏转角度，利用三角函数公式，获取所述用户的头部在虚拟空间中向竖直和水平方向移动的距离；
根据获取所述用户的头部在虚拟空间中向竖直和水平方向移动的距离，对所述用户在虚拟空间中的相对位置进行更新。
所述根据所述更新结果对头部相关脉冲响应函数进行更新的步骤包括：
所述更新结果为对所述用户的头部在虚拟空间中的相对位置坐标进行更新，获取更新后的所述用户的头部的左耳及右耳的三维坐标；
结合所述获取更新的所述用户的头部的左耳及右耳的三维坐标、头部相关脉冲响应数据库的数据，通过插值方式逐步更新头部相关脉冲响应函数，获取更新后的头部相关脉冲响应函数。
优选地，所述用户的头部的左耳及右耳的三维坐标的更新步骤包括：
判断用户的头部相对于竖直方向的偏转方向是向左偏转、向右偏转、向前偏转或向后偏转；
若所述用户的头部是向左偏转，则更新后的左耳A的坐标为(-x·cos(β-α),0,x·sin(β-α))，右耳B的坐标为(x·cos(β+α),0,x·sin(β+α))；
若所述用户的头部是向右偏转，则更新后的左耳A的坐标为(-x·cos(β+α),0,x·sin(β-α))，右耳B的坐标为(x·cos(β-α),0,x·sin(β-α))；
若所述用户的头部是向前偏转，则更新后的左耳A的坐标为(-x·cos(β),|x·cosβ-x·cos(β-α)|,x·sin(β-α))，右耳B的坐标为(x·cos(β),|x·cosβ-x·cos(β-α)|,x·sin(β-α))；
若所述用户的头部是向后偏转，则更新后的左耳A的坐标为(-x·cos(β),-|x·cosβ-x·cos(β-α)|,x·sin(β-α))，右耳B的坐标为(x·cos(β),-|x·cosβ-x·cos(β-α)|,x·sin(β-α))；
式中，x为左耳及右耳分别到坐标系原点的距离；β为左耳及右耳分别到坐标系的原点O的连线与X轴形成的夹角；α为用户头部相对竖直方向偏转的角度。
另外，本发明还提出了一种虚拟现实三维音效的实现***，所述***包括：
角度获取模块：用于获取用户的头部相对于竖直方向的偏转角度；
判断模块：用于判断所述获取用户的头部相对于竖直方向的偏转角度是否大于阈值；
更新模块：用于当判断模块判断为是时，则根据所述用户的头部相对于竖直方向的偏转角度对所述用户的头部在虚拟空间中的相对位置坐标进行更新，获取更新结果，根据所述更新结果对头部相关脉冲响应函数进行更新，获取更新后的头部相关脉冲响应函数；
声音叠加模块：用于根据所述更新后的头部相关脉冲响应函数对声音进行叠加，获取叠加组成的第一信号，或用于当判断模块判断为否时，则根据所述头部相关脉冲响应函数对声音进行叠加，获取叠加组成的第二信号；
信号输出模块：用于将获取的所述第一信号输出到所述用户的耳机上；或用于将获取的所述第二信号输出到所述用户的耳机上。
优选地，所述更新模块包括：
用户相对位置更新单元：用于根据所述用户的头部相对于竖直方向的偏转角度对所述用户的头部在虚拟空间中的相对位置坐标进行更新；
函数更新单元：用于根据更新后的所述用户的头部在虚拟空间中的相对位置坐标更新所述头部相关脉冲响应函数。
优选地，所述用户相对位置更新单元包括：
距离获取子单元：用于根据所述用户的头部相对于竖直方向的偏转角度，利用三角函数公式，获所述用户在虚拟空间中向竖直和水平方向移动的距离；
用户相对位置更新子单元：用于根据所述用户的头部在虚拟空间中向竖直和水平方向移动的距离，对所述用户的头部在虚拟空间中的相对位置坐标进行更新。
优选地，所述函数更新单元包括：
数据获取子单元：用于获取所述用户的头部的左右耳的三维坐标和头部相关脉冲响应数据库的数据；
函数更新子单元：用于根据获取所述用户的头部的左右耳的三维坐标和所述头部相关脉冲响应数据库的数据，通过插值方式逐步更新头部相关脉冲响应函数，获取更新后的头部相关脉冲响应函数。
优选地，所述声音叠加模块包括：
第一叠加单元：用于根据所述更新后的头部相关脉冲响应函数对声音进行叠加，获取叠加组成的所述第一信号；
第二叠加单元：用于当判断模块判断为否时，根据所述头部相关脉冲响应函数对声音叠加组成，获取叠加组成的所述第二信号。
在本发明实施例中，可以实现使用头部控制来获取虚拟三维音效的效果，操作简单，适合广大的人群使用，特别是仅仅依靠听觉的残疾人士，可以提高用户的使用体验感。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其它的附图。
图1是本发明实施例的虚拟现实三维音效的实现方法的流程示意图；
图2是本发明实施例的三维坐标系示意图；
图3是本发明实施例的虚拟现实三维音效的实现***的结构组成示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
图1是本发明实施例的虚拟现实三维音效的实现方法的流程示意图，如图1所示，该方法包括：
S11：获取用户的头部相对于竖直方向的偏转角度；
S12：根据获取用户的头部相对于竖直方向的偏转角度，判断用户的头部相对于竖直方向的偏转角度是否大于阈值，若是，则进入S13，若否，则进入S17；
S13：若是，则根据用户的头部相对于竖直方向的偏转角度对用户的头部在虚拟空间中的相对位置坐标进行更新，获取更新结果；
S14：根据更新结果对头部相关脉冲响应函数进行更新；
S15：利用更新后的用户的头部相关脉冲响应函数对声音进行叠加，获取叠加组成的第一信号；
S16：将获取的第一信号输出到用户的耳机上；
S17：若否，则无需更新用户在虚拟空间中的相对位置，采用用户的头部相关脉冲响应函数对声音叠加组成，获取叠加组成的第二信号；
S18：将获取的第二信号输出到用户的耳机上。
其中，对S11作进一步说明：
构建三维坐标系，获取用户头部坐标及双耳的坐标，采用加速仪和陀螺仪并结合卡尔曼滤波器获取用户的头部相对于竖直方向的偏转角度，即可获取双耳相对于竖直方向的偏转角度；这样可以解决单一使用加速仪可能存在的不稳定性问题或单一使用陀螺仪可能存在的误差较大的问题。
其中，对S12作进一步说明：
在本实施例中，设置阈值为0.5度，当用户的头部相对于竖直方向偏转小于或等于0.5度时，判断为不需要更新用户在虚拟空间中的相对位置；当用户的头部相对于竖直方向偏转大于0.5度时，判断为需要更新用户在虚拟空间中的相对位置。
对S13作进一步说明：
根据用户的头部相对于竖直方向的偏转角度，利用三角函数公式，获取用户的头部在虚拟空间中向竖直和水平方向移动的距离。
根据获取的用户的头部在虚拟空间中向竖直和水平方向移动的距离，对用户的头部在虚拟空间中的相对位置坐标进行更新。
其中，以用户的双耳作为判别用户的相对虚拟空移动端的距离；如图2所示，使用用户的头部中心构建一个三维的坐标系，其中左耳A及右耳B分别到坐标系的原点O的连线与X轴形成的夹角为β，，且左耳A及右耳B分别到坐标系的原点O的连线长度为x，用户的头部相对于竖直方向的偏转角度为α，即用户的双耳相对于竖直方向的偏转角度也为α，左耳及右耳相对于坐标系原点的距离都为x，左耳向上下移动的距离为hl＝|x·sinβ-x·sin(β±α)|，右耳向上下移动的距离为
用户的双耳相对于水平方向移动的距离，左耳向水平位置移动距离为sl＝|x·cosβ-x·cos(β±α)|，右耳向水平位置移动距离为获取用户的头部竖直和水平方向移动的距离。
根据勾股定理即可得到左耳实际位移的距离为右耳实际位移的距离为即可根据位移的距离更新用户在虚拟空间中的相对位置，获取更新头部三维坐标和更新的左耳及右耳的三维坐标；
判断用户的头部相对于竖直方向的偏转方向是向左偏转、向右偏转、向前偏转或向后偏转；
若所述用户的头部是向左偏转，则更新后的左耳A的坐标为(-x·cos(β-α),0,x·sin(β-α))，右耳B的坐标为(x·cos(β+α),0,x·sin(β+α))；
若所述用户的头部是向右偏转，则更新后的左耳A的坐标为(-x·cos(β+α),0,x·sin(β-α))，右耳B的坐标为(x·cos(β-α),0,x·sin(β-α))；
若所述用户的头部是向前偏转，则更新后的左耳A的坐标为(-x·cos(β),|x·cosβ-x·cos(β-α)|,x·sin(β-α))，右耳B的坐标为(x·cos(β),|x·cosβ-x·cos(β-α)|,x·sin(β-α))；
若所述用户的头部是向后偏转，则更新后的左耳A的坐标为(-x·cos(β),-|x·cosβ-x·cos(β-α)|,x·sin(β-α))，右耳B的坐标为(x·cos(β),-|x·cosβ-x·cos(β-α)|,x·sin(β-α))。
其中，对S14作进一步说明：
步骤S14中的更新结果为对用户的头部在虚拟空间中的相对位置坐标进行更新，获取更新后的用户的头部的左耳及右耳的三维坐标；
结合获取更新后的用户的头部的左耳及右耳的三维坐标、头部相关脉冲响应数据库的数据，通过插值方式逐步更新头部相关脉冲响应函数，获取更新后的头部相关脉冲响应函数。
其中，对S15或S17作进一步说明：
声音即为声源振动发出的声音信号；通过头部相关脉冲响应函数对声音信号进行叠加，获取第一信号或第二信号。
另外，本发明实施例还提供一种虚拟现实三维音效的实现***，如图3所示，该***包括：
角度获取模块31：用于获取用户的头部相对于竖直方向的偏转角度；
判断模块32：用于判断获取用户的头部相对于竖直方向的偏转角度是否大于阈值；
更新模块33：用于当判断模块判断为是时，则根据所述用户的头部相对于竖直方向的偏转角度对所述用户的头部在虚拟空间中的相对位置坐标进行更新，获取更新结果，根据所述更新结果对头部相关脉冲响应函数进行更新，获取更新后的头部相关脉冲响应函数；
声音叠加模块34：用于根据所述更新后的头部相关脉冲响应函数对声音进行叠加，获取叠加组成的第一信号，或用于当判断模块判断为否时，则根据所述头部相关脉冲响应函数对声音进行叠加，获取叠加组成的第二信号；
信号输出模块35：用于将获取的第一信号输出到用户的耳机上；或用于将获取的第二信号输出到用户的耳机上。
其中，更新模块33包括：
用户相对位置更新单元：用于根据用户的头部相对于竖直方向的偏转角度对用户的头部在虚拟空间中的相对位置坐标进行更新；
函数更新单元：用于根据更新后用户的头部在虚拟空间中的相对位置坐标更新头部相关脉冲响应函数。
其中，用户相对位置更新单元包括：
距离获取子单元：用于根据头部相对于竖直方向的偏转角度，利用三角函数公式，获取用户的头部在虚拟空间中向竖直和水平方向移动的距离；
其中，以用户的双耳作为判别用户的相对虚拟空移动端的距离；如图2所示，使用用户的头部中心构建一个三维的坐标系，其中左耳A及右耳B分别到坐标系的原点O的连线与X轴形成的夹角为β，且左耳A及右耳B分别到坐标系的原点O的连线长度为x，用户的头部相对于竖直方向的偏转角度为α，即用户的双耳相对于竖直方向的偏转角度也为α，左耳及右耳相对于坐标系原点的距离都为x，左耳向上下移动的距离为hl＝|x·sinβ-x·sin(β±α)|，右耳向上下移动的距离为
用户的双耳相对于水平方向移动的距离，左耳向水平位置移动距离为sl＝|x·cosβ-x·cos(β±α)|，右耳向水平位置移动距离为获取用户的头部竖直和水平方向移动的距离。
更新子单元：用于根据用户的头部在虚拟空间中向竖直和水平方向移动的距离，对用户的头部在虚拟空间中的相对位置坐标进行更新。
根据上述获取的左耳向上下移动的距离为hl、右耳向上下移动的距离为hr、左耳向水平位置移动距离为sl和左耳向水平位置移动距离为sr；采用勾股定理，即可得到左耳实际位移的距离右耳实际位移的距离即可根据位移的距离更新用户在虚拟空间中的相对位置，获取更新头部三维坐标和更新的左耳及右耳的三维坐标；
若所述用户的头部是向左偏转，则更新后的左耳A的坐标为(-x·cos(β-α),0,x·sin(β-α))，右耳B的坐标为(x·cos(β+α),0,x·sin(β+α))；
若所述用户的头部是向右偏转，则更新后的左耳A的坐标为(-x·cos(β+α),0,x·sin(β-α))，右耳B的坐标为(x·cos(β-α),0,x·sin(β-α))；
若所述用户的头部是向前偏转，则更新后的左耳A的坐标为(-x·cos(β),|x·cosβ-x·cos(β-α)|,x·sin(β-α))，右耳B的坐标为(x·cos(β),|x·cosβ-x·cos(β-α)|,x·sin(β-α))；
若所述用户的头部是向后偏转，则更新后的左耳A的坐标为(-x·cos(β),-|x·cosβ-x·cos(β-α)|,x·sin(β-α))，右耳B的坐标为(x·cos(β),-|x·cosβ-x·cos(β-α)|,x·sin(β-α))。
其中，所述函数更新单元包括：
数据获取子单元：用于获取所述用户的头部的左右耳的三维坐标和头部相关脉冲响应数据库的数据；
函数更新子单元：用于根据获取所述用户的头部的左右耳的三维坐标和所述头部相关脉冲响应数据库的数据，通过插值方式逐步更新头部相关脉冲响应函数，获取更新后的头部相关脉冲响应函数。
其中，声音叠加模块34包括：
第一叠加单元：用于根据更新后的头部相关脉冲响应函数对声音进行叠加，获取叠加组成的第一信号；
第二叠加单元：用于当判断模块判断为否时，根据所述头部相关脉冲响应函数对声音叠加组成，获取叠加组成的所述第二信号。
在本发明实施例中，可以实现使用头部控制来获取虚拟三维音效的效果，操作简单，适合广大的人群使用，特别是仅仅依靠听觉的残疾人士，可以提高用户的使用体验感。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成，该程序可以存储于一计算机可读存储介质中，存储介质可以包括：只读存储器(ROM，Read Only Memory)、随机存取存储器(RAM，RandomAccess Memory)、磁盘或光盘等。
另外，以上对本发明实施例所提供的虚拟现实三维音效的实现方法及***进行了详细介绍，本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想；同时，对于本领域的一般技术人员，依据本发明的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本发明的限制。

Claims (10)

1.一种虚拟现实三维音效的实现方法，其特征在于，所述方法包括：
获取用户的头部相对于竖直方向的偏转角度；
根据获取的所述头部相对于竖直方向的偏转角度，判断所述用户的头部相对于竖直方向的偏转角度是否大于阈值；
若是，则根据所述用户的头部相对于竖直方向的偏转角度对所述用户的头部在虚拟空间中的相对位置坐标进行更新，获取更新结果，根据所述更新结果对头部相关脉冲响应函数进行更新，采用更新后的头部相关脉冲响应函数对声音进行叠加，获取叠加组成的第一信号，将所述第一信号输出到所述用户的耳机上；
若否，采用头部相关脉冲响应函数对声音叠加组成，获取叠加组成的第二信号，将所述第二信号输出到所述用户的耳机上。
2.根据权利要求1所述的一种虚拟现实三维音效的实现方法，其特征在于，所述获取用户的头部相对于竖直方向的偏转角度的步骤包括：
采用加速仪和陀螺仪结合卡尔曼滤波器获取用户的头部相对于竖直方向的偏转角度。
3.根据权利要求1所述的一种虚拟现实三维音效的实现方法，其特征在于，所述对所述用户的头部在虚拟空间中的相对位置坐标进行更新的步骤包括：
根据所述用户的头部相对于竖直方向的偏转角度，利用三角函数公式，获取所述用户的头部在虚拟空间中向竖直和水平方向移动的距离；
根据获取所述用户在虚拟空间中向竖直和水平方向移动的距离，对所述用户的头部在虚拟空间中的相对位置坐标进行更新。
4.根据权利要求1所述的一种虚拟现实三维音效的实现方法，其特征在于，所述根据所述更新结果对头部相关脉冲响应函数进行更新的步骤包括：
所述更新结果为对所述用户的头部在虚拟空间中的相对位置坐标进行更新，获取更新后的所述用户的头部的左耳及右耳的三维坐标；
结合所述获取更新后的所述用户的头部的左耳及右耳的三维坐标、头部相关脉冲响应数据库的数据，通过插值方式逐步更新头部相关脉冲响应函数，获取更新后的头部相关脉冲响应函数。
5.根据权利要求4所述的一种虚拟现实三维音效的实现方法，其特征在于，所述用户的头部的左耳及右耳的三维坐标的更新步骤包括：
判断用户的头部相对于竖直方向的偏转方向是向左偏转、向右偏转、向前偏转或向后偏转；
若所述用户的头部是向左偏转，则更新后的左耳A的坐标为(-x·cos(β-α),0,x·sin(β-α))，右耳B的坐标为(x·cos(β+α),0,x·sin(β+α))；
若所述用户的头部是向右偏转，则更新后的左耳A的坐标为(-x·cos(β+α),0,x·sin(β-α))，右耳B的坐标为(x·cos(β-α),0,x·sin(β-α))；
若所述用户的头部是向前偏转，则更新后的左耳A的坐标为(-x·cos(β),|x·cosβ-x·cos(β-α)|,x·sin(β-α))，右耳B的坐标为(x·cos(β),|x·cosβ-x·cos(β-α)|,x·sin(β-α))；
若所述用户的头部是向后偏转，则更新后的左耳A的坐标为(-x·cos(β),-|x·cosβ-x·cos(β-α)|,x·sin(β-α))，右耳B的坐标为(x·cos(β),-|x·cosβ-x·cos(β-α)|,x·sin(β-α))；
式中，x为左耳及右耳分别到坐标系原点O的距离；β为左耳及右耳分别到坐标系的原点O的连线与X轴形成的夹角；α为用户头部相对竖直方向偏转的角度。
6.一种虚拟现实三维音效的实现***，其特征在于，所述***包括：
角度获取模块：用于获取用户的头部相对于竖直方向的偏转角度；
判断模块：用于判断所述获取用户的头部相对于竖直方向的偏转角度是否大于阈值；
更新模块：用于当判断模块判断为是时，则根据所述用户的头部相对于竖直方向的偏转角度对所述用户的头部在虚拟空间中的相对位置坐标进行更新，获取更新结果，根据所述更新结果对头部相关脉冲响应函数进行更新，获取更新后的头部相关脉冲响应函数；
声音叠加模块：用于根据所述更新后的头部相关脉冲响应函数对声音进行叠加，获取叠加组成的第一信号；或用于当判断模块判断为否时，则根据所述头部相关脉冲响应函数对声音进行叠加，获取叠加组成的第二信号；
信号输出模块：用于将获取的所述第一信号输出到所述用户的耳机上；或用于将获取的所述第二信号输出到所述用户的耳机上。
7.根据权利要求6所述的一种虚拟现实三维音效的实现***，其特征在于，所述更新模块包括：
用户相对位置更新单元：用于根据所述用户的头部相对于竖直方向的偏转角度对所述用户的头部在虚拟空间中的相对位置坐标进行更新；
函数更新单元：用于根据更新后的所述用户的头部在虚拟空间中的相对位置坐标更新所述头部相关脉冲响应函数。
8.根据权利要求6所述的一种虚拟现实三维音效的实现***，其特征在于，所述用户相对位置更新单元包括：
距离获取子单元：用于根据所述头部相对于竖直方向的偏转角度，利用三角函数公式，获所述用户的头部在虚拟空间中向竖直和水平方向移动的距离；
用户相对位置更新子单元：用于根据所述用户在虚拟空间中向竖直和水平方向移动的距离，对所述用户的头部在虚拟空间中的相对位置坐标进行更新。
9.根据权利要求7所述的一种虚拟现实三维音效的实现***，其特征在于，所述函数更新单元包括：
数据获取子单元：用于获取所述用户的头部的左右耳的三维坐标和头部相关脉冲响应数据库的数据；
函数更新子单元：用于根据获取所述用户的头部的左右耳的三维坐标和所述头部相关脉冲响应数据库的数据，通过插值方式逐步更新头部相关脉冲响应函数，获取更新后的头部相关脉冲响应函数。
10.根据权利要求6所述的一种虚拟现实三维音效的实现***，其特征在于，所述声音叠加模块包括：
第一叠加单元：用于根据所述更新后的头部相关脉冲响应函数对声音进行叠加，获取叠加组成的所述第一信号；
第二叠加单元：用于当判断模块判断为否时，根据所述头部相关脉冲响应函数对声音叠加组成，获取叠加组成的所述第二信号。
CN201510490923.4A 2015-08-11 2015-08-11 一种虚拟现实三维音效的实现方法及*** Active CN105183421B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510490923.4A CN105183421B (zh) 2015-08-11 2015-08-11 一种虚拟现实三维音效的实现方法及***

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510490923.4A CN105183421B (zh) 2015-08-11 2015-08-11 一种虚拟现实三维音效的实现方法及***

Publications (2)

Publication Number Publication Date
CN105183421A CN105183421A (zh) 2015-12-23
CN105183421B true CN105183421B (zh) 2018-09-28

Family

ID=54905528

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510490923.4A Active CN105183421B (zh) 2015-08-11 2015-08-11 一种虚拟现实三维音效的实现方法及***

Country Status (1)

Country Link
CN (1) CN105183421B (zh)

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106648528A (zh) * 2016-11-11 2017-05-10 宇龙计算机通信科技(深圳)有限公司 虚拟现实设备的声音调整方法、装置及虚拟现实设备
CN107077318A (zh) * 2016-12-14 2017-08-18 深圳前海达闼云端智能科技有限公司 一种声音处理方法、装置、电子设备及计算机程序产品
CN108279860B (zh) * 2017-06-14 2021-05-14 深圳市佳创视讯技术股份有限公司 一种提升虚拟现实临场音效体验的方法及***
WO2020102994A1 (zh) * 2018-11-20 2020-05-28 深圳市欢太科技有限公司 3d音效实现方法、装置、存储介质及电子设备
CN109640243A (zh) * 2018-12-06 2019-04-16 广州番禺巨大汽车音响设备有限公司 基于dsp音效增强的虚拟三维声效处理方法及***
US20200304933A1 (en) * 2019-03-19 2020-09-24 Htc Corporation Sound processing system of ambisonic format and sound processing method of ambisonic format
CN112071326A (zh) * 2020-09-07 2020-12-11 三星电子（中国）研发中心 音效处理方法和装置
CN112637755A (zh) * 2020-12-22 2021-04-09 广州番禺巨大汽车音响设备有限公司 一种基于无线连接的音频播放控制方法、装置及播放***
CN113573203B (zh) * 2021-09-26 2022-03-04 广州朗国电子科技股份有限公司 一种非接触式耳机的控制方法、智能耳机及存储介质
CN114339582B (zh) * 2021-11-30 2024-02-06 北京小米移动软件有限公司 双通道音频处理、方向感滤波器生成方法、装置以及介质
CN117835139A (zh) * 2022-07-19 2024-04-05 深圳思科尼亚科技有限公司 音频信号处理方法、装置、电子设备及存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102595153A (zh) * 2011-01-13 2012-07-18 承景科技股份有限公司 可动态地提供三维音效的显示***及相关方法
CN103702264A (zh) * 2012-09-27 2014-04-02 英特尔公司 相机驱动的音频空间化
CN104618843A (zh) * 2013-11-05 2015-05-13 奥迪康有限公司 包括头部相关传递函数数据库的双耳助听***

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB0419346D0 (en) * 2004-09-01 2004-09-29 Smyth Stephen M F Method and apparatus for improved headphone virtualisation
JP4735993B2 (ja) * 2008-08-26 2011-07-27 ソニー株式会社 音声処理装置、音像定位位置調整方法、映像処理装置及び映像処理方法
CN102572676B (zh) * 2012-01-16 2016-04-13 华南理工大学 一种虚拟听觉环境实时绘制方法
CN104284291B (zh) * 2014-08-07 2016-10-05 华南理工大学 5.1通路环绕声的耳机动态虚拟重放方法及其实现装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102595153A (zh) * 2011-01-13 2012-07-18 承景科技股份有限公司 可动态地提供三维音效的显示***及相关方法
CN103702264A (zh) * 2012-09-27 2014-04-02 英特尔公司 相机驱动的音频空间化
CN104618843A (zh) * 2013-11-05 2015-05-13 奥迪康有限公司 包括头部相关传递函数数据库的双耳助听***

Also Published As

Publication number Publication date
CN105183421A (zh) 2015-12-23

Similar Documents

Publication Publication Date Title
CN105183421B (zh) 一种虚拟现实三维音效的实现方法及***
US11622224B2 (en) Binaural sound in visual entertainment media
CN107103801B (zh) 远程三维场景互动教学***及控制方法
US20190268697A1 (en) Method and apparatus for processing audio data in sound field
EP3343349B1 (en) An apparatus and associated methods in the field of virtual reality
CN108141696A (zh) 用于空间音频调节的***和方法
US11516616B2 (en) System for and method of generating an audio image
US20090080632A1 (en) Spatial audio conferencing
US9781538B2 (en) Multiuser, geofixed acoustic simulations
CN111294724B (zh) 多个音频流的空间重新定位
CN113396337A (zh) 使用环境数据的音频增强
Spagnol et al. Current use and future perspectives of spatial audio technologies in electronic travel aids
WO2021258102A1 (en) Spatialized audio relative to a mobile peripheral device
WO2019055572A1 (en) DEVICES AND METHODS FOR BINAURAL SPATIAL PROCESSING AND AUDIO SIGNAL PROJECTION
CN104581610A (zh) 一种虚拟立体声合成方法及装置
US20170272889A1 (en) Sound reproduction system
US20190170533A1 (en) Navigation by spatial placement of sound
KR20160061315A (ko) 사운드 신호 처리 방법
US20210219089A1 (en) Spatial repositioning of multiple audio streams
WO2022004421A1 (ja) 情報処理装置、出力制御方法、およびプログラム
US20220279303A1 (en) Spatial audio for wearable devices
CN106658345B (zh) 一种虚拟环绕声播放方法、装置和设备
CN109417677A (zh) 用于预渲染的双耳音频的头部跟踪
CN114339582B (zh) 双通道音频处理、方向感滤波器生成方法、装置以及介质
US10735885B1 (en) Managing image audio sources in a virtual acoustic environment

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant