CN109308179A - 3d音效处理方法及相关产品 - Google Patents

3d音效处理方法及相关产品 Download PDF

Info

Publication number
CN109308179A
CN109308179A CN201811115240.0A CN201811115240A CN109308179A CN 109308179 A CN109308179 A CN 109308179A CN 201811115240 A CN201811115240 A CN 201811115240A CN 109308179 A CN109308179 A CN 109308179A
Authority
CN
China
Prior art keywords
mono
data collection
target
mono data
datas
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201811115240.0A
Other languages
English (en)
Inventor
严锋贵
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Oppo Mobile Telecommunications Corp Ltd
Original Assignee
Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Oppo Mobile Telecommunications Corp Ltd filed Critical Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority to CN201811115240.0A priority Critical patent/CN109308179A/zh
Publication of CN109308179A publication Critical patent/CN109308179A/zh
Priority to PCT/CN2019/100252 priority patent/WO2020063147A1/en
Priority to EP19194568.2A priority patent/EP3629145B1/en
Priority to US16/569,053 priority patent/US10993063B2/en
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/167Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S7/00Indicating arrangements; Control arrangements, e.g. balance control
    • H04S7/30Control circuits for electronic adaptation of the sound field
    • H04S7/302Electronic adaptation of stereophonic sound system to listener position or orientation
    • H04S7/303Tracking of listener position or orientation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S3/00Systems employing more than two channels, e.g. quadraphonic
    • H04S3/008Systems employing more than two channels, e.g. quadraphonic in which the audio signals are in digital form, i.e. employing more than two discrete digital channels
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/165Management of the audio stream, e.g. setting of volume, audio stream path
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S2400/00Details of stereophonic systems covered by H04S but not provided for in its groups
    • H04S2400/01Multi-channel, i.e. more than two input channels, sound reproduction with two speakers wherein the multi-channel information is substantially preserved
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S2400/00Details of stereophonic systems covered by H04S but not provided for in its groups
    • H04S2400/11Positioning of individual sound objects, e.g. moving airplane, within a sound field
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S7/00Indicating arrangements; Control arrangements, e.g. balance control
    • H04S7/30Control circuits for electronic adaptation of the sound field
    • H04S7/302Electronic adaptation of stereophonic sound system to listener position or orientation
    • H04S7/303Tracking of listener position or orientation
    • H04S7/304For headphones

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Acoustics & Sound (AREA)
  • Signal Processing (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Stereophonic System (AREA)

Abstract

本申请实施例公开了一种3D音效处理方法及相关产品,该方法包括:在虚拟现实场景中获取目标声源对应的预先设置的八个单声道声源的八个第一位置,以及所述八个单声道声源对应的八个单声道数据,每一单声道声源对应一个单声道数据,每一单声道声源位置对应唯一三维坐标;获取目标对象在所述虚拟现实场景中的第二位置,所述第二位置对应一个三维坐标,所述八个第一位置与所述第二位置基于同一坐标原点;确定所述八个第一位置与所述第二位置之间的距离,得到八个距离值;依据所述八个距离值对所述八个单声道数据进行调节;将调节后的所述八个单声道数据进行合成,得到7.1声道数据。采用本申请实施例能够合成7.1声道数据。

Description

3D音效处理方法及相关产品
技术领域
本申请涉及虚拟/增强现实技术领域,具体涉及一种3D音效处理方法及相关产品。
背景技术
随着电子设备(如手机、平板电脑等)的大量普及应用,电子设备能够支持的应用越来越多,功能越来越强大,电子设备向着多样化、个性化的方向发展,成为用户生活中不可缺少的电子用品。
随着技术发展,虚拟现实在电子设备中也得到了迅猛发展,然而,虚拟现实产品中,现有技术中耳机接收的音频数据往往是2D音频数据,因此,无法给用户带来声音的真实感,降低了用户体验。
发明内容
本申请实施例提供了一种3D音效处理方法及相关产品,能够合成7.1声道,提升用户体验。
第一方面,本申请实施例提供一种3D音效处理方法,包括:
在虚拟现实场景中获取目标声源对应的预先设置的八个单声道声源的八个第一位置,以及所述八个单声道声源对应的八个单声道数据,每一单声道声源对应一个单声道数据,每一单声道声源位置对应唯一三维坐标;
获取目标对象在所述虚拟现实场景中的第二位置,所述第二位置对应一个三维坐标,所述八个第一位置与所述第二位置基于同一坐标原点;
确定所述八个第一位置与所述第二位置之间的距离,得到八个距离值;
依据所述八个距离值对所述八个单声道数据进行调节;
将调节后的所述八个单声道数据进行合成,得到7.1声道数据。
第二方面,本申请实施例提供了一种3D音效处理装置,所述3D音效处理装置包括:第一获取单元、第二获取单元、确定单元、调节单元和合成单元,其中,
所述第一获取单元,用于在虚拟现实场景中获取目标声源对应的预先设置的八个单声道声源的八个第一位置,以及所述八个单声道声源对应的八个单声道数据,每一单声道声源对应一个单声道数据,每一单声道声源位置对应唯一三维坐标;
所述第二获取单元,用于获取目标对象在所述虚拟现实场景中的第二位置,所述第二位置对应一个三维坐标,所述八个第一位置与所述第二位置基于同一坐标原点;
所述确定单元,用于确定所述八个第一位置与所述第二位置之间的距离,得到八个距离值;
所述调节单元,用于依据所述八个距离值对所述八个单声道数据进行调节;
所述合成单元,用于将调节后的所述八个单声道数据进行合成,得到7.1声道数据。
第三方面,本申请实施例提供一种电子设备,包括处理器、存储器、通信接口,以及一个或多个程序,其中,上述一个或多个程序被存储在上述存储器中,并且被配置由上述处理器执行,上述程序包括用于执行本申请实施例第一方面中的步骤的指令。
第四方面,本申请实施例提供了一种计算机可读存储介质,其中,上述计算机可读存储介质存储用于电子数据交换的计算机程序,其中,上述计算机程序使得计算机执行如本申请实施例第一方面中所描述的部分或全部步骤。
第五方面,本申请实施例提供了一种计算机程序产品,其中,上述计算机程序产品包括存储了计算机程序的非瞬时性计算机可读存储介质,上述计算机程序可操作来使计算机执行如本申请实施例第一方面中所描述的部分或全部步骤。该计算机程序产品可以为一个软件安装包。
可以看出,本申请实施例中所描述的3D音效处理方法及相关产品,在虚拟现实场景中获取目标声源对应的预先设置的八个单声道声源的八个第一位置,以及八个单声道声源对应的八个单声道数据,每一单声道声源对应一个单声道数据,每一单声道声源位置对应唯一三维坐标,获取目标对象在虚拟现实场景中的第二位置,第二位置对应一个三维坐标,八个第一位置与第二位置基于同一坐标原点,确定八个第一位置与第二位置之间的距离,得到八个距离值,依据八个距离值对八个单声道数据进行调节,将调节后的八个单声道数据进行合成,得到7.1声道数据,能够依据虚拟现实场景中的位置,合成7.1声道数据,提升了用户体验。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1A是本申请实施例提供的一种电子设备的结构示意图;
图1B是本申请实施例公开的一种3D音效处理方法的流程示意图;
图1C是本申请实施例公开的3D音效处理方法的场景演示示意图;
图2是本申请实施例公开的另一种3D音效处理方法的流程示意图;
图3是本申请实施例公开的另一种3D音效处理方法的流程示意图;
图4是本申请实施例公开的另一种电子设备的结构示意图;
图5A是本申请实施例公开的一种3D音效处理装置的结构示意图;
图5B是本申请实施例公开的一种3D音效处理装置的另一结构示意图。
具体实施方式
为了使本技术领域的人员更好地理解本申请方案,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别不同对象,而不是用于描述特定顺序。此外,术语“包括”和“具有”以及它们任何变形,意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、***、产品或设备没有限定于已列出的步骤或单元,而是可选地还包括没有列出的步骤或单元,或可选地还包括对于这些过程、方法、产品或设备固有的其他步骤或单元。
在本文中提及“实施例”意味着,结合实施例描述的特定特征、结构或特性可以包含在本申请的至少一个实施例中。在说明书中的各个位置出现该短语并不一定均是指相同的实施例,也不是与其它实施例互斥的独立的或备选的实施例。本领域技术人员显式地和隐式地理解的是,本文所描述的实施例可以与其它实施例相结合。
本申请实施例所涉及到的电子设备可以包括各种具有无线通信功能的手持设备(如智能手机)、车载设备、虚拟现实(virtual reality,VR)/增强现实(augmentedreality,AR)设备,可穿戴设备、计算设备或连接到无线调制解调器的其他处理设备,以及各种形式的用户设备(user equipment,UE),移动台(mobile station,MS),终端设备(terminal device)、研发/测试平台、服务器等等。为方便描述,上面提到的设备统称为电子设备。
具体实现中,本申请实施例中,电子设备可对音频数据(声源发出的声音)使用HRTF(Head Related Transfer Function,头相关变换函数)滤波器进行滤波,得到虚拟环绕声,也称之为环绕声,或者全景声,实现一种三维立体音效。HRTF在时间域所对应的名称是HRIR(Head Related Impulse Response)。或者将音频数据与双耳房间脉冲响应(Binaural Room Impulse Response,BRIR)做卷积,双耳房间脉冲响应由三个部分组成:直达声,早期反射声和混响。
下面对本申请实施例进行详细介绍。
请参阅图1A,图1A是本申请实施例提供了一种电子设备的结构示意图,电子设备包括控制电路和输入-输出电路,输入输出电路与控制电路连接。
其中,控制电路可以包括存储和处理电路。该存储和处理电路中的存储电路可以是存储器,例如硬盘驱动存储器,非易失性存储器(例如闪存或用于形成固态驱动器的其它电子可编程只读存储器等),易失性存储器(例如静态或动态随机存取存储器等)等,本申请实施例不作限制。存储和处理电路中的处理电路可以用于控制电子设备的运转。该处理电路可以基于一个或多个微处理器,微控制器,数字信号处理器,基带处理器,功率管理单元,音频编解码器芯片,专用集成电路,显示驱动器集成电路等来实现。
存储和处理电路可用于运行电子设备中的软件,例如播放来电提示响铃应用程序、播放短消息提示响铃应用程序、播放闹钟提示响铃应用程序、播放媒体文件应用程序、互联网协议语音(voice over internet protocol,VOIP)电话呼叫应用程序、操作***功能等。这些软件可以用于执行一些控制操作,例如,播放来电提示响铃、播放短消息提示响铃、播放闹钟提示响铃、播放媒体文件、进行语音电话呼叫以及电子设备中的其它功能等,本申请实施例不作限制。
其中,输入-输出电路可用于使电子设备实现数据的输入和输出,即允许电子设备从外部设备接收数据和允许电子设备将数据从电子设备输出至外部设备。
输入-输出电路可以进一步包括传感器。传感器可以包括环境光传感器,基于光和电容的红外接近传感器,超声波传感器,触摸传感器(例如,基于光触摸传感器和/或电容式触摸传感器,其中,触摸传感器可以是触控显示屏的一部分,也可以作为一个触摸传感器结构独立使用),加速度传感器,重力传感器,和其它传感器等。输入-输出电路还可以进一步包括音频组件,音频组件可以用于为电子设备提供音频输入和输出功能。音频组件还可以包括音调发生器以及其它用于产生和检测声音的组件。
输入-输出电路还可以包括一个或多个显示屏。显示屏可以包括液晶显示屏,有机发光二极管显示屏,电子墨水显示屏,等离子显示屏,使用其它显示技术的显示屏中一种或者几种的组合。显示屏可以包括触摸传感器阵列(即,显示屏可以是触控显示屏)。触摸传感器可以是由透明的触摸传感器电极(例如氧化铟锡(ITO)电极)阵列形成的电容式触摸传感器,或者可以是使用其它触摸技术形成的触摸传感器,例如音波触控,压敏触摸,电阻触摸,光学触摸等,本申请实施例不作限制。
输入-输出电路还可以进一步包括通信电路可以用于为电子设备提供与外部设备通信的能力。通信电路可以包括模拟和数字输入-输出接口电路,和基于射频信号和/或光信号的无线通信电路。通信电路中的无线通信电路可以包括射频收发器电路、功率放大器电路、低噪声放大器、开关、滤波器和天线。举例来说,通信电路中的无线通信电路可以包括用于通过发射和接收近场耦合电磁信号来支持近场通信(near field communication,NFC)的电路。例如,通信电路可以包括近场通信天线和近场通信收发器。通信电路还可以包括蜂窝电话收发器和天线,无线局域网收发器电路和天线等。
输入-输出电路还可以进一步包括其它输入-输出单元。输入-输出单元可以包括按钮,操纵杆,点击轮,滚动轮,触摸板,小键盘,键盘,照相机,发光二极管和其它状态指示器等。
其中,电子设备还可以进一步包括电池(未图示),电池用于给电子设备提供电能。
下面对本申请实施例进行详细介绍。
请参阅图1B,图1B是本申请实施例公开的一种3D音效处理方法的流程示意图,应用于上述图1A所描述的电子设备,该3D音效处理方法包括如下步骤101-103。
101、在虚拟现实场景中获取目标声源对应的预先设置的八个单声道声源的八个第一位置,以及所述八个单声道声源对应的八个单声道数据,每一单声道声源对应一个单声道数据,每一单声道声源位置对应唯一三维坐标。
其中,本申请实施例应用于虚拟现实场景,例如,虚拟现实游戏,具体实现中,在虚拟现实场景中,目标声源可以对应预先设置八个单声道声源,即目标声源发出的音频数据,由该八个单声道声源进行传播,每一单声道声源可传播相同的音频数据。每一单声道声源对应一个第一位置,当然,每一单声道声源也可以对应一个三维坐标,每一单声道声源对应一个单声道数据,单声道数据为单声道音频数据。具体地,电子设备可在虚拟现实场景中获取目标声源对应的预先设置的八个单声道声源的八个第一位置,八个单声道声源位于不同的位置。
102、获取目标对象在所述虚拟现实场景中的第二位置,所述第二位置对应一个三维坐标,所述八个第一位置与所述第二位置基于同一坐标原点。
其中,目标对象可以为游戏角色,或者,用户,或者,预先设置的其他对象,在此不做限定。电子设备可获取目标对象在虚拟现实场景中的第二位置,第二位置也对应一个三维坐标,上述八个第一位置与第二位置则基于同一坐标原点,即本申请实施例中的虚拟现实场景只有一个坐标原点。
可选地,在所述目标对象处于游戏场景时,上述步骤102,获取目标对象在所述虚拟现实场景中的第二位置,可包括如下步骤:
21、获取所述游戏场景对应的地图;
22、在所述地图中确定所述目标对象对应的坐标位置,得到所述第二位置。
其中,在目标对象处于游戏场景时,目标对象可视为游戏中一角色,当然,具体实现中,游戏场景可对应一三维地图,因此,电子设备可以获取游戏场景对应的地图,并在地图中确定目标对象对应的坐标位置,得到三维位置,如此,针对不同的游戏,可实时知晓角色位置,在本申请实施例中,针对角色具***置,能够生成3D音效,让用户在游戏时,能够身临其境,感觉游戏世界更为逼真。
103、确定所述八个第一位置与所述第二位置之间的距离,得到八个距离值。
其中,电子设备可确定八个第一位置与第二位置之间的距离,得到八个距离值,具体地,由于每一第一位置对应一个三维坐标,第二位置对应一个三维坐标,例如,第一位置为(x1,y1,z1),第二位置为(x2,y2,z2),则可以通过这两个坐标计算出第一位置与第二位置之间的距离。如图1C所示,图1C中示出了目标声源对应的八个单声道声源,目标对象与每一单声道声源之间可存在一个距离值(见虚线),得到八个距离值。
可选地,上述步骤103,确定所述八个第一位置与所述第二位置之间的距离,可包括如下步骤:
31、获取第一位置i对应的第一像素位置,所述第一位置i为所述八个第一位置中的任一个;
32、获取所述第二位置对应的第二像素位置;
33、确定所述第一像素位置与所述第二像素位置之间的目标像素差;
34、按照预设的距离与像素差之间的映射关系,确定所述目标像素差对应的目标距离值,所述目标距离值为所述第一位置i与所述第二位置之间的距离值。
其中,上述第一位置i为八个第一位置中的任一个,电子设备可获取该第一位置i的第一像素位置,并获取第二位置对应的第二像素位置,确定第一像素位置与第二像素位置之间的目标像素差,目标像素差可以理解为间隔的像素点个数,目标像素差为1,则表示两个位置相邻,电子设备中还可以预先存储预设的距离与像素差之间的映射关系,进而,依据该映射关系确定目标像素差对应的目标距离值,目标距离值为第一位置i与第二位置之间的距离值。
104、依据所述八个距离值对所述八个单声道数据进行调节。
其中,电子设备可依据八个距离值对八个单声道数据进行调节,具体的调节手段可以为以下至少一种:音效增强,音效弱化,音效保持,等等,在此不做限定。音效增强具体可以为以下至少一种:提升音量、增大电流、增大电压、增大功率等等,在此不做限定,音效弱化具体可以为以下至少一种:降低音量、减小电流、减小电压、降低功率、滤波、削峰等等,在此不做限定,音效保持则不作任何处理。
可选地,上述步骤104,依据所述八个距离值对所述八个单声道数据进行调节,可包括如下步骤:
41、选取所述八个距离值中小于预设阈值的距离值,得到至少一个目标距离值;
42、将所述至少一个目标距离值对应的单声道数据作为第一单声道数据集;
43、将所述八个单声道数据中不属于所述第一单声道数据集的单声道数据作为第二单声道数据集;
44、对所述第一单声道数据集进行第一处理,得到第一目标单声道数据集;
45、对所述第二单声道数据集进行第二处理,得到第二目标单声道数据集。
其中,上述预设阈值可以由用户自行设置或者***默认,或者,预设阈值可以为一个动态阈值,例如,八个距离值之间的平均值、八个距离值之间的最小值,八个距离值之间的次小值,等等,在此不做限定。具体实现中,电子设备可选取八个距离值中小于预设阈值的距离值,得到至少一个目标距离值,进而,将至少一个目标距离值对应的单声道数据作为第一单声道数据集,而将八个单声道数据中不属于第一单声道数据集的单声道数据作为第二单声道数据集,对第一单声道数据集进行第一处理,第一处理可以为音效增强,或者,音效保持,得到第一目标单声道数据集,对第二单声道数据集进行第二处理,第二处理可以为音效弱化或者音效保持,得到第二目标单声道数据集,如此,可以使得距离目标对象近的单声道声源音效效果较强,而远离目标对象的单声道声源音效效果较弱,让空间感更加真实。
可选地,上述步骤44,对所述第一单声道数据集进行第一处理,得到第一目标单声道数据集,可按照如下方式实施:
对所述第一单声道数据集中每一单声道数据进行音效增强处理,得到所述第一目标单声道数据集;
则,上述步骤45,对所述第二单声道数据集进行第二处理,得到第二目标单声道数据集,可按照如下方式实施:
对所述第二单声道数据集中的至少一个单声道数据进行音效弱化处理,得到所述第二目标单声道数据集。
其中,电子设备可以对第一单声道数据集中每一单声道数据进行音效增强处理,得到第一目标单声道数据集,音效增强可以为以下至少一种:提升音量、增大电流、增大电压、增大功率等等,在此不做限定,相应地,电子设备可对第二单声道数据集中的至少一个单声道数据进行音效弱化处理,得到第二目标单声道数据集,音效弱化具体可以为以下至少一种:降低音量、减小电流、减小电压、降低功率、滤波、削峰等等。
可选地,上述步骤45,对所述第二单声道数据集中的至少一个单声道数据进行音效弱化处理,可包括如下步骤:
451、获取所述第二单声道数据集中每一单声道数据对应的距离值,得到至少一个距离值;
452、按照预设的距离值与音效弱化系数之间的映射关系,确定所述至少一个距离值对应的至少一个目标音效弱化系数;
453、依据所述至少一个目标音效弱化系数对所述第二单声道数据集音效弱化处理。
其中,电子设备可获取第二单声道数据集中每一单声道数据对应的距离值,得到至少一个距离值,电子设备中还可以预先存储预设的距离值与音效弱化系数之间的映射关系,进而,依据该映射关系确定至少一个距离值对应的至少一个目标音效弱化系数,进一步地,电子设备可依据至少一个目标音效弱化系数对第二单声道数据集,即至少一个目标音效弱化系数中每一目标音效弱化系数对应一个单声道数据,目标音效弱化系数对对应的单声道数据进行音效弱化处理,上述音效弱化处理目标音效弱化系数可以为一个小数,该小数在0~1之间,还可以为一个负数,具体地,以某一单声道数据对应的音量为例,则可以降低音量,以某一单声道数据对应的电流为例,当前为A1,则弱化后音量为0.8*A1。
可选地,上述步骤44,对所述第一单声道数据集进行第一处理,得到第一目标单声道数据集,可按照如下方式实施:
对所述第一单声道数据集中至少一个单声道数据进行音效保持处理,得到所述第一目标单声道数据集;
则,上述步骤45,对所述第二单声道数据集进行第二处理,得到第二目标单声道数据集,可按照如下方式实施:
对所述第二单声道数据集中的至少一个单声道数据进行音效弱化处理,得到所述第二目标单声道数据集。
其中,电子设备可第一单声道数据集中至少一个单声道数据进行音效保持处理,得到第一目标单声道数据集,相应地,对第二单声道数据集中的至少一个单声道数据进行音效弱化处理,得到第二目标单声道数据集,音效弱化具体可以为以下至少一种:降低音量、减小电流、减小电压、降低功率、滤波、削峰等等,在此不做限定。
105、将调节后的所述八个单声道数据进行合成,得到7.1声道数据。
其中,电子设备可将调节后的八个单声道数据进行合成,得到7.1声道数据,具体地,可以将输入到八个单声道数据HRTF模型中,得到7.1声道数据。
可选地,在上述步骤105之后,还可以包括如下步骤:
A1、获取当前环境对应的目标壁纸;
A2、按照预设的壁纸与混响效果参数之间的映射关系,确定所述目标壁纸对应的目标混响效果参数;
A3、依据所述目标混响效果参数对所述7.1声道数据进行处理,得到混响7.1声道数据。
其中,上述混响效果参数可以包括以下至少一种:输入电平、低频切点、高频切点、早反射时间、扩散程度、低混比率、残响时间、高频衰点、分频点、原始干声音量、早反射声音量、混响音量、声场宽度、输出声场、尾音等等,在此不作限定。壁纸可以理解为环境的背景,此处环境可以为游戏环境,不同的环境可以对应不同的壁纸,在游戏场景下,可以确定目标对象的位置,进而,依据地图确定该位置对应的目标壁纸,若非游戏场景下,则可以通过环境传感器检测当前环境参数,依据当前环境参数确定当前环境,其中,环境传感器可以为以下至少一种传感器、湿度传感器、温度传感器、超声波传感器、距离传感器、摄像头等等,在此不做限定,上述环境参数可以为以下至少一种:温度、湿度、距离、影像等等,在此不做限定,电子设备中可以预先存储环境参数与环境之间的映射关系,进而,依据该映射关系确定当前环境参数对应的当前环境,电子设备中还可以预先存储环境与壁纸之间的映射关系,进而,依据该映射关系确定当前环境对应的目标壁纸,电子设备中还预先存储预设的壁纸与混响效果参数之间的映射关系,依据该映射关系可以确定目标壁纸对应的目标混响效果参数(reverb),进而,依据目标混响效果参数对目标7.1声道数据进行处理,得到混响7.1声道数据,具体地,可以将目标混响效果对应的参数输入到HRTF算法模型中,得到混响7.1声道数据。
可以看出,本申请实施例中所描述的3D音效处理方法,在虚拟现实场景中获取目标声源对应的预先设置的八个单声道声源的八个第一位置,以及八个单声道声源对应的八个单声道数据,每一单声道声源对应一个单声道数据,每一单声道声源位置对应唯一三维坐标,获取目标对象在虚拟现实场景中的第二位置,第二位置对应一个三维坐标,八个第一位置与第二位置基于同一坐标原点,确定八个第一位置与第二位置之间的距离,得到八个距离值,依据八个距离值对八个单声道数据进行调节,将调节后的八个单声道数据进行合成,得到7.1声道数据,能够依据虚拟现实场景中的位置,合成7.1声道数据,提升了用户体验。
与上述一致地,图2是本申请实施例公开的一种3D音效处理方法的流程示意图。应用于如图1A所示的电子设备,该3D音效处理方法包括如下步骤201-206。
201、在虚拟现实场景中获取目标声源对应的预先设置的八个单声道声源的八个第一位置,以及所述八个单声道声源对应的八个单声道数据,每一单声道声源对应一个单声道数据,每一单声道声源位置对应唯一三维坐标。
202、获取目标对象在所述虚拟现实场景中的第二位置,所述第二位置对应一个三维坐标,所述八个第一位置与所述第二位置基于同一坐标原点。
203、确定所述八个第一位置与所述第二位置之间的距离,得到八个距离值。
204、选取所述八个距离值中小于预设阈值的距离值,得到至少一个目标距离值。
205、将所述至少一个目标距离值对应的单声道数据作为第一单声道数据集。
206、将所述八个单声道数据中不属于所述第一单声道数据集的单声道数据作为第二单声道数据集。
207、对所述第一单声道数据集进行第一处理,得到第一目标单声道数据集。
208、对所述第二单声道数据集进行第二处理,得到第二目标单声道数据集。
209、将所述第一目标单声道数据集、以及所述第二目标单声道数据集进行合成,得到7.1声道数据。
其中,上述步骤201-步骤209的具体描述可以参照图1B所描述的3D音效处理方法的相应描述,在此不再赘述。
可以看出,本申请实施例中所描述的3D音效处理方法,在虚拟现实场景中获取目标声源对应的预先设置的八个单声道声源的八个第一位置,以及八个单声道声源对应的八个单声道数据,每一单声道声源对应一个单声道数据,每一单声道声源位置对应唯一三维坐标,获取目标对象在虚拟现实场景中的第二位置,第二位置对应一个三维坐标,八个第一位置与第二位置基于同一坐标原点,确定八个第一位置与第二位置之间的距离,得到八个距离值,依据八个距离值对八个单声道数据进行调节,将调节后的八个单声道数据进行合成,得到7.1声道数据,能够依据虚拟现实场景中的位置,合成7.1声道数据,提升了用户体验。
与上述一致地,图3是本申请实施例公开的一种3D音效处理方法的流程示意图。应用于图1A所示的电子设备,该3D音效处理方法包括如下步骤301-308。
301、在虚拟现实场景中获取目标声源对应的预先设置的八个单声道声源的八个第一位置,以及所述八个单声道声源对应的八个单声道数据,每一单声道声源对应一个单声道数据,每一单声道声源位置对应唯一三维坐标。
302、获取目标对象在所述虚拟现实场景中的第二位置,所述第二位置对应一个三维坐标,所述八个第一位置与所述第二位置基于同一坐标原点。
303、确定所述八个第一位置与所述第二位置之间的距离,得到八个距离值。
304、依据所述八个距离值对所述八个单声道数据进行调节。
305、将调节后的所述八个单声道数据进行合成,得到7.1声道数据。
306、获取当前环境对应的目标壁纸。
307、按照预设的壁纸与混响效果参数之间的映射关系,确定所述目标壁纸对应的目标混响效果参数。
308、依据所述目标混响效果参数对所述7.1声道数据进行处理,得到混响7.1声道数据。
其中,上述步骤301-步骤308的具体描述可以参照图1B所描述的3D音效处理方法的相应描述,在此不再赘述。
可以看出,本申请实施例中所描述的3D音效处理方法,获取声源的第一三维坐标,以及声源产生的单声道数据,获取目标对象的第二三维位置,依据第一三维坐标、第二三维坐标以及单声道数据生成目标双声道数据,获取当前环境对应的目标壁纸,按照预设的壁纸与混响效果之间的映射关系,确定目标壁纸对应的目标混响效果,依据目标混响效果对目标双声道数据进行处理,得到混响双声道数据,如此,在确定了声源的第一三维坐标以及目标对象的第二三维坐标,则可以生成3D音效,进一步还能生成带reverb效果的双声道数据,3D音效体验感更加逼真,提升了用户体验。
请参阅图4,图4是本申请实施例公开的另一种电子设备的结构示意图,如图所示,该电子设备包括处理器、存储器、通信接口,以及一个或多个程序,其中,上述一个或多个程序被存储在上述存储器中,并且被配置由上述处理器执行,上述程序包括用于执行以下步骤的指令:
在虚拟现实场景中获取目标声源对应的预先设置的八个单声道声源的八个第一位置,以及所述八个单声道声源对应的八个单声道数据,每一单声道声源对应一个单声道数据,每一单声道声源位置对应唯一三维坐标;
获取目标对象在所述虚拟现实场景中的第二位置,所述第二位置对应一个三维坐标,所述八个第一位置与所述第二位置基于同一坐标原点;
确定所述八个第一位置与所述第二位置之间的距离,得到八个距离值;
依据所述八个距离值对所述八个单声道数据进行调节;
将调节后的所述八个单声道数据进行合成,得到7.1声道数据。
在一个可能的示例中,在所述依据所述八个距离值对所述八个单声道数据进行调节方面,上述程序包括用于执行以下步骤的指令:
选取所述八个距离值中小于预设阈值的距离值,得到至少一个目标距离值;
将所述至少一个目标距离值对应的单声道数据作为第一单声道数据集;
将所述八个单声道数据中不属于所述第一单声道数据集的单声道数据作为第二单声道数据集;
对所述第一单声道数据集进行第一处理,得到第一目标单声道数据集;
对所述第二单声道数据集进行第二处理,得到第二目标单声道数据集。
在一个可能的示例中,在所述对所述第一单声道数据集进行第一处理,得到第一目标单声道数据集方面,上述程序包括用于执行以下步骤的指令:
对所述第一单声道数据集中每一单声道数据进行音效增强处理,得到所述第一目标单声道数据集;
所述对所述第二单声道数据集进行第二处理,得到第二目标单声道数据集,包括:
对所述第二单声道数据集中的至少一个单声道数据进行音效弱化处理,得到所述第二目标单声道数据集。
在一个可能的示例中,在所述对所述第二单声道数据集中的至少一个单声道数据进行音效弱化处理方面,上述程序包括用于执行以下步骤的指令:
获取所述第二单声道数据集中每一单声道数据对应的距离值,得到至少一个距离值;
按照预设的距离值与音效弱化系数之间的映射关系,确定所述至少一个距离值对应的至少一个目标音效弱化系数;
依据所述至少一个目标音效弱化系数对所述第二单声道数据集音效弱化处理。
在一个可能的示例中,在所述对所述第一单声道数据集进行第一处理,得到第一目标单声道数据集方面,上述程序包括用于执行以下步骤的指令:
对所述第一单声道数据集中至少一个单声道数据进行音效保持处理,得到所述第一目标单声道数据集;
所述对所述第二单声道数据集进行第二处理,得到第二目标单声道数据集,包括:
对所述第二单声道数据集中的至少一个单声道数据进行音效弱化处理,得到所述第二目标单声道数据集。
在一个可能的示例中,在所述确定所述八个第一位置与所述第二位置之间的距离方面,上述程序包括用于执行以下步骤的指令:
获取第一位置i对应的第一像素位置,所述第一位置i为所述八个第一位置中的任一个;
获取所述第二位置对应的第二像素位置;
确定所述第一像素位置与所述第二像素位置之间的目标像素差;
按照预设的距离与像素差之间的映射关系,确定所述目标像素差对应的目标距离值,所述目标距离值为所述第一位置i与所述第二位置之间的距离值。
在一个可能的示例中,上述程序还包括用于执行以下步骤的指令:
获取当前环境对应的目标壁纸;
按照预设的壁纸与混响效果参数之间的映射关系,确定所述目标壁纸对应的目标混响效果参数;
依据所述目标混响效果参数对所述7.1声道数据进行处理,得到混响7.1声道数据。
上述主要从方法侧执行过程的角度对本申请实施例的方案进行了介绍。可以理解的是,电子设备为了实现上述功能,其包含了执行各个功能相应的硬件结构和/或软件模块。本领域技术人员应该很容易意识到,结合本文中所提供的实施例描述的各示例的单元及算法步骤,本申请能够以硬件或硬件和计算机软件的结合形式来实现。某个功能究竟以硬件还是计算机软件驱动硬件的方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
本申请实施例可以根据上述方法示例对电子设备进行功能单元的划分,例如,可以对应各个功能划分各个功能单元,也可以将两个或两个以上的功能集成在一个处理单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。需要说明的是,本申请实施例中对单元的划分是示意性的,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式。
请参阅图5A,图5A是本申请实施例公开的一种3D音效处理装置的结构示意图,应用于图1A所示的电子设备,所述3D音效处理装置500包括:第一获取单元501、第二获取单元502、确定单元503、调节单元504和合成单元505,具体如下:
所述第一获取单元501,用于在虚拟现实场景中获取目标声源对应的预先设置的八个单声道声源的八个第一位置,以及所述八个单声道声源对应的八个单声道数据,每一单声道声源对应一个单声道数据,每一单声道声源位置对应唯一三维坐标;
所述第二获取单元502,用于获取目标对象在所述虚拟现实场景中的第二位置,所述第二位置对应一个三维坐标,所述八个第一位置与所述第二位置基于同一坐标原点;
所述确定单元503,用于确定所述八个第一位置与所述第二位置之间的距离,得到八个距离值;
所述调节单元504,用于依据所述八个距离值对所述八个单声道数据进行调节;
所述合成单元505,用于将调节后的所述八个单声道数据进行合成,得到7.1声道数据。
在一个可能的示例中,在所述依据所述八个距离值对所述八个单声道数据进行调节方面,所述调节单元504具体用于:
选取所述八个距离值中小于预设阈值的距离值,得到至少一个目标距离值;
将所述至少一个目标距离值对应的单声道数据作为第一单声道数据集;
将所述八个单声道数据中不属于所述第一单声道数据集的单声道数据作为第二单声道数据集;
对所述第一单声道数据集进行第一处理,得到第一目标单声道数据集;
对所述第二单声道数据集进行第二处理,得到第二目标单声道数据集。
在一个可能的示例中,在所述对所述第一单声道数据集进行第一处理,得到第一目标单声道数据集方面,所述调节单元504具体用于:
对所述第一单声道数据集中每一单声道数据进行音效增强处理,得到所述第一目标单声道数据集;
所述对所述第二单声道数据集进行第二处理,得到第二目标单声道数据集,包括:
对所述第二单声道数据集中的至少一个单声道数据进行音效弱化处理,得到所述第二目标单声道数据集。
在一个可能的示例中,在所述对所述第二单声道数据集中的至少一个单声道数据进行音效弱化处理方面,所述调节单元504具体用于:
获取所述第二单声道数据集中每一单声道数据对应的距离值,得到至少一个距离值;
按照预设的距离值与音效弱化系数之间的映射关系,确定所述至少一个距离值对应的至少一个目标音效弱化系数;
依据所述至少一个目标音效弱化系数对所述第二单声道数据集音效弱化处理。
在一个可能的示例中,在所述对所述第一单声道数据集进行第一处理,得到第一目标单声道数据集方面,所述调节单元504具体用于:
对所述第一单声道数据集中至少一个单声道数据进行音效保持处理,得到所述第一目标单声道数据集;
所述对所述第二单声道数据集进行第二处理,得到第二目标单声道数据集,包括:
对所述第二单声道数据集中的至少一个单声道数据进行音效弱化处理,得到所述第二目标单声道数据集。
在一个可能的示例中,在所述确定所述八个第一位置与所述第二位置之间的距离方面,所述确定单元503具体用于:
获取第一位置i对应的第一像素位置,所述第一位置i为所述八个第一位置中的任一个;
获取所述第二位置对应的第二像素位置;
确定所述第一像素位置与所述第二像素位置之间的目标像素差;
按照预设的距离与像素差之间的映射关系,确定所述目标像素差对应的目标距离值,所述目标距离值为所述第一位置i与所述第二位置之间的距离值。
在一个可能的示例中,如图5B,图5B为图5A所描述的3D音效处理装置的又一变型装置,其与图5A相比较,还可以包括:第三获取单元506,具体如下:
所述第三获取单元506,用于获取当前环境对应的目标壁纸;
所述确定单元503,还具体用于:
按照预设的壁纸与混响效果参数之间的映射关系,确定所述目标壁纸对应的目标混响效果参数;
所述合成单元505,还具体用于依据所述目标混响效果参数对所述7.1声道数据进行处理,得到混响7.1声道数据。
需要注意的是,本申请实施例所描述的电子设备是以功能单元的形式呈现。这里所使用的术语“单元”应当理解为尽可能最宽的含义,用于实现各个“单元”所描述功能的对象例如可以是集成电路ASIC,单个电路,用于执行一个或多个软件或固件程序的处理器(共享的、专用的或芯片组)和存储器,组合逻辑电路,和/或提供实现上述功能的其他合适的组件。
其中,第一获取单元501、第二获取单元502、确定单元503、调节单元504、合成单元505和第三获取单元506可以是控制电路或处理器。
本申请实施例还提供一种计算机存储介质,其中,该计算机存储介质存储用于电子数据交换的计算机程序,该计算机程序使得计算机执行如上述方法实施例中记载的任何一种3D音效处理方法的部分或全部步骤。
本申请实施例还提供一种计算机程序产品,所述计算机程序产品包括存储了计算机程序的非瞬时性计算机可读存储介质,所述计算机程序可操作来使计算机执行如上述方法实施例中记载的任何一种3D音效处理方法的部分或全部步骤。
需要说明的是,对于前述的各方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本申请并不受所描述的动作顺序的限制,因为依据本申请,某些步骤可以采用其他顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作和模块并不一定是本申请所必须的。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其他实施例的相关描述。
在本申请所提供的几个实施例中,应该理解到,所揭露的装置,可通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个***,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件程序模块的形式实现。
所述集成的单元如果以软件程序模块的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储器中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储器中,包括若干指令用以使得一台计算机设备(可为个人计算机、服务器或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储器包括:U盘、只读存储器(read-only memory,ROM)、随机存取存储器(random access memory,RAM)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,该程序可以存储于一计算机可读存储器中,存储器可以包括:闪存盘、ROM、RAM、磁盘或光盘等。
以上对本申请实施例进行了详细介绍,本文中应用了具体个例对本申请的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本申请的方法及其核心思想;同时,对于本领域的一般技术人员,依据本申请的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本申请的限制。

Claims (10)

1.一种3D音效处理方法,其特征在于,所述方法包括:
在虚拟现实场景中获取目标声源对应的预先设置的八个单声道声源的八个第一位置,以及所述八个单声道声源对应的八个单声道数据,每一单声道声源对应一个单声道数据,每一单声道声源位置对应唯一三维坐标;
获取目标对象在所述虚拟现实场景中的第二位置,所述第二位置对应一个三维坐标,所述八个第一位置与所述第二位置基于同一坐标原点;
确定所述八个第一位置与所述第二位置之间的距离,得到八个距离值;
依据所述八个距离值对所述八个单声道数据进行调节;
将调节后的所述八个单声道数据进行合成,得到7.1声道数据。
2.根据权利要求1所述的方法,其特征在于,所述依据所述八个距离值对所述八个单声道数据进行调节,包括:
选取所述八个距离值中小于预设阈值的距离值,得到至少一个目标距离值;
将所述至少一个目标距离值对应的单声道数据作为第一单声道数据集;
将所述八个单声道数据中不属于所述第一单声道数据集的单声道数据作为第二单声道数据集;
对所述第一单声道数据集进行第一处理,得到第一目标单声道数据集;
对所述第二单声道数据集进行第二处理,得到第二目标单声道数据集。
3.根据权利要求2所述的方法,其特征在于,所述对所述第一单声道数据集进行第一处理,得到第一目标单声道数据集,包括:
对所述第一单声道数据集中每一单声道数据进行音效增强处理,得到所述第一目标单声道数据集;
所述对所述第二单声道数据集进行第二处理,得到第二目标单声道数据集,包括:
对所述第二单声道数据集中的至少一个单声道数据进行音效弱化处理,得到所述第二目标单声道数据集。
4.根据权利要求3所述的方法,其特征在于,所述对所述第二单声道数据集中的至少一个单声道数据进行音效弱化处理,包括:
获取所述第二单声道数据集中每一单声道数据对应的距离值,得到至少一个距离值;
按照预设的距离值与音效弱化系数之间的映射关系,确定所述至少一个距离值对应的至少一个目标音效弱化系数;
依据所述至少一个目标音效弱化系数对所述第二单声道数据集音效弱化处理。
5.根据权利要求2所述的方法,其特征在于,所述对所述第一单声道数据集进行第一处理,得到第一目标单声道数据集,包括:
对所述第一单声道数据集中至少一个单声道数据进行音效保持处理,得到所述第一目标单声道数据集;
所述对所述第二单声道数据集进行第二处理,得到第二目标单声道数据集,包括:
对所述第二单声道数据集中的至少一个单声道数据进行音效弱化处理,得到所述第二目标单声道数据集。
6.根据权利要求1-5任一项所述的方法,其特征在于,所述确定所述八个第一位置与所述第二位置之间的距离,包括:
获取第一位置i对应的第一像素位置,所述第一位置i为所述八个第一位置中的任一个;
获取所述第二位置对应的第二像素位置;
确定所述第一像素位置与所述第二像素位置之间的目标像素差;
按照预设的距离与像素差之间的映射关系,确定所述目标像素差对应的目标距离值,所述目标距离值为所述第一位置i与所述第二位置之间的距离值。
7.根据权利要求1-6任一项所述的方法,其特征在于,所述方法还包括:
获取当前环境对应的目标壁纸;
按照预设的壁纸与混响效果参数之间的映射关系,确定所述目标壁纸对应的目标混响效果参数;
依据所述目标混响效果参数对所述7.1声道数据进行处理,得到混响7.1声道数据。
8.一种3D音效处理装置,其特征在于,所述3D音效处理装置包括:第一获取单元、第二获取单元、确定单元、调节单元和合成单元,其中,
所述第一获取单元,用于在虚拟现实场景中获取目标声源对应的预先设置的八个单声道声源的八个第一位置,以及所述八个单声道声源对应的八个单声道数据,每一单声道声源对应一个单声道数据,每一单声道声源位置对应唯一三维坐标;
所述第二获取单元,用于获取目标对象在所述虚拟现实场景中的第二位置,所述第二位置对应一个三维坐标,所述八个第一位置与所述第二位置基于同一坐标原点;
所述确定单元,用于确定所述八个第一位置与所述第二位置之间的距离,得到八个距离值;
所述调节单元,用于依据所述八个距离值对所述八个单声道数据进行调节;
所述合成单元,用于将调节后的所述八个单声道数据进行合成,得到7.1声道数据。
9.一种电子设备,其特征在于,包括处理器、存储器、通信接口,以及一个或多个程序,所述一个或多个程序被存储在所述存储器中,并且被配置由所述处理器执行,所述程序包括用于执行如权利要求1-7任一项所述的方法中的步骤的指令。
10.一种计算机可读存储介质,其特征在于,存储用于电子数据交换的计算机程序,其中,所述计算机程序使得计算机执行如权利要求1-7任一项所述的方法。
CN201811115240.0A 2018-09-25 2018-09-25 3d音效处理方法及相关产品 Pending CN109308179A (zh)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CN201811115240.0A CN109308179A (zh) 2018-09-25 2018-09-25 3d音效处理方法及相关产品
PCT/CN2019/100252 WO2020063147A1 (en) 2018-09-25 2019-08-12 Method for processing 3d audio effect and related products
EP19194568.2A EP3629145B1 (en) 2018-09-25 2019-08-30 Method for processing 3d audio effect and related products
US16/569,053 US10993063B2 (en) 2018-09-25 2019-09-12 Method for processing 3D audio effect and related products

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811115240.0A CN109308179A (zh) 2018-09-25 2018-09-25 3d音效处理方法及相关产品

Publications (1)

Publication Number Publication Date
CN109308179A true CN109308179A (zh) 2019-02-05

Family

ID=65224748

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811115240.0A Pending CN109308179A (zh) 2018-09-25 2018-09-25 3d音效处理方法及相关产品

Country Status (4)

Country Link
US (1) US10993063B2 (zh)
EP (1) EP3629145B1 (zh)
CN (1) CN109308179A (zh)
WO (1) WO2020063147A1 (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020063028A1 (zh) * 2018-09-25 2020-04-02 Oppo广东移动通信有限公司 3d音效处理方法及相关产品
WO2020063147A1 (en) * 2018-09-25 2020-04-02 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Method for processing 3d audio effect and related products
WO2021030051A1 (en) * 2019-08-12 2021-02-18 Facebook Technologies, Llc Audio service design for operating systems
CN112420005A (zh) * 2020-10-23 2021-02-26 深圳市伟博思技术有限公司 全景音效网络协同***
CN114040318A (zh) * 2021-11-02 2022-02-11 海信视像科技股份有限公司 一种空间音频的播放方法及设备
WO2024061349A1 (zh) * 2022-09-22 2024-03-28 北京罗克维尔斯科技有限公司 声音播放的控制方法、装置、电子设备及车辆

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10871939B2 (en) * 2018-11-07 2020-12-22 Nvidia Corporation Method and system for immersive virtual reality (VR) streaming with reduced audio latency

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1713784A (zh) * 2004-06-16 2005-12-28 三星电子株式会社 再现7.1声道声音的装置和方法
CN103024634A (zh) * 2012-11-16 2013-04-03 新奥特(北京)视频技术有限公司 一种音频信号的处理方法及装置
CN103686544A (zh) * 2013-09-04 2014-03-26 张家港保税区润桐电子技术研发有限公司 一种音频信号的合成方法
US20150302665A1 (en) * 2014-04-18 2015-10-22 Magic Leap, Inc. Triangulation of points using known points in augmented or virtual reality systems
CN107360494A (zh) * 2017-08-03 2017-11-17 北京微视酷科技有限责任公司 一种3d音效处理方法、装置、***及音响***
CN207266264U (zh) * 2017-09-21 2018-04-20 南京中广华夏影视科技有限公司 一种影院数字电影声频处理器

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6072878A (en) * 1997-09-24 2000-06-06 Sonic Solutions Multi-channel surround sound mastering and reproduction techniques that preserve spatial harmonics
JP2007027846A (ja) * 2005-07-12 2007-02-01 Oki Electric Ind Co Ltd 動画再生システム及び動画再生方法
US20110116665A1 (en) * 2009-11-17 2011-05-19 King Bennett M System and method of providing three-dimensional sound at a portable computing device
US9563265B2 (en) * 2012-01-12 2017-02-07 Qualcomm Incorporated Augmented reality with sound and geometric analysis
CN103096134B (zh) * 2013-02-08 2016-05-04 广州博冠信息科技有限公司 一种基于视频直播和游戏的数据处理方法和设备
US10585486B2 (en) * 2014-01-03 2020-03-10 Harman International Industries, Incorporated Gesture interactive wearable spatial audio system
US9602947B2 (en) * 2015-01-30 2017-03-21 Gaudi Audio Lab, Inc. Apparatus and a method for processing audio signal to perform binaural rendering
CN205566613U (zh) * 2016-04-19 2016-09-07 杨涛 有源智能物联网音箱
CN105879390A (zh) * 2016-04-26 2016-08-24 乐视控股(北京)有限公司 虚拟现实游戏处理方法及设备
CN105872940B (zh) 2016-06-08 2017-11-17 北京时代拓灵科技有限公司 一种虚拟现实声场生成方法及***
EP3261367B1 (en) * 2016-06-21 2020-07-22 Nokia Technologies Oy Method, apparatus, and computer program code for improving perception of sound objects in mediated reality
CN108205409A (zh) 2016-12-16 2018-06-26 百度在线网络技术(北京)有限公司 用于调整虚拟场景的方法和装置以及设备
EP3422151A1 (en) * 2017-06-30 2019-01-02 Nokia Technologies Oy Methods, apparatus, systems, computer programs for enabling consumption of virtual content for mediated reality
US10225656B1 (en) * 2018-01-17 2019-03-05 Harman International Industries, Incorporated Mobile speaker system for virtual reality environments
CN108465241B (zh) * 2018-02-12 2021-05-04 网易(杭州)网络有限公司 游戏声音混响的处理方法、装置、存储介质及电子设备
CN109308179A (zh) * 2018-09-25 2019-02-05 Oppo广东移动通信有限公司 3d音效处理方法及相关产品

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1713784A (zh) * 2004-06-16 2005-12-28 三星电子株式会社 再现7.1声道声音的装置和方法
CN103024634A (zh) * 2012-11-16 2013-04-03 新奥特(北京)视频技术有限公司 一种音频信号的处理方法及装置
CN103686544A (zh) * 2013-09-04 2014-03-26 张家港保税区润桐电子技术研发有限公司 一种音频信号的合成方法
US20150302665A1 (en) * 2014-04-18 2015-10-22 Magic Leap, Inc. Triangulation of points using known points in augmented or virtual reality systems
CN107360494A (zh) * 2017-08-03 2017-11-17 北京微视酷科技有限责任公司 一种3d音效处理方法、装置、***及音响***
CN207266264U (zh) * 2017-09-21 2018-04-20 南京中广华夏影视科技有限公司 一种影院数字电影声频处理器

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020063028A1 (zh) * 2018-09-25 2020-04-02 Oppo广东移动通信有限公司 3d音效处理方法及相关产品
WO2020063147A1 (en) * 2018-09-25 2020-04-02 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Method for processing 3d audio effect and related products
WO2021030051A1 (en) * 2019-08-12 2021-02-18 Facebook Technologies, Llc Audio service design for operating systems
US11159907B2 (en) 2019-08-12 2021-10-26 Facebook Technologies, Llc Audio service design for operating systems
CN114303127A (zh) * 2019-08-12 2022-04-08 脸谱科技有限责任公司 操作***的音频服务设计
CN114303127B (zh) * 2019-08-12 2024-05-24 元平台技术有限公司 操作***的音频服务设计
CN112420005A (zh) * 2020-10-23 2021-02-26 深圳市伟博思技术有限公司 全景音效网络协同***
CN114040318A (zh) * 2021-11-02 2022-02-11 海信视像科技股份有限公司 一种空间音频的播放方法及设备
WO2024061349A1 (zh) * 2022-09-22 2024-03-28 北京罗克维尔斯科技有限公司 声音播放的控制方法、装置、电子设备及车辆

Also Published As

Publication number Publication date
US10993063B2 (en) 2021-04-27
US20200100044A1 (en) 2020-03-26
EP3629145A1 (en) 2020-04-01
EP3629145B1 (en) 2022-12-14
WO2020063147A1 (en) 2020-04-02

Similar Documents

Publication Publication Date Title
CN109308179A (zh) 3d音效处理方法及相关产品
CN109040887A (zh) 主从耳机切换控制方法及相关产品
CN108958696A (zh) 主从耳机切换控制方法及相关产品
CN109068206A (zh) 主从耳机切换控制方法及相关产品
CN108886653B (zh) 一种耳机声道控制方法、相关设备及***
CN109413563A (zh) 视频的音效处理方法及相关产品
CN108810693A (zh) 设备控制方法及相关产品
CN108600059A (zh) 设备控制方法及相关产品
CN109327795B (zh) 音效处理方法及相关产品
CN109412704A (zh) 电磁干扰控制方法及相关产品
CN109274833A (zh) 电磁干扰的调整方法及相关产品
CN109639367A (zh) 电磁干扰的调整方法及相关产品
CN108541080A (zh) 第一电子设备与第二电子设备进行回连的方法及相关产品
CN109660911A (zh) 录音音效处理方法、装置、移动终端及存储介质
CN109246580A (zh) 3d音效处理方法及相关产品
CN109495642A (zh) 显示控制方法及相关产品
CN109348055A (zh) 显示控制方法及相关产品
CN109067965A (zh) 翻译方法、翻译装置、可穿戴装置及存储介质
CN109743129A (zh) 电磁干扰控制方法及相关产品
CN109121069A (zh) 3d音效处理方法及相关产品
CN108924705A (zh) 3d音效处理方法及相关产品
CN109104687A (zh) 音效处理方法及相关产品
CN104301824B (zh) 线控设备、控制器、方法及装置
CN109327766A (zh) 3d音效处理方法及相关产品
CN109039355A (zh) 语音提示方法及相关产品

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 40003435

Country of ref document: HK

RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20190205