CN111696513A - 音频信号处理方法及装置、电子设备、存储介质 - Google Patents

音频信号处理方法及装置、电子设备、存储介质 Download PDF

Info

Publication number
CN111696513A
CN111696513A CN202010425184.1A CN202010425184A CN111696513A CN 111696513 A CN111696513 A CN 111696513A CN 202010425184 A CN202010425184 A CN 202010425184A CN 111696513 A CN111696513 A CN 111696513A
Authority
CN
China
Prior art keywords
noise
signal
signals
noise reduction
sound source
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010425184.1A
Other languages
English (en)
Inventor
杜鹏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Oppo Mobile Telecommunications Corp Ltd
Original Assignee
Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Oppo Mobile Telecommunications Corp Ltd filed Critical Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority to CN202010425184.1A priority Critical patent/CN111696513A/zh
Publication of CN111696513A publication Critical patent/CN111696513A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10KSOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
    • G10K11/00Methods or devices for transmitting, conducting or directing sound in general; Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
    • G10K11/16Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
    • G10K11/175Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound
    • G10K11/178Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10KSOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
    • G10K11/00Methods or devices for transmitting, conducting or directing sound in general; Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
    • G10K11/16Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
    • G10K11/175Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound
    • G10K11/178Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase
    • G10K11/1781Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase characterised by the analysis of input or output signals, e.g. frequency range, modes, transfer functions

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Soundproofing, Sound Blocking, And Sound Damping (AREA)

Abstract

本公开提供一种音频信号处理方法、音频信号处理装置、电子设备以及计算机可读存储介质,涉及音频处理技术领域。其中方法包括:获取噪声信号,并确定噪声信号的声源位置参数;利用噪声信号,确定与噪声信号频率相同、相位相反的反相降噪信号;根据声源位置参数以及反相降噪信号,得到并输出多个声道的降噪信号;其中,多个声道的降噪信号在用户侧叠加时对应的声源位置与噪声信号的声源位置相同。本公开可以提高降噪的效果。

Description

音频信号处理方法及装置、电子设备、存储介质
技术领域
本公开涉及音频处理技术领域,具体而言,涉及一种音频信号处理方法、音频信号处理装置、电子设备以及计算机可读存储介质。
背景技术
目前,电子设备(例如,智能终端、头戴设备等)在人们的生活中应用越来越广泛。电子设备在工作中产生较多的热量,虽然可以通过散热风扇进行散热,但是该过程中将会产生噪声,影响用户体验。并且,相关技术中降噪的效果较差。
发明内容
本公开的目的在于提供一种音频信号处理方法、音频信号处理装置、电子设备以及计算机可读存储介质,进而在一定程度上克服由于相关技术的限制和缺陷而导致的降噪效果较差的问题。
根据本公开的第一方面,提供一种音频信号处理方法,包括:
获取噪声信号,并确定所述噪声信号的声源位置参数;
利用所述噪声信号,确定与所述噪声信号频率相同、相位相反的反相降噪信号;
根据所述声源位置参数以及所述反相降噪信号,得到并输出多个声道的降噪信号;
其中,所述多个声道的降噪信号在用户侧叠加时对应的声源位置与所述噪声信号的声源位置相同。
根据本公开的第二方面,提供一种音频信号处理装置,包括:
噪声信号获取模块,用于获取噪声信号;
声源位置确定模块,用于确定所述噪声信号的声源位置参数;
信号处理模块,用于利用所述噪声信号,确定与所述噪声信号频率相同、相位相反的反相降噪信号;
多声道信号确定模块,用于根据所述声源位置参数以及所述反相降噪信号,得到多个声道的降噪信号;其中,所述多个声道的降噪信号在用户侧叠加时对应的声源位置与所述噪声信号的声源位置相同;
信号输出模块,用于分别输出所述多个声道的降噪信号。
根据本公开的第三方面,提供一种电子设备,包括:处理器;以及存储器,用于存储所述处理器的可执行指令;其中,所述处理器配置为经由执行所述可执行指令来执行上述音频信号处理方法。
根据本公开的第四方面,提供一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现上述音频信号处理方法。
本公开示例性实施例可以具有以下部分或全部有益效果:
在本公开的一示例实施方式所提供的音频信号处理方法中,在确定噪声信号的位置以及反相降噪信号后,生成多个声道的降噪信号。如果用户只接收多个声道的降噪信号,可以使用户更立体地感觉到是从噪声信号的位置传过来的。这样,用户同时接收噪声信号和多个声道的降噪信号时,噪声信号和降噪信号进行叠加时可以达到最佳的降噪效果,从而可以提升用户体验。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本公开。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本公开的实施例,并与说明书一起用于解释本公开的原理。显而易见地,下面描述中的附图仅仅是本公开的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1示出了本公开实施例中电子设备的结构示意图;
图2示出了头戴设备各区域的温度分布示意图;
图3示出了本公开实施例中音频信号处理方法的一种流程图;
图4示出了声波叠加的一种示意图;
图5示出了本公开实施例中麦克风、扬声器和人头模型的位置关系示意图;
图6示出了本公开实施例中音频信号处理装置的一种结构示意图。
具体实施方式
现在将参考附图更全面地描述示例实施方式。然而,示例实施方式能够以多种形式实施,且不应被理解为限于在此阐述的范例;相反,提供这些实施方式使得本公开将更加全面和完整,并将示例实施方式的构思全面地传达给本领域的技术人员。所描述的特征、结构或特性可以以任何合适的方式结合在一个或更多实施方式中。在下面的描述中,提供许多具体细节从而给出对本公开的实施方式的充分理解。然而,本领域技术人员将意识到,可以实践本公开的技术方案而省略所述特定细节中的一个或更多,或者可以采用其它的方法、组元、装置、步骤等。在其它情况下,不详细示出或描述公知技术方案以避免喧宾夺主而使得本公开的各方面变得模糊。
此外,附图仅为本公开的示意性图解,并非一定是按比例绘制。图中相同的附图标记表示相同或类似的部分,因而将省略对它们的重复描述。附图中所示的一些方框图是功能实体,不一定必须与物理或逻辑上独立的实体相对应。可以采用软件形式来实现这些功能实体,或在一个或多个硬件模块或集成电路中实现这些功能实体,或在不同网络和/或处理器装置和/或微控制器装置中实现这些功能实体。
图1示出了本公开实施例中电子设备的结构示意图。需要说明的是,图1示出的电子设备100仅是一个示例,不应对本公开实施例的功能和使用范围带来任何限制。
如图1所示,电子设备100包括:处理器110、音频模块120、扬声器121、受话器122、麦克风123、耳机接口124、通用串行总线接口130、充电管理模块140、电源管理模块141、电池142、传感器模块150、显示模块160、摄像模组170、内部存储器180、外部存储器接口190。
可以理解的是,本申请实施例示意的结构并不构成对电子设备100的具体限定。在本申请另一些实施例中,电子设备100可以包括比图示更多或更少的部件,或者组合某些部件,或者拆分某些部件,或者不同的部件布置。图示的部件可以以硬件、软件或软件和硬件的组合实现。
处理器110可以包括一个或多个处理单元,例如:处理器110可以包括应用处理器、调制解调处理器、图形处理器、图像信号处理器、控制器、视频编解码器、数字信号处理器、基带处理器和/或神经网络处理器等。其中,不同的处理单元可以是独立的器件,也可以集成在一个或多个处理器中。
控制器可以根据指令操作码和时序信号,产生操作控制信号,完成取指令和执行指令的控制。
处理器110可以通过集成电路内置音频总线与音频模块120耦合,实现处理器110与音频模块120之间的通信。电子设备100可以通过音频模块120、扬声器121、受话器122、麦克风123、耳机接口124及应用处理器等实现音频功能。例如音乐播放、录音等。
音频模块120用于将数字音频信息转换成模拟音频信号输出,也用于将模拟音频输入转换为数字音频信号。音频模块120还可以用于对音频信号编码和解码。在一些实施例中,音频模块120可以设置于处理器110中,或将音频模块120的部分功能模块设置于处理器110中。
扬声器121,也称“喇叭”,用于将音频电信号转换为声音信号。电子设备100可以通过扬声器121收听音乐,或收听免提通话。
受话器122,也称“听筒”,用于将音频电信号转换成声音信号。当电子设备100接听电话或语音信息时,可以通过将受话器122靠近人耳接听语音。
麦克风123,也称“话筒”、“传声器”,用于将声音信号转换为电信号。当拨打电话或发送语音信息时,用户可以通过人嘴靠近麦克风123发声,将声音信号输入到麦克风123。电子设备100可以设置至少一个麦克风123。在另一些实施例中,电子设备100可以设置两个麦克风123,除了采集声音信号,还可以实现降噪功能。在另一些实施例中,电子设备100还可以设置三个、四个或更多麦克风123,实现采集声音信号,降噪,还可以识别声音来源,实现定向录音功能等。
耳机接口124用于连接有线耳机。耳机接口124可以是USB(Universal SerialBus,通用串行总线)接口130,也可以是3.5mm的开放移动电子设备平台(Open MobileTerminal Platform,OMTP)标准接口,美国蜂窝电信工业协会(CellularTelecommunications Industry Association of the USA,CTIA)标准接口。
通用串行总线接口130是符合USB标准规范的接口,具体可以是MiniUSB接口,MicroUSB接口,USBTypeC接口等。通用串行总线接口130可以用于连接充电器为电子设备100充电,也可以用于电子设备100与***设备之间传输数据。也可以用于连接耳机,通过耳机播放音频。该接口还可以用于连接其他电子设备,例如头戴设备等。
充电管理模块140用于从充电器接收充电输入。其中,充电器可以是无线充电器,也可以是有线充电器。电源管理模块141用于连接电池142、充电管理模块140与处理器110。电源管理模块141接收电池142和/或充电管理模块140的输入,为处理器110、内部存储器121、显示模块160、摄像模组170等供电。
显示模块160用于显示图像、视频等,摄像模组170用于捕获静态图像或视频。
作为另一方面,本申请还提供了一种计算机可读存储介质,该计算机可读存储介质可以是上述实施例中描述的电子设备中所包含的;也可以是单独存在,而未装配入该电子设备中。上述计算机可读存储介质承载有一个或者多个计算机程序,当上述一个或者多个计算机程序被一个该电子设备执行时,使得该电子设备实现如下述实施例中所述的方法。例如,所述的电子设备可以实现如图3所示的各个步骤等。
需要说明的是,本公开所示的计算机可读存储介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的***、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器、只读存储器、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行***、装置或者器件使用或者与其结合使用。而在本公开中,计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读存储介质,该计算机可读存储介质可以发送、传播或者传输用于由指令执行***、装置或者器件使用或者与其结合使用的程序。计算机可读存储介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:无线、电线、光缆、射频等等,或者上述的任意合适的组合。
以下对本公开实施例的技术方案进行详细阐述:
随着电子设备的发展,智能终端、头戴设备等可以实现越来越多的功能,给用户提供较好的使用体验。例如,VR(Virtual Reality,虚拟现实)可以通过3D计算机模型或者模拟技术,给用户带来强烈的视觉感知和沉浸感的技术。与之对应的还有AR(AugmentedReality,增强现实)技术,AR技术是一种将虚拟信息与真实世界巧妙融合的技术,广泛运用了多媒体、三维建模、实时跟踪及注册、智能交互、传感等多种技术手段,将计算机生成的文字、图像、三维模型、音乐、视频等虚拟信息模拟仿真后,应用到真实世界中,两种信息互为补充,从而实现对真实世界的“增强”。
用户在使用AR/VR时,通常都戴在头部,因此可以统称为头戴设备。AR/VR等头戴设备都需要通过计算机虚拟呈现出2D/3D图像,尤其是AR技术,还需要融合现实的环境。因此,需要消耗较大的计算资源,较大的计算量将导致较大的功耗以及较高的发热。用户在使用电子设备时,与皮肤近距离接触,任意一点温度的上升都会被用户感知到,对用户体验产生较大的影响。
例如,某AR眼镜虽然为分体式眼镜,但是该AR眼镜在使用时整机的热量非常大。从图2可以看到,在靠近用户额头的位置温度最高,在实测时温度可以达到47摄氏度,用户能明显感觉到发热,影响用户体验。
目前,散热方式包括:被动散热和主动散热。为了达到较好的散热效果,降低头戴设备的工作温度。在整体散热体积一定的情况下,被动散热无法达到预定温度时,可以采用主动散热的方式。主动散热可以使用增加散热风扇的方式,通过风扇转动产生空气对流,从而通过空气的流动带走热量。然而,散热风扇时属于机械结构,风扇转动时由于机械摩擦、振动以及空气流动等会产生较大的噪声,尤其是当风扇转速增加时,噪声更加明显。
并且,头戴设备是佩戴在头部使用,距离人耳更近,这些风扇的噪音更容易被人耳察觉,将严重影响用户的整机体验。同样地,对于智能手机,在工作时间较长的情况下,温度也会较高,在通过散热风扇进行散热时,也会产生较大的噪音,影响用户体验。
为了解决上述问题,本公开提供了一种音频信号处理方法、音频信号处理装置、电子设备以及计算机可读存储介质,可以提高降噪的效果。
参见图3,图3示出了本公开实施例中音频信号处理方法的一种流程图,可以包括以下步骤:
步骤S310,获取噪声信号,并确定噪声信号的声源位置参数。
步骤S320,利用噪声信号,确定与噪声信号频率相同、相位相反的反相降噪信号。
步骤S330,根据声源位置参数以及反相降噪信号,得到并输出多个声道的降噪信号;其中,多个声道的降噪信号在用户侧叠加时对应的声源位置与噪声信号的声源位置相同。
本公开实施例的音频信号处理方法中,在确定噪声信号的位置以及反相降噪信号后,生成多个声道的降噪信号。如果用户只接收多个声道的降噪信号,可以使用户更立体地感觉到是从噪声信号的位置传过来的。这样,用户同时接收噪声信号和多个声道的降噪信号时,噪声信号和降噪信号进行叠加时可以达到最佳的降噪效果,从而可以提升用户体验。
以下对本公开实施例的音频信号处理方法进行更加详细的介绍。
在步骤S310中,获取噪声信号,并确定噪声信号的声源位置参数。
本公开实施例中,噪声信号可以包括散热风扇产生的噪声信号,或者,也可以包括其他噪声信号。噪声信号的数量可以是一个或多个,由于针对每个噪声信号的处理方式相同,在对每个噪声信号进行处理之后,将每个噪声信号对应的输出信号与其他噪声信号对应的输出信号分别进行叠加即可。当然,为了降低计算量,也可以先确定多个噪声信号的强度,对信号强度较大的一个或多个噪声信号进行降噪处理。
具体的,本公开可以通过拾音模块采集噪声信号,拾音模块可以是麦克风等。麦克风采集的噪声信号,可以是模拟信号,也可以是数字信号。当采集模拟信号时,拾音模块里面还可以包括信号的滤波、放大、模数转换电路。当采集数字信号时,可以直接输出数字信号。
麦克风采集到噪声信号后,可以将噪声信号输出至处理器。处理器可以根据麦克风采集到的噪声信号确定噪声信号的声源位置参数,声源位置参数表示噪声信号所在位置的相关参数,可以包括:噪声信号与采集信号时所在位置之间的距离、水平方位角、仰角等。例如,可以基于波束形成的方法,或者基于高分辨率谱估计的方法,或者基于声达时延差的方法来确定噪声信号的位置。
在本公开的一种实现方式中,可以分别从多个不同方向采集噪声信号,根据采集到的噪声信号以及从多个不同方向采集噪声信号时的相对位置,确定噪声信号的声源位置参数。例如,多个麦克风可以分布在头戴设备的不同位置,对于某个位置产生的噪声,各个麦克风可以从不同的方向进行采集,距离噪声较近的麦克风采集到的噪声信号的强度较大,距离噪声较远的麦克风采集到的噪声信号的强度较小,可以根据采集到的噪声信号的强度,以及各个麦克风的相对位置确定噪声的位置。
再比如,距离噪声较近的麦克风采集到噪声信号花费的时间较短,距离噪声较远的麦克风采集到噪声信号花费的时间较长,可以根据两者之间的时间差,以及两者之间的相对位置确定噪声的位置。需要说明的是,本公开实施例中,通过两个麦克风采集噪声信号即可确定噪声的位置。当然,也可以使用更多个麦克风确定噪声的位置,以提高所确定的噪声位置的准确性。
本公开实施例中,在一些场景下,例如,散热风扇产生的噪声等,是可以直接获取的。在另一些场景下,也可以采集原始音频信号,原始音频信号可以是噪声信号和用户实际想要获取的音频信号的叠加。然后从原始音频信号中提取出噪声信号,并通过本公开实施例的方法进行降噪。
在步骤S320中,利用噪声信号,确定与噪声信号频率相同、相位相反的反相降噪信号。
可以理解的是,噪声信号是一种声波。对于任一声波,将其与反相声波进行叠加之后,可以相互抵消,反相声波与该声波的相位相差180°。参见图4,图4示出了声波叠加的一种示意图,可以看出,原声波在和反相声波叠加之后相互抵消。因此,为了将噪声信号消除,也就是使用户感受不到噪声信号,可以确定噪声信号对应的反相降噪信号。
在步骤S330中,根据声源位置参数以及反相降噪信号,得到并输出多个声道的降噪信号;其中,多个声道的降噪信号在用户侧叠加时对应的声源位置与噪声信号的声源位置相同。
本公开实施例中,声道的数量可以是2个,例如,左声道和右声道。为了使降噪效果更好,也可以是更多个声道,在此不做限定。由于人类是通过双耳线索感知声音源以确定方位角和位置的,双耳线索包括:双耳时间差和双耳音强差。这些对于声音的具体影响可以称为头部相关传递函数,因此,在本公开的一种实现方式中,可以基于声源位置参数以及头部相关传递函数,对反相降噪信号的音频参数进行调节,得到音频参数不同的多个声道的降噪信号。
其中,音频参数可以包括:信号强度、相位等信息。例如,可以配置两个独立的音频通道,然后通过基于对象的方式来实现环绕声。在一个基于对象的***中,不同的音频元素可以根据声源位置参数和混音时的矢量信息进行编码。结合头部相关传递函数,以通过标准的立体声通道输出,以达到在特定位置产生声音的目的。
需要说明的是,头部相关传递函数可以通过实验的方式建立,即可以通过实验的方式确定头部相关传递函数中的参数值。在不同的场景下,对应的头部相关传递函数可以相同,也可以不同。
本公开实施例中,对于已建立的头部相关传递函数,用户在实际使用之前,还可以对其进行调节,以更好地适用于用户。例如,用户在使用时,可以先展示一个参数调节的界面,该界面用于提示用户执行具体的操作。用户在该界面上执行相应的操作后,电子设备可以接收到对应的校正指令,响应于校正指令,可以对头部相关传递函数中的参数进行调节。
本公开实施例中,除了根据头部相关传递函数对反相降噪信号的音频参数进行调节之外,也可以通过其他方法进行处理。例如,可以预先建立声场模型,并通过声场模型进行处理,该声场模型可以通过神经网络算法训练得到。
在得到多个声道的降噪信号,可以驱动多个扬声器分别输出单个声道的降噪信号。参见图5,图5示出了本公开实施例中麦克风、扬声器和人头模型的位置关系示意图。可以看出,在人头模型的左右两边各有一个麦克风和扬声器,两个麦克风用于采集噪声信号,两个扬声器可以用于分别输出左声道的降噪信号和右声道的降噪信号。这样,假设单纯存在左声道的降噪信号和右声道的降噪信号时,用户的直观感受是,降噪信号是从特定位置(即噪声信号所在位置)传过来的。降噪信号与噪声信号进行叠加之后,可以将噪声消除,达到较好的降噪效果。例如,对于上述头戴设备而言,在进行散热时,可以在不需要降低风扇转速的情况下有效地降低了风扇的噪声,实现静音散热。
本公开实施例中,针对每个声道,在输出该声道的降噪信号时,可以将该声道的降噪信号和该声道的待输出音频信号进行叠加输出,也就是多个声道中每个声道的降噪信号可以是与对应声道的待输出音频信号叠加之后输出的。例如,在输出左声道的降噪信号和右声道的降噪信号时,可以将左声道的降噪信号和左声道的待输出音频信号进行叠加输出,将右声道的降噪信号和右声道的待输出音频信号进行叠加输出。
其中,待输出音频信号是用户实际要接收的音频信号,例如,可以是游戏中的音频信号、电影中的音频信号等。将降噪信号与待输出音频信号进行叠加输出,再与噪声信号进行叠加,用户可以接收到不包含其他信号的待输出音频信号。
需要说明的是,不同时刻噪声信号的强度可能不同,在降噪的时候,可以通过本公开实施例的音频信号处理方法实时进行处理,并实时调整扬声器的输出,形成反馈机制。
可以理解的是,噪声信号可以是电子设备内部产生的,也可以是电子设备之外的其他设备产生的,即不管噪声信号的位置在哪里,电子设备均可以通过扬声器输出对应的降噪信号,并且可以达到较好的降噪效果。因此,本公开实施例的音频信号处理方法除了可以适用于头戴设备之外,还可以适用于其他电子设备,例如智能手机、笔记本电脑等。
举例而言,对于笔记本电脑,在用户使用时间较长时,发热比较严重,用户可以在底部放置一个散热风扇,散热风扇转动时产生较大的噪音,此时可以通过本公开实施例的音频信号处理方法进行降噪处理。
本公开实施例中,根据声源位置参数和反相降噪信号,可以得到并输出多个声道的降噪信号,并且,用户接收到多个声道的降噪信号后,可以感受到降噪信号来源于该位置。相应地,除了进行降噪处理之外,在另一种场景下,还可以实现空间音源的效果。也就是,将降噪信号替换为用户实际想要输出的音频信号时,将声源位置参数替换为特定位置的位置参数,可以在特定位置输出多个声道的音频信号。
具体的,可以获取目标音频信号,并确定目标音频信号对应的目标声源位置。目标音频信号也就是用户实际想要输出的音频信号,例如,可以是音乐音频等,目标音频信号对应的目标声源位置是用户接收目标音频信号时想要感受到的位置。根据目标声源位置和目标音频信号,得到并输出多个声道的音频信号。其处理过程与上述反相降噪信号的处理过程类似,在此不再赘述。这样,用户在接收到多个声道的音频信号时,可以感受到其来源于目标声源位置。因此,本公开可以在空间任意位置模拟音频信号,可以达到更加沉静的音效体验。
本公开实施例的音频信号处理方法,通过对采集到的噪声信号进行处理,得到与噪声信号频率相同、相位相反的降噪信号。通过输出多个声道的降噪信号,使用户感受到降噪信号来源于噪声信号所在的位置,降噪信号与噪声信号相互抵消,可以达到较好的降噪效果。除此之外,还可以在空间任意位置模拟音频信号,可以适用于更多的应用场景。
应当注意,尽管在附图中以特定顺序描述了本公开中方法的各个步骤,但是,这并非要求或者暗示必须按照该特定顺序来执行这些步骤,或是必须执行全部所示的步骤才能实现期望的结果。附加的或备选的,可以省略某些步骤,将多个步骤合并为一个步骤执行,以及/或者将一个步骤分解为多个步骤执行等。
进一步的,本示例实施方式中,还提供了一种音频信号处理装置600,如图6所示,包括:
噪声信号获取模块610,用于获取噪声信号;
声源位置确定模块620,用于确定噪声信号的声源位置参数;
信号处理模块630,用于利用噪声信号,确定与噪声信号频率相同、相位相反的反相降噪信号;
多声道信号确定模块640,用于根据声源位置参数以及反相降噪信号,得到多个声道的降噪信号;其中,多个声道的降噪信号在用户侧叠加时对应的声源位置与噪声信号的声源位置相同;
信号输出模块650,用于分别输出多个声道的降噪信号。
在本公开的一种示例性实施例中,上述音频信号处理装置还包括:
目标音频信号获取模块,获取目标音频信号;
声源位置确定模块,还用于确定目标音频信号对应的目标声源位置;
多声道信号确定模块,还用于根据目标声源位置和目标音频信号,得到多个声道的音频信号;
信号输出模块,还用于输出多个声道的音频信号。
在本公开的一种示例性实施例中,多声道信号确定模块具体用于基于声源位置参数以及头部相关传递函数,对反相降噪信号的音频参数进行调节,得到音频参数不同的多个声道的降噪信号。
在本公开的一种示例性实施例中,上述音频信号处理装置还包括:
函数调节模块,用于响应于校正指令,对头部相关传递函数中的参数进行调节。
在本公开的一种示例性实施例中,多个声道中每个声道的降噪信号是与对应声道的待输出音频信号叠加之后输出的。
在本公开的一种示例性实施例中,噪声信号获取模块,具体用于分别从多个不同的方向采集噪声信号;
声源位置确定模块,具体用于根据采集到的噪声信号以及从多个不同方向采集噪声信号时的相对位置,确定噪声信号的声源位置参数。
在本公开的一种示例性实施例中,噪声信号获取模块,具体用于采集原始音频信号,从原始音频信号中提取出噪声信号。
上述装置中各模块或单元的具体细节已经在对应的音频信号处理方法中进行了详细的描述,因此此处不再赘述。
应当注意,尽管在上文详细描述中提及了用于动作执行的设备的若干模块或者单元,但是这种划分并非强制性的。实际上,根据本公开的实施方式,上文描述的两个或更多模块或者单元的特征和功能可以在一个模块或者单元中具体化。反之,上文描述的一个模块或者单元的特征和功能可以进一步划分为由多个模块或者单元来具体化。
本领域技术人员在考虑说明书及实践这里公开的发明后,将容易想到本公开的其它实施方案。本申请旨在涵盖本公开的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本公开的真正范围和精神由下面的权利要求指出。
应当理解的是,本公开并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限制。

Claims (10)

1.一种音频信号处理方法,其特征在于,包括:
获取噪声信号,并确定所述噪声信号的声源位置参数;
利用所述噪声信号,确定与所述噪声信号频率相同、相位相反的反相降噪信号;
根据所述声源位置参数以及所述反相降噪信号,得到并输出多个声道的降噪信号;
其中,所述多个声道的降噪信号在用户侧叠加时对应的声源位置与所述噪声信号的声源位置相同。
2.根据权利要求1所述的方法,其特征在于,还包括:
获取目标音频信号,并确定所述目标音频信号对应的目标声源位置;
根据所述目标声源位置和所述目标音频信号,得到并输出多个声道的音频信号。
3.根据权利要求1所述的方法,其特征在于,根据所述声源位置参数以及所述反相降噪信号,得到多个声道的降噪信号,包括:
基于所述声源位置参数以及头部相关传递函数,对所述反相降噪信号的音频参数进行调节,得到音频参数不同的多个声道的降噪信号。
4.根据权利要求3所述的方法,其特征在于,在所述基于所述声源位置参数以及头部相关传递函数,对所述反相降噪信号的音频参数进行调节之前,所述方法还包括:
响应于校正指令,对所述头部相关传递函数中的参数进行调节。
5.根据权利要求1所述的方法,其特征在于,所述多个声道中每个声道的降噪信号是与对应声道的待输出音频信号叠加之后输出的。
6.根据权利要求1所述的方法,其特征在于,所述获取噪声信号,并确定所述噪声信号的声源位置参数,包括:
分别从多个不同的方向采集所述噪声信号;
根据采集到的噪声信号以及从所述多个不同方向采集所述噪声信号时的相对位置,确定所述噪声信号的声源位置参数。
7.根据权利要求1所述的方法,其特征在于,所述获取噪声信号,包括:
采集原始音频信号,从所述原始音频信号中提取出噪声信号。
8.一种音频信号处理装置,其特征在于,包括:
噪声信号获取模块,用于获取噪声信号;
声源位置确定模块,用于确定所述噪声信号的声源位置参数;
信号处理模块,用于利用所述噪声信号,确定与所述噪声信号频率相同、相位相反的反相降噪信号;
多声道信号确定模块,用于根据所述声源位置参数以及所述反相降噪信号,得到多个声道的降噪信号;其中,所述多个声道的降噪信号在用户侧叠加时对应的声源位置与所述噪声信号的声源位置相同;
信号输出模块,用于分别输出所述多个声道的降噪信号。
9.一种电子设备,其特征在于,包括:
处理器;以及
存储器,用于存储所述处理器的可执行指令;
其中,所述处理器配置为经由执行所述可执行指令来执行权利要求1~7任一项所述的方法。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1~7任一项所述的方法。
CN202010425184.1A 2020-05-19 2020-05-19 音频信号处理方法及装置、电子设备、存储介质 Pending CN111696513A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010425184.1A CN111696513A (zh) 2020-05-19 2020-05-19 音频信号处理方法及装置、电子设备、存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010425184.1A CN111696513A (zh) 2020-05-19 2020-05-19 音频信号处理方法及装置、电子设备、存储介质

Publications (1)

Publication Number Publication Date
CN111696513A true CN111696513A (zh) 2020-09-22

Family

ID=72477274

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010425184.1A Pending CN111696513A (zh) 2020-05-19 2020-05-19 音频信号处理方法及装置、电子设备、存储介质

Country Status (1)

Country Link
CN (1) CN111696513A (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112203178A (zh) * 2020-09-23 2021-01-08 江苏视天虚拟现实科技有限公司 Xr眼镜及降噪方法
CN112911198A (zh) * 2021-01-18 2021-06-04 广州佰锐网络科技有限公司 一种视频通信中的音频智能降噪的处理***
CN113709288A (zh) * 2021-08-16 2021-11-26 Oppo广东移动通信有限公司 降噪方法、装置、电子设备及计算机可读存储介质
CN114120956A (zh) * 2021-12-13 2022-03-01 Oppo广东移动通信有限公司 降噪方法、装置、车辆及存储介质
WO2022179069A1 (zh) * 2021-02-25 2022-09-01 荣耀终端有限公司 一种笔记本电脑的风扇降噪方法及笔记本电脑
CN115132161A (zh) * 2022-05-27 2022-09-30 歌尔股份有限公司 降噪方法、头戴显示设备及计算机可读存储介质

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0915527A (ja) * 1995-06-27 1997-01-17 Olympus Optical Co Ltd 頭部装着型映像表示装置
CN1685762A (zh) * 2002-09-23 2005-10-19 皇家飞利浦电子股份有限公司 声音重现***、程序和数据载体
CN201616843U (zh) * 2010-03-18 2010-10-27 华为终端有限公司 能够降低噪音的音频装置和降噪手机
CN104616650A (zh) * 2015-02-10 2015-05-13 南京信息工程大学 一种适用于小空间的降噪装置
CN105679300A (zh) * 2015-12-29 2016-06-15 努比亚技术有限公司 移动终端和降噪方法
CN208258023U (zh) * 2018-06-15 2018-12-18 深圳市华美迪科技有限公司 一种具有主动降噪功能蓝牙耳机
CN209234033U (zh) * 2019-03-07 2019-08-09 歌尔科技有限公司 一种主动降噪耳机
CN111050250A (zh) * 2020-01-15 2020-04-21 北京声智科技有限公司 降噪方法、装置、设备和存储介质
CN111081213A (zh) * 2018-10-19 2020-04-28 比亚迪股份有限公司 新能源车及其主动声音***和主动声音控制方法

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0915527A (ja) * 1995-06-27 1997-01-17 Olympus Optical Co Ltd 頭部装着型映像表示装置
CN1685762A (zh) * 2002-09-23 2005-10-19 皇家飞利浦电子股份有限公司 声音重现***、程序和数据载体
CN201616843U (zh) * 2010-03-18 2010-10-27 华为终端有限公司 能够降低噪音的音频装置和降噪手机
CN104616650A (zh) * 2015-02-10 2015-05-13 南京信息工程大学 一种适用于小空间的降噪装置
CN105679300A (zh) * 2015-12-29 2016-06-15 努比亚技术有限公司 移动终端和降噪方法
CN208258023U (zh) * 2018-06-15 2018-12-18 深圳市华美迪科技有限公司 一种具有主动降噪功能蓝牙耳机
CN111081213A (zh) * 2018-10-19 2020-04-28 比亚迪股份有限公司 新能源车及其主动声音***和主动声音控制方法
CN209234033U (zh) * 2019-03-07 2019-08-09 歌尔科技有限公司 一种主动降噪耳机
CN111050250A (zh) * 2020-01-15 2020-04-21 北京声智科技有限公司 降噪方法、装置、设备和存储介质

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
沈晋原: "《多媒体通信技术基础》", 国防工业出版社 *

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112203178A (zh) * 2020-09-23 2021-01-08 江苏视天虚拟现实科技有限公司 Xr眼镜及降噪方法
CN112911198A (zh) * 2021-01-18 2021-06-04 广州佰锐网络科技有限公司 一种视频通信中的音频智能降噪的处理***
WO2022179069A1 (zh) * 2021-02-25 2022-09-01 荣耀终端有限公司 一种笔记本电脑的风扇降噪方法及笔记本电脑
CN113709288A (zh) * 2021-08-16 2021-11-26 Oppo广东移动通信有限公司 降噪方法、装置、电子设备及计算机可读存储介质
CN114120956A (zh) * 2021-12-13 2022-03-01 Oppo广东移动通信有限公司 降噪方法、装置、车辆及存储介质
CN115132161A (zh) * 2022-05-27 2022-09-30 歌尔股份有限公司 降噪方法、头戴显示设备及计算机可读存储介质

Similar Documents

Publication Publication Date Title
CN111696513A (zh) 音频信号处理方法及装置、电子设备、存储介质
KR101614790B1 (ko) 카메라 구동 오디오 공간화
US11356797B2 (en) Display a graphical representation to indicate sound will externally localize as binaural sound
US20240155302A1 (en) Emoji that indicates a location of binaural sound
WO2012028906A1 (en) Determining individualized head-related transfer functions
US10496360B2 (en) Emoji to select how or where sound will localize to a listener
JP7210602B2 (ja) オーディオ信号の処理用の方法及び装置
CN111385728B (zh) 一种音频信号处理方法及装置
US11223920B2 (en) Methods and systems for extended reality audio processing for near-field and far-field audio reproduction
CN114067810A (zh) 音频信号渲染方法和装置
CN107249166A (zh) 一种完全沉浸式的耳机立体声实现方法及***
CN110225445A (zh) 一种处理声音信号实现三维声场听觉效果的方法及装置
CN116709159B (zh) 音频处理方法及终端设备
CN114339582B (zh) 双通道音频处理、方向感滤波器生成方法、装置以及介质
WO2019174442A1 (zh) 拾音设备、声音输出方法、装置、存储介质及电子装置
US20190394583A1 (en) Method of audio reproduction in a hearing device and hearing device
KR102613035B1 (ko) 위치보정 기능의 이어폰 및 이를 이용하는 녹음방법
CN116055983B (zh) 一种音频信号处理方法及电子设备
CN116347320B (zh) 音频播放方法及电子设备
CN115623156B (zh) 音频处理方法和相关装置
RU2815366C2 (ru) Аудиоустройство и способ обработки аудио
CN116825128A (zh) 音频处理方法及装置、计算机可读存储介质及电子设备
CN117676002A (zh) 音频处理方法及电子设备
CN116781817A (zh) 双耳拾音方法和装置
CN116774836A (zh) 一种气流产生方法、装置及电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination