CN111383646B - 一种语音信号变换方法、装置、设备和存储介质 - Google Patents
一种语音信号变换方法、装置、设备和存储介质 Download PDFInfo
- Publication number
- CN111383646B CN111383646B CN201811628761.6A CN201811628761A CN111383646B CN 111383646 B CN111383646 B CN 111383646B CN 201811628761 A CN201811628761 A CN 201811628761A CN 111383646 B CN111383646 B CN 111383646B
- Authority
- CN
- China
- Prior art keywords
- segmented
- original
- frequency domain
- target
- signal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000011426 transformation method Methods 0.000 title claims abstract description 11
- 230000004048 modification Effects 0.000 claims abstract description 109
- 238000012986 modification Methods 0.000 claims abstract description 109
- 238000000034 method Methods 0.000 claims abstract description 49
- 238000001914 filtration Methods 0.000 claims abstract description 23
- 230000009466 transformation Effects 0.000 claims abstract description 19
- 230000011218 segmentation Effects 0.000 claims description 76
- 238000006243 chemical reaction Methods 0.000 claims description 17
- 238000006073 displacement reaction Methods 0.000 claims description 15
- 230000017105 transposition Effects 0.000 claims description 14
- 238000004590 computer program Methods 0.000 claims description 4
- 230000001131 transforming effect Effects 0.000 claims description 2
- 230000008859 change Effects 0.000 abstract description 10
- 230000006870 function Effects 0.000 description 88
- 230000008569 process Effects 0.000 description 15
- 238000010586 diagram Methods 0.000 description 9
- 238000005070 sampling Methods 0.000 description 9
- 238000001514 detection method Methods 0.000 description 6
- 238000012545 processing Methods 0.000 description 4
- 230000003044 adaptive effect Effects 0.000 description 3
- 238000004891 communication Methods 0.000 description 3
- 238000010276 construction Methods 0.000 description 3
- 230000009286 beneficial effect Effects 0.000 description 2
- 230000002950 deficient Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000018109 developmental process Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000002040 relaxant effect Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000001228 spectrum Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/003—Changing voice quality, e.g. pitch or formants
- G10L21/007—Changing voice quality, e.g. pitch or formants characterised by the process used
- G10L21/013—Adapting to target pitch
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
- G10L21/0316—Speech enhancement, e.g. noise reduction or echo cancellation by changing the amplitude
- G10L21/0324—Details of processing therefor
- G10L21/034—Automatic adjustment
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
- G10L25/90—Pitch determination of speech signals
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/003—Changing voice quality, e.g. pitch or formants
- G10L21/007—Changing voice quality, e.g. pitch or formants characterised by the process used
- G10L21/013—Adapting to target pitch
- G10L2021/0135—Voice conversion or morphing
Landscapes
- Engineering & Computer Science (AREA)
- Quality & Reliability (AREA)
- Computational Linguistics (AREA)
- Signal Processing (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- Electrophonic Musical Instruments (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
Abstract
本发明公开了一种语音信号变换方法、装置、设备和存储介质。其中，该方法包括：分别对原始语音信号和由原始语音信号变调得到的初始目标语音信号分段后进行傅里叶变换，得到分段原始频域信号和分段目标频域信号；通过原始分段窗函数对分段原始频域信号滤波，得到对应的原始共振峰包络，以及，通过目标分段窗函数对分段目标频域信号滤波，得到对应的目标共振峰包络；根据分段目标频域信号、原始共振峰包络和目标共振峰包络，确定变调语音信号。本发明实施例提供的技术方案，消除目标共振峰包络对变调的影响，使得变调前后具备相同的共振峰包络，从而保证变调前后的语音信号中声音特征的一致性，提高变调语音信号的语音质量。
Description
技术领域
本发明实施例涉及语音识别技术领域，尤其涉及一种语音信号变换方法、装置、设备和存储介质。
背景技术
随着互联网技术的快速发展，一种通过声音变调算法(Pitch Shift)对原始语音进行音调变化的娱乐软件开始广泛的应用到人们的日常生活中，通过播放变调后的语音为用户提供一种新型的娱乐放松方式，如对某一歌唱家的原始录音进行修音时，会对存在瑕疵的声音进行变调，使得歌曲更加完美。
在通过声音变调算法处理原始语音时，虽然达到了调节音调的目的，但是可能会使该语音用户的声音特征发生改变，使得播放的语音与该语音用户的实际声音存在较大的差别，如将一个男音信号调高4个半音时，会导致听起来像一个女生的声音，存在一定的声音误差。
目前通常采用固定长度的窗函数，直接对变调前后的语音信号的共振峰包络进行处理，由于不同语音信号中的共振峰位置和变化情况也相应不同，此时会使得求取的共振峰包络存在一定误差，导致最终得到的语音信号质量较差。
发明内容
本发明实施例提供了一种语音信号变换方法、装置、设备和存储介质，在对原始语音信号进行变调的基础上，保证变调前后的语音信号中声音特征的一致性，提高变调语音信号的质量。
第一方面，本发明实施例提供了一种语音信号变换方法，该方法包括：
分别对原始语音信号和由原始语音信号变调得到的初始目标语音信号分段后进行傅里叶变换，得到分段原始频域信号和分段目标频域信号；
通过原始分段窗函数对分段原始频域信号滤波，得到对应的原始共振峰包络，以及，通过目标分段窗函数对分段目标频域信号滤波，得到对应的目标共振峰包络，所述原始分段窗函数根据所述分段原始频域信号的基频和分段比例确定，所述目标分段窗函数根据所述分段目标频域信号的基频和分段比例确定；
根据分段目标频域信号、原始共振峰包络和目标共振峰包络，确定变调语音信号。
进一步的，所述语音信号变换方法，还包括：
获取变调幅度；
根据所述变调幅度对所述原始语音信号变调，得到初始目标语音信号。
进一步的，所述分段目标频域信号的基频为所述分段原始频域信号的基频与所述变调幅度的乘积。
进一步的，在通过原始分段窗函数对分段原始频域信号滤波之前，还包括：
如果当前分段原始频域信号中携带基频，则携带的基频作为当前分段原始频域信号的基频；
如果当前分段原始频域信号中未携带基频，则根据前一分段原始频域信号的基频和后一分段原始频域信号的基频，确定当前分段原始频域信号的基频。
进一步的，所述根据前一分段原始频域信号的基频和后一分段原始频域信号的基频，确定当前分段原始频域信号的基频，包括：
通过插值算法计算前一分段原始频域信号的基频和后一分段原始频域信号的基频，得到当前分段原始频域信号的基频。
进一步的，在通过原始分段窗函数对分段原始频域信号滤波，得到对应的原始共振峰包络之前，还包括：
根据分段原始频域信号的基频和分段比例，得到对应的原始窗长度；
根据所述原始窗长度和预设窗类型，构建对应的原始分段窗函数。
进一步的，在通过目标分段窗函数对分段目标频域信号滤波，得到对应的目标共振峰包络之前，还包括：
根据分段目标频域信号的基频和分段比例，得到对应的目标窗长度；
根据所述目标窗长度和预设窗类型，构建对应的目标分段窗函数。
进一步的，分别对原始语音信号和由原始语音信号变调得到的初始目标语音信号分段后进行傅里叶变换，得到分段原始频域信号和分段目标频域信号，包括：
根据预设分段长度和分段位移对原始语音信号和初始目标语音信号进行分段，得到分段原始语音信号和分段目标语音信号；
分别对分段原始语音信号和分段目标语音信号进行傅里叶变换，得到分段原始频域信号和分段目标频域信号。
进一步的，根据分段目标频域信号、原始共振峰包络和目标共振峰包络，确定变调语音信号，包括：
针对单个分段目标频域信号，根据对应的原始共振峰包络和目标共振峰包络，确定所述分段目标频域信号对应的变调比值；
根据所述分段目标频域信号和所述变调比值，确定对应的分段变调频域信号；
对所述分段变调频域信号进行傅里叶逆变换，得到分段变调语音信号；
根据各分段变调语音信号、预设分段长度和分段位移，确定变调语音信号。
第二方面，本发明实施例提供了一种语音信号变换转置，该装置包括：
分段变换模块，用于分别对原始语音信号和由原始语音信号变调得到的初始目标语音信号分段后进行傅里叶变换，得到分段原始频域信号和分段目标频域信号；
包络确定模块，用于通过原始分段窗函数对分段原始频域信号滤波，得到对应的原始共振峰包络，以及，通过目标分段窗函数对分段目标频域信号滤波，得到对应的目标共振峰包络，所述原始分段窗函数根据所述分段原始频域信号的基频和分段比例确定，所述目标分段窗函数根据所述分段目标频域信号的基频和分段比例确定；
变调语音确定模块，用于根据分段目标频域信号、原始共振峰包络和目标共振峰包络，确定变调语音信号。
进一步的，所述语音信号变换转置，还包括：
语音信号变调模块，用于获取变调幅度；根据所述变调幅度对所述原始语音信号变调，得到初始目标语音信号。
进一步的，所述分段目标频域信号的基频为所述分段原始频域信号的基频与所述变调幅度的乘积。
进一步的，所述语音信号变换装置，还包括：
基频确定模块，用于如果当前分段原始频域信号中携带基频，则携带的基频作为当前分段原始频域信号的基频；如果当前分段原始频域信号中未携带基频，则根据前一分段原始频域信号的基频和后一分段原始频域信号的基频，确定当前分段原始频域信号的基频。
进一步的，所述基频确定模块，具体用于：
通过插值算法计算前一分段原始频域信号的基频和后一分段原始频域信号的基频，得到当前分段原始频域信号的基频。
进一步的，所述语音信号变换装置，还包括：
原始窗确定模块，用于根据分段原始频域信号的基频和分段比例，得到对应的原始窗长度；根据所述原始窗长度和预设窗类型，构建对应的原始分段窗函数。
进一步的，所述语音信号变换装置，还包括：
目标窗确定模块，用于根据分段目标频域信号的基频和分段比例，得到对应的目标窗长度；根据所述目标窗长度和预设窗类型，构建对应的目标分段窗函数。
进一步的，所述分段变换模块，包括：
语音信号分段单元，用于根据预设分段长度和分段位移对原始语音信号和初始目标语音信号进行分段，得到分段原始语音信号和分段目标语音信号；
傅里叶变换单元，用于分别对分段原始语音信号和分段目标语音信号进行傅里叶变换，得到分段原始频域信号和分段目标频域信号。
进一步的，所述变调语音确定模块，包括：
变调比值确定单元，用于针对单个分段目标频域信号，根据对应的原始共振峰包络和目标共振峰包络，确定所述分段目标频域信号对应的变调比值；
分段变调频域确定单元，用于根据所述分段目标频域信号和所述变调比值，确定对应的分段变调频域信号；
分段变调语音确定单元，用于对所述分段变调频域信号进行傅里叶逆变换，得到分段变调语音信号；
变调语音确定单元，用于根据各分段变调语音信号、预设分段长度和分段位移，确定变调语音信号。
第三方面，本发明实施例提供了一种设备，该设备包括：
一个或多个处理器；
存储装置，用于存储一个或多个程序；
当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现本发明任意实施例所述的语音信号变换方法。
第四方面，本发明实施例提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现本发明任意实施例所述的语音信号变换方法。
本发明实施例提供的一种语音信号变换方法、装置、设备和存储介质，通过对原始语音信号以及对原始语音信号变调后的初始目标语音信号分段进行傅里叶变换，得到分段原始频域信号和分段目标频域信号，并根据分段原始频域信号的基频和分段比例确定原始分段窗函数，根据分段目标频域信号的基频和分段比例确定目标分段窗函数，此时不同的分段信号可以对应不同的分段窗函数，后续根据对应的原始分段窗函数和目标分段窗函数分别对分段原始频域信号和分段目标频域信号滤波，得到对应的原始共振峰包络和目标共振峰包络，降低变调前后的共振峰包络的获取误差，从而根据分段目标频域信号以及变调前后的共振峰包络，确定最终的变调语音信号，消除目标共振峰包络对变调的影响，使得变调前后具备相同的共振峰包络，从而保证变调前后的语音信号中声音特征的一致性，提高变调语音信号的语音质量。
附图说明
通过阅读参照以下附图所作的对非限制性实施例所作的详细描述，本发明的其它特征、目的和优点将会变得更明显：
图1A为本发明实施例一提供的一种语音信号变换方法的流程图；
图1B为本发明实施例一提供的语音信号变换过程的原理示意图；
图2为本发明实施例二提供的方法中基频检测和窗函数构建过程的原始示意图；
图3为本发明实施例三提供的语音信号变换过程的原理示意图；
图4为本发明实施例四提供的一种语音信号变换装置的结构示意图；
图5为本发明实施例五提供的一种设备的结构示意图。
具体实施方式
下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅仅用于解释本发明，而非对本发明的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与本发明相关的部分而非全部结构。此外，在不冲突的情况下，本发明中的实施例及实施例中的特征可以相互组合。
为了在对语音信号变调的基础上，保证变调前后的语音信号中声音特征的一致性，由于共振峰反映了语音信号在频域中的能量分布，决定了语音音质，也就是声音特征，因此本发明实施例主要针对变调前后的语音信号中共振峰包络的一致性进行处理，采用共振峰包络保持算法消除变调后的目标共振峰包络对变调的影响，使得变调前后具备相同的共振峰包络，提高变调语音信号的语音质量。
实施例一
图1A为本发明实施例一提供的一种语音信号变换方法的流程图。本实施例可应用于任一种能够对语音信号进行变调的设备中。本发明实施例中的技术方案可适用于如何实现变调前后的语音信号中声音特征的一致性的情况中。本实施例提供的一种语音信号变换方法可以由本发明实施例提供的语音信号变换装置来执行，该装置可以通过软件和/或硬件的方式来实现，并集成在执行本方法的设备中，该设备可以是配置有任一种能够对语音信号进行变调的应用程序的智能终端，如智能手机、平板和掌上电脑等。
具体的，参考图1A，该方法可以包括如下步骤：
S110，获取原始语音信号。
其中，原始语音信号是指通过语音采集器采集的语音用户初始录入的，未经过任何处理的语音信号，该原始语音信号以离散信号的形式被编码，其中包括大量语音采样点。
具体的，本实施例在需要对语音信号变调时，首先需要获取通过语音采集器采集的由语音用户初始录入的原始语音信号，后续对该原始语音信号进行变调。
S120，对原始语音信号变调，得到初始目标语音信号。
其中，变调是指对语音信号中的音调进行调节，也就是调节语音信号中的主要频率，如对某一歌唱者的原始录音中含有的一些有瑕疵的声音进行修音，也就是对语音信号进行变调。
具体的，本实施例中在得到原始语音信号，且对该原始语音信号存在变调需求时，可以通过确定具体的变调需求，并根据该变调需求在相应的语音变调软件中设定对应的变调参数，通过设定的变调参数和声音变调算法对原始语音信号进行变调，从而得到初始目标语音信号，此时由于变调时会破坏原始语音信号中的声音特征，因此初始目标语音信号中的声音特征相对于原始语音信号中的声音特征发生了改变，并不能直接输出，还需要对改变的声音特征进行还原，以保证变调后的语音信号在播放时，能够使其他用户明确该变调后的语音信号由哪一语音用户录入。
可选的，本实施例中对原始语音信号变调，得到初始目标语音信号，可以具体包括：获取变调幅度；根据变调幅度对原始语音信号变调，得到初始目标语音信号。
具体的，本实施例中可以通过声音变调(Pitch Shift)算法来处理原始语音信号，此时预先确定本次变调对应的变调幅度，从而在声音变调算法中设定该变调幅度，依据该变调幅度对原始语音信号进行变调，得到初始目标语音信号。
S130，分别对原始语音信号和初始目标语音信号分段后进行傅里叶变换，得到分段原始频域信号和分段目标频域信号。
其中，傅里叶变换是将时域信号转换为频域信号的一种变换方式，对于时域中无法明确得到的一类信息，可以转换到频域中来进行分析。
具体的，由于原始语音信号是由语音用户发出的一段时间内包含有不同频率信息的语音信号，此时若直接对整个原始语音信号进行傅里叶变换，对应得到的频域信号是针对整个时域的全部语音信息来确定的单个频率对应的频谱，此时不能反映局部时域内对应的频率特征，无法分析出不同时间段内的频域信息，因此本实施例中采用短时傅里叶变换分别对原始语音信号和初始目标语音信号进行处理，从而得到不同时间段内原始语音信号和初始目标语音信号对应的频域信息。短时傅里叶变换是指通过指定的时间窗内的一段语音信号对应的频域信号来表示某一时刻的频域特征。
可选的，本实施例在得到原始语音信号和初始目标语音信号后，为了对语音信号在某一时刻的频域信息进行准确分析，如图1B所示，首先可以分别对原始语音信号和初始目标语音信号进行分段，后续可以对处于同一时间分段内的原始语音信号和初始目标语音信号分别进行分析，对每一分段后的原始语音信号和初始目标语音信号均进行傅里叶变换，从而得到各个分段内的分段原始频域信号和分段目标频域信号。同时，由于采用同一分段方式对原始语音信号和初始目标语音信号进行分段，因此分段后进行傅里叶变换得到的分段原始频域信号和分段目标频域信号也是在各个分段内一一对应的。
S140，通过原始分段窗函数对分段原始频域信号滤波，得到对应的原始共振峰包络，以及，通过目标分段窗函数对分段目标频域信号滤波，得到对应的目标共振峰包络。
其中，原始分段窗函数根据分段原始频域信号的基频和分段比例确定，目标分段窗函数根据分段目标频域信号的基频和分段比例确定。具体的，原始分段窗函数和目标分段窗函数是一种自适应变长的窗函数，针对各个分段内的分段原始频域信号和分段目标频域信号的基频不同，得到的各个分段内的原始分段窗函数和目标分段窗函数的长度也不同。由于不同分段语音信号中频率变化情况也相应不同，此时采用固定长度的窗函数进行分析会造成一定的误差，本实施例中采用自适应变长的窗函数分别对不同分段内变调前后的语音信号进行处理，可以降低处理误差。同时，基频是指分段原始语音信号或者分段目标语音信号中所包含的基础频率，可以在分段原始频域信号或者分段目标频域信号中体现；分段比例是指对原始语音信号和目标语音信号进行分段时，每一分段内的语音信号的时长与整个语音信号的时长的比例，表示语音信号的分段程度。
进一步的，共振峰是指频域信号中声音能量相对集中的区域，决定声音的音质，可以通过信号的共振峰判断该语音信号是由哪一语音用户发出的；共振峰包络是指频域信号中将不同频率对应的振幅最高点连接围成的频域范围，能够表示语音用户的在当前分段的声音特征。
同时，为了提高信号处理速率，在确定分段原始频域信号的音频时，由于信号变调就是对信号频率进行调节，此时某一分段内的分段目标频域信号的音频可以直接由该分段内的分段原始频域信号的音频和变调幅度确定，而无需重新检测各个分段目标频域信号的基频，减少额外的检测操作，提高信号处理速率。
具体的，在得到分段原始频域信号和分段目标频域信号时，可以首先检测每一个分段原始频域信号的音频，根据该分段原始频域信号的音频与分段比例确定对应的原始分段窗函数，该原始分段窗函数仅对对应分段内的分段原始频域信号进行处理，而不对其他分段原始频域信号进行处理；不同的分段原始频域信号根据该分段原始频域信号的音频不同，对应有不同的原始分段窗函数；对于分段目标频域信号，采用相同的方式，通过各个分段目标频域信号的音频和分段比例，确定各分段目标频域信号对应的目标分段窗函数。
可选的，通过每一分段原始频域信号对应的原始分段窗函数分别对各分段原始频域信号进行滤波，从而得到各分段原始频域信号对应的原始共振峰包络；同时，通过每一分段目标频域信号对应的目标分段窗函数分别对各分段目标频域信号进行滤波，从而得到各分段目标频域信号对应的目标共振峰包络；原始共振峰包络和目标共振峰包络的数量与分段数量对应。
此外，本实施例中的窗函数在对频域信号滤波时，可以将窗函数理解为不同形式上的低通滤波器，而所使用窗函数的自适应变长可以使对应的低通滤波性能按频域信号的特性变化而变化。
S150，根据分段目标频域信号、原始共振峰包络和目标共振峰包络，确定变调语音信号。
其中，变调语音信号为对原始语音信号变调后，已经消除了变调时对声音特征产生的影响而最终可以输出与原始语音信号中的声音特征保持一致的语音信号。
具体的，在得到通过原始分段窗函数和目标分段窗函数分别对分段原始频域信号和分段目标频域信号进行滤波，得到各对应分段内的原始共振峰包络和目标共振峰包络后，为了保证变调前后的语音信号中声音特征的一致性，需要消除变调后的各分段目标频域信号生成的目标共振峰的影响，此时通过确定各个分段内的原始共振峰包络和目标共振峰包络的比值，来表示变调前的分段原始频域信号和变调后的分段目标频域信号中声音特征的变化情况，根据该分段内的分段目标频域信号和该比值，确定最终对应的该分段内的分段频域信号，后续根据各个分段内分段目标频域信号和该分段内的比值，确定最终对应的各个分段内的分段频域信号，由各个分段频域信号得到最终的变调频域信号，进而确定最终的变调语音信号。
本实施例提供的技术方案，通过对原始语音信号以及对原始语音信号变调后的初始目标语音信号分段进行傅里叶变换，得到分段原始频域信号和分段目标频域信号，并根据分段原始频域信号的基频和分段比例确定原始分段窗函数，根据分段目标频域信号的基频和分段比例确定目标分段窗函数，此时不同的分段信号可以对应不同的分段窗函数，后续根据对应的原始分段窗函数和目标分段窗函数分别对分段原始频域信号和分段目标频域信号滤波，得到对应的原始共振峰包络和目标共振峰包络，降低变调前后的共振峰包络的获取误差，从而根据分段目标频域信号以及变调前后的共振峰包络，确定最终的变调语音信号，消除目标共振峰包络对变调的影响，使得变调前后具备相同的共振峰包络，从而保证变调前后的语音信号中声音特征的一致性，提高变调语音信号的语音质量。
实施例二
图2为本发明实施例二提供的方法中基频检测和窗函数构建过程的原始示意图。本实施例是在上述实施例的基础上进行优化。具体的，本实施例中主要对原始语音信号分段后进行傅里叶变换得到的各个分段原始频域信号的基频的检测过程，以及各个分段原始频域信号对应的原始分段窗函数和分段目标频域信号对应的目标分段窗函数的具体构建过程进行详细的解释说明。
可选的，本实施例中的方法具体可以包括如下步骤：
S201，获取原始语音信号。
S202，对原始语音信号变调，得到初始目标语音信号。
S203，分别对原始语音信号和初始目标语音信号分段后进行傅里叶变换，得到分段原始频域信号和分段目标频域信号。
S204，判断当前分段原始频域信号中是否携带基频，若是，执行S205；若否，执行S206。
可选的，由于后续需要通过窗函数对分段原始频域信号和分段目标频域信号滤波，从而判断对应的共振峰包络，本实施例中为了提高变调前后不同分段内频域信号的共振峰包络准确性，需要通过自适应变长的窗函数对不同频域信号滤波，此时可以根据不同频域信号的基频和分段比例，确定各个频域信号对应采用的窗函数，因此本实施例中首选需要检测分段原始频域信号的基频，从而判断各个分段原始频域信号中是否携带基频。本实施例中为了后续对基频检测结果的有效性分析，可以对当前分段原始频域信号中是否携带基频的判断结果进行标记，若当前分段原始频域信号中携带基频，则标记该基频的实际结果，若当前分段原始频域信号中未携带基频，则采用预设标志来标记当前分段原始频域信号，从而在后续明确得到未携带基频的分段原始频域信号。
S205，携带的基频作为当前分段原始频域信号的基频。
可选的，如果当前分段原始频域信号中携带基频，则直接将该携带的基频作为当前分段原始频域信号的基频。
S206，根据前一分段原始频域信号的基频和后一分段原始频域信号的基频，确定当前分段原始频域信号的基频。
可选的，由于原始语音信号中存在轻音部分或者信号比较微弱而导致基频检测失败的情况，因此在对原始语音信号分段进行傅里叶变换后，该轻音部分或者信号微弱部分对应的分段原始频域信号中可能存在未携带基频的情况，本实施例中如果当前分段原始频域信号中未携带基频，为了使基频检测结果平滑，则根据前一分段原始频域信号的基频和后一分段原始频域信号的基频，来确定当前分段原始频域信号的基频。
可选的，本实施例中根据前一分段原始频域信号的基频和后一分段原始频域信号的基频，确定当前分段原始频域信号的基频，具体可以包括：通过插值算法计算前一分段原始频域信号的基频和后一分段原始频域信号的基频，得到当前分段原始频域信号的基频。
具体的，本实施例中可以采用插值算法对当前分段原始频域信号的前一分段原始频域信号的基频和后一分段原始频域信号的基频进行计算，从而得到当前分段原始频域信号的基频。
S207，根据当前分段原始频域信号的基频与变调幅度的乘积，确定当前分段目标频域信号的基频。
S208，根据分段原始频域信号的基频和分段比例，得到对应的原始窗长度；根据原始窗长度和预设窗类型，构建对应的原始分段窗函数。
可选的，本实施例在得到各个分段原始频域信号的基频后，可以根据各个分段原始频域信号的基频和分段比例，确定各个分段内所采用的窗函数的原始窗长度。示例性的，可以通过下述方式确定原始窗长度：Ln_s＝Pn*N/Fs；其中，Ln_s为原始窗长度，Pn为分段原始频域信号的基频，N为分段长度，也就是每个分段内的采样点数量，Fs为原始语音信号的采样率，一般为48kHz。
进一步的，预设窗类型是指窗函数的不同类型，可以为三角窗、矩形窗或者汉宁窗等，本实施例中对此不作限定。根据各个分段原始频域信号对应的原始窗长度和预设窗类型，可以构建各个分段原始频域信号对应的原始分段窗函数，后续通过各个原始分段窗函数对对应的分段原始频域信号进行滤波。
S209，根据分段目标频域信号的基频和分段比例，得到对应的目标窗长度；根据目标窗长度和预设窗类型，构建对应的目标分段窗函数。
可选的，本实施例在根据各个分段原始频域信号的基频和变调幅度得到各个分段目标频域信号的基频后，可以根据各个分段目标频域信号的基频和分段比例，确定各个分段内所采用的窗函数的目标窗长度。示例性的，可以通过下述方式确定目标窗长度：Ln_s＝Pn*Ratio*N/Fs；其中，Ln_s为原始窗长度，Pn为分段原始频域信号的基频，Ratio为变调幅度，N为分段长度，也就是每个分段内的采样点数量，Fs为初始目标语音信号的采样率，一般为48kHz。
进一步的，根据各个分段目标频域信号对应的目标窗长度和预设窗类型，可以构建各个分段目标频域信号对应的目标分段窗函数，后续通过各个目标分段窗函数对对应的分段目标频域信号进行滤波。
需要说明的是，S208和S209的执行顺序没有先后之分，也可以同时执行，本实施例中对此不作限定。
S210，通过原始分段窗函数对分段原始频域信号滤波，得到对应的原始共振峰包络，以及，通过目标分段窗函数对分段目标频域信号滤波，得到对应的目标共振峰包络。
S211根据分段目标频域信号、原始共振峰包络和目标共振峰包络，确定变调语音信号。
本实施例提供的技术方案，通过对分段原始频域信号和分段目标频域信号的基频进行确定，根据各个分段内的分段原始频域信号和分段目标频域信号的基频和分段比例确定各个分段内对应的原始窗长度和目标窗长度，构建自适应变长的窗函数分别对分段原始频域信号和分段目标频域信号滤波，得到对应的原始共振峰包络和目标共振峰包络，降低变调前后的共振峰包络的获取误差，从而根据变调前后的共振峰包络，消除目标共振峰包络对变调的影响，使得变调前后具备相同的共振峰包络，进而保证变调前后的语音信号中声音特征的一致性，提高变调语音信号的语音质量。
实施例三
图3为本发明实施例三提供的语音信号变换过程的原理示意图。本实施例是在上述实施例的基础上进行优化。具体的，本实施例主要对语音信号分段进行傅里叶变换的具体过程，以及变调语音信号的确定过程进行详细的解释说明。
可选的，本实施例中具体可以包括如下步骤：
S310，获取原始语音信号。
S320，对原始语音信号变调，得到初始目标语音信号。
S330，根据预设分段长度和分段位移对原始语音信号和初始目标语音信号进行分段，得到分段原始语音信号和分段目标语音信号。
可选的，本实施例在对原始语音信号和初始目标语音信号分段时，首先需要确定本次分段对应的预设分段长度和分段位移，预设分段长度表示每一分段内语音信号中应包含的采样点数量，一般为2n，如预设分段长度可以是1024或者2048等；分段位移表示相邻分段的起始采样点之间的距离，如预设分段长度为1024，分段位移为512时，第一分段由1-1024的采样点组成，第二分段由513-1536的采样点组成；本实施例根据预设分段长度和分段位移分别对原始语音信号和初始目标语音信号进行分段，可以得到各个分段一一对应的分段原始语音信号和分段目标语音信号。
S340，分别对分段原始语音信号和分段目标语音信号进行傅里叶变换，得到分段原始频域信号和分段目标频域信号。
可选的，在得到分段原始语音信号和分段目标语音信号时，可以分别对各个分段内的分段原始语音信号和分段目标语音信号进行傅里叶变换，得到各分段对应的分段原始频域信号和分段目标频域信号。
S350，通过原始分段窗函数对分段原始频域信号滤波，得到对应的原始共振峰包络，以及，通过目标分段窗函数对分段目标频域信号滤波，得到对应的目标共振峰包络，该原始分段窗函数根据分段原始频域信号的基频和分段比例确定，该目标分段窗函数根据分段目标频域信号的基频和分段比例确定。
S360，针对单个分段目标频域信号，根据对应的原始共振峰包络和目标共振峰包络，确定分段目标频域信号对应的变调比值。
具体的，在得到各个分段原始频域信号对应的原始共振峰包络，以及各个分段目标频域信号对应的目标共振峰包络时，针对单个分段目标频域信号，可以将该分段目标频域信号对应的分段内得到的原始共振峰包络和目标共振峰包络进行比对，确定该分段目标频域信号对应的变调比值，该变调比值表示变调后的目标共振峰包络在变调过程中对声音特征产生的影响。依据同样的方法，可以确定各个分段目标频域信号对应的变调比值。
S370，根据分段目标频域信号和变调比值，确定对应的分段变调频域信号。
本实施例中，为了消除目标共振峰包络在变调过程中对声音特征产生的影响，可以将该分段目标频域信号和变调比值相乘，得到该分段对应的消除变调影响后的分段变调频域信号，该分段变调频域信号与相同分段内的分段原始频域信号具有相同的共振峰包络。依据相同的方法，可以确定各个分段对应的消除变调影响后的分段变调频域信号。本实施例通过下述公式得到对应的分段变调频域信号：STFT_tn’＝STFT_tn*Esn/Etn；其中，STFT_tn’为分段变调频域信号，STFT_tn为分段目标频域信号，Esn为该分段内对应的原始共振峰包络，Etn为该分段内对应的目标共振峰包络。
S380，对分段变调频域信号进行傅里叶逆变换，得到分段变调语音信号。
可选的，在得到各个分段内对应的分段变调频域信号时，可以对各个分段内对应的分段变调频域信号进行傅里叶逆变换，从而得到各个分段内的分段变调语音信号，后续根据各个分段变调语音信号确定最终的变调语音信号。
S390，根据各分段变调语音信号、预设分段长度和分段位移，确定变调语音信号。
具体的，在得到各个分段变调语音信号后，可以根据对原始语音信号进行分段时的预设分段长度和分段位移，将各个分段变调语音信号组成，得到消除目标共振峰包络在变调过程中对声音特征产生的影响后最终的变调语音信号，该变调语音信号与原始语音信号中的共振峰包络相同，从而保证变调前后的语音信号中声音特征的一致性。
本实施例提供的技术方案，针对单个分段目标频域信号，根据变调前后的共振峰包络确定对应的变调比值，根据该分段内的分段目标频域信号和变调比值，确定对应的分段变调频域信号，消除该分段内的共振峰包络对变调的影响，从而得到各个分段内消除共振峰包络影响后的分段变调频域信号，并通过傅里叶逆变换得到分段变调语音信号，由各个分段变调语音信号组成对应的变调语音信号，保证变调前后的语音信号中声音特征的一致性，提高变调语音信号的语音质量。
实施例四
图4为本发明实施例四提供的一种语音信号变换装置的结构示意图，具体的，如图4所示，该装置可以包括：
原始信号获取模块410，用于获取原始语音信号；
语音信号变调模块420，用于对原始语音信号变调，得到初始目标语音信号；
分段变换模块430，用于分别对原始语音信号和初始目标语音信号分段后进行傅里叶变换，得到分段原始频域信号和分段目标频域信号；
包络确定模块440，用于通过原始分段窗函数对分段原始频域信号滤波，得到对应的原始共振峰包络，以及，通过目标分段窗函数对分段目标频域信号滤波，得到对应的目标共振峰包络，该原始分段窗函数根据分段原始频域信号的基频和分段比例确定，该目标分段窗函数根据分段目标频域信号的基频和分段比例确定；
变调语音确定模块450，用于根据分段目标频域信号、原始共振峰包络和目标共振峰包络，确定变调语音信号。
本实施例提供的技术方案，通过对原始语音信号以及对原始语音信号变调后的初始目标语音信号分段进行傅里叶变换，得到分段原始频域信号和分段目标频域信号，并根据分段原始频域信号的基频和分段比例确定原始分段窗函数，根据分段目标频域信号的基频和分段比例确定目标分段窗函数，此时不同的分段信号可以对应不同的分段窗函数，后续根据对应的原始分段窗函数和目标分段窗函数分别对分段原始频域信号和分段目标频域信号滤波，得到对应的原始共振峰包络和目标共振峰包络，降低变调前后的共振峰包络的获取误差，从而根据分段目标频域信号以及变调前后的共振峰包络，确定最终的变调语音信号，消除目标共振峰包络对变调的影响，使得变调前后具备相同的共振峰包络，从而保证变调前后的语音信号中声音特征的一致性，提高变调语音信号的语音质量。
进一步的，上述语音信号变调模块420，可以包括：
幅度获取单元，用于获取变调幅度；
语音信号变调单元，用于根据变调幅度对原始语音信号变调，得到初始目标语音信号。
进一步的，上述分段目标频域信号的基频为分段原始频域信号的基频与变调幅度的乘积。
进一步的，上述语音信号变换装置，还可以包括：
基频确定模块，用于如果当前分段原始频域信号中携带基频，则携带的基频作为当前分段原始频域信号的基频；如果当前分段原始频域信号中未携带基频，则根据前一分段原始频域信号的基频和后一分段原始频域信号的基频，确定当前分段原始频域信号的基频。
进一步的，上述基频确定模块，可以具体用于：
通过插值算法计算前一分段原始频域信号的基频和后一分段原始频域信号的基频，得到当前分段原始频域信号的基频。
进一步的，上述语音信号变换装置，还可以包括：
原始窗确定模块，用于根据分段原始频域信号的基频和分段比例，得到对应的原始窗长度；根据原始窗长度和预设窗类型，构建对应的原始分段窗函数。
进一步的，上述语音信号变换装置，还可以包括：
目标窗确定模块，用于根据分段目标频域信号的基频和分段比例，得到对应的目标窗长度；根据目标窗长度和预设窗类型，构建对应的目标分段窗函数。
进一步的，上述分段变换模块430，可以包括：
语音信号分段单元，用于根据预设分段长度和分段位移对原始语音信号和初始目标语音信号进行分段，得到分段原始语音信号和分段目标语音信号；
傅里叶变换单元，用于分别对分段原始语音信号和分段目标语音信号进行傅里叶变换，得到分段原始频域信号和分段目标频域信号。
进一步的，上述变调语音确定模块450，可以包括：
变调比值确定单元，用于针对单个分段目标频域信号，根据对应的原始共振峰包络和目标共振峰包络，确定分段目标频域信号对应的变调比值；
分段变调频域确定单元，用于根据分段目标频域信号和变调比值，确定对应的分段变调频域信号；
分段变调语音确定单元，用于对分段变调频域信号进行傅里叶逆变换，得到分段变调语音信号；
变调语音确定单元，用于根据各分段变调语音信号、预设分段长度和分段位移，确定变调语音信号。
本实施例提供的语音信号变换装置可适用于本发明任意实施例所提供的语音信号变换方法，具备相应的功能和有益效果。
实施例五
图5为本发明实施例五提供的一种设备的结构示意图，如图5所示，该设备包括处理器50、存储装置51和通信装置52；设备中处理器50的数量可以是一个或多个，图5中以一个处理器50为例；设备中的处理器50、存储装置51和通信装置52可以通过总线或其他方式连接，图5中以通过总线连接为例。
存储装置51作为一种计算机可读存储介质，可用于存储软件程序、计算机可执行程序以及模块，如本发明任意实施例所述的语音信号变换方法对应的程序指令/模块。处理器50通过运行存储在存储装置51中的软件程序、指令以及模块，从而执行设备的各种功能应用以及数据处理，即实现上述语音信号变换方法。
存储装置51可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作***、至少一个功能所需的应用程序；存储数据区可存储根据终端的使用所创建的数据等。此外，存储装置51可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。在一些实例中，存储装置51可进一步包括相对于处理器50远程设置的存储器，这些远程存储器可以通过网络连接至设备。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
通信装置52可用于实现设备间的网络连接或者移动数据连接。
本实施例提供的一种设备可用于执行本发明任意实施例提供的语音信号变换方法，具备相应的功能和有益效果。
实施例六
本发明实施例六还提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时可实现本发明任意实施例中的语音信号变换方法。
该方法具体可以包括：
获取原始语音信号；
对原始语音信号变调，得到初始目标语音信号；
分别对原始语音信号和初始目标语音信号分段后进行傅里叶变换，得到分段原始频域信号和分段目标频域信号；
通过原始分段窗函数对分段原始频域信号滤波，得到对应的原始共振峰包络，以及，通过目标分段窗函数对分段目标频域信号滤波，得到对应的目标共振峰包络，该原始分段窗函数根据分段原始频域信号的基频和分段比例确定，该目标分段窗函数根据分段目标频域信号的基频和分段比例确定；
根据分段目标频域信号、原始共振峰包络和目标共振峰包络，确定变调语音信号。
当然,本发明实施例所提供的一种包含计算机可执行指令的存储介质，其计算机可执行指令不限于如上所述的方法操作，还可以执行本发明任意实施例所提供的语音信号变换方法中的相关操作。
通过以上关于实施方式的描述，所属领域的技术人员可以清楚地了解到，本发明可借助软件及必需的通用硬件来实现，当然也可以通过硬件实现，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在计算机可读存储介质中，如计算机的软盘、只读存储器(Read-Only Memory,ROM)、随机存取存储器(RandomAccess Memory,RAM)、闪存(FLASH)、硬盘或光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述的方法。
值得注意的是，上述语音信号变换装置的实施例中，所包括的各个单元和模块只是按照功能逻辑进行划分的，但并不局限于上述的划分，只要能够实现相应的功能即可；另外，各功能单元的具体名称也只是为了便于相互区分，并不用于限制本发明的保护范围。
以上所述仅为本发明的优选实施例，并不用于限制本发明，对于本领域技术人员而言，本发明可以有各种改动和变化。凡在本发明的精神和原理之内所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。
Claims (12)
1.一种语音信号变换方法，其特征在于，包括：
分别对原始语音信号和由原始语音信号变调得到的初始目标语音信号分段后进行傅里叶变换，得到分段原始频域信号和分段目标频域信号；
通过原始分段窗函数对分段原始频域信号滤波，得到对应的原始共振峰包络，以及，通过目标分段窗函数对分段目标频域信号滤波，得到对应的目标共振峰包络，所述原始分段窗函数根据所述分段原始频域信号的基频和分段比例确定，所述目标分段窗函数根据所述分段目标频域信号的基频和分段比例确定；
根据分段目标频域信号以及分段目标频域信号对应的原始共振峰包络和目标共振峰包络之间的比值，确定变调语音信号；
其中，所述初始目标语音信号的变调为对语音音调的调节，所述变调语音信号的变调使变调前后的语音信号中声音特征保持一致。
2.根据权利要求1所述的方法，其特征在于，还包括：
获取变调幅度；
根据所述变调幅度对所述原始语音信号变调，得到初始目标语音信号。
3.根据权利要求2所述的方法，其特征在于，所述分段目标频域信号的基频为所述分段原始频域信号的基频与所述变调幅度的乘积。
4.根据权利要求1所述的方法，其特征在于，在通过原始分段窗函数对分段原始频域信号滤波之前，还包括：
如果当前分段原始频域信号中携带基频，则携带的基频作为当前分段原始频域信号的基频；
如果当前分段原始频域信号中未携带基频，则根据前一分段原始频域信号的基频和后一分段原始频域信号的基频，确定当前分段原始频域信号的基频。
5.根据权利要求4所述的方法，其特征在于，所述根据前一分段原始频域信号的基频和后一分段原始频域信号的基频，确定当前分段原始频域信号的基频，包括：
通过插值算法计算前一分段原始频域信号的基频和后一分段原始频域信号的基频，得到当前分段原始频域信号的基频。
6.根据权利要求1所述的方法，其特征在于，在通过原始分段窗函数对分段原始频域信号滤波，得到对应的原始共振峰包络之前，还包括：
根据分段原始频域信号的基频和分段比例，得到对应的原始窗长度；
根据所述原始窗长度和预设窗类型，构建对应的原始分段窗函数。
7.根据权利要求1所述的方法，其特征在于，在通过目标分段窗函数对分段目标频域信号滤波，得到对应的目标共振峰包络之前，还包括：
根据分段目标频域信号的基频和分段比例，得到对应的目标窗长度；
根据所述目标窗长度和预设窗类型，构建对应的目标分段窗函数。
8.根据权利要求1所述的方法，其特征在于，分别对原始语音信号和由原始语音信号变调得到的初始目标语音信号分段后进行傅里叶变换，得到分段原始频域信号和分段目标频域信号，包括：
根据预设分段长度和分段位移对原始语音信号和初始目标语音信号进行分段，得到分段原始语音信号和分段目标语音信号；
分别对分段原始语音信号和分段目标语音信号进行傅里叶变换，得到分段原始频域信号和分段目标频域信号。
9.根据权利要求8所述的方法，其特征在于，根据分段目标频域信号以及分段目标频域信号对应的原始共振峰包络和目标共振峰包络之间的比值，确定变调语音信号，包括：
针对单个分段目标频域信号，根据对应的原始共振峰包络和目标共振峰包络，确定所述分段目标频域信号对应的变调比值；
根据所述分段目标频域信号和所述变调比值，确定对应的分段变调频域信号；
对所述分段变调频域信号进行傅里叶逆变换，得到分段变调语音信号；
根据各分段变调语音信号、预设分段长度和分段位移，确定变调语音信号。
10.一种语音信号变换装置，其特征在于，包括：
分段变换模块，用于分别对原始语音信号和由原始语音信号变调得到的初始目标语音信号分段后进行傅里叶变换，得到分段原始频域信号和分段目标频域信号；
包络确定模块，用于通过原始分段窗函数对分段原始频域信号滤波，得到对应的原始共振峰包络，以及，通过目标分段窗函数对分段目标频域信号滤波，得到对应的目标共振峰包络，所述原始分段窗函数根据所述分段原始频域信号的基频和分段比例确定，所述目标分段窗函数根据所述分段目标频域信号的基频和分段比例确定；
变调语音确定模块，用于根据分段目标频域信号以及分段目标频域信号对应的原始共振峰包络和目标共振峰包络之间的比值，确定变调语音信号；
其中，所述初始目标语音信号的变调为对语音音调的调节，所述变调语音信号的变调使变调前后的语音信号中声音特征保持一致。
11.一种电子设备，其特征在于，所述电子设备包括：
一个或多个处理器；
存储装置，用于存储一个或多个程序；
当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如权利要求1-9中任一所述的语音信号变换方法。
12.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时实现如权利要求1-9中任一所述的语音信号变换方法。
Priority Applications (6)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201811628761.6A CN111383646B (zh) | 2018-12-28 | 2018-12-28 | 一种语音信号变换方法、装置、设备和存储介质 |
| PCT/CN2019/121838 WO2020134851A1 (zh) | 2018-12-28 | 2019-11-29 | 语音信号变换方法、装置、设备和存储介质 |
| SG11202106539QA SG11202106539QA (en) | 2018-12-28 | 2019-11-29 | Audio signal transformation method, device, apparatus, and storage medium |
| RU2021119297A RU2770747C1 (ru) | 2018-12-28 | 2019-11-29 | Способ преобразования аудиосигнала, устройство и носитель данных |
| US17/416,709 US20220051685A1 (en) | 2018-12-28 | 2019-11-29 | Method for transforming audio signal, device, and storage medium |
| EP19902578.4A EP3905243A4 (en) | 2018-12-28 | 2019-11-29 | AUDIO SIGNAL TRANSFORMATION METHOD, DEVICE, APPARATUS, AND INFORMATION CARRIER |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201811628761.6A CN111383646B (zh) | 2018-12-28 | 2018-12-28 | 一种语音信号变换方法、装置、设备和存储介质 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN111383646A CN111383646A (zh) | 2020-07-07 |
| CN111383646B true CN111383646B (zh) | 2020-12-08 |
Family
ID=71126923
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201811628761.6A Active CN111383646B (zh) | 2018-12-28 | 2018-12-28 | 一种语音信号变换方法、装置、设备和存储介质 |
Country Status (6)
| Country | Link |
|---|---|
| US (1) | US20220051685A1 (zh) |
| EP (1) | EP3905243A4 (zh) |
| CN (1) | CN111383646B (zh) |
| RU (1) | RU2770747C1 (zh) |
| SG (1) | SG11202106539QA (zh) |
| WO (1) | WO2020134851A1 (zh) |
Families Citing this family (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112289330A (zh) * | 2020-08-26 | 2021-01-29 | 北京字节跳动网络技术有限公司 | 一种音频处理方法、装置、设备及存储介质 |
| CN112908351A (zh) * | 2021-01-21 | 2021-06-04 | 腾讯音乐娱乐科技（深圳）有限公司 | 一种音频变调方法、装置、设备及存储介质 |
| CN112887480B (zh) * | 2021-01-22 | 2022-07-29 | 维沃移动通信有限公司 | 音频信号处理方法、装置、电子设备和可读存储介质 |
| CN113129922B (zh) * | 2021-04-21 | 2022-11-08 | 维沃移动通信有限公司 | 语音信号的处理方法和装置 |
| CN113241082B (zh) * | 2021-04-22 | 2024-02-20 | 杭州网易智企科技有限公司 | 变声方法、装置、设备和介质 |
| CN114295577B (zh) * | 2022-01-04 | 2024-04-09 | 太赫兹科技应用(广东)有限公司 | 一种太赫兹检测信号的处理方法、装置、设备和介质 |
| CN116761128B (zh) * | 2023-08-23 | 2023-11-24 | 深圳市中翔达润电子有限公司 | 一种运动蓝牙耳机声音泄漏检测方法 |
Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1164084A (zh) * | 1995-12-28 | 1997-11-05 | 日本胜利株式会社 | 音调转换装置 |
| CN1719514A (zh) * | 2004-07-06 | 2006-01-11 | 中国科学院自动化研究所 | 基于语音分析与合成的高品质实时变声方法 |
| US9240193B2 (en) * | 2013-01-21 | 2016-01-19 | Cochlear Limited | Modulation of speech signals |
| CN105304092A (zh) * | 2015-09-18 | 2016-02-03 | 深圳市海派通讯科技有限公司 | 一种基于智能终端的实时变声方法 |
| CN106057208A (zh) * | 2016-06-14 | 2016-10-26 | 科大讯飞股份有限公司 | 一种音频修正方法及装置 |
| CN106228973A (zh) * | 2016-07-21 | 2016-12-14 | 福州大学 | 稳定音色的音乐语音变调方法 |
| CN108988822A (zh) * | 2018-08-24 | 2018-12-11 | 广东石油化工学院 | 一种非平稳非高斯噪声的滤除方法及*** |
Family Cites Families (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6336092B1 (en) * | 1997-04-28 | 2002-01-01 | Ivl Technologies Ltd | Targeted vocal transformation |
| US6757659B1 (en) * | 1998-11-16 | 2004-06-29 | Victor Company Of Japan, Ltd. | Audio signal processing apparatus |
| ATE515021T1 (de) * | 2004-10-27 | 2011-07-15 | Yamaha Corp | Tonhöhenumsetzungsvorrichtung |
| JP2008546012A (ja) * | 2005-05-27 | 2008-12-18 | オーディエンス，インコーポレイテッド | オーディオ信号の分解および修正のためのシステムおよび方法 |
| CN101903944B (zh) * | 2007-12-18 | 2013-04-03 | Lg电子株式会社 | 用于处理音频信号的方法和装置 |
| EP2077551B1 (en) * | 2008-01-04 | 2011-03-02 | Dolby Sweden AB | Audio encoder and decoder |
| CN101354889B (zh) * | 2008-09-18 | 2012-01-11 | 北京中星微电子有限公司 | 一种语音变调方法及装置 |
| CN101527141B (zh) * | 2009-03-10 | 2011-06-22 | 苏州大学 | 基于径向基神经网络的耳语音转换为正常语音的方法 |
| CN102592590B (zh) * | 2012-02-21 | 2014-07-02 | 华南理工大学 | 一种可任意调节的语音自然变声方法及装置 |
| US9728182B2 (en) * | 2013-03-15 | 2017-08-08 | Setem Technologies, Inc. | Method and system for generating advanced feature discrimination vectors for use in speech recognition |
| US9583116B1 (en) * | 2014-07-21 | 2017-02-28 | Superpowered Inc. | High-efficiency digital signal processing of streaming media |
| EP2980795A1 (en) * | 2014-07-28 | 2016-02-03 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Audio encoding and decoding using a frequency domain processor, a time domain processor and a cross processor for initialization of the time domain processor |
| US9947341B1 (en) * | 2016-01-19 | 2018-04-17 | Interviewing.io, Inc. | Real-time voice masking in a computer network |
-
2018
- 2018-12-28 CN CN201811628761.6A patent/CN111383646B/zh active Active
-
2019
- 2019-11-29 US US17/416,709 patent/US20220051685A1/en active Pending
- 2019-11-29 EP EP19902578.4A patent/EP3905243A4/en active Pending
- 2019-11-29 RU RU2021119297A patent/RU2770747C1/ru active
- 2019-11-29 WO PCT/CN2019/121838 patent/WO2020134851A1/zh unknown
- 2019-11-29 SG SG11202106539QA patent/SG11202106539QA/en unknown
Patent Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1164084A (zh) * | 1995-12-28 | 1997-11-05 | 日本胜利株式会社 | 音调转换装置 |
| CN1719514A (zh) * | 2004-07-06 | 2006-01-11 | 中国科学院自动化研究所 | 基于语音分析与合成的高品质实时变声方法 |
| US9240193B2 (en) * | 2013-01-21 | 2016-01-19 | Cochlear Limited | Modulation of speech signals |
| CN105304092A (zh) * | 2015-09-18 | 2016-02-03 | 深圳市海派通讯科技有限公司 | 一种基于智能终端的实时变声方法 |
| CN106057208A (zh) * | 2016-06-14 | 2016-10-26 | 科大讯飞股份有限公司 | 一种音频修正方法及装置 |
| CN106228973A (zh) * | 2016-07-21 | 2016-12-14 | 福州大学 | 稳定音色的音乐语音变调方法 |
| CN108988822A (zh) * | 2018-08-24 | 2018-12-11 | 广东石油化工学院 | 一种非平稳非高斯噪声的滤除方法及*** |
Non-Patent Citations (3)
| Title |
|---|
| Acoustic characteristics related to the perceptual pitch in whispered vowels;H. Konno;《2013 IEEE Workshop on Automatic Speech Recognition and Understanding》;20140109;245-249 * |
| 语音变调方法分析及音效评估;张晓蕊;《山东大学学报( 工学版)》;20110228;第41卷(第1期);1-6 * |
| 语音时长规整与变调技术研究;雷颖思;《中国优秀硕士学位论文全文数据库信息科技辑》;20160430;136-184 * |
Also Published As
| Publication number | Publication date |
|---|---|
| CN111383646A (zh) | 2020-07-07 |
| EP3905243A1 (en) | 2021-11-03 |
| RU2770747C1 (ru) | 2022-04-21 |
| SG11202106539QA (en) | 2021-07-29 |
| US20220051685A1 (en) | 2022-02-17 |
| EP3905243A4 (en) | 2022-02-23 |
| WO2020134851A1 (zh) | 2020-07-02 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN111383646B (zh) | 一种语音信号变换方法、装置、设备和存储介质 | |
| CN109147796B (zh) | 语音识别方法、装置、计算机设备及计算机可读存储介质 | |
| WO2021114733A1 (zh) | 一种分频段进行处理的噪声抑制方法及其*** | |
| JP2010224321A (ja) | 信号処理装置 | |
| CN113674763B (zh) | 利用线谱特性的鸣笛声识别方法及***、设备与存储介质 | |
| CN111739544B (zh) | 语音处理方法、装置、电子设备及存储介质 | |
| CN112133277A (zh) | 样本生成方法及装置 | |
| Morita et al. | Robust voice activity detection based on concept of modulation transfer function in noisy reverberant environments | |
| CN112116909A (zh) | 语音识别方法、装置及*** | |
| CN109741761B (zh) | 声音处理方法和装置 | |
| US8750530B2 (en) | Method and arrangement for processing audio data, and a corresponding corresponding computer-readable storage medium | |
| CN111477246B (zh) | 语音处理方法、装置及智能终端 | |
| CN111489739A (zh) | 音素识别方法、装置及计算机可读存储介质 | |
| CN114302301B (zh) | 频响校正方法及相关产品 | |
| CN113921007B (zh) | 提升远场语音交互性能的方法和远场语音交互*** | |
| CN112233693B (zh) | 一种音质评估方法、装置和设备 | |
| CN109697985B (zh) | 语音信号处理方法、装置及终端 | |
| CN114333874A (zh) | 处理音频信号的方法 | |
| CN112397087A (zh) | 共振峰包络估计、语音处理方法及装置、存储介质、终端 | |
| CN112201261A (zh) | 基于线性滤波的频带扩展方法、装置及会议终端*** | |
| CN112908351A (zh) | 一种音频变调方法、装置、设备及存储介质 | |
| CN112164387A (zh) | 音频合成方法、装置及电子设备和计算机可读存储介质 | |
| CN112885380B (zh) | 一种清浊音检测方法、装置、设备及介质 | |
| JP2015031913A (ja) | 音声処理装置、音声処理方法、及びプログラム | |
| JP2003241777A (ja) | 楽音のフォルマント抽出方法、記録媒体及び楽音のフォルマント抽出装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant | ||
| TR01 | Transfer of patent right |
Effective date of registration: 20220608 Address after: 31a, 15 / F, building 30, maple mall, bangrang Road, Brazil, Singapore Patentee after: Baiguoyuan Technology (Singapore) Co.,Ltd. Address before: 511400 floor 23-39, building B-1, Wanda Plaza North, Wanbo business district, 79 Wanbo 2nd Road, Nancun Town, Panyu District, Guangzhou City, Guangdong Province Patentee before: GUANGZHOU BAIGUOYUAN INFORMATION TECHNOLOGY Co.,Ltd. |
|
| TR01 | Transfer of patent right |