JP2007271686A - Audio signal processor - Google Patents
Audio signal processor Download PDFInfo
- Publication number
- JP2007271686A JP2007271686A JP2006093944A JP2006093944A JP2007271686A JP 2007271686 A JP2007271686 A JP 2007271686A JP 2006093944 A JP2006093944 A JP 2006093944A JP 2006093944 A JP2006093944 A JP 2006093944A JP 2007271686 A JP2007271686 A JP 2007271686A
- Authority
- JP
- Japan
- Prior art keywords
- audio signal
- signal
- reverberation
- frequency
- band
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Reverberation, Karaoke And Other Acoustics (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
- Stereophonic System (AREA)
Abstract
Description
この発明は、圧縮されたデジタルオーディオ信号をデコードしたときの音質の劣化を補償するオーディオ信号処理装置、オーディオ信号処理方法、および、オーディオ信号処理プログラムに関する。 The present invention relates to an audio signal processing device, an audio signal processing method, and an audio signal processing program that compensate for deterioration in sound quality when a compressed digital audio signal is decoded.
近年、MP3,ATRAC,AAC等のオーディオ信号圧縮方式が開発され、実用化されている。これら信号圧縮方式の殆どは、人間の聴覚のマスキング効果を利用し、生のオーディオ信号のうちマスキング効果によってリスナに聞こえないであろう信号成分を省略することによって聴感上の音質劣化を抑えながら情報量を少なくしている。 In recent years, audio signal compression methods such as MP3, ATRAC, and AAC have been developed and put into practical use. Most of these signal compression methods use the masking effect of human hearing, omitting signal components that would not be heard by the listener due to the masking effect in the raw audio signal, while suppressing deterioration in sound quality on hearing. The amount is reduced.
図1は人間のマスキング効果について説明する図である。図1(A),(B)は、マスキング効果のうち同時マスキングについて示している。また、図1(C)は、マスキング効果のうち継時マスキングについて示している。同時マスキングとは、オーディオ信号中のある周波数に大レベルの信号成分(マスカー)が存在する場合、その周辺の周波数の信号成分(マスキー)はリスナに聞こえないという効果である。同図(A)に示すように、マスカーのレベルが大きいほどマスクされるマスキーのレベルも大きくなり、周波数範囲も広くなる。また、同図(B)に示すように、マスカーのレベルが(等感度曲線上で)同じレベルであっても、その周波数によって周波数軸の広がりが異なり、1kHz以下では約100Hzの範囲、1kHz以上では周波数が大きいほど影響を及ぼす範囲は大きくなる。 FIG. 1 is a diagram for explaining a human masking effect. FIGS. 1A and 1B show simultaneous masking among the masking effects. Further, FIG. 1C shows the successive masking among the masking effects. The simultaneous masking is an effect that when a high level signal component (masker) exists at a certain frequency in the audio signal, the signal component (maskee) of the surrounding frequency cannot be heard by the listener. As shown in FIG. 6A, the masker mask level increases as the masker level increases, and the frequency range also increases. Further, as shown in FIG. 5B, even if the masker level is the same (on the isosensitivity curve), the frequency axis spreads depending on the frequency, and the range of about 100 Hz is 1 kHz or less, and 1 kHz or more. Then, the greater the frequency, the greater the range affected.
また、同図(C)に示すように、大レベルの信号成分が発音された後は、その周辺の周波数成分については、しばらくの間音が聞こえなくなる。また、これら同時マスキング効果、(前方の)継時マスキング効果以外にも、時間的に過去に遡る後方継時マスキング効果や倍音マスキング効果等を利用したものもある。 Also, as shown in FIG. 5C, after a large level signal component is sounded, the surrounding frequency components cannot be heard for a while. In addition to the simultaneous masking effect and the forward masking effect (forward), there are those utilizing a backward masking effect or a harmonic masking effect that goes back in time.
しかしながら、上記オーディオ信号圧縮方式は、不可逆に情報量を少なくするのであるから音質が劣化することは否めず、特に高音域の音質劣化が著しいといわれている。そこで、復調(デコード)したオーディオ信号の高音域を強調することによって、音質の劣化を補償する技術が開発されている(たとえば特許文献1)。
しかし、上記特許文献1の装置では、強調されるのは高音部のみであり、それ以外の周波数帯域の音質劣化を補償することはできなかった。 However, in the apparatus disclosed in Patent Document 1, only the high sound part is emphasized, and it has not been possible to compensate for sound quality deterioration in other frequency bands.
また、単に高音域を強調して新たな周波数成分を生成するのみであるため、実際に存在していたが省略された信号成分を再現したことにはならず、聴感上の音質改善にはなるが、原音を復元することにはならないという問題点があった。 In addition, since only the high frequency range is emphasized and a new frequency component is generated, the signal component that was actually present but omitted is not reproduced, and the sound quality on hearing is improved. However, there was a problem that the original sound was not restored.
この発明は、マスキング効果を利用して情報量を減らした圧縮オーディオ信号の音質を的確に改善できるオーディオ信号処理装置、オーディオ信号処理方法、オーディオ信号処理プログラムを提供することを特徴とする。 The present invention provides an audio signal processing device, an audio signal processing method, and an audio signal processing program capable of accurately improving the sound quality of a compressed audio signal with a reduced amount of information using a masking effect.
この発明は、圧縮オーディオ信号を復調した復調オーディオ信号を複数の周波数帯域の部分帯域信号に分割する帯域分割部と、各部分帯域信号ごとに設けられ、各部分帯域信号に基づいて、各周波数帯域における聴覚マスキング特性の時間変化を模した残響信号を生成する残響フィルタと、前記残響フィルタが生成した各周波数帯域ごとの残響信号を前記復調オーディオ信号に加算する加算部と、を備えたオーディオ信号処理装置である。 The present invention provides a band dividing unit that divides a demodulated audio signal obtained by demodulating a compressed audio signal into partial band signals of a plurality of frequency bands, and is provided for each partial band signal. Audio signal processing comprising: a reverberation filter that generates a reverberation signal simulating temporal change in auditory masking characteristics in the signal; and an adder that adds the reverberation signal for each frequency band generated by the reverberation filter to the demodulated audio signal Device.
この発明は、圧縮オーディオ信号を復調した復調オーディオ信号から高音域の部分帯域信号を取り出す高域分離部と、前記部分帯域信号に基づいて、高音域における聴覚マスキング特性の時間変化を模した残響信号を生成する残響フィルタと、前記残響フィルタが生成した残響信号を前記復調オーディオ信号に加算する加算部と、を備えたオーディオ信号処理装置である。 The present invention relates to a high-frequency separation unit that extracts a high-frequency partial band signal from a demodulated audio signal obtained by demodulating a compressed audio signal, and a reverberation signal simulating temporal changes in auditory masking characteristics in the high-frequency range based on the partial band signal The reverberation filter which produces | generates, and the addition part which adds the reverberation signal which the said reverberation filter produced | generated to the said demodulation audio signal is an audio signal processing apparatus.
この発明は、前記残響信号を、前記復調オーディオ信号によってマスキングされるレベルに応じたゲインで増幅する増幅部を備えたオーディオ信号処理装置である。 The present invention is an audio signal processing apparatus including an amplifying unit that amplifies the reverberation signal with a gain corresponding to a level masked by the demodulated audio signal.
この発明は、圧縮オーディオ信号を復調した復調オーディオ信号を複数の周波数帯域の部分帯域信号に分割し、各部分帯域信号に基づいて、各周波数帯域における聴覚マスキング特性の時間変化を模した残響信号を生成し、前記各周波数帯域ごとの残響信号を前記復調オーディオ信号に加算することを特徴とするオーディオ信号処理方法である。 The present invention divides a demodulated audio signal obtained by demodulating a compressed audio signal into subband signals of a plurality of frequency bands, and based on each subband signal, generates a reverberation signal that imitates the temporal change of auditory masking characteristics in each frequency band. An audio signal processing method comprising: generating and adding a reverberation signal for each frequency band to the demodulated audio signal.
この発明は、圧縮オーディオ信号を復調した復調オーディオ信号から高音域の部分帯域信号を取り出し、前記部分帯域信号に基づいて、高音域における聴覚マスキング特性の時間変化を模した残響信号を生成し、前記残響信号を前記復調オーディオ信号に加算することを特徴とするオーディオ信号処理方法である。 The present invention extracts a high-frequency partial band signal from a demodulated audio signal obtained by demodulating a compressed audio signal, and generates a reverberation signal imitating a temporal change in auditory masking characteristics in a high-frequency range based on the partial band signal, An audio signal processing method comprising adding a reverberation signal to the demodulated audio signal.
この発明は、デジタル信号処理装置に、圧縮オーディオ信号を復調した復調オーディオ信号を複数の周波数帯域の部分帯域信号に分割するプロセス、各部分帯域信号に基づいて、各周波数帯域における聴覚マスキング特性の時間変化を模した残響信号を生成するプロセス、前記各周波数帯域ごとの残響信号を前記復調オーディオ信号に加算するするプロセス、を実行させるオーディオ信号処理プログラムである。 The present invention relates to a process for dividing a demodulated audio signal obtained by demodulating a compressed audio signal into a plurality of frequency band partial band signals, a time of auditory masking characteristics in each frequency band based on each partial band signal. An audio signal processing program for executing a process for generating a reverberation signal simulating a change and a process for adding a reverberation signal for each frequency band to the demodulated audio signal.
この発明は、デジタル信号処理装置に、圧縮オーディオ信号を復調した復調オーディオ信号から高音域の部分帯域信号を取り出すプロセス、前記部分帯域信号に基づいて、高音域における聴覚マスキング特性の時間変化を模した残響信号を生成するプロセス、前記残響信号を前記復調オーディオ信号に加算するプロセス、を実行させるオーディオ信号処理プログラムである。 The present invention imitates a digital signal processing device in the process of extracting a high-frequency partial band signal from a demodulated audio signal obtained by demodulating a compressed audio signal, and the temporal change in auditory masking characteristics in the high-frequency range based on the partial band signal. An audio signal processing program for executing a process of generating a reverberation signal and a process of adding the reverberation signal to the demodulated audio signal.
音楽等のオーディオ信号の場合、圧縮により省略される信号成分は、その直前は大レベルで発音されていた楽音が減衰したものが多い。すなわち、打楽器等の減衰音は時間とともに減衰するため、最初はマスカーであっても途中からマスキーに変わる、また、その楽音を録音したホールに響きがあっても直接音と初期反射音は発音されるが残響はマスキーとなって省略されてしまう、等である。そこで、圧縮オーディオ信号を復調した復調信号に残響を付与することにより、以前はマスカーであったが、今はマスキーとなっている信号成分を復元することができ、擬似的に原音のオーディオ信号を復元することができる。 In the case of audio signals such as music, many signal components that are omitted by compression are attenuated musical sounds that were sounded at a high level immediately before. In other words, the decay sound of percussion instruments decays with time, so even if it is a masker at first, it changes to a masque from the middle. However, reverberation is omitted as a mask. Therefore, by adding reverberation to the demodulated signal obtained by demodulating the compressed audio signal, the signal component that was previously a masker can now be restored, and the original audio signal is simulated. Can be restored.
圧縮オーディオ信号は、人間の聴覚マスキング特性に基づいて信号成分を省略している。人間の聴覚マスキング特性は、周波数によって異なる。そこで、この発明では、復元オーディオ信号を複数の周波数帯域の部分帯域信号に分割し、各周波数帯域のマスキング特性に合わせた特性の残響を付与する。 The compressed audio signal omits signal components based on human auditory masking characteristics. Human auditory masking characteristics vary with frequency. Therefore, in the present invention, the restored audio signal is divided into partial band signals of a plurality of frequency bands, and reverberation with characteristics matching the masking characteristics of each frequency band is given.
なお、信号圧縮による音質の劣化は高音域において顕著であるため、高音域のみ残響を付加しても簡易的に音質の改善実現することができる。 Note that the deterioration in sound quality due to signal compression is significant in the high sound range, so that it is possible to simply improve the sound quality even if reverberation is added only in the high sound range.
また、復調オーディオ信号の周波数成分(マスカー)のレベルによっても実際にマスキングされる周波数成分の特性が変化するため、この復調オーディオ信号に応じて残響信号を増幅するゲインを調整し、実際にマスキングされた信号成分に近い残響を付加するようにする。 Also, since the characteristics of the frequency component that is actually masked change depending on the level of the frequency component (masker) of the demodulated audio signal, the gain for amplifying the reverberation signal is adjusted according to the demodulated audio signal, and the masking is actually performed. Reverberation close to the signal component is added.
この発明によれば、人間の聴覚のマスキング効果に基づいて省略された音声信号成分を擬似的に再現することができるため、マスキング効果を利用した圧縮によって劣化した音質をよりよく改善することができる。 According to the present invention, since the audio signal component omitted based on the human auditory masking effect can be reproduced in a pseudo manner, the sound quality deteriorated by the compression using the masking effect can be improved better. .
図面を参照してこの発明の実施形態について説明する。図2は、この発明の実施形態であるオーディオ信号処理装置のブロック図である。このオーディオ信号処理装置では、図1に示したマスキング効果による非可聴成分を省略することによって圧縮されたオーディオ信号を再生するときに、直前の(時間的に遡った)音声信号を残響として残すことにより、上記圧縮によって省略された信号成分を擬似的に復元するものである。 Embodiments of the present invention will be described with reference to the drawings. FIG. 2 is a block diagram of an audio signal processing apparatus according to an embodiment of the present invention. In this audio signal processing apparatus, when a compressed audio signal is reproduced by omitting the inaudible component due to the masking effect shown in FIG. 1, the immediately preceding (retrochronized) audio signal is left as reverberation. Thus, the signal component omitted by the compression is restored in a pseudo manner.
これは、オーディオ信号が音楽演奏等の楽音である場合、省略される信号成分は、その直前にはレベルが大きく省略されず発音していた成分が減衰したものまたは演奏によりデクレッシェンドしたものである可能性がたかい。そこで過去の信号を残響として小レベルで付加することにより、この失われた信号成分を擬似的に復元することが可能になる。 This is because when the audio signal is a musical sound such as a musical performance, the signal component to be omitted is the one whose level was not greatly omitted immediately before that but the sounding component was attenuated or decremented by the performance. The possibility is high. Therefore, by adding the past signal as reverberation at a small level, it is possible to restore the lost signal component in a pseudo manner.
図2に示すように、オーディオ信号処理装置は、圧縮されたオーディオ信号を伸長(デコード)するデコーダ10、デコードされたオーディオ信号を高域(H),中域(M),低域(L)の3つの周波数帯域に分割する帯域分割フィルタ11、各帯域の信号に基づき、それぞれの態様の残響信号を生成する残響フィルタ12(12H,12M,12L)、生成された各帯域の残響信号をそれぞれのレベルで増幅するアンプ13(13H,13M,13L)、高域,中域,低域に分割された残響信号を統合する帯域合成部15、帯域合成部15から出力された残響信号とデコーダ10でデコードされた復調オーディオ信号とを合成する加算器16を備えている。
As shown in FIG. 2, the audio signal processing apparatus includes a
また、オーディオ信号処理装置は、デコーダ10がデコードしたオーディオ信号の周波数特性に応じて、アンプ13(13H,13M,13L)のゲインを設定する解析部14を備えている。また、この解析部14が、デコーダ10がデコードしたオーディオ信号の周波数特性に応じて残響フィルタ12(12H,12M,12L)のフィルタ特性)を設定するようにしてもよい。
The audio signal processing apparatus also includes an
図1のブロック図は機能的に示したものであり、このオーディオ信号処理装置は、例えばオーディオ装置やAV機器に組み込まれる場合においてはDSP等のハードウェアで実現される。 The block diagram of FIG. 1 shows functionally, and this audio signal processing device is realized by hardware such as a DSP when incorporated in an audio device or an AV device, for example.
デコーダ10は、MP3,ATRAC,AAC等の圧縮方式で圧縮されたオーディオ信号を通常のPCM形式のオーディオ信号にデコードする。このデコードされたオーディオ信号は帯域分割部11、加算器16および解析部14に入力される。また、デコーダは、デコードする前の圧縮されたオーディオ信号に含まれる(省略されずに残った)再生信号成分の周波数・レベル成分情報を、解析部14に出力する。
The
帯域分割部11は、入力されたオーディオ信号を高域(H),中域(M),低域(L)に分割して、それぞれ別々の残響フィルタ12(12H,12M,12L)に入力する。各帯域は、低域が200Hz以下、中域が200Hz〜2kHz、高域が2kHz以上となるように分割する。
The
なお各帯域の周波数割りは上記に限定されない。また、帯域分割数も高域、中域、低域の3つに限定されるものではない。 The frequency division of each band is not limited to the above. Further, the number of band divisions is not limited to three, that is, a high band, a middle band, and a low band.
残響フィルタ12H,12M,12Lは、帯域分割部から入力されたオーディオ信号に対して、それぞれの帯域に応じたフィルタ特性で残響を付与し、残響信号を生成する。 The reverberation filters 12H, 12M, and 12L add reverberation to the audio signal input from the band dividing unit with filter characteristics corresponding to each band, and generate a reverberation signal.
ここで、図3を参照して残響フィルタ12H,12M,12Lに設定されるフィルタ特性について説明する。図3は、(A),(B),(C)は、それぞれ高域、中域、低域の残響フィルタに設定されるフィルタ特性を示す図である。 Here, the filter characteristics set in the reverberation filters 12H, 12M, and 12L will be described with reference to FIG. FIGS. 3A, 3B, and 3C are diagrams showing filter characteristics set in the high frequency, middle frequency, and low frequency reverberation filters, respectively.
人間の聴覚の高音域のマスキング特性は、大きな音が鳴った直後は大レベルの信号成分までマスキングされるが、そのマスキングレベルの減衰は急速である。そこで、高域の残響フィルタ12Hには、このマスキング特性を模して初期レベルが高く減衰の速いフィルタ係数を設定する。また、人間の聴覚の低音域のマスキング特性は、大きな音が鳴った直後でもマスキングされる信号成分のレベルは高くないが、その後のマスキングレベルの減衰は緩やかであり長時間持続する。そこで、低域の残響フィルタ12Lには、このマスキング特性を模して初期レベルが低く減衰の緩やかなフィルタ係数を設定する。人間の聴覚の中音域のマスキング特性は、高音域と低音域の中間の特性であるため、中域の残響フィルタ12Mには、高域の残響フィルタ12Hのフィルタ係数と低域の残響フィルタ12Lのフィルタ係数の中間の特徴をもったフィルタ係数を設定する。
The high-frequency masking characteristics of human hearing are masked to a high level signal component immediately after a loud sound is produced, but the attenuation of the masking level is rapid. Therefore, a filter coefficient having a high initial level and a fast attenuation is set for the high-
なお、各残響フィルタ12H,12M,12Lは、直接音を出力せず残響の成分のみを出力するようにしているが、直接音も出力するようにしてもよい。 Note that each of the reverberation filters 12H, 12M, and 12L outputs only the reverberation component without outputting the direct sound, but may output the direct sound.
これらのフィルタ係数は、固定的なものであるが、デコードされたオーディオ信号の周波数特性に応じて(解析部14の解析に基づき)特性を変更するようにしてもよい。たとえば、各帯域で特に大レベルの成分が出力された場合には、その成分の周辺周波数を強調するような周波数特性を持たせる等である。 These filter coefficients are fixed, but the characteristics may be changed according to the frequency characteristics of the decoded audio signal (based on the analysis of the analysis unit 14). For example, when a particularly large level component is output in each band, a frequency characteristic that enhances the peripheral frequency of the component is provided.
なお、残響フィルタ12は、信号圧縮により省略された周波数成分を擬似的に復元するためのものであるため、ホール等の空間の響きを模擬する一般の残響効果装置のように、残響特性を(空間の広さを模した)ディレイ,(直接反射音を模した)初期反射音,(乱反射音を模した)残響音と時間分割する必要はなく、最初から密なタップ設定で残響信号を出力するように設定すればよい。 Since the reverberation filter 12 is for restoring the frequency component omitted by the signal compression in a pseudo manner, the reverberation characteristics (like a general reverberation effect device that simulates the reverberation of a space such as a hall) are ( There is no need to time-divide the delay (simulating the size of the space), the initial reflected sound (simulating direct reflection sound), and the reverberation sound (simulating diffuse reflection sound), and output the reverberation signal with dense tap settings from the beginning. It should be set so that.
図2にもどって、残響フィルタ12H,12M,12Lから出力された残響信号は、アンプ13H,13M,13Lに入力され、それぞれのアンプに設定されたゲインで増幅される。これらアンプ13H,13M,13Lのゲインは、解析部14が、デコーダ10がデコードしたオーディオ信号の周波数特性に応じて設定する。
Returning to FIG. 2, the reverberation signals output from the reverberation filters 12H, 12M, and 12L are input to the
図4を参照してアンプ13H,13M,13Lのゲイン決定の方式を説明する。図4は、デコードされたオーディオ信号のある瞬間のピーク周波数成分とそのピーク周波数成分による同時マスキング範囲を示す図である。図示のようにピーク周波数成分によって低レベルの信号成分の多くはマスキングされてしまい、ピークレベルが高いほど、マスキングされる信号のレベルも高くなる。そこで、各周波数帯域(高域、中域、低域)で、それぞれ最大のピークレベルを検出し、そのレベルに相関した値をその帯域のアンプのゲインとして設定する。
A method of determining gains of the
オーディオ信号のピーク周波数成分は、デコードされたオーディオ信号をFFTして求めてもよく、デコードする前の圧縮信号に含まれている周波数成分情報をデコーダ10から入力するようにしてもよい。
The peak frequency component of the audio signal may be obtained by performing FFT on the decoded audio signal, and frequency component information included in the compressed signal before decoding may be input from the
上記では各帯域の最大ピークレベルに相関した値をその帯域のアンプゲインとして設定したが、各帯域のピークレベルの平均値等に基づいてアンプのゲインを設定するようにしてもよい。また、この実施形態では同時マスキングのみ考慮してアンプのゲインを設定しているが、過去のオーディオ信号の周波数成分に基づき、継時マスキングも考慮してアンプのゲインを設定するようにしてもよい。 In the above description, the value correlated with the maximum peak level of each band is set as the amplifier gain of that band. However, the amplifier gain may be set based on the average value of the peak level of each band. In this embodiment, the gain of the amplifier is set considering only simultaneous masking. However, the gain of the amplifier may be set taking into account successive masking based on the frequency components of the past audio signal. .
図2に戻って、帯域合成部15は、高域、中域、低域の帯域ごとに生成された残響信号を合成して全帯域の残響信号を生成する。そして、この残響信号を加算器16に出力する。加算器16は、この残響信号をデコーダ10で復調出力された復調オーディオ信号と合成して後段の装置に出力する。後段の装置は、たとえばイコライザ、D/Aコンバータ等である。
Returning to FIG. 2, the
デコーダ10から出力された復調オーディオ信号と、そののち帯域分割部11から帯域合成部15までの処理部で処理されて出力される残響信号とでは、加算器16に入力可能になるタイミングが異なるが、両信号が適切なタイミングで合成されるように復調オーディオ信号をバッファして加算器16に入力する。
The demodulated audio signal output from the
図5は、この発明の第2の実施形態であるオーディオ信号処理装置の構成を示すブロック図である。この図において、図2と同一構成の部分は同一符号を付して説明を省略する。このオーディオ信号処理装置は、信号圧縮では高域の信号成分の省略による音質劣化が著しいことに着目し、簡略な構成で効率的に音質の改善を図れるようにしたものである。このオーディオ信号処理装置は、このため、図2のオーディオ信号処理装置のうち中域、低域の処理系統を省略し、高域の処理系統である残響フィルタ12H、アンプ13Hのみを備えている。残響フィルタ12Hには、ハイパスフィルタ(HPF)11′で取り出された高域の信号成分が入力される。またアンプ13Hから出力された高域の残響信号は帯域合成部を経ることなくそのまま加算器16で復調オーディオ信号と合成される。
FIG. 5 is a block diagram showing a configuration of an audio signal processing apparatus according to the second embodiment of the present invention. In this figure, parts having the same configuration as in FIG. In this audio signal processing apparatus, attention is paid to the remarkable deterioration in sound quality due to omission of high-frequency signal components in signal compression, and the sound quality can be improved efficiently with a simple configuration. For this reason, this audio signal processing apparatus is provided with only the
図6は、この発明の第3の実施形態であるオーディオ信号処理装置の構成を示すブロック図である。この図において、図2と同一構成の部分は同一符号を付して説明を省略する。このオーディオ信号処理装置は、図2の構成のオーディオ信号処理装置にさらに高域強調部を付加したものである。このオーディオ信号処理装置は、残響信号を用いて省略された信号成分を擬似的に復元するとともに、残響にも含まれていない高音域の信号成分を強調または生成する高域強調部20を備えている。この高域強調部20としては、たとえば特開2003−140696号公報記載の装置等を用いることができる。
なお、図6では高域強調部20を帯域分割部11〜加算部16までの残響付与部と並列に設けたが、加算器16の後段に高域強調部を設け、残響を付与されたオーディオ信号に対して更に高域を強調するようにしてもよい。
FIG. 6 is a block diagram showing the configuration of an audio signal processing apparatus according to the third embodiment of the present invention. In this figure, parts having the same configuration as in FIG. This audio signal processing apparatus is obtained by adding a high frequency emphasis unit to the audio signal processing apparatus having the configuration shown in FIG. The audio signal processing apparatus includes a high
In FIG. 6, the high
上記オーディオ信号処理装置は、DSP等の専用プロセッサ上に構成するのみならず、パーソナルコンピュータ等でソフトウェア的に構成してもよい。 The audio signal processing apparatus may be configured not only on a dedicated processor such as a DSP but also as software using a personal computer or the like.
10…デコーダ
11…帯域分割部
11′…ハイパスフィルタ
12(12H、12M、12L)…残響フィルタ
13(13H、13M、13L)…アンプ
14…解析部
15…帯域合成部
16…加算器
20…高域強調部
DESCRIPTION OF
Claims (7)
各部分帯域信号ごとに設けられ、各部分帯域信号に基づいて、各周波数帯域における聴覚マスキング特性の時間変化を模した残響信号を生成する残響フィルタと、
前記残響フィルタが生成した各周波数帯域ごとの残響信号を前記復調オーディオ信号に加算する加算部と、
を備えたオーディオ信号処理装置。 A band dividing unit that divides a demodulated audio signal obtained by demodulating the compressed audio signal into partial band signals of a plurality of frequency bands;
A reverberation filter that is provided for each partial band signal and generates a reverberation signal imitating a temporal change in auditory masking characteristics in each frequency band based on each partial band signal;
An adder for adding a reverberation signal for each frequency band generated by the reverberation filter to the demodulated audio signal;
An audio signal processing apparatus comprising:
前記部分帯域信号に基づいて、高音域における聴覚マスキング特性の時間変化を模した残響信号を生成する残響フィルタと、
前記残響フィルタが生成した残響信号を前記復調オーディオ信号に加算する加算部と、
を備えたオーディオ信号処理装置。 A high-frequency separation unit that extracts a high-frequency partial band signal from a demodulated audio signal obtained by demodulating the compressed audio signal;
Based on the partial band signal, a reverberation filter that generates a reverberation signal that imitates a temporal change in auditory masking characteristics in a high frequency range,
An adder for adding the reverberation signal generated by the reverberation filter to the demodulated audio signal;
An audio signal processing apparatus comprising:
各部分帯域信号に基づいて、各周波数帯域における聴覚マスキング特性の時間変化を模した残響信号を生成し、
前記各周波数帯域ごとの残響信号を前記復調オーディオ信号に加算する、
ことを特徴とするオーディオ信号処理方法。 The demodulated audio signal demodulated from the compressed audio signal is divided into subband signals of a plurality of frequency bands,
Based on each subband signal, generate a reverberation signal that imitates the temporal change of auditory masking characteristics in each frequency band,
Adding a reverberation signal for each frequency band to the demodulated audio signal;
An audio signal processing method.
前記部分帯域信号に基づいて、高音域における聴覚マスキング特性の時間変化を模した残響信号を生成し、、
前記残響信号を前記復調オーディオ信号に加算する、
ことを特徴とするオーディオ信号処理方法。 Extracting the high-frequency partial band signal from the demodulated audio signal demodulated from the compressed audio signal,
Based on the partial band signal, generate a reverberation signal that imitates the temporal change of auditory masking characteristics in the high range,
Adding the reverberant signal to the demodulated audio signal;
An audio signal processing method.
圧縮オーディオ信号を復調した復調オーディオ信号を複数の周波数帯域の部分帯域信号に分割するプロセス、
各部分帯域信号に基づいて、各周波数帯域における聴覚マスキング特性の時間変化を模した残響信号を生成するプロセス、
前記各周波数帯域ごとの残響信号を前記復調オーディオ信号に加算するするプロセス、
を実行させるオーディオ信号処理プログラム。 In digital signal processing equipment,
A process of dividing a demodulated audio signal obtained by demodulating a compressed audio signal into subband signals of a plurality of frequency bands;
A process for generating a reverberation signal simulating temporal changes in auditory masking characteristics in each frequency band based on each subband signal;
A process of adding a reverberation signal for each frequency band to the demodulated audio signal;
An audio signal processing program for executing
圧縮オーディオ信号を復調した復調オーディオ信号から高音域の部分帯域信号を取り出すプロセス、
前記部分帯域信号に基づいて、高音域における聴覚マスキング特性の時間変化を模した残響信号を生成するプロセス、
前記残響信号を前記復調オーディオ信号に加算するプロセス、
を実行させるオーディオ信号処理プログラム。 In digital signal processing equipment,
A process of extracting a high frequency sub-band signal from a demodulated audio signal obtained by demodulating a compressed audio signal;
A process for generating a reverberation signal simulating temporal change of auditory masking characteristics in a high frequency range based on the partial band signal;
A process of adding the reverberant signal to the demodulated audio signal;
An audio signal processing program for executing
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2006093944A JP4175376B2 (en) | 2006-03-30 | 2006-03-30 | Audio signal processing apparatus, audio signal processing method, and audio signal processing program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2006093944A JP4175376B2 (en) | 2006-03-30 | 2006-03-30 | Audio signal processing apparatus, audio signal processing method, and audio signal processing program |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2007271686A true JP2007271686A (en) | 2007-10-18 |
JP4175376B2 JP4175376B2 (en) | 2008-11-05 |
Family
ID=38674582
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2006093944A Expired - Fee Related JP4175376B2 (en) | 2006-03-30 | 2006-03-30 | Audio signal processing apparatus, audio signal processing method, and audio signal processing program |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4175376B2 (en) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102855879A (en) * | 2011-06-27 | 2013-01-02 | 索尼公司 | Signal processing apparatus, signal processing method, and program |
JP2014510474A (en) * | 2011-03-02 | 2014-04-24 | フラウンホーファー−ゲゼルシャフト・ツール・フェルデルング・デル・アンゲヴァンテン・フォルシュング・アインゲトラーゲネル・フェライン | Apparatus and method for determining reverberation perception level, audio processor, and signal processing method |
EP2741287A1 (en) | 2012-12-06 | 2014-06-11 | Fujitsu Limited | Apparatus and method for encoding audio signal, system and method for transmitting audio signal, and apparatus for decoding audio signal |
JP2017507348A (en) * | 2014-01-07 | 2017-03-16 | ハーマン インターナショナル インダストリーズ インコーポレイテッド | Signal quality based enhancement and compensation of compressed audio signals |
JP7487060B2 (en) | 2020-09-28 | 2024-05-20 | 株式会社デンソーテン | Audio device and audio control method |
-
2006
- 2006-03-30 JP JP2006093944A patent/JP4175376B2/en not_active Expired - Fee Related
Cited By (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2014510474A (en) * | 2011-03-02 | 2014-04-24 | フラウンホーファー−ゲゼルシャフト・ツール・フェルデルング・デル・アンゲヴァンテン・フォルシュング・アインゲトラーゲネル・フェライン | Apparatus and method for determining reverberation perception level, audio processor, and signal processing method |
KR101500254B1 (en) * | 2011-03-02 | 2015-03-06 | 프라운호퍼 게젤샤프트 쭈르 푀르데룽 데어 안겐반텐 포르슝 에. 베. | Apparatus, method and computer readable medium for determining a measure for a perceived level of reverberation, and audio processor, method of processing an audio signal and computer readable medium for generating a mix signal from a direct signal component |
US9672806B2 (en) | 2011-03-02 | 2017-06-06 | Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. | Apparatus and method for determining a measure for a perceived level of reverberation, audio processor and method for processing a signal |
CN102855879A (en) * | 2011-06-27 | 2013-01-02 | 索尼公司 | Signal processing apparatus, signal processing method, and program |
JP2013007944A (en) * | 2011-06-27 | 2013-01-10 | Sony Corp | Signal processing apparatus, signal processing method, and program |
US9324334B2 (en) | 2011-06-27 | 2016-04-26 | Sony Corporation | Signal processing apparatus, signal processing method, and program |
EP2741287A1 (en) | 2012-12-06 | 2014-06-11 | Fujitsu Limited | Apparatus and method for encoding audio signal, system and method for transmitting audio signal, and apparatus for decoding audio signal |
JP2014115316A (en) * | 2012-12-06 | 2014-06-26 | Fujitsu Ltd | Audio signal encoder and method, audio signal transmission system and method, and audio signal decoder |
US9424830B2 (en) | 2012-12-06 | 2016-08-23 | Fujitsu Limited | Apparatus and method for encoding audio signal, system and method for transmitting audio signal, and apparatus for decoding audio signal |
JP2017507348A (en) * | 2014-01-07 | 2017-03-16 | ハーマン インターナショナル インダストリーズ インコーポレイテッド | Signal quality based enhancement and compensation of compressed audio signals |
JP7487060B2 (en) | 2020-09-28 | 2024-05-20 | 株式会社デンソーテン | Audio device and audio control method |
Also Published As
Publication number | Publication date |
---|---|
JP4175376B2 (en) | 2008-11-05 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US6405163B1 (en) | Process for removing voice from stereo recordings | |
JP5298199B2 (en) | Binaural filters for monophonic and loudspeakers | |
JP5149968B2 (en) | Apparatus and method for generating a multi-channel signal including speech signal processing | |
JP6377249B2 (en) | Apparatus and method for enhancing an audio signal and sound enhancement system | |
JP2022058913A (en) | Audio enhancement for head-mounted speaker | |
US20130003989A1 (en) | Perception enhancement for low-frequency sound components | |
JP3537674B2 (en) | Audio system | |
JP2005354695A (en) | Audio signal processing | |
JP2002078100A (en) | Method and system for processing stereophonic signal, and recording medium with recorded stereophonic signal processing program | |
JP2005530206A5 (en) | ||
KR101489035B1 (en) | Method and apparatus for processing audio signals | |
JP4175376B2 (en) | Audio signal processing apparatus, audio signal processing method, and audio signal processing program | |
EP1451810A1 (en) | Audio coding | |
JP2010288262A (en) | Signal processing apparatus | |
RU2595541C2 (en) | Device, method and computer program for generating output stereo signal to provide additional output channels | |
JP2013007944A (en) | Signal processing apparatus, signal processing method, and program | |
KR101520618B1 (en) | Method and apparatus for focusing the sound through the array speaker | |
JP5058844B2 (en) | Audio signal conversion apparatus, audio signal conversion method, control program, and computer-readable recording medium | |
JPH0984198A (en) | Sound signal processor and surround reproducing method | |
JP2008042272A (en) | Localization controller and localization control method, etc. | |
JP4900062B2 (en) | Audio signal processing apparatus, audio reproduction apparatus, and audio signal processing method | |
US20230085013A1 (en) | Multi-channel decomposition and harmonic synthesis | |
Mohlin | Blind estimation of sound coloration in rooms | |
JP6846822B2 (en) | Audio signal processor, audio signal processing method, and audio signal processing program | |
JP2006005414A (en) | Pseudo stereo signal generating apparatus and pseudo stereo signal generating program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20080513 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20080701 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20080729 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20080811 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110829 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120829 Year of fee payment: 4 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130829 Year of fee payment: 5 |
|
LAPS | Cancellation because of no payment of annual fees |