JP2002314429A - Signal processor and signal processing method - Google Patents

Abstract

PROBLEM TO BE SOLVED: To quickly and properly process a plurality of high efficient coded signals without degrading the arithmetic precision in the case of simultaneously processing the signals. SOLUTION: Spectral data extract sections 512, 522 extract spectral data Q1, Q2 from two high efficiency coded data S1, S2 and normalized data extract sections 513, 523 extract scale factor values F1, F2 from the two high efficiency coded data S1, S2. A maximum value detection section 531, a comparison section 532 detect a maximum value F' of the scale factor values from the scale factor values F1, F2, apply re-normalization to the spectral data Q1, Q2 depending on the maximum value F', multiply rations A1, A2 with the spectral data Q1, Q2, an adder 533 synthesizes the products, and an inverse orthogonal transform section 534 applies inverse orthogonal transform to the synthesized signal. The signal obtained according to the result is scaled down by the maximum value F'.

Description

【発明の詳細な説明】DETAILED DESCRIPTION OF THE INVENTION

【０００１】[0001]

【発明の属する技術分野】この発明は、例えば、直交変
換を用いた所定の符号化方式でデータ圧縮するようにさ
れた符号化デジタル信号を処理する信号処理装置および
信号処理方法に関する。BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a signal processing apparatus and a signal processing method for processing a coded digital signal which is compressed by a predetermined coding method using, for example, orthogonal transform.

【０００２】[0002]

【従来の技術】パーソナルコンピュータや種々のデジタ
ル機器を用いて、様々なデジタル信号が扱われるように
なってきている。例えば、オーディオ信号やビデオ信号
をインターネットなどの通信ネットワークを通じてパー
ソナルコンピュータに取り込み、これを利用するように
することが行なわれている。2. Description of the Related Art Various digital signals have been handled by using personal computers and various digital devices. For example, an audio signal or a video signal is taken into a personal computer through a communication network such as the Internet, and is used.

【０００３】また、オーディオ信号やビデオ信号をＭＤ
（Ｍｉｎｉ Ｄｉｓｃ（登録商標））やＤＶＤ（Ｄｉｇ
ｉｔａｌ Ｖｅｒｓａｔｉｌｅ Ｄｉｓｃ）などの記録
媒体を介して提供を受けて、これを利用するようにする
ことも行なわれている。また、最近ではデジタル放送の
提供が開始されるなど、デジタル信号の利用範囲も広が
ってきている。In addition, audio signals and video signals are converted to MD signals.
(Mini Disc (registered trademark)) and DVD (Dig
It is also practiced to receive the information via a recording medium such as an ital Versatile Disc and use it. Recently, the use of digital signals has been expanding, for example, the provision of digital broadcasting has begun.

【０００４】そして、オーディオ信号やビデオ信号を通
信ネットワークを通じて効率よく送受信するようにした
り、また、記録媒体により多くのオーディオ信号やビデ
オ信号を効率よく記録するようにするために、各種の高
能率符号化方式（データ圧縮技術）を用いることによっ
て、オーディオ信号やビデオ信号のデータ圧縮を行なよ
うにしている場合が多い。In order to transmit and receive audio signals and video signals efficiently through a communication network, and to efficiently record more audio signals and video signals on a recording medium, various high-efficiency codes are used. In many cases, data compression of audio signals and video signals is performed by using a compression method (data compression technique).

【０００５】高能率符号化方式においては、離散コサイ
ン変換（Ｄｉｓｃｒｅｔｅ Ｃｏｓｉｎｅ Ｔｒａｎｓ
ｆｏｒｍ：以下、ＤＣＴと略称する。）などの直交変換
を用いて、オーディオ信号（時間領域データ）やビデオ
信号（輝度データ）を周波数領域データ（周波数スペク
トルデータ）に変換することによって、情報量の削減を
実現するようにしている。[0005] In the high-efficiency coding method, Discrete Cosine Transform (Discrete Cosine Transform) is used.
form: Hereinafter, abbreviated as DCT. ), An audio signal (time domain data) or a video signal (luminance data) is converted into frequency domain data (frequency spectrum data), thereby reducing the amount of information.

【０００６】つまり、時間領域データであるオーディオ
信号についての高能率符号化について簡単に示すと、図
１７に示すように、時間領域データをＤＣＴなどの直交
変換を行なうことにより周波数領域データに変換して、
情報量を削減するようにしている。More specifically, the high efficiency coding of an audio signal which is time domain data is briefly described. As shown in FIG. 17, time domain data is converted to frequency domain data by performing orthogonal transform such as DCT. hand,
We try to reduce the amount of information.

【０００７】そして、高能率符号化され周波数領域デー
タとされたオーディオ信号は、図１８に示すように、こ
れを逆直交変換することにより、周波数領域データとさ
れたオーディオ信号を元の時間領域データに復元し、こ
れを再生するなどして利用することができるようにされ
る。As shown in FIG. 18, the audio signal, which has been converted into frequency domain data with high efficiency coding, is inversely orthogonally transformed to convert the audio signal, which has been frequency domain data, into the original time domain data. , And can be used by reproducing it.

【０００８】ＤＣＴなどの直交変換を用いる高能率符号
化方式として広く利用されているものには、オーディオ
信号についてのＡＴＲＡＣ（Ａｄａｐｔｉｖｅ Ｔｒａ
ｎｓｆｏｒｍ Ａｃｏｕｓｔｉｃ Ｃｏｄｉｎｇ）方式
やＭＰ３（ＭＰＥＧ−１ Ａｕｄｉｏ Ｌａｙｅｒ３）
方式などがあり、また、ビデオ信号についてのＭＰＥＧ
（Ｍｏｖｉｎｇ Ｐｉｃｔｕｒｅ Ｅｘｐｅｒｔｓ Ｇ
ｒｏｕｐ）方式などがある。[0008] ATRAC (Adaptive Tra) for audio signals is widely used as a high-efficiency coding method using orthogonal transform such as DCT.
nsform Acoustic Coding) or MP3 (MPEG-1 Audio Layer3)
System, etc., and MPEG for video signals.
(Moving Picture Experts G
loop) method.

【０００９】[0009]

【発明が解決しようとする課題】ところで、直交変換を
用いた高能率符号化方式で符号化されたオーディオ信号
やビデオ信号を用いる場合に、複数のソース、つまり、
複数の異なるオーディオ信号やビデオ信号を同時に再生
する用途がある。By the way, when an audio signal or a video signal encoded by a high-efficiency encoding method using an orthogonal transform is used, a plurality of sources, ie, a plurality of sources, are used.
There is an application for simultaneously reproducing a plurality of different audio signals and video signals.

【００１０】例えば、フェードアウトするようにしたオ
ーディオ信号と、フェードインするようにしたオーディ
オ信号を合成するようにするいわゆるクロスフェード
や、ＢＧＭ（Ｂａｃｋ Ｇｒｏｕｎｄ Ｍｕｓｉｃ）や
効果音の重ね合わせ（ミキシング）を行なう場合などで
ある。ビデオ信号についても同様に、シーンチェンジ時
のクロスフェードや画像の重ね合わせなどを行なうよう
にしたい場合がある。For example, a so-called cross-fade for synthesizing an audio signal which is made to fade out and an audio signal which is made to fade-in, BGM (Back Ground Music), or superposition (mixing) of sound effects are performed. For example. Similarly, there may be a case where a cross-fade or a superimposition of images at the time of a scene change is desired to be performed on a video signal.

【００１１】このような特殊再生は、例えば、図１９に
示すように、符号化された複数のデジタル信号（符号化
データ）を同時に、逆直交変換することにより復号し、
これら復号したデジタル信号のそれぞれに所定の比率を
掛け合わせるようにして、その結果を加算することによ
り、クロスフェードや重ね合わせが実現できる。In such special reproduction, for example, as shown in FIG. 19, a plurality of encoded digital signals (encoded data) are decoded by performing an inverse orthogonal transform at the same time.
By multiplying each of these decoded digital signals by a predetermined ratio and adding the results, crossfade and superposition can be realized.

【００１２】ここで、直交変換としてＤＣＴを用いた場
合、その逆変換である逆離散コサイン変換（Ｉｎｖｅｒ
ｓｅ Ｄｉｓｃｒｅｔｅ Ｃｏｓｉｎｅ Ｔｒａｎｓｆ
ｏｒｍ：以下、ＩＤＣＴと略称する。）の結果は線形で
あるので、図２０に示すように、ＩＤＣＴと加算処理と
の順序を逆にし、複数のデジタルデータを加算した後に
ＩＤＣＴを行なうようにしても同じ結果が得られる。Here, when DCT is used as the orthogonal transform, an inverse discrete cosine transform (Inverse), which is an inverse transform thereof, is used.
se Discrete Cosine Transf
orm: Hereinafter, abbreviated as IDCT. Since the result of ()) is linear, as shown in FIG. 20, the same result can be obtained by reversing the order of the IDCT and the addition processing and performing the IDCT after adding a plurality of digital data.

【００１３】この図２０に示すように、ＩＤＣＴを行な
う前に加算処理を行なうようにすることによって、ＩＤ
ＣＴの演算が１回になるなど、ハードウエアやソフトウ
エアで行なう処理の規模を減らし、オーディオやビデオ
のクロスフェードや重ね合わせなどを行なうことが可能
なハードウエアやソフトウエアを安価に構成することが
できると考えられる。As shown in FIG. 20, by performing addition processing before performing IDCT, ID processing is performed.
Reduce the scale of hardware and software processing, such as one CT operation, and configure low-cost hardware and software that can perform crossfading and superimposition of audio and video. It is thought that it is possible.

【００１４】しかしながら、図２０に示したように、複
数の周波数スペクトルデータ（以下、単にスペクトルデ
ータという。）を一定の比率で加算して、逆直交変換を
行なう場合には、各スペクトルデータのスケールファク
タ値が異なるために、単純な加算を行なうことはできな
い場合がある。例えば、ＡＴＲＡＣ方式で符号化された
オーディオ信号は、単に、直交変換されてスペクトルデ
ータとされているだけでなく、予め用意するようにされ
た正規化情報（スケールファクタ値）が用いられて、正
規化されることにより、更なる情報量の削減が行なわれ
ている。However, as shown in FIG. 20, when performing inverse orthogonal transformation by adding a plurality of frequency spectrum data (hereinafter simply referred to as spectrum data) at a fixed ratio, the scale of each spectrum data is increased. Simple addition may not be possible due to different factor values. For example, an audio signal encoded according to the ATRAC method is not only orthogonally transformed into spectrum data, but also normalized using pre-prepared normalization information (scale factor value). As a result, the amount of information is further reduced.

【００１５】このように、ＡＴＲＡＣ方式で高能率符号
化されたオーディオ信号であるスペクトルデータは、ス
ケールファクタ値を伴っており、浮動少数点形式と同様
に広いダイナミックレンジを持っている。つまり、ＡＴ
ＲＡＣ方式で高能率符号化されたオーディオ信号（スペ
クトルデータ）は、仮数部としての固定固定小数点部
と、指数部としてのスケールファクタ値とからなるもの
である。As described above, the spectral data, which is an audio signal encoded at high efficiency by the ATRAC method, is accompanied by a scale factor value and has a wide dynamic range similarly to the floating-point format. That is, AT
An audio signal (spectral data) that has been highly efficiently encoded by the RAC method is composed of a fixed fixed-point part as a mantissa part and a scale factor value as an exponent part.

【００１６】このため、スペクトルデータの加算を行な
う時点において、スペクトルデータの固定週数点形式へ
の変換が必要になる。しかし、スペクトルデータをその
スケールファクタ値をも考慮して固定少数点形式に変換
すると、変換後のスペクトルデータの有効ビット数が長
くなってしまい、逆直交変換時の演算精度が低下する場
合があると考えられる。これは、逆直交変換時の演算に
おいては、多くの場合、固定小数点方式が用いられてお
り、有効桁数（有効ビット数）が予め決まっているが、
この有効桁数の不足が発生してしまうためである。For this reason, at the time of adding the spectral data, it is necessary to convert the spectral data into a fixed week number format. However, if the spectral data is converted into a fixed-point format in consideration of the scale factor value, the number of effective bits of the converted spectral data becomes longer, and the calculation accuracy at the time of inverse orthogonal transform may decrease. it is conceivable that. This is because, in the calculation at the time of inverse orthogonal transformation, a fixed-point method is used in many cases, and the number of significant digits (the number of significant bits) is predetermined.
This is because the shortage of the number of significant digits occurs.

【００１７】しかし、前述もしたように、複数の高能率
号化信号を同時に処理する用途があり、演算精度を落と
すことなく、しかも迅速かつ適正に複数の高能率符号化
信号を同時に処理することが可能であって、しかも安価
なハードウエアやソフトウエアの提供が望まれている。However, as described above, there is an application for simultaneously processing a plurality of high-efficiency encoded signals, and it is possible to simultaneously and properly process a plurality of high-efficiency encoded signals simultaneously without lowering the calculation accuracy. It is desired to provide inexpensive hardware and software that can be used.

【００１８】以上のことにかんがみ、複数の高能率符号
化信号を同時に処理する場合において、演算精度を落と
すことなく、迅速かつ適正に信号処理を行なうことが可
能な信号処理装置および信号処理方法を提供することを
目的とする。In view of the above, there is provided a signal processing apparatus and a signal processing method capable of performing signal processing quickly and properly without lowering calculation accuracy when simultaneously processing a plurality of high-efficiency coded signals. The purpose is to provide.

【００１９】[0019]

【課題を解決するための手段】上記課題を解決するた
め、請求項１に記載の発明の信号処理装置は、デジタル
信号を直交変換するとともに、所定の正規化情報を用い
て正規化を行なうことにより高能率符号化された高能率
符号化信号が複数チャンネル入力され、入力された上記
複数チャンネルの高能率符号化信号を合成する信号処理
装置であって、上記複数チャンネルの高能率符号化信号
のそれぞれから、正規化に用いられた正規化情報を抽出
する正規化情報抽出手段と、上記複数チャンネルの高能
率符号化信号のそれぞれから、スペクトルデータを抽出
するスペクトルデータ抽出手段と、上記正規化情報抽出
手段にて抽出された上記複数チャンネルのそれぞれに対
応する上記正規化情報の中から最大値を検出する最大値
検出手段と、上記最大値検出手段にて検出された上記最
大値に基づいて、上記複数チャンネルのそれぞれに対応
する上記スペクトルデータを再正規化するようにする再
正規化手段と、上記再正規化手段からの上記複数チャン
ネルのそれぞれに対応する再正規化結果と上記複数チャ
ンネルのそれぞれに対応する係数とを乗算する乗算手段
と、上記乗算手段での上記複数チャンネルのそれぞれに
ついての乗算結果を加算する加算手段と、上記加算手段
からの加算結果を周波数軸データから時間軸データに逆
変換する逆変換手段と、上記逆変換手段からの出力信号
と、上記最大値検出手段にて検出された上記正規化情報
の最大値に基づいて復号する復号手段とを備えてなるこ
とを特徴とする。According to a first aspect of the present invention, there is provided a signal processing apparatus for orthogonally transforming a digital signal and performing normalization using predetermined normalization information. A plurality of high-efficiency coded signals, which are coded by high-efficiency encoding, are input to a plurality of channels, and the signal processing apparatus synthesizes the input high-efficiency coded signals of the plurality of channels. Normalization information extraction means for extracting normalization information used for normalization, spectrum data extraction means for extracting spectrum data from each of the high-efficiency coded signals of the plurality of channels, Maximum value detection means for detecting a maximum value from the normalized information corresponding to each of the plurality of channels extracted by the extraction means; Re-normalizing means for re-normalizing the spectrum data corresponding to each of the plurality of channels based on the maximum value detected by the value detecting means, and the plurality of channels from the re-normalizing means. Multiplying means for multiplying the renormalization result corresponding to each of the above by the coefficient corresponding to each of the plurality of channels; adding means for adding the multiplication results for each of the plurality of channels by the multiplying means; Inverse conversion means for inversely converting the addition result from the means from frequency axis data to time axis data; an output signal from the inverse conversion means; and a maximum value of the normalized information detected by the maximum value detection means. Decoding means for decoding based on the information.

【００２０】この請求項１に記載の発明の信号処理装置
によれば、直交変換と正規化処理が施されることにより
高能率符号化されて形成された複数の高能率符号化信号
を合成する場合に、まず、正規化情報抽出手段と、スペ
クトルデータ抽出手段により、各高能率符号化信号の正
規化情報とスペクトルデータとが抽出される。According to the signal processing apparatus of the first aspect of the present invention, a plurality of highly efficient coded signals formed by high efficiency coding by performing orthogonal transformation and normalization processing are synthesized. In this case, first, the normalization information extraction means and the spectrum data extraction means extract the normalization information and the spectrum data of each high-efficiency coded signal.

【００２１】そして、正規化情報抽出手段により抽出さ
れた正規化情報の中から、最大値検出手段により正規化
情報の最大値が検出され、この正規化情報の最大値によ
り、各高能率符号化信号のスペクトルデータを再正規化
するようにする。つまり、各高能率符号化信号の正規化
情報を最大値検出手段により検出された最大値に置き換
えるようにし、この置き換えられるようにされた正規化
情報に基づいてペクトルデータが修正（再正規化）され
る。The maximum value of the normalization information is detected by the maximum value detection means from the normalization information extracted by the normalization information extraction means. Re-normalize the spectral data of the signal. That is, the normalization information of each high-efficiency coded signal is replaced with the maximum value detected by the maximum value detection means, and the spectrum data is corrected (re-normalized) based on the replaced normalization information. Is done.

【００２２】この後、乗算手段において、各チャンネル
の再正規化されたスペクトルデータに対して、各チャン
ネルに対応する比率が乗算手段において乗算される。各
チャンネルについての乗算結果は、加算手段において加
算されることによって、各チャンネルのスペクトルデー
タが合成される。Thereafter, the multiplying means multiplies the renormalized spectrum data of each channel by a ratio corresponding to each channel. The result of the multiplication for each channel is added by the adding means, so that the spectrum data of each channel is synthesized.

【００２３】そして、加算手段からの加算信号は、逆変
換手段により逆直交変換され、この逆直交変換の結果得
られた信号が、復号手段により、最大値検出手段により
検出された正規化情報の最大が用いられて復号される。
これにより、複数チャンネルの高能率符号化信号が、所
定の比率によって調整されるとともに、それらが合成さ
れ、復号されて再生されるなど、利用可能とされる。The addition signal from the adding means is subjected to inverse orthogonal transform by the inverse transform means, and a signal obtained as a result of the inverse orthogonal transform is converted by the decoding means into the normalized information detected by the maximum value detecting means. The maximum is used for decoding.
As a result, the high-efficiency coded signals of a plurality of channels are made available by being adjusted at a predetermined ratio, being synthesized, decoded, and reproduced.

【００２４】このように、各チャンネルのスペクトルデ
ータは、各チャンネルの正規化情報の中から検出された
正規化情報の最大値によって、再正規化されるので、ス
ペクトルデータの固定小数点部分が有効桁数を超えてし
まうことを確実に防止することができる。As described above, the spectrum data of each channel is re-normalized by the maximum value of the normalization information detected from the normalization information of each channel. Exceeding the number can be reliably prevented.

【００２５】したがって、逆直交変換時において、桁あ
ふれなどをおこすなど、逆変換時の演算精度を落とすこ
となく適正に逆直交変換を行なって、高能率符号化前の
デジタル信号を復元し、これを利用するようにすること
ができる。また、逆直交変換のための回路を増やした
り、複数チャンネル分の逆直交変換のための演算を重複
して行なうようにするなどのこともない。Therefore, during the inverse orthogonal transform, the inverse orthogonal transform is appropriately performed without lowering the calculation accuracy at the time of the inverse transform, such as overflow, and the digital signal before highly efficient encoding is restored. Can be used. In addition, there is no need to increase the number of circuits for inverse orthogonal transform or to duplicately perform operations for inverse orthogonal transform for a plurality of channels.

【００２６】また、請求項２に記載の発明の信号処理装
置は、請求項１に記載の信号処理装置であって、上記再
正規化手段は、上記正規化情報抽出手段により抽出され
た各チャンネルの正規化情報のそれぞれについての上記
最大値検出手段により検出された正規化情報の上記最大
値に対する割合を算出する割合算出手段と、上記スペク
トルデータ抽出手段により抽出された各チャンネルのス
ペクトルデータと、上記割合算出手段により算出された
割合とを乗算することにより、各チャンネル毎のスペク
トルデータを修正する修正手段とからなることを特徴と
する。According to a second aspect of the present invention, there is provided the signal processing apparatus according to the first aspect, wherein the re-normalization unit is configured to select each of the channels extracted by the normalization information extraction unit. Ratio calculation means for calculating the ratio of the normalized information detected by the maximum value detection means to the maximum value for each of the normalized information, and the spectrum data of each channel extracted by the spectrum data extraction means, And correcting means for correcting spectrum data for each channel by multiplying the ratio calculated by the ratio calculating means.

【００２７】この請求項２に記載の信号処理装置によれ
ば、再正規化手段は、割合算出手段と、スペクトルデー
タの修正手段とからなり、まず、割合算出手段により、
各チャンネルの正規化情報の正規化情報の最大値に対す
る割合が求められ、この割合に基づいてスペクトルデー
タが修正されることにより再正規化が行なわれるように
される。According to the signal processing device of the second aspect, the re-normalizing means includes the ratio calculating means and the spectrum data correcting means.
The ratio of the normalization information of each channel to the maximum value of the normalization information is obtained, and the spectrum data is modified based on the ratio to perform re-normalization.

【００２８】このように、割合算出手段と、乗算を行な
うことによりスペクトルデータを修正する修正手段とに
より比較的に簡単に再正規化手段を構成することがで
き、その結果、高能率符号化信号を合成する信号処理装
置を簡単かつ安価に構成することができるようにされ
る。As described above, the re-normalizing means can be relatively easily constituted by the ratio calculating means and the correcting means for correcting the spectrum data by performing the multiplication. As a result, the highly efficient coded signal can be obtained. Can be configured simply and inexpensively.

【００２９】[0029]

【発明の実施の形態】以下、図を参照しながら、この発
明による信号処理装置、信号処理方法の一実施の形態に
ついて説明する。以下に説明する実施の形態において
は、高能率符号化方式としてＡＴＲＡＣ方式を用いて楽
曲などのオーディオデータ（楽曲データ）を符号化およ
び復号化する場合を例にして説明する。DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS Hereinafter, an embodiment of a signal processing device and a signal processing method according to the present invention will be described with reference to the drawings. In the embodiment described below, a case will be described as an example in which audio data (song data) such as music is encoded and decoded using the ATRAC method as a high-efficiency encoding method.

【００３０】［この発明において用いる信号処理につい
ての概念説明］まず、この発明による信号処理装置およ
び信号処理方法についての説明を簡単にするため、この
発明による信号処理装置、信号処理方法において用いら
れる高能率符号化信号についての信号処理の考え方につ
いて説明し、この後、この発明による信号処理装置、信
号処理方法の具体例について説明する。[Conceptual explanation of signal processing used in the present invention] First, in order to simplify the description of the signal processing device and the signal processing method according to the present invention, a signal processing device and a signal processing method according to the present invention are used. The concept of signal processing for an efficiency coded signal will be described, and then a specific example of a signal processing device and a signal processing method according to the present invention will be described.

【００３１】［ＡＴＲＡＣ方式の高能率符号化の概要］
後述もするように、ＡＴＲＡＣ方式の高能率符号化にお
いては、５１２サンプルのデジタルオーディオデータ
が、最終的に５１２個のスペクトルデータに変換され
る。変換（高能率符号化）に際しては、オーディオデジ
タルデータを広域／中域／低域の３つの帯域に分割し、
それぞれの帯域において直交変換であるＤＣＴ（離散コ
サイン変換）を行なうことにより、デジタルオーディオ
データをスペクトルデータに変換する。[Overview of ATRAC System High Efficiency Coding]
As will be described later, in ATRAC high-efficiency encoding, 512 samples of digital audio data are finally converted to 512 pieces of spectral data. At the time of conversion (high-efficiency encoding), the audio digital data is divided into three bands of a wide band / middle band / low band,
By performing DCT (Discrete Cosine Transform) which is an orthogonal transform in each band, digital audio data is converted into spectrum data.

【００３２】ここで、５１２個のスペクトルデータは、
周波数の順に区切ることにより、５２個の単位ブロック
（ブロック・フローティング・ユニット）に分けられ、
各単位ブロック毎に正規化と再量子化を行なうことによ
り、デジタルオーディオデータのデータ量を更に削減す
るようにしている。Here, 512 pieces of spectrum data are
By dividing in order of frequency, it is divided into 52 unit blocks (block floating units),
By performing normalization and requantization for each unit block, the data amount of digital audio data is further reduced.

【００３３】この正規化に際しては、後述もするよう
に、予め用意される多数のスケールファクタ値（正規化
データ）の中から、各単位ブロック毎に最も適したスケ
ールファクタ値が選択され、この選択されたスケールフ
ァクタ値を用いて正規化が行なわれる。このため、高能
率符号化処理により生成された高能率符号化データ（高
能率符号化信号）は、後述もするように、スペクトルデ
ータのほか、各単位ブロック毎に割り当てられるように
されたスケールファクタ値などの種々の情報からなるも
のである。At the time of this normalization, as will be described later, the most suitable scale factor value for each unit block is selected from a large number of scale factor values (normalized data) prepared in advance. Normalization is performed using the scale factor value thus set. For this reason, the high-efficiency coded data (high-efficiency coded signal) generated by the high-efficiency coding process includes not only spectral data but also a scale factor allocated to each unit block, as described later. It consists of various information such as values.

【００３４】そして、スペクトルデータの復号時におい
ては、各帯域毎のスペクトルデータをＩＤＣＴ（逆離散
コサイン変換）によって、時間領域のデータに逆変換
し、全帯域のＩＤＣＴ後の信号を合成することにより、
高能率符号化前のデジタルオーディオ信号を復元する。When decoding the spectrum data, the spectrum data for each band is inversely transformed into data in the time domain by IDCT (Inverse Discrete Cosine Transform), and the signals after IDCT for all the bands are synthesized. ,
The digital audio signal before the high efficiency coding is restored.

【００３５】［逆直交変換時の演算制度の維持につい
て］このＩＤＣＴ時の演算は、一般に固定小数点形式で
行なわれる。換言すれば、ＩＤＣＴ時の演算において
は、その有効桁数（有効ビット数）が予め決められてい
る。このため、スペクトルデータを各単位ブロック毎に
割り当てられたスケールファクタ値を考慮して、固定小
数点形式に変換した後に、これをＩＤＣＴ処理しようと
すると、有効桁数の不足により演算精度が低下する恐れ
がある。[Regarding Maintenance of Operational Accuracy During Inverse Orthogonal Transformation] The operation at the time of IDCT is generally performed in a fixed-point format. In other words, in the calculation at the time of IDCT, the number of significant digits (number of effective bits) is determined in advance. For this reason, if the spectral data is converted into a fixed-point format in consideration of the scale factor value assigned to each unit block and then the IDCT process is performed, the calculation accuracy may be reduced due to a shortage of significant digits. There is.

【００３６】そこで、ＩＤＣＴ時の演算精度を高く保つ
ために、スペクトルデータを固定小数点部分とスケール
ファクタ値とに分け、固定小数点部分についてＩＤＣＴ
を行ない、このＩＤＣＴの出力信号について、スケール
ファクタ値を用いてスケールダウンを行なうことによっ
て、スペクトルデータを時間領域データに戻すようにす
ることが考えられる。In order to keep the calculation accuracy at the time of IDCT high, the spectrum data is divided into a fixed-point part and a scale factor value.
It is conceivable that the output data of the IDCT is scaled down using the scale factor value to return the spectrum data to the time domain data.

【００３７】図１は、スペクトルデータを高精度に時間
領域データに変換する場合の処理を説明するための図で
ある。この図１に示す処理は、各帯域（広域／中域／低
域のそれぞれ）において行なわれることになる。まず、
高能率符号化データから各単位ブロック（各ブロック
・フローティング・ユニット）に割り当てられているス
ケールファクタ値を抽出し、その最大値Ｆを検出する。FIG. 1 is a diagram for explaining a process for converting spectrum data into time-domain data with high accuracy. The processing shown in FIG. 1 is performed in each band (each of wide band / middle band / low band). First,
The scale factor value assigned to each unit block (each block floating unit) is extracted from the highly efficient encoded data, and the maximum value F is detected.

【００３８】スケールファクタ値のテーブルは、例え
ば、図２に示すようなものが高能率符号化を行なう装置
などに予め用意するようにされており、このテーブルの
中から符号化時において単位ブロックのスペクトルデー
タに応じて選択されたスケールファクタ値が各単位ブロ
ック毎に割り当てられるようにされている。A table of scale factor values, for example, the one shown in FIG. 2 is prepared in advance in a device for performing high-efficiency encoding, and the like. A scale factor value selected according to the spectrum data is assigned to each unit block.

【００３９】なお、図２に示したスケールファクタ値の
テーブル６ｄＢステップでスケールファクタ値を設ける
ようにした場合のスケールファクタ値のテーブルの一例
である。しかし、図２に示したスケールファクタ値のテ
ーブルは一例であり、ステップ幅を更に細かくしたテー
ブルを用いるようにすることももちろんできる。It is to be noted that this is an example of a scale factor value table in a case where the scale factor value is provided in 6 dB steps in the scale factor value table shown in FIG. However, the table of the scale factor values shown in FIG. 2 is an example, and a table in which the step width is further reduced can be used.

【００４０】次に、全単位ブロックのスケールファク
タ値をで検出したスケールファクタの最大値Ｆに変更
する。そして、各単位ブロックのスペクトルデータ
を、元のスケールファクタ値の最大値Ｆに対する増加率
で割り算することにより、スペクトルデータの補正後の
固定小数部分Ｑを求める。Next, the scale factor values of all the unit blocks are changed to the maximum value F of the scale factor detected by. Then, the corrected fixed decimal part Q of the spectrum data is obtained by dividing the spectrum data of each unit block by the rate of increase with respect to the original maximum value F of the scale factor value.

【００４１】すなわち、図１に示すように、スペクトル
データを固定小数点部分Ｑと、スケールファクタ値の最
大値Ｆとにより表すようにする。この〜までの処理
により、単位ブロック毎に異なるスケールファクタ値を
統一して、ＩＤＣＴの入力データを固定小数点化する。
この場合、スケールファクタの変更に伴い補正した補正
後の固定小数点部分Ｑは、−１から＋１までの間の値を
とるようにされることになる。That is, as shown in FIG. 1, the spectrum data is represented by a fixed-point portion Q and a maximum value F of the scale factor value. Through the above processing, the scale factor values different for each unit block are unified, and the input data of the IDCT is converted to a fixed point.
In this case, the corrected fixed-point portion Q corrected according to the change of the scale factor takes a value between -1 and +1.

【００４２】そして、固定小数点部分Ｑに対してＩＤ
ＣＴを行なう。この後、ＩＤＣＴ後の信号ｑに、で
求めたスケールファクタ値の最大値Ｆを掛け合わせるこ
とにより復号化して、スペクトルデータを時間領域デー
タに変換する。このように、〜の処理により、スペ
クトルデータについてのＩＤＣＴ演算を高精度に行なっ
て、スペクトルデータを時間領域データに変換すること
ができる。Then, the ID for the fixed-point part Q is
Perform CT. Thereafter, decoding is performed by multiplying the signal q after IDCT by the maximum value F of the scale factor value obtained in step (1) to convert the spectrum data into time domain data. As described above, by the processing of (1), the IDCT calculation on the spectrum data is performed with high accuracy, and the spectrum data can be converted into the time domain data.

【００４３】［復号化時におけるレベル調整］また、実
際には、スペクトルデータに対して任意の比率を掛け算
することにより、レベル調整を行なうようにする場合も
ある。この場合に任意の比率を徐々に変えることによっ
て、再生されるオーディオデータにいわゆるフェードイ
ン効果やフェードアウト効果を付加することもできる。
このようにＩＤＣＴおよび復号化時において、スペクト
ルデータについて任意の比率をかける場合について説明
する。[Level Adjustment at the Time of Decoding] In practice, the level may be adjusted by multiplying the spectrum data by an arbitrary ratio. In this case, by gradually changing the arbitrary ratio, a so-called fade-in effect or fade-out effect can be added to the reproduced audio data.
A case where an arbitrary ratio is applied to spectrum data at the time of IDCT and decoding in this way will be described.

【００４４】図３は、スペクトルデータに任意の比率を
かけてレベル調整を行なう場合の信号処理について説明
するための図である。この場合においても、図３に示す
ように、単位ブロック毎のスペクトルデータに割り当て
られているスケールファクタ値の最大値Ｆを検出し、各
単位ブロックのスケールファクタ値を最大値Ｆに変換す
るとともに、最大値Ｆと本来のスケールファクタ値とに
基づいて、スペクトルデータを修正し、固定小数点部分
Ｑを求める。FIG. 3 is a diagram for explaining signal processing when level adjustment is performed by applying an arbitrary ratio to spectral data. Also in this case, as shown in FIG. 3, the maximum value F of the scale factor value assigned to the spectrum data of each unit block is detected, and the scale factor value of each unit block is converted into the maximum value F. Based on the maximum value F and the original scale factor value, the spectrum data is corrected to obtain a fixed-point portion Q.

【００４５】そして、図３において、（１）式に示すよ
うに、固定小数点部分Ｑとスケールファクタ値の最大値
Ｆとからなるスペクトルデータに対して、任意の比率Ａ
をかけることになる。この場合、比率Ａに基づいて、ス
ケールファクタ値の最大値Ｆの補正を行なって補正後最
大値Ｆ’を求める。In FIG. 3, as shown in the equation (1), the spectrum data comprising the fixed-point portion Q and the maximum value F of the scale factor value is given an arbitrary ratio A.
Will be applied. In this case, the maximum value F of the scale factor value is corrected based on the ratio A, and the corrected maximum value F ′ is obtained.

【００４６】この補正後最大値Ｆ’は、図４Ａに示す
（４）式でえられた値よりも大きなものの中で最小のス
ケールファクタ値を図２に示したスケールファクタ値の
テーブルから選択することにより得られるものである。
この補正後最大値Ｆ’に基づいて、比率Ａについても補
正する。この場合には、図４Ｂに示すように、最大値Ｆ
の補正後最大値Ｆ’に対する割合を、比率Ａにかけるこ
とにより、補正後比率Ａ’を求めることができる。The corrected maximum value F 'is selected from the scale factor value table shown in FIG. 2 as the smallest scale factor value among values larger than the value obtained by the equation (4) shown in FIG. 4A. It is obtained by this.
The ratio A is also corrected based on the corrected maximum value F '. In this case, as shown in FIG.
By multiplying the ratio to the corrected maximum value F 'by the ratio A, the corrected ratio A' can be obtained.

【００４７】これにより、図３において、（１）式は、
（２）式のように表すことができる。ここで補正後最大
値Ｆ’は、ＩＤＣＴ後のスケールダウン時に用いるもの
であり、固定小数点部分Ｑと補正後比率Ａ’とをかけた
ものが、ＩＤＣＴの入力信号となる。このＩＤＣＴ処理
の結果は、固定小数点部分ＱをＩＤＣＴ処理して得られ
た信号ｑと補正後比率Ａ’とをかけたものとなる。As a result, in FIG.
It can be expressed as in equation (2). Here, the corrected maximum value F ′ is used at the time of scale-down after the IDCT, and the product of the fixed-point portion Q and the corrected ratio A ′ is an input signal of the IDCT. The result of the IDCT processing is obtained by multiplying the signal q obtained by performing the IDCT processing on the fixed-point portion Q and the corrected ratio A ′.

【００４８】したがって、ＩＤＣＴ処理後においては、
図３に示すように、ｑ×Ａ’×Ｆ’となるが、図４Ｂに
示した（５）式を展開すれば、図４Ｃに示すように
（６）式が得られる。すなわち、Ｆ’×Ａ’は、Ｆ×Ａ
に等しい。このため、スペクトルデータに比率Ａをかけ
る場合であっても、スペクトルデータの固定小数点部分
ＱについてＩＤＣＴ処理を行ない、その結果得られた信
号ｑに、スケールファクタ値の最大値Ｆと、任意の比率
Ａとをかけることにより、ＩＤＣＴ処理においての演算
精度を落とすことなく、ＩＤＣＴ処理をおこなうととも
に、任意の比率Ａに応じてレベル調整をも行なうことが
できる。Therefore, after the IDCT processing,
As shown in FIG. 3, it becomes q × A ′ × F ′. By expanding the equation (5) shown in FIG. 4B, the equation (6) is obtained as shown in FIG. 4C. That is, F × A ′ is F × A
be equivalent to. For this reason, even when the spectrum data is multiplied by the ratio A, the IDCT process is performed on the fixed-point portion Q of the spectrum data, and the resulting signal q is added to the maximum value F of the scale factor value and an arbitrary ratio By multiplying A, the IDCT processing can be performed without lowering the calculation accuracy in the IDCT processing, and the level can be adjusted according to an arbitrary ratio A.

【００４９】［複数の高能率符号化信号の合成］そし
て、この実施の形態の信号処理装置、信号処理方法にお
いては、図３に示したような、所定の比率がかけられる
複数のスペクトルデータ（複数の楽曲のスペクトルデー
タ）が与えられたときに、これらを演算精度を落とすこ
となく同時にＩＤＣＴ処理して、再生することができる
ようにしたものである。[Synthesis of a plurality of high-efficiency coded signals] In the signal processing device and the signal processing method according to the present embodiment, a plurality of spectral data (a plurality of spectral data to be given a predetermined ratio, as shown in FIG. When spectral data of a plurality of music pieces are given, they can be subjected to IDCT processing at the same time without lowering the calculation accuracy and can be reproduced.

【００５０】図５は、複数の楽曲のスペクトルデータの
それぞれに、任意の比率をかけて合成する場合の信号処
理について説明するための図である。図５に示すよう
に、複数の高能率符号化データ１、２、…、Ｎが与えら
れ、これらのそれぞれに任意の比率をかけてレベル調整
して合成し、同時に再生できるようにする場合について
説明する。FIG. 5 is a diagram for explaining signal processing in a case where spectrum data of a plurality of music pieces are combined at an arbitrary ratio. As shown in FIG. 5, a plurality of high-efficiency coded data 1, 2,..., N are provided, each of which is adjusted in level by applying an arbitrary ratio to each of them so as to be able to be simultaneously reproduced. explain.

【００５１】各高能率符号化データ１、２、…、Ｎの単
位ブロック毎のスペクトルデータに割り当てられている
スケールファクタ値の最大値をＦ、Ｆ２、…、ＦＮと
し、この最大値Ｆ１、Ｆ２、…、ＦＮと各スペクトルデ
ータの本来のスケールファクタ値とに基いて、各スペク
トルデータを修正することにより得られた各スペクトル
データに対応する固定小数点部分をＱ１、Ｑ２、…、Ｑ
Ｎとする。また、各高能率符号化データのスペクトルデ
ータに対して掛け合わせる比率をＡ１、Ａ２、…、ＡＮ
とする。The maximum value of the scale factor value assigned to the spectral data of each unit block of the high efficiency coded data 1, 2,..., N is F, F2,..., FN, and the maximum values F1, F2 ,..., FN and the original scale factor value of each spectrum data, fixed-point portions corresponding to each spectrum data obtained by correcting each spectrum data are represented by Q1, Q2,.
N. A1, A2,..., AN are the ratios by which the spectrum data of each high-efficiency encoded data are multiplied
And

【００５２】そして、上述の各高能率符号化データにつ
いての固定小数点部分Ｑ１、Ｑ２、…、ＱＮと、スケー
ルファクタ値の最大値Ｆ１、Ｆ２、…、ＦＮと、修正後
比率Ａ１、Ａ２、…、ＡＮについて、ｋ＝１、２、…、
Ｎとすると、図６に示す（８）式のようにまとめること
ができる。.., QN, the maximum scale factor values F1, F2,..., FN, and the corrected ratios A1, A2,. , AN, k = 1, 2,...
Assuming N, they can be summarized as in equation (8) shown in FIG.

【００５３】この（８）式により示されるデータをその
ままＩＤＣＴ処理したのでは、前述もしたように、ＩＤ
ＣＴ処理における有効ビット数が不足し、演算精度が低
下してしまう可能性がある。そこで、この場合において
も、まず、スケールファクタ値の共通化を図り、固定小
数点部分と、スケールファクタ部分とに分離して、固定
小数点部分についてＩＤＣＴ処理した後に、共通化した
スケールファクタ値によってスケールダウンすればよい
ことになる。If the data represented by the equation (8) is subjected to the IDCT processing as it is, as described above,
There is a possibility that the number of effective bits in the CT processing is insufficient, and the calculation accuracy is reduced. Therefore, also in this case, first, the scale factor value is shared, the fixed-point portion and the scale factor portion are separated, the fixed-point portion is subjected to IDCT processing, and then the scale-down is performed by the shared scale factor value. That's all I need to do.

【００５４】しかし、複数の高能率符号化データを合成
する場合、スケールダウンのために用いるスケールファ
クタ値は、合成する高能率符号化データについて考慮し
て共通化しなければならない。この例においては、各高
能率符号化データについてのスケールファクタ値の最大
値Ｆｋと各高能率符号化データに掛け合わせる比率Ａｋ
の積の合計値よりも大きいスケールファクタ値の中の最
小のスケールファクタ値を共通化したスケールファクタ
値Ｆ’とする。つまり、図６Ａに示す（１０）式により
得られる値よりも大きな多数のスケールファクタ値の中
の最小のスケールファクタ値を共通化したスケールファ
クタ値Ｆ’とする。However, when combining a plurality of high-efficiency encoded data, the scale factor value used for scale-down must be shared in consideration of the high-efficiency encoded data to be combined. In this example, the ratio Ak multiplied by the maximum value Fk of the scale factor value for each piece of high efficiency encoded data and each piece of high efficiency encoded data
The smallest scale factor value among the scale factor values larger than the total value of the products is set as a common scale factor value F ′. That is, the smallest scale factor value among many scale factor values larger than the value obtained by the equation (10) shown in FIG. 6A is set as the common scale factor value F ′.

【００５５】この場合、共通化したスケールファクタ値
Ｆ’に基づいて、各高能率符号化データのスペクトルデ
ータに掛け合わせることになる比率Ａｋについても修正
することによって、修正後比率Ａｋ’を求める必要があ
る。この場合には、元のスケールファクタ値Ｆｋについ
て、共通化したスケールファクタ値Ｆ’に対する割合に
応じて、比率Ａｋを修正しすることによって、修正後比
率Ａｋ’を求める。つまり、修正後比率Ａｋ’は、図６
に示す（１１）式によって求めることができる。In this case, based on the common scale factor value F ′, the ratio Ak ′ to be multiplied by the spectrum data of each high-efficiency coded data is also corrected to obtain the corrected ratio Ak ′. There is. In this case, the corrected ratio Ak 'is obtained by correcting the ratio Ak according to the ratio of the original scale factor value Fk to the common scale factor value F'. In other words, the corrected ratio Ak ′ is
Can be obtained by the following equation (11).

【００５６】このようにすることにより、図５の（８）
式に示したスペクトルデータは、その下段に示すよう
に、固定小数点部分Ｑｋと修正比率Ａｋ’との積の総和
と、共通化したスケールファクタ値Ｆ’とに分離するこ
とができる。そして、図５に示すように、固定小数点部
分Ｑｋと修正比率Ａｋ’との積の総和についてＩＤＣＴ
処理を行なった後に、共通化したスケールファクタ値
Ｆ’によりスケールダウン処理を行なうようにする。By doing so, (8) in FIG.
The spectrum data shown in the equation can be separated into a sum of products of the fixed-point portion Qk and the correction ratio Ak ′ and a common scale factor value F ′, as shown in the lower part. Then, as shown in FIG. 5, IDCT is performed on the sum of the products of the fixed-point portion Qk and the correction ratio Ak ′.
After the processing, the scale-down processing is performed using the common scale factor value F '.

【００５７】そして、図６Ｂに示した（１１）式を整理
すると、図６Ｃの（１２）式に示すように、修正後比率
Ａｋ’×共通化スケールファクタ値Ｆ’は、修正前の比
率Ａｋ×共通化前のスケールファクタ値の最大値Ｆｋに
等しい。したがって、この図５の例の場合には、固定小
数点部分Ｑｋと修正比率Ａｋ’との積の総和についてＩ
ＤＣＴ処理を行なった後に、共通化したスケールファク
タ値Ｆ’によりスケールダウン処理を行なうことによっ
て得られる信号は、図５において（９）式が示すよう
に、複数のオーディオデータ（信号ｑｋ）に任意の比率
Ａｋを掛け合わせ、これらを合成した時間領域データと
なる。When formula (11) shown in FIG. 6B is arranged, as shown in formula (12) in FIG. 6C, the corrected ratio Ak ′ × the common scale factor value F ′ is the ratio Ak ′ before the correction. X Equal to the maximum value Fk of the scale factor value before sharing. Therefore, in the case of FIG. 5, the sum of the products of the fixed-point portion Qk and the correction ratio Ak ′ is I
After performing the DCT processing, the signal obtained by performing the scale-down processing by using the common scale factor value F ′ is arbitrarily converted into a plurality of audio data (signal qk) as shown in equation (9) in FIG. Is multiplied by the ratio Ak, and these are combined to obtain time domain data.

【００５８】これにより、複数の高能率符号化データの
スペクトルデータが与えられ、これらのそれぞれに任意
の比率をかけた後に合成してしながら復号することが可
能となる。そして、この図５、図６に示した信号処理に
ついての考え方を適用し、複数の高能率符号化データの
スペクトルデータについて、それぞれ任意の比率に応じ
てレベル調整した後に合成し、復号化して再生すること
をできるようにしたのが、この発明による信号処理装
置、信号処理方法である。As a result, spectrum data of a plurality of high-efficiency coded data is given, and it is possible to decode while multiplying them by an arbitrary ratio and then combining them. Then, the concept of the signal processing shown in FIGS. 5 and 6 is applied, and the spectrum data of the plurality of high-efficiency encoded data are combined after level adjustment according to an arbitrary ratio, decoded, and reproduced. The signal processing apparatus and the signal processing method according to the present invention enable the processing to be performed.

【００５９】［信号処理装置、信号処理方法の具体例の
説明］ ［オーディオ信号処理装置の概要］次に、図１〜図６を
用いて説明した信号処理の考え方を適用したこの発明に
よる信号処理装置、信号処理方法の具体例について説明
する。図７は、この発明による信号処理装置および信号
処理方法が適用されたオーディオ信号処理装置を説明す
るためのブロック図である。[Description of Specific Example of Signal Processing Apparatus and Signal Processing Method] [Outline of Audio Signal Processing Apparatus] Next, signal processing according to the present invention to which the concept of signal processing described with reference to FIGS. Specific examples of the device and the signal processing method will be described. FIG. 7 is a block diagram for explaining an audio signal processing device to which the signal processing device and the signal processing method according to the present invention are applied.

【００６０】この実施の形態のオーディオ信号処理装置
は、単体のオーディオ信号処理装置としてハードウエア
により構成することもできるし、また、パーソナルコン
ピュータなどにおいてソフトウエアにより各処理部（各
機能）を実現することによっても構成することができる
ものである。The audio signal processing apparatus of this embodiment can be constituted by hardware as a single audio signal processing apparatus, or each processing section (each function) is realized by software in a personal computer or the like. It can also be configured by the following.

【００６１】図７に示すように、この実施の形態のオー
ディオ信号処理装置（以下、単に信号処理装置とい
う。）は、アナログオーディオ信号の入力端子１、Ａ／
Ｄ変換部２、デジタルオーディオ信号の入力端子３、符
号化部４、復号化部５、Ｄ／Ａ変換部６、アナログオー
ディオ信号の出力端子７、書き込み／読み出し部８、符
号化データ蓄積部９を備えたものである。As shown in FIG. 7, an audio signal processing device according to this embodiment (hereinafter simply referred to as a signal processing device) has an input terminal 1 for analog audio signals and an A / A signal.
D conversion unit 2, digital audio signal input terminal 3, coding unit 4, decoding unit 5, D / A conversion unit 6, analog audio signal output terminal 7, writing / reading unit 8, coded data storage unit 9 It is provided with.

【００６２】また、この実施の形態の信号処理装置は、
この信号処理装置の各部を制御する制御部２０を備えて
いる。制御部２０は、図７に示すように、ＣＰＵ（Ｃｅ
ｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）２１、
ＲＯＭ（Ｒｅａｄ ＯｎｌｙＭｅｍｏｒｙ）２２、ＲＡ
Ｍ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）２３
が、ＣＰＵバス２４を通じて接続することにより形成さ
れたマイクロコンピュータである。Further, the signal processing device of this embodiment
A control unit 20 that controls each unit of the signal processing device is provided. As shown in FIG. 7, the control unit 20 controls the CPU (Ce
ntral Processing Unit) 21,
ROM (Read Only Memory) 22, RA
M (Random Access Memory) 23
Are microcomputers formed by connection through the CPU bus 24.

【００６３】図７に示すように、制御部２０には、例え
ば、アルファベットキー、テンキー、各種ファンクショ
ンキーなどが設けられたキー操作部３１が接続され、こ
のキー操作部３１を通じて、使用者からの各種の指示入
力を受け付けることができるようにしている。As shown in FIG. 7, the control unit 20 is connected to a key operation unit 31 provided with, for example, alphabet keys, numeric keys, various function keys, and the like. Various instruction inputs can be received.

【００６４】また、制御部２０には、例えば、ＬＣＤ
（Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）や
ＣＲＴ（Ｃａｔｈｏｄｅ−ｒａｙ Ｔｕｂｅ）などによ
り構成される表示部３２が接続するようにされており、
各種の表示を行なうことができるようにしている。The control unit 20 includes, for example, an LCD
(Liquid Crystal Display), CRT (Cathode-ray Tube), etc., and a display unit 32 is connected thereto.
Various displays can be performed.

【００６５】そして、アナログオーディオ信号の入力端
子１を通じて入力されたアナログオーディオ信号は、Ａ
／Ｄ変換部２に供給される。Ａ／Ｄ変換部２は、これに
供給されたアナログオーディオ信号をデジタルオーディ
オ信号（オーディオＰＣＭ（Ｐｕｌｓｅ Ｃｏｄｅ Ｍ
ｏｄｕｌａｔｉｏｎ）信号）に変換し、これを符号化部
４に供給する。また、デジタル信号の入力端子３を通じ
て入力されたデジタルオーディオ信号（オーディオＰＣ
Ｍ信号）は、そのまま符号化部４に供給される。The analog audio signal input through the analog audio signal input terminal 1 is A
/ D conversion unit 2. The A / D converter 2 converts the supplied analog audio signal into a digital audio signal (audio PCM (Pulse Code M)).
conversion) signal and supplies it to the encoding unit 4. Also, a digital audio signal (audio PC) input through a digital signal input terminal 3 is input.
The M signal) is supplied to the encoding unit 4 as it is.

【００６６】符号化部４は、これに供給されたデジタル
オーディオ信号をＡＴＲＡＣ方式で高能率符号化してデ
ータ圧縮する。符号化部４において高能率符号化されて
形成された符号化データは、制御部２０、読み出し／書
き込み部８を通じて、例えば、ハードディスクや光磁気
ディスクなどにより構成される大容量記憶媒体である符
号化データ蓄積部９に書き込まれる。これにより、目的
とするオーディオデータの符号化データが、符号化デー
タ蓄積部９に蓄積され、これを管理することができるよ
うにされる。The encoding unit 4 encodes the supplied digital audio signal with high efficiency by the ATRAC method and compresses the data. The encoded data formed by the high-efficiency encoding in the encoding unit 4 passes through the control unit 20 and the read / write unit 8, and is encoded as a large-capacity storage medium such as a hard disk or a magneto-optical disk. The data is written to the data storage unit 9. As a result, the encoded data of the target audio data is stored in the encoded data storage unit 9 and can be managed.

【００６７】また、この実施の形態の信号処理装置は、
キー操作部３１を通じて入力された使用者からの再生指
示入力に応じて、制御部２０は、読み出し／書き込み部
８を通じて、指示された楽曲の符号化データを符号化デ
ータ蓄積部９から読み出し、これを復号化部５に供給す
る。復号化部６は、これに供給された符号化データを復
号化し、復号化したオーディオデータをＤ／Ａ変換部６
に供給する。Further, the signal processing device of this embodiment
In response to a reproduction instruction input from the user through the key operation unit 31, the control unit 20 reads the encoded data of the designated music from the encoded data storage unit 9 through the read / write unit 8, and Is supplied to the decoding unit 5. The decoding unit 6 decodes the encoded data supplied thereto and converts the decoded audio data into a D / A conversion unit 6.
To supply.

【００６８】Ｄ／Ａ変換部６は、これに供給されたオー
ディオデータをアナログオーディオ信号に変換し、これ
をアナログオーディオ信号の出力端子７を通じて出力す
る。この出力端子７を通じて出力されたアナログオーデ
ィオ信号は、例えば、スピーカに供給され、そのアナロ
グオーディオ信号に応じた音声が放音するようにされ
る。The D / A converter 6 converts the audio data supplied thereto into an analog audio signal, and outputs this through an analog audio signal output terminal 7. The analog audio signal output through the output terminal 7 is supplied to, for example, a speaker, and a sound corresponding to the analog audio signal is emitted.

【００６９】また、この実施の形態の信号処理装置は、
異なる２つの符号化データについて任意の比率を掛け合
わせることによりレベル調整した後に、これらを合成
し、高精度に逆直交変換処理を行なうことにより復号化
して出力することがっできるようにしている。すなわ
ち、キー操作部３１を通じて入力された使用者からの合
成指示入力に応じて、制御部２０は、読み出し／書き込
み部８を通じて、指示された２つの楽曲の符号化データ
を符号化データ蓄積部９から読み出し、これを復号化部
５に供給する。Further, the signal processing device of this embodiment
After adjusting the level by multiplying two different coded data by an arbitrary ratio, the two are combined, and then decoded and output by performing an inverse orthogonal transform process with high precision. That is, in response to the user's input of the composition instruction input through the key operation unit 31, the control unit 20 stores the encoded data of the two designated songs through the read / write unit 8 in the encoded data storage unit 9. And supplies it to the decoding unit 5.

【００７０】復号化部５は、これに２つの符号化データ
が供給されたときには、制御部２０の制御に応じて、レ
ベル調整を施した後に、２つの符号化データを合成し、
演算制度を損なうことがないようにして逆直交変換を行
なうことにより復号化する。このように、復号化部５
は、これに２つの符号化データが供給されたときには、
それらの符号化データを合成した後に逆直交変換するこ
とにより復号化する。When two encoded data are supplied thereto, the decoding unit 5 adjusts the level according to the control of the control unit 20 and then synthesizes the two encoded data.
Decoding is performed by performing an inverse orthogonal transform without impairing the arithmetic precision. Thus, the decoding unit 5
Is, when supplied with two encoded data,
Decoding is performed by combining the encoded data and then performing an inverse orthogonal transform.

【００７１】そして、前述もしたように、復号化された
オーディオデータは、Ｄ／Ａ変換部６に供給され、ここ
でアナログオーディオ信号に変換された後、アナログオ
ーディオ信号の出力端子７を通じて出力される。なお、
図７に示すように、復号化部５において、復号化された
オーディオデータを制御部２０、読み出し／書き込み部
８を通じて、例えば、符号化データ蓄積部９などに蓄積
するようにすることもできるようにされる。As described above, the decoded audio data is supplied to the D / A converter 6, where it is converted into an analog audio signal, and then output through the analog audio signal output terminal 7. You. In addition,
As shown in FIG. 7, in the decoding unit 5, the decoded audio data can be stored in the coded data storage unit 9 or the like through the control unit 20 and the read / write unit 8, for example. To be.

【００７２】このように、この実施の形態の信号処理装
置は、オーディオ信号を取り込み、これを符号化して符
号化データ蓄積部９に蓄積することにより、大量のオー
ディオデータを管理することができるとともに、符号化
データ蓄積部９に蓄積されている符号化データを復号し
て再生したり、２つの符号化データを合成した後に復号
し、これを再生するなどのことができるものである。As described above, the signal processing device according to the present embodiment can manage a large amount of audio data by taking in an audio signal, encoding the audio signal, and storing it in the coded data storage unit 9. It is possible to decode and reproduce the encoded data stored in the encoded data storage unit 9 or to decode and reproduce after combining two encoded data.

【００７３】また、復号化部５においては、符号化デー
タの状態で合成処理を行なった後に復号化を行なうの
で、入力信号分の逆直交変換部を設けたり、入力信号毎
に逆直交変換演算を行なうこともないので、復号化部５
の構成や処理が複雑になるなどのことがないようにして
いる。Since the decoding section 5 performs the decoding after performing the synthesizing process in the coded data state, an inverse orthogonal transform section for an input signal is provided, or an inverse orthogonal transform operation is performed for each input signal. Is not performed, the decoding unit 5
The configuration and the processing of are not complicated.

【００７４】さらに、この実施の形態において、信号処
理装置の復号化部５においては、予め決められた有効桁
数（有効ビット数）の固定小数点形式で逆直交変換を行
なう。しかし、図１〜図６を用いて説明したように、逆
直交変換に際し、逆直交変換の演算精度が低下すること
がないように、符号化データのスペクトルデータを固定
小数点部分と、スケールファクタ値部分とに分離するよ
うにし、固定小数点部分について逆直交変換を行ない、
この結果にスケールファクタ値を考慮することによっ
て、高精度に復号化を行なうようにしている。Further, in this embodiment, decoding section 5 of the signal processing device performs inverse orthogonal transformation in a fixed-point format with a predetermined number of significant digits (number of effective bits). However, as described with reference to FIGS. 1 to 6, the spectrum data of the encoded data is converted to a fixed-point portion and a scale factor value so that the operation accuracy of the inverse orthogonal transform does not decrease during the inverse orthogonal transform. Part, and perform inverse orthogonal transformation on the fixed-point part,
By considering the scale factor value in the result, decoding is performed with high accuracy.

【００７５】以下においては、この実施の形態の信号処
理装置において行なわれるＡＴＲＡＣ方式の符号化処
理、符号化データのフォーマット等について明確にした
後に、この実施の形態の信号処理装置において行なわれ
る符号化データの合成処理、符号化データの復号処理に
ついて説明する。In the following, after clarifying the encoding process of the ATRAC system and the format of the encoded data performed in the signal processing device of this embodiment, the encoding performed in the signal processing device of this embodiment will be described. The data synthesizing process and the encoded data decoding process will be described.

【００７６】［ＡＴＲＡＣ方式の符号化処理について］
図８は、デジタルオーディオ信号についてＡＴＲＡＣ方
式の高能率符号化を行なう符号化部（高能率符号化部）
の一例を説明するためのブロック図であり、図７に示し
た信号処理装置の符号化部４の一例を示すものである。[Regarding ATRAC System Encoding Process]
FIG. 8 shows an encoding unit (high-efficiency encoding unit) that performs high-efficiency encoding of a digital audio signal according to the ATRAC method
FIG. 9 is a block diagram for explaining an example, and shows an example of an encoding unit 4 of the signal processing device shown in FIG.

【００７７】図８に示す符号化部４では、入力デジタル
オーディオ信号を複数の周波数帯域に分割すると共に、
各周波数帯域毎に直交変換を行って、得られた周波数軸
のスペクトルデータを、低域では、後述する人間の聴覚
特性を考慮したいわゆる臨界帯域幅（クリティカルバン
ド）毎に、中高域ではブロックフローテイグ効率を考慮
して臨界帯域幅を細分化した帯域毎に、適応的にビット
割当して符号化している。The encoding unit 4 shown in FIG. 8 divides the input digital audio signal into a plurality of frequency bands,
The orthogonal transform is performed for each frequency band, and the spectrum data on the frequency axis is obtained. Bits are adaptively allocated and encoded for each band obtained by subdividing the critical bandwidth in consideration of the ig efficiency.

【００７８】通常、このビット割り当てを行なうブロッ
クが量子化雑音発生ブロックとなる。さらに、この実施
の形態の信号処理装置の符号化部４においては、直交変
換の前の入力信号に応じて、ビット割り当てを行なうブ
ロックサイズ（直交変換ブロック長）を適応的に変化さ
せている。Normally, the block for performing the bit allocation is a quantization noise generating block. Furthermore, in the coding unit 4 of the signal processing device according to the present embodiment, the block size (orthogonal transform block length) for performing bit allocation is adaptively changed according to the input signal before the orthogonal transform.

【００７９】即ち、図８において、入力端子４００に
は、例えばサンプリング周波数が４４．１ｋＨｚの時、
０〜２２ｋＨｚのデジタルオーディオ信号（オーディオ
ＰＣＭ信号）が供給される。この入力信号は、例えばい
わゆるＱＭＦ（Ｑｕａｄｒａｔｕｒｅ Ｍｉｒｒｏｒ
Ｆｉｌｔｅｒ）等の帯域分割フィルタ４０１により０〜
１１ｋＨｚ帯域と１１ｋＨｚ〜２２ｋＨｚ帯域との信号
に分割され、０〜１１ｋＨｚ帯域の信号は同じくＱＭＦ
等の帯域分割フィルタ４０２により０〜５.５ｋＨｚ帯
域と５.５ｋＨｚ〜１１ｋＨｚ帯域との信号に分割され
る。That is, in FIG. 8, when the sampling frequency is 44.1 kHz, for example,
A digital audio signal (audio PCM signal) of 0 to 22 kHz is supplied. This input signal is, for example, a so-called QMF (Quadrature Mirror).
0) by a band division filter 401 such as
The signal is divided into 11 kHz band and signals of 11 kHz to 22 kHz band, and signals of 0 to 11 kHz band are also QMF
The signal is divided into signals of 0 to 5.5 kHz band and 5.5 kHz to 11 kHz band by the band dividing filter 402.

【００８０】帯域分割フィルタ４０１からの１１ｋＨｚ
〜２２ｋＨｚ帯域の信号は、直交変換回路の一例である
ＭＤＣＴ（Ｍｏｄｉｆｉｅｄ Ｄｉｓｃｒｅｔｅ Ｃｏ
ｓｉｎｅ Ｔｒａｎｓｆｏｒｍ）回路４０３に供給され
ると共に、ブロック決定回路４０９、４１０、４１１に
供給される。11 kHz from the band division filter 401
The signal in the band of ~ 22 kHz is applied to an MDCT (Modified Discrete Co.) which is an example of an orthogonal transformation circuit.
Sine Transform) circuit 403 and also to block determination circuits 409, 410 and 411.

【００８１】また、帯域分割フィルタ４０２からの５.
５ｋＨｚ〜１１ｋＨｚ帯域の信号はＭＤＣＴ回路４０４
に供給されると共に、ブロック決定回路４０９、４１
０、４１１に供給される。また、帯域分割フィルタ４０
２からの０〜５.５ｋＨｚ帯域信号はＭＤＣＴ回路４０
５に供給され、ブロック決定回路４０９、４１０、４１
１に供給される。Further, 5.
The signal in the band of 5 kHz to 11 kHz is applied to the MDCT circuit 404.
And the block decision circuits 409 and 41
0, 411. Further, the band division filter 40
0 to 5.5 kHz band signal from the MDCT circuit 40
5 and the block determination circuits 409, 410, 41
1 is supplied.

【００８２】ブロック決定回路４０９は、これに供給さ
れる信号に基づいてブロックサイズを決定し、決定した
ブロックサイズを示す情報をＭＤＣＴ回路４０３、適応
ビット割り当て符号化回路４０６、ビット割り当て算出
回路４１８および出力端子４１３に供給する。The block determining circuit 409 determines the block size based on the signal supplied thereto, and outputs information indicating the determined block size to the MDCT circuit 403, the adaptive bit allocation encoding circuit 406, the bit allocation calculating circuit 418, and It is supplied to the output terminal 413.

【００８３】同様に、ブロック決定回路４１０は、これ
に供給される信号に基づいてブロックサイズを決定し、
決定したブロックサイズを示す情報をＭＤＣＴ回路４０
４、適応ビット割り当て符号化回路４０７、ビット割り
当て算出回路４１８および出力端子４１５に供給する。Similarly, the block determining circuit 410 determines the block size based on the signal supplied thereto,
The information indicating the determined block size is sent to the MDCT circuit 40.
4. Adaptive bit allocation encoding circuit 407, bit allocation calculation circuit 418, and output terminal 415.

【００８４】また、ブロック決定回路４１１は、これに
供給される信号に基づいてブロックサイズを決定し、決
定したブロックサイズを示す情報をＭＤＣＴ回路４０
５、適応ビット割り当て符号化回路４０７、ビット割り
当て算出回路４１８および出力端子４１７に供給する。The block determining circuit 411 determines the block size based on the signal supplied thereto, and outputs information indicating the determined block size to the MDCT circuit 40.
5, the adaptive bit allocation encoding circuit 407, the bit allocation calculation circuit 418, and the output terminal 417.

【００８５】各ブロック決定回路４０９、４１０、４１
１は、これに供給される信号の時間特性、周波数分布に
応じて適応的にブロックサイズ（直交変換ブロック長）
を設定する。また、ＭＤＣＴ回路４０３、４０４、４０
５のそれぞれは、これに対応するブロック決定回路４０
９、４１０、４１１から供給されるブロックサイズの下
で、ＱＭＦ４０１、または、ＱＭＦ４０２から供給され
る信号に対してＭＤＣＴ処理を施す。Each block determination circuit 409, 410, 41
1 is a block size (orthogonal transform block length) adaptively according to the time characteristic and frequency distribution of a signal supplied thereto.
Set. Also, MDCT circuits 403, 404, 40
5, each of which has a corresponding block decision circuit 40.
Under the block size supplied from 9, 410, and 411, the signal supplied from QMF401 or QMF402 is subjected to MDCT processing.

【００８６】図９は、ＭＤＣＴ回路４０３、４０４、４
０５に供給される各帯域毎のブロックについての標準的
な入力信号に対する具体例を説明するための図である。
この図９に示す例においては、３つのフィルタ出力信
号、すなわち、ＱＭＦ４０１からの１１ｋＨｚ〜２２ｋ
Ｈｚの信号、ＱＭＦ４０２からの５．５ｋＨｚ〜１１ｋ
Ｈｚの信号、０ｋＨｚ〜５．５ｋＨｚの信号は、各帯域
毎に独立におのおの複数のブロックサイズを持ち、信号
の時間特性、周波数分布等により時間分解能を切り換え
られるようにしている。FIG. 9 shows the MDCT circuits 403, 404, and 4
FIG. 5 is a diagram for describing a specific example of a standard input signal for a block for each band supplied to the power supply unit 05.
In the example shown in FIG. 9, three filter output signals, that is, 11 kHz to 22 kHz from the QMF 401 are output.
Hz signal, 5.5kHz-11k from QMF402
The signal of Hz and the signal of 0 kHz to 5.5 kHz each have a plurality of block sizes independently for each band, and the time resolution can be switched according to the time characteristics, frequency distribution, and the like of the signal.

【００８７】すなわち、直交変換の対象となる信号が時
間的に変化が激しくない準定常的な信号である場合に
は、直交変換ブロックサイズを１１．６ｍＳ、即ち、図
９における（Ａ）Ｌｏｎｇ Ｍｏｄｅと大きくする。ま
た、信号が時間的に変化の激しい非定常的な信号である
場合には、直交変換ブロックサイズを更に例えば４分割
する。That is, when the signal to be subjected to the orthogonal transform is a quasi-stationary signal that does not change significantly with time, the orthogonal transform block size is set to 11.6 ms, that is, (A) Long Mode in FIG. And increase. If the signal is a non-stationary signal that changes greatly with time, the orthogonal transform block size is further divided into, for example, four.

【００８８】したがって、信号が非定常的である場合に
は、図９における（Ｂ）ＳｈｏｒｔＭｏｄｅのように、
すべてを４分割、２．９ｍＳの時間分解能とすること
で、実際の複雑な入力信号に適応するようになってい
る。この直交変換ブロックサイズの分割は処理装置の規
模が許せば、さらに複雑な分割を行なうと、より効果的
である。Therefore, when the signal is non-stationary, as shown in (B) ShortMode in FIG.
All are divided into four parts and have a time resolution of 2.9 mS so that they can be adapted to an actual complicated input signal. This division of the orthogonal transform block size is more effective if more complicated division is performed if the scale of the processing device allows.

【００８９】そして、図８において、各ＭＤＣＴ回路４
０３、４０４、４０５にてＭＤＣＴ処理されて得られた
周波数軸上のスペクトルデータ又はＭＤＣＴ係数データ
は、低域はいわゆる臨界帯域（クリティカルバンド）毎
にまとめられて、中高域はブロックフローティングの有
効性を考慮して、臨界帯域幅を細分化して適応ビット割
当符号化回路４０６、４０７、４０８、及びビット割り
当て算出回路４１８に供給される。In FIG. 8, each MDCT circuit 4
In the spectrum data or the MDCT coefficient data on the frequency axis obtained by performing the MDCT processing in 03, 404, and 405, the low band is grouped for each so-called critical band (critical band), and the middle and high band is the effectiveness of block floating. In consideration of the above, the critical bandwidth is subdivided and supplied to the adaptive bit allocation coding circuits 406, 407, 408 and the bit allocation calculation circuit 418.

【００９０】ここで、臨界帯域とは、人間の聴覚特性を
考慮して分割された周波数帯域であり、ある純音の周波
数近傍の同じ強さの狭帯域バンドノイズによって当該純
音がマスクされるときのそのノイズの持つ帯域のことで
ある。この臨界帯域は、高域ほど帯域幅が広くなってお
り、上述の０〜２２ｋＨｚの全周波数帯域は例えば２５
のクリティカルバンドに分割されている。Here, the critical band is a frequency band divided in consideration of the human auditory characteristics, and is used when the pure tone is masked by the narrow band noise of the same intensity near the frequency of a certain pure tone. This is the band of the noise. In this critical band, the higher the band, the wider the bandwidth, and the entire frequency band of 0 to 22 kHz is, for example, 25
Has been divided into critical bands.

【００９１】図８において、ビット割当算出回路４１８
は、前述のブロックサイズを示す情報、および、スペク
トルデータ又はＭＤＣＴ係数データに基づき、いわゆる
マスキング効果等を考慮して、前述の臨界帯域及びブロ
ックフローティングを考慮した各分割帯域毎の、マスキ
ング量、及び、各分割帯域毎のエネルギあるいはピーク
値等を算出し、その結果に基づき、各帯域毎に割当ビッ
ト数を求め、図８における適応ビット割当符号化回路４
０６、４０７、４０８へ供給する。In FIG. 8, a bit allocation calculating circuit 418
Is based on the information indicating the block size, and the spectral data or the MDCT coefficient data, and in consideration of the so-called masking effect and the like, the masking amount for each of the divided bands in consideration of the critical band and the block floating, and 8, the energy or peak value of each divided band is calculated, and the number of bits to be allocated is determined for each band based on the calculation result.
06, 407 and 408.

【００９２】適応ビット割当符号化回路４０６、４０
７、４０８では、前述のブロックサイズを示す情報、及
び、臨界帯域及びブロックフローティングを考慮した各
分割帯域毎に割り当てられたビット数に応じて、各スペ
クトルデータ又はＭＤＣＴ係数データを再量子化（正規
化して量子化）するようにしている。Adaptive bit allocation coding circuits 406 and 40
7 and 408, each spectrum data or MDCT coefficient data is re-quantized (normalized) according to the information indicating the block size and the number of bits allocated to each divided band in consideration of the critical band and the block floating. And quantize).

【００９３】このようにして符号化されたデータは、図
８において、出力端子４１２、４１４、４１６、およ
び、出力端子４１３、４１５、４１７を介して出力さ
れ、後述するフォーマットにまとめられた後に、例え
ば、記録媒体に対して記録を行なう処理系、この実施の
形態においては、制御部２０を通じて、読み出し／書き
込み部９に供給され、符号化データ蓄積部９に書き込ま
れる。なお、この明細書において、ビット割当の単位と
なる、各分割帯域を単位ブロック（ブロック・フローテ
ィング・ユニット）と言う。The data encoded in this manner is output via output terminals 412, 414, 416 and output terminals 413, 415, 417 in FIG. 8, and after being summarized in a format described later, For example, a processing system that performs recording on a recording medium, in this embodiment, is supplied to the read / write unit 9 through the control unit 20 and is written to the encoded data storage unit 9. In this specification, each divided band, which is a unit of bit allocation, is called a unit block (block floating unit).

【００９４】また、前述したように、ビット割り当て算
出回路４１８では、スペクトルデータ又はＭＤＣＴ係数
を基に、トーン成分等の状態を分析すると共に、いわゆ
るマスキング効果や、人間の聴覚に関する最小可聴カー
ブ、等ラウドネスカーブなどの既存の効果を考慮し、単
位ブロック毎のビット割り当て量を算出して、情報配分
を決定している。この際、前述したブロックサイズを示
す情報についても考慮するようにしている。Further, as described above, the bit allocation calculating circuit 418 analyzes the state of the tone component and the like based on the spectrum data or the MDCT coefficient, as well as the so-called masking effect and the minimum audible curve relating to human hearing. The information distribution is determined by calculating the bit allocation amount for each unit block in consideration of the existing effects such as the loudness curve. At this time, the information indicating the block size is also taken into consideration.

【００９５】さらに、ビット割り当て算出回路４１８で
は、単位ブロックのブロックフローティングの状態を示
す正規化データであるスケールファクタ値についても決
定する。具体的には、例えば図２に示したように、予め
スケールファクタ値の候補として幾つかの正の値を用意
し、その中から単位ブロック内のスペクトルデータ又は
ＭＤＣＴ係数の絶対値の最大値以上の値をとる中で、最
小のものを当該単位ブロックのスケールファクタ値とし
て採用する。Further, the bit allocation calculation circuit 418 also determines a scale factor value which is normalized data indicating a block floating state of the unit block. Specifically, for example, as shown in FIG. 2, several positive values are prepared in advance as scale factor value candidates, and the maximum value of the absolute value of the spectral data or MDCT coefficient in the unit block is selected from among them. Is adopted as the scale factor value of the unit block.

【００９６】スケールファクタ値については、実際の値
と対応した形で、数ビットを用いて番号付けを行ない、
その番号をＲＯＭ２２等により記憶させておけばよい。
番号に対応したスケールファクタ値については、番号順
に例えば６ｄＢ、あるいは、２ｄＢのように、所定の間
隔で値を持つように規定しておく。ここで、ある単位ブ
ロックにおいて前述した方法で決定されたスケールファ
クタ値は、決定された値に対応する番号を当該単位ブロ
ックの正規化データ（スケールファクタ値）を示すサブ
情報として使用する。The scale factor value is numbered using several bits in a manner corresponding to the actual value.
The number may be stored in the ROM 22 or the like.
The scale factor values corresponding to the numbers are defined so as to have values at predetermined intervals, for example, 6 dB or 2 dB in numerical order. Here, as for the scale factor value determined by the above-described method in a certain unit block, a number corresponding to the determined value is used as sub-information indicating normalized data (scale factor value) of the unit block.

【００９７】このように、この実施の形態の信号処理装
置に入力されたオーディオ信号は、５１２サンプルのオ
ーディオデータにされ、さらに、５１２個のスペクトル
データに変換される。この５１２個のスペクトルデータ
は、周波数の順に区切ることにより、５２個の単位ブロ
ック（ブロック・フローティング・ユニット）に分けら
れ、再量子化が行われてデータ量が削減するようにされ
る。As described above, the audio signal input to the signal processing device of this embodiment is converted into 512 samples of audio data, and further converted into 512 pieces of spectrum data. The 512 pieces of spectrum data are divided into 52 unit blocks (block floating units) by dividing them in order of frequency, and requantization is performed to reduce the data amount.

【００９８】［デジタルオーディオ信号の高能率符号化
フォーマット］次に、実際に符号化が行なわれた後のデ
ジタルオーディオ信号（符号化データ）のフォーマット
である符号化フォーマットについて図１０を参照しなが
ら説明する。つまり、符号化データは、図１０に示すフ
ォーマットで符号化データ蓄積部９に記録されることに
なる。[High Efficiency Encoding Format of Digital Audio Signal] Next, an encoding format which is a format of a digital audio signal (encoded data) after actually being encoded will be described with reference to FIG. I do. That is, the encoded data is recorded in the encoded data storage unit 9 in the format shown in FIG.

【００９９】図１０において左側および右側に示した数
値はバイト数を表しており、この実施の形態において
は、２１２バイトで１フレーム（１サウンドフレーム）
としている。図１０において、一番先頭に位置する０バ
イト目の位置には、図８におけるブロック決定回路４０
９、４１０、４１１において決定された各帯域のブロッ
クサイズ情報を記録する。Numerical values shown on the left and right sides in FIG. 10 represent the number of bytes. In this embodiment, 212 bytes constitute one frame (one sound frame).
And In FIG. 10, the position of the 0th byte located at the top is the block determination circuit 40 in FIG.
The block size information of each band determined in 9, 410, and 411 is recorded.

【０１００】次の１バイト目の位置には、記録する単位
ブロックの個数の情報を記録する。これは例えば高域側
になる程、ビット割当が０となり記録が不必要な場合が
多いため、これに対応するように単位ブロックの記録個
数を設定することにより、聴感上の影響が大きい中低域
に多くのビットを配分するようにしている。In the next byte position, information on the number of unit blocks to be recorded is recorded. For example, the higher the frequency side, the more often the bit allocation becomes 0 and recording becomes unnecessary. Therefore, by setting the recording number of the unit block to correspond to this, the influence on the auditory sense is large. Many bits are allocated to the area.

【０１０１】また、この１バイト目の位置にはビット割
当情報の二重書きを行なっている単位ブロックの個数、
および、スケールファクタ情報の二重書きを行なってい
る単位ブロックの個数を記録する。ここで二重書きは、
エラー訂正用に、あるバイト位置に記録されたデータと
同一のデータを他の場所に記録するものである。この二
重書き情報を多くすればするほど、エラーに対する強度
が上がるが、この情報を少なくすれば、実際のデジタル
オーディオ信号であるスペクトルデータに使用できるビ
ットが多くなる。In the position of the first byte, the number of unit blocks in which bit allocation information is double-written,
Also, the number of unit blocks in which the scale factor information is double-written is recorded. Where the double writing is
For error correction, the same data as the data recorded at a certain byte position is recorded at another location. The more this double-written information is, the higher the error resistance is, but the less this information is, the more bits that can be used for spectrum data, which is an actual digital audio signal.

【０１０２】この実施の形態においては、前述したビッ
ト割当情報、および、スケールファクタ情報のそれぞれ
について独立に、二重書きを行なっている単位ブロック
の個数を設定し、エラーに対する強度と、スペクトルデ
ータへの使用可能ビット数の調整を行なうようにしてい
る。なお、それぞれの情報について、規定されたビット
内でのコードと単位ブロックの個数の対応は、予めフォ
ーマットとして定めている。In this embodiment, the number of double-written unit blocks is set independently for each of the above-mentioned bit allocation information and scale factor information, and the strength against error and the spectral data are set. The number of usable bits is adjusted. Note that for each piece of information, the correspondence between the code in the prescribed bits and the number of unit blocks is determined in advance as a format.

【０１０３】図１０の１バイト目の位置の８ビットに記
録される情報の内容の一例を図１１に示す。図１１に示
すように、この１バイトの位置の８ビットのうち３ビッ
トを実際に記録される単位ブロックの個数の情報とし、
残り５ビット中の２ビットをビット割当情報の二重書き
を行なっている単位ブロックの個数の情報とし、残り３
ビットをスケールファクタ情報の二重書きを行なってい
る単位ブロックの個数を示す情報としてそのそれぞれが
記録される。FIG. 11 shows an example of the content of information recorded in the 8 bits at the position of the first byte in FIG. As shown in FIG. 11, 3 bits out of 8 bits at the position of 1 byte are used as information of the number of unit blocks to be actually recorded,
Two bits of the remaining five bits are used as information on the number of unit blocks in which bit allocation information is double-written, and the remaining three bits are used.
Each of the bits is recorded as information indicating the number of unit blocks in which the scale factor information is double-written.

【０１０４】図１０の２バイト目からの位置には単位ブ
ロックのビット割当情報が記録される。ビット割当情報
の記録については一つの単位ブロックに対して例えば４
ビット使用することをフォーマットとして定めておく。
これにより０番目の単位ブロックより順番に、前述した
図１０の実際に記録される単位ブロックの個数分のビッ
ト割当情報が記録されることになる。In the position from the second byte in FIG. 10, bit allocation information of a unit block is recorded. For recording bit allocation information, for example, 4
The use of bits is defined as a format.
As a result, bit allocation information for the number of unit blocks actually recorded in FIG. 10 described above is recorded in order from the 0th unit block.

【０１０５】このようにして記録されたビット割当情報
のデータの後に、単位ブロックのスケールファクタ値
（スケールファクタ情報）を記録している。スケールフ
ァクタ値の記録については１つの単位ブロックに対して
例えば６ビット使用することをフォーマットとして定め
ておく。これにより、ビット割当情報の記録と全く同様
に、０番目の単位ブロックより順番に、実際に記録され
る単位ブロックの個数分だけスケールファクタ値が記録
されることになる。After the data of the bit allocation information recorded in this way, the scale factor value (scale factor information) of the unit block is recorded. As for the recording of the scale factor value, a format in which, for example, 6 bits are used for one unit block is defined. As a result, just like the recording of the bit allocation information, the scale factor values are recorded in the order of the unit blocks actually recorded in order from the 0th unit block.

【０１０６】そして、スケールファクタ値の後に、単位
ブロックのスペクトルデータが記録される。スペクトル
データについても、０番目の単位ブロックより順番に、
実際に記録される単位ブロックの個数分だけ記録するよ
うにする。各単位ブロック毎に何本のスペクトルデータ
が存在するかは、予めフォーマットで定められているの
で、前述したビット割当情報によりデータの対応をとる
ことが可能となる。なお、ビット割当が０の単位ブロッ
クについては、記録を行なわないようにしている。Then, after the scale factor value, the spectrum data of the unit block is recorded. Regarding the spectrum data, in order from the 0th unit block,
Recording is performed by the number of unit blocks actually recorded. Since how many pieces of spectrum data exist in each unit block is determined in advance by a format, it is possible to correspond to the data by the above-mentioned bit allocation information. It should be noted that recording is not performed for a unit block whose bit allocation is 0.

【０１０７】このスペクトルデータの後に前述したスケ
ールファクタ情報の二重書き、および、ビット割当情報
の二重書きを行なう。この記録方法については、個数の
対応を図１１で示した二重書きの情報に対応させるだけ
で、その他については上述のスケールファクタ情報、お
よび、ビット割当情報の記録と同様である。After this spectrum data, the above-mentioned double writing of scale factor information and double writing of bit allocation information are performed. This recording method is the same as the above-described recording of the scale factor information and the bit allocation information, except that the correspondence of the number corresponds only to the double-written information shown in FIG.

【０１０８】一番後ろの２バイト分については、図１０
に示したように０バイト目と１バイト目の情報をそれぞ
れ二重書きしている。この２バイト分の二重書きはフォ
ーマットとして定めておき、スケールファクタ情報の二
重書きや、ビット割当情報の二重書きのように二重書き
記録量の可変の設定は出来ない。For the last two bytes, see FIG.
As shown in FIG. 7, the information of the 0th byte and the information of the 1st byte are respectively double-written. The double writing of two bytes is defined as a format, and the variable setting of the double writing recording amount cannot be performed unlike the double writing of the scale factor information and the double writing of the bit allocation information.

【０１０９】すなわち、図８におけるビット割当算出回
路４１８では、メイン情報として直交変換出力スペクト
ルをサブ情報により処理したデ−タと、サブ情報として
ブロックフロ−ティングの状態を示すスケ−ルファクタ
情報および語長を示すワ−ドレングスが得られ、これを
基に、図８における、適応ビット割当符号化回路４０
６、４０７、４０８において、実際に再量子化を行な
い、符号化フォーマットに則した形で符号化する。That is, in the bit allocation calculating circuit 418 in FIG. 8, the data obtained by processing the orthogonal transform output spectrum with the sub information as the main information, the scale factor information indicating the state of the block floating and the word as the sub information The word length indicating the length is obtained. Based on this, the adaptive bit allocation encoding circuit 40 shown in FIG.
In steps 6, 407, and 408, requantization is actually performed, and encoding is performed in a form conforming to the encoding format.

【０１１０】この実施の形態において、高能率符号化さ
れたデジタルデータは、図１０を用いて説明した符号化
フォーマットで符号化データ蓄積部９に記憶保持され、
使用者からの要求に応じて、読み出して利用することが
できるようにされる。In this embodiment, digital data which has been encoded with high efficiency is stored and held in the encoded data storage unit 9 in the encoding format described with reference to FIG.
In response to a request from a user, it can be read and used.

【０１１１】このように、図８における入力端子４００
にはオーディオのＰＣＭサンプルが供給されるが、入力
後に行われる４０３、４０４、４０５でのＭＤＣＴ処理
では、いわゆる直交変換処理を行なうためのサンプル数
が規定され、それが１つの単位となり、繰り返し行われ
ることになる。As described above, the input terminal 400 shown in FIG.
Is supplied with audio PCM samples. In the MDCT processing in 403, 404, and 405 performed after the input, the number of samples for performing the so-called orthogonal transformation processing is defined. Will be

【０１１２】ここでは入力端子４００から入力された１
０２４サンプルのＰＣＭサンプルが、５１２本のＭＤＣ
Ｔ係数、またはスペクトラムデータとして、４０３、４
０４、４０５より出力されるものとする。具体的には入
力端子４００より入力された１０２４個のＰＣＭサンプ
ルがＱＭＦ４０１により５１２個の高域サンプルと５１
２個の低域サンプルとなり、更に低域サンプルについて
はＱＭＦ４０２により、２５６サンプルの低域サンプル
と２５６個の中域サンプルになる。In this case, 1 input from the input terminal 400
024 PCM samples consist of 512 MDC
403, 4 as T coefficient or spectrum data
04 and 405. Specifically, 1024 PCM samples input from input terminal 400 are combined with 512 high-frequency samples by QMF 401 and 51
Two low frequency samples are obtained, and the low frequency samples are further converted into 256 low frequency samples and 256 middle frequency samples by the QMF 402.

【０１１３】この後、ＱＭＦ４０２からの２５６個の低
域サンプルは、ＭＤＣＴ回路１０５により、１２８個の
低域スペクトラムデータとなり、ＱＭＦ４０２からの２
５６個の中域サンプルは、ＭＤＣＴ回路４０４により、
１２８個の中域スペクトラムデータとなり、ＱＭＦ４０
１からの５１２個の高域サンプルは、ＭＤＣＴ回路４０
３により、２５６個の高域スペクトラムデータとなり、
合計５１２個のスペクトラムデータが１０２４個のＰＣ
Ｍサンプルより作成されることになる。Thereafter, the 256 low-frequency samples from the QMF 402 are converted into 128 low-frequency spectrum data by the MDCT circuit 105, and the 2 low-frequency samples are output from the QMF 402.
The 56 mid-range samples are obtained by the MDCT circuit 404.
128 mid-range spectrum data, QMF40
The 512 high frequency samples from 1 are passed to the MDCT circuit 40
3, it becomes 256 high frequency spectrum data,
512 spectrum data in total 1024 PCs
It will be created from M samples.

【０１１４】この１０２４個が上記説明してきた高能率
符号化の一回の処理を行なう時間単位となり、これを１
フレームとする。高能率符号化データの１フレームは、
先に図１０で示した２１２バイト分である。なお、図８
における入力端子４００より入力されるＰＣＭサンプル
については、１フレームは、１０２４サンプルだが、前
後５１２サンプルはそれぞれ前後の隣接フレームでも使
用されることになる。これはＭＤＣＴ処理でのオーバー
ラップをかんがみた処理である。[0114] These 1024 units are time units for performing one process of the high-efficiency coding described above, and are divided by one.
Frame. One frame of highly efficient encoded data is
This is 212 bytes shown in FIG. FIG.
In the case of PCM samples input from the input terminal 400, one frame is 1024 samples, but 512 samples before and after are also used in adjacent frames before and after. This is a process in consideration of the overlap in the MDCT process.

【０１１５】［ＡＴＲＡＣ方式で符号化された符号化デ
ータの復号化処理について］次に、前述のようにして高
能率符号化されたデジタルオーディオデータ（高能率符
号化データ）の復号化処理について説明する。図１２
は、図７に示した信号処理装置の復号化部５を説明する
ためのブロック図である。この図１２に示す復号化部５
は、図８を用いて前述した符号化部４で高能率符号化さ
れたデジタルオーディオデータを復号化することができ
るものである。[Decoding Process of Encoded Data Encoded by ATRAC System] Next, a decoding process of digital audio data (high-efficiency encoded data) encoded as described above with high efficiency will be described. I do. FIG.
FIG. 8 is a block diagram illustrating a decoding unit 5 of the signal processing device illustrated in FIG. 7. The decoding unit 5 shown in FIG.
Can decode digital audio data that has been highly efficiently encoded by the encoding unit 4 described above with reference to FIG.

【０１１６】図１２に示すように、この実施の形態の復
号化部５は、少なくとも２つの入力端子５０４、５０
５、高帯域逆直交変換部５０３Ｈ、中帯域逆直交変換部
５０３Ｍ、低帯域逆直交変換部５０３Ｌ、帯域合成フィ
ルタ５０１、５０２、出力端子５００とを備えたもので
ある。As shown in FIG. 12, the decoding section 5 of this embodiment has at least two input terminals 504 and 50.
5, a high-band inverse orthogonal transform unit 503H, a middle band inverse orthogonal transform unit 503M, a low band inverse orthogonal transform unit 503L, band synthesis filters 501 and 502, and an output terminal 500.

【０１１７】キー操作部３１を通じて合成して再生する
ように指示された２つの楽曲の高能率符号化データは、
読み出し／書き込み部８を通じて符号化データ蓄積部９
から読み出され、制御部２０を通じて、一方の高能率符
号化データは、復号化部５の入力端子５０４に供給さ
れ、他方の高能率符号化データは、符号化部５の他方の
入力端子５０５に供給される。The high-efficiency coded data of the two songs instructed to be synthesized and reproduced through the key operation unit 31 are as follows:
Encoded data storage unit 9 through read / write unit 8
, And one of the high-efficiency encoded data is supplied to the input terminal 504 of the decoding unit 5 through the control unit 20, and the other highly-efficient encoded data is supplied to the other input terminal 505 of the encoding unit 5. Supplied to

【０１１８】入力端子５０４、５０５を通じて供給を受
けた高能率符号化データのそれぞれは、図１２に示すよ
うに、高帯域逆直交変換部５０３Ｈ、中帯域逆直交変換
部５０３Ｍ、低帯域逆直交変換部５０３Ｌのそれぞれに
供給される。このように、高帯域逆直交変換部５０３Ｈ
と、中帯域逆直交変換部５０３Ｍと、低帯域逆直交変換
部５０３Ｌとの３つの逆直交変換部が設けられているの
は、前述もしたように、オーディオデータは、高帯域／
中帯域／低帯域の３つの帯域に分割され、そのそれぞれ
についてＭＤＣＴすることにより高能率符号化している
ためである。As shown in FIG. 12, each of the high-efficiency coded data supplied through the input terminals 504 and 505 includes a high-band inverse orthogonal transform section 503H, a middle-band inverse orthogonal transform section 503M, and a low-band inverse orthogonal transform section. This is supplied to each of the units 503L. Thus, the high-band inverse orthogonal transform unit 503H
And the three inverse orthogonal transform units of the middle band inverse orthogonal transform unit 503M and the low band inverse orthogonal transform unit 503L are provided as described above.
This is because the band is divided into three bands of a middle band / low band, and each of them is subjected to MDCT to perform high-efficiency coding.

【０１１９】そして、高帯域逆直交変換部５０３Ｈ、中
帯域逆直交変換部５０３Ｍ、低帯域逆直交変換部５０３
Ｌのそれぞれにおいては、これらに供給された２つの高
能率符号化データのそれぞれから、処理の対象とする帯
域のスペクトルデータを抽出して、そのそれぞれについ
て逆直交変換した後に合成して、出力する。The high-band inverse orthogonal transform section 503H, the middle-band inverse orthogonal transform section 503M, and the low-band inverse orthogonal transform section 503H.
In each of L, spectral data of a band to be processed is extracted from each of the two high-efficiency coded data supplied thereto, subjected to inverse orthogonal transform for each of them, and then combined and output. .

【０１２０】ここでの逆直交変換は、前述もしたよう
に、固定小数点形式で行なわれるものであるが、図１〜
図６を用いて前述した信号処理方式を適用することによ
って、演算精度を落とすことなく、逆直交変換、この実
施の形態においては、ＩＭＤＣＴを行なうようにしてい
る。これら高帯域逆直交変換部５０３Ｈ、中帯域逆直交
変換部５０３Ｍ、低帯域逆直交変換部５０３Ｌにおいて
の処理の詳細については、後述もする。The inverse orthogonal transform here is performed in a fixed-point format as described above.
By applying the signal processing method described above with reference to FIG. 6, the inverse orthogonal transform, in this embodiment, IMDCT is performed without lowering the calculation accuracy. The details of the processing in the high band inverse orthogonal transform unit 503H, the middle band inverse orthogonal transform unit 503M, and the low band inverse orthogonal transform unit 503L will be described later.

【０１２１】そして、中帯域逆直交変換部５０３Ｍ、低
帯域逆直交変換部５０３Ｌからの出力信号は、帯域合成
フィルタ５０２に供給され、ここで帯域合成されたのち
に、帯域合成フィルタ５０１に供給される。帯域合成フ
ィルタ５０１には、帯域合成フィルタ５０２からの出力
信号（中帯域と低帯域との合成信号）と、高帯域逆直交
変換部５０３Ｈからの出力信号（高帯域の復号信号）が
供給され、これらが合成され、高帯域と、中帯域と、低
帯域との信号が合成された信号が形成され、これが、出
力端子５００を通じて出力され、後段のＤ／Ａ変換部６
に供給されることになる。The output signals from the middle band inverse orthogonal transform unit 503M and the low band inverse orthogonal transform unit 503L are supplied to a band combining filter 502, where they are combined, and then supplied to a band combining filter 501. You. The output signal from the band synthesis filter 502 (a synthesized signal of the middle band and the low band) and the output signal from the high band inverse orthogonal transform unit 503H (the high band decoded signal) are supplied to the band synthesis filter 501. These are combined to form a signal in which the signals of the high band, the middle band, and the low band are combined, and this signal is output through the output terminal 500, and the D / A converter 6 in the subsequent stage is formed.
Will be supplied.

【０１２２】そして、この実施の形態において、復号化
部５に設けられた高帯域逆直交変換部５０３Ｈ、中帯域
逆直交変換部５０３Ｍ、低帯域逆直交変換部５０３Ｌの
それぞれは、処理する信号の周波数帯域は異なるが、そ
の構成および動作は同じである。In this embodiment, each of the high-band inverse orthogonal transform unit 503H, the middle-band inverse orthogonal transform unit 503M, and the low-band inverse orthogonal transform unit 503L provided in the decoding unit 5 receives the signal to be processed. Although the frequency band is different, the configuration and operation are the same.

【０１２３】図１３は、図１２に示した復号化部５の高
帯域逆直交変換部５０３Ｈ、中帯域逆直交変換部５０３
Ｍ、低帯域逆直交変換部５０３Ｌの構成例を説明するた
めのブロック図である。この図１３を参照しながら、高
帯域逆直交変換部５０３Ｈ、中帯域逆直交変換部５０３
Ｍ、低帯域逆直交変換部５０３Ｌのそれぞれについて共
通に説明する。図１３に示すように、この実施の形態に
おいては、２つの高能率符号化データを合成するため、
復号化部５の各逆直交変換部５０３Ｈ、５０３Ｍ、５０
３Ｌそのそれぞれは、２系統の信号処理系を備えてい
る。FIG. 13 shows a high-band inverse orthogonal transform unit 503H and a middle-band inverse orthogonal transform unit 503 of the decoding unit 5 shown in FIG.
FIG. 8 is a block diagram illustrating a configuration example of an M, low-band inverse orthogonal transform unit 503L. Referring to FIG. 13, a high-band inverse orthogonal transform unit 503H and a middle band inverse orthogonal transform unit 503
The M and low-band inverse orthogonal transform units 503L will be described in common. As shown in FIG. 13, in this embodiment, in order to combine two highly efficient encoded data,
Each inverse orthogonal transform unit 503H, 503M, 50 of the decoding unit 5
Each of the 3Ls has two signal processing systems.

【０１２４】つまり、図１３において、第１の信号処理
系は、入力端子５１１、スペクトルデータ抽出部５１
２、正規化データ抽出部５１３、乗算器５１４、補正値
算出部５１５、乗算器５１６からなる部分である。ま
た、第２の信号処理系は、入力端子５２１、スペクトル
データ抽出部５２２、正規化データ抽出部５２３、乗算
器５２４、補正値算出部５２５、乗算器５２６からなる
部分である。That is, in FIG. 13, the first signal processing system includes an input terminal 511, a spectrum data extraction section 51
2. A part including a normalized data extraction unit 513, a multiplier 514, a correction value calculation unit 515, and a multiplier 516. The second signal processing system is a part including an input terminal 521, a spectrum data extraction unit 522, a normalized data extraction unit 523, a multiplier 524, a correction value calculation unit 525, and a multiplier 526.

【０１２５】また、第１の信号処理系と、第２の信号処
理系とにより共通に使用される部分として、正規化デー
タであるスケールファクタ値の最大値検出回路５３１、
比較部５３２、加算器５３３、逆直交変換部５３４、乗
算器５３５を備えたものである。As a part commonly used by the first signal processing system and the second signal processing system, a maximum value detection circuit 531 of a scale factor value, which is normalized data,
It comprises a comparing section 532, an adder 533, an inverse orthogonal transform section 534, and a multiplier 535.

【０１２６】そして、制御部２０を通じて、復号化部５
に供給される２つの高能率符号化データのうちの一方
は、端子５１１を通じて、スペクトルデータ抽出部５１
２と、正規化データ抽出部５１３とに供給される。ま
た、復号化部５に供給される２つの高能率符号化データ
のうちの他方は、端子５２１を通じて、スペクトルデー
タ抽出部５２２と、正規化データ抽出部５２３とに供給
される。Then, the decoding unit 5 is controlled by the control unit 20.
Of the two high-efficiency coded data supplied to the spectrum data extraction unit 51 through a terminal 511.
2 and a normalized data extraction unit 513. The other of the two high-efficiency encoded data supplied to the decoding unit 5 is supplied to a spectrum data extraction unit 522 and a normalized data extraction unit 523 via a terminal 521.

【０１２７】スペクトルデータ抽出部５１２は、これに
供給された高能率符号化データＳ１から、目的とする周
波数帯域のスペクトルデータＱ１を抽出し、抽出したス
ペクトルデータＱ１を後段の乗算器５１４に供給する。
スペクトルデータ抽出部５２２も同様に、これに供給さ
れた高能率符号化データＳ２から、目的とする周波数帯
域のスペクトルデータＱ２を抽出し、抽出したスペクト
ルデータＱ２を後段の乗算器５２４に供給する。The spectrum data extracting section 512 extracts the spectrum data Q1 of the target frequency band from the high-efficiency coded data S1 supplied thereto, and supplies the extracted spectrum data Q1 to the multiplier 514 at the subsequent stage. .
Similarly, the spectrum data extraction unit 522 extracts the spectrum data Q2 of the target frequency band from the high-efficiency encoded data S2 supplied thereto, and supplies the extracted spectrum data Q2 to the multiplier 524 at the subsequent stage.

【０１２８】また、正規化データ抽出部５１３は、これ
に供給された高能率符号化データＳ１から目的とする周
波数帯域のスペクトルデータに対応する各単位ブロック
毎のスケールファクタ値（正規化情報）Ｆ１を抽出し、
抽出したスケールファクタ値Ｆ１を、後段の最大値検出
部５３１と、補正値算出部５１５とに供給する。The normalized data extracting unit 513 converts the scale factor value (normalized information) F1 for each unit block corresponding to the spectrum data of the target frequency band from the supplied high efficiency encoded data S1. Extract
The extracted scale factor value F1 is supplied to a subsequent maximum value detection unit 531 and a correction value calculation unit 515.

【０１２９】同様に、正規化データ抽出部５２３は、こ
れに供給された高能率符号化データＳ２から目的とする
周波数帯域のスペクトルデータに対応する各単位ブロッ
ク毎のスケールファクタ値（正規化情報）Ｆ２を抽出
し、抽出したスケールファクタ値Ｆ２を、後段の最大値
検出部５３１と、補正値算出部５２５とに供給する。Similarly, the normalized data extraction unit 523 calculates the scale factor value (normalization information) for each unit block corresponding to the spectrum data of the target frequency band from the supplied high efficiency encoded data S2. F2 is extracted, and the extracted scale factor value F2 is supplied to the maximum value detection unit 531 and the correction value calculation unit 525 at the subsequent stage.

【０１３０】最大値検出部５３１は、スケールファクタ
値Ｆ１の中の最大値Ｆ１ｍａｘと、スケールファクタ値
Ｆ２の中の最大値Ｆ２ｍａｘとを検出し、これを比較部
５３２に供給する。比較部５３２は、これに供給された
最大値Ｆ１ｍａｘと、最大値Ｆ２ｍａｘとを比較し、大
きいほうを高能率符号化信号Ｓ１と高能率符号化信号Ｓ
２双方においてのスケールファクタ値の最大値Ｆ’とし
て、補正値算出部５１５，５２５、および、乗算器５３
５に供給する。The maximum value detection section 531 detects the maximum value F1max of the scale factor value F1 and the maximum value F2max of the scale factor value F2, and supplies these to the comparison section 532. The comparing unit 532 compares the maximum value F1max supplied thereto with the maximum value F2max, and determines the larger one as the high-efficiency coded signal S1 and the high-efficiency coded signal S1.
2 as the maximum value F ′ of the scale factor value in both the correction value calculation units 515 and 525 and the multiplier 53
5

【０１３１】比較部５３２からの最大値Ｆ’は、高能率
符号化信号Ｓ１と高能率符号化信号Ｓ２との共通したス
ケールファクタ値の最大値とされる。つまり、最大値
Ｆ’は、復号しようとしている両高能率符号化信号Ｓ
１、Ｓ２の共通化したスケールファクタ値の最大値とな
る。The maximum value F ′ from the comparison section 532 is the maximum value of the scale factor value common to the high efficiency coded signal S1 and the high efficiency coded signal S2. In other words, the maximum value F ′ is equal to the two high-efficiency coded signals S to be decoded.
1, S2 is the maximum value of the common scale factor value.

【０１３２】このように、両高能率符号化信号Ｓ１、Ｓ
２において、スケールファクタ値を最大値Ｆ’となるよ
うに共通化するので、スペクトルデータＱ１、Ｑ２につ
いても修正する必要が生じる。このため、補正値算出部
５１５においては、これに供給される正規化データ抽出
部５１３からのスケールファクタ値Ｆ１を、比較部５３
２からの最大値Ｆ’で割り算することにより、本来のス
ケールファクタ値Ｆ１の最大値Ｆ’に対する割合を求
め、その割合を補正値（補正のために用いる値）として
乗算器５１４に供給する。As described above, both high-efficiency coded signals S1, S
In 2, the scale factor value is shared so as to be the maximum value F ′, so that it is necessary to correct the spectrum data Q1 and Q2. For this reason, the correction value calculation unit 515 compares the scale factor value F1 supplied from the normalization data extraction unit 513 with the comparison unit 53.
By dividing by the maximum value F 'from 2, the ratio of the original scale factor value F1 to the maximum value F' is obtained, and the ratio is supplied to the multiplier 514 as a correction value (a value used for correction).

【０１３３】乗算器５１４には、前述したようにスペク
トルデータＱ１が供給されており、スペクトルデータＱ
１に、スケールファクタ値Ｆ１の最大値Ｆ’に対する割
合が掛け算され、スペクトルデータＱ１の有効ビット数
を十分に取った形態で、スペクトルデータＱ１を表現す
ることができる。The multiplier 514 is supplied with the spectrum data Q1 as described above,
1 is multiplied by the ratio of the scale factor value F1 to the maximum value F ′, and the spectrum data Q1 can be expressed in a form in which the number of effective bits of the spectrum data Q1 is sufficiently large.

【０１３４】同様に、補正値算出部５２５においては、
これに供給される正規化データ抽出部５２３からのスケ
ールファクタ値Ｆ２を、比較部５３２からの最大値Ｆ’
で割り算することにより、本来のスケールファクタ値Ｆ
１の最大値Ｆ’に対する割合を求め、その割合を補正値
（補正のために用いる値）として乗算器５２４に供給す
る。Similarly, in the correction value calculating section 525,
The scale factor value F2 supplied from the normalized data extraction unit 523 is supplied to the maximum value F ′ from the comparison unit 532.
By dividing by the original scale factor value F
The ratio of 1 to the maximum value F 'is obtained, and the ratio is supplied to the multiplier 524 as a correction value (a value used for correction).

【０１３５】乗算器５２４には、前述したようにスペク
トルデータＱ２が供給されており、スペクトルデータＱ
２に、スケールファクタ値Ｆ２の最大値Ｆ’に対する割
合が掛け算され、スペクトルデータＱ２の有効ビット数
を十分に取った形態で、スペクトルデータＱ２を表現す
ることができる。The multiplier 524 is supplied with the spectrum data Q2 as described above,
2 is multiplied by the ratio of the scale factor value F2 to the maximum value F ′, and the spectrum data Q2 can be expressed in a form in which the number of effective bits of the spectrum data Q2 is sufficiently large.

【０１３６】そして、乗算器５１４からの出力信号（Ｑ
１×Ｆ１／Ｆ’）は、乗算器５１６に供給され、乗算器
５２４からの出力信号（Ｑ２×Ｆ２／Ｆ’）は、乗算器
５２６に供給される。乗算器５１６、５２６のそれぞれ
には、例えば、制御部２０からのレベル調整用の比率Ａ
１、Ａ２が供される。Then, the output signal (Q
1 × F1 / F ′) is supplied to the multiplier 516, and the output signal (Q2 × F2 / F ′) from the multiplier 524 is supplied to the multiplier 526. Each of the multipliers 516 and 526 has, for example, a level adjustment ratio A from the control unit 20.
1, A2 are provided.

【０１３７】そして、乗算器５１４からの出力信号（Ｑ
１×Ｆ１／Ｆ’）については、比率Ａ１によりその信号
レベルが調整され、同様に、乗算器５２４からの出力信
号（Ｑ２×Ｆ２／Ｆ’）比率Ａ２によりその信号レベル
が調整される。このようにして、レベル調整された信号
は、加算器５３３に供給される。Then, the output signal (Q
For 1 × F1 / F ′), the signal level is adjusted by the ratio A1, and similarly, the signal level is adjusted by the output signal (Q2 × F2 / F ′) ratio A2 from the multiplier 524. The signal whose level has been adjusted in this manner is supplied to the adder 533.

【０１３８】この場合、図１３にも示すように、乗算器
５１６からの出力信号は、Ｑ１×Ｆ１／Ａ１＝Ａ１’×
Ｑ１となり、図５、図６を用いて前述したように、スペ
クトルデータの固定小数点部分が得られることになる。
同様に、乗算器５２６からの出力信号は、Ｑ２×Ｆ２／
Ａ２＝Ａ２’×Ｑ２となり、図５、図６を用いて前述し
たように、スペクトルデータの固定小数点部分が得られ
ることになる。In this case, as shown in FIG. 13, the output signal from multiplier 516 is Q1 × F1 / A1 = A1 ′ ×
Q1 and the fixed-point portion of the spectrum data is obtained as described above with reference to FIGS.
Similarly, the output signal from multiplier 526 is Q2 × F2 /
A2 = A2 ′ × Q2, and the fixed-point portion of the spectrum data is obtained as described above with reference to FIGS.

【０１３９】そして、乗算器５１６、５２６からの出力
信号を加算することにより、レベル調整後の２つの高能
率符号化データのスペクトルデータの固定小数点部分の
合成が行なわれたことになる。加算器５３３からの出力
信号である合成信号は、逆直交変換部５３４に供給 さ
れる。逆直交変換部５３４においては、これに供給され
たスペクトルデータを逆直交変換することにより、時間
領域データに変換する。By adding the output signals from multipliers 516 and 526, the fixed-point portion of the spectrum data of the two high-efficiency encoded data after level adjustment is synthesized. A composite signal that is an output signal from the adder 533 is supplied to the inverse orthogonal transform unit 534. The inverse orthogonal transform unit 534 performs an inverse orthogonal transform on the supplied spectral data, thereby converting the spectrum data into time domain data.

【０１４０】この場合、逆直交変換部５３４に供給され
た合成信号は、その有効ビット数が、逆直交変換部５３
４における演算精度を落とすことがないように、十分に
取るようにされたものであるので、逆直交変換部５３４
における演算精度を落とすことなく高精度に逆直交変換
演算を行なって、スペクトルデータを良好に復号化する
ようにしている。In this case, the number of effective bits of the composite signal supplied to inverse orthogonal transform
4 so as not to reduce the calculation accuracy, the inverse orthogonal transform unit 534
In this method, the inverse orthogonal transform operation is performed with high accuracy without lowering the operation accuracy in the above, so that the spectrum data can be decoded well.

【０１４１】そして、逆直交変換部５３４からの出力信
号は、乗算器５３５に供給される。乗算器５３５には、
前述もしたように、比較器５３２からのスケールファク
タ値の最大対Ｆ’が供給されているので、この最大値
Ｆ’によって、有効ビット数を稼ぐようにして逆直交変
換して生成されたデータについて、スケールファクタ値
の最大値Ｆ’を用いていわゆるスケールダウン処理を行
なうことにより最終的な復号処理を行なう。The output signal from the inverse orthogonal transform unit 534 is supplied to a multiplier 535. The multiplier 535 includes:
As described above, since the maximum pair F ′ of the scale factor values is supplied from the comparator 532, the data generated by performing the inverse orthogonal transform so as to increase the number of effective bits by using the maximum value F ′ , A final decoding process is performed by performing a so-called scale-down process using the maximum value F ′ of the scale factor value.

【０１４２】ここでスケールダウン処理は、共通化した
スケールファクタ値、すなわち、スケールファクタ値の
最大値Ｆ’を用いて、逆直交変換後のオーディオデータ
を正規化前の状態のデータに復旧する処理であり、これ
により、各帯域のスペクトルデータについての復号化処
理が完了する。Here, the scale-down process is a process of restoring audio data after inverse orthogonal transformation to data before normalization using a common scale factor value, that is, the maximum value F ′ of the scale factor value. Thus, the decoding process for the spectrum data of each band is completed.

【０１４３】そして、高帯域逆直交変換部５０３Ｈ、中
帯域逆直交変換部５０３Ｍ、低帯域直交変換部５０３Ｌ
のそれぞれにおいて、各帯域（高帯域／中帯域／低帯
域）についてのスペクトルデータの復号化が終了する
と、図１２を用いて前述したように、各逆直交変換部か
らの出力信号は、帯域合成フィルタ５０１、５０２によ
り合成され、高能率符号化データは、高能率符号化前の
元のデジタルオーディオデータに復旧される。そして、
このデジタルオーディオデータは、Ｄ／Ａ変換部６によ
って、アナログオーディオデータに変換され、再生する
ようにされる。The high-band inverse orthogonal transform unit 503H, the middle-band inverse orthogonal transform unit 503M, and the low-band orthogonal transform unit 503L
When the decoding of the spectrum data for each band (high band / middle band / low band) is completed in each of the above, as described above with reference to FIG. The high efficiency encoded data synthesized by the filters 501 and 502 is restored to the original digital audio data before the high efficiency encoding. And
The digital audio data is converted into analog audio data by the D / A converter 6 and reproduced.

【０１４４】［各逆直交変換部意おいての動作につい
て］次に、図１３を用いて前述した高帯域逆直交変換部
５０３Ｈ、中帯域逆直交変換部５０３Ｍ、低帯域直交変
換部５０３Ｌにおける動作について、図１４のフローチ
ャートを参照しながら説明する。図１４は、高帯域逆直
交変換部５０３Ｈ、中帯域逆直交変換部５０３Ｍ、低帯
域直交変換部５０３Ｌにおいての動作を説明するための
フローチャートである。[Operations in Each Inverse Orthogonal Transformation Unit] Next, operations in the high band inverse orthogonal transform unit 503H, the middle band inverse orthogonal transform unit 503M, and the low band orthogonal transform unit 503L described above with reference to FIG. Will be described with reference to the flowchart of FIG. FIG. 14 is a flowchart for explaining operations in the high-band inverse orthogonal transform unit 503H, the middle-band inverse orthogonal transform unit 503M, and the low-band orthogonal transform unit 503L.

【０１４５】各逆直交変換部５０３Ｈ、５０３Ｍ、５０
３Ｌにおいては、これらに供給される復号化の対象であ
る高能率符号化データＳ１、Ｓ２からスペクトルデータ
抽出部５１２、５２２により、自回路部分において、処
理の対象とする周波数帯域のスペクトルデータを抽出す
る（ステップＳ１０１）。Each inverse orthogonal transform unit 503H, 503M, 50
In 3L, the spectrum data extraction units 512 and 522 extract the spectrum data of the frequency band to be processed in the own circuit part from the high-efficiency coded data S1 and S2 to be decoded which are supplied thereto. (Step S101).

【０１４６】また、復号化の対象である高能率符号化デ
ータＳ１、Ｓ２から正規化データ抽出部５１３、５２３
により、自回路部分において、処理の対象とする周波数
帯域の正規化データであるスケールファクタ値Ｆ１、Ｆ
２を抽出するとともに、最大値検出部５３１、比較部５
３２により、両符号化データのスケールファクタ値Ｆ
１、Ｆ２の最大値Ｆ’を求める（ステップＳ１０２）。The normalized data extraction units 513 and 523 are extracted from the high-efficiency encoded data S1 and S2 to be decoded.
Thus, in the own circuit part, the scale factor values F1 and F, which are the normalized data of the frequency band to be processed,
2 and the maximum value detecting unit 531 and the comparing unit 5
32, the scale factor value F of both encoded data
1. A maximum value F ′ of F2 is obtained (step S102).

【０１４７】そして、ステップＳ１０１において抽出し
た処理の対象となっているスペクトルデータについての
スケールファクタ値Ｆ１、Ｆ２を、ステップＳ１０２に
おいて求めたスケールファクタ値の最大値Ｆ’に変更す
るようにし、これに応じて、補正値算出部５１５、５２
５、および、乗算器５１４、５２４により、スペクトル
データの値を補正（再正規化）する（ステップＳ１０
３）。Then, the scale factor values F1 and F2 of the spectrum data to be processed which are extracted in step S101 are changed to the maximum value F 'of the scale factor value obtained in step S102. Accordingly, the correction value calculation units 515 and 52
5, and the values of the spectrum data are corrected (renormalized) by the multipliers 514 and 524 (step S10).
3).

【０１４８】このように、この実施の形態においては、
補正値算出手段５１５、５２５において算出される補正
値に基づいて、乗算器５１４、５２４により、スペクト
ルデータの値を補正することにより、スペクトルデータ
の最大値Ｆ’に応じた再正規化を行なうようにしてい
る。したがって、補正値算出部５１５、乗算器５１４に
より第１の信号処理系の再正規化手段を構成し、補正値
算出部５２５、乗算器５２４により第２の信号処理系の
再正規化手段を構成している。As described above, in this embodiment,
The multipliers 514 and 524 correct the values of the spectrum data based on the correction values calculated by the correction value calculation means 515 and 525, thereby performing re-normalization according to the maximum value F ′ of the spectrum data. I have to. Therefore, the correction value calculation unit 515 and the multiplier 514 constitute a re-normalization unit of the first signal processing system, and the correction value calculation unit 525 and the multiplier 524 constitute a re-normalization unit of the second signal processing system. are doing.

【０１４９】そして、再正規化されたスペクトルデータ
に対して、乗算部５１６、５２６において、制御部２０
から指示される任意の比率Ａ１、Ａ２を掛け合わせるレ
ベル調整を行なったのちに、乗算器５１６からの信号
と、乗算器５２６からの信号とを加算器５３３により加
算する信号の合成処理（ミキシング）を行なう（ステッ
プＳ１０４）。The renormalized spectrum data is then multiplied by multiplication units 516 and 526 to control unit 20.
After performing level adjustment by multiplying arbitrary ratios A1 and A2 indicated by the following, the signal from the multiplier 516 and the signal from the multiplier 526 are added by the adder 533 (mixing). Is performed (step S104).

【０１５０】加算器５３３により合成された信号（合成
信号）は、逆直交変換部５３４に供給されるので、この
逆直交変換部５３４により合成信号について逆直交変換
する（ステップＳ１０５）。逆直交変換後の合成信号
は、乗算器５３５に供給されるので、ここで逆直交変換
後の合成信号について、最大値Ｆ’によりスケールダウ
ンする処理を行ない、高能率符号化前の元の時間領域デ
ータに復元する（ステップＳ１０６）。The signal (combined signal) combined by the adder 533 is supplied to the inverse orthogonal transform unit 534, and the inverse orthogonal transform unit 534 performs inverse orthogonal transform on the combined signal (step S105). Since the synthesized signal after the inverse orthogonal transform is supplied to the multiplier 535, the synthesized signal after the inverse orthogonal transform is scaled down by the maximum value F ′ to obtain the original time before the high-efficiency encoding. The area data is restored (step S106).

【０１５１】この図１４に示す処理が、高帯域逆直交変
換部５０３Ｈ、中帯域逆直交変換部５０３Ｍ、低帯域逆
直交変換部５０３Ｌにおいて、これらに供給される高能
率符号化データについて順次に行なわれ、所定の比率に
応じてレベル調整した高能率符号化データを合成し、か
つ、逆直交変換時の演算精度を低下させることなく、高
精度に逆直交間変換を行なって復号化し、オーディオデ
ータによる音声を再生するようにすることができる。The processing shown in FIG. 14 is sequentially performed on the high-efficiency coded data supplied thereto in high-band inverse orthogonal transform section 503H, middle-band inverse orthogonal transform section 503M, and low-band inverse orthogonal transform section 503L. The high-efficiency coded data whose level has been adjusted according to a predetermined ratio is synthesized, and the inverse orthogonal transform is performed and decoded with high accuracy without deteriorating the operation accuracy at the time of inverse orthogonal transform, and the audio data is decoded. Can be reproduced.

【０１５２】ところで、前述のように、２つの高能率符
号化データを合成して再生する場合において、レベル調
整用の比率Ａｋが与えられたときに、スケールファクタ
値の最大値Ｆ’に応じて調整された調整後比率Ａｋ’の
値は、スケールファクタ値Ｆｋの比だけによって決ま
る。As described above, when two high-efficiency coded data are synthesized and reproduced, when the ratio Ak for level adjustment is given, according to the maximum value F ′ of the scale factor value. The value of the adjusted ratio Ak ′ is determined only by the ratio of the scale factor value Fk.

【０１５３】つまり、調整後比率Ａｋ’は、図６Ｂの
（１１）式で求められるが、Ｆ’は、合成しようとして
いる高能率符号化データＳ１、Ｓ２のスケールファクタ
値Ｆ１、Ｆ２のうちの最大値であるので、スケールファ
クタＦ１が、スケールファクタＦ２より大きい場合は、
図６Ｂの（１１）式は、Ａｋ’＝Ｆｋ／Ｆ１×Ａｋとな
り、また、スケールファクタＦ２が、スケールファクタ
Ｆ１より大きい場合は、図６Ｂの（１１）式は、Ａｋ’
＝Ｆｋ／Ｆ２×Ａｋとなる。That is, the adjusted ratio Ak 'is obtained by the equation (11) in FIG. 6B, and F' is the scale factor value F1 or F2 of the high-efficiency encoded data S1 or S2 to be synthesized. Since this is the maximum value, if the scale factor F1 is larger than the scale factor F2,
Equation (11) in FIG. 6B is Ak ′ = Fk / F1 × Ak, and when the scale factor F2 is larger than the scale factor F1, the equation (11) in FIG.
= Fk / F2 × Ak.

【０１５４】このように、調整後比率Ａｋ’が、スケー
ルファクタ値Ｆｋの比に応じて求められることを利用し
て、調整後比率Ａｋ’と、スケールファクタ値の最大値
Ｆ’を求めるための表を予め用意しておくようにするこ
ともできる。図１５、図１６は、２つの高能率符号化デ
ータＳ１、Ｓ２を合成する場合、すなわち、Ｎ＝２であ
って、データＳ１に対する比率Ａ１＝０．３、データＳ
２に対する比率Ａ２＝０．４とした場合の予め用意する
変換表の一例を示すものである。As described above, by utilizing the fact that the adjusted ratio Ak 'is determined according to the ratio of the scale factor value Fk, the adjusted ratio Ak' and the maximum value F 'of the scale factor value are determined. A table can be prepared in advance. FIGS. 15 and 16 show the case where two high-efficiency coded data S1 and S2 are combined, that is, N = 2, the ratio A1 = 0.3 with respect to the data S1, and the data S1.
6 shows an example of a conversion table prepared in advance when the ratio A2 = 2 is set to 0.4.

【０１５５】また、図１５、図１６は、いずれにおいて
も、スケールファクタ値の比であるＦ１／Ｆ２が６ｄＢ
ステップで変化する場合の例である。まず、図１５の場
合について説明する。図１５に示すように、Ｆ１／Ｆ２
が、２の０乗（１／１＝１）の場合には、Ａ１’＝０．
３、Ａ２’＝０．４、Ｆ’＝１．００００×Ｆ２とす
る。この場合、Ａ１’、Ａ２’は、いずれも元の値であ
るし、Ｆ’は、Ｆ２の値そのままである。FIGS. 15 and 16 show that the ratio F1 / F2 of the scale factor value is 6 dB in both cases.
This is an example of the case of changing in steps. First, the case of FIG. 15 will be described. As shown in FIG. 15, F1 / F2
Is 2 to the power of 0 (1/1 = 1), A1 ′ = 0.
3, A2 ′ = 0.4 and F ′ = 1.0000 × F2. In this case, A1 'and A2' are both the original values, and F 'remains the value of F2.

【０１５６】そして、Ｆ１／Ｆ２が、２のマイナス１乗
（１／２）となった場合には、Ａ１’＝Ａ１／２＝０．
１５とし、Ａ２’、Ｆ’については、変更しない。すな
わち、Ｆ２が２倍になっても、Ｆ１が２分の１になった
ものとして対応する。また、Ｆ１／Ｆ２が、２のマイナ
ス２乗（１／４）となった場合には、Ａ１’＝Ａ１／２
＝０．１５とし、Ａ２’＝Ａ１×２＝０．８とし、Ｆ’
＝０．５×Ｆ２とすることによって、Ｆ１が２分の１に
なり、Ｆ２が２倍になったものとして対応する。When F1 / F2 is 2 minus the first power (1/2), A1 '= A1 / 2 = 0.
15, and A2 'and F' are not changed. In other words, even if F2 doubles, it corresponds to the fact that F1 has become half. If F1 / F2 is 2 minus the square (1/4), A1 '= A1 / 2
= 0.15, A2 '= A1 x 2 = 0.8, F'
By setting = 0.5 × F2, it is assumed that F1 is halved and F2 is doubled.

【０１５７】さらに、Ｆ１／Ｆ２が、２のマイナス３乗
（１／８）となった場合には、Ａ１’＝Ａ１／４＝０．
０７５とし、Ａ２’＝Ａ２×２＝０．８とし、Ｆ’＝
０．５×Ｆ２とし、Ｆ１が４分の１になり、Ｆ２が２倍
になったものとして対応する。また、Ｆ１／Ｆ２が、２
のマイナス４乗（１／１６）となった場合には、Ａ１’
＝Ａ１／８＝０．０３７５とし、Ａ２’＝Ａ１×２＝
０．８、Ｆ’＝０．５×Ｆ２とし、Ｆ１が８分の１にな
り、Ｆ２が２倍になったものとして対応する。Further, when F1 / F2 is 2 minus the third power (1/8), A1 '= A1 / 4 = 0.
075, A2 ′ = A2 × 2 = 0.8, F ′ =
0.5 × F2, which corresponds to a case where F1 is ４ and F2 is doubled. F1 / F2 is 2
A1 'when the power becomes minus 4th power (1/16)
= A1 / 8 = 0.0375, and A2 ′ = A1 × 2 =
0.8, F ′ = 0.5 × F2, where F1 is ８ and F2 is doubled.

【０１５８】また、図１５に示すように、Ｆ１／Ｆ２
が、２の１乗（２／１＝１）の場合には、Ａ１’＝Ａ１
×２＝０．６とし、Ａ２’＝０．４、Ｆ’＝０．５×Ｆ
１とする。この場合、単に、Ｆ１が２倍になったものと
して対応する。以降、Ｆ１／Ｆ２が、２の２乗（４／
１）、２の３乗（８／１）、２の４乗（１６／１）、２
の５乗（３２／１）、２の６乗（６４／１）となった場
合には、図１５に示すように、Ｆ２が、元の２分の１、
４分の１、８分の１、１６分の１、３２分の１となった
ものとして対応し、Ａ１’、Ｆ’については変更しない
ようにする。As shown in FIG. 15, F1 / F2
Is a power of 2 (2/1 = 1), A1 ′ = A1
× 2 = 0.6, A2 ′ = 0.4, F ′ = 0.5 × F
Let it be 1. In this case, it is simply assumed that F1 is doubled. Thereafter, F1 / F2 is 2 squared (4 /
1) 2 to the power of 3 (8/1), 2 to the power of 4 (16/1), 2
In the case of the fifth power (32/1) and the sixth power (64/1), as shown in FIG.
Corresponding to the values of 1/4, 1/8, 1/16, and 1/32, and A1 'and F' are not changed.

【０１５９】このような表を予め設けておくことによ
り、比率Ａ１、Ａ２、および、スケールファクタ値Ｆ
１、Ｆ２が分かっていれば、修正後比率Ａ１’、Ａ２’
スケールファクタ値の共通化した最大値Ｆ’を簡単に定
め、合成処理および復号化処理を行なうことが可能とな
る。By providing such a table in advance, the ratio A1, A2 and the scale factor value F
If F1 and F2 are known, the corrected ratios A1 'and A2'
It is possible to easily determine the common maximum value F ′ of the scale factor value and perform the combining process and the decoding process.

【０１６０】次に、図１６に示した他の例の場合につい
て説明する。この図１６の場合には、図１５に示した例
の場合よりも、更に簡単に修正後比率Ａ１’、Ａ２’を
単純に求めることができるようにしたものである。すな
わち、図１６に示すように、合成する２つの高能率符号
化データＳ１、Ｓ２のスケールファクタ値Ｆ１、Ｆ２の
比であるＦ１／Ｆ２において、Ｆ１が増えていく場合に
は、Ｆ１を固定し、Ｆ２のみを変更するようにしたもの
であり、また、Ｆ２が増えていく場合には、Ｆ２を固定
し、更に、この例の場合には、スケールファクタ値の最
大値Ｆ’として、スケールファクタ値Ｆ１、Ｆ２のうち
の大きい値の方をそのまま用いるようにしている。Next, the case of another example shown in FIG. 16 will be described. In the case of FIG. 16, the corrected ratios A1 'and A2' can be simply obtained more easily than in the case of the example shown in FIG. That is, as shown in FIG. 16, when F1 increases in F1 / F2 which is the ratio of the scale factor values F1 and F2 of the two high-efficiency encoded data S1 and S2 to be synthesized, F1 is fixed. , F2 only, and when F2 increases, F2 is fixed, and in this example, the maximum scale factor value F ′ is set as the scale factor value. The larger value of the values F1 and F2 is used as it is.

【０１６１】この図１５、図１６に示した例のように、
予め修正後比率Ａ１’、Ａ２’、共通化したスケールフ
ァクタ値の最大値Ｆ’を求めるための変換表を作成して
おくことにより、高能率符号化の合成および復号化を迅
速に、しかも簡単かつ正確に行なうことが可能となる。As shown in FIGS. 15 and 16,
By preparing a conversion table for obtaining the corrected ratios A1 'and A2' and the maximum value F 'of the common scale factor value in advance, the synthesis and decoding of high-efficiency coding can be performed quickly and easily. And it can be performed accurately.

【０１６２】特に、パーソナルコンピュータなどの情報
処理装置において、ソフトウエアにより、この発明によ
る信号処理装置を構成する場合などにおいては、図１
５、図１６に示したような変換表を予め作成しておくこ
とにより、高能率符号化データの合成および復号化を迅
速に行なうようにすることができる。また、図１５、図
１６に示した変換表は１例であり、レベル調整用の比率
Ａ１、Ａ２に応じて種々の変換表を用意しておくことに
より、比率Ａ１、Ａ２の異なるさまざまな場合にも対応
することができる。In particular, in the case where the signal processing device according to the present invention is configured by software in an information processing device such as a personal computer, FIG.
5. By preparing the conversion table as shown in FIG. 16 in advance, it is possible to quickly synthesize and decode highly efficient encoded data. Further, the conversion tables shown in FIGS. 15 and 16 are examples, and various conversion tables are prepared according to the ratios A1 and A2 for level adjustment, so that various cases where the ratios A1 and A2 are different. Can also be accommodated.

【０１６３】そして、このような変換表を予め用意して
おくことにより、２つの高能率符号化データを合成し
て、復号化する場合には、２つの高能率符号化データ
のスケールファクタ値Ｆ１、Ｆ２を抽出する。そして、
抽出したスケールファクタ値Ｆ１、Ｆ２の比率（Ｆ１
／Ｆ２）に基づいて、修正後比率Ａ１’、Ａ２’、共通
化したスケールファクタの最大値Ｆ’の値を変換表から
特定する。By preparing such a conversion table in advance, when combining and decoding two highly efficient encoded data, the scale factor value F1 of the two highly efficient encoded data is used. , F2. And
The ratio of the extracted scale factor values F1 and F2 (F1
/ F2), the values of the corrected ratios A1 ′ and A2 ′ and the maximum value F ′ of the common scale factor are specified from the conversion table.

【０１６４】次に、合成する２つの高能率符号化デー
タのスペクトルデータＱ１、Ｑ２に対して、変換表から
求めた対応する修正後比率Ａ１’、Ａ２’を掛け算し、
その結果を加算して、逆直交変換する。最後に、
逆直交変換の結果得られた信号に、変換表から求めたス
ケールファクタ値の最大値Ｆ’を掛け合わせることによ
り、２つの高能率符号化を合成したものの復号化が完了
し、これを再生することができるようにされる。Next, the spectrum data Q1 and Q2 of the two high-efficiency encoded data to be synthesized are multiplied by the corresponding corrected ratios A1 ′ and A2 ′ obtained from the conversion table,
The result is added and inverse orthogonal transformation is performed. Finally,
By multiplying the signal obtained as a result of the inverse orthogonal transform by the maximum value F ′ of the scale factor value obtained from the conversion table, decoding of the combined two high-efficiency encodings is completed and reproduced. Be able to be.

【０１６５】したがって、変換表を用いる場合には、修
正後比率Ａ１’、Ａ２’、最大値Ｆ’を求めるための処
理を行なわなくてもよいので、高能率符号化データの合
成および復号化処理を迅速に行なうことができる。ま
た、図１５、図１６に示したＦ１／Ｆ２や最大値Ｆ’
は、実際には、予め用意される図２に示したようなスケ
ールファクタ値のテーブルのスケールファクタ番号との
対応から求められる。Therefore, when the conversion table is used, it is not necessary to perform the processing for obtaining the corrected ratios A1 'and A2' and the maximum value F '. Can be performed quickly. Further, F1 / F2 and the maximum value F ′ shown in FIGS.
Is actually obtained from the correspondence between the scale factor numbers in the scale factor value table prepared as shown in FIG. 2 and prepared in advance.

【０１６６】なお、前述の実施の形態においては、２つ
の高能率符号化データＳ１、Ｓ２を合成して復号化する
場合を例にして説明したが、これに限るものではない。
つまり、合成する高能率符号化データは、２つ以上であ
ればいくつでもよい。つまり、合成する高能率符号化デ
ータは、２、３、４、…、Ｎというように、Ｎ個の高能
率符号化データを合成して復号化する場合にこの発明を
適用することができる。具体的には、図１３に示した復
号化部５の各逆直交変換部に、入力信号の数に応じた信
号処理系を設けるようにすればよい。共通部分について
の変更の必要は生じない。In the above-described embodiment, the case where two high-efficiency encoded data sets S1 and S2 are combined and decoded has been described as an example. However, the present invention is not limited to this.
That is, any number of highly efficient encoded data to be combined may be used as long as it is two or more. That is, the present invention can be applied to a case where N pieces of high-efficiency encoded data are combined and decoded, such as 2, 3, 4,... Specifically, each inverse orthogonal transform unit of the decoding unit 5 shown in FIG. 13 may be provided with a signal processing system corresponding to the number of input signals. There is no need to change the common part.

【０１６７】このように、多数の符号化データを合成す
る場合であっても、予め復号化する必要はなく、合成処
理した後に復号化を行なえばよいので、復号化部を入力
信号分設けたり、復号化処理を入力信号分行なうなどの
必要がない。したがって、信号処理装置をハードウエア
として構成する場合であっても、また、ソフトウエアに
より構成する場合であっても、規模が大きくなったり、
コストが高くなるなどのこともない。また、逆直交変換
時の演算精度を落とすことがないので、高品位にデジタ
ルデータを復号化して用いるようにすることができる。As described above, even when a large number of pieces of encoded data are combined, it is not necessary to perform decoding in advance, and decoding may be performed after the combining processing. It is not necessary to perform the decoding process for the input signal. Therefore, even when the signal processing device is configured as hardware, or when configured as software, the scale becomes large,
There is no increase in cost. In addition, since the calculation accuracy at the time of the inverse orthogonal transformation is not reduced, digital data can be decoded and used with high quality.

【０１６８】また、復号化する際の処理の単位は、例え
ば、１サウンドフレーム毎、複数サウンドフレーム毎の
ように、任意の範囲において、スケールファクタ値の共
通化を行なうようにして復号化することが可能である。
また、スケールファクタ値は、前述もしたように、各単
位ブロック毎に割り当てられるものであり、スケールフ
ァクタ値の最大値は、復号化する処理の単位毎に検出す
るようにされることになる。[0168] The unit of processing at the time of decoding is such that the scale factor value is shared in an arbitrary range, for example, for each sound frame or for a plurality of sound frames. Is possible.
As described above, the scale factor value is assigned to each unit block, and the maximum value of the scale factor value is detected for each unit of the decoding process.

【０１６９】また、レベル調整のための比率を細かく変
えることにより、前述もしたように、フェードイン効果
や、フェードアウト効果、クロスフェード効果などを付
加するようにすることができる。また、オーディオデー
タの任意の部分に他のオーディオデータを合成すること
もできる。Further, by finely changing the ratio for level adjustment, it is possible to add a fade-in effect, a fade-out effect, a cross-fade effect, and the like, as described above. Also, other audio data can be combined with an arbitrary part of the audio data.

【０１７０】また、前述の実施の形態においては、高能
率符号化方式として、ＡＴＲＡＣ方式を用いる場合を例
にして説明したが、これに限るものではない。高能率符
号化時において、直交変換を用いる種々の高能率符号化
方式を用いる場合に、この発明を適用することができ
る。In the above-described embodiment, the case where the ATRAC system is used as an example of the high-efficiency coding system has been described. However, the present invention is not limited to this. The present invention can be applied to a case where various high-efficiency coding schemes using orthogonal transform are used at the time of high-efficiency coding.

【０１７１】また、前述の実施の形態においては、信号
処理装置を単独で構成する場合、あるいは、パーソナル
コンピュータにソフトウエアにより構成するものとして
説明したが、これらに限るものではない。たとえば、Ｍ
Ｄ装置やオーディオアンプなどに拡張機能として搭載す
ることもできる。Further, in the above-described embodiment, the case where the signal processing device is constituted independently or the personal computer is constituted by software is described. However, the present invention is not limited thereto. For example, M
It can also be installed as an extended function in a D device, audio amplifier, or the like.

【０１７２】また、合成の対象となるデジタルデータ
は、オーディオデータに限るものではなく、ビデオデー
タを合成する場合にもこの発明を適用することができ
る。もちろん、オーディオデータとビデオデータとを同
時に合成するようにする場合にもこの発明を適用するこ
とができる。The digital data to be synthesized is not limited to audio data, and the present invention can be applied to a case where video data is synthesized. Of course, the present invention can be applied to a case where audio data and video data are simultaneously synthesized.

【０１７３】したがって、各種のオーディオ機器、ビデ
オ機器、オーディオ・ビジュアル機器など、直交変換を
用いて符号化された各種のデジタルデータを処理する機
器にこの発明を適用することができる。Therefore, the present invention can be applied to devices that process various digital data encoded using orthogonal transform, such as various audio devices, video devices, and audio-visual devices.

【０１７４】[0174]

【発明の効果】以上説明したように、この発明によれ
ば、直交変換されて符号化されたデジタルデータを合成
して、復号化するためのハードウエアやソフトウエアを
簡単に構成することができる。また、デジタルデータを
合成するためのハードウエアやソフトウエアのコストが
高くなることもない。また、逆直交変換の演算精度が低
下することもなく、高品位に符号化データの復号化がで
きる。As described above, according to the present invention, it is possible to easily configure hardware and software for synthesizing and decoding digital data that has been orthogonally transformed and encoded. . Further, the cost of hardware and software for synthesizing digital data does not increase. Further, the encoded data can be decoded with high quality without lowering the calculation accuracy of the inverse orthogonal transform.

【０１７５】また、複数のソースを加算しながら再生す
る場合、固定ビット長のＤＳＰ（デジタルシグナルプロ
セッサ）などを用いることができるので、ハードウエア
やソフトウエアのコストを低減させることができる。ス
ケールファクタ値を補正することにより、固定ビット長
の演算でありながら、広いダイナミックレンジを保つこ
とができ、再生データの品質を高品位に保つことができ
る。In addition, when reproducing a plurality of sources while adding them, a DSP (Digital Signal Processor) having a fixed bit length can be used, so that hardware and software costs can be reduced. By correcting the scale factor value, it is possible to maintain a wide dynamic range and maintain high quality reproduction data even though the calculation is performed with a fixed bit length.

【図面の簡単な説明】[Brief description of the drawings]

【図１】この発明による信号処理装置、信号処理方法の
考え方について説明するための図である。FIG. 1 is a diagram for explaining the concept of a signal processing device and a signal processing method according to the present invention.

【図２】この発明による信号処理装置、信号処理方法の
考え方について説明するための図である。FIG. 2 is a diagram for explaining a concept of a signal processing device and a signal processing method according to the present invention;

【図３】この発明による信号処理装置、信号処理方法の
考え方について説明するための図である。FIG. 3 is a diagram for explaining the concept of a signal processing device and a signal processing method according to the present invention;

【図４】この発明による信号処理装置、信号処理方法の
考え方について説明するための図である。FIG. 4 is a diagram for explaining a concept of a signal processing device and a signal processing method according to the present invention;

【図５】この発明による信号処理装置、信号処理方法の
考え方について説明するための図である。FIG. 5 is a diagram for explaining the concept of a signal processing device and a signal processing method according to the present invention.

【図６】この発明による信号処理装置、信号処理方法の
考え方について説明するための図である。FIG. 6 is a diagram for explaining the concept of a signal processing device and a signal processing method according to the present invention.

【図７】この発明による信号処理装置、信号処理方法の
一実施の形態が適用された信号処理装置を説明するため
のブロック図である。FIG. 7 is a block diagram for explaining a signal processing device to which an embodiment of a signal processing device and a signal processing method according to the present invention is applied;

【図８】図７に示した信号処理装置の符号化部を説明す
るためのブロック図である。FIG. 8 is a block diagram illustrating an encoding unit of the signal processing device illustrated in FIG. 7;

【図９】符号化の処理単位となるブロックのブロック長
（ブロックサイズモード）を説明するための図である。FIG. 9 is a diagram for explaining a block length (block size mode) of a block serving as an encoding processing unit.

【図１０】符号化データのフォーマットの一例を説明す
るための図である。FIG. 10 is a diagram illustrating an example of a format of encoded data.

【図１１】符号化データのフォーマットについて説明す
るための図である。FIG. 11 is a diagram for describing a format of encoded data.

【図１２】図７に示した信号処理装置の復号化部を説明
するためのブロック図である。12 is a block diagram for explaining a decoding unit of the signal processing device shown in FIG.

【図１３】図１２に示した各逆直交変換部を説明するた
めのブロック図である。FIG. 13 is a block diagram for explaining each inverse orthogonal transform unit shown in FIG.

【図１４】図１３に示した逆直交変換部における処理を
説明するためのフローチャートである。FIG. 14 is a flowchart illustrating a process in an inverse orthogonal transform unit illustrated in FIG. 13;

【図１５】修正後比率Ａ１’Ａ２’、スケールファクタ
値の最大値Ｆ’の変換表の一例を説明するための図であ
る。FIG. 15 is a diagram for explaining an example of a conversion table of a corrected ratio A1′A2 ′ and a maximum value F ′ of a scale factor value.

【図１６】修正後比率Ａ１’Ａ２’、スケールファクタ
値の最大値Ｆ’の変換表の他の一例を説明するための図
である。FIG. 16 is a diagram for explaining another example of the conversion table of the corrected ratio A1′A2 ′ and the maximum value F ′ of the scale factor value.

【図１７】直交変換について説明するための図である。FIG. 17 is a diagram for describing orthogonal transformation.

【図１８】逆直交変換について説明するための図であ
る。FIG. 18 is a diagram for describing inverse orthogonal transform.

【図１９】符号化されたデジタルデータの合成処理を説
明するための図である。FIG. 19 is a diagram for explaining a process of synthesizing encoded digital data.

【図２０】符号化されたデジタルデータの合成処理の他
の例を説明するための図である。FIG. 20 is a diagram for explaining another example of a process of synthesizing encoded digital data.

【符号の説明】[Explanation of symbols]

１…アナログ入力端子、２…Ａ／Ｄ変換部、３…デジタ
ル入力端子、４…符号化部、５…復号化部、６…Ｄ／Ａ
変換部、７…アナログ出力端子、８…読み出し／書き込
み部、９…符号化データ蓄積部、２０…制御部、２１…
ＣＰＵ、２２…ＲＯＭ、２３…ＲＡＭ、３１…キー操作
部、３２…表示部、５１１、５２１…入力端子、５１
２、５２２…スペクトルデータ抽出部、５１３、５２３
…正規化データ抽出部、５１４、５２４…乗算器、５１
５、５２５…修正値算出部、５１６、５２６…乗算器、
５３１…最大値検出部、５３２…比較部、５３３…加算
器、５３４…逆直交変換部、５３５…乗算器DESCRIPTION OF SYMBOLS 1 ... Analog input terminal, 2 ... A / D conversion part, 3 ... Digital input terminal, 4 ... Encoding part, 5 ... Decoding part, 6 ... D / A
Conversion unit, 7: analog output terminal, 8: read / write unit, 9: encoded data storage unit, 20: control unit, 21 ...
CPU, 22 ROM, 23 RAM, 31 key operation unit, 32 display unit, 511, 521 input terminal, 51
2, 522... Spectrum data extraction unit, 513, 523
... Normalized data extraction units, 514, 524 ... Multipliers, 51
5, 525: correction value calculation unit, 516, 526: multiplier,
531: maximum value detection unit, 532: comparison unit, 533: adder, 534: inverse orthogonal transformation unit, 535: multiplier

フロントページの続き (51)Int.Cl.⁷ 識別記号 ＦＩ テーマコート゛(参考） Ｈ０４Ｎ 7/30 Ｈ０４Ｎ 7/133 Ｚ (72)発明者 山内 康晴 東京都品川区北品川６丁目７番35号 ソニ ー株式会社内 Ｆターム(参考） 5C059 KK13 MA23 MA31 MC06 MC11 SS13 UA05 UA12 UA13 UA14 5D044 AB05 AB07 BC03 CC06 FG23 FG30 GK08 5D045 DA20 5J064 AA01 AA03 BA16 BC00 BC01 BC06 BC07 BC08 BC09 BC11 BC16 BC29 BD02 BD03 BD04Continued on the front page (51) Int.Cl. ⁷ Identification symbol FI Theme coat II (Reference) H04N 7/30 H04N 7/133 Z (72) Inventor Yasuharu Yamauchi 6-7-35 Kitashinagawa, Shinagawa-ku, Tokyo Sony F term in reference (reference)

Claims (4)

【特許請求の範囲】[Claims] 【請求項１】デジタル信号を直交変換するとともに、所
定の正規化情報を用いて正規化を行なうことにより高能
率符号化された高能率符号化信号が複数チャンネル入力
され、入力された上記複数チャンネルの高能率符号化信
号を合成する信号処理装置であって、 上記複数チャンネルの高能率符号化信号のそれぞれか
ら、正規化に用いられた正規化情報を抽出する正規化情
報抽出手段と、 上記複数チャンネルの高能率符号化信号のそれぞれか
ら、スペクトルデータを抽出するスペクトルデータ抽出
手段と、 上記正規化情報抽出手段にて抽出された上記複数チャン
ネルのそれぞれに対応する上記正規化情報の中から最大
値を検出する最大値検出手段と、 上記最大値検出手段にて検出された上記最大値に基づい
て、上記複数チャンネルのそれぞれに対応する上記スペ
クトルデータを再正規化するようにする再正規化手段
と、 上記再正規化手段からの上記複数チャンネルのそれぞれ
に対応する再正規化結果と上記複数チャンネルのそれぞ
れに対応する係数とを乗算する乗算手段と、 上記乗算手段での上記複数チャンネルのそれぞれについ
ての乗算結果を加算する加算手段と、 上記加算手段からの加算結果を周波数軸データから時間
軸データに逆変換する逆変換手段と、 上記逆変換手段からの出力信号と、上記最大値検出手段
にて検出された上記正規化情報の最大値に基づいて復号
する復号手段とを備えてなる信号処理装置。1. A high efficiency coded signal, which is obtained by orthogonally transforming a digital signal and performing normalization using predetermined normalization information, is input to a plurality of channels, and the input plurality of channels is input. A signal processing device for synthesizing the highly efficient coded signals of: a normalization information extracting means for extracting normalization information used for normalization from each of the plurality of high efficiency coded signals; Spectrum data extracting means for extracting spectrum data from each of the high-efficiency coded signals of the channels; and a maximum value from among the normalized information corresponding to each of the plurality of channels extracted by the normalized information extracting means. Maximum value detection means for detecting the maximum value detected by the maximum value detection means, each of the plurality of channels Re-normalization means for re-normalizing the spectrum data corresponding to the re-normalization result corresponding to each of the plurality of channels from the re-normalization means, and a coefficient corresponding to each of the plurality of channels. Multiplying means, multiplying means, adding means for adding the multiplication results for each of the plurality of channels, and inverting means for inversely converting the addition result from the adding means from frequency axis data to time axis data. And a decoding means for decoding based on the output signal from the inverse conversion means and the maximum value of the normalized information detected by the maximum value detection means. 【請求項２】請求項１に記載の信号処理装置であって、 上記再正規化手段は、 上記正規化情報抽出手段により抽出された各チャンネル
の正規化情報のそれぞれについての上記最大値検出手段
により検出された正規化情報の上記最大値に対する割合
を算出する割合算出手段と、 上記スペクトルデータ抽出手段により抽出された各チャ
ンネルのスペクトルデータと、上記割合算出手段により
算出された割合とを乗算することにより、各チャンネル
毎のスペクトルデータを修正する修正手段とからなるこ
とを特徴とする信号処理装置。2. The signal processing apparatus according to claim 1, wherein said re-normalization means comprises: said maximum value detection means for each of the normalization information of each channel extracted by said normalization information extraction means. Multiplying the spectrum data of each channel extracted by the spectrum data extraction means by the ratio calculated by the ratio calculation means, A signal processing device for correcting the spectrum data of each channel. 【請求項３】デジタル信号を直交変換するとともに、所
定の正規化情報を用いて正規化を行なうことにより高能
率符号化された高能率符号化信号が複数チャンネル入力
され、入力された上記複数チャンネルの高能率符号化信
号を合成する信号処理方法であって、 上記複数チャンネルの高能率符号化信号のそれぞれか
ら、正規化に用いられた正規化情報を抽出する正規化情
報抽出工程と、 上記複数チャンネルの高能率符号化信号のそれぞれか
ら、スペクトルデータを抽出するスペクトルデータ抽出
工程と、 上記正規化情報抽出工程において抽出した上記複数チャ
ンネルのそれぞれに対応する上記正規化情報の中から最
大値を検出する最大値検出工程と、 上記最大値検出工程において検出した上記最大値に基づ
いて、上記複数チャンネルのそれぞれに対応する上記ス
ペクトルデータを再正規化するようにする再正規化工程
と、 上記再正規化工程からの上記複数チャンネルのそれぞれ
に対応する再正規化結果と上記複数チャンネルのそれぞ
れに対応する係数とを乗算する乗算工程と、 上記第乗算工程においての上記複数チャンネルのそれぞ
れについての乗算結果を加算する加算工程と、 上記加算工程においての加算結果を周波数軸データから
時間軸データに逆変換する逆変換工程と、 上記逆変換工程において逆変換の結果得られた信号と、
上記最大値検出工程において検出した上記正規化情報の
最大値に基づいて復号する復号工程とからなる信号処理
方法。3. A highly efficient coded signal, which is obtained by orthogonally transforming a digital signal and performing normalization using predetermined normalization information, is inputted to a plurality of channels, and the inputted plurality of channels are inputted. A signal processing method for synthesizing the high-efficiency coded signals of: a normalization information extraction step of extracting normalization information used for normalization from each of the plurality of high-efficiency coded signals; A spectrum data extracting step of extracting spectrum data from each of the highly efficient coded signals of the channels, and a maximum value is detected from the normalized information corresponding to each of the plurality of channels extracted in the normalized information extracting step A maximum value detection step to perform, based on the maximum value detected in the maximum value detection step, A re-normalization step for re-normalizing the corresponding spectral data, a re-normalization result corresponding to each of the plurality of channels from the re-normalization step, and a re-normalization result corresponding to each of the plurality of channels. A multiplication step of multiplying by a coefficient; an addition step of adding the multiplication results of the plurality of channels in the multiplication step; and an inverse conversion of the addition result in the addition step from frequency axis data to time axis data. An inverse transformation step, a signal obtained as a result of the inverse transformation in the inverse transformation step,
A decoding step of decoding based on the maximum value of the normalized information detected in the maximum value detecting step. 【請求項４】請求項３に記載の信号処理方法であって、 上記再正規化工程は、 上記正規化情報抽出工程において抽出した各チャンネル
の正規化情報のそれぞれについての、上記最大値検出手
段により検出した正規化情報の最大値に対する割合を算
出する割合算出工程と、 上記スペクトルデータ抽出工程において抽出した各チャ
ンネルのスペクトルデータと、上記割合算出手段により
算出した割合とを乗算することにより、各チャンネル毎
のスペクトルデータを修正する修正工程とからなること
を特徴とする信号処理方法。4. The signal processing method according to claim 3, wherein said re-normalization step comprises: said maximum value detection means for each of the normalization information of each channel extracted in said normalization information extraction step. A ratio calculation step of calculating a ratio to the maximum value of the normalized information detected by the above, by multiplying the spectrum data of each channel extracted in the spectrum data extraction step by the ratio calculated by the ratio calculation means, A signal processing method for correcting spectrum data for each channel.