JPH08237135A

JPH08237135A - 符号化データ復号装置およびそれを用いた画像オーディオ多重化データ復号装置

Info

Publication number: JPH08237135A
Application number: JP30365395A
Authority: JP
Inventors: Hiroyuki Fukuchi; 弘行福地
Original assignee: Nippon Steel Corp
Current assignee: Nippon Steel Corp
Priority date: 1994-10-28
Filing date: 1995-10-27
Publication date: 1996-09-13

Abstract

(57)【要約】【課題】オーディオデータの高速再生を簡単な回路構
成で実現する。【解決手段】各帯域毎に伝送されたフローティング係
数４４と、入力端子２３を介して設定されたスレッショ
ルド値と、入力端子２４を介して設定された周波数帯域
とに基づいて、現在のデータフレームを復号再生するか
否かを符号化データのレベルを表すフローティング係数
に応じて決定する復号制御回路１３を設け、入力端子２
１より順次入力される一連のデータフレームのうち、フ
ローティング係数値がスレッショルド値を越えるフレー
ムのみを復号するようにすることにより、音声信号が含
まれる周波数帯域を設定することで、音声信号が含まれ
るオーディオデータのみを高速に復号して良質の音声信
号を再生することができるようにするとともに、その高
速再生の際、上記符号化データのレベルをフローティン
グ係数から容易に判定できるようにして回路構成を簡単
にできるようにする。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は符号化データ復号装
置、およびそれを用いた画像オーディオ多重化データ復
号装置に関し、特に、伝送あるいは記録媒体への記録の
ために圧縮されたオーディオデータを再生するために伸
張するのに好適な符号化データ復号装置、およびそれを
用いた画像オーディオ多重化データ復号装置に関する。

【０００２】

【従来の技術】従来、オーディオあるいは音声等の信号
を高能率符号化（データ圧縮）するための手法は種々あ
るが、例えば、オーディオ信号等を複数の周波数帯域に
分割して符号化する帯域分割符号化方式（サブバンド符
号化方式）を挙げることができる。サブバンド符号化方
式の一例として、ＭＰＥＧオーディオ方式と呼ばれる国
際標準規格であるＩＳＯ／ＩＥＣ１１１７２−３の方
式がある。

【０００３】サブバンド符号化方式による符号化装置
は、例えば特願平６−２０４４４９号や特願平６−２０
４４５０号（対応米国特許０３／５１１，４４９号）に
開示されているように公知であるが、本願発明の理解の
ために図１０を参照して簡単に説明する。

【０００４】図１０において、入力端子４９に入力され
たディジタルオーディオ信号は、分割フィルタバンク回
路３０により、所定時間間隔毎に、その時間間隔（１フ
レームと言う）に含まれるオーディオ信号がサンプルさ
れる。そして、各フレームのオーディオ信号に含まれる
異なる周波数の信号成分を、複数の所定の周波数帯域に
区分して、区分した各周波数帯域の信号についてフロー
ティング処理回路３１、３２、３３、３４によりフロー
ティング処理を施す。

【０００５】ここで、フローティング処理とは、その後
の量子化回路による量子化処理の精度を高くするため
に、上記区分された各帯域の信号成分に共通の値をかけ
て、その値を大きくする処理である。例えば、各帯域に
含まれる信号成分の絶対値の最大のものを探し出し、こ
の最大値が飽和しない、すなわち“１”を越えない範囲
でなるべく大きな値とするようなフローティング係数を
用いてフローティング処理を行う。表１に、前記ＩＳＯ
／ＩＥＣ１１１７２−３の方式で使用されるフローテ
ィング係数の一例を示す。

【０００６】

【表１】

【０００７】図１０の符号化装置では、表１のフローテ
ィング係数の中から適当な値を用いてフローティング処
理が行われる。例えば、ある周波数帯域に含まれる信号
成分の最大の絶対値が 0.75 の場合、表１のフローティ
ング係数の中の１つで、その逆数を 0.75 に乗じた値が
“１”を越えない範囲で最大となるようなもの、すなわ
ち 0.79370052598410 をフローティング係数として用い
る。使用するフローティング係数は、装置内においては
対応するインデックス４により代表される。

【０００８】入力端子４９からの入力信号とフローティ
ング処理回路３１〜３４からのフローティング係数は、
信号特性算出回路４０へも入力され、この信号特性算出
回路４０において信号特性が算出され、これが適応的ビ
ット割り当て回路４１へと入力される。この信号特性と
しては、例えば、各帯域の信号のエネルギの大きさが利
用される。

【０００９】適応的ビット割り当て回路４１では、この
信号特性を用いて各周波数帯域毎のビット割当数が決定
され、各量子化回路３５、３６、３７、３８に対してビ
ット長情報が出力される。各量子化回路３５〜３８で
は、各帯域毎に適応的なビット長で量子化が行なわれ
る。そして、量子化されたオーディオデータ、フローテ
ィング係数およびビット長情報がマルチプレックス回路
３９において多重化されて、符号化データとして出力端
子５０より出力される。以上の処理は、一定長のサンプ
ルから構成されるフレーム単位で行なわれる。

【００１０】次に、サブバンド符号化方式による従来の
復号装置の一例を、図１１を用いて説明する。多重化さ
れた符号化データは、入力端子２１を介してデマルチプ
レクス回路１へと入力される。デマルチプレクス回路１
は、入力された符号化データを複数の周波数帯域毎に区
分された帯域毎のオーディオデータとヘッダ情報とに分
離し、ヘッダ情報をヘッダ情報復号回路１２へ、各帯域
毎のオーディオデータを逆量子化回路２、３、４、５へ
と出力する。

【００１１】逆量子化回路２〜５では、各帯域毎に逆量
子化処理を行ない、逆フローティング処理回路６、７、
８、９へとデータを出力する。逆フローティング処理回
路６〜９では、逆量子化された各帯域毎のデータに対し
て逆フローティング処理を行ない、合成フィルタバンク
回路１０へと出力する。合成フィルタバンク回路１０で
は、各帯域毎の信号から１つの信号を合成して出力す
る。

【００１２】また、上述のヘッダ情報復号回路１２で
は、帯域毎のヘッダ情報を逆量子化処理で必要となる各
帯域毎のビット長情報と逆フローティング処理で必要と
なる各帯域毎のフローティング係数とに分離復号し、ビ
ット長情報を逆量子化回路２、３、４、５へ、フローテ
ィング係数を逆フローティング処理回路６、７、８、９
へと出力する。各帯域毎に伝送されるフローティング係
数は、上述のようにある固定された表１の中のインデッ
クス値となっているので、この表１をもとに実際に用い
られたフローティング係数を復号する。

【００１３】通常の復号処理の場合には、上記合成フィ
ルタバンク回路１０からの出力信号がスイッチ回路２０
で選択され、ディジタルオーディオ信号として出力端子
２２から出力される。

【００１４】ところで、オーディオ符号化技術の応用例
の一つにディジタルＶＴＲが挙げられる。ディジタルＶ
ＴＲでは、通常のＶＴＲと同様に早送り再生（高速再
生）機能を実現させる必要がある。早送り再生の実現方
法として、オーディオデータを例えば２倍の速度で復号
する場合について述べる。

【００１５】この場合、通常の２倍の速度で符号化デー
タを入力端子２１から復号装置へと入力すると共に、デ
マルチプレックス回路１、逆量子化回路２〜５、逆フロ
ーティング処理回路６〜９、合成フィルタバンク回路１
０およびヘッダ情報復号回路１２を通常の２倍の速度で
動作させ、合成フィルタバンク回路１０から２倍の復号
データを出力させる。

【００１６】そして、この合成フィルタバンク回路１０
からの出力データを周波数シフト回路１８において周波
数シフトさせる。これは、データが２倍に増えたことに
より周波数が全体的に２倍になり、例えば人の声などが
通常より高い声になるのを防ぐために行なうものであ
る。

【００１７】周波数シフト回路１８の出力は、サブサン
プル回路１９により１／２に間引かれ、通常のデータと
同じ長さにされてからスイッチ回路２０へと出力され
る。そして、このサブサンプル回路１９の出力信号がス
イッチ回路２０を介して出力端子２２から出力される。

【００１８】

【発明が解決しようとする課題】しかしながら、上述の
復号装置では、早送り再生を行うために周波数シフト回
路１８及びサブサンプル回路１９を設けることが必要で
あるが、この周波数シフト回路１８は、各信号成分の周
波数を例えば１／２にするために各信号成分の周波数に
よりシフトすべき周波数が異なるため、大規模な回路構
成となるという問題があった。

【００１９】また、Ｍ倍の速度で早送り再生させる場合
には、デマルチプレクス回路１、逆量子化回路２〜５、
逆フローティング処理回路６〜９、合成フィルタバンク
回路１０およびヘッダ情報復号回路１２をＭ倍の速度で
動作させる必要があり、回路構成がたいへん複雑になる
という問題もあった。

【００２０】さらに、特に人の声を再生する場合には、
再生された音は、周波数のずれは抑制されているもの
の、テンポが早くなっており、たいへん聞きづらいもの
となってしまうという問題もあった。

【００２１】本発明の第１の目的は、音声や一般オーデ
ィオ信号の符号化されたデータの高速再生を簡単な回路
構成で実現できるような符号化データ復号装置を提供す
ることである。

【００２２】また、本発明の第２の目的は、上記の符号
化データ復号装置を用いて、符号化画像データと符号化
オーディオデータとの多重化データを復号して高速再生
するとき、音声の記録されている部分を容易に探し出す
ことのできる画像オーディオ多重化データ復号装置を提
供することである。

【００２３】

【課題を解決するための手段】本発明の符号化データ復
号装置は、一連の符号化されたデータフレームを順次受
け取り処理する回路であって、上記一連のデータフレー
ムの各々は、複数の所定の周波数帯域に分けられた複数
の多重化帯域データを含み、各多重化帯域データは対応
する周波数帯域に属する符号化された情報データと、そ
の符号化された情報データの符号化に用いられた処理デ
ータとを含んでおり、上記符号化された情報データと上
記処理データとを互いに分離するように各データフレー
ムを処理する回路からなる分離手段と、上記周波数帯域
の各々において、上記符号化された情報データを、その
情報データから分離された上記処理データを用いて復号
する復号手段と、上記各データフレームを復号すべきか
否かを、該当するデータフレームに含まれる上記周波数
帯域から選択された少なくとも１つの帯域に属する上記
符号化された情報データのレベルに基づいて決定する決
定手段、または上記一連の符号化されたデータフレーム
の中の選択されたフレームのみを復号するように、処理
すべきフレームを選択するフレーム選択手段の少なくと
も一方の手段とを備えることを特徴とする。

【００２４】本発明の符号化データ復号装置は、上記各
データフレームを復号すべきか否かを、該当するデータ
フレームに含まれる複数の周波数帯域から選択された少
なくとも１つの帯域に属する符号化された情報データの
レベルに基づいて決定するようにした場合は、音声信号
が含まれる周波数帯域を選択することにより、高速再生
において良質の音声信号を再生することができる。ま
た、好ましい実施形態において、この情報データのレベ
ルは、符号化データを得る際に用いたフローティング係
数を用いることにより容易に判定できるので、回路構成
を簡単にすることができる。

【００２５】一方、一連の符号化されたデータフレーム
の中の選択されたフレームのみを復号するようにした場
合には、音楽のように有音部分が連続して存在する場合
の高速再生において、一定速度の再生音を得ることが可
能となる。

【００２６】また、本発明の画像オーディオ多重化デー
タ復号装置は、一連の符号化されたデータフレームを順
次受け取り、少なくとも１フレームを保持する蓄積手段
であって、上記各データフレームが符号化され多重化さ
れた画像データとオーディオデータとを含む蓄積手段
と、上記蓄積手段に保持されたデータフレームを制御さ
れた速度で読み出すことのできる読み出し手段と、上記
読み出し手段により読み出した上記データフレームに含
まれる上記符号化画像データと上記符号化オーディオデ
ータとを互いに分離する分離手段と、上記分離された符
号化画像データを復号する画像復号手段と、上記分離さ
れた符号化オーディオデータを一時的に記憶するオーデ
ィオデータバッファ手段と、上記オーディオデータバッ
ファ手段に記憶されている上記符号化オーディオデータ
を読み出して復号するオーディオ復号手段と、上記オー
ディオデータバッファ手段に記憶されているオーディオ
データの量を監視する監視手段と、上記監視手段により
監視される上記オーディオデータバッファ手段に記憶さ
れているオーディオデータの量の変化に応じて上記読み
出し手段による上記データフレームの読み出し速度を制
御する制御手段とを備えることを特徴とし、好ましく
は、上記オーディオ復号手段として、上述した請求項１
〜７の何れかの符号化データ復号装置を用いる。

【００２７】本発明の画像オーディオ多重化データ復号
装置は、高速再生において、オーディオデータの再生速
度に応じて、画像データの再生速度を制御することがで
きるようになるので、画像およびオーディオの高速再生
において所望部分を容易に探すことができる。

【００２８】

【発明の実施の形態】本発明の第１の実施形態による符
号化されたオーディオデータの復号装置を、図１を参照
して説明する。本実施形態によるオーディオデータ復号
装置は、図１０を参照して説明したオーディオデータ符
号化装置を用いて得られた、オーディオＰＣＭ信号のよ
うなデジタル信号が圧縮符号化されたデータを復号する
ためのものである。

【００２９】図１に示すように、入力端子２１に符号化
されたオーディオデータが入力される。符号化オーディ
オデータは、それを所定の時間間隔で分割して得られる
一連のデータフレームからなる。デマルチプレクス回路
１は、入力された符号化オーディオデータを前記所定の
時間間隔毎に１フレームのデータをサンプルしてバッフ
ァ１Ａに保持する。バッファ１Ａは、少なくとも２つ以
上のフレームを保持する領域を持つ。

【００３０】各フレームのデータは、図１０を参照した
従来装置の説明で述べたように、原オーディオ信号の１
フレームに含まれる各種異なる周波数成分のオーディオ
信号を複数（例えば３２）の所定周波数帯域に区分し、
各周波数帯域の信号成分についてフローティング処理及
び量子化処理を施して得られる符号化されたオーディオ
データと、前記フローティング処理及び量子化処理に用
いられたフローティング係数及びビット長情報のような
処理データを示すヘッダ情報とを含む。

【００３１】デマルチプレクス回路１は、バッファ１Ａ
に保持されている複数のデータフレームを順次読み出
し、各フレームのデータから各周波数帯域毎のオーディ
オデータと処理データ（ヘッダ情報）とを分離して、オ
ーディオデータは逆量子化回路２、３、４、５の対応す
る１つに、ヘッダ情報４２はヘッダ情報復号回路１２に
供給する。

【００３２】ヘッダ情報復号回路１２は、受け取ったヘ
ッダ情報４２を復号して各周波数帯域毎のビット長情報
４３およびフローティング係数４４を求め、各周波数帯
域のビット長情報４３を逆量子化回路２〜５の対応する
１つに、フローティング係数４４を復号制御回路１３お
よび逆フローティング処理回路６〜９の対応する１つに
供給する。

【００３３】逆量子化回路２〜５は、受け取った各周波
数帯域のオーディオデータをビット長情報４３により逆
量子化し、逆フローティング処理回路６〜９は、逆量子
化された各周波数帯域のオーディオ信号に対し、与えら
れたフローティング係数４４を用いて逆フローティング
処理を施す。これにより得られた各周波数帯域の信号
は、合成フィルタバンク回路１０により合成されて、復
号デジタルオーディオ信号として出力端子２２を介して
出力される。以上の動作は、従来の復号回路の場合と同
じであるので、各処理の詳細な説明は省略する。

【００３４】本発明の第１の実施形態において特徴とす
るのは、高速再生において入力される符号化オーディオ
データの中で、音声信号のような所望の信号のみを選択
して復号再生するために、フローティング係数を用いて
復号処理を制御する復号制御回路１３を設けたことであ
る。

【００３５】上記復号制御回路１３は、各帯域毎に伝送
されたフローティング係数４４と、スレッショルド値入
力端子２３を介して設定されたスレッショルド値と、帯
域入力端子２４を介して設定された周波数帯域とに基づ
いて、現在処理しているフレームのオーディオデータを
復号再生するか否かを決定する。すなわち、フローティ
ング係数は、各帯域内のデータの最大絶対値のレベルに
よって決められるので、フローティング係数は各帯域の
データの最大絶対値のレベルを示している。

【００３６】例えば、符号化オーディオデータの中で、
音声信号を含む部分のみを復号再生したい場合、音声信
号の通常の周波数範囲に含まれる１つまたは複数の周波
数帯域を、上記帯域入力端子２４からの信号により設定
する。また、その設定された帯域に音声信号が含まれて
いる場合、音声信号の絶対値は他の無音声信号の絶対値
に比べて大きいので、音声信号の絶対値の通常のレベル
に対応するスレッショルド値をスレッショルド値入力端
子２３からの信号により設定する。

【００３７】複数の帯域が設定された場合、復号制御回
路１３は、設定された各帯域のそれぞれのフローティン
グ係数の最大値を検出して、その検出した最大のフロー
ティング係数とスレッショルド値とを比較する。そし
て、この比較の結果、設定されたスレッショルド値より
もフローティング係数の方が大きい場合は、現在処理し
ているフレームの設定された帯域のデータは音声信号を
含むと判断して、デマルチプレクス回路１に与える次フ
レーム読み出し制御信号２６をＯＮにする。このとき、
デマルチプレクス回路１は、現在処理しているフレーム
の復号再生処理を継続するとともに、次のフレームのデ
ータをバッファ１Ａより読み出し、次のフレームの復号
処理を開始する。

【００３８】一方、設定された帯域の最大のフローティ
ング係数が設定されたスレッショルド値より大きくない
場合は、復号制御回路１３は、その帯域に音声信号が含
まれていないと判断して、デマルチプレクス回路１に与
える次フレーム読み出し制御信号２６をＯＦＦにする。
このとき、デマルチプレクス回路１は、現在処理してい
るフレームの復号再生処理を中断する。

【００３９】このように、本実施形態では、あらかじめ
設定されたスレッショルド値とあらかじめ設定された周
波数帯域のフローティング係数とを大小比較し、その比
較結果に応じて、あるフレームについて復号処理を行う
かどうかを決定するようにしたので、上記設定された周
波数帯域にエネルギが偏っているオーディオデータのみ
を選択的に取り出して高速再生を実現することができ、
ユーザが希望する性質を有するオーディオデータのみを
高速に探し出して再生することができるようになる。

【００４０】次に、図２を参照して本発明の第２の実施
形態による符号化データ復号装置について説明する。こ
の第２の実施形態は、基本的には第１の実施形態の構成
に対し、逆フローティング処理回路６〜９と合成フィル
タバンク回路１０との間に、復号制御回路１３により制
御されるミュート回路１１を更に設けたものである。

【００４１】図２に示す復号制御回路１３は、第１の実
施形態で示した図１の復号制御回路１３と実質的に同じ
機能を持つが、さらにミュート回路１１を制御するため
のミュート制御信号２７を出力する。このミュート制御
信号２７は、後述のように、合成フィルタバンク回路１
０に設けられているバッファ１０Ａの状態に応じてＯＮ
あるいはＯＦＦとなる。

【００４２】上記ミュート回路１１は、復号制御回路１
３から与えられるミュート制御信号２７により制御さ
れ、ミュート制御信号２７がＯＮのときは、逆フローテ
ィング処理回路６〜９から与えられる各帯域の信号をそ
のまま合成フィルタバンク回路１０へと出力する。ま
た、ミュート制御信号２７がＯＦＦのときは、逆フロー
ティング処理回路６〜９から与えられる各帯域の信号を
全てゼロ信号にして合成フィルタバンク回路１０へと出
力する。第２の実施形態のその他の動作は、第１の実施
形態の場合と同じである。

【００４３】次に、第２の実施形態における復号処理を
図４および図５のフローチャートを参照して説明する。
通常の再生速度における復号処理を行う場合は、全ての
フレームを復号する。図４は、通常再生時における復号
処理を示すフローチャートである。

【００４４】図４において、まずステップＳ１で、復号
制御回路１３は、次フレーム読み出し制御信号２６をＯ
Ｎにする。デマルチプレクス回路１がこのＯＮにされた
次フレーム読み出し制御信号２６を受け取ると、デマル
チプレクス回路１は、ステップＳ２において次のフレー
ムの処理を開始する。

【００４５】次にステップＳ３で１フレーム分のデータ
を復号し、ステップＳ４でミュート制御信号２７をＯＮ
にしてオーディオデータの出力を行なう。この後、ステ
ップＳ１に戻り、次フレーム読み出し信号２６を再びＯ
Ｎにして、ステップＳ２から次フレームの復号を開始す
る。この動作は、後述する第３の実施形態における第２
の復号制御回路１４でも同様である。

【００４６】次に、図５に第２の実施形態におけるフロ
ーティング係数を用いた高速再生時の復号処理のフロー
チャートを示す。同図において、まずステップＳ１で、
復号制御回路１３は、次フレーム読み出し制御信号２６
をＯＮにする。デマルチプレクス回路１がこのＯＮにさ
れた次フレーム読み出し制御信号２６を受け取ると、デ
マルチプレクス回路１は、ステップＳ２において次のフ
レームの処理を開始する。

【００４７】次にステップＳ３で、デマルチプレクスさ
れたヘッダ情報がヘッダ情報復号回路１２へと入力さ
れ、ヘッダ情報の復号処理（読みとり処理）が行なわれ
る。復号されたヘッダ情報のうち、各帯域毎に伝送され
るフローティング係数は、復号制御回路１３に入力され
る。そして、ステップＳ４で、帯域入力端子２４を介し
て設定された帯域のみのフローティング係数のうちの最
大値が探索され、次のステップＳ５で、この探索された
フローティング係数の最大値とスレッショルド値入力端
子２３を介して設定されたスレッショルド値との大きさ
が比較される。

【００４８】この比較の結果、フローティング係数の最
大値がスレッショルド値より大きい場合には、復号制御
回路１３は、現在のフレームを復号することを決定し、
現在のフレームの処理を続行する。すなわち、ステップ
Ｓ６で１フレーム分のデータを復号し、ステップＳ７で
ミュート制御信号２７をＯＮにしてオーディオデータの
出力を行なう。この後、ステップＳ１に戻り、次フレー
ム読み出し信号を再びＯＮにして、ステップＳ２から次
フレームの復号を開始する。

【００４９】一方、上記ステップＳ５における比較の結
果、フローティング係数の最大値がスレッショルド値よ
り大きくない場合には、復号制御回路１３は、ステップ
Ｓ８で現在のフレームを復号しないことを決定し、次フ
レーム読み出し制御信号２６をＯＦＦにして現在のフレ
ームの処理を中断する。そして、ステップＳ９で合成フ
ィルタバンク回路１０内のバッファメモリ１０Ａのチェ
ックを行なう。

【００５０】合成フィルタバンク回路１０は、フレーム
処理のために入力用のバッファメモリ１０Ａを回路内部
に有している。このバッファメモリ１０Ａが空になるま
ではフィルタ処理を行なうことができ、合成した復号再
生信号を出力し続ける。すなわち、バッファメモリ１０
Ａの大きさは通常１フレームの長さに相当するデータ量
になっていて、現在のフレームを復号しないでスキップ
した場合でも、バッファメモリ１０Ａが空になる前に、
すなわち１フレーム分の時間内に、各帯域毎の逆フロー
ティング処理を施した次のフレームのデータをバッファ
メモリ１０Ａへと入力すれば、復号データを連続的に出
力できることになる。

【００５１】したがって、復号制御回路１３がミュート
回路１１へ与えるミュート制御信号２７をＯＦＦにする
のは、バッファメモリ１０Ａが空になったときだけであ
る（ステップＳ１１）。こうすることでいくつかのフレ
ームをスキップしながら連続的にオーディオデータを出
力し続けることが可能となる。また、バッファメモリ１
０Ａにデータがなくなった場合でも、ステップＳ１２の
ミュート処理により、聞きづらい音を発生しないように
制御している。なお、バッファメモリ１０Ａが空でない
ときは、ステップＳ１０でミュート制御信号２７をＯＮ
にする。

【００５２】上述のような合成フィルタバンク回路１０
内のバッファメモリ１０Ａのチェックに応じた処理が終
わると、ステップＳ１に戻り、デマルチプレクス回路１
に出力される次フレーム読み出し制御信号２６が再びＯ
Ｎにされる。デマルチプレクス回路１は、ＯＮにされた
次フレーム読み出し制御信号２６を受け取ると、現在復
号中のフレームの各帯域毎の信号情報を逆量子化回路２
〜５へと出力しないで次のフレームの読み出しを開始す
る。こうすることで現フレームがスキップされ、高速再
生が行なわれる。

【００５３】ここで、人の音声の原音信号を図７（Ａ）
に示す。また、この原音信号を符号化した後、表１に示
したフローティング係数のインデックス値２０をスレッ
ショルドとして高速再生を行なった結果を図７（Ｂ）に
示す。図７（Ｂ）では、図７（Ａ）中の断続する音声間
の無音部分が削られて、音声の有音部分だけが出力され
ている。また、出力された有音部分は、部分的に原音と
同じ波形となっていることが分かる。

【００５４】以上説明したフローティング係数を用いた
高速再生の復号処理は、特に人の音声のように有音部分
と無音部分とがはっきりと区別され、有音部分が断続的
に現れる信号を復号する場合に有効となるものである。

【００５５】次に、本発明の第３の実施形態による符号
化データ復号装置について、図３を参照して説明する。
この第３の実施形態は、第２の実施形態にさらに、第２
の復号制御回路１４、カウンタ回路１５、スイッチ１
６、１７を付加的に設けたものである。図３に示す第１
の復号制御回路１３は、図２に示した復号制御回路１３
と機能的に同じものである。

【００５６】この第３の実施形態は、音楽のように有音
部分が連続して存在し、第１および第２の実施形態での
高速再生が適さないような場合に、入力するオーディオ
信号の一連のフレームの中の一部フレームのみを復号再
生するのに適している。

【００５７】第２の復号制御回路１４には、フレームレ
ート入力端子２５から、入力される全フレーム数に対す
る復号再生するフレーム数の割合を示す再生フレームレ
ートが与えられる。また、デマルチプレクス回路１で処
理するフレーム数がカウンタ回路１５によりカウントさ
れ、そのフレームカウント数も第２の復号制御回路１４
に与えられる。

【００５８】第２の復号制御回路１４は、カウンタ回路
１５から入力されたフレームカウント数と、フレームレ
ート入力端子２５から入力された再生フレームレートと
に基づいて、後述のようにして次フレーム読み出し制御
信号２６をＯＮまたはＯＦＦにする信号を発生する。ま
た、第１の復号制御回路１３と同様に、合成フィルタバ
ンク回路１０の内のバッファ１０Ａの状態に応じて、ミ
ュート制御信号２７をＯＮまたはＯＦＦにする信号を発
生する。

【００５９】次フレーム読み出し制御信号２６のＯＮ／
ＯＦＦおよびミュート制御信号２７のＯＮ／ＯＦＦを第
１の復号制御回路１３により制御するか、あるいは第２
の復号制御回路１４により制御するかの切り換えは、ス
イッチ１６、１７によって行う。スイッチ１６、１７
は、入力端子４８を介して使用者が入力する切り換え信
号により並列的に切り換えられる。

【００６０】次に、この第３の実施形態によりフレーム
カウント数を用いて行う高速再生時の復号処理、すなわ
ち、図３において、次フレーム読み出し制御信号２６お
よびミュート制御信号２７のＯＮ／ＯＦＦを第２の復号
制御回路１４を用いて制御するようにスイッチ１６、１
７を切り換えた場合の動作を、図６のフローチャートに
より説明する。

【００６１】図６において、まずステップＳ１で、第２
の復号制御回路１４は、次フレーム読み出し制御信号２
６をＯＮにする。デマルチプレクス回路１がこのＯＮに
された次フレーム読み出し制御信号２６をスイッチ１６
を介して受け取ると、デマルチプレクス回路１は、ステ
ップＳ２において次のフレームの処理を開始する。

【００６２】次にステップＳ３で、カウンタ回路１５が
このときフレーム数を１だけカウントアップする。この
カウンタ回路１５でカウントされたフレーム数は、第２
の復号制御回路１４へと入力される。また、第２の復号
制御回路１４には、フレームレート入力端子２５を介し
て再生フレームレートも入力される。第２の復号制御回
路１４は、これらのフレームカウント数と再生フレーム
レートとに基づいて、現在のフレームを復号するかどう
かを決定する。

【００６３】すなわち、再生フレームレートがｍ／ｎ
（ｎは一定の整数、ｍはｎフレームの中の再生すべきフ
レームの数で、ｎ＞ｍ）である場合には、ステップＳ４
で、フレームカウント数をｎで割った剰余がｍより小さ
いかどうかを判定する。そして、この剰余がｍより小さ
い場合には、第２の復号制御回路１４は現在のフレーム
を復号することを決定し、次フレーム読み出し制御信号
２６をＯＮにして現在のフレームの処理を続行する。す
なわち、ステップＳ５で１フレーム分のデータを復号
し、ステップＳ６でミュート制御信号２７をＯＮにして
これをスイッチ１７を介してミュート回路１１に与え、
復号したオーディオデータの出力を行う。

【００６４】この後、ステップＳ１に戻り、次フレーム
読み出し制御信号２６を再びＯＮにして、ステップＳ２
から次フレームの復号を開始する。なお、図６中にある
上記ステップＳ４の modという記号は、正式にはmodulu
s と書き、剰余計算を示している。

【００６５】一方、上記ステップＳ４において剰余がｍ
以上となる場合には、第２の復号制御回路１４は、ステ
ップＳ７で現在のフレームを復号しないことを決定し、
次フレーム読み出し制御信号２６をＯＦＦにして現在の
フレームの処理を中断する。そして、ステップＳ８で合
成フィルタバンク回路１０内のバッファメモリ１０Ａの
チェックを行なう。

【００６６】上述したフローティング係数による高速再
生復号制御の場合と同様に、第２の復号制御回路１４
は、バッファメモリ１０Ａが空になったときだけ、ステ
ップＳ１０でミュート回路１１へのミュート制御信号２
７をＯＦＦにする。また、ステップＳ１１では、ミュー
ト処理により、聞きづらい音が発生しないように制御す
る。なお、バッファメモリ１０Ａが空でないときは、ス
テップＳ９でミュート制御信号２７をＯＮにする。

【００６７】上述のような合成フィルタバンク回路１０
内のバッファメモリ１０Ａのチェックに応じた処理が終
わると、ステップＳ１に戻り、デマルチプレクス回路１
への次フレーム読み出し制御信号２６を再びＯＮにす
る。デマルチプレクス回路１は、次フレーム読み出し制
御信号２６がＯＮになると、現在復号中のフレームの各
帯域毎の信号情報を逆量子化回路２〜５へ出力せずに次
のフレームの読み出しを開始する。こうすることで現フ
レームがスキップされ、高速再生が行われる。

【００６８】ここで、音楽の原音信号の一例を図８
（Ａ）に示す。また、この原音信号を符号化した後、１
／２の再生フレームレートでフレームカウント数による
高速再生を行なった結果を図８（Ｂ）に示す。図８
（Ｂ）の波形は、フローティング係数による高速復号制
御と異なり無音部分も出力され、図８（Ａ）の波形を全
体的に時間軸方向に１／２に圧縮した形状になっている
のが分かる。フレームカウント数による高速再生におい
ては、この例の場合では１フレーム分のデータが１フレ
ームおきにスキップされ、復号されないことになるが、
十分に原音の内容が分かるものとなっている。

【００６９】上述のように、第１の復号制御回路１３お
よび第２の復号制御回路１４から出力される次フレーム
読み出し制御信号２６とミュート制御信号２７とのＯＮ
／ＯＦＦを制御する信号は、スイッチ１６、１７によっ
て選択可能となっている。人の音声を高速再生する場合
には、第１の復号制御回路１３の出力を使用者が選択
し、音楽などを高速再生する場合には、第２の復号制御
回路１４の出力を選択することで、再生する信号に適し
た高速再生を行なうことができる。

【００７０】以上の説明からも明らかなように、第３の
実施形態の符号化データ復号装置によれば、ヘッダ情報
４２中に含まれるフローティング係数４４、あるいは、
符号化データのフレームカウント数に基づいて、所定の
条件を満たす該当フレームに対して復号処理のスキップ
を適宜施すように構成したので、従来の方法と比べて簡
単な回路構成で符号化データの高速再生を実現すること
ができる。また、回路全体を高速に動作させなくても符
号化データの高速再生を実現することができる。

【００７１】さらに、例えば人の音声等の高速再生を行
なうときには、フローティング係数を用いた高速再生復
号制御を実行することにより、原音声の無音部分を削っ
て有音部分のみを高速に再生することができるととも
に、その再生音が原音声と比べて周波数的に変化しない
聞き易い出力を得ることができる。また、例えば音楽の
ように有音部分が連続するような音声を高速再生すると
きには、フレームカウント数による高速再生復号制御を
実行することにより、その音楽の内容を高速に聞くこと
ができる。

【００７２】次に、ＭＰＥＧなどの符号化技術を利用し
た従来の画像オーディオ多重化データ復号装置の一例を
図１２を用いて説明する。例えば、ＭＰＥＧ方式により
符号化された画像データおよびＭＰＥＧオーディオ方式
により符号化されたオーディオデータは、再生時に画像
とオーディオとで同期がとれているような形で多重化さ
れ、一連のデータフレームの形で送られる。蓄積回路５
１は、それを受け取って少なくとも１フレームを保持す
る。

【００７３】通常の再生の場合、上記蓄積回路５１に蓄
積されている多重化符号化画像データおよび符号化オー
ディオデータは、読みだし回路５２により読み出され、
画像／オーディオデータデマルチプレクス回路５３に送
られる。画像／オーディオデータデマルチプレクス回路
５３では、多重化されている符号化画像データおよび符
号化オーディオデータとが分離される。このとき分離さ
れた符号化画像データは画像用バッファ回路５４に送ら
れ、符号化オーディオデータはオーディオ用バッファ回
路５５に送られる。

【００７４】上記画像用バッファ回路５４に送られた符
号化画像データは、次に画像復号回路５６に送られて復
号処理が行われる。そして、この画像復号回路５６によ
り復号化された画像信号は、画像出力端子７１を介して
出力される。

【００７５】また、上記オーディオ用バッファ回路５５
に送られた符号化オーディオデータは、次にオーディオ
復号回路５７に送られて復号処理が行われる。そして、
このオーディオ復号回路５７により復号化されたオーデ
ィオ信号は、オーディオ出力端子７２を介して出力され
る。なお、上記の処理は、符号化データ復号装置の場合
と同様に、１フレームずつ行われる。

【００７６】ところで、以上のような画像オーディオ多
重化データの符号化・復号化技術の応用例の１つとし
て、ディジタルＶＴＲが挙げられる。ディジタルＶＴＲ
では、通常のＶＴＲと同様に、早送り再生（高速再生）
機能を実現することが望まれる。

【００７７】ここで、画像信号およびオーディオ信号の
早送り再生を実現するための方法の一例として、図１２
に示すように、あらかじめ設定された複数の読みだし速
度Ａ，Ｂ，Ｃの中から任意の速度をスイッチ回路６０で
選択し、選択した速度に応じて読みだし回路５２を制御
するという方法がある。

【００７８】すなわち、この方法では、あらかじめ設定
された読み出し速度Ａ，Ｂ，Ｃの中から適当な速度をス
イッチ回路６０で選択する。そして、その選択した速度
によって符号化画像データおよび符号化オーディオデー
タを蓄積回路５１から読み出し、その読み出し速度に合
わせて画像復号回路５６およびオーディオ復号回路５７
を動作させるようになされている。

【００７９】ところで、ユーザがディジタルＶＴＲに蓄
積されている情報を利用する際に、例えば、会議の様子
を記録してあるＶＴＲの中で出席者が発言した部分だけ
を参照したい場合などのように、オーディオ情報が記録
されている部分だけを選択して参照したいと思う場合が
ある。

【００８０】この場合、参照したい部分を探し出すため
に高速再生を利用することが多い。しかし、上記従来の
画像オーディオ多重化データ復号装置では、あらかじめ
設定された読み出し速度に合わせて画像と音声との再生
速度が決まるので、高速再生を指定したときには画像だ
けでなく音声も常に高速に再生される。このため、再生
された音声が非常に聞きづらいものとなる。そこで、高
速に再生される画像を見ながら参照したい部分を検索す
ることが行われていた。

【００８１】しかしながら、この方法では、再生された
画像に対応して発言者の音声が記録されているかどうか
を利用者が画像から予測して検索を行っているので、音
声が記録された部分を探し出すのが容易でなく、所望の
音声部分を探し出すための操作が面倒であるという問題
がある。

【００８２】また、音声をなんとか聞き取れるくらいの
速度で再生する場合であっても、利用者が必要とするオ
ーディオ情報が記録されている部分を参照するために
は、再生音を聞きながら検索を行い、求めている場所を
見つけた後に、通常の速度に戻して再生するようにしな
ければならない。このように、利用者が再生音を聞きな
がら検索を行い、所望の場所が見つかった後に再生速度
を変えるという操作を行う必要があり、操作が非常に面
倒であるという問題もある。

【００８３】上述のような問題は、本実施形態による画
像オーディオ多重化データ復号装置を用いることにより
解決される。以下、本実施形態による符号化データ復号
装置を用いた画像オーディオ多重化データ復号装置の一
実施形態を、図９を参照して説明する。

【００８４】図９中に示したオーディオ復号装置５７が
本実施形態による符号化データ復号装置であり、例えば
図１に示すような回路構成を持つ。また、画像復号回路
５６は、例えば特開平６−２６８９６９号公報や特開平
６−２７６４８５号公報により公知の装置を用いること
ができる。以下、オーディオ復号回路５７は、図１に示
す回路構成を持つものとして説明する。

【００８５】本実施形態の画像オーディオ多重化データ
復号装置において、通常の速度で再生を行う場合は、従
来の画像オーディオ多重化データ復号装置と同様の動作
を行う。よって、ここではその詳細な説明は省略する。

【００８６】また、高速再生を行う場合は、上述したよ
うに、図１に示したような回路構成のオーディオ復号回
路５７を使用することで、符号化オーディオデータ内の
オーディオ情報がある部分だけを選択し、高速再生を実
現することができる。

【００８７】いま、オーディオ復号回路５７において、
上述のような高速再生を行っている場合を考える。この
場合、高速再生時でもオーディオ情報が存在するフレー
ム、すなわち、フローティング係数が設定レベル以上を
示しているフレームについては、符号化オーディオデー
タを一時的に記憶するオーディオ用バッファ回路５５に
は通常再生時と同じデータ量が記憶される。

【００８８】ところが、オーディオ情報が存在せず、フ
ローティング係数が設定レベル以下を示しているフレー
ムについては、復号処理が行われず、符号化オーディオ
データが読み飛ばされるため、読み出し速度が速くな
り、オーディオ用バッファ回路５５に一時的に記憶され
るデータ量は、通常再生時よりも少なくなる。バッファ
量監視回路５８は、このようなデータ量の変化を監視
し、そのデータ量の変化を読みだし速度制御回路５９に
伝える。

【００８９】読みだし速度制御回路５９では、オーディ
オ用バッファ回路５５に一時的に記憶されているデータ
量が多いときには、多重化された符号化画像データおよ
び符号化オーディオデータを蓄積回路５１から読み出す
速度を遅くする。また、オーディオ用バッファ回路５５
に一時的に記憶されているデータ量が少ないときには、
符号化データを蓄積回路５１から読み出す速度を速くす
るように制御する。そして、このようにして設定した読
みだし速度を読みだし回路５２に伝える。

【００９０】以上の説明からも明らかなように、本実施
形態では、図１に示す回路構成のオーディオ復号回路５
７内に備えられた復号制御回路１３において、フローテ
ィング係数値の大きさに基づいて有音部分と無音部分と
を判別する。そして、有音部分を通常通り復号すること
によって通常の速度で再生するとともに、無音部分を復
号せずに読み飛ばすことにより高速に再生するようにし
ている。

【００９１】そして、オーディオ情報の有無に応じて各
フレーム毎に変化するオーディオ用バッファ回路５５内
のデータ量をバッファ量監視回路５８で監視し、そのデ
ータ量の変化に応じた読みだし速度となるように、読み
だし速度制御回路５９で制御するようにしている。これ
により、各フレーム内のオーディオ情報の有無に応じて
変化するオーディオデータの再生速度に合わせて画像デ
ータの再生速度を制御することができる。

【００９２】したがって、例えば、会議の様子を記録し
てあるＶＴＲの中で出席者が発言した部分だけを参照し
ようとする場合に、音声信号が記録されている部分を高
速に探し出し、音声信号が記録されている部分を見つけ
たら、その音声部分に対応する画像およびオーディオの
再生速度を自動的に通常速度に戻すようにすることがで
きる。これにより、音声信号が存在する部分を探し出し
て再生するための操作を著しく簡単にすることができ
る。

【００９３】以上説明したように、本実施形態の画像オ
ーディオ多重化データ復号装置によれば、符号化オーデ
ィオデータを一時的に記憶するためのオーディオ用バッ
ファ回路５５内のデータ量をバッファ量監視回路５８で
監視し、そのデータ量の変化に応じて、多重化された符
号化画像データおよび符号化オーディオデータを読み出
す速度を制御するようにしている。

【００９４】これにより、符号化オーディオデータの復
号再生速度が全体として速くなったときには、符号化画
像データの復号再生処理も速くなるようにすることがで
きるとともに、通常通り復号処理が行われて符号化オー
ディオデータの復号再生速度が通常の速度になったとき
には、符号化画像データの復号再生処理も通常の速度に
なるようにすることができ、オーディオデータの再生速
度に合わせて画像データの再生速度を自動的に制御する
ようにすることができる。

【００９５】したがって、オーディオデータの再生速度
に合わせて画像データの再生速度を変えるための操作を
ユーザが行わなくても済み、音声信号が存在する部分を
探し出して再生する操作性を向上させることができる。

【００９６】

【発明の効果】本発明の符号化データ復号装置は、順次
入力される一連の符号化されたデータフレームの各々に
ついて復号すべきか否かを、該当するデータフレームに
含まれる複数の周波数帯域から選択された少なくとも１
つの帯域に属する符号化された情報データのレベルに基
づいて決定するようにしたので、音声信号が含まれる周
波数帯域を選択することにより、音声信号が含まれるオ
ーディオデータのみを高速に復号して良質の音声信号を
再生することができる。また、上記情報データのレベル
は、符号化データを得る際に用いたフローティング係数
を用いることにより容易に判定できるので、回路構成を
簡単にすることができる。

【００９７】また、本発明の他の特徴によれば、順次入
力される一連の符号化されたデータフレームのうち、所
定の選択されたフレームのみを復号するようにしたの
で、例えば音楽のように有音部分が連続して存在するオ
ーディオデータを、選択するフレームに応じて圧縮して
高速に再生することができ、その高速再生において、一
定速度の不快感のない再生音を得ることができる。

【００９８】また、本発明の画像オーディオ多重化デー
タ復号装置は、符号化画像データと符号化オーディオデ
ータとが多重化されたデータフレームを読み出し手段に
より読み出し、それを符号化画像データと符号化オーデ
ィオデータとに分離して各々復号する装置であって、上
記データフレームから分離されてオーディオデータバッ
ファ手段に記憶されている符号化オーディオデータを復
号するオーディオ復号手段を、情報データのレベルに応
じて復号処理を行うか否かを決定するようにした本発明
の符号化データ復号装置により構成し、上記オーディオ
データバッファ手段に記憶されているオーディオデータ
の量の変化に応じてデータフレームの読み出し速度を制
御するようにしたので、高速再生において、オーディオ
データの再生速度に応じて画像データの再生速度を制御
することができるようになり、画像およびオーディオの
高速再生において音声が記録されている部分を容易に探
し出して再生することができる。

【図面の簡単な説明】

【図１】本発明の第１の実施形態による符号化データ復
号装置の構成例を示すブロック図である。

【図２】本発明の第２の実施形態による符号化データ復
号装置の構成例を示すブロック図である。

【図３】本発明の第３の実施形態による符号化データ復
号装置の構成例を示すブロック図である。

【図４】第２の実施形態による符号化データ復号装置の
通常再生時における復号処理の動作を示すフローチャー
トである。

【図５】第２の実施形態による符号化データ復号装置の
フローティング係数を用いた高速再生時における復号処
理の動作を示すフローチャートである。

【図６】第３の実施形態による符号化データ復号装置の
フレームカウント数を用いた高速再生時における復号処
理の動作を示すフローチャートである。

【図７】フローティング係数を用いた高速再生時の音声
信号の復号処理を説明するための波形図であり、（Ａ）
は原音声信号の波形を示す図、（Ｂ）は復号された信号
の波形を示す図である。

【図８】フレームカウント数を用いた高速再生時の音声
信号の復号処理を説明するための波形図であり、（Ａ）
は原音楽信号の波形を示す図、（Ｂ）は復号された信号
の波形を示す図である。

【図９】本発明の一実施形態である画像オーディオ多重
化データ復号装置の構成例を示すブロック図である。

【図１０】本発明の符号化データ復号装置に入力される
符号化データの発生に用いられる従来の符号化装置の一
例を示すブロック図である。

【図１１】従来の符号化データ復号装置の構成を示すブ
ロック図である。

【図１２】従来の画像オーディオ多重化データ復号装置
の構成を示すブロック図である。

【符号の説明】

１デマルチプレクス回路２、３、４、５逆量子化回路６、７、８、９逆フローティング処理回路１０合成フィルタバンク回路１０Ａバッファメモリ１１ミュート回路１２ヘッダ情報復号回路１３第１の復号制御回路１４第２の復号制御回路１５カウンタ回路１６、１７スイッチ２３スレッショルド値入力端子２４帯域入力端子２５フレームレート入力端子２６次フレーム読み出し制御信号２７ミュート制御信号５１蓄積回路５２読みだし回路５３画像／オーディオデータデマルチプレクス回路５４画像用バッファ回路５５オーディオ用バッファ回路５６画像復号回路５７オーディオ復号回路５８バッファ量監視回路５９読みだし速度制御回路

Claims

【特許請求の範囲】

【請求項１】一連の符号化されたデータフレームを順
次受け取り処理する回路であって、上記一連のデータフ
レームの各々は、複数の所定の周波数帯域に分けられた
複数の多重化帯域データを含み、各多重化帯域データは
対応する周波数帯域に属する符号化された情報データ
と、その符号化された情報データの符号化に用いられた
処理データとを含んでおり、上記符号化された情報デー
タと上記処理データとを互いに分離するように各データ
フレームを処理する回路からなる分離手段と、上記周波数帯域の各々において、上記符号化された情報
データを、その情報データから分離された上記処理デー
タを用いて復号する復号手段と、上記各データフレームを復号すべきか否かを、該当する
データフレームに含まれる上記周波数帯域から選択され
た少なくとも１つの帯域に属する上記符号化された情報
データのレベルに基づいて決定する決定手段とを備える
ことを特徴とする符号化データ復号装置。
【請求項２】請求項１に記載の符号化データ復号装置
において、上記各データフレームを復号すべきか否かは、上記周波
数帯域から選択された複数の帯域に属する上記符号化さ
れた情報データのレベルを表す絶対値の最大値に基づい
て決定されることを特徴とする符号化データ復号装置。
【請求項３】請求項２に記載の符号化データ復号装置
において、上記処理データは、上記複数の周波数帯域の各々に属す
る上記符号化された情報データのレベルを表すフローテ
ィング係数を含むことを特徴とする符号化データ復号装
置。
【請求項４】請求項３に記載の符号化データ復号装置
において、上記各データフレームを復号すべきか否かを決定する決
定手段は、上記周波数帯域から選択された複数の帯域に
属する上記符号化された情報データのレベルを表す絶対
値の最大のものが属する帯域に対応する上記フローティ
ング係数と、あらかじめ設定されたスレッショルド値と
を比較する比較手段を含むことを特徴とする符号化デー
タ復号装置。
【請求項５】請求項１に記載の符号化データ復号装置
において、上記各データフレームを復号すべきか否かを決定する決
定手段に用いられる上記少なくとも１つの周波数帯域を
あらかじめ設定する設定手段を更に備えることを特徴と
する符号化データ復号装置。
【請求項６】請求項１に記載の符号化データ復号装置
において、上記周波数帯域のそれぞれに関する上記復号手段の出力
信号を合成する合成手段と、上記復号手段と上記合成手段との間に接続されて、上記
復号手段の上記出力信号をそのまま上記合成手段に与え
るか、上記出力信号に代えてゼロ信号を与えるかを選択
するミュート手段とを更に備えることを特徴とする符号
化データ復号装置。
【請求項７】請求項１に記載の符号化データ復号装置
において、上記一連の符号化されたデータフレームの中の選択され
たフレームのみを復号するように、処理すべきフレーム
を選択するフレーム選択手段と、上記決定手段と上記フレーム選択手段との何れか一方を
選択的に作動可能とする選択手段とを更に備えることを
特徴とする符号化データ復号装置。
【請求項８】一連の符号化されたデータフレームを順
次受け取り処理する回路であって、上記一連のデータフ
レームの各々は、複数の所定の周波数帯域に分けられた
複数の多重化帯域データを含み、各多重化帯域データは
対応する周波数帯域に属する符号化された情報データ
と、その符号化された情報データの符号化に用いられた
処理データとを含んでおり、上記符号化された情報デー
タと上記処理データとを互いに分離するように各データ
フレームを処理する回路からなる分離手段と、上記周波数帯域の各々において、上記符号化された情報
データを、その情報データから分離された上記処理デー
タを用いて復号する復号手段と、上記一連の符号化されたデータフレームの中の選択され
たフレームのみを復号するように、処理すべきフレーム
を選択するフレーム選択手段とを備えることを特徴とす
る符号化データ復号装置。
【請求項９】請求項７または８に記載の符号化データ
復号装置において、上記フレーム選択手段は、所定数のフレームの中の処理
すべきフレーム数の割合を示す再生フレームレートをあ
らかじめ設定する設定手段を含むことを特徴とする符号
化データ復号装置。
【請求項１０】請求項８に記載の符号化データ復号装
置において、上記周波数帯域のそれぞれに関する上記復号手段の出力
信号を合成する合成手段と、上記復号手段と上記合成手段との間に接続されて、上記
復号手段の上記出力信号をそのまま上記合成手段に与え
るか、上記出力信号に代えてゼロ信号を与えるかを選択
するミュート手段とを更に備えることを特徴とする符号
化データ復号装置。
【請求項１１】多重化された符号化データをヘッダ情
報と複数の周波数帯域に分けられた各帯域毎の信号とに
分離し、上記ヘッダ情報を用いて上記各帯域毎の信号に
対して逆量子化処理、逆フローティング処理および合成
フィルタバンク処理を施すことによって上記符号化デー
タをフレーム単位で復号する符号化データ復号装置にお
いて、上記逆フローティング処理が施された各帯域毎の信号を
そのまま通すかゼロ信号にするかを選択するミュート手
段と、上記ヘッダ情報中に含まれるフローティング係数と予め
設定されたスレッショルド値とを比較し、その比較結果
に応じて上記ミュート手段の選択動作を制御するミュー
ト制御信号を出力すると共に、上記符号化データの次フ
レームの処理開始を指示する次フレーム読み出し制御信
号を出力する復号制御手段とを設けたことを特徴とする
符号化データ復号装置。
【請求項１２】上記復号制御手段で上記スレッショル
ド値と比較されるフローティング係数は、上記複数の周
波数帯域に分けられた各帯域毎に伝送されるフローティ
ング係数のうちの最大値であることを特徴とする請求項
１１記載の符号化データ復号装置。
【請求項１３】上記復号制御手段で用いられるフロー
ティング係数は、上記複数の周波数帯域に分けられた各
帯域毎に伝送されるフローティング係数のうち、あらか
じめ設定された帯域のみのフローティング係数であるこ
とを特徴とする請求項１２記載の符号化データ復号装
置。
【請求項１４】多重化された符号化データをヘッダ情
報と複数の周波数帯域に分けられた各帯域毎の信号とに
分離し、上記ヘッダ情報を用いて上記各帯域毎の信号に
対して逆量子化処理、逆フローティング処理および合成
フィルタバンク処理を施すことによって上記符号化デー
タをフレーム単位で復号する符号化データ復号装置にお
いて、上記逆フローティング処理が施された各帯域毎の信号を
そのまま通すかゼロ信号にするかを選択するミュート手
段と、入力された上記符号化データのフレーム数をカウントす
るカウント手段と、上記カウント手段によりカウントされた入力フレーム数
と予め設定された再生フレームレートとに基づいて上記
ミュート手段の選択動作を制御するミュート制御信号を
出力すると共に、上記符号化データの次フレームの処理
開始を指示する次フレーム読み出し制御信号を出力する
復号制御手段とを設けたことを特徴とする符号化データ
復号装置。
【請求項１５】多重化された符号化データをヘッダ情
報と複数の周波数帯域に分けられた各帯域毎の信号とに
分離し、上記ヘッダ情報を用いて上記各帯域毎の信号に
対して逆量子化処理、逆フローティング処理および合成
フィルタバンク処理を施すことによって上記符号化デー
タをフレーム単位で復号する符号化データ復号装置にお
いて、上記逆フローティング処理が施された各帯域毎の信号を
そのまま通すかゼロ信号にするかを選択するミュート手
段と、上記ヘッダ情報中に含まれるフローティング係数と予め
設定されたスレッショルド値とを比較し、その比較結果
に応じて上記ミュート手段の選択動作を制御するミュー
ト制御信号を出力すると共に、上記符号化データの次フ
レームの処理開始を指示する次フレーム読み出し制御信
号を出力する第１の復号制御手段と、入力された上記符号化データのフレーム数をカウントす
るカウント手段と、上記カウント手段によりカウントされた入力フレーム数
と予め設定された再生フレームレートとに基づいて上記
ミュート手段の選択動作を制御するミュート制御信号を
出力すると共に、上記符号化データの次フレームの処理
開始を指示する次フレーム読み出し制御信号を出力する
第２の復号制御手段と、上記第１の復号制御手段から出力されるミュート制御信
号および次フレーム読み出し制御信号と、上記第２の復
号制御手段から出力されるミュート制御信号および次フ
レーム読み出し制御信号との何れかを選択して出力する
スイッチ手段とを設けたことを特徴とする符号化データ
復号装置。
【請求項１６】一連の符号化されたデータフレームを
順次受け取り、少なくとも１フレームを保持する蓄積手
段であって、上記各データフレームが符号化され多重化
された画像データとオーディオデータとを含む蓄積手段
と、上記蓄積手段に保持されたデータフレームを制御された
速度で読み出すことのできる読み出し手段と、上記読み出し手段により読み出した上記データフレーム
に含まれる上記符号化画像データと上記符号化オーディ
オデータとを互いに分離する分離手段と、上記分離された符号化画像データを復号する画像復号手
段と、上記分離された符号化オーディオデータを一時的に記憶
するオーディオデータバッファ手段と、上記オーディオデータバッファ手段に記憶されている上
記符号化オーディオデータを読み出して復号するオーデ
ィオ復号手段と、上記オーディオデータバッファ手段に記憶されているオ
ーディオデータの量を監視する監視手段と、上記監視手段により監視される上記オーディオデータバ
ッファ手段に記憶されているオーディオデータの量の変
化に応じて上記読み出し手段による上記データフレーム
の読み出し速度を制御する制御手段とを備えることを特
徴とする画像オーディオ多重化データ復号装置。
【請求項１７】請求項１６に記載の画像オーディオ多
重化データ復号装置において、上記オーディオ復号手段
は、一連の符号化されたデータフレームを順次受け取り処理
する回路であって、上記一連のデータフレームの各々
は、複数の所定の周波数帯域に分けられた複数の多重化
帯域データを含み、各多重化帯域データは対応する周波
数帯域に属する符号化された情報データと、その符号化
された情報データの符号化に用いられた処理データとを
含んでおり、上記符号化された情報データと上記処理デ
ータとを互いに分離するように各データフレームを処理
する回路からなる分離手段と、上記周波数帯域の各々において、上記符号化された情報
データを、その情報データから分離された上記処理デー
タを用いて復号する復号手段と、上記各データフレームを復号すべきか否かを、該当する
データフレームに含まれる上記周波数帯域から選択され
た少なくとも１つの帯域に属する上記符号化された情報
データのレベルに基づいて決定する決定手段とを備える
ことを特徴とする画像オーディオ多重化データ復号装
置。