JPH11146398A

JPH11146398A - マルチメディア情報処理装置

Info

Publication number: JPH11146398A
Application number: JP30201197A
Authority: JP
Inventors: Mitsuhiro Miyashita; 充弘宮下
Original assignee: Matsushita Electric Industrial Co Ltd
Current assignee: Panasonic Holdings Corp
Priority date: 1997-11-04
Filing date: 1997-11-04
Publication date: 1999-05-28

Abstract

(57)【要約】（修正有）【課題】複数の圧縮ストリームデータを同時に復号す
るマルチメディア情報処理装置において、マイクロプロ
セッサの負荷増大から起こる駒落ちを防止する。【解決手段】処理内容制御部１８７は、復号部１８０
にかかる復号処理の負荷を計測し、この負荷の計測結果
に応じて逆ＤＣＴ部１８４の行う逆ＤＣＴ変換処理の内
容を一部スキップさせて、復号処理のためのマイクロプ
ロセッサの負荷あるいはトラフィックの増大を抑えるこ
とで、駒落ち発生の可能性を低減させる。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、圧縮ストリームデ
ータをマイクロプロセッサと復号ソフトウェアとで復号
処理するマルチメディア情報処理装置に関するものであ
る。

【０００２】

【従来の技術】近年、ディジタルＡＶ技術の発達により
ビデオストリームやオーディオストリームなどマルチメ
ディア情報のディジタル化、特にＭＰＥＧに代表される
ディジタル圧縮技術が進み、ディジタルビデオディス
ク、ディジタル衛星放送など多くのマルチメディア商品
が開発されている。こうした技術で圧縮された、画像や
音声のストリームデータを圧縮ストリームデータとい
う。

【０００３】ところで、圧縮されたビデオストリームや
オーディオストリームなどの圧縮ストリームデータを再
生するためには、復号というマルチメディア情報処理が
必要である。従来この処理には専用の復号ハードウェア
を要する場合が多かったが、近年のＰＣの高性能化に伴
って、復号ソフトウェアをマイクロプロセッサで実行す
ることにより専用ハードウェアと同等の処理が実現可能
となってきた。

【０００４】現在、１００ＭＨｚ程度の動作周波数を持
つマイクロプロセッサを搭載したＰＣ（パーソナルコン
ピュータ）であっても、復号処理用ソフトウェアを実行
してＭＰＥＧ１圧縮されたビデオＣＤ規格などのＭＰＥ
Ｇ圧縮ストリームを復号することが可能であり、利用者
はビデオＣＤの映画やカラオケを楽しむことができるよ
うになってきている。くわえて、ＰＣの多機能化と拡張
性の向上とは急速に進みつつあり、複数チャンネルのデ
ィジタル放送番組をＰＣで受信、表示、および、ＰＣに
接続された複数の蓄積型メディアから動画情報を同時再
生、といった使用法も実現されつつある。

【０００５】ところで、復号処理用プログラムによる復
号処理の結果求められた復号ビデオストリームは、いっ
たん記憶装置に格納され、それからバスを通って表示装
置に転送された後、動画像としてディスプレイに表示さ
れる。毎秒３０フレームで構成されるビデオストリーム
を表示装置上で表示する場合、３３ｍｓ周期で１フレー
ムのデータをメモリから表示装置へ転送する。これらの
復号処理と復号結果のビデオストリームの転送は、マイ
クロプロセッサが処理しており、このことからも、ＰＣ
のマルチメディア処理はマイクロプロセッサの能力向上
が支えていると言える。

【０００６】

【発明が解決しようとする課題】しかしながら、マイク
ロプロセッサの性能が向上し、現在も向上を続けている
にしても、ユーザが複数のソフトウェアを動作させてい
る場合や、復号ソフトウェアが同時に複数のビデオスト
リームの再生・表示を実行する場合には、復号処理に伴
う各種演算処理と、復号ビデオストリームが格納されて
いる記憶装置から表示装置へのトラフィックの増大とに
よって、マイクロプロセッサの負荷が限界を越えてしま
い、復号ビデオストリームをメモリから表示装置へ連続
して３０フレーム／秒のペースで転送することができな
くなり、復号ビデオストリームを表示装置上で再生する
際に駒落ちが発生するという課題がある。

【０００７】駒落ちが発生すると、画面上に表示される
ものの動きがぎくしゃくして見づらくなる。さらに、Ｄ
ＶＤや家庭用デジタルビデオなどの蓄積メディアからの
映像再生の場合、駒落ちによって生じる問題は画質面に
とどまらない。駒落ち発生分だけ再生時間が本来の長さ
より長くなってしまう。たとえば、１秒あたり３０フレ
ームの転送速度で再生時間が１分となるビデオストリー
ムについては、再生完了までに１８００フレームの転送
が必要となるが、これがトラフィックやマイクロプロセ
ッサ負荷増大のために１秒あたり平均２５フレームしか
転送できない場合、再生時間は、１８００÷２５＝７２
（秒）となってしまう。

【０００８】本発明は上記問題点に鑑み、複数の圧縮ビ
デオストリームの復号、表示を行う際の駒落ち、さらに
は駒落ちによる再生時間の延長が生じにくい、マルチメ
ディア情報処理装置を提供することを目的とする。

【０００９】

【課題を解決するための手段】上記課題を解決するため
に、本発明のマルチメディア情報処理装置は、ＭＰＥＧ
ストリームである圧縮ストリームを復号する復号手段
と、前記復号手段が復号したストリームを表示する表示
手段とを少なくとも備え、前記復号手段にかかる復号処
理の負荷を計測する負荷計測手段と、前記負荷計測手段
の計測結果に応じて前記復号手段の処理内容を制御する
復号処理制御手段を有することを特徴とする。

【００１０】

【発明の実施の形態】以下、本発明に係る送受信システ
ムの実施の形態について、図に従って説明する。ここで
は、ＣＤ−ＲＯＭと複数チャンネルを持つディジタル衛
星放送とから複数のビデオストリームを再生し、再生し
た画像をディスプレイ上にマルチウィンドウで出力する
ＰＣ（パーソナルコンピュータ）を想定する。（実施の形態１）（構成）図１は本発明の実施の形態１におけるマルチメ
ディア情報処理装置の構成を示す。

【００１１】図１（ａ）において、このマルチメディア
情報処理装置１００は、制御部１１０、マルチタスク部
１２０、表示部１３０、受信部１４０、蓄積メディア１
５０、圧縮データ格納部１６０とから成る。表示部１３
０は、復号されたストリームを表示する、ディスプレイ
などの表示装置である。

【００１２】受信部１４０は、衛星ディジタル放送受信
機であり、制御部１１０からの指示を受けて受信を開始
し、受信した圧縮ストリームデータを圧縮データ格納部
１６０に格納する。格納にあたっては、専用のバッファ
を確保する。この専用バッファについては、他の圧縮ス
トリーム格納用バッファとの区別のために、バッファの
識別情報が制御部１１０に保持されているものとする。
なお、受信部１４０が同時に複数の衛星ディジタル放送
番組を受信する場合、各番組の圧縮ストリームごとに別
バッファに格納する。

【００１３】蓄積メディア部１５０は、ＣＤ−ＲＯＭや
ハードディスクなどの蓄積メディアとそのドライブ装置
とであり、制御部１１０からの指示を受けて起動し、順
次蓄積メディアから圧縮ストリームデータを読み出し、
これを圧縮データ格納部１６０に、この専用のバッファ
に格納する。このバッファについても、識別情報が制御
部１１０に保持されている。

【００１４】蓄積メディア部１５０の数は図１では一つ
だが、ＰＣの拡張用バスに空きがあれば、これにドライ
ブを接続して数を増やすこともできる。圧縮データ格納
部１６０はＲＡＭなどのメモリであり、復号前の圧縮ス
トリームデータが一時格納される。図２は、復号処理対
象の圧縮ストリームのデータ階層構造を示す。ストリー
ムは、一連のＧＯＰ（Group of Pictures）２１０、
ピクチャ２２０、マクロブロック２３０、ブロック２４
０の順で細分化される。

【００１５】ＧＯＰ２１０はその名の通り複数のピクチ
ャ（画面）の集合である。ピクチャの種類には、Ｉピク
チャ２２１、Ｐピクチャ２２２、Ｂピクチャ２２３があ
る。ピクチャの種類は、動き補償予測処理に関係する。
動き補償予測処理は基本的な圧縮技術のひとつで、全て
のフレーム（ピクチャ）の全画像情報を符号化するので
なく、一部のフレームのみ全画像情報を符号化して、残
りのフレームは、前または前後のフレームとの差分の画
像情報を符号化する手法である。

【００１６】Ｉピクチャ２２１は、フレーム内符号化を
施されたピクチャであり、フレーム全体の画像情報が符
号化されている。Ｐピクチャ２２２は、前のフレームと
の差分の情報が符号化されている。Ｂピクチャ２２３
は、前後のフレームとの差分の情報が符号化されてい
る。各ピクチャは、さらに複数のマクロブロック２３０
からなり、マクロブロック２３０は最終的な処理単位で
あるブロック２４０で構成されている。ブロックは、輝
度（明暗のニュアンス）を示す輝度ブロック２４１と色
差（色の濃淡）を示す色差ブロック２４２との２種類に
大別される。１マクロブロックを構成するブロックの数
と、輝度ブロック、色差ブロックの組み合わせは何種類
かあるが、ここでは、輝度ブロック４個と色差ブロック
２個の計６個のブロックとする。

【００１７】圧縮ストリームデータは、圧縮された画像
データの他に、各階層において圧縮データの復号に必要
な各種管理情報を含んでいる。例えば動き補償用予測処
理用の情報である予測モードと動きベクトル、各ピクチ
ャのＧＯＰにおける位置（順番）、各マクロブロックが
どのピクチャに属するかを示す情報などである。こうし
た、圧縮ストリームに含まれる情報の詳細については、
市販の書籍（「最新ＭＰＥＧ教科書」（株式会社アスキ
ー、1994年8月1日発行）など）に記されている。

【００１８】マルチタスク部１２０は、ストリームの復
号や他のアプリケーションの実行など、同時に並行して
実行される各種タスクの実行部分であり、復号処理を行
う復号部１８０、復号以外の処理を行うその他ソフトウ
ェア部１９０と、これらの部を制御するＯＳ部１７０と
からなる。制御部１１０は、処理指示の伝達、データ制
御などの制御処理一般を行うが、ここでは復号処理に関
する部分に限定して処理内容を説明すると、まず、図外
の指示装置からの使用者指示を受けて、受信部１４０ま
たは蓄積メディア部１５０と復号部１８０を起動させ、
圧縮ストリームデータを圧縮データ格納部１６０に格納
させる。ついで、圧縮データ格納部１６０から復号部１
８０へ、復号部１８０の要求に応じて、圧縮ストリーム
データを送出する。そして、圧縮ストリームから復号さ
れた復号ストリームが復号部１８０から送出されてくる
と、これを表示部１３０に表示させる。また、制御部１
１０は、受信部１４０と蓄積メディア部１５０とから通
知される、圧縮ストリームデータの一時保存場所である
バッファ識別情報を圧縮ストリーム制御部１８１にも通
知する。これによって、圧縮ストリーム制御部１８１
は、復号部１８０が復号処理しなければならない圧縮ス
トリームデータの数を認識でき、それらを区別もでき
る。

【００１９】次に、復号部１８０の構成を図１（ｂ）を
用いて説明する。復号部１８０はさらに、圧縮ストリー
ム制御部１８１、可変長復号部１８２、逆量子化部１８
３、逆ＤＣＴ部１８４、動き補償予測部１８５、復号ス
トリーム制御部１８６、処理内容制御部１８７から成
る。圧縮ストリーム制御部１８１は、復号処理対象の圧
縮ストリームに対し、復号処理に必要な制御を行う。ま
ず、制御部１１０に要求を出して、圧縮データ格納部１
６０に格納された圧縮ストリームデータを送出してもら
い、これを内蔵メモリに一時保存する。次いで、圧縮ス
トリーム制御部１８１は、一時保存した圧縮ストリーム
データを復号処理の単位に分割する。具体的には、ＧＯ
Ｐから、ピクチャ、さらにマクロブロック単位にまで分
割する。各マクロブロックには復号処理終了後にピクチ
ャ、ＧＯＰに再構成できるように、それが属するストリ
ームデータ、ピクチャの識別情報などの管理情報が含ま
れている。また、同時に複数の圧縮ストリームを平行し
て復号する場合（たとえば、３つのディジタル放送番組
を表示部１３０のディスプレイ上にマルチウィンドウで
同時に表示する場合）は、上記の識別情報に加え各マク
ロブロックがどの圧縮ストリームデータに属すかを示す
ストリーム識別情報（具体的には、圧縮データ格納部１
６０で各ストリームデータが格納されているバッファ識
別情報）も付加するとともに、処理スケジュールを決定
して圧縮ストリームデータを切りかえながら平行して復
号処理できるよう制御を行う。

【００２０】図３は、この圧縮ストリーム制御部１８１
が行う複数圧縮ストリームのスケジュール管理の様子を
示すを模式図である。この図で、圧縮ストリーム制御部
１８１は、３種類の圧縮ストリームデータを、順番に一
定量ずつ圧縮データ格納部１６０から制御部１１０経由
で読み出し、マクロブロックに分割して復号処理する。
ただし、読み出しは、各圧縮ストリーム専用のバッファ
に一定量のデータが蓄積されたタイミングで行われるの
で、図３のように各ストリームが決まった順番に従って
復号されるわけではない。また、図３では、この「一定
量」が１ＧＯＰになっているが、これは説明の便宜上の
もので、さらに細かい値でもよい。

【００２１】可変長復号部１８２は、圧縮ストリーム制
御部１８１から送出された可変長符号データ（１マクロ
ブロック分）の可変長復号処理を行い、可変長符号デー
タを、１マクロブロック（６ブロック）の量子化係数
と、予測モードおよび動きベクトルとを求める。このう
ち量子化係数は逆量子化部１８２へ、予測モードと動き
ベクトルとは動き補償予測部１８５へ、それぞれ送られ
る。

【００２２】逆量子化部１８３は、可変長復号部１８２
から送出されてきた量子化係数をブロックごとに逆量子
化してＤＣＴ係数を求め、マクロブロック全体（６ブロ
ック）の逆量子化処理が終了した段階で、求めた１マク
ロブロック分のＤＣＴ係数を逆ＤＣＴ部１８４に送出す
る。逆ＤＣＴ部１８４は、逆量子化部１８３から送出さ
れてきたＤＣＴ変換係数に対してブロック単位で周波数
逆変換処理を施して、画素ブロックの画素値を求める。
この周波数逆変換処理は、具体的には、以下に示す数１
のような、８×８の行列であるＤＣＴ係数ブロックに、
同じく８×８の基底データの行列とその逆行列を乗じる
行列演算である。

【００２３】

【数１】

【００２４】基底データの行列とその逆行列とは、逆Ｄ
ＣＴ部１８４の内蔵メモリに格納されている。ただし、
求められる画素値の内容は処理対象のピクチャの種類に
よって異なり、Ｉピクチャの場合は実際の画像の画素値
そのものであるが、Ｐピクチャ、Ｂピクチャの場合は、
動き補償予測処理における参照画像上の対応する部分の
画素値との差分となる。６ブロック、すなわち１マクロ
ブロック単位での逆ＤＣＴ変換処理が終了した段階で、
求めた１マクロブロック分の画素値を、動き補償予測部
１８５へ送出する。

【００２５】逆ＤＣＴ部１８４内の処理停止部１８４ａ
とダミーデータ送出部１８４ｂとは、上記の逆ＤＣＴ変
換処理の内容を、処理内容制御部１８５からの指示に従
って変更する部であるが、その動作については、処理内
容制御部１８５の動作とともに併せて後述する。動き補
償予測部１８５は、上述の差分値と動きベクトル、予測
モード情報、内蔵するメモリに格納されている参照デー
タをもとに、Ｐピクチャ、Ｂピクチャの本来の画素値を
マクロブロック単位で求める。動き補償予測部１８５
は、求めた画素値のデータを復号ストリーム制御部１８
６に送出するとともに、内蔵メモリに格納されている動
き補償予測処理の参照用データの該当部分のマクロブロ
ックを、この新たに求めた画素値データで更新する。Ｉ
ピクチャのデータについては動き補償予測の処理は不要
であり、そのまま参照用データとして保存される。

【００２６】復号ストリーム制御部１８６は、逆ＤＣＴ
部１８４または動き補償予測部１８５から送出されてき
た画素値データを、各マクロブロックに付加された識別
情報（どのＧＯＰの何番目のピクチャのどの位置のマク
ロブロックか、さらに複数ストリームが平行して復号さ
れている場合は、どのストリームのデータか）にもとづ
いて、ピクチャ、ＧＯＰに（必要ならばストリーム毎
に）再構成して、表示部１３０への表示のために制御部
１１０に送出する。

【００２７】図４は、上述の各部が行う処理（可変長復
号、逆量子化、逆ＤＣＴ変換）によって、圧縮ストリー
ムデータに含まれる画像データの情報がどう変わって行
くかを、１ブロック単位で示している。まず、可変長符
号データ４０１は可変長復号部１８１によって、８×８
の量子化係数ブロック４０２に展開される。ついで逆量
子化部１８２によってＤＣＴ変換係数ブロック４０３に
変換される。そして、逆ＤＣＴ部１８４によって逆ＤＣ
Ｔ変換処理を施されて、最終的に画素値ブロック４０４
となる。これらの部が行う処理の単位はブロックである
が、各部の間でデータの受け渡しを行う単位はマクロブ
ロックである。つまり、各部とも１マクロブロック分
（６ブロック分）のデータを受け取り、このデータをブ
ロック単位で処理し、６ブロック分（１マクロブロック
分）処理を終えたところで、１マクロブロックの単位で
次の処理を行う部に引き渡すのである。

【００２８】処理内容制御部１８７は、駒落ち発生の危
険性を判定し、その判定結果をもとに逆ＤＣＴ部１８４
の処理内容を制御する。処理内容制御部１８７は、判定
部１８７ａと逆ＤＣＴ制御部１８７ｂとから成る。判定
部１８７ａは、圧縮ストリーム制御部１８１の持つスト
リーム管理用の情報のうち、平行して復号処理中の圧縮
ストリームの数と、次に復号処理されるマクロブロック
の属するピクチャの種類（Ｉ、Ｐ、Ｂ）との情報を取得
し、その情報のうち、圧縮ストリーム数を所定の閾値と
比較して、圧縮ストリーム数が閾値を越えていた場合に
は、駒落ちの危険性ありと判断する。この閾値は、判定
部１８７ａの内蔵メモリに格納されており、あらかじめ
マイクロプロセッサの性能に応じて定められた値とす
る。

【００２９】そして、危険性ありと判断した場合、判定
部１８７ａは、さらにピクチャ種類をチェックし、ピク
チャ種類がＰピクチャまたはＢピクチャであれば、逆Ｄ
ＣＴ制御部１８７ｂに逆ＤＣＴ部１８４の制御を行うよ
う指示する。逆ＤＣＴ制御部１８７ｂは、この指示を受
け、逆ＤＣＴ部１８４に対し、次に送出されてくるマク
ロブロックには、逆ＤＣＴ変換処理を行わないよう指示
を出す。

【００３０】判定部１８７ａが行う上記判定処理は、対
象のマクロブロックが可変長復号と逆量子化との処理を
終えて、逆ＤＣＴ部１３０に送出されてくる前に行われ
なければならない。逆ＤＣＴ部１８４では、処理停止部
１８４ａが逆ＤＣＴ制御部１８７ｂの指示を受け、当該
マクロブロックに対する逆ＤＣＴ変換処理をスキップさ
せるとともに、ダミーデータ送出部１８４ｂに対し、ダ
ミーデータ送出を指示する。

【００３１】ダミーデータ送出部１８４ｂは、この指示
を受け、動き補償予測部１８５に対し、内蔵メモリに格
納しているダミー用の画素値マクロブロックを送出す
る。このダミー用の画素値マクロブロックに含まれる画
素値はすべて０である。図４を例に説明すると、ＤＣＴ
変換係数ブロック４０３に対して、画素値ブロック４０
４０ではなく、ダミーブロック４０５が逆ＤＣＴ変換処
理結果として動き補償予測部１８５に送出されるのであ
る。

【００３２】逆ＤＣＴ変換処理の内容をこのように変更
することから生じる影響については、本実施の形態の説
明の末尾に記す。（動作）以上のように構成されたマルチメディア情報処
理方法について、以下その動作を説明する。

【００３３】図５は、実施の形態１における、処理内容
制御部１８７と逆ＤＣＴ部１８４の処理の流れを示すフ
ローチャートである。以下、このフローチャートに従っ
て、動作を説明する。まず、処理対象の可変長符号デー
タ（１マクロブロック分）が圧縮ストリーム制御部１８
１から可変長復号部１８２に送出される直前に、処理内
容制御部１８７内の判定部１８７ａが、圧縮ストリーム
制御部１８１の持つ管理情報を参照して、現在平行復号
処理中の復号ストリーム数をチェックする（Ｓ５０
１）。

【００３４】ストリーム数が閾値を越えていた場合、判
定部１８７ａは、さらに前記マクロブロックのピクチャ
種類をチェックする（Ｓ５０２）。そして、ピクチャ種
類がＰまたはＢピクチャであれば、判定部１８７ａから
その旨通知を受けた逆ＤＣＴ制御部１８７ｂが、逆ＤＣ
Ｔ部１８４に指示して、このマクロブロックに対しては
逆ＤＣＴ変換処理を行わないよう指示する。指示を受け
た逆ＤＣＴ部ア１８４内の処理停止部１８４ａは、この
マクロブロックに対する逆ＤＣＴ変換処理をスキップし
て、ダミーデータ送出部１８４ｂに指示して、ダミーの
画素ブロックを動き補償予測部１８５に出力させる（Ｓ
５０３）。

【００３５】圧縮ストリーム数が閾値以下であるか、ピ
クチャ種類がＰまたはＢピクチャでなかった場合は、逆
ＤＣＴ制御部１８７ｂから逆ＤＣＴ部１８４への指示は
出されず、処理従来通りの逆ＤＣＴ変換処理が行われ
（Ｓ５０４）、逆ＤＣＴ変換処理の結果得られた画素ブ
ロックが復号ストリーム制御部１８６に出力される（Ｓ
５０５）。

【００３６】以上のように、本実施の形態によれば、同
時に平行復号処理するストリーム数が増えてマイクロプ
ロセッサの負荷が増大し、駒落ちの危険が生じた場合に
は、ＰまたはＢピクチャのデータには逆ＤＣＴ変換処理
を行わないようにするので、その処理の分だけマイクロ
プロセッサの負荷を減らすことができ、駒落ち発生の可
能性を小さくできる。ただし、ＰまたはＢピクチャの保
持していた輝度と色差との差分情報は失われるため、こ
れらのピクチャの動き補償予測処理結果の輝度、色差の
画素値は、動き補償予測処理時の参照元のピクチャの画
素値と同一になる。そのため、表示部１３０に表示され
る際、動き補償予測処理で復号された画像では、画像中
の人や物の動きは正しく表示されるが、光の当たり具合
と色との微妙な変化が失われる。しかし、光の当たり具
合と色との変化は動きにくらべて目立たないし、少なく
ともＩピクチャのデータの復号（およそ１／２秒間隔）
ごとに、これらの変化を正しく表す画像が表示されるの
で、駒落ちが発生する場合よりも見やすく自然な動画が
表示される。（実施の形態２）図６は本発明の実施の形
態２におけるマルチメディア情報処理装置の構成を示
す。実施の形態１における構成を示した図１と同等の要
素については同じ参照番号を付し、説明は省略する。ま
た、処理の流れは実施の形態１と似通っているので、動
作の説明は省略する。

【００３７】図１との相違点は、可変長復号部６１０の
処理内容が、処理内容制御部６２０の指示を受けて変更
される点である。処理内容制御部６２０は、実施の形態
１の処理内容制御部１８７の逆ＤＣＴ制御部１８７ｂの
代わりに可変長復号制御部６２２を備えている。可変長
復号制御部６２２は、判定部１８７ａの判定（実施の形
態１に同じ）に従い、可変長復号部６１０に対し、可変
長復号処理の対象となる可変長符号データの範囲を限定
するよう指示を出す。

【００３８】可変長復号部６１０は、可変長復号制御部
６２２の指示を受けると、カウンタ部６１１が起動し、
可変長復号部６１０が行う可変長復号処理の結果得られ
る量子化係数が格納されるエリアを監視する。そして、
このエリアに格納された量子化係数の数をカウントして
いく。そして、カウントが１６になった段階で、カウン
タ部６１１は可変長復号部６１０に可変長復号処理打ち
切りの指示を出す。可変長復号部６１０は、可変長復号
処理を打ち切り、処理しなかった４８係数分のデータは
無条件に値０の量子化係数にする。（「０にする」とい
っても、「０」という値をエリアに格納する処理が必要
なわけではない。一般に、数値を格納するエリアは処理
開始直前に「０」で初期化されるので、１６係数分で処
理を打ちきりさえすれば、残り４８係数分のエリアは当
然「０」になっている。）図７は、この処理の前後の可
変長符号データと量子化係数データを示す。

【００３９】図７（ａ）は可変長復号処理前の可変長符
号データ７００の模式図であり、有効係数値７０１は、
０以外の係数のデータであり、０ラン長７０２は、値が
０の係数が連続して並ぶ個数を示す。図７（ｂ）は、本
実施の形態における処理結果の量子化係数ブロック７１
０である。

【００４０】図７（ｃ）は従来の可変長復号処理が行わ
れた場合の結果の量子化係数ブロック７２０である。可
変長符号データ７００の内容は、矢印７０３の順に量子
化係数ブロック７１０、７２０に、ジグザグスキャンし
ながら展開されて行くが、量子化係数ブロック７１０で
は、１６個目の量子化係数を展開した段階で処理が打ち
切られる。網掛け部分７１１が、可変長復号処理によっ
て展開されたデータである。係数７１２は、図７（ａ）
のデータ７０４に相当する部分だがデータが消えてしま
っている。データ７０４は図７（ｂ）では、係数７２２
として可変長復号されている。

【００４１】このように可変長復号処理を途中で打ち切
るという方法の根拠となるのは、可変長符号データの特
性として、有効係数（０以外の値となる係数）が低周波
数部分に偏る傾向があるという事実である。図７（ａ）
でいえば矢印７０３の進行方向に従い、低周波数から高
周波数のデータへと移って行く。図７（ｂ）、（ｃ）で
言えば、各係数間をつなぐジグザグスキャンの進行方向
（右下方向）に進んで行くに従って、低周波数から高周
波数のデータへと移っていく。

【００４２】１６係数分という数量については必須のも
のではなく、任意の値に設定できるが、大きな値にする
と処理削減の効果が減じるし、逆に小さくしすぎると、
情報が失われ、再生画像が不鮮明になる。以上のよう
に、本実施の形態によれば、同時に平行復号処理するス
トリーム数が増大して駒落ちの危険が生じた場合には、
可変長符号データの高周波数部分を切り捨てることで、
可変長復号処理の処理量を減ずることができる。その結
果、マイクロプロセッサの負荷を減らすことができ、駒
落ち発生の可能性を小さくできる。高周波数部分のデー
タが失われて、再生画像が多少不鮮明となる恐れはある
が、元来、可変長復号処理後の量子化係数の高周波数部
分の値は「０」になることが多いので失われる情報量は
小さい。それに情報量の多い低周波数部分の情報はすべ
て復号されるので、再生画像の骨格はそのまま復元さ
れ、駒落ちの生じる場合よりも、見やすくなる。（実施の形態３）（構成）図８は本発明の実施の形態１におけるマルチメ
ディア情報処理装置の構成を示す。実施の形態１におけ
る構成を示した図１と同等の要素については同じ参照番
号を付し、説明は省略する。

【００４３】図１との相違点は、処理内容制御部８２０
の指示内容と、この指示を受けて変更される逆ＤＣＴ部
８１０の構成、変更後処理内容である。処理内容制御部
８２０の判定部８２１は、実施の形態１における判定部
１８７ａと同じ手順で駒落ちの危険性の有無を判定し、
駒落ちの危険性ありと判定した場合には、そのことを逆
ＤＣＴ制御部８２２に通知する。すると、逆ＤＣＴ制御
部８２２から逆ＤＣＴ部８１０に対し、次に逆ＤＣＴ部
８１０に送出されてくるＤＣＴ係数マクロブロックに対
する逆ＤＣＴ変換処理から、処理方式（画素算出のため
の演算式）を変更するように指示が出される。この変更
は、逆ＤＣＴ変換処理結果の画素ブロックを構成する画
素数が少なくなるようにするものである。

【００４４】この時、逆ＤＣＴ制御部８２２は、判定部
８２１が圧縮ストリーム制御部１８１から得る復号対象
圧縮ストリーム数に応じて逆ＤＣＴ部８１０への変更指
示を変える。例えば圧縮ストリーム数が４から７の間で
あれば、１画素ブロックを構成する画素数が８×８＝６
４から４×４＝１６になるように、さらに、ストリーム
数が８以上になれば、２×２＝４になるように、逆ＤＣ
Ｔ変換処理方式を変更するよう逆ＤＣＴ部８１０に指示
する、という具合である。

【００４５】逆ＤＣＴ制御部８２２から逆ＤＣＴ部８１
０への指示は、画素数を減らすような変更の指示だけで
なく、増やす形の指示もありうる。つまり、逆ＤＣＴ部
８１０は復号される圧縮ストリーム数に応じて、処理結
果の画素数を増減させる。処理内容制御部８２０の判定
部８２１は、こうした駒落ち危険性判定と、その結果に
応じた指示とを各ＧＯＰごとに一度、その冒頭のマクロ
ブロックの処理を開始する段階で行う。これは、ＧＯＰ
の途中で逆ＤＣＴ変換処理方式が変更されると、例えば
１ブロックが８×８の画素ブロックとなるように逆ＤＣ
Ｔ変換処理されたピクチャデータをもとに１ブロックが
４×４の画素ブロックとなるように逆ＤＣＴ変換処理さ
れたマクロブロックの動き補償予測処理が行われる、と
いった事態が発生するためである。ＧＯＰの冒頭かどう
かは、判定部８２１が、圧縮ストリーム制御部１８１の
保持する圧縮ストリーム管理情報を取得して判断する。

【００４６】逆ＤＣＴ部８１０は、逆ＤＣＴ制御部８２
２から指示を受け、この指示に応じて、変換処理方式を
変更する。本実施の形態における逆ＤＣＴ変換処理方式
の変更とは、具体的にはＤＣＴ変換係数から画素値を求
めるための行列演算式における係数である基底値の行列
とその逆行列（数１参照）を変更するということであ
る。複数の演算式を使い分けて、処理結果の画素数が４
×４または２×２になるようにするのである。この変更
対象の基底値行列とその逆行列とは、数１に示す基底値
行列、その逆行列と同様、逆ＤＣＴ部の内蔵メモリに格
納されている。

【００４７】基底選択部８１１は逆ＤＣＴ制御部８２２
からの指示（４×４または２×２）を受け、逆ＤＣＴ部
内蔵メモリに格納されている複数種類の基底値行列か
ら、この指示に合ったものを選択する。逆ＤＣＴ部８１
０は、基底選択部８１１が選択した、この基底値行列を
使って逆ＤＣＴ変換処理を実行する。以下に示す数２、
数３が、数１に示す基底値行列以外に選択可能な基底値
行列の例である。

【００４８】

【数２】

【００４９】

【数３】

【００５０】数２は、ＤＣＴ変換基底の行列について、
行をひとつおきに間引いている。この式で表される演算
を実行すると、結果は４×４の行列（画素数１６の画素
ブロック）となる。数３は、ＤＣＴ変換基底の行列につ
いて、列を３列おきに間引いている。この式で表される
演算を実行すると、結果は２×２の行列（画素数４の画
素ブロック）となる。

【００５１】図９は、数１〜３に示される行列演算の結
果の関係を示す模式図である。図９（ａ）は数１、図９
（ｂ）は数２、図９（ｃ）は数３の結果をそれぞれ示
す。この図によって、数２、数３の結果得られる画素ブ
ロックが、本来の数１の結果得られる画素ブロックのう
ちどの画素を抽出したものになるかが分かる。いずれの
場合も、縦横一定の間隔で、偏りなく画素が抽出されて
いる。

【００５２】数２のような逆ＤＣＴ変換処理を行うと、
処理結果の各ブロックの大きさ（データ量）は本来の４
分の１となり、これらブロックの集合であるピクチャの
大きさも４分の１になる。そして、最終的に表示装置上
に再生されるビデオストリームのウィンドウの大きさ
（面積）も４分に１となる。同様に数３の処理の結果で
は、各ブロックの大きさ（データ量）、ビデオストリー
ムのウィンドウの大きさ（面積）、ともに１６分の１に
なる。

【００５３】（動作）以上のように構成されたマルチメ
ディア情報処理方法について、逆ＤＣＴ変換処理方式の
変更（変換用行列演算式の使い分け）の動作を説明す
る。図１０は、実施の形態３における復号装置８００の
逆ＤＣＴ変換処理終了までの処理の流れを示すフローチ
ャートである。以下、このフローチャートに従って動作
を説明する。

【００５４】まず、処理対象のマクロブロックが圧縮ス
トリーム制御部１８１から可変長復号部１８２に送出さ
れる直前に、判定部８２１が、このデータがＧＯＰの先
頭のデータかどうかチェックする（Ｓ１００１）。先頭
のデータであれば、さらに現在平行して復号処理中の圧
縮ストリーム数をチェックする（Ｓ１００２）。ストリ
ーム数が閾値を越えていた場合、判定部８２１は駒落ち
発生の危険性ありと判定し、その判定を逆ＤＣＴ制御部
８２２に通知する。逆ＤＣＴ制御部８２２は、逆ＤＣＴ
部８１０に対し逆ＤＣＴ変換処理方式の変更（逆ＤＣＴ
処理の行列演算に用いられる基底値行列の変更）を指示
する（Ｓ１００３）。指示を受けた逆ＤＣＴ部８１０の
基底選択部８１１は、この指示に応じて逆ＤＣＴ変換処
理に用いる基底値行列を選択して、逆ＤＣＴ部８１０
は、この基底値行列を用いて逆ＤＣＴ変換処理を実行す
る（Ｓ１００４）。

【００５５】データがＧＯＰの先頭のデータでないか、
ストリーム数が閾値以下である場合は、従来通りの逆Ｄ
ＣＴ変換処理が行われる（Ｓ１００５）。そして、逆Ｄ
ＣＴ変換処理で得られた画素ブロックが、動き補償予測
部１８５に出力される（Ｓ１００６）。以上のように、
本実施の形態によれば、逆ＤＣＴ変換処理の行列演算に
使われる基底値行列の基底値の数が減ることで、行列演
算の演算処理量が小さくなる分、マイクロプロセッサの
処理負荷が小さくなる。さらに、復号結果のビデオスト
リームのデータ量（トラフィック）が小さくなってバス
を通るデータの量も減るので、マイクロプロセッサの負
荷削減、バス上のトラフィック減少の両面から、駒落ち
防止の効果がある。表示装置上に表示される再生画像が
小さくなって見づらくなる点は、多数の画像が同時に表
示できる利点もあるので、いちがいにデメリットとは言
えない。また、画素が間引かれて情報量が減り、再生画
像の精密さが落ちる点についても、その分画像の大きさ
自体も小さくなるのであまり目立たず、駒落ちが発生す
る場合よりは見易い画像となる。（実施の形態４）図１１は本発明の実施の形態４におけ
るマルチメディア情報処理装置の構成を示す。従来の装
置の構成を示した図１と同等の要素については同じ参照
番号を付し、説明は省略する。また、処理の流れは実施
の形態１と似通っているので、動作の説明は省略する。

【００５６】図１との相違点は、処理内容制御部１１２
０の指示を受けて変更される逆ＤＣＴ部１１１０の変更
後処理内容である。判定部１８７ａは、実施の形態１の
場合と同じ手順（同時に平行して復号処理されるストリ
ームの数を閾値と比較）で駒落ちの危険性の有無を判定
する。そして、駒落ちの危険性ありと判定した場合は、
逆ＤＣＴ制御部１１２２が逆ＤＣＴ部１１１０に対し、
次に逆ＤＣＴ部７３０に送出されてくるマクロブロック
に含まれる色差ブロックについては、直流成分（ＤＣ成
分）の画素値を全画素に設定するよう指示を出す。

【００５７】逆ＤＣＴ部１１１０の演算停止部１１１１
は、逆ＤＣＴ制御部１１２２の指示を受けると、まず、
処理しようとするブロックの種別を判定する。輝度ブロ
ックであれば、演算停止部１１１１は何の処理もせず、
従来通りの逆ＤＣＴ変換処理が行われる。処理対象ブロ
ックが色差ブロックであった場合、演算停止部１１１１
は、逆ＤＣＴ変換の行列演算結果の画素値が格納される
エリアを監視し、エリアの先頭に直流成分の画素値が格
納された段階で、逆ＤＣＴ部１１１０の逆ＤＣＴ変換処
理を停止させる。さらに、この直流成分の画素値を、前
記の画素値格納エリアの残り６３画素分のエリアにコピ
ーする。つまり、数１に示されるような行列演算におい
て、図９（ａ）の画素「G00」（直流成分）の値を求め
る計算が終わった時点で数１の行列演算は打ち切られ、
画素「G01〜G77」には画素「G00」の値がコピーされ
る。結果、図９（ｄ）のような、全画素値（６４個）が
「G00」である色差用画素値ブロックが作成される。

【００５８】演算停止部１１１１が、輝度ブロックと色
差ブロックとを区別する方法は単純である。マクロブロ
ック（６個のブロックからなる）における輝度ブロック
と色差ブロックの配置（順番）が固定されているため、
演算停止部１１１１は、マクロブロック内で何番目のブ
ロックかというチェックを行うだけで、ブロック種別
（輝度か色差か）を判定できる。

【００５９】（動作）以上のように構成されたマルチメ
ディア情報処理方法について、処理内容制御部１１２０
の制御を受けた逆ＤＣＴ部１１１０の色差ブロック処理
の動作を、１マクロブロック処理の範囲で説明する。図
１２は、本実施の形態における復号装置１１００の逆Ｄ
ＣＴ変換処理の処理の流れを示すフローチャートであ
る。以下、このフローチャートに従って動作を説明す
る。

【００６０】逆ＤＣＴ部１１１０は、処理対象のマクロ
ブロックを、１ブロックずつ逆ＤＣＴ変換処理していき
（Ｓ１２１０）、このマクロブロック全体（６ブロッ
ク）の処理が終わるまで、逆ＤＣＴ変換処理を繰り返す
（Ｓ１２７０）。まず、逆ＤＣＴ部１１１０はブロック
の種類を判定し、色差ブロックでなければ（Ｓ１２２
０：Ｎｏ）、従来通りに、ブロックを構成する６４個の
係数に対して逆ＤＣＴ変換処理を行い、画素値ブロック
を求める（Ｓ１２３０、Ｓ１２４０）。

【００６１】色差ブロックの場合（Ｓ１２２０：Ｙｅ
ｓ）は、先頭の１画素（直流成分画素）のみを逆ＤＣＴ
変換処理で求め（Ｓ１２５０）、この直流成分の画素値
を残り６３画素にコピーして、６４画素すべてがこの直
流成分の画素値であるような画素ブロックを作成する。
以上のように、本実施の形態によれば、色差ブロック全
体が直流成分の画素値に統一されるので、この色差ブロ
ック、そしてこのブロックを含むマクロブロック、の色
素情報は単色となってしまうが、色差ブロックの逆ＤＣ
Ｔ変換処理の内容は、６４個の成分（画素）のうち１成
分（画素）のみを行列演算で求め、この値を残り６３成
分（画素）にコピーするだけ（ステップＳ１２５０、１
２５０）なので、ブロック全体に逆ＤＣＴ変換処理を行
う場合（ステップＳ１２３０を６４回繰り返す）より
は、行列演算処理量が減り、マイクロプロセッサの負荷
が削減され、駒落ち発生の可能性は低くなる。本実施の
形態は、色の正確な再現よりも動きの正確な再現が優先
される画像を対象にする場合にのみ有用である。

【００６２】なお、上記全ての実施の形態で、処理制御
の基準を同時に復号する圧縮ビデオストリームの数とし
ているが、マイクロプロセッサの負荷、トラフィック量
を基準としてもよい。また、処理制御は、処理制御部が
圧縮ストリーム管理部の持つ管理情報（圧縮ストリーム
数）を参照しながら行う、というものだったが、圧縮ス
トリーム管理部の側から処理制御部に対して、圧縮スト
リーム数が変動する毎に、その値を通知するというかた
ちにしてもよい。

【００６３】また、実施の形態３以外では、処理制御を
マクロブロック単位でおこなっていたが、実施の形態３
と同様にＧＯＰ毎に一度としてもよい。また、上記の４
つの実施の形態で説明した、復号処理制御の内容につい
ては、組み合わせての実施が可能である。組み合わせに
ついても、特定のビデオストリームのみを対象とする方
法、ストリーム毎に別々の制御を行う方法などが考えら
れる。画質的に最も影響の小さいと思われる高周波成分
の切り捨てのみ行うようにしてもよいし、色彩が重要で
ない画像に限って、色差信号のＡＣ成分の逆ＤＣＴ変換
処理停止の制御を行うようにしてもよい。さらに、操作
者とのインタフェイス手段を設けて、どの制御を行う
か、あるいは制御の組み合わせを、操作者の指定により
決定することにしてもよい。

【００６４】さらに、上記の実施例ではいずれも、各部
（可変長復号部、逆ＤＣＴ部）が処理内容制御部の指示
のもとに処理内容を変更していたが、処理内容制御部を
設けず、処理内容を変更するかどうかの判定は各部が独
自に行うようにしてもよい。その際には、処理対象のデ
ータとともに、判定に必要な情報（ストリーム数、閾
値、ピクチャ種類、ブロック種類）が各部に送出されて
くることが前提となる。

【００６５】

【発明の効果】以上の説明から明らかなように、本発明
のマルチメディア情報処理装置は、ＭＰＥＧストリーム
である圧縮ストリームを復号する復号手段と、前記復号
手段が復号したストリームを表示する表示手段とを少な
くとも備えるマルティメディア情報処理装置であって、
前記復号手段にかかる復号処理の負荷を計測する負荷計
測手段と、前記負荷計測手段の計測結果に応じて前記復
号手段の処理内容を制御する復号処理制御手段を有する
ことを特徴としているので、復号処理の負荷に応じて復
号処理野内容を制御して、マイクロプロセッサの負荷あ
るいはトラフィックの増大を抑え、復号ストリームの表
示段階における駒落ちの発生を防ぐことができる。

【００６６】制御の方法としては先ず、前記復号手段が
少なくとも周波数逆変換処理を行う周波数逆変換部を有
する場合に、前記復号処理制御手段が前記周波数逆変換
部に対し、ＰピクチャまたはＢピクチャに対する周波数
逆変換処理を実行させないように制御する方法があり、
これによれば、駒落ち発生の可能性がある場合は、Ｐま
たはＢピクチャの逆ＤＣＴ変換処理を行わないようにす
るので、その処理の分だけマイクロプロセッサの負荷を
減らすことができ、駒落ち発生の可能性を小さくでき
る。

【００６７】また、前記復号手段が、少なくとも可変長
復号処理を行う可変長復号部を有する場合に、前記復号
処理制御手段が前記可変長復号部に対し、各ブロック内
の周波数成分を所定数分のみ周波数の低いものから可変
長復号の後、次のブロックの検出まで可変長復号処理を
停止させるように制御すれば、可変長復号処理の処理量
を減ずることができ、その結果、マイクロプロセッサの
負荷を減らして駒落ち発生の可能性を小さくできる。

【００６８】さらに、前記復号手段が少なくとも周波数
逆変換処理を行う周波数逆変換部を有する場合に、前記
周波数逆変換部は、実行結果として得られる画素数が異
なる周波数逆変換処理実行用の異なった複数の演算式を
有し、前記復号処理制御手段が前記周波数逆変換部に対
し、前記負荷計測手段の計測する負荷の大きさに応じて
前記演算式から一つを選択して、この選択された演算式
によって周波数逆変換処理を実行させるよう制御すれ
ば、逆ＤＣＴ変換処理の行列演算の演算量が小さくなる
分マイクロプロセッサの処理負荷が小さくなるだけでな
く、復号結果の画素数が減る分、バスを通る復号ストリ
ームのデータ量も減るので、マイクロプロセッサの負荷
削減、バス上のトラフィック量削減の二つの点から、駒
落ち防止の効果がある。

【００６９】そして、前記復号手段が、少なくとも周波
数逆変換処理を行う周波数逆変換部を有する場合に、前
記復号処理制御手段が、前記周波数逆変換部に対し、色
差信号の逆周波数変換処理においては直流成分の逆周波
数を求めた段階で変換処理を打ち切り、前記直流成分の
逆周波数変換処理後の値で処理対象ブロックの全画素値
を設定するよう制御すれば、６４個の成分（画素）のう
ち１成分（画素）のみを変換処理で求め、この値を残り
６３成分（画素）に設定するので、ブロック全体に変換
処理を行う場合よりは、処理量が減り、マイクロプロセ
ッサの負荷が削減されて、駒落ち防止の効果がある。

【００７０】なお、前記負荷計測手段は、前記復号手段
が並行して復号処理を施す圧縮ストリーム数によって、
負荷の大きさを判定することができる。

【図面の簡単な説明】

【図１】本発明のマルチメディア情報処理装置の実施の
形態１における構成を示すブロック図である。

【図２】本発明のマルチメディア情報処理装置が処理す
るストリームデータの一例の構造を示す図である。

【図３】本実施の形態における複数圧縮ストリームデー
タの平行処理の模式図である。

【図４】圧縮ストリームデータの最小単位である１ブロ
ック分のデータの内容が復号処理によってどう変わって
行くかを示す図である。

【図５】同実施の形態における復号処理制御の動作を示
すフローチャートである。

【図６】本発明のマルチメディア情報処理装置の実施の
形態２における構成を示すブロック図である。

【図７】同実施の形態における可変長復号処理前後のデ
ータを示す図である。

【図８】本発明のマルチメディア情報処理装置の実施の
形態３における構成を示すブロック図である。

【図９】同実施の形態における逆ＤＣＴ変換処理結果の
模式図である。

【図１０】同実施の形態における復号処理制御の動作を
示すフローチャートである。

【図１１】本発明のマルチメディア情報処理装置の実施
の形態４における構成を示すブロック図である。

【図１２】同実施の形態における復号処理制御の動作を
示すフローチャートである。

【符号の説明】

１１０制御部１２０マルチタスク部１３０表示部１４０受信部１５０蓄積メディア部１６０圧縮データ格納部１７０その他ソフトウェア部１８０復号部１８１圧縮ストリーム制御部１８２可変長復号部１８３逆量子化部１８４逆ＤＣＴ部１８４ａ処理停止部１８４ｂダミーデータ送出部１８５動き補償予測部１８６復号ストリーム制御部１８７処理内容制御部１８７ａ判定部１８７ｂ逆ＤＣＴ制御部６００復号部６１０可変長復号部６１１カウンタ部６２０処理内容制御部６２２可変長復号制御部８００復号部８１０逆ＤＣＴ部８１１基底選択部８２０処理内容制御部８２１判定部８２２逆ＤＣＴ制御部１１１０逆ＤＣＴ部１１１１演算停止部１１２０処理内容制御部１１２２逆ＤＣＴ制御部

Claims

【特許請求の範囲】

【請求項１】動画を圧縮して得られる圧縮ストリーム
を復号する復号手段と、前記復号手段が復号したストリ
ームを表示する表示手段とを少なくとも備えるマルティ
メディア情報処理装置であって、前記復号手段にかかる復号処理の負荷を計測する負荷計
測手段と、前記負荷計測手段の計測結果に応じて前記復号手段の処
理内容を、復号処理量を低減させる形で制御する復号処
理制御手段を有することを特徴とするマルチメディア情
報処理装置。
【請求項２】前記復号手段は、周波数逆変換処理を行
う第１の周波数逆変換部を有し、前記復号処理制御手段は、前記第１の周波数逆変換部に
対し、ＰピクチャまたはＢピクチャに対する周波数逆変
換処理を実行させないように制御することを特徴とする
請求項１記載のマルチメディア情報処理装置。
【請求項３】前記復号手段は、可変長復号処理を行う
可変長復号部を有し、前記復号処理制御手段は、前記可変長復号部に対し、各
ブロック内の周波数成分を周波数の低いものから所定数
だけ可変長復号の後、次のブロックの検出まで可変長復
号処理を停止させるように制御することを特徴とする請
求項１または２のいずれかに記載のマルチメディア情報
処理装置。
【請求項４】前記復号手段は、周波数逆変換処理を行
う第２の周波数逆変換部を有し、前記第２の周波数逆変換部は、逆周波数変換処理を実行
するための異なった演算式を複数有し、前記演算式はそれぞれ結果として得られる画素数が異な
り、前記復号処理制御手段は、前記第２の周波数逆変換部に
対し、前記負荷計測部の計測した負荷の大きさに応じて
前記演算式を選択させ、この選択された演算式によって
周波数逆変換処理を実行させることを特徴とする請求項
１から請求項３のいずれかに記載のマルチメディア情報
処理装置。
【請求項５】前記復号手段は、周波数逆変換処理を行
う第３の周波数逆変換部を有し、前記復号処理制御手段は、前記第３の周波数逆変換部に
対し、色差信号の逆周波数変換処理においては直流成分
の画素値を求めた段階で変換処理を打ち切り、前記直流
成分の逆周波数変換処理後の値で処理対象ブロックの全
画素値を設定するよう制御することを特徴とする請求項
１から請求項４のいずれかに記載のマルチメディア情報
処理装置。
【請求項６】前記負荷計測手段は、前記復号手段が並
行して同時に復号処理を施す圧縮ストリームの数によっ
て、負荷を計測することを特徴とする、請求項１から請
求項５のいずれかに記載のマルチメディア情報処理装
置。