JP2002010271A - ビデオ符号化装置 - Google Patents

Abstract

(57)【要約】 【課題】 ピクチャ全体をスキップするか否かを判定す
るための特別のバッファを不要とするとともに、ピクチ
ャ全体をスキップしたときでも、表示順序が逆転しない
ビデオ符号化装置を提供する。 【解決手段】 ビデオ符号化装置の比較判定手段１２５
は、１画像データごとに、その画像データが符号化され
る前に、復号化装置の受信バッファの予測蓄積量とピク
チャタイプごとに設定された閾値とを比較する。比較判
定手段１２５は、受信バッファの予測蓄積量が閾値未満
の場合には、画像データの符号化処理をスキップすべき
と判定し、ＤＣＴ手段１１３に対して符号化処理を中止
させる。そして、比較判定手段１２５は、ＳＫＩＰピク
チャ格納メモリ１２６からスライス層の最初と最後を除
く残りのすべてのマクロブロックがスキップドマクロブ
ロックで構成されるオールスキップピクチャを出力させ
る。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、ビデオ符号化装置
に関し、特に、画像データの符号化をスキップして符号
量を調整するビデオ符号化装置に関する。

【０００２】

【従来の技術】ＭＰＥＧ規格に基づくビデオ符号化で
は、復号化装置の受信バッファのピクチャの蓄積量を予
測しながら、符号量の制御を行っている。これをＶＢＶ
（Ｖｉｄｅｏ Ｂｕｆｆｅｒｉｎｇ Ｖｅｒｉｆｉｅ
ｒ）モデルによる符号量制御という。

【０００３】図２０（ａ）は、受信バッファの予測蓄積
量の通常時の遷移を示す。同図に示すように、受信バッ
ファには、一定のレートでピクチャが入力される。そし
て、ＤＴＳ（Ｄｅｃｏｄｉｎｇ Ｔｉｍｅ Ｓｔａｍ
ｐ）で示される時刻に、１ピクチャが復号化のため受信
バッファから出力される。復号化装置がＮＴＳＣ方式の
表示部を有する場合、ＤＴＳは、１フレームを１ピクチ
ャに割り当てた場合には、１／３０秒ごとに、１フィー
ルドを１ピクチャに割り当てた場合には、１／６０秒ご
とに設定される。また、復号化装置がＰＡＬ方式の表示
部を有する場合、ＤＴＳは、１フレームを１ピクチャに
割り当てた場合には、１／２５秒ごとに、１フィールド
を１ピクチャに割り当てた場合には、１／５０秒ごとに
設定される。

【０００４】通常時は、図２０（ａ）に示すように、Ｄ
ＴＳ１で復号化されるピクチャのビット発生量がＤ１で
あるとすると、ＤＴＳ１では、受信バッファの予測蓄積
量は、Ｖ１からＶ１^*（＝Ｖ１−Ｄ１）に減少する。Ｖ
ｂＶモデルでは、受信バッファの予測蓄積量がオーバー
フローやアンダーフローを引き起こさないように符号量
が制御される。

【０００５】シーンチェンジなどの時点では、図２０
（ｂ）のように、ビット発生量の大きいピクチャが連続
することにより、受信バッファがアンダーフローするこ
とがある。すなわち、ＤＴＳ３で復号化されるピクチャ
のビット発生量がＤ３であるとすると、ＤＴＳ３では、
Ｖ３−Ｄ３＜０より、受信バッファの予測蓄積量が０未
満となる。これは、ＤＴＳ３で復号化されるピクチャ
が、まだ受信バッファに入力されていないことによる。
このような場合には、量子化スケールを大きくしてビッ
ト発生量を減少させることによりアンダーフローを回避
するようにしている。

【０００６】また、図２０（ｃ）に示すように、ビット
発生量の小さいピクチャが連続することにより、受信バ
ッファがオーバーフローすることがある。すなわち、受
信バッファの予測蓄積量がＤＴＳ３の復号化前では、Ｖ
３（＝Ｖ２^*＋Ｒ、ＲはＤＴＳ間隔（１ピクチャの復号
時間間隔）ごとに復号化装置の受信バッファに入力され
るビット量、言い換えると、ＤＴＳ間隔ごとに符号化装
置からの伝送されるビット量）となり、Ｖ３は、受信バ
ッファ容量を超えている。このような場合には、量子化
スケールを小さくしてビット発生量を増大させることに
よりオーバーフローを回避するようにしている。

【０００７】しかしながら、上述のようにアンダーフロ
ーを防止するために量子化スケールを大きくしてビット
発生量を極度に減少させた場合には、画質の劣化が生じ
てしまう。そのため、従来から量子化スケールの調整と
ともに、以下の方法が併用されている。第１の方法は、
いわゆるスキップドマクロブロックを用いる方法であ
る。ＭＰＥＧでは、１６×１６の画素ブロックであるマ
クロブロック単位で符号化処理が行われる。スキップド
マクロブロックとは、その位置では、参照画像と同一の
画像を表示すべき旨を定めた特別なコードからなるマク
ロブロックであり、データ量が極めて小さい。従って、
アンダーフローしそうな場合には、本来の画像の符号化
を行わずに、スキップドマクロブロックを送出するよう
にすればよい。

【０００８】しかし、この方法では、スキップドマクロ
ブロックでないマクロブロックの位置では、本来の画像
の部分が表示され、スキップドマクロブロックの位置で
は、参照している画像の部分が表示されることになり、
全体として整合しない画像となる。図２１（ａ）は、通
常時に表示される画面の例を示す。

【０００９】図２１（ｂ）は、スキップドマクロブロッ
クを用いた場合に表示される画面の例を示す。第２フレ
ームでは、上半分のマクロブロックはスキップドマクロ
ブロックでないマクロブロックが用いられたため本来の
第２フレームの画像部分が表示され、下半分のマクロブ
ロックはスキップドマクロブロックが用いられたため
に、第１フレームの画像部分が表示され、全体として整
合しない画像となる。

【００１０】第２の方法は、擬似画像データを符号化す
る方法である。擬似画像デ−タとは、その画素値が取り
得る範囲の中の中央値である画像データである。例え
ば、画素値を８ビットで表わす場合には、中央値は１２
８となる。ＭＰＥＧでは、画像データの画素値と中央値
との差分値が符号化されるので、画像値が中央値である
画像データの符号化データのデータ量は最小である。従
って、マクロブロックごとに、アンダーフローが起こり
そうな場合には、本来の符号化を行わずに、画素値が中
央値の画像データを符号化すればよい。

【００１１】しかし、この方法では、画素値を中央値と
した位置では、グレー色の画像が表示される。図２１
（ｃ）は、擬似画像を用いたときに表示される画面の例
を示す。第２フレームでは、上半部のマクロブロック
は、本来の画像符号化されたため、本来の第２フレーム
の画像部分が表示され、下半分のマクロブロックは、擬
似画像データを符号化したため、グレー色の画像が表示
され、全体として整合しない画像となる。

【００１２】ところで、特許２８７１３１６号には１フ
ィールド又は１フレームの画像データ全体の符号化をス
キップ（以下、ピクチャをスキップするという。）する
方法が記載されている。図２２は、特許２８７１３１６
号に記載されたビデオ符号化装置の構成を示す。このビ
デオ符号装置の概略を説明すると、入力された動画像デ
ータに対して、直交変換回路６等により符号化処理が行
われ、バッファメモリ２１にピクチャが蓄えられる。伝
送レート超過判定回路２４で伝送レートが一定値を超過
していると判定された場合には、ＳＫＩＰコード格納メ
モリ２２内のＳＫＩＰコードが出力され、伝送レートが
超過していないと判定された場合には、バッファメモリ
２０内のピクチャが出力される。

【００１３】以上のように、この方法によれば、スキッ
プする際には、ピクチャの一部のマクロブロックのみス
キップドマクロブロックとするのでなく、ピクチャ内の
スライス層の最初と最後を除いた残りのすべてのマクロ
ブロックをスキップドマクロブロックとする。これによ
り、復号化装置では、過去に復号化された画像の全体と
同一の画像が表示され、上述のような不整合な画像は表
示されないことになる。

【００１４】

【発明が解決しようとする課題】しかしながら、上述の
特許公報に記載された方法には、以下の問題がある。第
１の問題は、発生したピクチャ量が伝送レートを超過し
ているか否かを判定するために、図２２に示すような、
生成したピクチャを一時的に蓄えておくバッファメモリ
２０が必要となることである。すなわち、上述のよう
に、マクロブロックごとにスキップするか否かを判定す
る場合には、マクロブロック単位の符号化データを蓄積
するための小容量のバッファを備えればよかったが、こ
の方法では、ピクチャ全体でスキップするか否かを判定
するので、ピクチャ内のすべてのマクロブロックの符号
量を蓄えておくための大容量のバッファ容量が必要とな
る。

【００１５】第２の問題は、１フレームを１ピクチャに
割り当てている（フレーム構造）場合に、ピクチャをス
キップした場合には、インタレース走査方式で表示する
と、表示順序が逆転する場合があることである。図２３
（ａ）は、ピクチャをスキップしない通常時の表示画面
を示す。１ｔ、１ｂは、それぞれ、第１フレームのトッ
プフィールド、ボトムフィールドを表わす。フレーム構
造では、トップフィールドとボトムフィールドを併せた
１フレームを単位として符号化処理がなされる。この場
合、復号化装置では、１／３０秒ごとに、１フレームを
単位として復号化処理がなされる。インタレース方式で
表示するので、１／６０秒ごとに、フレーム内の各フィ
ールドが表示される。すなわち、１ｔ、１ｂ、２ｔ、２
ｂ、３ｔ、３ｂ、４ｔ、４ｂの順序で表示される。

【００１６】図２３（ｂ）は、ピクチャのスキップが発
生した場合の表示画面を示す。Ｂ（３）において、スキ
ップが発生した場合、Ｂ（３）に符号化されたフレーム
２では、Ｂ（３）が参照しているＩ（１）と同一の画像
が表示される。従って、フレーム２のトップフィールド
は、フレーム１のトップフィールドである１ｔと同じに
なり、フレーム２のボトムフィールドは、フレーム１の
ボトムフィールドである１ｂと同じになる。そして、イ
ンタレース方式で表示するために、１／６０秒ごとに、
１ｔ、１ｂ、１ｔ、１ｂ、３ｔ、３ｂ、４ｔ、４ｂの順
序で表示される。これにより、１ｂの後に１ｔが表示さ
れ、表示順序が逆転してしまう。

【００１７】そこで、本発明は、ピクチャ全体をスキッ
プするか否かを判定するための特別のバッファを不要と
するとともに、ピクチャ全体をスキップしたときでも、
表示順序が逆転しないビデオ符号化装置を提供すること
を目的とする。

【００１８】

【課題を解決するための手段】上記目的を達成するため
に、本発明は、復号化装置における受信バッファの蓄積
量を予測しながら、１フレーム又は１フィールドの画像
データを符号化するビデオ符号化装置であって、画像デ
ータを符号化する前に、当該画像データの符号化データ
の復号化時刻において受信バッファに蓄積されているで
あろうと予測される予測蓄積量と、所定の閾値とを比較
する比較手段と、予測蓄積量が閾値未満の場合には、前
記画像データの符号化を中止し、前記復号化時刻に受信
バッファから取出されるデータとして、前記画像データ
の符号化データの代わりに、過去に復号化された画像デ
ータと同一の画像データを表示すべき旨を定めたプロキ
シコードを用いるスキップ手段とを備えたことを特徴と
する。

【００１９】また、本発明は、１フレームの画像データ
をフレーム構造で符号化するビデオ符号化装置であっ
て、画像データを符号化する際に、出力バッファの蓄積
量又は復号化装置の受信バッファの予測蓄積量と所定の
基準値とを比較する比較手段と、前記蓄積量又は予測蓄
積量が所定の基準値に達したと判定された場合に、前記
画像データのフレーム構造での符号化を中止し、前記画
像データのトップフィールド及びボトムフィールドの符
号化データの代わりに、過去に復号化された画像データ
を構成するトップフィールド又はボトムフィールドと同
一である２つのフィールドを表示すべき旨を定めたプロ
キシコードを用いるスキップ手段とを備えたことを特徴
とする。

【００２０】

【発明の実施の形態】以下、本発明の実施の形態につい
て図面を用いて説明する。 ＜第１の実施形態＞本実施の形態は、ピクチャを生成す
る前に、ピクチャタイプごとの経験値に基づく予測符号
量が受信バッファの予測蓄積量を超えているか否かでピ
クチャをスキップするか否かを判定するビデオ符号化装
置に関する。 （ビデオ符号化装置の構成）図１は、本実施の形態に係
るビデオ符号化装置１００の構成を示す。ビデオ符号化
装置１００は、画面並び替え手段１１０と、ＤＣＴ手段
１１３と、量子化手段１１４と、レート制御手段１１５
と、可変長符号化手段１１６と、バッファ１１７と、逆
量子化手段１１９と、逆ＤＣＴ手段１２０と、ビデオメ
モリ１２２と、動き補償予測手段１２３と、加算器１１
１、１１２と、切替え器１１８と、受信バッファ蓄積量
予測手段１２４と、比較判定手段１２５と、ＳＫＩＰピ
クチャ格納メモリ１２６と、閾値設定手段１２７とから
構成される。

【００２１】画面並び替え手段１１０は、ピクチャタイ
プに合わせて画面を符号化する順序に並び替える。図２
（ａ）は、ビデオ画像のもともとの順序、従って、復号
化装置で表示される順序を示す。図２（ｂ）は、符号化
順序、従って、復号化装置に入力される順序を示す。Ｂ
ピクチャは、時間的に前後のＩ又はＰピクチャの画像を
用いて符号化を行うため、未来のＰピクチャを符号化し
た後で、符号化される。

【００２２】ＤＣＴ手段１１３は、マクロブロック単位
で離散コサイン変換（ＤＣＴ）演算を行い、ＤＣＴ係数
を出力する。ここで、Ｉ（Ｉｎｔｒａ ｃｏｄｅｄ）ピ
クチャについては、イントラ符号化モードでＤＣＴ演算
を行い、Ｐ（Ｐｒｅｄｉｃｔｉｖｅ ｃｏｄｅｄ）ピク
チャとＢ（Ｂｉｄｉｒｅｃｔｉｏｎａｌｌｙ ｐｒｅｄ
ｉｃｔｉｖｅ ｃｏｄｅｄ）ピクチャについては、マク
ロブロック単位でイントラ符号化モード又は動き補償予
測モードを選択してＤＣＴ演算を行う。イントラ符号化
モードの場合には、入力された原画像をそのままＤＣＴ
演算する。動き補償予測モードの場合には、原画像と動
き補償予測手段１２３によって得られる予測画像との差
分をＤＣＴ演算する。

【００２３】量子化手段１１４は、マクロブロック毎に
量子化スケールを変更させて、ＤＣＴ係数の量子化を行
う。可変長符号化手段１１６は、量子化されたＤＣＴ係
数を、動きベクトル、符号化予測モード情報とともに可
変長符号化して画像データの符号化データを生成する。

【００２４】バッファ１１７は、可変長符号化された画
像データの符号化データ又はオールスキップピクチャを
格納する。逆量子化手段１１９と、逆ＤＣＴ手段１２０
は、Ｉ又はＰピクチャの復号化画像については、動き補
償予測の参照画像として用いる必要があるため、量子化
されたＤＣＴ係数から、逆量子化、逆ＤＣＴを行って得
られる復号化画像を復元してビデオメモリ１２２に出力
する。

【００２５】ビデオメモリ１２２は、Ｉ又はＰピクチャ
の復号化画像を参照画像として格納する。動き補償予測
手段１２３は、Ｐ又はＢピクチャの符号化のために、ビ
デオメモリ１２２に格納された参照画像から動きベクト
ルを用いて予測画像を出力する。レート制御手段１５
は、受信バッファの予測蓄積量に応じて、量子化手段１
１４に対して量子化スケールの変更を指示する。すなわ
ち、レート制御手段１１５は、受信バッファの予測蓄積
量が一定量以上になれば量子化スケールを小さくするよ
うに、一定量以下となれば量子化スケールを大きくする
ように量子化手段１１４に指示する。

【００２６】ＳＫＩＰピクチャ格納メモリ１２６は、Ｐ
ピクチャ用とＢピクチャ用のオールスキップピクチャを
格納する。ここで、オールスキップピクチャとは、１ピ
クチャ内のスライス層の最初と最後を除いた残りのすべ
てのマクロブロックがスキップドマクロブロックで構成
されるようなピクチャをいう。Ｂピクチャ、Ｐピクチャ
の代わりには、それぞれ、スライス層の最初と最後を除
いた残りのすべてのマクロブロックがスキップドマクロ
ブロックからなるＢピクチャ、Ｐピクチャ（これらをそ
れぞれオールスキップＢピクチャ、オールスキップＰピ
クチャと呼ぶ。）が送出される。Ｉピクチャは、スキッ
プすることができない（マクロブロックをスキップドマ
クロブロックにできない。）ので、Ｉピクチャの代わり
には、オールスキップＰピクチャが送出される。これら
のオールスキップピクチャは、画像データの符号化デー
タの代わりに送出するもので、画像データの符号化デー
タのいわばプロキシコードである。

【００２７】受信バッファ蓄積量予測手段１２４は、１
ピクチャを出力するごとに、次のピクチャの復号化時刻
における復号前の受信バッファの予測蓄積量を算出す
る。図３（ａ）は、ピクチャをスキップしない通常時の
受信バッファの予測蓄積量を示す。ＤＴＳｎの時点での
復号前の受信バッファの予測蓄積量をＶＢＶ（ｎ）と
し、ＤＴＳｎの時点で復号化されるＢピクチャのビット
発生量をＤｂとし、ＤＴＳ間隔ごとの伝送ビット量をＲ
とすると、ＶＢＶ（ｎ＋１）＝ＶＢＶ（ｎ）−Ｄｂ＋Ｒ
が算出される。

【００２８】図３（ｂ）は、ピクチャをスキップしたと
きの受信バッファの予測蓄積量を示す。ＤＴＳｎの時点
での復号前の受信バッファの予測蓄積量をＶＢＶ（ｎ）
とし、ＤＴＳｎの時点で復号化されるオールスキップＢ
ピクチャのビット発生量をＤｂｓｋｉｐとし、ＤＴＳ間
隔ごとの符号化装置から伝送されるビット量をＲとする
と、ＶＢＶ（ｎ＋１）＝ＶＢＶ（ｎ）−Ｄｂｓｋｉｐ＋
Ｒが算出される。

【００２９】閾値設定手段１２７は、ピクチャタイプ
（Ｉ、Ｐ、Ｂ１、Ｂ２ピクチャ）ごとに、それぞれ閾値
（Ｔｉ、Ｔｐ、Ｔｂ１、Ｔｂ２）を設定する。図４は、
閾値の設定例を示す。次式のように、ピクチャタイプご
とに経験的に知られている符号量（予測符号量）Ｅｉ、
Ｅｐ、Ｅｂが、それぞれ閾値Ｔｉ、Ｔｐ、Ｔｂ１、Ｔｂ
２に設定される。 Ｔｉ＝Ｅｉ Ｔｐ＝Ｅｐ Ｔｂ１＝Ｅｂ Ｔｂ２＝Ｅｂ 本実施の形態では、画像データの解像度が７２０画素×
４８０画素の場合の最適な値として経験的に知られてい
る、Ｅｉ＝４００ｋｂｉｔ、Ｅｐ＝２００ｋｂｉｔ、Ｅ
ｂ＝１６０ｋｂｉｔを用いるものとする。また、画像デ
ータの解像度と、予測符号量はほぼ比例関係を有するの
で、解像度が上記と異なる場合でも、解像度に比例して
予測符号量を算出すればよい。

【００３０】比較判定手段１２５は、１つの画像データ
ごとに、その画像データが符号化される前に受信バッフ
ァの予測蓄積量ＶＢＶと閾値の大きさとを比較して、画
像の符号化処理をスキップするか否かを判定する。すな
わち、比較判定手段１２５は、その画像をＩピクチャと
して符号化する場合にはＶＢＶ＜Ｔｉならスキップする
と判定し、その画像をＰピクチャとして符号化する場合
にはＶＢＶ＜Ｔｐならスキップすると判定し、その画像
をＢ１ピクチャとして符号化する場合にはＶＢＶ＜Ｔｂ
１ならスキップすると判定し、その画像をＢ２ピクチャ
として符号化する場合にはＶＢＶ＜Ｔｂ２ならスキップ
すると判定する。

【００３１】図５は、ピクチャがスキップされる場合の
例を示す。図５（ａ）では、ＶＢＶ＜Ｔｉにより、ＤＴ
ＳｎにおいてＩピクチャをスキップする。図５（ｂ）で
は、ＶＢＶ＜Ｔｂ１により、ＤＴＳｎ＋１においてＢ１
ピクチャをスキップする。

【００３２】図５（ｃ）では、ＶＢＶ＜Ｔｂ２により、
ＤＴＳｎ＋２においてＢ２ピクチャをスキップする。図
５（ｄ）では、ＶＢＶ＜Ｔｐにより、ＤＴＳｎ＋３にお
いてＰピクチャをスキップする。比較判定手段１２５
は、ピクチャをスキップすると判定した場合には、ＤＣ
Ｔ手段１１３に対して符号化処理を中止させるととも
に、ＳＫＩＰピクチャ格納メモリ１２６からピクチャタ
イプに応じたオールスキップピクチャを出力させる。

【００３３】図６（ａ）は、復号化装置で通常表示され
る画面の例を示す。第１、第２、第３、第４フレーム
で、それぞれ、Ｉ（１）、Ｂ（３）、Ｂ（４）、Ｐ
（２）の復号化画像が表示される。（）内の数字は符号
化する順序を示す。図６（ｂ）は、ピクチャをスキップ
したときに復号化装置で表示される画面の例を示す。第
２フレームのＢ（３）ピクチャをスキップしたときに、
Ｂ（３）は、Ｉ（１）とＰ（２）の復号化画像を参照画
像としているが、第２フレームでは、より表示順序が近
いＩ（１）の復号化画像が表示される。 （動作）次に、本実施の形態に係るビデオ符号化装置の
スキップ処理に関連する動作について説明する。

【００３４】図７は、ビデオ符号化装置の動作手順を示
すフロチャートである。まず、閾値設定手段１２７が、
ピクチャタイプごとにスキップ判定のための閾値Ｔｉ、
Ｔｐ、Ｔｂ１、Ｔｂ２を設定する（ステップＳ５０
１）。次に、原画像をＩピクチャとして符号化する際に
は、比較判定手段１２５が、受信バッファの予測蓄積量
ＶＢＶと閾値Ｔｉとの大きさを比較判定する。ＶＢＶ≧
Ｔｉの場合には、ＤＣＴ手段１１３、量子化手段１１４
及び可変長符号化手段１１６により原画像がＩピクチャ
として符号化処理が行われる（ステップＳ５０２、Ｓ５
０３、Ｓ５０４）。

【００３５】そして、受信バッファ蓄積量予測手段１２
４が、生成したＩピクチャのビット発生量とＤＴＳ時間
間隔ごとの伝送ビット量Ｒとにより、次のＤＴＳ時点で
の復号化前の受信バッファの予測蓄積量ＶＢＶを算出す
る（ステップＳ５０５）。そして、次の画像データがあ
る場合には、処理を続行し、次の画像データがないなら
処理を終了する（ステップＳ５０６）。

【００３６】一方、ステップＳ５０３において、比較判
定手段１２５が、ＶＢＶ＜Ｔｉと判定した場合には、比
較判定手段１２５は、さらに、ＶＢＶとＴｐとの大きさ
を比較する。ＶＢＶ≧Ｔｐの場合には、原画像がＰピク
チャとして符号化処理がなされ、ＶＢＶ＜Ｔｐの場合に
は、ＳＫＩＰピクチャ格納メモリ１２６から、オールス
キップＰピクチャが出力される。そして、受信バッファ
蓄積量予測手段１２４が、オールスキップＰピクチャの
ビット発生量と、ＤＴＳ時間間隔ごとの伝送ビット量Ｒ
とにより、次のＤＴＳ時点での復号化前の受信バッファ
の予測蓄積量ＶＢＶを算出する（ステップＳ５０８、Ｓ
５０９、Ｓ５１０、Ｓ５０５）。

【００３７】また、原画像をＰピクチャとして符号化す
る際には、比較判定手段１２５が、受信バッファの予測
蓄積量ＶＢＶと閾値Ｔｐとの大きさを比較判定する。Ｖ
ＢＶ≧Ｔｐの場合には、通常どおり原画像がＰピクチャ
として符号化処理がなされ、ＶＢＶ＜Ｔｐの場合には、
ＳＫＩＰピクチャ格納メモリ１２６から、オールスキッ
プＰピクチャが出力される。そして、受信バッファ蓄積
量予測手段１２４が、生成したＰピクチャのビット発生
量又はオールスキップＰピクチャのビット発生量と、Ｄ
ＴＳ時間間隔ごとの伝送ビット量Ｒとにより、次のＤＴ
Ｓ時点での復号化前の受信バッファの予測蓄積量ＶＢＶ
を算出する（ステップＳ５０７、Ｓ５０８、Ｓ５０９、
Ｓ５１０、Ｓ５０５）。

【００３８】また、原画像をＢ１ピクチャとして符号化
する際には、比較判定手段１２５が、受信バッファの予
測蓄積量ＶＢＶと閾値Ｔｂ１との大きさを比較判定す
る。ＶＢＶ≧Ｔｂ１の場合には、通常どおり原画像がＢ
ピクチャとして符号化処理がなされ、ＶＢＶ＜Ｔｂ１の
場合には、ＳＫＩＰピクチャ格納メモリ１２６から、オ
ールスキップＢピクチャが出力される。そして、受信バ
ッファ蓄積量予測手段１２４が、生成したＢピクチャの
ビット発生量又はオールスキップＢピクチャのビット発
生量と、ＤＴＳ時間間隔ごとの伝送ビット量Ｒとによ
り、次のＤＴＳ時点での復号化前の受信バッファの予測
蓄積量ＶＢＶを算出する（ステップＳ５１１、Ｓ５１
２、Ｓ５１３、Ｓ５１４、Ｓ５０５）。

【００３９】また、原画像をＢ２ピクチャとして符号化
する際には、比較判定手段１２５が、受信バッファの予
測蓄積量ＶＢＶと閾値Ｔｂ２との大きさを比較判定す
る。ＶＢＶ≧Ｔｂ２の場合には、通常どおり原画像がＢ
ピクチャとして符号化処理がなされ、ＶＢＶ＜Ｔｂ２の
場合には、ＳＫＩＰピクチャ格納メモリ１２６から、オ
ールスキップＢピクチャが出力される。そして、受信バ
ッファ蓄積量予測手段１２４が、生成したＢピクチャの
ビット発生量又はオールスキップＢピクチャのビット発
生量と、ＤＴＳ時間間隔ごとの伝送ビット量Ｒとによ
り、次のＤＴＳ時点での復号化前の受信バッファの予測
蓄積量ＶＢＶを算出する（ステップＳ５１１、Ｓ５１
５、Ｓ５１３、Ｓ５１４、Ｓ５０５）。 （まとめ）以上のように、本実施の形態に係るビデオ符
号化装置では、一旦ピクチャを生成してから、そのビッ
ト発生量が受信バッファの予測蓄積量を超えているか否
かでピクチャをスキップするか否かを判定するのではな
く、ピクチャを生成する前に、ピクチャタイプごとの経
験値に基づく予測符号量が受信バッファの予測蓄積量を
超えているか否かでピクチャをスキップするか否かを判
定するので、生成したピクチャをスキップするか否かの
判定のために一時的に蓄えておく特別のバッファを不要
にすることができる。

【００４０】以上、第１の実施形態について説明した
が、本発明は上記の実施形態に限定されないことは勿論
である。すなわち、以下のような変形も本発明に含まれ
るのは勿論である。 （変形例１）本実施の形態では、閾値として固定値を用
いたが、原画像ごとに、その複雑性に応じて閾値を決め
るようにしてもよい。

【００４１】Ｐ_k（ｋ＝１〜６４）を８×８画素のブロ
ック内の原画像の画素値とする。ブロック内の平均値Ｅ
（Ｐ_k）とすると、Ｅ（Ｐ_k）＝１／６４×ΣＰ_kとな
る。また、分散値をＶ（Ｐ_k）とすると、Ｖ（Ｐ_k）＝１
／６４×Σ（Ｐ_k−Ｅ（Ｐ_k））²となる。

【００４２】マクロブロックｊ内に含まれる８ブロック
（フレームＤＣＴモードにおける４ブロックとフィール
ドＤＣＴモードにおける４ブロック）のＶ（Ｐ_k）の最
小値をＶＡＲ_jとすると、ＶＡＲ_j＝ＭＩＮ［Ｖ
（Ｐ_k）］となる。マクロブロックｊのアクティビティ
をａｃｔ_jとすると、ａｃｔ_j＝１＋ＶＡＲ_jとなる。

【００４３】原画像のアクティビティＡＣＴをすべての
マクロブロックのアクティビティの総和とすると、ＡＣ
Ｔ＝Σａｃｔ_jとなる。アクティビティは、原画像の画
素値の分散量を反映したもので、アクティビティが大き
いと、原画像のフレーム内での複雑性が高いので、ピク
チャのビット発生量が多いと考えられる。従って、アク
ティビティが大きいほど、閾値を高く設定すればよいと
考えることができる。

【００４４】また、分散量に基づいて、閾値を設定する
ようにしてもよい。例えば、ＶＡＲ＝ΣＶＡＲ_jとし、
ＶＡＲが大きいと、閾値を高く、ＶＡＲが小さいと閾値
を低く設定するようにしてもよい。また、分散量とし
て、ブロックごとの分散でなく、画像全体の画素の分散
を用いてもよい。すなわち、画像全体の画素数をＮと
し、Ｐ_l（ｌ＝１〜Ｎ）を原画像の画素値とすると、画
像全体の画素の平均値Ｅは、Ｅ＝１／Ｎ×ΣＰ_lとな
り、画像全体の分散値Ｖは、Ｖ＝１／Ｎ×Σ（Ｐ_l−Ｅ
（Ｐ_l））²となる。そして、Ｖが大きいと、閾値を高
く、Ｖが小さいと閾値を低く設定するようにしてもよ
い。 （変形例２）本実施の形態では、ピクチャタイプごとの
予測符号量が受信バッファの予測蓄積量を超えている場
合には、ピクチャタイプに係らず、ピクチャをスキップ
するものとした。しかし、ＩピクチャやＰピクチャの復
号化画像は、他のピクチャの参照画像として用いられる
ので、後述するように、ＩピクチャやＰピクチャでのス
キップは、他のピクチャにも影響を与える。従って、ピ
クチャタイプに応じて、ピクチャをスキップするか、又
は量子化スケールを大きくしたり、ＤＣＴ後のＤＣ成分
のみを用いたり、擬似画像データを符号化したりするよ
うな符号量を抑制した符号化を行うかのいずれかを行う
ものとしてもよい。

【００４５】例えば、予測符号量が受信バッファの予測
蓄積量を超えているときには、Ｂピクチャの場合にのみ
ピクチャのスキップを行い、Ｉ又はＰピクチャの場合は
符号量を抑制した符号化を行うものとしてもよい。ある
いは、Ｂ又はＰピクチャの場合にのみピクチャのスキッ
プを行い、Ｉピクチャの場合は符号量を抑制した符号化
を行うものとしてもよい。 （変形例３）本実施の形態では、アンダーフローをおお
かた防止できるが、アンダーフローを完全に防止するた
めに、予測符号量が受信バッファの予測蓄積量よりも大
きいときには、前述したようにマクロブロック単位で符
号化後に、そのマクロブロックの符号量と受信バッファ
の蓄積量とを比較して、アンダーフローするような場合
には、そのマクロブロックをスキップドマクロブロック
とするようにしてもよい。 ＜第２の実施形態＞本実施の形態は、Ｐ又はＩピクチャ
よりも、Ｂピクチャでスキップが起こりやすくしたビデ
オ符号化装置に関する。 （構成）本実施の形態に係るビデオ符号化装置の構成
は、概ね第１の実施形態に係るビデオ符号化装置と共通
するが、閾値設定手段１２７による閾値の設定の仕方が
異なる。以下、閾値設定手段１２７による閾値の設定方
法について説明する。

【００４６】閾値設定手段１２７は、ピクチャタイプ
（Ｉ、Ｐ、Ｂ１、Ｂ２ピクチャ）ごとに、それぞれ閾値
（Ｔｉ、Ｔｐ、Ｔｂ１、Ｔｂ２）を設定する。図８は、
閾値の設定例を示す。次式のように、ＴｉとＴｐは、第
１の実施形態と同様に予測符号量Ｅｉ、Ｅｐに設定され
る。 Ｔｉ＝Ｅｉ Ｔｐ＝Ｅｐ Ｉピクチャ又はＰピクチャでスキップした場合には、ス
キップしたピクチャを参照しているＢピクチャも、スキ
ップしたピクチャと同一の画面になる。この場合には、
例えば、Ｍ（Ｉ又はＰピクチャの出現周期）＝３のとき
には、４フレームが連続して同一の画面になる。従っ
て、できるだけＰピクチャの直前のＢピクチャでスキッ
プが起こるように、Ｂピクチャの閾値を第１の実施形態
よりも大きく設定する。

【００４７】図９は、Ｐピクチャ直前のＢピクチャの閾
値を説明する図である。ＤＴＳｎ＋１の時点でのＶＢＶ
（ｎ＋１）とすると、ＤＴＳｎ＋２の時点では、ＶＢＶ
（ｎ＋２）＝ＶＢＶ（ｎ＋１）−Ｅｂ＋Ｒとなる。ＶＢ
Ｖ（ｎ＋２）≧Ｔｐなら、ＤＴＳｎ＋２の時点では、Ｐ
ピクチャのスキップは起こらないと予測できる。式変形
すると、ＶＢＶ（ｎ＋２）＝ＶＢＶ（ｎ＋１）−Ｅｂ＋
Ｒ≧Ｔｐ＝Ｅｐとなり、ＶＢＶ（ｎ＋１）≧Ｅｂ＋（Ｅ
ｐ−Ｒ）の式を満たす必要がある。

【００４８】また、実施の形態１と同様に、ＶＢＶ（ｎ
＋１）≧Ｅｂであることが必要であるから、結局、ＶＢ
Ｖ（ｎ＋１）≧ＭＡＸ（Ｅｂ、Ｅｂ＋（Ｅｐ−Ｒ））の
式を満たす必要がある。従って、閾値Ｔｂ２＝ＭＡＸ
（Ｅｂ、Ｅｂ＋（Ｅｐ−Ｒ））とし、ＤＴＳｎ＋１の時
点で、ＶＢＶがＴｂ２未満の場合には、Ｂ２ピクチャを
スキップすることにし、予測上Ｐピクチャのスキップが
起こらないようにすることができる。

【００４９】これは、（Ｅｐ−Ｒ）≧０のときには、図
９に示すように、新たな閾値Ｔｂ２は、元のＴｂ２に
（Ｅｐ−Ｒ）（図９のに相当する量。）を加えたこと
になる。また、（Ｅｐ―Ｒ）＜０のときには、閾値Ｔｂ
２は、元のＴｂ２のままである。同様に、ＤＴＳｎの時
点で、ＶＢＶ（ｎ）とすると、ＤＴＳｎ＋２の時点で
は、ＶＢＶ（ｎ＋２）＝ＶＢＶ（ｎ）−Ｅｂ＋Ｒ―Ｅｂ
＋Ｒ＝ＶＢＶ（ｎ）−Ｅｂ−（Ｅｂ−２Ｒ）となる。Ｖ
ＢＶ（ｎ＋２）≧Ｔｐなら、ＤＴＳｎ＋２の時点では、
Ｐピクチャのスキップは起こらないと予測できる。式変
形すると、ＶＢＶ（ｎ＋２）＝ＶＢＶ（ｎ）−Ｅｂ―
（Ｅｂ―２Ｒ）≧Ｔｐ＝Ｅｐとなり、ＶＢＶ（ｎ）≧Ｅ
ｂ＋（Ｅｐ＋Ｅｂ―２Ｒ）＝Ｅｂ＋（Ｅｐ−Ｒ）＋（Ｅ
ｂ−Ｒ）＝Ｅｂ＋（Ｔｂ２−Ｒ）の式を満たす必要があ
る。

【００５０】また、実施の形態１と同様に、ＶＢＶ
（ｎ）≧Ｅｂであることが必要であるから、結局、ＶＢ
Ｖ（ｎ）≧ＭＡＸ（Ｅｂ、Ｅｂ＋（Ｔｂ２−Ｒ））の式
を満たす必要がある。従って、閾値Ｔｂ１＝ＭＡＸ（Ｅ
ｂ、Ｅｂ＋（Ｔｂ２−Ｒ））とし、ＤＴＳｎの時点で、
ＶＢＶがＴｂ１未満の場合には、Ｂ１ピクチャをスキッ
プすることにし、予測上Ｐピクチャのスキップが起こら
ないようにすることができる。また、これは、（Ｔｂ２
−Ｒ）≧０のときには、図９に示すように、新たな閾値
Ｔｂ１は、もとのＴｂ１に（Ｅｐ−Ｒ）（図９のに相
当する量）と（Ｅｂ−Ｒ）（図９のに相当する量）と
を加えたことになる。また、（Ｔｂ２―Ｒ）＜０のとき
には、閾値Ｔｂ１は、元のＴｂ１のままである。

【００５１】Ｉピクチャ直前のＢピクチャの閾値につい
てもＥｐがＥｉに代るだけで、その他は同様である。Ｉ
ピクチャとＰピクチャとを区別するために、Ｐピクチャ
直前のＢ１ピクチャの閾値をＴｂ２（ｐ）、Ｐピクチャ
直前のＢ２ピクチャの閾値をＴｂ１（ｐ）、Ｉピクチャ
直前のＢ２ピクチャの閾値をＴｂ２（ｉ）、Ｉピクチャ
直前のＢ２ピクチャの閾値をＴｂ１（ｉ）とすると、以
下の式が成立する。

【００５２】 Ｔｂ２（ｐ）＝ＭＡＸ（Ｅｂ、Ｅｂ＋（Ｅｐ−Ｒ）） Ｔｂ１（ｐ）＝ＭＡＸ（Ｅｂ、Ｅｂ＋（Ｔｂ２（ｐ）−
Ｒ）） Ｔｂ２（ｉ）＝ＭＡＸ（Ｅｂ、Ｅｂ＋（Ｅｉ−Ｒ）） Ｔｂ１（ｉ）＝ＭＡＸ（Ｅｂ、Ｅｂ＋（Ｔｂ２（ｉ）−
Ｒ）） 図１０（ａ）は、第１の実施形態における閾値での受信
バッファの予測蓄積量の遷移を示す。ＤＴＳｎ、ＤＴＳ
ｎ＋１の時点では、受信バッファの予測蓄積量ＶＢＶが
閾値Ｔｂ１、Ｔｂ２以上より、Ｂピクチャのスキップが
発生せずに、ＤＴＳｎ＋２の時点では、ＶＢＶが閾値Ｔ
ｐ未満となるので、Ｐピクチャのスキップが発生する。

【００５３】図１０（ｂ）は、本実施の形態における閾
値での受信バッファの予測蓄積量の遷移を示す。同図に
示すように、閾値Ｔｂ１が高く設定されたため、ＤＴＳ
ｎの時点でＢ１ピクチャのスキップが発生する。これに
より、受信バッファの予測蓄積量ＶＢＶがＢ１ピクチャ
のビット発生量とオールスキップＢピクチャ量の差分
（Ｄｂ１−Ｄｓｋｉｐ）だけ増加し、ＤＴＳｎ＋２の時
点では、受信バッファの予測蓄積量ＶＢＶが閾値Ｔｐ以
上となるので、Ｐピクチャのスキップは発生しない。

【００５４】図１１（ａ）は、復号化装置で通常表示さ
れる画面の例を示す。第１、第２、第３、第４フレーム
で、それぞれ、Ｉ（１）、Ｂ（３）、Ｂ（４）、Ｐ
（２）の復号化画像が表示される。（）内の数字は符号
化する順序を示す。図１１（ｂ）は、第１の実施形態の
閾値でピクチャのスキップを判定した場合に、復号化装
置で表示される画面の例を示す。第１の実施形態で設定
される閾値では、Ｐピクチャよりも前のＢピクチャでス
キップしやすく閾値が設定されていないので、Ｐピクチ
ャでスキップが発生しやすい。この場合、Ｐ（２）ピク
チャがスキップされたことにより、Ｐ（２）は、Ｉ
（１）の復号化画像を参照画像としているため、第４フ
レームでは、Ｉ（１）の復号化画像が表示される。ま
た、Ｂ（３）、Ｂ（４）は、Ｐ（２）を参照しているの
で、第２、３フレームでもＩ（１）の復号化画像が表示
される。

【００５５】図１１（ｃ）は、本実施の形態の閾値でピ
クチャのスキップを発生した場合に、復号化装置で表示
される画面の例を示す。本実施の形態で設定される閾値
では、Ｐピクチャよりも前のＢピクチャでスキップしや
すく閾値が設定されているので、Ｂピクチャでスキップ
が発生しやすい。この場合、第２フレームのＢ（３）ピ
クチャがスキップされたことにより、Ｂ（３）は、Ｉ
（１）とＰ（２）の復号化画像を参照画像としている
が、第２フレームでは、より表示順序が近いＩ（１）の
復号化画像が表示される。Ｂ（３）ピクチャを参照して
いるピクチャがないので、他のピクチャの復号化画像が
通常どおり表示される。

【００５６】図１１（ｄ）は、本実施の形態の閾値でピ
クチャのスキップを発生した場合に、復号化装置で表示
される画面の例を示す。この場合、第３フレームのＢ
（４）ピクチャがスキップされたことにより、Ｂ（４）
は、Ｉ（１）とＰ（２）の復号化画像を参照画像として
いるが、第３フレームでは、より表示順序が近いＰ
（２）の復号化画像が表示される。Ｂ（４）ピクチャを
参照しているピクチャがないので、他のピクチャの復号
化画像が通常どおり表示される。 （動作）本実施の形態のビデオ符号化装置の動作は、図
７に第１の実施形態の動作とステップＳ５０１の処理内
容が異なるだけで、その他は共通する。従って、処理手
順の説明は、省略する。 （まとめ）以上のように、本実施の形態に係るビデオ符
号化装置によれば、Ｐピクチャでスキップが起こらない
という予測条件を満たすように、Ｂピクチャの閾値を高
く設定するので、通常では、Ｐピクチャでスキップが起
こるような場合でも、直前のＢピクチャで先にスキップ
することにより、Ｐピクチャのスキップを回避すること
ができる。 （変形例１）本実施の形態のビデオ符号化装置は、Ｐピ
クチャでのスキップを回避するという、第１の実施形態
にはない独自の効果を有するので、本実施の形態のビデ
オ符号化装置を特許２８７１３１６号に記載されている
ようにピクチャを生成した後一旦バッファメモリに蓄積
するように構成しても、特許公報と異なる効果がある。

【００５７】すなわち、画像データを符号化してピクチ
ャを生成し、そのピクチャを一旦バッファメモリに蓄積
し、そのピクチャのビット発生量に基づいて、以下のよ
うにＰピクチャでのスキップを避けるような閾値を設定
して、スキップするか否かを判定するものとしてもよ
い。画像データがＩピクチャに符号化された場合の閾値
Ｔｉは、そのＩピクチャのビット発生量をＤｉとする
と、次式に設定する。 Ｔｉ＝Ｄｉ また、画像データがＰピクチャに符号化された場合の閾
値Ｔｐは、そのＰピクチャのビット発生量をＤｐとする
と、次式に設定する。

【００５８】Ｔｐ＝Ｄｐ そして、画像データがＩピクチャ直前のＢピクチャに符
号化された場合の閾値Ｔｂ（ｉ）は、そのＢピクチャの
ビット発生量をＤｂとし、Ｉピクチャの予測符号量をＥ
ｉとし、１ピクチャの復号時間間隔当りの伝送ビット量
をＲとすると、Ｉピクチャでのスキップを避けるため
に、次式に設定する。

【００５９】 Ｔｂ（ｉ）＝ＭＡＸ（Ｄｂ、Ｄｂ＋（Ｅｉ−Ｒ）） 画像データがＰピクチャ直前のＢピクチャに符号化され
た場合の閾値Ｔｂ（ｐ）は、そのＢピクチャのビット発
生量をＤｂとし、Ｐピクチャの予測符号量をＥｐとし、
１ピクチャの復号時間間隔当りの伝送ビット量をＲとす
ると、Ｐピクチャでのスキップを避けるために、次式に
設定する。

【００６０】 Ｔｂ（ｐ）＝ＭＡＸ（Ｄｂ、Ｄｂ＋（Ｅｐ−Ｒ）） （変形例２）図１２は、その他の閾値の設定例を示す。
Ｔｉ、Ｔｐ、Ｔｂ２（ｐ）、Ｔｂ２（ｉ）は、次式のよ
うに、第２の実施形態と同様の値が設定される。

【００６１】Ｔｉ＝Ｅｉ Ｔｐ＝Ｅｐ Ｔｂ２（ｐ）＝ＭＡＸ（Ｅｂ、Ｅｂ＋（Ｅｐ−Ｒ）） Ｔｂ２（ｉ）＝ＭＡＸ（Ｅｂ、Ｅｂ＋（Ｅｉ−Ｒ）） 第２の実施形態では、上述のようにＢ１ピクチャの閾値
が高く設定されるので、スキップが発生しやすい。しか
しながら、Ｂ１、Ｂ２、Ｐピクチャの実際のビット発生
量が予測量よりも小さい場合には、Ｂ１ピクチャでスキ
ップしなくても、Ｐピクチャのスキップが起こらない場
合がある。従って、できるだけＰピクチャ直前のＢ２ピ
クチャの時まで待って、スキップするか否かを確かめた
方が無用なスキップを避ける点で望ましい。

【００６２】一方、Ｂ２ピクチャの時まで待って、スキ
ップすると判定したとしても、受信バッファの予測蓄積
量がかなり少ない場合には、Ｂ２ピクチャをスキップし
ただけでは、Ｐピクチャのスキップを回避することがで
きない場合もある。従って、Ｂ１ピクチャは、Ｂ２ピク
チャでスキップしたとしても、なおかつ、Ｐピクチャで
スキップが起こる場合に限り、スキップすることとし、
そのためのＢ１ピクチャの閾値を設定する。

【００６３】図１３は、Ｐピクチャ直前のＢピクチャの
閾値を説明する図である。ＤＴＳｎの時点で、ＶＢＶ
（ｎ）とすると、ＤＴＳｎ＋２の時点では、ＶＢＶ（ｎ
＋２）＝ＶＢＶ（ｎ）−Ｅｂ＋Ｒ―Ｄｂｓｋｉｐ＋Ｒ＝
ＶＢＶ（ｎ）−Ｅｂ−（Ｄｂｓｋｉｐ−２Ｒ）となる。
ここで、Ｄｂｓｋｉｐとは、オールスキップＢピクチャ
のビット発生量である。ＶＢＶ（ｎ＋２）≧Ｔｐなら、
ＤＴＳｎ＋２の時点では、Ｐピクチャのスキップは起こ
らないことになる。式変形すると、ＶＢＶ（ｎ＋２）＝
ＶＢＶ（ｎ）−Ｅｂ―（Ｄｂｓｋｉｐ―２Ｒ）≧Ｔｐ＝
Ｅｐとなり、ＶＢＶ（ｎ）≧Ｅｂ＋（Ｅｐ＋Ｄｂｓｋｉ
ｐ―２Ｒ）＝Ｅｂ＋（Ｅｐ−Ｒ）＋（Ｄｂｓｋｉｐ−
Ｒ）＝Ｄｂｓｋｉｐ＋（Ｔｂ２−Ｒ）の式を満たす必要
がある。

【００６４】また、実施の形態１と同様に、ＶＢＶ
（ｎ）≧Ｅｂであることが必要であるから、結局、ＶＢ
Ｖ（ｎ）≧ＭＡＸ（Ｅｂ、Ｄｂｓｋｉｐ＋（Ｔｂ２−
Ｒ））の式を満たす必要がある。従って、閾値Ｔｂ１＝
ＭＡＸ（Ｅｂ、Ｄｂｓｋｉｐ＋（Ｔｂ２―Ｒ））とし、
ＤＴＳｎの時点で、ＶＢＶがＴｂ１未満の場合には、Ｂ
１ピクチャをスキップすることにし、予測上Ｐピクチャ
のスキップが起らないようにすることができる。

【００６５】これは、Ｄｂｓｋｉｐ＋（Ｔｂ２―Ｒ）≧
Ｅｂのときには、図１３に示すように、新たな閾値Ｔｂ
１は、もとのＴｂ１に（Ｅｐ−Ｒ）（図１３のに相当
する量）を加え、（Ｒ−Ｄｂｓｋｉｐ）（図１３のに
相当する量）を減じたことになる。また、Ｄｂｓｋｉｐ
＋（Ｔｂ２―Ｒ）＜Ｅｂのときには、閾値Ｔｂ１は、元
のＴｂ１のままである。

【００６６】Ｉピクチャ直前のＢピクチャの閾値につい
てもＥｐがＥｉに代るだけで、その他は同様である。従
って、以下の式が成立する。 Ｔｂ１（ｐ）＝ＭＡＸ（Ｅｂ、Ｄｂｓｋｉｐ＋（Ｔｂ２
（ｐ）−Ｒ）） Ｔｂ１（ｉ）＝ＭＡＸ（Ｅｂ、Ｄｂｓｋｉｐ＋（Ｔｂ２
（ｉ）−Ｒ）） ＜第３の実施形態＞本実施の形態は、１フレームを１ピ
クチャに割り当てている（フレーム構造）場合に、画像
データの符号化をスキップした場合において、インタレ
ース走査方式で表示しても、表示順序が逆転することが
ないようなビデオ符号化装置に関する。 （構成）本実施の形態に係るビデオ符号化装置の構成
は、概ね共通する。以下、異なる点について説明する。

【００６７】画面並び替え手段は、フレーム単位で画像
データの並び替えを行う。ＤＣＴ手段１１３は、フレー
ム単位の画像データの符号化を行っている。比較判定手
段１２５は、第１の実施形態と同様に、受信バッファの
予測蓄積量が閾値未満の場合には、ＤＣＴ手段１１３に
次のフレームの画像データの符号化処理を中止させ、Ｓ
ＫＩＰピクチャ格納メモリ１２６からオールスキップピ
クチャを出力させる。

【００６８】ＳＫＩＰピクチャ格納メモリに、フォワー
ド（表示順序が先）のボトムフィールド又はバックワー
ド（表示順序が後）のトップフィールドを参照先とする
フィールド構造用のオールスキップピクチャＰピクチャ
及びオールスキップＢピクチャを格納する。これらのオ
ールスキップピクチャの中で、スキップした画像データ
のフィールドに表示順序が最も近いフィールドを参照先
とするものが比較判定手段１２５により選択されて、送
出される。

【００６９】図１４は、オールスキップＢピクチャのピ
クチャ層のピクチャヘッダとピクチャ符号化拡張を示
す。同図のに示すように、ピクチャ構造がトップフィ
ールドに指定されている。図１５は、フレーム２をスキ
ップする場合の参照するフィールドを示す。図１５
（ａ）は、Ｍ（Ｉ又はＰピクチャの出現周期）＝１の場
合を示す。フレーム２は、Ｐピクチャなので、参照フィ
ールドとして使用可能なフィールドは、１ｔと１ｂとな
る。このうち、２ｔ、２ｂのどちらも１ｂに表示順序が
近いので、１ｂが２ｔ、２ｂの参照フィールドになる。

【００７０】従って、本来、１ｔ、１ｂを符号化する時
点では、フォワードのボトムフィールドを参照先として
いるオールスキップＰピクチャが出力される。図１５
（ｂ）は、Ｍ（Ｉ又はＰピクチャの出現周期）＝２の場
合を示す。フレーム２は、Ｂピクチャなので、参照フィ
ールドとして使用可能なフィールドは１ｔ、１ｂ、３
ｔ、３ｂとなる。２ｔは、１ｂに表示順序が近いので、
１ｂが２ｔの参照フィールドになる。２ｂは、３ｔに表
示順序が近いので、３ｔが２ｂの参照フィールドにな
る。

【００７１】従って、本来、２ｔを符号化する時点で
は、フォワードのボトムフィールドを参照先としている
オールスキップＢピクチャが出力される。従って、本
来、２ｂを符号化する時点では、バックワードのトップ
フィールドを参照先としているオールスキップＢピクチ
ャが出力される。図１５（ｃ）は、Ｍ（Ｉ又はＰピクチ
ャの出現周期）＝３の場合を示す。フレーム２は、Ｂピ
クチャなので、参照フィールドとして使用可能なフィー
ルドは１ｔ、１ｂ、４ｔ、４ｂとなる。２ｔ、２ｂと
も、１ｂと表示順序が近いので、１ｂが参照フィールド
になる。

【００７２】従って、本来、２ｔ、２ｂを符号化する時
点においては、それぞれフォワードのボトムフィールド
を参照先としているオールスキップＢピクチャが出力さ
れる。図１６は、フレーム３をスキップする場合の参照
するフィールドを示す。図１６（ａ）は、Ｍ（Ｉ又はＰ
ピクチャの出現周期）＝１の場合を示す。フレーム３
は、Ｐピクチャなので、参照フィールドとして使用可能
なフィールドは、２ｔと２ｂとなる。このうち、３ｔ、
３ｂのどちらも２ｂに表示順序が近いので、２ｂが３
ｔ、３ｂの参照フィールドになる。

【００７３】従って、本来、３ｔ、３ｂを符号化する時
点では、フォワードのボトムフィールドを参照先として
いるオールスキップＰピクチャが出力される。図１６
（ｂ）は、Ｍ（Ｉ又はＰピクチャの出現周期）＝２の場
合を示す。フレーム３は、Ｐピクチャなので、参照フィ
ールドとして使用可能なフィールドは、１ｔ、１ｂとな
る。このうち、３ｔ、３ｂのどちらも１ｂに表示順序が
近いので、１ｂが３ｔ、３ｂの参照フィールドになる。

【００７４】従って、本来、３ｔ、３ｂを符号化する時
点では、フォワードのボトムフィールドを参照先として
いるオールスキップＰピクチャが出力される。また、３
ｔの時点で１ｂを表示することにより、２ｔと２ｂも、
表示順序の逆転を防止するため、２ｔと２ｂは、参照フ
ィールドを１ｂとしてスキップ処理を行う。この場合
も、フォワードのボトムフィールドを参照先としている
オールスキップピクチャが出力される。

【００７５】図１６（ｃ）は、Ｍ（Ｉ又はＰピクチャの
出現周期）＝３の場合を示す。フレーム３は、Ｂピクチ
ャなので、参照フィールドとして使用可能なフィールド
は、１ｂ、１ｔ、４ｔ、４ｂとなる。このうち、３ｔ、
３ｂとも、４ｔに表示順序が近いので、４ｔが３ｔ、３
ｂの参照フィールドになる。従って、バックワードのト
ップフィールドを参照先としているオールスキップＢピ
クチャが出力される。

【００７６】図１７は、Ｍ（Ｉ又はＰピクチャの出現周
期）＝３の場合にフレーム４をスキップする場合の参照
フィールドを示す。フレーム４は、Ｐピクチャなので、
参照フィールドとして使用可能なフィールドは、１ｔ、
１ｂとなる。このうち、４ｔ、４ｂのどちらも１ｂに表
示順序が近いので、１ｂが４ｔ、４ｂの参照フィールド
になる。

【００７７】従って、本来、４ｔ、４ｂを符号化する時
点では、フォワードのボトムフィールドを参照先として
いるオールスキップＰピクチャが出力される。また、４
ｔの時点で１ｂを表示することにより、２ｔ、２ｂ、３
ｔ、３ｂも、表示順序の逆転を防止するため、２ｔ、２
ｂ、３ｔ、３ｂは、参照フィールドを１ｂとしてスキッ
プ処理を行う。この場合も、フォワードのボトムフィー
ルドを参照先としているオールスキップピクチャが出力
される。 （動作）次に。本実施の形態に係るビデオ符号化装置の
動作について説明する。

【００７８】図１８及び図１９は、本実施の形態に係る
ビデオ符号化装置におけるＭ（Ｉ又はＰピクチャの出現
周期）＝３の場合の動作手順を示すフロチャートであ
る。閾値の設定（Ｓ５０１）と、スキップするか否かの
判定（Ｓ５０２、Ｓ５０３、Ｓ５０７、Ｓ５０８、Ｓ５
１１、Ｓ５１２、Ｓ５１５）、Ｉピクチャとしての符号
化処理（Ｓ５０４）、Ｐピクチャとしての符号化処理
（Ｓ５０９）、Ｂピクチャとしての符号化処理（Ｓ５１
３）の動作は、第１の実施形態と同一なので、説明は省
略する。

【００７９】本実施の形態は、Ｓ８０１〜Ｓ８１０に示
すピクチャのスキップ方法が第１の実施形態と異なるの
で、これらのステップを説明する。本実施の形態では、
スキップする際には、フレーム構造をフィールド構造に
切替えるので、１画面分のトップフィールドとボトムフ
ィールドの２つのオールスキップピクチャを出力する。
すなわち、ピクチャのスキップが２度行われる。

【００８０】ステップＳ５１２において、ＶＢＶ＜Ｔｂ
１の場合には、ステップＳ８０７及びステップＳ８０８
において、フォワードのボトムフィールドを参照先とす
るオールスキップＢピクチャが２度出力される。（参照
先の例は、図１５（ｃ）を参照）。ステップＳ５１５に
おいて、ＶＢＶ＜Ｔｂ２の場合には、ステップＳ８０９
及びステップＳ８１０において、バックワードのトップ
フィールドを参照先とするオールスキップＢピクチャが
２度出力される。（参照先の例は、図１６（ｃ）を参
照）。

【００８１】ステップＳ５０８において、ＶＢＶ＜Ｔｐ
の場合には、ステップＳ８０１及びＳ８０２において、
フォワードのボトムフィールドを参照先とするオールス
キップＰピクチャが２度出力される（参照先の例は、図
１７を参照）。そして、ステップＳ８０３〜Ｓ８０６に
おいて、スキップしたＰピクチャと、その参照先のＩピ
クチャとの間のＢピクチャの代わりに、フォワードのボ
トムフィールドを参照先とするオールスキップＢピクチ
ャがそれぞれ出力される（参照先の例は、図１７を参
照）。

【００８２】そして、ステップＳ５０５において、受信
バッファ蓄積量予測手段１２４が、生成したピクチャの
ビット発生量、又は２個若しくは６個のオールスキップ
ピクチャのビット発生量と、ＤＴＳ時間間隔ごとの伝送
ビット量Ｒとにより、次のＤＴＳ時点での復号化前の受
信バッファの予測蓄積量ＶＢＶを算出する。 （まとめ）以上のように本実施の形態に係るビデオ符号
化装置によれば、１フレームを１ピクチャに割り当てて
いる（フレーム構造）場合に、受信バッファの予測蓄積
量が閾値未満になったときには、画像データのフレーム
構造での符号化を中止させ、表示順序が最も近いフィー
ルドを参照先としたフィールド構造のオールスキップピ
クチャが送出されるので、画像データの符号化をスキッ
プした場合に、インタレース走査方式で表示しても、表
示順序が逆転しないようにすることができる。 （変形例）本実施の形態に係るビデオ符号化装置では、
受信バッファの予測蓄積量に基づいて、ピクチャをスキ
ップするか否かを判定したが、これに限定するものでは
ない。例えば、ビデオ符号化装置側の出力バッファの蓄
積量に基づいて、ピクチャをスキップするか否かを判定
するものとしてもよい。

【００８３】

【発明の効果】上記目的を達成するために、本発明は、
復号化装置における受信バッファの蓄積量を予測しなが
ら、１フレーム又は１フィールドの画像データを符号化
するビデオ符号化装置であって、画像データを符号化す
る前に、当該画像データの符号化データの復号化時刻に
おいて受信バッファに蓄積されているであろうと予測さ
れる予測蓄積量と、所定の閾値とを比較する比較手段
と、予測蓄積量が閾値未満の場合には、前記画像データ
の符号化を中止し、前記復号化時刻に受信バッファから
取出されるデータとして、前記画像データの符号化デー
タの代わりに、過去に復号化された画像データと同一の
画像データを表示すべき旨を定めたプロキシコードを用
いるスキップ手段とを備えたことを特徴とする。

【００８４】これにより、画像データを符号化する前に
符号化を中止するか否かを判定するので、受信バッファ
の予測蓄積量が閾値未満となるか判断するために画像デ
ータの符号化データを一時的に蓄積しておくための特別
のバッファを不要にすることができる。ここで、前記ビ
デオ符号化装置であって、さらに、画像データが符号化
されるピクチャのタイプ（Ｉピクチャ、Ｐピクチャ又は
Ｂピクチャ）ごとに閾値を設定する閾値設定手段をを含
むことを特徴とする。

【００８５】これにより、Ｉピクチャ、Ｐピクチャ、Ｂ
ピクチャごとに符号化方法が異なるため、符号量のオー
ダーも異なるので、ピクチャタイプに応じた適切に閾値
を設定することができる。ここで、前記スキップ手段
は、ピクチャタイプがＢピクチャの場合には、スライス
層の最初と最後を除いた残りのすべてのマクロブロック
がスキップドマクロブロックで構成されるＢピクチャで
あるオールスキップＢピクチャをプロキシコードとして
用い、ピクチャタイプがＩ又はＰピクチャの場合には、
スライス層の最初と最後を除いた残りのすべてのマクロ
ブロックがスキップドマクロブロックで構成されるＰピ
クチャであるオールスキップＰピクチャをプロキシコー
ドとして用いることを特徴とする。

【００８６】これにより、ＭＰＥＧのスキップドマクロ
ブロックを用いて、過去に復号化された画像データと同
一の画像データを表示すべき旨を定めたプロキシコード
を作成することができる。ここで、前記閾値設定手段の
閾値は、予測符号量であることを特徴とする。これによ
り、Ｉ、Ｐ、Ｂのピクチャタイプごとのピクチャの予測
符号量を閾値に設定するので、受信バッファのアンダー
フローを高精度に防止することができる。

【００８７】ここで、前記閾値設定手段は、１画像デー
タごとに、画素値の分散値を算出し、当該分散値が大き
いほど、より大きな閾値を設定することを特徴とする。
これにより、画像データの画素の分散値が大きいほど、
一般的にその画像データの符号量が大きくなるので、分
散値の大きな画像データにより大きな閾値を設定するこ
とで、受信バッファのアンダーフローをより高精度に防
止することができる。

【００８８】ここで、前記閾値設定手段は、マクロブロ
ックｊ内に含まれる８ブロック（フレームＤＣＴモード
における４ブロックとフィールドＤＣＴモードにおける
４ブロック）の各ブロックにおける画像データの画素値
の分散値のうちの最小値をＶＡＲ_jとし、マクロブロッ
クｊのアクティビティをａｃｔ_jとし、ａｃｔ_j＝１＋Ｖ
ＡＲ_jとし、画像データのアクティビティＡＣＴをすべ
てのマクロブロックのアクティビティの総和としたとき
に、画像データのアクティビティＡＣＴが大きな画像ほ
ど、より大きな閾値を設定することを特徴とする。

【００８９】これにより、画像データのアクティビティ
が大きいほど、一般的にその画像データの符号量が大き
くなるので、アクティビティの大きな画像データにより
大きな閾値を設定することで、受信バッファのアンダー
フローをより高精度に防止することができる。ここで、
前記閾値設定手段は、Ｉ又はＰピクチャについては、そ
れぞれの予測符号量を閾値に設定し、Ｂピクチャについ
ては、Ｂピクチャの予測符号量よりも大きな値を閾値に
設定することを特徴とする。

【００９０】これにより、Ｂピクチャの閾値は、予測符
号量よりも高く設定され、Ｂピクチャでのスキップしや
すくなるので、他のピクチャに参照されるＩ又はＰピク
チャでのスキップが起こりくくすることができ、その結
果、同一の画像が何回も連続して表示されるのを防止す
ることができる。ここで、前記閾値設定手段は、Ｍ（Ｉ
又はＰピクチャの出現周期）≧２の場合に、Ｉピクチャ
の予測符号量をＥｉ、Ｐピクチャの予測符号量をＥｐ、
Ｂピクチャの予測符号量をＥｂ、１ピクチャの復号時間
間隔当りの伝送ビット量をＲとしたときに、Ｉピクチャ
の閾値Ｔｉ＝Ｅｉ、Ｐピクチャの閾値Ｔｐ＝Ｅｐ、符号
化順序がＩピクチャの直前のＢピクチャの閾値をＴｂ
（ｉ）とすると、 Ｔｂ（ｉ）＝Ｅｂ＋（Ｅｉ―Ｒ） （Ｅｉ―Ｒ）≧０のとき、 Ｔｂ（ｉ）＝Ｅｂ （Ｅｉ―Ｒ）＜０のとき、 符号化順序がＰピクチャの直前のＢピクチャの閾値をＴ
ｂ（ｐ）とすると、 Ｔｂ（ｐ）＝Ｅｂ＋（Ｅｐ―Ｒ） （Ｅｐ―Ｒ）≧０のとき、 Ｔｂ（ｐ）＝Ｅｂ （Ｅｐ−Ｒ）＜０のとき、 とすることを特徴とする。

【００９１】これにより、Ｉ又はＰピクチャでスキップ
が起こらないように、Ｉ又はＰピクチャの予測符号量に
基づいて、Ｉ又はＰピクチャ直前のＢピクチャの閾値を
設定することができる。ここで、前記閾値設定手段は、
Ｍ（Ｉ又はＰピクチャの出現周期）≧３の場合に、Ｉピ
クチャの予測符号量をＥｉ、Ｐピクチャの予測符号量を
Ｅｐ、Ｂピクチャの予測符号量をＥｂ、１ピクチャの復
号時間間隔当りの伝送ビット量をＲとしたときに、Ｉピ
クチャの閾値Ｔｉ＝Ｅｉ、Ｐピクチャの閾値Ｔｐ＝Ｅ
ｐ、符号化順序がＩピクチャの直前のＢピクチャ（Ｂ２
（ｉ））の閾値をＴｂ２（ｉ）とすると、Ｔｂ２（ｉ）
＝Ｅｂ＋（Ｅｉ―Ｒ） （Ｅｉ―Ｒ）≧０のとき、 Ｔｂ２（ｉ）＝Ｅｂ （Ｅｉ―Ｒ）＜０のとき、 符号化順序がＢ２（ｉ）直前のＢピクチャ（Ｂ１
（ｉ））の閾値をＴｂ１（ｉ）とすると、 Ｔｂ１（ｉ）＝Ｅｂ＋（Ｔｂ２（ｉ）―Ｒ）（Ｔｂ２（ｉ）―Ｒ）≧０のとき、 Ｔｂ１（ｉ）＝Ｅｂ （Ｔｂ２（ｉ）―Ｒ）＜０のとき、 符号化順序がＰピクチャ直前のＢピクチャ（Ｂ２
（ｐ））の閾値をＴｂ２（ｐ）とすると、 Ｔｂ２（ｐ）＝Ｅｂ＋（Ｅｐ―Ｒ） （Ｅｐ―Ｒ）≧０のとき、 Ｔｂ２（ｐ）＝Ｅｂ （Ｅｐ―Ｒ）＜０のとき、 符号化順序がＢ２（ｐ）直前のＢピクチャ（Ｂ１
（ｐ））の閾値をＴｂ１（ｐ）とすると、 Ｔｂ１（ｐ）＝Ｅｂ＋（Ｔｂ２（ｐ）−Ｒ）（Ｔｂ２（ｐ）−Ｒ）≧０のとき、 Ｔｂ１（ｐ）＝Ｅｂ （Ｔｂ２（ｐ）−Ｒ）＜０のとき、 とすることを特徴とする。

【００９２】これにより、Ｉ又はＰピクチャでスキップ
が起こらないように、Ｉ又はＰピクチャの予測符号量に
基づいて、Ｉ又はＰピクチャ直前のＢピクチャ及び当該
Ｂピクチャ直前のＢピクチャの閾値を設定することがで
きる。ここで、前記閾値設定手段は、Ｍ（Ｉ又はＰピク
チャの出現周期）≧３のときに、符号化順序がＩピクチ
ャの直前のＢピクチャ（Ｂ２）の閾値を、符号化順序が
当該Ｂピクチャ（Ｂ２）の直前のＢピクチャ（Ｂ１）の
閾値よりも高く設定することを特徴とする。

【００９３】これにより、Ｉ又はＰピクチャでのスキッ
プを回避するためのＢピクチャのスキップは、Ｉ又はＰ
ピクチャの直前で起こりやすくすることができ、Ｉ又は
Ｐピクチャでスキップが必要かどうかの不確実性の高い
時点、つまり、多数の予測項目に基づいてＰピクチャの
復号化時刻の受信バッファの蓄積量を予測している時点
において、無用なＢピクチャでのスキップを回避するこ
とができる。

【００９４】ここで、前記閾値設定手段は、Ｍ（Ｉ又は
Ｐピクチャの出現周期）≧３の場合に、Ｉピクチャの予
測符号量をＥｉ、Ｐピクチャの予測符号量をＥｐ、Ｂピ
クチャの予測符号量をＥｂ、１ピクチャの復号時間間隔
当りの伝送ビット量Ｒ、オールスキップＢピクチャの符
号量をＤｂｓｋｉｐとしたときに、Ｉピクチャの閾値Ｔ
ｉ＝Ｅｉ、Ｐピクチャの閾値Ｔｐ＝Ｅｐ、符号化順序が
Ｉピクチャの直前のＢピクチャ（Ｂ２（ｉ））の閾値Ｔ
ｂ２（ｉ）とすると、 Ｔｂ２（ｉ）＝Ｅｂ＋（Ｅｉ―Ｒ） （Ｅｉ―Ｒ）≧０のとき、 Ｔｂ２（ｉ）＝Ｅｂ （Ｅｉ―Ｒ）＜０のとき、 符号化順序がＢ２（ｉ）直前のＢピクチャ（Ｂ１
（ｉ））の閾値をＴｂ１（ｉ）とすると、 Ｔｂ１（ｉ）＝Ｄｂｓｋｉｐ＋（Ｔｂ２（ｉ）―Ｒ） Ｄｂｓｋｉｐ＋（Ｔｂ２（ｉ）―Ｒ）≧Ｅｂのとき、 Ｔｂ１（ｉ）＝Ｅｂ Ｄｂｓｋｉｐ＋（Ｔｂ２（ｉ）―Ｒ）＜Ｅｂのとき、 符号化順序がＰピクチャ直前のＢピクチャ（Ｂ２
（ｐ））の閾値をＴｂ２（ｐ）とすると、 Ｔｂ２（ｐ）＝Ｅｂ＋（Ｅｐ―Ｒ） （Ｅｐ−Ｒ）≧０のとき、 Ｔｂ２（ｐ） ＝Ｅｂ （Ｅｐ―Ｒ）＜０のとき、 符号化順序がＢ２（ｐ）直前のＢピクチャ（Ｂ１
（ｐ））の閾値をＴｂ１（ｐ）とすると、 Ｔｂ１（ｐ）＝Ｄｂｓｋｉｐ＋（Ｔｂ２（ｐ）−Ｒ） Ｄｂｓｋｉｐ＋（Ｔｂ２（ｐ）−Ｒ）≧Ｅｂのとき Ｔｂ１（ｐ）＝Ｅｂ Ｄｂｓｋｉｐ＋（Ｔｂ２（ｐ）−Ｒ）＜Ｅｂのとき とすることを特徴とする。

【００９５】これにより、Ｉ又はＰピクチャでのスキッ
プを回避するために、Ｂ２ピクチャでスキップするとき
に限り、Ｂ１ピクチャでもスキップするので、Ｉ又はＰ
ピクチャでスキップが必要かどうかの不確実性の高い時
点、つまり、多数の予測項目に基づいてＰピクチャの復
号化時刻の受信バッファの蓄積量を予測している時点に
おいて、無用なＢ１ピクチャでのスキップを回避するこ
とができる。

【００９６】また、本発明は、、復号化装置における受
信バッファの蓄積量を予測しながら、１フレーム又は１
フィールドの画像データを符号化するビデオ符号化装置
であって、画像データの符号化後において、ピクチャタ
イプに応じて、Ｍ（Ｉ又はＰピクチャの出現周期）≧２
の場合に、画像データがＩピクチャに符号化された場合
の閾値Ｔｉは、当該Ｉピクチャの符号量をＤｉとする
と、Ｔｉ＝Ｄｉに設定し、画像データがＰピクチャに符
号化された場合の閾値Ｔｉは、当該Ｐピクチャの符号量
をＤｐとすると、Ｔｐ＝Ｄｐに設定し、符号化順序がＩ
ピクチャ直前のＢピクチャに画像データが符号化された
場合の閾値Ｔｂ（ｉ）は、そのＢピクチャの符号量をＤ
ｂとし、Ｉピクチャの予測符号量をＥｉとし、１ピクチ
ャの復号時間間隔当りの伝送ビット量をＲとすると、 Ｔｂ（ｉ）＝Ｄｂ＋（Ｅｉ−Ｒ） （Ｅｉ−Ｒ）≧０のとき、 Ｔｂ（ｉ）＝Ｄｂ （Ｅｉ−Ｒ）＜０のとき、 に設定し、符号化順序がＰピクチャ直前のＢピクチャに
画像データが符号化された場合の閾値Ｔｂ（ｐ）は、そ
のＢピクチャの符号量をＤｂとし、Ｐピクチャの予測符
号量をＥｐとし、１ピクチャの復号時間間隔当りの伝送
ビット量をＲとすると、 Ｔｂ（ｐ）＝Ｄｂ＋（Ｅｐ−Ｒ） （Ｅｐ―Ｒ）≧０のとき、 Ｔｂ（ｐ）＝Ｄｂ （Ｅｐ−Ｒ）＜０のとき、 に設定する閾値設定手段と、画像データの符号後におい
て、その画像データの符号化データの復号化時刻におい
て受信バッファに蓄積されているであろうと予測蓄積量
と、前記設定された閾値とを比較する比較手段と、予測
蓄積量が閾値未満の場合には、前記復号化時刻に受信バ
ッファから取出される前記画像データの符号化データの
代わりに、過去に復号化された画像データと同一の画像
データを表示すべき旨を定めたプロキシコードを用いる
スキップ手段とを備えたことを特徴とする。

【００９７】これにより、Ｉ又はＰピクチャでスキップ
が起こりにくくするとともに、ピクチャの予測符号量で
なく実際の符号量以上に閾値が常に設定されるので、受
信バッファのアンダーフローを確実に防止することがで
きる。また、本発明は、１フレームの画像データをフレ
ーム構造で符号化するビデオ符号化装置であって、画像
データを符号化する際に、出力バッファの蓄積量又は復
号化装置の受信バッファの予測蓄積量と所定の基準値と
を比較する比較手段と、前記蓄積量又は予測蓄積量が所
定の基準値に達したと判定された場合に、前記画像デー
タのフレーム構造での符号化を中止し、前記画像データ
のトップフィールド及びボトムフィールドの符号化デー
タの代わりに、過去に復号化された画像データを構成す
るトップフィールド又はボトムフィールドと同一である
２つのフィールドを表示すべき旨を定めたプロキシコー
ドを用いるスキップ手段とを備えたことを特徴とする。

【００９８】これにより、画像データの符号化をスキッ
プするときには、ピクチャの割当て方がフィールド構造
に切り替わり、スキップした画像データの各フィールド
は、トップフィールドでもボトムフィールドでも参照す
ることができるので、スキップしたときでもフレーム構
造を維持することにより表示順序が逆転するような事態
を防止することができる。

【００９９】ここで、前記スキップ手段は、過去に復号
化された画像データを構成するトップフィールド又及び
ボトムフィールドのうち、前記フレーム構造での符号化
を中止した画像データの各フィールドに表示順序が最も
近いフィールドと同一である２つのフィールドを表示す
べき旨を定めたプロキシコードを用いることを特徴とす
る。

【０１００】これにより、符号化をスキップした画像デ
ータの各フィールドは、表示順序の最も近いフィールド
を参照先フィールドとするので、符号化をスキップした
画像データのトップフィールドの参照先フィールドがス
キップした画像データのボトムフィールドの参照先フィ
ールドよりも表示順序が後になることがありえないの
で、表示順序の逆転を確実に回避することができる。

【０１０１】ここで、前記スキップ手段は、フレーム構
造での符号化を中止した前記画像データが符号化される
予定であったピクチャのタイプがＢピクチャの場合に
は、スライス層の最初と最後を除いた残りのすべてのマ
クロブロックがスキップドマクロブロックで構成される
ＢピクチャであるオールスキップＢピクチャの２つを前
記プロキシコードとし、フレーム構造での符号化を中止
した前記画像データが符号化される予定であったピクチ
ャのタイプがＩ又はＰピクチャの場合には、スライス層
の最初と最後を除いた残りのすべてのマクロブロックが
スキップドマクロブロックで構成されるＰピクチャであ
るオールスキップＰピクチャの２つを前記プロキシコー
ドとすることを特徴とする。

【０１０２】これにより、ＭＰＥＧのスキップドマクロ
ブロックを用いて、過去に復号化された画像データと同
一の画像データを表示すべき旨を定めたプロキシコード
を作成することができる。ここで、前記スキップ手段
は、フレーム構造での符号化を中止した前記画像データ
が符号化される予定であったピクチャのタイプがＩ又は
Ｐピクチャの場合において用いる前記オールスキップＰ
ピクチャでは、表示順序が先となるＩ又はＰピクチャの
画像データのボトムフィールドを参照フィールドとし、
フレーム構造での符号化を中止した前記画像データが符
号化される予定であったピクチャのタイプがＩ又はＰピ
クチャの直後に符号化されるＢピクチャ（Ｂ１）の場合
において用いる前記オールスキップＢピクチャでは、表
示順序が先となるＩ又はＰピクチャの画像データのボト
ムフィールドを参照フィールドとし、フレーム構造での
符号化を中止した前記画像データが符号化される予定で
あったピクチャのタイプがＩ又はＰピクチャの直前に符
号化されるＢピクチャ（Ｂ２）の場合において用いる前
記オールスキップＢピクチャでは、表示順序が後となる
Ｉ又はＰピクチャの画像データのトップフィールドを参
照フィールドとすることを特徴とする。

【０１０３】これにより、ピクチャタイプに応じて、適
切な参照フィールドを指定したオールスキップピクチャ
が選択されるので、表示順序の逆転を簡易かつ適切に回
避することができる。ここで、前記スキップ手段は、フ
レーム構造での符号化を中止した前記画像データが符号
化される予定であったピクチャのタイプがＩ又はＰピク
チャの場合には、その後にＢピクチャに符号化される画
像データの符号化を中止し、当該画像データのトップフ
ィールド及びボトムフィールドの符号化データの代わり
に、表示順序が先のボトムフィールドを参照フィールド
としたオールスキップＢピクチャの２つを用いることを
特徴とする。

【０１０４】これにより、Ｐ又はＩピクチャでスキップ
が発生したときには、それを参照することしているＢピ
クチャの画像データのフィールドも、スキップした画像
データのフィールドが参照先としたフィールドと同一の
フィールドを参照先フィールドとすることで、表示順序
の逆転を防止することができる。また、本発明は、復号
化装置における受信バッファの蓄積量を予測しながら、
１フレーム又は１フィールドの画像データを符号化する
ビデオ符号化装置であって、画像データを符号化する前
に、当該画像データの符号化データの復号化時刻におい
て受信バッファに蓄積されているであろうと予測される
予測蓄積量と、画像データが符号化されるピクチャタイ
プごとの閾値とを比較する比較手段と、予測蓄積量が閾
値未満の場合であって、前記画像データが符号化される
ピクチャのタイプがＢピクチャの場合には、前記画像デ
ータの符号化を中止し、前記復号化時刻に受信バッファ
から取出される前記画像データの符号化データの代わり
に、過去に復号化された画像データと同一の画像データ
を表示すべき旨を定めたプロキシコードを用いる制御手
段とを備えたことを特徴とする。

【０１０５】これにより、受信バッファの予測蓄積量が
閾値未満でもＢピクチャの場合に限りピクチャのスキッ
プを行うので、他のピクチャに参照されるＩ又はＰピク
チャについては符号量を抑制した符号化を行う等によ
り、同一の画像が連続して表示される回数を少なくする
ことができる。また、本発明は、復号化装置における受
信バッファの蓄積量を予測しながら、１フレーム又は１
フィールドの画像データを符号化するビデオ符号化装置
であって、画像データを符号化する前に、当該画像デー
タの符号化データの復号化時刻において受信バッファに
蓄積されているであろうと予測される予測蓄積量と、画
像データが符号化されるピクチャタイプごとの閾値とを
比較する比較手段と、予測蓄積量が閾値未満の場合であ
って、前記画像データが符号化されるピクチャのタイプ
がＢ又はＰピクチャの場合には、前記画像データの符号
化を中止し、前記復号化時刻に受信バッファから取出さ
れる前記画像データの符号化データの代わりに、過去に
復号化された画像データと同一の画像データを表示すべ
き旨を定めたプロキシコードを用いる制御手段とを備え
たことを特徴とする。

【０１０６】これにより、受信バッファの予測蓄積量が
閾値未満でもＢ又はＰピクチャの場合に限りピクチャの
スキップを行うので、他のピクチャに参照されるＩピク
チャについては符号量を抑制した符号化を行う等によ
り、同一の画像が連続して表示される頻度を減らすこと
ができる。また、本発明は、復号化装置における受信バ
ッファの蓄積量を予測しながら、１フレーム又は１フィ
ールドの画像データを符号化するビデオ符号化方法であ
って、画像データを符号化する前に、当該画像データの
符号化データの復号化時刻において受信バッファに蓄積
されているであろうと予測される予測蓄積量と、所定の
閾値とを比較するステップと、予測蓄積量が閾値未満の
場合には、前記画像データの符号化を中止し、前記復号
化時刻に受信バッファから取出されるデータとして、前
記画像データの符号化データの代わりに、過去に復号化
された画像データと同一の画像データを表示すべき旨を
定めたプロキシコードを用いるステップとを含むことを
特徴とする。

【０１０７】これにより、画像データを符号化する前に
符号化を中止するか否かを判定するので、受信バッファ
の予測蓄積量が閾値未満となるか判断するために画像デ
ータの符号化データを一時的に蓄積しておくための特別
のバッファを不要にすることができる。また、本発明
は、１フレームの画像データをフレーム構造で符号化す
るビデオ符号化方法であって、画像データを符号化する
際に、出力バッファの蓄積量又は復号化装置の受信バッ
ファの予測蓄積量と所定の基準値とを比較するステップ
と、前記蓄積量又は予測蓄積量が所定の基準値に達した
と判定された場合に、前記画像データのフレーム構造で
の符号化を中止し、前記画像データのトップフィールド
及びボトムフィールドの符号化データの代わりに、過去
に復号化された画像データを構成するトップフィールド
又はボトムフィールドと同一である２つのフィールドを
表示すべき旨を定めたプロキシコードを用いるステップ
とを含むことを特徴とする。

【０１０８】これにより、画像データの符号化をスキッ
プするときには、ピクチャの割当て方がフィールド構造
に切り替わり、スキップした画像データの各フィールド
は、トップフィールドでもボトムフィールドでも参照す
ることができるので、スキップしたときでもフレーム構
造を維持することにより表示順序が逆転するような事態
を防止することができる。

【０１０９】また、本発明のビデオ符号化プログラム
は、復号化装置における受信バッファの蓄積量を予測し
ながら、１フレーム又は１フィールドの画像データを符
号化するためにコンピュータを、画像データを符号化す
る前に、当該画像データの符号化データの復号化時刻に
おいて受信バッファに蓄積されているであろうと予測さ
れる予測蓄積量と、所定の閾値とを比較する比較手段
と、予測蓄積量が閾値未満の場合には、前記画像データ
の符号化を中止し、前記復号化時刻に受信バッファから
取出されるデータとして、前記画像データの符号化デー
タの代わりに、過去に復号化された画像データと同一の
画像データを表示すべき旨を定めたプロキシコードを用
いるスキップ手段として機能させる。

【０１１０】これにより、画像データを符号化する前に
符号化を中止するか否かを判定するので、受信バッファ
の予測蓄積量が閾値未満となるか判断するために画像デ
ータの符号化データを一時的に蓄積しておくための特別
のバッファを不要にすることができる。また、本発明の
ビデオ符号化プログラムは、１フレームの画像データを
フレーム構造で符号化するためにコンピュータを、画像
データを符号化する際に、出力バッファの蓄積量又は復
号化装置の受信バッファの予測蓄積量と所定の基準値と
を比較する比較手段と、前記蓄積量又は予測蓄積量が所
定の基準値に達したと判定された場合に、前記画像デー
タのフレーム構造での符号化を中止し、前記画像データ
のトップフィールド及びボトムフィールドの符号化デー
タの代わりに、過去に復号化された画像データを構成す
るトップフィールド又はボトムフィールドと同一である
２つのフィールドを表示すべき旨を定めたプロキシコー
ドを用いるスキップ手段として機能させる。

【０１１１】これにより、画像データの符号化をスキッ
プするときには、ピクチャの割当て方がフィールド構造
に切り替わり、スキップした画像データの各フィールド
は、トップフィールドでもボトムフィールドでも参照す
ることができるので、スキップしたときでもフレーム構
造を維持することにより表示順序が逆転するような事態
を防止することができる。

【図面の簡単な説明】

【図１】ビデオ符号化装置１００の構成を示す。

【図２】図２（ａ）は、ビデオ画像のもともとの順序を
示す。図２（ｂ）は、ビデオ画像の符号化順序を示す。

【図３】図３（ａ）は、ピクチャをスキップしない通常
時の受信バッファの予測蓄積量を示す。図３（ｂ）は、
ピクチャをスキップしたときの受信バッファの予測蓄積
量を示す。

【図４】閾値の設定例を示す。

【図５】図５（ａ）では、Ｉピクチャをスキップする場
合の受信バッファの予測蓄積量を示す。図５（ｂ）で
は、Ｂ１ピクチャをスキップする場合の受信バッファの
予測蓄積量を示す。図５（ｃ）では、Ｂ２ピクチャをス
キップする場合の受信バッファの予測蓄積量を示す。図
５（ｄ）では、Ｐピクチャをスキップする場合の受信バ
ッファの予測蓄積量を示す。

【図６】図６（ａ）は、復号化装置で通常表示される画
面の例を示す。図６（ｂ）は、ピクチャをスキップした
ときに、復号化装置で表示される画面の例を示す。

【図７】第１の実施形態に係るビデオ符号化装置の動作
手順を示すフロチャートである。

【図８】閾値の設定例を示す。

【図９】Ｐピクチャ直前のＢピクチャの閾値を説明する
図である。

【図１０】図１０（ａ）は、第１の実施形態における閾
値での受信バッファの予測蓄積量の遷移を示す。図１０
（ｂ）は、第２の実施形態における閾値での受信バッフ
ァの予測蓄積量の遷移を示す。

【図１１】図１１（ａ）は、復号化装置で通常表示され
る画面の例を示す。図１１（ｂ）は、第１の実施形態の
閾値でピクチャのスキップを判定した場合に、復号化装
置で表示される画面の例を示す。図１１（ｃ）は、第２
の実施形態の閾値でピクチャのスキップを発生した場合
に、復号化装置で表示される画面の例を示す。図１１
（ｄ）は、第２の実施形態の閾値でピクチャのスキップ
を発生した場合に、復号化装置で表示される画面の例を
示す。

【図１２】閾値の設定例を示す。

【図１３】Ｐピクチャ直前のＢピクチャの閾値を説明す
る図である。

【図１４】オールスキップＢピクチャのピクチャ層のピ
クチャヘッダとピクチャ符号化拡張を示す。

【図１５】図１５（ａ）は、Ｍ（Ｉ又はＰピクチャの出
現周期）＝１の場合を示す。図１５（ｂ）は、Ｍ（Ｉ又
はＰピクチャの出現周期）＝２の場合を示す。図１５
（ｃ）は、Ｍ（Ｉ又はＰピクチャの出現周期）＝３の場
合を示す。

【図１６】図１６（ａ）は、Ｍ（Ｉ又はＰピクチャの出
現周期）＝１の場合を示す図１６（ｂ）は、Ｍ（Ｉ又は
Ｐピクチャの出現周期）＝２の場合を示す。図１６
（ｃ）は、Ｍ（Ｉ又はＰピクチャの出現周期）＝３の場
合を示す。

【図１７】Ｍ（Ｉ又はＰピクチャの出現周期）＝３の場
合にフレーム４をスキップする場合の参照フィールドを
示す。

【図１８】第３の実施形態に係るビデオ符号化装置の動
作手順を示すフロチャートである。

【図１９】第３の実施形態に係るビデオ符号化装置の動
作手順を示すフロチャートである。

【図２０】図２０（ａ）は、受信バッファの予測蓄積量
の通常の遷移を示す。図２０（ｂ）は、受信バッファの
予測蓄積量がアンダーフローする例を示す。図２０
（ｃ）は、受信バッファの予測蓄積量がオーバーフロー
する例を示す。

【図２１】図２１（ａ）は、通常時に表示される画面の
例を示す。図２１（ｂ）は、スキップドマクロブロック
を用いた場合に表示される画面の例を示す。図２１
（ｃ）は、擬似画像を用いたときに表示される画面の例
を示す。

【図２２】特許２８７１３１６号に記載されたビデオ符
号化装置の構成を示す。

【図２３】図２３（ａ）は、ピクチャをスキップしない
通常時の表示画面を示す。図２３（ｂ）は、ピクチャの
スキップが発生した場合の表示画面を示す。

【符号の説明】

６ 直交変換回路 ２０ バッファメモリ ２２ ＳＫＩＰコード格納メモリ ２４ 伝送レート超過判定回路 １００ ビデオ符号化装置 １１０ 画面並び替え手段 １１１ 加算器 １１２ 加算器 １１３ ＤＣＴ手段 １１４ 量子化手段 １１５ レート制御手段 １１６ 可変長符号化手段 １１７ バッファ １１８ 切替え器 １１９ 逆量子化手段 １２０ 逆ＤＣＴ手段 １２１ バッファメモリ １２２ ビデオメモリ １２３ 動き補償予測手段 １２４ 受信バッファ蓄積量予測手段 １２５ 比較判定手段 １２６ ＳＫＩＰピクチャ格納メモリ １２７ 閾値設定手段

───────────────────────────────────────────────────── フロントページの続き (72)発明者 森下 昌博 愛知県名古屋市中区栄２丁目６番１号 白 川ビル別館５階 株式会社松下電器情報シ ステム名古屋研究所内 Ｆターム(参考） 5C059 KK35 LA05 LA09 MA23 MC11 ME01 NN21 PP05 PP06 PP07 TA03 TA25 TB07 TC10 TC16 TC19 TC38 TD04 TD12 UA02 UA05 UA33 5J064 BA09 BA16 BB03 BC01 BC08 BC14 BC16 BC22 BD01

Claims (23)

【特許請求の範囲】
1. 【請求項１】 復号化装置における受信バッファの蓄積
   量を予測しながら、１フレーム又は１フィールドの画像
   データを符号化するビデオ符号化装置であって、 画像データを符号化する前に、当該画像データの符号化
   データの復号化時刻において受信バッファに蓄積されて
   いるであろうと予測される予測蓄積量と、所定の閾値と
   を比較する比較手段と、 予測蓄積量が閾値未満の場合には、前記画像データの符
   号化を中止し、前記復号化時刻に受信バッファから取出
   されるデータとして、前記画像データの符号化データの
   代わりに、過去に復号化された画像データと同一の画像
   データを表示すべき旨を定めたプロキシコードを用いる
   スキップ手段と を備えたことを特徴とするビデオ符号化装置。
2. 【請求項２】 前記ビデオ符号化装置であって、さら
   に、 画像データが符号化されるピクチャのタイプ（Ｉピクチ
   ャ、Ｐピクチャ又はＢピクチャ）ごとに閾値を設定する
   閾値設定手段をを含むことを特徴とする請求項１記載の
   ビデオ符号化装置。
3. 【請求項３】 前記スキップ手段は、ピクチャタイプが
   Ｂピクチャの場合には、スライス層の最初と最後を除い
   た残りのすべてのマクロブロックがスキップドマクロブ
   ロックで構成されるＢピクチャであるオールスキップＢ
   ピクチャをプロキシコードとして用い、 ピクチャタイプがＩ又はＰピクチャの場合には、スライ
   ス層の最初と最後を除いた残りのすべてのマクロブロッ
   クがスキップドマクロブロックで構成されるＰピクチャ
   であるオールスキップＰピクチャをプロキシコードとし
   て用いることを特徴とする請求項２記載のビデオ符号化
   装置。
4. 【請求項４】 前記閾値設定手段の閾値は、予測符号量
   であることを特徴とする請求項３記載のビデオ符号化装
   置。
5. 【請求項５】 前記閾値設定手段は、１画像データごと
   に、画素値の分散値を算出し、当該分散値が大きいほ
   ど、より大きな閾値を設定することを特徴とする請求項
   ３記載のビデオ符号化装置。
6. 【請求項６】 前記閾値設定手段は、マクロブロックｊ
   内に含まれる８ブロック（フレームＤＣＴモードにおけ
   る４ブロックとフィールドＤＣＴモードにおける４ブロ
   ック）の各ブロックにおける画像データの画素値の分散
   値のうちの最小値をＶＡＲ_jとし、マクロブロックｊの
   アクティビティをａｃｔ_jとし、ａｃｔ _j＝１＋ＶＡＲ_j
   とし、画像データのアクティビティＡＣＴをすべてのマ
   クロブロックのアクティビティの総和としたときに、 画像データのアクティビティＡＣＴが大きな画像ほど、
   より大きな閾値を設定することを特徴とする請求項３記
   載のビデオ符号化装置。
7. 【請求項７】 前記閾値設定手段は、Ｉ又はＰピクチャ
   については、それぞれの予測符号量を閾値に設定し、Ｂ
   ピクチャについては、Ｂピクチャの予測符号量よりも大
   きな値を閾値に設定することを特徴とする請求項３記載
   のビデオ符号化装置。
8. 【請求項８】 前記閾値設定手段は、Ｍ（Ｉ又はＰピク
   チャの出現周期）≧２の場合に、 Ｉピクチャの予測符号量をＥｉ、 Ｐピクチャの予測符号量をＥｐ、 Ｂピクチャの予測符号量をＥｂ、 １ピクチャの復号時間間隔当りの伝送ビット量をＲとし
   たときに、 Ｉピクチャの閾値Ｔｉ＝Ｅｉ、 Ｐピクチャの閾値Ｔｐ＝Ｅｐ、 符号化順序がＩピクチャの直前のＢピクチャの閾値をＴ
   ｂ（ｉ）とすると、 Ｔｂ（ｉ）＝Ｅｂ＋（Ｅｉ―Ｒ） （Ｅｉ―Ｒ）≧０のとき、 Ｔｂ（ｉ）＝Ｅｂ （Ｅｉ―Ｒ）＜０のとき、 符号化順序がＰピクチャの直前のＢピクチャの閾値をＴ
   ｂ（ｐ）とすると、 Ｔｂ（ｐ）＝Ｅｂ＋（Ｅｐ―Ｒ） （Ｅｐ―Ｒ）≧０のとき、 Ｔｂ（ｐ）＝Ｅｂ （Ｅｐ−Ｒ）＜０のとき、 とすることを特徴とする請求項７記載のビデオ符号化装
   置。
9. 【請求項９】 前記閾値設定手段は、Ｍ（Ｉ又はＰピク
   チャの出現周期）≧３の場合に、 Ｉピクチャの予測符号量をＥｉ、 Ｐピクチャの予測符号量をＥｐ、 Ｂピクチャの予測符号量をＥｂ、 １ピクチャの復号時間間隔当りの伝送ビット量をＲとし
   たときに、 Ｉピクチャの閾値Ｔｉ＝Ｅｉ、 Ｐピクチャの閾値Ｔｐ＝Ｅｐ、 符号化順序がＩピクチャの直前のＢピクチャ（Ｂ２
   （ｉ））の閾値をＴｂ２（ ｉ）とすると、 Ｔｂ２（ｉ）＝Ｅｂ＋（Ｅｉ―Ｒ） （Ｅｉ―Ｒ）≧０のとき、 Ｔｂ２（ｉ）＝Ｅｂ （Ｅｉ―Ｒ）＜０のとき、 符号化順序がＢ２（ｉ）直前のＢピクチャ（Ｂ１
   （ｉ））の閾値をＴｂ１（ｉ）とすると、 Ｔｂ１（ｉ）＝Ｅｂ＋（Ｔｂ２（ｉ）―Ｒ）（Ｔｂ２（ｉ）―Ｒ）≧０のとき、 Ｔｂ１（ｉ）＝Ｅｂ （Ｔｂ２（ｉ）―Ｒ）＜０のとき、 符号化順序がＰピクチャ直前のＢピクチャ（Ｂ２
   （ｐ））の閾値をＴｂ２（ｐ）とすると、 Ｔｂ２（ｐ）＝Ｅｂ＋（Ｅｐ―Ｒ） （Ｅｐ―Ｒ）≧０のとき、 Ｔｂ２（ｐ）＝Ｅｂ （Ｅｐ―Ｒ）＜０のとき、 符号化順序がＢ２（ｐ）直前のＢピクチャ（Ｂ１
   （ｐ））の閾値をＴｂ１（ｐ）とすると、 Ｔｂ１（ｐ）＝Ｅｂ＋（Ｔｂ２（ｐ）−Ｒ）（Ｔｂ２（ｐ）−Ｒ）≧０のとき、 Ｔｂ１（ｐ）＝Ｅｂ （Ｔｂ２（ｐ）−Ｒ）＜０のとき、 とすることを特徴とする請求項７記載のビデオ符号化装
   置。
10. 【請求項１０】 前記閾値設定手段は、Ｍ（Ｉ又はＰピ
    クチャの出現周期）≧３のときに、符号化順序がＩピク
    チャの直前のＢピクチャ（Ｂ２）の閾値を、符号化順序
    が当該Ｂピクチャ（Ｂ２）の直前のＢピクチャ（Ｂ１）
    の閾値よりも高く設定することを特徴とする請求項７記
    載のビデオ符号化装置。
11. 【請求項１１】 前記閾値設定手段は、Ｍ（Ｉ又はＰピ
    クチャの出現周期）≧３の場合に、 Ｉピクチャの予測符号量をＥｉ、 Ｐピクチャの予測符号量をＥｐ、 Ｂピクチャの予測符号量をＥｂ、 １ピクチャの復号時間間隔当りの伝送ビット量Ｒ、 オールスキップＢピクチャの符号量をＤｂｓｋｉｐとし
    たときに、 Ｉピクチャの閾値Ｔｉ＝Ｅｉ、 Ｐピクチャの閾値Ｔｐ＝Ｅｐ、 符号化順序がＩピクチャの直前のＢピクチャ（Ｂ２
    （ｉ））の閾値をＴｂ２（ｉ）とすると、 Ｔｂ２（ｉ）＝Ｅｂ＋（Ｅｉ―Ｒ） （Ｅｉ―Ｒ）≧０のとき、 Ｔｂ２（ｉ）＝Ｅｂ （Ｅｉ―Ｒ）＜０のとき、 符号化順序がＢ２（ｉ）直前のＢピクチャ（Ｂ１
    （ｉ））の閾値をＴｂ１（ｉ）とすると、 Ｔｂ１（ｉ）＝Ｄｂｓｋｉｐ＋（Ｔｂ２（ｉ）―Ｒ） Ｄｂｓｋｉｐ＋（Ｔｂ２（ｉ）―Ｒ）≧Ｅｂのとき、 Ｔｂ１（ｉ） ＝Ｅｂ Ｄｂｓｋｉｐ＋（Ｔｂ２（ｉ）―Ｒ）＜Ｅｂのとき 符号化順序がＰピクチャ直前のＢピクチャ（Ｂ２
    （ｐ））の閾値をＴｂ２（ｐ）とすると、 Ｔｂ２（ｐ）＝Ｅｂ＋（Ｅｐ―Ｒ） （Ｅｐ−Ｒ）≧０のとき、 Ｔｂ２（ｐ） ＝Ｅｂ （Ｅｐ―Ｒ）＜０のとき、 符号化順序がＢ２（ｐ）直前のＢピクチャ（Ｂ１
    （ｐ））の閾値をＴｂ１（ｐ）とすると、 Ｔｂ１（ｐ）＝Ｄｂｓｋｉｐ＋（Ｔｂ２（ｐ）−Ｒ） Ｄｂｓｋｉｐ＋（Ｔｂ２（ｐ）−Ｒ）≧Ｅｂのとき、 Ｔｂ１（ｐ）＝Ｅｂ Ｄｂｓｋｉｐ＋（Ｔｂ２（ｐ）−Ｒ）＜Ｅｂのとき、 とすることを特徴とする請求項１０記載のビデオ符号化
    装置。
12. 【請求項１２】 復号化装置における受信バッファの蓄
    積量を予測しながら、１フレーム又は１フィールドの画
    像データを符号化するビデオ符号化装置であって、 画像データの符号化後において、ピクチャタイプに応じ
    て、Ｍ（Ｉ又はＰピクチャの出現周期）≧２の場合に、
    画像データがＩピクチャに符号化された場合の閾値Ｔｉ
    は、当該Ｉピクチャの符号量をＤｉとすると、Ｔｉ＝Ｄ
    ｉに設定し、 画像データがＰピクチャに符号化された場合の閾値Ｔｉ
    は、当該Ｐピクチャの符号量をＤｐとすると、Ｔｐ＝Ｄ
    ｐに設定し、 符号化順序がＩピクチャ直前のＢピクチャに画像データ
    が符号化された場合の閾値Ｔｂ（ｉ）は、そのＢピクチ
    ャの符号量をＤｂとし、Ｉピクチャの予測符号量をＥｉ
    とし、１ピクチャの復号時間間隔当りの伝送ビット量を
    Ｒとすると、 Ｔｂ（ｉ）＝Ｄｂ＋（Ｅｉ−Ｒ） （Ｅｉ−Ｒ）≧０のとき、 Ｔｂ（ｉ）＝Ｄｂ （Ｅｉ−Ｒ）＜０のとき、 に設定し、 符号化順序がＰピクチャ直前のＢピクチャに画像データ
    が符号化された場合の閾値Ｔｂ（ｐ）は、そのＢピクチ
    ャの符号量をＤｂとし、Ｐピクチャの予測符号量をＥｐ
    とし、１ピクチャの復号時間間隔当りの伝送ビット量を
    Ｒとすると、 Ｔｂ（ｐ）＝Ｄｂ＋（Ｅｐ−Ｒ） （Ｅｐ―Ｒ）≧０のとき、 Ｔｂ（ｐ）＝Ｄｂ （Ｅｐ−Ｒ）＜０のとき、 に設定する閾値設定手段と、 画像データの符号後において、その画像データの符号化
    データの復号化時刻において受信バッファに蓄積されて
    いるであろうと予測蓄積量と、前記設定された閾値とを
    比較する比較手段と、 予測蓄積量が閾値未満の場合には、前記復号化時刻に受
    信バッファから取出される前記画像データの符号化デー
    タの代わりに、過去に復号化された画像データと同一の
    画像データを表示すべき旨を定めたプロキシコードを用
    いるスキップ手段と、 を備えたことを特徴とするビデオ符号化装置。
13. 【請求項１３】 １フレームの画像データをフレーム構
    造で符号化するビデオ符号化装置であって、 画像データを符号化する際に、出力バッファの蓄積量又
    は復号化装置の受信バッファの予測蓄積量と所定の基準
    値とを比較する比較手段と、 前記蓄積量又は予測蓄積量が所定の基準値に達したと判
    定された場合に、前記画像データのフレーム構造での符
    号化を中止し、前記画像データのトップフィールド及び
    ボトムフィールドの符号化データの代わりに、過去に復
    号化された画像データを構成するトップフィールド又は
    ボトムフィールドと同一である２つのフィールドを表示
    すべき旨を定めたプロキシコードを用いるスキップ手段
    とを備えたことを特徴とするビデオ符号化装置。
14. 【請求項１４】 前記スキップ手段は、過去に復号化さ
    れた画像データを構成するトップフィールド又及びボト
    ムフィールドのうち、前記フレーム構造での符号化を中
    止した画像データの各フィールドに表示順序が最も近い
    フィールドと同一である２つのフィールドを表示すべき
    旨を定めたプロキシコードを用いることを特徴とする請
    求項１３記載のビデオ符号化装置。
15. 【請求項１５】 前記スキップ手段は、フレーム構造で
    の符号化を中止した前記画像データが符号化される予定
    であったピクチャのタイプがＢピクチャの場合には、ス
    ライス層の最初と最後を除いた残りのすべてのマクロブ
    ロックがスキップドマクロブロックで構成されるＢピク
    チャであるオールスキップＢピクチャの２つを前記プロ
    キシコードとしフレーム構造での符号化を中止した前記
    画像データが符号化される予定であったピクチャのタイ
    プがＩ又はＰピクチャの場合には、スライス層の最初と
    最後を除いた残りのすべてのマクロブロックがスキップ
    ドマクロブロックで構成されるＰピクチャであるオール
    スキップＰピクチャの２つを前記プロキシコードとする
    ことを特徴とする請求項１４記載のビデオ符号化装置。
16. 【請求項１６】 前記スキップ手段は、フレーム構造で
    の符号化を中止した前記画像データが符号化される予定
    であったピクチャのタイプがＩ又はＰピクチャの場合に
    おいて用いる前記オールスキップＰピクチャでは、表示
    順序が先となるＩ又はＰピクチャの画像データのボトム
    フィールドを参照フィールドとし、 フレーム構造での符号化を中止した前記画像データが符
    号化される予定であったピクチャのタイプがＩ又はＰピ
    クチャの直後に符号化されるＢピクチャ（Ｂ１）の場合
    において用いる前記オールスキップＢピクチャでは、表
    示順序が先となるＩ又はＰピクチャの画像データのボト
    ムフィールドを参照フィールドとし、 フレーム構造での符号化を中止した前記画像データが符
    号化される予定であったピクチャのタイプがＩ又はＰピ
    クチャの直前に符号化されるＢピクチャ（Ｂ２）の場合
    において用いる前記オールスキップＢピクチャでは、表
    示順序が後となるＩ又はＰピクチャの画像データのトッ
    プフィールドを参照フィールドとすることを特徴とする
    請求項１５記載のビデオ符号化装置。
17. 【請求項１７】 前記スキップ手段は、フレーム構造で
    の符号化を中止した前記画像データが符号化される予定
    であったピクチャのタイプがＩ又はＰピクチャの場合に
    は、その後にＢピクチャに符号化される画像データの符
    号化を中止し、当該画像データのトップフィールド及び
    ボトムフィールドの符号化データの代わりに、表示順序
    が先のボトムフィールドを参照フィールドとしたオール
    スキップＢピクチャの２つを用いることを特徴とする請
    求項１７記載のビデオ符号化装置。
18. 【請求項１８】 復号化装置における受信バッファの蓄
    積量を予測しながら、１フレーム又は１フィールドの画
    像データを符号化するビデオ符号化装置であって、 画像データを符号化する前に、当該画像データの符号化
    データの復号化時刻において受信バッファに蓄積されて
    いるであろうと予測される予測蓄積量と、画像データが
    符号化されるピクチャタイプごとの閾値とを比較する比
    較手段と、 予測蓄積量が閾値未満の場合であって、前記画像データ
    が符号化されるピクチャのタイプがＢピクチャの場合に
    は、前記画像データの符号化を中止し、前記復号化時刻
    に受信バッファから取出される前記画像データの符号化
    データの代わりに、過去に復号化された画像データと同
    一の画像データを表示すべき旨を定めたプロキシコード
    を用いる制御手段とを備えたことを特徴とするビデオ符
    号化装置。
19. 【請求項１９】 復号化装置における受信バッファの蓄
    積量を予測しながら、１フレーム又は１フィールドの画
    像データを符号化するビデオ符号化装置であって、 画像データを符号化する前に、当該画像データの符号化
    データの復号化時刻において受信バッファに蓄積されて
    いるであろうと予測される予測蓄積量と、画像データが
    符号化されるピクチャタイプごとの閾値とを比較する比
    較手段と、 予測蓄積量が閾値未満の場合であって、前記画像データ
    が符号化されるピクチャのタイプがＢ又はＰピクチャの
    場合には、前記画像データの符号化を中止し、前記復号
    化時刻に受信バッファから取出される前記画像データの
    符号化データの代わりに、過去に復号化された画像デー
    タと同一の画像データを表示すべき旨を定めたプロキシ
    コードを用いる制御手段とを備えたことを特徴とするビ
    デオ符号化装置。
20. 【請求項２０】 復号化装置における受信バッファの蓄
    積量を予測しながら、１フレーム又は１フィールドの画
    像データを符号化するビデオ符号化方法であって、 画像データを符号化する前に、当該画像データの符号化
    データの復号化時刻において受信バッファに蓄積されて
    いるであろうと予測される予測蓄積量と、所定の閾値と
    を比較するステップと、 予測蓄積量が閾値未満の場合には、前記画像データの符
    号化を中止し、前記復号化時刻に受信バッファから取出
    されるデータとして、前記画像データの符号化データの
    代わりに、過去に復号化された画像データと同一の画像
    データを表示すべき旨を定めたプロキシコードを用いる
    ステップとを含むことを特徴とするビデオ符号化方法。
21. 【請求項２１】 １フレームの画像データをフレーム構
    造で符号化するビデオ符号化方法であって、 画像データを符号化する際に、出力バッファの蓄積量又
    は復号化装置の受信バッファの予測蓄積量と所定の基準
    値とを比較するステップと、 前記蓄積量又は予測蓄積量が所定の基準値に達したと判
    定された場合に、前記画像データのフレーム構造での符
    号化を中止し、前記画像データのトップフィールド及び
    ボトムフィールドの符号化データの代わりに、過去に復
    号化された画像データを構成するトップフィールド又は
    ボトムフィールドと同一である２つのフィールドを表示
    すべき旨を定めたプロキシコードを用いるステップとを
    含むことを特徴とするビデオ符号化方法。
22. 【請求項２２】 復号化装置における受信バッファの蓄
    積量を予測しながら、１フレーム又は１フィールドの画
    像データを符号化するためにコンピュータを、 画像データを符号化する前に、当該画像データの符号化
    データの復号化時刻において受信バッファに蓄積されて
    いるであろうと予測される予測蓄積量と、所定の閾値と
    を比較する比較手段と、 予測蓄積量が閾値未満の場合には、前記画像データの符
    号化を中止し、前記復号化時刻に受信バッファから取出
    されるデータとして、前記画像データの符号化データの
    代わりに、過去に復号化された画像データと同一の画像
    データを表示すべき旨を定めたプロキシコードを用いる
    スキップ手段として機能させるためのビデオ符号化プロ
    グラム。
23. 【請求項２３】 １フレームの画像データをフレーム構
    造で符号化するためにコンピュータを、 画像データを符号化する際に、出力バッファの蓄積量又
    は復号化装置の受信バッファの予測蓄積量と所定の基準
    値とを比較する比較手段と、 前記蓄積量又は予測蓄積量が所定の基準値に達したと判
    定された場合に、前記画像データのフレーム構造での符
    号化を中止し、前記画像データのトップフィールド及び
    ボトムフィールドの符号化データの代わりに、過去に復
    号化された画像データを構成するトップフィールド又は
    ボトムフィールドと同一である２つのフィールドを表示
    すべき旨を定めたプロキシコードを用いるスキップ手段
    ととして機能させるためのビデオ符号化プログラム。