JP3263902B2 - 動画像符号化装置及び方法、並びに動画像復号装置及び方法 - Google Patents

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、動画像信号を、ア
ナログやディジタルの電話回線、専用のデータ伝送回線
などの種々の転送レートを持った伝送装置を使って伝送
すること、また、光／磁気ディスクやＲＡＭ（ランダム
アクセスメモリ）などの種々の記憶容量を持った蓄積メ
ディアに記録すること、を前提とした、ディジタル動画
像符号化装置及び方法、並びに動画像復号装置及び方法
に関する。

【０００２】

【従来の技術】画像の符号化方法の１つとして、オブジ
ェクトスケーラブルな符号化と呼ばれる符号化手法があ
る。これは画像をオブジェクトと呼ばれるまとまりに分
割し、オブジェクト毎に符号化を行うものである。

【０００３】例えば、図７のように、人物と背景とから
なる画像Ｖ１をオブジェクトスケーラブルに符号化する
には、画像Ｖ１を人物を表すオブジェクトと背景という
オブジェクトとに分割する。これら人物を表すオブジェ
クトを構成する画像Ｖ２と上記背景を表すオブジェクト
を構成する画像Ｖ３のそれぞれを、独立に符号化する。
これにより、人物オブジェクト画像Ｖ２については細か
く量子化し、背景オブジェクト画像Ｖ３については荒く
量子化して符号化するという制御、更に、人物オブジェ
クト画像Ｖ２については全フレームを符号化し、背景オ
ブジェクト画像Ｖ３については何枚かに１枚を符号化す
るという制御が可能になる。この符号化手法によれば、
同じ符号発生量で主観的な画質を向上させたり、同じ主
観的な画質で符号発生量を減少させたりできるという利
点がある。

【０００４】このオブジェクトスケーラブルな符号化を
実現するためには、通常符号化している画像の明るさお
よび色合いを表すテクスチャ画像（または単にテクスチ
ャ）以外に、オブジェクトの形状を符号化する必要があ
る。オブジェクトの形状はシェイプ画像（または単にシ
ェイプ）と呼ばれている。また、キー信号とも呼ばれる
こともある。図７の例では、人物オブジェクト画像Ｖ２
をテクスチャ画像Ｖ２ａとシェイプ画像Ｖ２ｂとに分
け、これら画像Ｖ２ａとＶ２ｂをそれぞれ符号化する。

【０００５】また、上記シェイプを表す信号としては、
ハードキー信号とソフトキー信号とがある。ハードキー
信号はオブジェクトの内部であるか、外部であるかを２
値で表した２値画像である。ハードキー信号によってオ
ブジェクトの内部と示された画素においてはそのオブジ
ェクトのテクスチャが出力画像に使われる。ハードキー
信号によってオブジェクトの外部と示された画素におい
ては背景のテクスチャが出力画像に使われる。ソフトキ
ー信号はオブジェクトの内部のテクスチャと、外部のテ
クスチャを合成する割合を多値で表した多値画像であ
る。ソフトキー信号の値が最大値である画素において
は、オブジェクトのテクスチャの画素値がそのまま出力
画像に使われ、最小値である画素においては背景のテク
スチャの画素値がそのまま出力画像に使われる。中間の
画素値のときにはその値によって双方のテクスチャの画
素値を合成されたものが出力画像に使われる。

【０００６】一方、動画像信号を伝送又は蓄積するシス
テムでは、例えば動画像信号のフレーム内相関やフレー
ム間相関を利用して、画像信号を圧縮符号化することに
より、伝送路および蓄積媒体の効率的な使用が可能とな
る。なお、動画像信号の圧縮符号化手法としては、いわ
ゆるＭＰＥＧ（Moving Picture Image Coding Experts
Group）と呼ばれる動画像符号化の検討組織にて標準化
された符号化方式が存在する。

【０００７】上記フレーム内相関を利用した画像信号の
符号化方法では、テクスチャについては、ＤＣＴ（離散
コサイン変換）などの、符号化すべき係数を集中させる
働きのある直交変換が多く用いられており、シェイプに
ついては、いわゆるＭＭＲ(Modified Modified READ)に
基づく方法、いわゆるＪＢＩＧ(Joint Bi-Level Image
Coding Experts Group)に基づく方法などが考えられて
いる。

【０００８】また、上記フレーム間相関を利用した方法
では、いわゆる動き補償フレーム間予測が多く用いられ
ている。ここで、この動き補償フレーム間予測の原理を
図８を用いて説明する。

【０００９】この図８に示すように、時刻ｔ１，ｔ２に
おいて、画像Ｐ１，Ｐ２が発生し、既に画像Ｐ１は伝送
されているものとし、画像Ｐ２はこれから新規に伝送す
るものとする。このとき、画像Ｐ２を複数のブロックに
分割し、これら各ブロックについて、画像Ｐ１との間の
動き量（動きベクトル）を検出する。そして、画像Ｐ１
を上記動きベクトルの分だけ並行移動させたものを、そ
のブロックに対する予測画像とし、当該予測画像と上記
画像Ｐ２のブロックとの差分画像を求め、この差分画像
と上記動きベクトルとを符号化するものが、上記動き補
償フレーム間予測である。

【００１０】動き補償フレーム間予測はテクスチャの符
号化およびシェイプの符号化の双方について有効である
ため、オブジェクトスケーラブルな符号化ではこの双方
に対して動き補償フレーム間予測が用いられている。こ
のとき、テクスチャの動きベクトルとシェイプの動きベ
クトルには相関があるので、シェイプの動きベクトルの
予測にテクスチャの動きベクトルを用いることが行われ
ている。

【００１１】上述の動き補償フレーム間予測と動きベク
トルの予測を利用したシェイプとテクスチャ動画像の符
号化装置の一例の構成を図９に示し、また、その符号化
装置に対応する復号装置の構成を図１０に示す。

【００１２】また、本発明の動画像復号装置及び方法
は、符号化された動画像信号を表す符号化信号を復号す
る動画像復号装置及び方法であって、符号化信号は、シ
ェイプ画像、シェイプ画像の動きベクトルと隣接するブ
ロックのシェイプ画像の動きベクトルとの差分を演算し
て得られた差分シェイプ動きベクトル、テクスチャ画
像、及び上記シェイプ画像の動きベクトルに基づいて検
出されたテクスチャ画像の動きベクトルのそれぞれの符
号化データからなり、差分シェイプ動きベクトルの符号
化データを復号して既に復号されているブロックのシェ
イプ動きベクトルと加算することによりシェイプ画像の
復号動きベクトルを出力すると共に、そのシェイプ画像
の復号動きベクトルに基づいてシェイプ画像の符号化デ
ータを復号してシェイプ復号画像を出力し、シェイプ画
像の復号動きベクトルを用いてテクスチャ画像の動きベ
クトルの符号化データを復号してテクスチャ画像の復号
動きベクトルを出力するとともに、そのテクスチャ画像
の復号動きベクトルに基づいて上記テクスチャ画像の符
号化データを復号してテクスチャ復号画像を出力するこ
とにより上述の課題を解決する。

【００１３】テクスチャ入力端子１０８から入力された
テクスチャはテクスチャ動き検出器１０９とテクスチャ
符号化器１１１に送られる。テクスチャ動き検出器１０
９では、入力されたテクスチャと後述するテクスチャ符
号化器１１１で局所復号されたテクスチャ局所復号画像
との間の動き量の検出がブロック単位で行われ、ブロッ
ク単位でテクスチャ動きベクトルが出力される。なお、
テクスチャ動きベクトルを検出する際には、後述するシ
ェイプ局所復号画像を利用する。すなわち、テクスチャ
動きベクトルの検出は、ブロック単位で行われるので、
例えば、このブロックが人物と背景とのエッジを含んで
いる場合には、シェイプ局所復号画像を利用して背景部
分の検出動作が省略される。

【００１４】テクスチャ動き検出器１０９によって検出
されたテクスチャ動きベクトルは、テクスチャの符号化
のために、テクスチャ動き補償器１１０とテクスチャ動
きベクトル符号化器１０６に入力され、さらにシェイプ
の符号化のために、シェイプ動き検出器１０２とシェイ
プ動きベクトル符号化器１０５に入力される。テクスチ
ャ動き補償器１１０では、テクスチャ動きベクトルを用
いて、テクスチャ局所復号画像から予測テクスチャ画像
が作られ、テクスチャ符号化器１１１に入力される。テ
クスチャ符号化器１１１は、その予測テクスチャ画像を
もとに、入力されたテクスチャをブロック単位で符号化
する。テクスチャ動きベクトル符号化器１０６は、テク
スチャ動きベクトルと既に符号化されているブロックの
テクスチャ動きベクトルとの差分を演算し、差分テクス
チャ動きベクトルを符号化する。

【００１５】一方、シェイプ入力端子１０１から入力さ
れたシェイプはシェイプ動き検出器１０２とシェイプ符
号化器１０４に送られる。シェイプ動き検出器１０２で
は後述するシェイプ符号化器１０４で局所復号されたシ
ェイプ局所復号画像との間の動き量の検出がブロック単
位で行われ、ブロック単位でシェイプ動きベクトルが出
力される。また、このシェイプ動きベクトル検出の際に
は、テクスチャ動きベクトルが参照され、後述するシェ
イプ動きベクトルの符号化のときに発生ビット量が多く
ならないように、テクスチャ動きベクトルとの差分が大
きくない動きベクトルが求められる。検出されたシェイ
プ動きベクトルは、シェイプの符号化のために、シェイ
プ動き補償器１０３とシェイプ動きベクトル符号化器１
０５に入力される。シェイプ動きベクトル符号化器１０
５で、シェイプ動きベクトルと既に符号化されているブ
ロックのテクスチャ動きベクトルとの差分を演算し、差
分シェイプ動きベクトルを符号化する。シェイプ動き補
償器１０３は、シェイプ動きベクトルを用いて、シェイ
プ局所復号画像から予測シェイプ画像を作り、シェイプ
符号化器１０４に入力する。シェイプ符号化器１０４
は、この予測シェイプ画像をもとに、入力されたシェイ
プをブロック単位で符号化する。

【００１６】これらシェイプ符号化１０４、シェイプ動
きベクトル符号化器１０５、テクスチャ動きベクトル符
号化器１０６、テクスチャ符号化器１１１からの各符号
は、多重化器１０７にて多重化され符号出力端子１１２
から符号化データとして出力される。この符号化データ
は、伝送回線を介して受信装置に伝送されるか、若しく
は記録装置によって記録媒体に記録され、再生装置によ
って再生される。

【００１７】ここで、符号化されるシェイプ動きベクト
ルとテクスチャ動きベクトルの符号化方法についてまと
める。テクスチャ動きベクトルは、既に検出されている
ブロックのテクスチャ動きベクトルとの差分（差分テク
スチャ動きベクトル）として符号化される。シェイプ動
きベクトルは、既に符号化されているブロック（１ブロ
ック前）のテクスチャ動きベクトルとの差分（差分シェ
イプ動きベクトル）として符号化される。

【００１８】また、テクスチャの符号化にはシェイプ局
所復号画像が求まっていなければならない。テクスチャ
符号化器１１１は、ブロック単位でテクスチャを符号化
する。例えば、このブロックが、人物と背景とのエッジ
を含んでいる場合、エッジを含んでいる状態でブロック
内のテクスチャを符号化すると、高周波成分が発生して
データ量を効率良く符号化することができない。そのた
め、エッジを含んでいるブロックの場合、シェイプ局所
復号画像を利用して、背景部分の画素を人物のエッジ部
分の画素に置き換える処置が実行される。

【００１９】ここで、上述したシェイプ動きベクトル及
びテクスチャ動きベクトルの符号化の時間的な流れは、
図１１に示されるようになる。

【００２０】図１１の処理は、ブロックについての繰り
返しであり、各ブロックについての処理は次のようにな
っている。

【００２１】まず、ステップＳＴ１０１で、符号化すべ
きブロックにおいて既に符号化されているテクスチャ動
きベクトルを１つ（通常は符号化するブロックの左また
は上に位置するブロックのテクスチャ動きベクトル）選
び、そのテクスチャ動きベクトルと符号化すべきブロッ
クのシェイプ動きベクトルとの差分シェイプ動きベクト
ルを演算して符号化する。

【００２２】次に、ステップＳＴ１０２に進み、シェイ
プ動きベクトルを用いてシェイプを符号化し、その符号
化されたシェイプを局所復号することにより、シェイプ
局所復号画像を求める。さらに、ステップＳＴ１０３に
進み、このステップＳＴ１０３において、シェイプ局所
復号画像を用いてテクスチャ動きベクトルを求める。そ
して、テクスチャ動きベクトルにおいても、既に符号化
されているテクスチャ動きベクトルと符号化すべきブロ
ックのテクスチャ動きベクトルとの差分を演算して符号
化する。

【００２３】その後、次にステップＳＴ１０４に進み、
テクスチャ動きベクトルを用いてテクスチャを符号化
し、その符号化されたテクスチャを局所復号することに
より、テクスチャ局所復号画像を求める。そして、ステ
ップＳＴ１０６に進み、全てのブロックについての処理
が終了したか否か判断がなされ、終了していないときに
はステップＳＴ１０１に戻り、上述した動作が繰り返さ
れる。終了した時には当該フローチャートの流れが終了
する。

【００２４】このときの、テクスチャ動きベクトルとシ
ェイプ動きベクトルの参照関係は、図１２で表される。
すなわちこの図１２に示されるように、各ブロックＢ１
０１〜Ｂ１０３のテクスチャ動きベクトルとシェイプ動
きベクトルの符号化においては、図中矢印にて表される
ように既に検出（符号化）された別のブロックのテクス
チャ動きベクトルを参照し、その差分（残差）が符号化
されている。

【００２５】図１０に示したシェイプとテクスチャの動
画像復号装置は、符号入力端子１２１から入力された符
号化データから復号した、シェイプ動画像をシェイプ出
力端子１２７に、テクスチャ動画像をテクスチャ出力端
１３０に出力するものである。

【００２６】すなわちこの図１０において、符号入力端
子１２１に入力された図示しない受信装置で受信された
伝送回線からの符号化データ、若しくは再生装置によっ
て再生された記録媒体からの符号化データは逆多重化器
１２２にて、シェイプ、シェイプ動きベクトル、テクス
チャ、テクスチャ動きベクトルのそれぞれの符号に分離
される。

【００２７】これら分離された各符号のそれぞれは、そ
れぞれ対応するシェイプ復号器１２６、シェイプ動きベ
クトル復号器１２３、テクスチャ復号器１２９、テクス
チャ動きベクトル復号器１２４に送られて復号される。
テクスチャ動きベクトル復号器１２４は、入力された符
号を復号して差分テクスチャ動きベクトルを生成する。
そして、既に復号されているブロックのテクスチャ動き
ベクトル（復号するブロックの左又は上に位置するブロ
ックのテクスチャ動きベクトル）と差分テクスチャ動き
ベクトルとを加算することにより、テクスチャ動きベク
トルが復号される。このテクスチャ動きベクトルが、テ
クスチャ動き補償器１２８及びシェイプ動きベクトル復
号器１２３に入力される。

【００２８】また、シェイプ動きベクトル復号器１２３
は、入力された符号を復号して差分シェイプ動きベクト
ルを生成する。そして、既に復号されているブロックの
テクスチャ動きベクトル（復号するブロックの左又は上
に位置するブロックのテクスチャ動きベクトル）と差分
シェイプ動きベクトルとを加算することにより、シェイ
プ動きベクトルが復号される。このシェイプ動きベクト
ルが、シェイプ動き補償器１２５に入力される。

【００２９】シェイプ動き補償器１２５では、シェイプ
動きベクトル及び後述するシェイプ復号器１２６の復号
シェイプ画像を用いて予測シェイプ画像が生成され、シ
ェイプ復号器１２６に入力される。シェイプ復号器１２
６は、逆多重化器１２２からの符号と予測シェイプ画像
とから復号シェイプ画像を復号して出力する。この復号
シェイプ画像は、シェイプ出力端子１２７に供給される
と共に、シェイプ動き補償器１２５にも供給される。

【００３０】テクスチャ動き補償器１２８では、テクス
チャ動きベクトル及び後述するテクスチャ復号器１２９
の復号テクスチャ画像を用いて予測テクスチャ画像が生
成され、テクスチャ復号器１２９に入力される。テクス
チャ復号器１２９は、逆多重化器１２２からの符号と予
測テクスチャ画像から復号テクスチャ画像を復号して出
力する。この復号テクスチャ画像は、テクスチャ出力端
子１３０に供給されると共に、テクスチャ動き補償器１
２８にも供給される。

【００３１】その後、図示はしないが、この復号シェイ
プ画像を利用して、復号テクスチャ画像が、図示しない
背景画像と合成されて、復号再生画像が生成されること
になる。

【００３２】

【発明が解決しようとする課題】以上説明したように、
この符号化方法では、シェイプ動きベクトルの符号化と
して、あるブロックにおけるシェイプ動きベクトルと既
に符号化されている他のブロックのテクスチャ動きベク
トルとの差分を符号化しているので、他のブロックの動
きベクトルとの差分を符号化するための符号量と、シェ
イプとテクスチャという異なる種類の画像の動きベクト
ルの差分を符号化するための符号量とを考えると、符号
化効率が悪いという問題がある。

【００３３】更に、ただ単にシェイプ動きベクトルの符
号化に同じブロックのテクスチャ動きベクトルを用いる
ことは、上述したようにテクスチャ動きベクトルを求め
るのにシェイプの局所復号画像が必要であることを考え
ると、シェイプを可逆符号化する以外の場合には困難で
ある。また、可逆符号化を行う場合には符号化効率を高
くすることができないため、全体の符号化効率は悪くな
り、問題である。

【００３４】また、シェイプ動きベクトルを求めるのに
前のブロックのテクスチャ動きベクトルが必要であり、
テクスチャの符号化（または復号再生）をするのにシェ
イプの局所復号画像（または復号再生画像）が必要であ
るため、依存関係が複雑で、制御が複雑になるという問
題がある。

【００３５】さらに、テクスチャの画像信号の振幅がテ
クスチャのノイズの振幅に対して少ないような場合に、
差分（残差）の少ない動きベクトルを選ぶとブロック毎
に種々の方向を向いた動きベクトルが発生するという、
いわゆる動きベクトルが暴れた状態になり、テクスチャ
動きベクトルの符号化にかかる符号量が増大するという
問題がある。

【００３６】そこで本発明では、以上の問題点を解決
し、符号化効率を向上させる動画像符号化装置及び方
法、並びに動画像復号装置及び方法を提供することを目
的とする。

【００３７】

【課題を解決するための手段】本発明の動画像符号化装
置及び方法は、動画像を構成する画像を注目するオブジ
ェクト画像とそれ以外の画像とに分割し、オブジェクト
画像をさらに画像の明るさ及び色合いを表すテクスチャ
画像とオブジェクトの形状を表すシェイプ画像とに分離
し、テクスチャ画像及びシェイプ画像をそれぞれ符号化
する動画像符号化装置及び方法であり、シェイプ画像の
動きベクトルを検出してシェイプ画像の動きベクトルを
出力し、シェイプ画像の動きベクトルに基づいてシェイ
プ画像を符号化して上記シェイプ画像の符号化データを
出力すると共に、シェイプ画像の動きベクトルと隣接す
るブロックのシェイプ画像の動きベクトルとの差分を演
算して得られた差分シェイプ動きベクトルを符号化して
シェイプ画像の動きベクトルの符号化データを出力し、
シェイプ画像の動きベクトルに基づいてテクスチャ画像
の動きベクトルを検出してテクスチャ画像の動きベクト
ルを出力し、テクスチャ画像の動きベクトルに基づいて
テクスチャ画像を符号化してテクスチャ画像の符号化デ
ータを出力すると共に、シェイプ画像の動きベクトルを
用いてテクスチャ画像の動きベクトルを符号化してテク
スチャ画像の動きベクトルの符号化データを出力するこ
とにより上述の課題を解決する。

【００３８】また、本発明の動画像復号装置及び方法
は、符号化された動画像信号を表す符号化信号を復号す
る動画像復号装置及び方法であって、符号化信号は、シ
ェイプ画像の符号化データ、シェイプ画像の動きベクト
ルの符号化データ、テクスチャ画像の符号化データ及び
テクスチャ画像の動きベクトルの符号化データからな
り、各符号化データは、動画像を構成する画像を注目す
るオブジェクト画像とそれ以外の画像とに分割し、オブ
ジェクト画像をさらに画像の明るさ及び色合いを表すテ
クスチャ画像とオブジェクトの形状を表すシェイプ画像
とに分離し、シェイプ画像の動きベクトルを検出してシ
ェイプ画像の動きベクトルを出力し、シェイプ画像の動
きベクトルに基づいてシェイプ画像を符号化してシェイ
プ画像の符号化データを出力し、シェイプ画像の動きベ
クトルを符号化してシェイプ画像の動きベクトルの符号
化データを出力し、テクスチャ画像の動きベクトルを検
出してテクスチャ画像の動きベクトルを出力し、テクス
チャ画像の動きベクトルに基づいて上記テクスチャ画像
を符号化してテクスチャ画像の符号化データを出力し、
シェイプ画像の動きベクトルを用いてテクスチャ画像の
動きベクトルを符号化してテクスチャ画像の動きベクト
ルの符号化データを出力することにより生成されたもの
であり、シェイプ画像の動きベクトルの符号化データを
復号してシェイプ画像の復号動きベクトルを出力すると
共に、そのシェイプ画像の復号動きベクトルに基づいて
シェイプ画像の符号化データを復号してシェイプ復号画
像を出力し、シェイプ画像の復号動きベクトルを用いて
テクスチャ画像の動きベクトルの符号化データを復号し
てテクスチャ画像の復号動きベクトルを出力するととも
に、そのテクスチャ画像の復号動きベクトルに基づいて
テクスチャ画像の符号化データを復号してテクスチャ復
号画像を出力することにより、上述した課題を解決す
る。

【００３９】

【００４０】

【発明の実施の形態】以下に、本発明を実現する実施の
形態について、図面を参照しながら説明する。

【００４１】本発明の動画像符号化装置及び方法を実現
する実施の形態として、図１で表される動画像符号化装
置は、シェイプとテクスチャを符号化するものであり、
シェイプ入力端子１から入力されたシェイプ動画像とテ
クスチャ入力端子８から入力されたテクスチャ動画像を
符号化して、符号出力端子１２から出力する。

【００４２】テクスチャ入力端子８から入力されたテク
スチャはテクスチャ動き検出器９とテクスチャ符号化器
１１に入力される。また、シェイプ入力端子１から入力
されたシェイプはシェイプ動き検出器２とシェイプ符号
化器４に入力される。

【００４３】シェイプ動き検出器２は、後述するシェイ
プ符号化器４で局所復号されたシェイプ局所復号画像と
シェイプ入力端子１から入力されたシェイプとの間の動
き量の検出をブロック単位で行い、ブロック単位でシェ
イプ動きベクトルを出力する。

【００４４】シェイプ動き検出器２によって検出された
シェイプ動きベクトルは、シェイプの符号化のために、
シェイプ動き補償器３とシェイプ動きベクトル符号化器
５に入力され、また、テクスチャの符号化のために、テ
クスチャ動き検出器９とテクスチャ動きベクトル符号化
器６に入力される。

【００４５】シェイプ動き補償器３では、シェイプ動き
ベクトルを用いて、後述するシェイプ符号化器４からの
シェイプ局所復号画像から予測シェイプ画像が生成さ
れ、シェイプ符号化器４に入力される。シェイプ符号化
器４は、この予測シェイプ画像をもとに、入力されたシ
ェイプをブロック単位で符号化する。また、その符号化
されたシェイプが局所復号され、シェイプ局所復号画像
がシェイプ動き検出器２、シェイプ動き補償器３、及び
テクスチャ動き検出器９に入力される。シェイプ動きベ
クトル符号化器５は、入力されたシェイプ動きベクトル
と既に符号化されているブロックのシェイプ動きベクト
ルとの差分を演算し、差分シェイプ動きベクトルを符号
化する。

【００４６】一方、テクスチャ動き検出器９では、後述
するテクスチャ動きベクトル符号化器６にてシェイプ動
きベクトルとテクスチャ動きベクトルとの差分を符号化
したときに符号量が少なくなるように、シェイプ動きベ
クトルの周辺範囲の動きベクトルをテクスチャの動きベ
クトルの候補として探索し、テクスチャ動きベクトルを
検出する。つまり、シェイプ動きベクトルが示す位置を
中心として、参照テクスチャ画像に対して、テクスチャ
動きベクトルを検出するためのサーチ範囲を設定し、そ
のサーチ範囲内を探索することにより、テクスチャ動き
ベクトルを検出する。検出されたテクスチャ動きベクト
ルは、テクスチャ動きベクトル符号化器６及びテクスチ
ャ動き補償器１０に入力される。なお、テクスチャ動き
ベクトルを検出する際には、後述するシェイプ局所復号
画像を利用する。すなわち、テクスチャ動きベクトルの
検出はブロック単位で行われるので、例えば、このブロ
ックが人物と背景とのエッジを含んでいる場合には、シ
ェイプ局所復号画像を利用して背景部分の検出動作が省
略される。

【００４７】また、テクスチャ動きベクトル符号化器１
０は、上記テクスチャ動きベクトルを符号化し、テクス
チャ動き補償器１０では、テクスチャ動きベクトルを用
いて後述するテクスチャ符号化器１１からのテクスチャ
局所復号画像から予測テクスチャ画像が生成され、テク
スチャ符号化器１１に入力される。テクスチャ符号化器
１１は、この予測テクスチャ画像をもとに、入力された
テクスチャをブロック単位で符号化する。

【００４８】また、その符号化されたテクスチャが局所
復号され、テクスチャ局所復号画像がテクスチャ動き検
出器９及びテクスチャ動き補償器１０に入力される。ま
た、テクスチャ符号化器１１にはシェイプ局所復号画像
が入力され、このシェイプ局所復号画像がテクスチャの
符号化に利用される。つまり、テクスチャ符号化器１１
は、ブロック単位でテクスチャを符号化する。例えば、
人物と背景とのエッジを含んでいる場合、エッジを含ん
でいる状態でブロック内のテクスチャを符号化すると、
高周波成分が発生してデータ量を効率良く符号化するこ
とができない。そのため、エッジを含んでいるブロック
の場合、シェイプ局所復号画像を使用して、背景画像の
画素を人物のエッジ部分の画素に置き換える処理が実行
される。

【００４９】テクスチャ動きベクトル符号化器６は、入
力されたテクスチャ動きベクトルとシェイプ動き検出器
２からの同一ブロックのシェイプ動きベクトルとの差分
を演算し、差分テクスチャ動きベクトルを符号化する。

【００５０】これらシェイプ符号化器４、シェイプ動き
ベクトル符号化器５、テクスチャ動きベクトル符号化器
６、テクスチャ符号化器１１からの各符号は、多重化器
７にて多重化され、符号化信号として符号出力端子１２
から出力される。

【００５１】上記符号出力端子１２から出力された符号
化信号は、図示は省略するが、その後、所定の誤り訂正
符号が付加され、さらに所定の変調処理が施された後、
アナログやディジタルの電話回線、専用のデータ伝送回
線などの種々の転送レートを持った伝送装置を使って伝
送されたり、また、記録媒体としての光／磁気ディスク
やＲＡＭ（ランダムアクセスメモリ）などの種々の記憶
容量を持った蓄積メディアに記録された後、所定の復調
処理と誤り訂正処理とが行われ、後述する本発明実施の
形態の動画像復号装置にて復号されることになる。

【００５２】ここで、上述した本実施の形態におけるシ
ェイプ動きベクトルおよびテクスチャ動きベクトルの符
号化の時間的な流れは、図２に示されるようになる。図
２の処理は、ブロックについての繰り返しであり、各ブ
ロックについての処理は次のようになっている。

【００５３】まず、ステップＳＴ１で、符号化すべきブ
ロックにおいて、既に符号化されているシェイプ動きベ
クトルとして、左の（前の）ブロックのシェイプ動きベ
クトルを選び、そのシェイプ動きベクトルと符号化すべ
きブロックのシェイプ動きベクトルとの差分シェイプ動
きベクトルを演算して符号化する。

【００５４】ステップＳＴ２に進み、シェイプ動きベク
トルを用いてシェイプを符号化して、シェイプ符号を生
成し、その生成されたシェイプ符号を局所復号して、シ
ェイプ局所復号画像を求める。

【００５５】次のステップＳＴ３に進み、シェイプ局所
復号画像を用いてテクスチャ動きベクトルを求める。そ
してテクスチャ動きベクトルにおいては、同じブロック
のシェイプ動きベクトルと符号化すべきブロックのテク
スチャ動きベクトルとの差分を演算して符号化する。

【００５６】その後、ステップＳＴ４に進み、テクスチ
ャ動きベクトルを用いてテクスチャを符号化し、その符
号化されたテクスチャを局所復号することにより、テク
スチャ局所復号画像を求める。

【００５７】最後に、ステップＳＴ５に進み、全てのマ
クロブロックについての処理が終了したか否か判断がな
され、終了していないときにはステップＳＴ１に戻り、
上述した動作が繰り返される。終了した時には当該フロ
ーチャートの流れを終了する。

【００５８】このときの、テクスチャ動きベクトルとシ
ェイプ動きベクトルの参照関係は、図３で表される。す
なわちこの図３に示すように、各ブロックＢ１〜Ｂ３の
うちのそれぞれ左側のブロックは前のブロックであり、
これら各ブロックＢ１〜Ｂ３において、シェイプ動きベ
クトルは常に左の（前の）シェイプの動きベクトルを参
照しており、テクスチャ動きベクトルは常に同じブロッ
クのシェイプ動きベクトルを参照している。そしてそれ
ぞれ、参照された動きベクトルとの差分（残差）が符号
化される。

【００５９】ここで、図１のシェイプ動き検出器２では
符号化に適したシェイプ動きベクトルを求めるため、図
４のフローチャートに示される演算によって生成された
値が最も小さくなる位置に対応するシェイプ動きベクト
ルが選定される。以下に、シェイプ動き検出器２の動作
について説明する。

【００６０】シェイプ動きベクトルの候補を(ｖｘ, ｖ
ｙ)、左の（前の）ブロックのシェイプ動きベクトルを
(ｖｘ０,ｖｙ０)とし、Ｓ(i,j)を符号化しようとするブ
ロック内のシェイプの画素、ＳＲ(i,j)を局所復号され
たブロック内のシェイプの画素とする。図４のフローチ
ャートに示すように、先ずステップＳＴ１１において、
符号化すべきブロックと参照画像であるシェイプ局所復
号画像のサーチ範囲内のブロックとの間において、それ
ぞれ対応する画素の残差の絶対値和（評価値）Ｄを求め
る。次にステップＳＴ１２に進み、ステップＳＴ１１で
求めた評価値Ｄに対して、シェイプ動きベクトルの長さ
（ｖｘ, ｖｙの絶対値を足したもの）の定数ａ倍（通常
ａ＝１／４程度）を加え、その値を新たな評価値Ｄとし
て更新する。次にステップＳＴ１３に進み、符号化する
シェイプ動きベクトルが左の（前の）ブロックのシェイ
プ動きベクトルと同じであるか否かを判断する。その結
果、同じである場合（Ｙｅｓ）には、ステップＳＴ１４
に進み、評価値Ｄから定数ｂ（通常ｂ＝５程度）を減算
し、得られた値を新たな評価値Ｄとして更新する。も
し、違う場合（ＮＯ）は、現在の値をそのまま維持す
る。

【００６１】このようにして、符号化すべきブロックと
参照画像のサーチ範囲内の全てのブロックに対して、上
述した動作を行い、評価値が最も小さくなる位置に対応
するシェイプ動きベクトルが選定される。

【００６２】また、シェイプに対応する部分のテクスチ
ャの情報も用いて、図５で示されるフローチャートのよ
うに計算される値の最小値を取る位置に対応するベクト
ルを、シェイプの動きベクトルとすることも考えられ
る。

【００６３】すなわち、シェイプ動きベクトル及びテク
スチャ動きベクトルの候補を(ｖｘ,ｖｙ)、左の（前
の）ブロックのシェイプ動きベクトルを(ｖｘ０,ｖｙ
０)とし、Ｓ(i,j)を符号化しようとするブロック内のシ
ェイプの画素、ＳＲ(i,j)を局所復号されたブロック内
のシェイプの画素、Ｔ(i,j)を符号化しようとするブロ
ック内のテクスチャの画素、ＴＲ(i,j)を局所復号され
たブロック内のテクスチャの画素とする。図５のフロー
チャートに示すように、先ずステップＳＴ２１におい
て、シェイプの符号化すべきブロックを参照画像である
シェイプ局所復号画像のサーチ範囲内のブロックとの間
においてそれぞれ対応する画素の残差の絶対値和（評価
値）を求める。そして、ステップＳＴ２２に進み、シェ
イプの符号化すべきブロックに対するテクスチャのブロ
ックをシェイプのサーチ範囲に対応する参照画像である
テクスチャ局所復号画像のサーチ範囲内のブロックとの
間において、それぞれ対応する画素の残差の絶対値和
（評価値）を求める。そして、ステップＳＴ２１にて求
めたシェイプについての評価値にテクスチャについての
評価値の定数ｃ倍（通常ハードキーの場合ｃ＝１／２５
６、ソフトキーの場合ｃ＝１／２）を加算し、この加算
後の値を新たな評価値Ｄとして更新する。さらに、ステ
ップＳＴ１３に進み、ステップＳＴ２２で求めた評価値
Ｄに対して、シェイプ動きベクトルの長さ（ｖｘ, ｖｙ
の絶対値を足したもの）の定数ａ倍（通常ａ＝１／４程
度）を加え、その値を新たな評価値Ｄとして更新する。
次にステップＳＴ２４に進み、符号化するシェイプ動き
ベクトルが左の（前の）ブロックのシェイプ動きベクト
ルと同じであるか否かを判断する。その結果、同じであ
る場合（Ｙｅｓ）には、ステップＳＴ２５に進み、定数
ｂ（通常ｂ＝５程度）を減算し、得られた値を新たな評
価値Ｄとして更新する。もし違う場合（ＮＯ）には、現
在の値をそのまま維持する。このようにして、シェイプ
の符号化すべきブロックと参照画像のサーチ範囲内の全
てのブロックに対して、上述した動作を行い、評価値が
最も小さくなる位置に対応するシェイプ動きベクトルが
選定される。このように、図５のフローチャートでは、
図４の例と比較して、テクスチャの残差の定数ｃ倍が加
えられていることが異なる。

【００６４】上述した実施の形態の符号化装置では、あ
る（現）ブロックのシェイプ動きベクトルとテクスチャ
動きベクトルの符号化を行うのに、シェイプ動きベクト
ルにおいては、既に符号化のされている他のブロックの
シェイプ動きベクトルとの差分値である差分シェイプ動
きベクトルを符号化し、テクスチャ動きベクトルにおい
ては、同じブロックのシェイプ動きベクトルとの差分値
である差分テクスチャ動きベクトルを符号化している。
このように、本実施の形態の動画像符号化装置では、異
なるブロックの異なる種類のベクトルとの差分ベクトル
を符号化することがないため符号化効率がよい。

【００６５】また、図３の参照関係から分かるように、
テクスチャはシェイプに依存しているが、シェイプはテ
クスチャに依存していない。そのため、テクスチャの情
報がなくても、シェイプだけ先に符号化することが可能
になっている。また、符号化の制御が簡単になるという
利点もある。

【００６６】さらに、例えばテクスチャの画像信号の振
幅がテクスチャのノイズの振幅に対して少ないような場
合にも、テクスチャとシェイプを併せて用いた動き検出
を用いることにより、符号化効率を向上させることが出
来る。

【００６７】次に本発明の動画像復号装置及び方法を実
現する実施の形態について図６を用いて説明する。

【００６８】図６に示した本実施の形態のシェイプとテ
クスチャの動画像復号装置は、符号入力端子２１から入
力された符号から復号した、シェイプ動画像をシェイプ
出力端子２７にテクスチャ動画像をテクスチャ出力端子
３０に出力するものである。

【００６９】すなわちこの図６において、符号入力端子
２１に入力された図示しない受信装置で受信された伝送
回線からの符号化データ若しくは再生装置によって再生
された記録媒体からの符号化データは逆多重化器２２に
て、シェイプ、シェイプ動きベクトル、テクスチャ、テ
クスチャ動きベクトルのそれぞれの符号に分離される。

【００７０】これら分離された各符号のそれぞれは、そ
れぞれ対応するシェイプ復号器２６、シェイプ動きベク
トル復号器２３、テクスチャ復号器１９、テクスチャ動
きベクトル復号器２４に送られて復号される。シェイプ
動きベクトル復号器２３は、入力された符号を復号して
差分シェイプ動きベクトルを生成する。そして、既に復
号されているブロックのシェイプ動きベクトル（復号す
るブロックの左（前）に位置するブロックのシェイプ動
きベクトル）と差分シェイプ動きベクトルとを加算する
ことにより、シェイプ動きベクトルが復号される。この
シェイプ動きベクトルが、シェイプ動き補償器２５及び
テクスチャ動きベクトル復号器２４に入力される。

【００７１】また、テクスチャ動きベクトル復号器２４
は、入力された符号を復号して差分テクスチャ動きベク
トルを生成する。そして、この差分テクスチャ動きベク
トルと同一のブロックのシェイプ動きベクトルとこの差
分シェイプ動きベクトルとを加算することにより、テク
スチャ動きベクトルが復号される。このテクスチャ動き
ベクトルが、テクスチャ動き補償器２８に入力される。

【００７２】シェイプ動き補償器２５では、シェイプ動
きベクトル及び後述するシェイプ復号器２６の復号シェ
イプ画像を用いて予測シェイプ画像が生成され、シェイ
プ復号器２６に入力される。シェイプ復号器２６は、逆
多重化器２２からの符号と予測シェイプ画像とから復号
シェイプ画像を復号して出力する。この復号シェイプ画
像は、シェイプ出力端子２７に供給されるとともに、シ
ェイプ動き補償器２５にも供給される。

【００７３】テクスチャ動き補償器２８では、テクスチ
ャ動きベクトル及び後述するテクスチャ復号器２９の復
号テクスチャ画像を用いて予測テクスチャ画像が生成さ
れ、テクスチャ復号器２９に入力される。テクスチャ復
号器２９は、逆多重化器２２からの符号と予測テクスチ
ャ画像とから復号テクスチャ画像を復号して出力する。
この復号テクスチャ画像は、テクスチャ出力端子３０に
供給されるとともに、テクスチャ動き補償器２８にも供
給される。

【００７４】その後、図示はしないが、この復号シェイ
プ画像を利用して、復号テクスチャ画像が、図示しない
背景画像と合成されて、復号再生画像が生成されること
になる。

【００７５】これにより、上述した本発明における図６
の復号装置では、上述した本発明における図１の符号化
装置の場合と同じように、動きベクトルの参照方法が前
記図３で表されるものとなる。そのため、シェイプとテ
クスチャが相互に依存しあうということがなくなり、復
号の制御が簡単になる。

【００７６】なお、上述したように、符号化及び復号化
の単位がブロックで行われているが、このブロックは、
例えばＭＰＥＧで規定されている縦横１６画素のマクロ
ブロックやその他種々のブロックサイズが適用できる。

【００７７】

【発明の効果】以上説明したように本発明においては、
シェイプ画像の動きベクトルを符号化するとともに、シ
ェイプ画像の動きベクトルを用いてテクスチャ画像の動
きベクトルを符号化することにより、符号化効率が良
く、復号制御も容易にできる。

【００７８】また、本発明においては、シェイプ動きベ
クトルと既に符号化されているブロックのシェイプ動き
ベクトルとの差分値である差分シェイプ動きベクトルを
符号化し、テクスチャ動きベクトルと同一のブロックの
シェイプ動きベクトルとの差分値である差分テクスチャ
動きベクトルとを符号化しているため、異なるブロック
の異なる種類のベクトルとの差分値である差分ベクトル
を符号化することがなく、符号化効率がよく、復号の制
御も容易である。

【００７９】また、本発明においては、テクスチャの信
号の振幅がテクスチャのノイズの振幅に対して少ないよ
うな場合にも、テクスチャとシェイプを併せて用いた動
き検出を用いることにより、符号化効率を向上させるこ
とができ、復号の制御も容易である。

【００８０】すなわち本発明によれば、シェイプの非可
逆符号化を行いながら、他のブロックの動きベクトルを
参照することを減らすことによって、符号化効率を向上
させることが可能となっている。

【００８１】なお、本発明の主旨を逸脱しない範囲にお
いて、様々な変形や応用例が考え得る。したがって、本
発明の要旨は、実施の形態に限定されるものではない。

【図面の簡単な説明】

【図１】本発明の実施の形態の動画像符号化装置の概略
構成を示すブロック回路図である。

【図２】本発明実施の形態におけるシェイプ及びテクス
チャの符号化の順序を説明するためのフローチャートで
ある。

【図３】本発明実施の形態におけるシェイプ及びテクス
チャの動きベクトルを求める順序の説明に用いる図であ
る。

【図４】本発明実施の形態のシェイプ動き検出における
残差の計算の順序を説明するためのフローチャートであ
る。

【図５】本発明実施の形態のシェイプ動き検出における
テクスチャを用いた残差の計算の順序を説明するための
フローチャートである。

【図６】本発明の実施の形態の動画像復号装置の概略構
成を示すブロック回路図である。

【図７】画像をオブジェクトに分解する様子の説明に用
いる図である。

【図８】動き補償フレーム間予測の原理説明に用いる図
である。

【図９】従来技術の動画像符号化装置の概略構成を示す
ブロック回路図である。

【図１０】従来技術の動画像復号装置の概略構成を示す
ブロック回路図である。

【図１１】従来技術におけるシェイプ及びテクスチャの
符号化の順序を説明するためのフローチャートである。

【図１２】従来技術におけるシェイプ及びテクスチャの
動きベクトルを求める順序の説明に用いる図である。

【符号の説明】

２ シェイプ動き検出器、 ３ シェイプ動き補償器、
４ シェイプ符号化器、 ５ シェイプ動きベクトル
符号化器、 ６ テクスチャ動きベクトル符号化器、
７ 多重化器、 ９ テクスチャ動き検出器、 １０
テクスチャ動き補償器、 １１ テクスチャ符号化器、
２２ 逆多重化器、 ２３ シェイプ動きベクトル復
号器、 ２４ テクスチャ動きベクトル復号器、 ２５
シェイプ動き補償器、 ２６ シェイプ復号器、 ２
８ テクスチャ動き補償器、 ２９ テクスチャ復号器

Claims (6)

(57)【特許請求の範囲】
1. 【請求項１】 動画像を構成する画像を注目するオブジ
   ェクト画像とそれ以外の画像とに分割し、上記オブジェ
   クト画像をさらに画像の明るさ及び色合いを表すテクス
   チャ画像とオブジェクトの形状を表すシェイプ画像とに
   分離し、上記テクスチャ画像及び上記シェイプ画像をそ
   れぞれ符号化する動画像符号化装置において、 上記シェイプ画像の動きベクトルを検出し、シェイプ画
   像の動きベクトルを出力する第１の動きベクトル検出手
   段と、 上記シェイプ画像の動きベクトルに基づいて上記シェイ
   プ画像を符号化して上記シェイプ画像の符号化データを
   出力すると共に、上記シェイプ画像の動きベクトルと隣
   接するブロックのシェイプ画像の動きベクトルとの差分
   を演算して得られた差分シェイプ動きベクトルを符号化
   してシェイプ画像の動きベクトルの符号化データを出力
   する第１の符号化手段と、上記第１の動きベクトル検出手段からのシェイプ画像の
   動きベクトルに基づいて 上記テクスチャ画像の動きベク
   トルを検出し、テクスチャ画像の動きベクトルを出力す
   る第２の動きベクトル検出手段と、 上記テクスチャ画像の動きベクトルに基づいて上記テク
   スチャ画像を符号化して上記テクスチャ画像の符号化デ
   ータを出力すると共に、上記シェイプ画像の動きベクト
   ルを用いて上記テクスチャ画像の動きベクトルを符号化
   してテクスチャ画像の動きベクトルの符号化データを出
   力する第２の符号化手段とを有することを特徴とする動
   画像符号化装置。
2. 【請求項２】 動画像を構成する画像を注目するオブジ
   ェクト画像とそれ以外の画像とに分割し、上記オブジェ
   クト画像をさらに画像の明るさ及び色合いを表すテクス
   チャ画像とオブジェクトの形状を表すシェイプ画像とに
   分離し、上記テクスチャ画像及び上記シェイプ画像をそ
   れぞれ符号化する動画像符号化方法において、 上記シェイプ画像の動きベクトルを検出し、シェイプ画
   像の動きベクトルを出力する第１の動きベクトル検出ス
   テップと、 上記シェイプ画像の動きベクトルに基づいて上記シェイ
   プ画像を符号化して上記シェイプ画像の符号化データを
   出力するとともに、上記シェイプ画像の動きベクトルと
   隣接するブロックのシェイプ画像の動きベクトルとの差
   分を演算して得られた差分シェイプ動きベクトルを符号
   化してシェイプ画像の動きベクトルの符号化データを出
   力する第１の符号化ステップと、上記シェイプ画像の動きベクトルに基づいて 上記テクス
   チャ画像の動きベクトルを検出し、テクスチャ画像の動
   きベクトルを出力する第２の動きベクトル検出ステップ
   と、 上記テクスチャ画像の動きベクトルに基づいて上記テク
   スチャ画像を符号化して上記テクスチャ画像の符号化デ
   ータを出力すると共に、上記シェイプ画像の動きベクト
   ルを用いて上記テクスチャ画像の動きベクトルを符号化
   してテクスチャ画像の動きベクトルの符号化データを出
   力する第２の符号化ステップとを有することを特徴とす
   る動画像符号化方法。
3. 【請求項３】 上記第１及び第２の動きベクトル検出ス
   テップは、ブロック毎に各動きベクトルを検出するよう
   になされ、 上記第１の符号化ステップは、上記シェイプ画像の符号
   化データを局所復号することにより得られたシェイプ局
   所復号画像を用いて動き補償予測符号化を実行し、符号
   化すべきブロックのシェイプ画像の動きベクトルと隣接
   するブロックのシェイプ画像の動きベクトルとの差分を
   演算して得られた差分シェイプ動きベクトルを符号化
   し、 上記第２の符号化ステップは、上記テクスチャ画像の符
   号化データを局所復号することにより得られたテクスチ
   ャ局所復号画像を用いて動き補償予測符号化を実行し、
   上記符号化すべきブロックのテクスチャ画像の動きベク
   トルと同一ブロックのシェイプ画像の動きベクトルとの
   差分を演算して得られた差分テクスチャ動きベクトルを
   符号化することを特徴とする請求項２記載の動画像符号
   化方法。
4. 【請求項４】 符号化された動画像信号を表す符号化信
   号を復号する動画像復号装置において、 上記符号化信号は、シェイプ画像、シェイプ画像の動き
   ベクトルと隣接するブロックのシェイプ画像の動きベク
   トルとの差分を演算して得られた差分シェイプ 動きベク
   トル、テクスチャ画像、及び上記シェイプ画像の動きベ
   クトルに基づいて検出されたテクスチャ画像の動きベク
   トルのそれぞれの符号化データからなり、上記差分シェイプ動きベクトルの符号化データを復号し
   て既に復号されているブロックのシェイプ動きベクトル
   と加算することにより シェイプ画像の復号動きベクトル
   を出力すると共に、そのシェイプ画像の復号動きベクト
   ルに基づいて上記シェイプ画像の符号化データを復号し
   てシェイプ復号画像を出力する第１の復号手段と、 上記シェイプ画像の復号動きベクトルを用いて上記テク
   スチャ画像の動きベクトルの符号化データを復号してテ
   クスチャ画像の復号動きベクトルを出力するとともに、
   そのテクスチャ画像の復号動きベクトルに基づいて上記
   テクスチャ画像の符号化データを復号してテクスチャ復
   号画像を出力する第２の復号手段とを有することを特徴
   とする動画像復号装置。
5. 【請求項５】 符号化された動画像信号を表す符号化信
   号を復号する動画像復号方法において、 上記符号化信号は、シェイプ画像、シェイプ画像の動き
   ベクトルと隣接するブロックのシェイプ画像の動きベク
   トルとの差分を演算して得られた差分シェイプ動きベク
   トル、テクスチャ画像、及び上記シェイプ画像の動きベ
   クトルに基づいて検出されたテクスチャ画像の動きベク
   トルのそれぞれの符号化データからなり、上記差分シェイプ動きベクトルの符号化データを復号し
   て既に復号されているブロックのシェイプ動きベクトル
   と加算することにより シェイプ画像の復号動きベクトル
   を出力すると共に、そのシェイプ画像の復号動きベクト
   ルに基づいて上記シェイプ画像の符号化データを復号し
   てシェイプ復号画像を出力する第１の復号ステップと、 上記シェイプ画像の復号動きベクトルを用いて上記テク
   スチャ画像の動きベクトルの符号化データを復号してテ
   クスチャ画像の復号動きベクトルを出力するとともに、
   そのテクスチャ画像の復号動きベクトルに基づいて上記
   テクスチャ画像の符号化データを復号してテクスチャ復
   号画像を出力する第２のステップとを有することを特徴
   とする動画像復号方法。
6. 【請求項６】 上記シェイプ画像及びテクスチャ画像の
   動きベクトルのそれぞれは、ブロック毎に検出されてお
   り、 上記差分シェイプ動きベクトルの符号化データは、符号
   化すべきブロックのシェイプ画像の動きベクトルと隣接
   するブロックのシェイプ画像の動きベクトルとの差分を
   演算して得られた差分シェイプ動きベクトルを符号化す
   ることにより得られ、 上記テクスチャ画像の動きベクトルの符号化データは、
   上記符号化すべきブロックのテクスチャ画像の動きベク
   トルと同一ブロックのシェイプ画像の動きベクトルとの
   差分を演算し、得られた差分テクスチャ動きベクトルを
   符号化することにより得られており、 上記第１の復号ステップは、上記シェイプ復号画像を用
   いて動き補償予測復号を実行し、復号すべきブロックの
   差分シェイプ動きベクトルと隣接するブロックのシェイ
   プ画像の動きベクトルとを加算してシェイプ画像の動き
   ベクトルを復元し、 上記第２のステップは、上記テクスチャ復号画像を用い
   て動き補償予測復号を実行し、復号すべきブロックの差
   分テクスチャ動きベクトルと同一ブロックのシェイプ画
   像の動きベクトルとを加算してテクスチャ画像の動きベ
   クトルを復元することを特徴とする請求項５記載の動画
   像復号方法。