JPH089385A - 動画像符号化装置 - Google Patents
動画像符号化装置Info
- Publication number
- JPH089385A JPH089385A JP13717894A JP13717894A JPH089385A JP H089385 A JPH089385 A JP H089385A JP 13717894 A JP13717894 A JP 13717894A JP 13717894 A JP13717894 A JP 13717894A JP H089385 A JPH089385 A JP H089385A
- Authority
- JP
- Japan
- Prior art keywords
- image data
- image
- data
- encoding processing
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Image Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
Abstract
(57)【要約】
【目的】 画像メモリに対するデータ転送量を減じる。
【構成】 動画像符号化装置２００中の２個の符号化処
理部２００Ａ，２００Ｂは、該各符号化処理部２００
Ａ，２００Ｂ中の制御部によって制御され、動きベクト
ル検出を行って互いに隣接するマクロブロックの列を並
列に符号化する。動きベクトル検出には現画像データと
参照画像データが必要であるが、参照画像データのうち
各符号化処理部２００Ａ，２００Ｂ間で共通に必要とさ
れる画像データは、該各符号化処理部２００Ａ，２００
Ｂ中アクセス手段の制御によって画像メモリ２５０から
同時に読出され、各符号化処理部２００Ａ，２００Ｂ中
の画像データバッファに書込まれる。これにより、動画
像符号化装置２００と画像メモリ２５０間のデータ転送
量が減じられる。
理部２００Ａ，２００Ｂは、該各符号化処理部２００
Ａ，２００Ｂ中の制御部によって制御され、動きベクト
ル検出を行って互いに隣接するマクロブロックの列を並
列に符号化する。動きベクトル検出には現画像データと
参照画像データが必要であるが、参照画像データのうち
各符号化処理部２００Ａ，２００Ｂ間で共通に必要とさ
れる画像データは、該各符号化処理部２００Ａ，２００
Ｂ中アクセス手段の制御によって画像メモリ２５０から
同時に読出され、各符号化処理部２００Ａ，２００Ｂ中
の画像データバッファに書込まれる。これにより、動画
像符号化装置２００と画像メモリ２５０間のデータ転送
量が減じられる。
Description
【０００１】
【産業上の利用分野】本発明は、動画像等の画像伝送に
用いられる動画像符号化装置に関するものである。
用いられる動画像符号化装置に関するものである。
【０００２】
【従来の技術】従来、このような分野の技術としては、
例えば次のような文献に記載されるものがあった。 文献１；オプトロニクス（１９９２−５）オプトロニク
ス社、大久保“テレビ電話・会議における符号化”P.74
-79,86-98 文献２；IEEE 1993 CUSTOM CIRCUITS CONFERENCE（１９
９３）、Subroto Bose他著“A Single Chip Multistand
ard Video Codec ”P.11.4.1-11.4.4 動画像の符号化では文献２に記載されたように、符号化
しようとする１フレームの画像を例えば１６×１６画素
のマクロブロック（以下、ＭＢという）と呼ばれる小ブ
ロック単位で、次の（１）〜（５）の処理を順に行い、
符号化を行う。 （１）動きベクトル検出 符号化しようとするフレームつまり符号化フレームの符
号化対象ＭＢに対して相関の１番大きい領域を符号化参
照フレームから検出する。このときの符号化参照フレー
ムは、一般的に符号化フレームの前後のフレームが用い
られる。領域の検出において、符号化参照フレーム中で
符号化対象ＭＢと同じ空間位置の近辺が探索領域とさ
れ、探索領域内で符号化対象ＭＢに対して相関の１番大
きい領域が求められる。そして、相関の１番大きい領域
の参照フレーム中の空間位置と符号化対象ＭＢの空間位
置との差分が動きベクトルとして検出される。 （２）離散コサイン変換（以下、ＤＣＴという） 一種の直交変換が符号化対象ＭＢに施され、符号化対象
ＭＢのデータは空間データから周波数スペクトルデータ
へ変換される。ＤＣＴの入力データとしては符号化フレ
ームの符号化対象ＭＢデータがそのまま用いられるか、
または符号化対象ＭＢと動きベクトルで参照される領域
の参照フレームのデータとの差分が用いられる。その判
定基準としては、その差分値が大きいときには符号化フ
レームのデータがそのまま用いられ、小さい時には差分
データが用いられる。
例えば次のような文献に記載されるものがあった。 文献１；オプトロニクス（１９９２−５）オプトロニク
ス社、大久保“テレビ電話・会議における符号化”P.74
-79,86-98 文献２；IEEE 1993 CUSTOM CIRCUITS CONFERENCE（１９
９３）、Subroto Bose他著“A Single Chip Multistand
ard Video Codec ”P.11.4.1-11.4.4 動画像の符号化では文献２に記載されたように、符号化
しようとする１フレームの画像を例えば１６×１６画素
のマクロブロック（以下、ＭＢという）と呼ばれる小ブ
ロック単位で、次の（１）〜（５）の処理を順に行い、
符号化を行う。 （１）動きベクトル検出 符号化しようとするフレームつまり符号化フレームの符
号化対象ＭＢに対して相関の１番大きい領域を符号化参
照フレームから検出する。このときの符号化参照フレー
ムは、一般的に符号化フレームの前後のフレームが用い
られる。領域の検出において、符号化参照フレーム中で
符号化対象ＭＢと同じ空間位置の近辺が探索領域とさ
れ、探索領域内で符号化対象ＭＢに対して相関の１番大
きい領域が求められる。そして、相関の１番大きい領域
の参照フレーム中の空間位置と符号化対象ＭＢの空間位
置との差分が動きベクトルとして検出される。 （２）離散コサイン変換（以下、ＤＣＴという） 一種の直交変換が符号化対象ＭＢに施され、符号化対象
ＭＢのデータは空間データから周波数スペクトルデータ
へ変換される。ＤＣＴの入力データとしては符号化フレ
ームの符号化対象ＭＢデータがそのまま用いられるか、
または符号化対象ＭＢと動きベクトルで参照される領域
の参照フレームのデータとの差分が用いられる。その判
定基準としては、その差分値が大きいときには符号化フ
レームのデータがそのまま用いられ、小さい時には差分
データが用いられる。
【０００３】（３）量子化 ＤＣＴの出力データが、所定の代表値に変換される。 （４）可変長符号化 量子化の出力データのうち発生頻度の低い値に対して大
きい長さの符号が与えられ、発生頻度の高い値に対して
小さい長さの符号が割り当てられて符号化データとして
出力される。 （５）逆量子化，逆離散コサイン変換（以下、ＩＤＣＴ
という） 逆量子化は量子化の逆の処理、ＩＤＣＴはＤＣＴの逆の
処理をそれぞれ行う。これらの処理によって空間データ
として画像データが再生され、後に符号化されるフレー
ムに対する参照フレームデータとなる。ここで、量子化
は１：１の変換とならないので、量子化入力と逆量子化
出力とは同等ではない。そのため、原画像と再生画像と
は異なったものになる。（１）の動きベクトル検出は輝
度成分データに対して行われ、（２）〜（５）の処理は
輝度成分及び色成分に対して行われる。１ＭＢ中の輝度
成分は１６×１６＝２５６画素、色成分はその半分の１
２８画素である。
きい長さの符号が与えられ、発生頻度の高い値に対して
小さい長さの符号が割り当てられて符号化データとして
出力される。 （５）逆量子化，逆離散コサイン変換（以下、ＩＤＣＴ
という） 逆量子化は量子化の逆の処理、ＩＤＣＴはＤＣＴの逆の
処理をそれぞれ行う。これらの処理によって空間データ
として画像データが再生され、後に符号化されるフレー
ムに対する参照フレームデータとなる。ここで、量子化
は１：１の変換とならないので、量子化入力と逆量子化
出力とは同等ではない。そのため、原画像と再生画像と
は異なったものになる。（１）の動きベクトル検出は輝
度成分データに対して行われ、（２）〜（５）の処理は
輝度成分及び色成分に対して行われる。１ＭＢ中の輝度
成分は１６×１６＝２５６画素、色成分はその半分の１
２８画素である。
【０００４】図２は、従来の動画像符号化装置の１例を
示す構成ブロック図であり、この図を参照しつつ、ある
１つのＭＢデータに対する符号化処理の流れを説明す
る。この動画像符号化装置１００は、符号化ＭＢを符号
化するために必要な画像データを格納する画像データバ
ッファ１０１を備え、その画像データバッファ１０１の
出力側には動きベクトル検出部１０２とＤＣＴ部１０３
が接続されている。動きベクトル検出部１０２の出力側
には制御部１０４が接続されている。ＤＣＴ１０３の出
力側にはＩＤＣＴ部１０５と量子化部１０６が接続さ
れ、そのＩＤＣＴ部１０５の出力データが画像データバ
ッファ１０１に出力される接続である。量子化部１０６
の出力側には逆量子化部１０７と可変長符号化部１０８
が接続されている。逆量子化部１０７の出力信号もＩＤ
ＣＴ部１０５に入力され、可変長符号化部１０８の出力
が符号化データＤＴout として出力される構成である。
制御部１０４は、この動画像符号化装置１００の符号化
処理のシーケンスを制御するものであり、制御信号ｓ１
０４ａ，ｓ１０４ｂ，ｓ１０４ｃを送出する機能を有し
ている。制御部１０４からの制御信号ｓ１０４ａはＤＣ
Ｔ部１０３、ＩＤＣＴ部１０５、量子化部１０６、逆量
子化部１０７、及び可変長符号化部１０８へ入力され、
制御信号ｓ１０４ｂは画像データバッファ１０１に入力
される構成である。また、制御信号ｓ１０４ｃは外部の
図示しない画像メモリ１５０に供給される接続である。
動きベクトル検出部１０２は画像データバッファ１０１
から動きベクトル検出に必要なデータを入力し、動きベ
クトル検出結果の動きベクトルｄ１０２を制御部１０４
に出力する。ＤＣＴ１０３は符号化対象フレームデータ
（現画像データ）と動きベクトルで示される位置の参照
フレームデータ（参照画像データ）とを画像データバッ
ファ１０１から入力し、ＤＣＴ入力データとして現画像
データを使用するかまたは現画像データと参照画像デー
タを使用するか判定する。ＤＣＴ１０３はその判定結果
をフレーム内／フレーム間予測の選択結果ｓ１０３とし
てＩＤＣＴ部１０５に出力すると共にＤＣＴを行ってＤ
ＣＴ結果のデータｄ１０３を量子化部１０８に送出す
る。
示す構成ブロック図であり、この図を参照しつつ、ある
１つのＭＢデータに対する符号化処理の流れを説明す
る。この動画像符号化装置１００は、符号化ＭＢを符号
化するために必要な画像データを格納する画像データバ
ッファ１０１を備え、その画像データバッファ１０１の
出力側には動きベクトル検出部１０２とＤＣＴ部１０３
が接続されている。動きベクトル検出部１０２の出力側
には制御部１０４が接続されている。ＤＣＴ１０３の出
力側にはＩＤＣＴ部１０５と量子化部１０６が接続さ
れ、そのＩＤＣＴ部１０５の出力データが画像データバ
ッファ１０１に出力される接続である。量子化部１０６
の出力側には逆量子化部１０７と可変長符号化部１０８
が接続されている。逆量子化部１０７の出力信号もＩＤ
ＣＴ部１０５に入力され、可変長符号化部１０８の出力
が符号化データＤＴout として出力される構成である。
制御部１０４は、この動画像符号化装置１００の符号化
処理のシーケンスを制御するものであり、制御信号ｓ１
０４ａ，ｓ１０４ｂ，ｓ１０４ｃを送出する機能を有し
ている。制御部１０４からの制御信号ｓ１０４ａはＤＣ
Ｔ部１０３、ＩＤＣＴ部１０５、量子化部１０６、逆量
子化部１０７、及び可変長符号化部１０８へ入力され、
制御信号ｓ１０４ｂは画像データバッファ１０１に入力
される構成である。また、制御信号ｓ１０４ｃは外部の
図示しない画像メモリ１５０に供給される接続である。
動きベクトル検出部１０２は画像データバッファ１０１
から動きベクトル検出に必要なデータを入力し、動きベ
クトル検出結果の動きベクトルｄ１０２を制御部１０４
に出力する。ＤＣＴ１０３は符号化対象フレームデータ
（現画像データ）と動きベクトルで示される位置の参照
フレームデータ（参照画像データ）とを画像データバッ
ファ１０１から入力し、ＤＣＴ入力データとして現画像
データを使用するかまたは現画像データと参照画像デー
タを使用するか判定する。ＤＣＴ１０３はその判定結果
をフレーム内／フレーム間予測の選択結果ｓ１０３とし
てＩＤＣＴ部１０５に出力すると共にＤＣＴを行ってＤ
ＣＴ結果のデータｄ１０３を量子化部１０８に送出す
る。
【０００５】量子化部１０６はＤＣＴ出力ｄ１０３を入
力して量子化を行い、この量子化で代表値に変換された
データｄ１０６が可変長符号化部１０８に供給される。
可変長符号化部１０８は量子化部からのデータｄ１０６
に、発生頻度に対応した符号を割り当て符号化データＤ
Ｔout を生成して出力する。逆量子化部１０７は量子化
データｄ１０６に対して逆量子化を行い、逆量子化結果
のデータｄ１０７をＩＤＣＴ部１０５に供給する。ＩＤ
ＣＴ部１０５ではデータｄ１０７に対してＩＤＣＴを施
し、ＤＣＴ部１０３におけるフレーム内／フレーム間予
測の選択結果ｓ１０３がフレーム内予測を選択している
場合、ＩＤＣＴ部１０５はＩＤＣＴ結果をそのまま再生
画像データｄ１０５として画像データバッファ１０１に
出力する。また、ＤＣＴ部１０３においてフレーム間予
測が選択されている場合、ＩＤＣＴ部１０５は画像デー
タバッファ１０１から参照画像データを入力してＩＤＣ
Ｔ結果に加算する。ＩＤＣＴ結果に参照画像データが加
算されたデータが再生画像データｄ１０５として画像デ
ータバッファ１０１へ出力される。画像データバッファ
は再生画像データを格納し、この格納された再生画像デ
ータが画像データが外部の画像メモリへ出力される。制
御部１０４は動きベクトル検出部１０２と、ＤＣＴ部１
０３と、ＩＤＣＴ部１０５と、量子化部部１０６と、逆
量子化部１０７と、可変長符号化部１０８とに、符号化
制御信号ｓ１０４ａを送出し、符号化処理のシーケンス
を制御する。符号化制御信号ｓ１０４ａの内容はアドレ
スとデータとから構成され、そのアドレスによって特定
された部が符号化処理の計算を実施する。符号化制御信
号ｓ１０４ａのうちのデータ部分は特定された部へ与え
るパラメータとなる。また、制御部１０４は画像データ
バッファ１０１に対する入出力を制御するバッファ制信
号ｓ１０４ｂを画像データバッファ１０１へ送出し、外
部の画像メモリ１５０と画像データバッファ１０１間に
対するデータの入出力を制御する画像メモリ制信号ｓ１
０４ｃを外部の画像メモリ１５０に送出する。
力して量子化を行い、この量子化で代表値に変換された
データｄ１０６が可変長符号化部１０８に供給される。
可変長符号化部１０８は量子化部からのデータｄ１０６
に、発生頻度に対応した符号を割り当て符号化データＤ
Ｔout を生成して出力する。逆量子化部１０７は量子化
データｄ１０６に対して逆量子化を行い、逆量子化結果
のデータｄ１０７をＩＤＣＴ部１０５に供給する。ＩＤ
ＣＴ部１０５ではデータｄ１０７に対してＩＤＣＴを施
し、ＤＣＴ部１０３におけるフレーム内／フレーム間予
測の選択結果ｓ１０３がフレーム内予測を選択している
場合、ＩＤＣＴ部１０５はＩＤＣＴ結果をそのまま再生
画像データｄ１０５として画像データバッファ１０１に
出力する。また、ＤＣＴ部１０３においてフレーム間予
測が選択されている場合、ＩＤＣＴ部１０５は画像デー
タバッファ１０１から参照画像データを入力してＩＤＣ
Ｔ結果に加算する。ＩＤＣＴ結果に参照画像データが加
算されたデータが再生画像データｄ１０５として画像デ
ータバッファ１０１へ出力される。画像データバッファ
は再生画像データを格納し、この格納された再生画像デ
ータが画像データが外部の画像メモリへ出力される。制
御部１０４は動きベクトル検出部１０２と、ＤＣＴ部１
０３と、ＩＤＣＴ部１０５と、量子化部部１０６と、逆
量子化部１０７と、可変長符号化部１０８とに、符号化
制御信号ｓ１０４ａを送出し、符号化処理のシーケンス
を制御する。符号化制御信号ｓ１０４ａの内容はアドレ
スとデータとから構成され、そのアドレスによって特定
された部が符号化処理の計算を実施する。符号化制御信
号ｓ１０４ａのうちのデータ部分は特定された部へ与え
るパラメータとなる。また、制御部１０４は画像データ
バッファ１０１に対する入出力を制御するバッファ制信
号ｓ１０４ｂを画像データバッファ１０１へ送出し、外
部の画像メモリ１５０と画像データバッファ１０１間に
対するデータの入出力を制御する画像メモリ制信号ｓ１
０４ｃを外部の画像メモリ１５０に送出する。
【０００６】図３は、図２中の画像データバッファのデ
ータ転送を説明する図である。次の（ｉ）〜(iii）で、
１ＭＢの符号化処理に必要な外部画像メモリ１５０と画
像データバッファ１０１間のデータ転送量を図３を参照
しつつ説明する。 （ｉ）参照画像データ読出し 輝度成分について動きベクトル検出を行うために、参照
フレーム中の探索範囲として使用する領域の分だけ画像
データを画像メモリ１５０から読出す必要がある。例え
ば、符号化対象ＭＢに対して水平方向±１６画素、垂直
方向±１６画素を探索範囲とすると４８×４８画素の画
像データを読出す必要がある。しかし、通常、空間位置
の順序にしたがって符号化が行われるので、符号化対象
ＭＢと直前に処理したＭＢとで探索範囲に重複する部分
が存在することになる。この重複する部分の画像データ
はすでに画像データバッファ１０１に格納されているの
で、符号化対象ＭＢに対する動きベクトル検出で新たに
用いるデータのみを読出すとすると、図３のように１６
×４８画素が、外部の画像メモリから読出される。一
方、色成分については動きベクトル検出結果に応じて読
出されるので、１６×８画素である。
ータ転送を説明する図である。次の（ｉ）〜(iii）で、
１ＭＢの符号化処理に必要な外部画像メモリ１５０と画
像データバッファ１０１間のデータ転送量を図３を参照
しつつ説明する。 （ｉ）参照画像データ読出し 輝度成分について動きベクトル検出を行うために、参照
フレーム中の探索範囲として使用する領域の分だけ画像
データを画像メモリ１５０から読出す必要がある。例え
ば、符号化対象ＭＢに対して水平方向±１６画素、垂直
方向±１６画素を探索範囲とすると４８×４８画素の画
像データを読出す必要がある。しかし、通常、空間位置
の順序にしたがって符号化が行われるので、符号化対象
ＭＢと直前に処理したＭＢとで探索範囲に重複する部分
が存在することになる。この重複する部分の画像データ
はすでに画像データバッファ１０１に格納されているの
で、符号化対象ＭＢに対する動きベクトル検出で新たに
用いるデータのみを読出すとすると、図３のように１６
×４８画素が、外部の画像メモリから読出される。一
方、色成分については動きベクトル検出結果に応じて読
出されるので、１６×８画素である。
【０００７】（ii）現画像データ 輝度成分について１６×１６画素、及び色成分１６×８
画素読出される。 (iii）再生画像データ 輝度成分１６×１６画素、色成分１６×８画素である。
以上の（ｉ）〜(iii）を合計すると、 （１６×４８＋１６×８）＋（１６×１６＋１６×８） ＋（１６×１６＋１６×８）＝１６６４画素 となる。図４は、図２の動画像符号化装置と画像メモリ
を示すブロック図である。図４には図２の動画像符号化
装置１００に接続された画像メモリ１５０が示されてい
る。画像メモリ１５０の入力データＤＴinは時系列に入
力される動画像データがアナログ／デジタル変換された
データであり、画像メモリ１５０にはこの入力データＤ
Ｔinが書込まれる。動画像符号化装置１００中の制御部
１０４から画像メモリ制御信号Ｓ１０４ｃが出力され、
その画像メモリ制御信号ｓ１０４ｃに基き、画像データ
ｄ１５０が動画像符号化装置１００と画像メモリ１５０
との間で転送される。画像データｄ１５０の内容は参照
画像データと現画像データと再生画像データから構成さ
れる。
画素読出される。 (iii）再生画像データ 輝度成分１６×１６画素、色成分１６×８画素である。
以上の（ｉ）〜(iii）を合計すると、 （１６×４８＋１６×８）＋（１６×１６＋１６×８） ＋（１６×１６＋１６×８）＝１６６４画素 となる。図４は、図２の動画像符号化装置と画像メモリ
を示すブロック図である。図４には図２の動画像符号化
装置１００に接続された画像メモリ１５０が示されてい
る。画像メモリ１５０の入力データＤＴinは時系列に入
力される動画像データがアナログ／デジタル変換された
データであり、画像メモリ１５０にはこの入力データＤ
Ｔinが書込まれる。動画像符号化装置１００中の制御部
１０４から画像メモリ制御信号Ｓ１０４ｃが出力され、
その画像メモリ制御信号ｓ１０４ｃに基き、画像データ
ｄ１５０が動画像符号化装置１００と画像メモリ１５０
との間で転送される。画像データｄ１５０の内容は参照
画像データと現画像データと再生画像データから構成さ
れる。
【０００８】
【発明が解決しようとする課題】しかしながら、従来の
動画像符号化装置では、次のような課題があった。処理
画像の大きさが大きくなると、動画像符号化装置１００
の処理能力と動画像符号化装置１００と画像メモリ１５
０間のデータ転送速度に限界が来るとい問題点があっ
た。例えば、標準ビデオ規格では１フレームの大きさが
７２０×４８０画素であり、フレーム周波数は３０Ｈｚ
である。１フレーム内のＭＢ数は、 ７２０×４８０／（１６×１６）＝１３５０ＭＢ となり、１ＭＢに対する処理許容時間は最大、 １／３０ｓｅｃ／１３５０＝２４．６μｓ と非常に短い時間である。そのため、処理量が膨大とな
って１つの動画像符号化装置では性能を満たさない場合
も発生する。また、動画像符号化装置１００と画像メモ
リ１５０間のデータ転送における１画素当たりの周期
は、 ２４．６μｓ／１６６４画素＝１４．７８ｎｓ となる。１画素当たりの転送能力を上げるために４画素
同時に転送したとしても、５９．１ｎｓ周期で転送する
必要がある。転送オーバヘッドを２５％程度と考慮する
と４７．３ｎｓの周期つまり２１．１ＭＨｚでデータを
入出力する必要がある。動画像符号化装置において符号
化処理性能または画像転送性能のいずれかを満足出来な
い場合に、画像データを分割して処理することによって
符号化計算量及び画像データ転送量を適量としたシステ
ムが、文献２に記載されている。
動画像符号化装置では、次のような課題があった。処理
画像の大きさが大きくなると、動画像符号化装置１００
の処理能力と動画像符号化装置１００と画像メモリ１５
０間のデータ転送速度に限界が来るとい問題点があっ
た。例えば、標準ビデオ規格では１フレームの大きさが
７２０×４８０画素であり、フレーム周波数は３０Ｈｚ
である。１フレーム内のＭＢ数は、 ７２０×４８０／（１６×１６）＝１３５０ＭＢ となり、１ＭＢに対する処理許容時間は最大、 １／３０ｓｅｃ／１３５０＝２４．６μｓ と非常に短い時間である。そのため、処理量が膨大とな
って１つの動画像符号化装置では性能を満たさない場合
も発生する。また、動画像符号化装置１００と画像メモ
リ１５０間のデータ転送における１画素当たりの周期
は、 ２４．６μｓ／１６６４画素＝１４．７８ｎｓ となる。１画素当たりの転送能力を上げるために４画素
同時に転送したとしても、５９．１ｎｓ周期で転送する
必要がある。転送オーバヘッドを２５％程度と考慮する
と４７．３ｎｓの周期つまり２１．１ＭＨｚでデータを
入出力する必要がある。動画像符号化装置において符号
化処理性能または画像転送性能のいずれかを満足出来な
い場合に、画像データを分割して処理することによって
符号化計算量及び画像データ転送量を適量としたシステ
ムが、文献２に記載されている。
【０００９】図５は、画像データを分割処理する動画像
符号化装置を示すブロック図である。この画像符号化装
置は、例えば図２に示された動画像符号化装置と同様の
構成の２つの符号化処理部１００Ａ，１００ｂを備えて
いる。各符号化処理部１００Ａ，１００Ｂには、画像メ
モリ１５０Ａ，１５０Ｂがそれぞれ接続されている。２
個の画像メモリ１５０Ａ，１５０Ｂには、７２０×２４
０画素の画像データＤＴinがそれぞれ書込まれる。各符
号化処理手段１００Ａ，１００Ｂと画像メモリ１５０
Ａ，１５０Ｂ間でデータｄ１５０Ａ，ｄ１５０Ｂの転送
がそれぞれ行われ、各符号化処理部１００Ａ，１００Ｂ
はそれぞれ符号化処理を行う。図６は、フレーム中のＭ
Ｂを示す図である。図６には１フレームの一部である複
数のＭＢのＡ０〜Ｇ４が示されている。例えば、ＭＢの
Ａ０〜Ｄ４に対応する画像データＤＴinが画像メモリ１
５０Ａに書込まれ、符号化処理部１００ＡがＭＢのＡ０
〜Ｄ４、つまりフレームの上側のＭＢに対応した符号化
を実施する。同様に、ＭＢのＥ０〜Ｇ４に対応する画像
データＤＴinが画像メモリ１５０Ｂに書込まれ、符号化
処理手段１００ＢがＭＢのＥ０〜Ｇ４、つまりフレーム
の上側のＭＢに対応した符号化を実施する。このような
符号化処理によれば、動画像符号化装置における負荷が
分割されるので処理量の集中を回避することができる。
しかし、フレームの上と下の境界部にあたるＭＢにおい
て、動きベクトル検出範囲が十分確保できなくなり、動
きベクトルの検出性能が劣化して符号化効率を低下させ
ていた。例えば、上側のＭＢであるＤ２に対する動きベ
クトル検出では、下側のＥ０〜Ｅ４のＭＢに対応するデ
ータを参照することができなかった。
符号化装置を示すブロック図である。この画像符号化装
置は、例えば図２に示された動画像符号化装置と同様の
構成の２つの符号化処理部１００Ａ，１００ｂを備えて
いる。各符号化処理部１００Ａ，１００Ｂには、画像メ
モリ１５０Ａ，１５０Ｂがそれぞれ接続されている。２
個の画像メモリ１５０Ａ，１５０Ｂには、７２０×２４
０画素の画像データＤＴinがそれぞれ書込まれる。各符
号化処理手段１００Ａ，１００Ｂと画像メモリ１５０
Ａ，１５０Ｂ間でデータｄ１５０Ａ，ｄ１５０Ｂの転送
がそれぞれ行われ、各符号化処理部１００Ａ，１００Ｂ
はそれぞれ符号化処理を行う。図６は、フレーム中のＭ
Ｂを示す図である。図６には１フレームの一部である複
数のＭＢのＡ０〜Ｇ４が示されている。例えば、ＭＢの
Ａ０〜Ｄ４に対応する画像データＤＴinが画像メモリ１
５０Ａに書込まれ、符号化処理部１００ＡがＭＢのＡ０
〜Ｄ４、つまりフレームの上側のＭＢに対応した符号化
を実施する。同様に、ＭＢのＥ０〜Ｇ４に対応する画像
データＤＴinが画像メモリ１５０Ｂに書込まれ、符号化
処理手段１００ＢがＭＢのＥ０〜Ｇ４、つまりフレーム
の上側のＭＢに対応した符号化を実施する。このような
符号化処理によれば、動画像符号化装置における負荷が
分割されるので処理量の集中を回避することができる。
しかし、フレームの上と下の境界部にあたるＭＢにおい
て、動きベクトル検出範囲が十分確保できなくなり、動
きベクトルの検出性能が劣化して符号化効率を低下させ
ていた。例えば、上側のＭＢであるＤ２に対する動きベ
クトル検出では、下側のＥ０〜Ｅ４のＭＢに対応するデ
ータを参照することができなかった。
【００１０】
【課題を解決するための手段】本発明は、前記課題を解
決するために、画像データを記憶する画像メモリを共有
し、前記画像メモリに記憶された現画像における所定の
大きさのブロックの画像データと参照画像のブロックの
画像データとを用いて動きベクトル検出を行い該現画像
をブロック単位で符号化を行う複数の符号化処理部を備
え、動画像に対する符号化を実施する動画像符号化装置
において、次のような構成を講じている。即ち、互いに
隣接する前記現画像中のブロック列を前記各符号化処理
部にそれぞれ対応させ該各符号化処理部による前記符号
化を並列に行わせる制御手段と、前記動きベクトル検出
で使用する前記参照画像のブロックの画像データのうち
前記各符号化処理部間で共通して使用する画像データ
を、該画像データを共通して使用する全ての符号化処理
部に前記画像メモリから同時に読出すアクセス手段と
を、設けている。
決するために、画像データを記憶する画像メモリを共有
し、前記画像メモリに記憶された現画像における所定の
大きさのブロックの画像データと参照画像のブロックの
画像データとを用いて動きベクトル検出を行い該現画像
をブロック単位で符号化を行う複数の符号化処理部を備
え、動画像に対する符号化を実施する動画像符号化装置
において、次のような構成を講じている。即ち、互いに
隣接する前記現画像中のブロック列を前記各符号化処理
部にそれぞれ対応させ該各符号化処理部による前記符号
化を並列に行わせる制御手段と、前記動きベクトル検出
で使用する前記参照画像のブロックの画像データのうち
前記各符号化処理部間で共通して使用する画像データ
を、該画像データを共通して使用する全ての符号化処理
部に前記画像メモリから同時に読出すアクセス手段と
を、設けている。
【００１１】
【作用】本発明によれば、以上のように動画像符号化装
置を構成したので、各符号化処理部は、各制御手段の制
御により、互いに隣接する前記現画像中のブロック列を
並列に符号化する。このとき、各符号化処理部間で共通
に使用される参照画像のブロックの画像データが、アク
セス手段によって、それを使用する全ての符号化処理部
へ同時に画像メモリから読出される。各符号化処理部
は、さらに参照画像のブロックの画像データのうち各符
号化処理部で共通使用しないブロックの画像データと現
画像のブロックの画像データとを画像メモリから読出し
て動きベクトルを検出してブロック単位で符号化を行
う。従って、前記課題を解決できるのである。
置を構成したので、各符号化処理部は、各制御手段の制
御により、互いに隣接する前記現画像中のブロック列を
並列に符号化する。このとき、各符号化処理部間で共通
に使用される参照画像のブロックの画像データが、アク
セス手段によって、それを使用する全ての符号化処理部
へ同時に画像メモリから読出される。各符号化処理部
は、さらに参照画像のブロックの画像データのうち各符
号化処理部で共通使用しないブロックの画像データと現
画像のブロックの画像データとを画像メモリから読出し
て動きベクトルを検出してブロック単位で符号化を行
う。従って、前記課題を解決できるのである。
【００１２】
【実施例】図１は、本発明の実施例を示す動画像符号化
装置のブロック図である。この動画像符号化装置２００
は、ＣＰＵ（中央処理装置）等を用いて構成された２個
の符号化処理部２００Ａ，２００Ｂを備え、これら符号
化処理部２００Ａ，２００Ｂには時系列に入力される画
像データＤＴinを記憶する画像メモリ２５０が接続され
ている。各符号化処理部２００Ａ，２００Ｂは現画像の
ブロック単位に動きベクトル検出を行って符号化をそれ
ぞれ行うものであり、各符号化処理部２００Ａ，２００
Ｂと画像メモリ２５０間でデータ転送が行われ、符号化
処理部２００Ａ，２００Ｂの出力側から符号化されたデ
ータＤＴout が出力される構成である。また、各符号化
処理部２００Ａ，２００Ｂは画像メモリ２５０を共有
し、各符号化処理部２００Ａ，２００Ｂの画像メモリ２
５０に対するアクセスは、同期信号ｓ２００で制御され
る構成である。図７は、図１中の符号化処理部の内部を
示す構成ブロック図である。符号化処理部２００Ａ，２
００Ｂは同様の構成であり、それぞれ画像データバッフ
ァ２０１を備えている。画像データバッファ２０１は画
像メモリ２５０に接続されており、各符号化処理部２０
０Ａ，２００Ｂにおける符号化に必要な画像データを格
納する機能を有している。画像データバッファ２０１の
出力側には動きベクトル検出部２０２とＤＣＴ部２０３
が接続されている。動きベクトル検出部２０２の出力側
には制御手段である制御部２０４が接続されている。Ｄ
ＣＴ２０３の出力側にはＩＤＣＴ部２０５と量子化部２
０６が接続され、そのＩＤＣＴ部２０５の出力データが
画像データバッファ２０１に出力される接続である。量
子化部２０６の出力側には、逆量子化部２０７と可変長
符号化部２０８が接続されている。逆量子化部２０７の
出力データもＩＤＣＴ部２０５に入力され、可変長符号
化部２０８の出力が符号化データＤＴout として出力さ
れる構成である。制御部２０４は、この符号化処理部の
符号化処理のシーケンスを制御するものであり、制御信
号ｓ２０４ａ，ｓ２０４ｂ，ｓ２０４ｃを送出する機能
を有している。制御部１０４からの制御信号ｓ２０４ａ
は、ＤＣＴ部２０３、ＩＤＣＴ部２０５、量子化部２０
６、逆量子化部２０７、及び可変長符号化部２０８へ入
力され、制御信号ｓ２０４ｂは画像データバッファ２０
１に入力される構成である。制御信号ｓ１０４ｃは画像
メモリ２５０に供給される接続である。各符号化処理部
２００Ａ，２００Ｂには同期制御部３００がそれぞれ設
けられ、その同期制御部３００が制御部２０４に接続さ
れている。同期制御部２２０はアクセス手段を構成し、
同期制御部２２０の送出する同期制御信号ｓ２００によ
って各符号化処理部２００Ａ，２００Ｂの画像メモリ２
５０に対するアクセスが制御される構成である。
装置のブロック図である。この動画像符号化装置２００
は、ＣＰＵ（中央処理装置）等を用いて構成された２個
の符号化処理部２００Ａ，２００Ｂを備え、これら符号
化処理部２００Ａ，２００Ｂには時系列に入力される画
像データＤＴinを記憶する画像メモリ２５０が接続され
ている。各符号化処理部２００Ａ，２００Ｂは現画像の
ブロック単位に動きベクトル検出を行って符号化をそれ
ぞれ行うものであり、各符号化処理部２００Ａ，２００
Ｂと画像メモリ２５０間でデータ転送が行われ、符号化
処理部２００Ａ，２００Ｂの出力側から符号化されたデ
ータＤＴout が出力される構成である。また、各符号化
処理部２００Ａ，２００Ｂは画像メモリ２５０を共有
し、各符号化処理部２００Ａ，２００Ｂの画像メモリ２
５０に対するアクセスは、同期信号ｓ２００で制御され
る構成である。図７は、図１中の符号化処理部の内部を
示す構成ブロック図である。符号化処理部２００Ａ，２
００Ｂは同様の構成であり、それぞれ画像データバッフ
ァ２０１を備えている。画像データバッファ２０１は画
像メモリ２５０に接続されており、各符号化処理部２０
０Ａ，２００Ｂにおける符号化に必要な画像データを格
納する機能を有している。画像データバッファ２０１の
出力側には動きベクトル検出部２０２とＤＣＴ部２０３
が接続されている。動きベクトル検出部２０２の出力側
には制御手段である制御部２０４が接続されている。Ｄ
ＣＴ２０３の出力側にはＩＤＣＴ部２０５と量子化部２
０６が接続され、そのＩＤＣＴ部２０５の出力データが
画像データバッファ２０１に出力される接続である。量
子化部２０６の出力側には、逆量子化部２０７と可変長
符号化部２０８が接続されている。逆量子化部２０７の
出力データもＩＤＣＴ部２０５に入力され、可変長符号
化部２０８の出力が符号化データＤＴout として出力さ
れる構成である。制御部２０４は、この符号化処理部の
符号化処理のシーケンスを制御するものであり、制御信
号ｓ２０４ａ，ｓ２０４ｂ，ｓ２０４ｃを送出する機能
を有している。制御部１０４からの制御信号ｓ２０４ａ
は、ＤＣＴ部２０３、ＩＤＣＴ部２０５、量子化部２０
６、逆量子化部２０７、及び可変長符号化部２０８へ入
力され、制御信号ｓ２０４ｂは画像データバッファ２０
１に入力される構成である。制御信号ｓ１０４ｃは画像
メモリ２５０に供給される接続である。各符号化処理部
２００Ａ，２００Ｂには同期制御部３００がそれぞれ設
けられ、その同期制御部３００が制御部２０４に接続さ
れている。同期制御部２２０はアクセス手段を構成し、
同期制御部２２０の送出する同期制御信号ｓ２００によ
って各符号化処理部２００Ａ，２００Ｂの画像メモリ２
５０に対するアクセスが制御される構成である。
【００１３】次に、図１の動画像符号化装置の動作を図
を用いて説明する。符号化処理部２００Ａ，２００Ｂ
は、画像メモリ２５０を共有し、時分割でアクセス行っ
てそれぞれ符号化を実施する。同期制御信号ｓ２００で
どちらの符号化処理部が画像メモリ２５０とデータ入出
力するかが決定される。動きベクトル検出部２０２は画
像データバッファ２０１から動きベクトル検出に必要な
データを入力し、動きベクトル検出結果の動きベクトル
のデータｄ２０２を制御部２０４に出力する。ＤＣＴ２
０３は現画像データと動きベクトルで示される位置の参
照画像データとを画像データバッファ２０１から入力
し、ＤＣＴ入力データとして現画像データを使用するか
または現画像データ及び参照画像データを使用するか判
定する。ＤＣＴ２０３はその判定結果をフレーム内／フ
レーム間予測の選択結果ｓ２０３としてＩＤＣＴ部２０
５に出力すると共にＤＣＴを行ってＤＣＴ結果のデータ
ｄ２０３を量子化部２０６に送出する。量子化部２０６
はＤＣＴ出力ｄ２０３を入力して量子化を行い、この量
子化で代表値に変換されたデータｄ２０６が可変長符号
化部２０８に供給される。可変長符号化部２０８は量子
化部からのデータｄ２０６の発生頻度に対応した符号を
割り当て符号化データＤＴout を生成して出力する。逆
量子化部２０７は量子化データｄ２０６に対して逆量子
化を行い、逆量子化結果のデータｄ２０７をＩＤＣＴ部
２０５に供給する。ＩＤＣＴ部２０５ではデータｄ２０
７に対してＩＤＣＴを施し、ＤＣＴ部２０３におけるフ
レーム内／フレーム間予測の選択結果ｓ２０３がフレー
ム内予測を選択している場合、ＩＤＣＴ部２０５はＩＤ
ＣＴ結果をそのまま再生画像データｄ２０５として画像
データバッファ２０１に出力する。また、ＤＣＴ部２０
３においてフレーム間予測が選択されている場合、ＩＤ
ＣＴ部２０５は画像データバッファ２０１から参照画像
データを入力してＩＤＣＴ結果に加算する。ＩＤＣＴ結
果に参照画像データが加算されたデータが再生画像デー
タｄ２０５として画像データバッファ２０１へ出力され
る。画像データバッファは再生画像データを格納し、こ
の格納された再生画像データが画像データｄ２５０とし
て画像メモリ２５０へ出力される。
を用いて説明する。符号化処理部２００Ａ，２００Ｂ
は、画像メモリ２５０を共有し、時分割でアクセス行っ
てそれぞれ符号化を実施する。同期制御信号ｓ２００で
どちらの符号化処理部が画像メモリ２５０とデータ入出
力するかが決定される。動きベクトル検出部２０２は画
像データバッファ２０１から動きベクトル検出に必要な
データを入力し、動きベクトル検出結果の動きベクトル
のデータｄ２０２を制御部２０４に出力する。ＤＣＴ２
０３は現画像データと動きベクトルで示される位置の参
照画像データとを画像データバッファ２０１から入力
し、ＤＣＴ入力データとして現画像データを使用するか
または現画像データ及び参照画像データを使用するか判
定する。ＤＣＴ２０３はその判定結果をフレーム内／フ
レーム間予測の選択結果ｓ２０３としてＩＤＣＴ部２０
５に出力すると共にＤＣＴを行ってＤＣＴ結果のデータ
ｄ２０３を量子化部２０６に送出する。量子化部２０６
はＤＣＴ出力ｄ２０３を入力して量子化を行い、この量
子化で代表値に変換されたデータｄ２０６が可変長符号
化部２０８に供給される。可変長符号化部２０８は量子
化部からのデータｄ２０６の発生頻度に対応した符号を
割り当て符号化データＤＴout を生成して出力する。逆
量子化部２０７は量子化データｄ２０６に対して逆量子
化を行い、逆量子化結果のデータｄ２０７をＩＤＣＴ部
２０５に供給する。ＩＤＣＴ部２０５ではデータｄ２０
７に対してＩＤＣＴを施し、ＤＣＴ部２０３におけるフ
レーム内／フレーム間予測の選択結果ｓ２０３がフレー
ム内予測を選択している場合、ＩＤＣＴ部２０５はＩＤ
ＣＴ結果をそのまま再生画像データｄ２０５として画像
データバッファ２０１に出力する。また、ＤＣＴ部２０
３においてフレーム間予測が選択されている場合、ＩＤ
ＣＴ部２０５は画像データバッファ２０１から参照画像
データを入力してＩＤＣＴ結果に加算する。ＩＤＣＴ結
果に参照画像データが加算されたデータが再生画像デー
タｄ２０５として画像データバッファ２０１へ出力され
る。画像データバッファは再生画像データを格納し、こ
の格納された再生画像データが画像データｄ２５０とし
て画像メモリ２５０へ出力される。
【００１４】制御部２０４は動きベクトル検出部２０２
と、ＤＣＴ部２０３と、ＩＤＣＴ部２０５と、量子化部
部２０６と、逆量子化部２０７と、可変長符号化部２０
８とに、符号化制御信号ｓ２０４ａを送出し、符号化処
理のシーケンスを制御する。符号化制御信号ｓ２０４ａ
の内容はアドレスとデータとから構成され、そのアドレ
スによって特定された部が符号化処理の計算を実施す
る。符号化制御信号ｓ２０４ａのうちのデータは特定さ
れた部へ与えるパラメータとなる。また、制御部２０４
は画像データバッファ２０１に対する入出力を制御する
バッファ制信号ｓ１０４ｂを画像データバッファ２０１
へ送出し、外部の画像メモリ２５０と画像データバッフ
ァ２０１間に対するデータの入出力を制御する画像メモ
リ制信号ｓ２０４ｃを外部の画像メモリ２５０に送出す
る。この画像メモリ制信号ｓ２０４ｃによって各符号化
処理部２００Ａ，２００Ｂは、処理するブロックを選定
する。本実施例の各符号化処理部２００Ａ，２００Ｂ
は、現画像中の互いに隣接するブロック列をそれぞれ並
列で符号化する。例えば、符号化処理部２００Ａは図６
におけるＡ０〜Ａ４とＣ０〜Ｃ４とＥ０〜Ｅ４のＭＢに
対する符号化を行い、符号化処理部２００Ｂは、Ｂ０〜
Ｂ４とＤ０〜Ｄ４とＦ０〜Ｆ４のＭＢに対する符号化を
行う。ＭＢの各Ａ０〜Ａ４と各Ｂ０〜Ｂ４、各Ｃ０〜Ｃ
４と各Ｄ０〜Ｄ４、及び各Ｅ０〜Ｅ４と各Ｆ０〜Ｆ４の
処理は少しタイミングがずらされた状態で、同時進行で
符号化される。
と、ＤＣＴ部２０３と、ＩＤＣＴ部２０５と、量子化部
部２０６と、逆量子化部２０７と、可変長符号化部２０
８とに、符号化制御信号ｓ２０４ａを送出し、符号化処
理のシーケンスを制御する。符号化制御信号ｓ２０４ａ
の内容はアドレスとデータとから構成され、そのアドレ
スによって特定された部が符号化処理の計算を実施す
る。符号化制御信号ｓ２０４ａのうちのデータは特定さ
れた部へ与えるパラメータとなる。また、制御部２０４
は画像データバッファ２０１に対する入出力を制御する
バッファ制信号ｓ１０４ｂを画像データバッファ２０１
へ送出し、外部の画像メモリ２５０と画像データバッフ
ァ２０１間に対するデータの入出力を制御する画像メモ
リ制信号ｓ２０４ｃを外部の画像メモリ２５０に送出す
る。この画像メモリ制信号ｓ２０４ｃによって各符号化
処理部２００Ａ，２００Ｂは、処理するブロックを選定
する。本実施例の各符号化処理部２００Ａ，２００Ｂ
は、現画像中の互いに隣接するブロック列をそれぞれ並
列で符号化する。例えば、符号化処理部２００Ａは図６
におけるＡ０〜Ａ４とＣ０〜Ｃ４とＥ０〜Ｅ４のＭＢに
対する符号化を行い、符号化処理部２００Ｂは、Ｂ０〜
Ｂ４とＤ０〜Ｄ４とＦ０〜Ｆ４のＭＢに対する符号化を
行う。ＭＢの各Ａ０〜Ａ４と各Ｂ０〜Ｂ４、各Ｃ０〜Ｃ
４と各Ｄ０〜Ｄ４、及び各Ｅ０〜Ｅ４と各Ｆ０〜Ｆ４の
処理は少しタイミングがずらされた状態で、同時進行で
符号化される。
【００１５】図８は、図１の符号化処理部のデータ転送
を説明する図である。この図はＭＢであるＣ１及びＤ１
の符号化のシーケンスを示している。各符号化処理部２
００Ａ，２００Ｂのおける処理時間のうち、動きベクト
ル検出は約１／３を使用し、ＤＣＴ及び量子化等では約
２／３が使用される。Ｃ１についての輝度成分の参照デ
ータを水平、垂直方向とも±１６画素とすると、必要と
する参照画像のＭＢは図６のＢ０，Ｂ１，Ｂ２，Ｃ０，
Ｃ１，Ｃ２，Ｄ０，Ｄ１，Ｄ２であるが、先立って行わ
れたＣ０の符号化処理でＢ０，Ｂ１，Ｃ０，Ｃ１，Ｄ
０，Ｄ１は使用されているので、既に画像データバッフ
ァ２０１に格納されている。そのため、新たに必要なＭ
Ｂの画像データは、Ｂ２，Ｃ２，Ｄ２の画像データであ
る。同様に、Ｄ１について新たに必要な画像データは、
Ｃ２，Ｄ２，Ｅ２のＭＢの画像データである。ここで、
Ｃ２，Ｄ２の画像データは各符号化処理部２００Ａ，２
００Ｂ双方の動きベクトル検出に必要があるので、符号
化処理部２００Ａ，２００Ｂの双方の画像データバッフ
ァ２０１に同時に、画像メモリ２５０から読出されて書
込まれる。
を説明する図である。この図はＭＢであるＣ１及びＤ１
の符号化のシーケンスを示している。各符号化処理部２
００Ａ，２００Ｂのおける処理時間のうち、動きベクト
ル検出は約１／３を使用し、ＤＣＴ及び量子化等では約
２／３が使用される。Ｃ１についての輝度成分の参照デ
ータを水平、垂直方向とも±１６画素とすると、必要と
する参照画像のＭＢは図６のＢ０，Ｂ１，Ｂ２，Ｃ０，
Ｃ１，Ｃ２，Ｄ０，Ｄ１，Ｄ２であるが、先立って行わ
れたＣ０の符号化処理でＢ０，Ｂ１，Ｃ０，Ｃ１，Ｄ
０，Ｄ１は使用されているので、既に画像データバッフ
ァ２０１に格納されている。そのため、新たに必要なＭ
Ｂの画像データは、Ｂ２，Ｃ２，Ｄ２の画像データであ
る。同様に、Ｄ１について新たに必要な画像データは、
Ｃ２，Ｄ２，Ｅ２のＭＢの画像データである。ここで、
Ｃ２，Ｄ２の画像データは各符号化処理部２００Ａ，２
００Ｂ双方の動きベクトル検出に必要があるので、符号
化処理部２００Ａ，２００Ｂの双方の画像データバッフ
ァ２０１に同時に、画像メモリ２５０から読出されて書
込まれる。
【００１６】参照画像の輝度データの読出しは図８中の
時刻ｔ０から開始され、引き続き、現画像データの読出
しが行われる。現画像データの読出しではＣ１の現画像
データが先に読出され、Ｄ１の現画像データが後に読出
される。Ｃ１の現画像データの読出し終了後、符号化処
理部２００ＡはＣ１に対する動きベクトル検出を開始す
る。Ｄ１の現画像データの読出し終了後、符号化処理部
２００ＢはＤ１に対する動きベクトル検出を開始する。
また、Ｄ１の現画像データの読出し終了後、既に計算さ
れて各画像データバッファ２０１に格納されているＣ
０，Ｄ０の再生画像データを順番に画像メモリ２５０に
書込む。Ｄ０の再生画像データの書込み終了時には、Ｃ
１に対する動きベクトル検出は終了しているので、検出
された動きベクトルで示される色成分の参照領域のデー
タＣ１c が、符号化処理部２００Ａの画像データバッフ
ァ２０１に書込まれる。引き続き、Ｄ１に対する色成分
参照領域のデータＤ１c が読出されて符号化処理部２０
０Ｂの画像データバッファ２０１に書込まれる。２個の
ＭＢのＣ１，Ｄ１に対する符号化処理で、画像メモリ２
５０と各画像データバッファ２０１間のデータ転送量
は、図８中に示された時刻ｔ１〜時刻ｔ２の間で２８１
６画素のデータとなり、１ＭＢ当たりに換算すると１４
０８画素のデータとなる。この値は、従来例のデータ転
送量１６６４画素に対して、１１／１３に削減されてお
り、処理時間を短縮できることになる。
時刻ｔ０から開始され、引き続き、現画像データの読出
しが行われる。現画像データの読出しではＣ１の現画像
データが先に読出され、Ｄ１の現画像データが後に読出
される。Ｃ１の現画像データの読出し終了後、符号化処
理部２００ＡはＣ１に対する動きベクトル検出を開始す
る。Ｄ１の現画像データの読出し終了後、符号化処理部
２００ＢはＤ１に対する動きベクトル検出を開始する。
また、Ｄ１の現画像データの読出し終了後、既に計算さ
れて各画像データバッファ２０１に格納されているＣ
０，Ｄ０の再生画像データを順番に画像メモリ２５０に
書込む。Ｄ０の再生画像データの書込み終了時には、Ｃ
１に対する動きベクトル検出は終了しているので、検出
された動きベクトルで示される色成分の参照領域のデー
タＣ１c が、符号化処理部２００Ａの画像データバッフ
ァ２０１に書込まれる。引き続き、Ｄ１に対する色成分
参照領域のデータＤ１c が読出されて符号化処理部２０
０Ｂの画像データバッファ２０１に書込まれる。２個の
ＭＢのＣ１，Ｄ１に対する符号化処理で、画像メモリ２
５０と各画像データバッファ２０１間のデータ転送量
は、図８中に示された時刻ｔ１〜時刻ｔ２の間で２８１
６画素のデータとなり、１ＭＢ当たりに換算すると１４
０８画素のデータとなる。この値は、従来例のデータ転
送量１６６４画素に対して、１１／１３に削減されてお
り、処理時間を短縮できることになる。
【００１７】図９は、図１中の符号化処理部間のアクセ
ス権の変動を示す図であり、この図を用いて、図８中の
時刻ｔ１〜時刻ｔ２における各符号化処理部２００Ａ，
２００Ｂの画像メモリ２５０に対するアクセスを説明す
る。符号化処理部２００Ａ，２００Ｂのうち１つがマス
タ、他方がスレーブとなる。符号化処理部が３個以上の
場合には、１つの符号化処理部がマスタとなり、他の符
号化処理部が全てスレーブとなる。ここでは、符号化処
理部２００Ａをマスタ、符号化処理部２００Ｂをスレー
ブとする。符号化処理部２００Ａ，２００の両方で共通
に必要となるデータを画像メモリ２５０から読出す際、
画像メモリ制御信号ｓ２０４ｃはマスタ側である符号化
処理部２００Ａから出力され、スレーブ側からは出力さ
れない。どちらの符号化処理部がマスタであるかスレー
ブであるかは制御部２０４から同期制御インタフェース
信号ｓＩを同期制御２２０に与えて設定する。時刻ｔ１
において、符号化処理部２００Ａは画像メモリ２５０に
対するアクセス権を放棄する。符号化処理部２００Ａ中
の制御部２０４から同期制御インタフェース信号ｓＩが
符号化処理部２００Ａの同期制御部２２０に供給され、
この同期制御部２２０から符号化処理部２００Ｂ中の同
期制御部２２０へ同期制御信号ｓ２００が送出される。
符号化処理部２００Ｂ中の同期制御部２２０から同期制
御インターフェース信号ｓＩが符号化処理部２００Ｂ中
の制御部２０４へ入力され、その制御部２０４が画像メ
モリ２５０に対するアクセス権を得たことを認識する。
制御部２０４はＭＢであるＤ１の現画像データ読出しを
行うための画像メモリ制御信号Ｓ２０４ｃを画像メモリ
２５０に出力し、画像メモリ２５０から対応するデータ
が読出される。Ｄ１の現画像データの読出し終了後、符
号処理部２００Ｂの制御部２０４は画像メモリ２５０に
対するアクセス権を放棄する。即ち、符号処理部２００
Ｂの制御部２０４は同期制御インタフェース信号ｓＩを
符号処理部２００Ｂの同期制御部２２０へ供給する。符
号処理部２００Ｂの同期制御部２２０から符号化処理部
２００Ａの同期制御部２２０に同期制御信号ｓ２００を
送出する。
ス権の変動を示す図であり、この図を用いて、図８中の
時刻ｔ１〜時刻ｔ２における各符号化処理部２００Ａ，
２００Ｂの画像メモリ２５０に対するアクセスを説明す
る。符号化処理部２００Ａ，２００Ｂのうち１つがマス
タ、他方がスレーブとなる。符号化処理部が３個以上の
場合には、１つの符号化処理部がマスタとなり、他の符
号化処理部が全てスレーブとなる。ここでは、符号化処
理部２００Ａをマスタ、符号化処理部２００Ｂをスレー
ブとする。符号化処理部２００Ａ，２００の両方で共通
に必要となるデータを画像メモリ２５０から読出す際、
画像メモリ制御信号ｓ２０４ｃはマスタ側である符号化
処理部２００Ａから出力され、スレーブ側からは出力さ
れない。どちらの符号化処理部がマスタであるかスレー
ブであるかは制御部２０４から同期制御インタフェース
信号ｓＩを同期制御２２０に与えて設定する。時刻ｔ１
において、符号化処理部２００Ａは画像メモリ２５０に
対するアクセス権を放棄する。符号化処理部２００Ａ中
の制御部２０４から同期制御インタフェース信号ｓＩが
符号化処理部２００Ａの同期制御部２２０に供給され、
この同期制御部２２０から符号化処理部２００Ｂ中の同
期制御部２２０へ同期制御信号ｓ２００が送出される。
符号化処理部２００Ｂ中の同期制御部２２０から同期制
御インターフェース信号ｓＩが符号化処理部２００Ｂ中
の制御部２０４へ入力され、その制御部２０４が画像メ
モリ２５０に対するアクセス権を得たことを認識する。
制御部２０４はＭＢであるＤ１の現画像データ読出しを
行うための画像メモリ制御信号Ｓ２０４ｃを画像メモリ
２５０に出力し、画像メモリ２５０から対応するデータ
が読出される。Ｄ１の現画像データの読出し終了後、符
号処理部２００Ｂの制御部２０４は画像メモリ２５０に
対するアクセス権を放棄する。即ち、符号処理部２００
Ｂの制御部２０４は同期制御インタフェース信号ｓＩを
符号処理部２００Ｂの同期制御部２２０へ供給する。符
号処理部２００Ｂの同期制御部２２０から符号化処理部
２００Ａの同期制御部２２０に同期制御信号ｓ２００を
送出する。
【００１８】以下同様な手順で、符号化処理部２００Ａ
によるＣ０の再生画像データの書込み、符号化処理部２
００ＢによるＤ０の再生画像データの書込み、符号化処
理部２００ＡによるＣ１の色成分Ｃ１c 参照画像データ
読出し、符号化処理部２００ＢによるＤ１の色成分Ｄ１
c 参照画像データ読出し、及び符号化処理部２００Ａに
よるＣ３の輝度成分の参照画像データ読出しが行われ
る。ＭＢのＣ３の参照画像データである輝度成分は画像
メモリ２５０から読出され、同時に各符号化処理部２０
０Ａ，２００Ｂの画像データバッファ２０１にそれぞれ
書込まれる。ここで、Ｃ３の参照画像データの書込み手
順を説明する。マスタである符号化処理部２００Ａの制
御部２０４は、共通データアクセスリクエスト信号を同
期制御インタフェースｓＩとして符号化処理部２００Ａ
の同期制御部２２０に出力する。この同期制御部２２０
から符号化処理部２００Ｂの同期制御部２２０に対して
同期制御信号ｓ２００が送出される。同期制御信号ｓ２
００の出力から所定のサイクル遅れて、画像メモリ２５
０からの読出しが開始されるようにしておく。所定のサ
イクルのサイクル数は、両符号化処理部２００Ａ，２０
０Ｂ間で予め設定しておく。符号処理部２００Ｂの制御
部２０４は同期制御部２２０経由で共通データアクセス
信号を入力する。前記所定サイクル経過と同時に、画像
データバッファ２０１に対するデータ転送が開始され
る。マスタである符号化処理部２００Ａの制御部２０４
は、画像メモリ制御信号ｓ２０４ｃを画像メモリ２５０
に供給すると共に、バッファ制御信号ｓ２０４ｂを画像
データバッファ２０１へ供給する。一方、符号化処理部
２００Ｂの制御部２０４はバッファ制御信号ｓ２０４ｂ
を画像データバッファ２０１へ供給する処理のみを行
う。ＭＢのＣ３の参照画像データである輝度成分の読出
し終了後、同様の手順でＤ３の輝度成分が参照画像デー
タとして読出される。引き続き、符号化処理部２００Ｂ
によるＭＢのＥ３の参照画像データ、符号化処理部２０
０ＡによるＭＢのＣ２の現画像データの各読出しが行わ
れる。
によるＣ０の再生画像データの書込み、符号化処理部２
００ＢによるＤ０の再生画像データの書込み、符号化処
理部２００ＡによるＣ１の色成分Ｃ１c 参照画像データ
読出し、符号化処理部２００ＢによるＤ１の色成分Ｄ１
c 参照画像データ読出し、及び符号化処理部２００Ａに
よるＣ３の輝度成分の参照画像データ読出しが行われ
る。ＭＢのＣ３の参照画像データである輝度成分は画像
メモリ２５０から読出され、同時に各符号化処理部２０
０Ａ，２００Ｂの画像データバッファ２０１にそれぞれ
書込まれる。ここで、Ｃ３の参照画像データの書込み手
順を説明する。マスタである符号化処理部２００Ａの制
御部２０４は、共通データアクセスリクエスト信号を同
期制御インタフェースｓＩとして符号化処理部２００Ａ
の同期制御部２２０に出力する。この同期制御部２２０
から符号化処理部２００Ｂの同期制御部２２０に対して
同期制御信号ｓ２００が送出される。同期制御信号ｓ２
００の出力から所定のサイクル遅れて、画像メモリ２５
０からの読出しが開始されるようにしておく。所定のサ
イクルのサイクル数は、両符号化処理部２００Ａ，２０
０Ｂ間で予め設定しておく。符号処理部２００Ｂの制御
部２０４は同期制御部２２０経由で共通データアクセス
信号を入力する。前記所定サイクル経過と同時に、画像
データバッファ２０１に対するデータ転送が開始され
る。マスタである符号化処理部２００Ａの制御部２０４
は、画像メモリ制御信号ｓ２０４ｃを画像メモリ２５０
に供給すると共に、バッファ制御信号ｓ２０４ｂを画像
データバッファ２０１へ供給する。一方、符号化処理部
２００Ｂの制御部２０４はバッファ制御信号ｓ２０４ｂ
を画像データバッファ２０１へ供給する処理のみを行
う。ＭＢのＣ３の参照画像データである輝度成分の読出
し終了後、同様の手順でＤ３の輝度成分が参照画像デー
タとして読出される。引き続き、符号化処理部２００Ｂ
によるＭＢのＥ３の参照画像データ、符号化処理部２０
０ＡによるＭＢのＣ２の現画像データの各読出しが行わ
れる。
【００１９】以上のように、本実施例では、画像メモリ
２５０を共有する２つの符号化処理部２００Ａ，２００
Ｂで動画像符号化装置を構成しているので、処理量の集
中が無く、符号化処理部の負担が低減される。また、各
符号化処理部２００Ａ，２００Ｂは現画像中で互いに隣
接するＭＢの列をそれぞれ並列に符号化する。そのた
め、参照画像の領域が制限される事がなく且つ共通の参
照画像のデータを用いることが可能となり、画質の低下
を防止したうえで画像メモリ２５０と動画像符号化装置
２００間のデータ転送量を少なくする事ができる。な
お、本発明は、上記実施例に限定されず種々の変形が可
能である。例えば、符号化処理部２００Ａ，２００Ｂの
数は２個でなくてもよく、３個以上で構成してもよく、
その場合、さらに各符号化処理部における負担が軽減さ
れる。また、ＭＢのサイズは画像処理の目的に応じて変
更可能であり、どのようなサイズのＭＢであっても、上
記実施例と同様の効果が発揮される。
２５０を共有する２つの符号化処理部２００Ａ，２００
Ｂで動画像符号化装置を構成しているので、処理量の集
中が無く、符号化処理部の負担が低減される。また、各
符号化処理部２００Ａ，２００Ｂは現画像中で互いに隣
接するＭＢの列をそれぞれ並列に符号化する。そのた
め、参照画像の領域が制限される事がなく且つ共通の参
照画像のデータを用いることが可能となり、画質の低下
を防止したうえで画像メモリ２５０と動画像符号化装置
２００間のデータ転送量を少なくする事ができる。な
お、本発明は、上記実施例に限定されず種々の変形が可
能である。例えば、符号化処理部２００Ａ，２００Ｂの
数は２個でなくてもよく、３個以上で構成してもよく、
その場合、さらに各符号化処理部における負担が軽減さ
れる。また、ＭＢのサイズは画像処理の目的に応じて変
更可能であり、どのようなサイズのＭＢであっても、上
記実施例と同様の効果が発揮される。
【００２０】
【発明の効果】以上詳細に説明したように、本発明によ
れば、画像メモリを共有する複数の符号化処理部を動画
像符号化装置と制御手段とを備え、制御手段の制御によ
り、各符号化処理部が、互いに隣接するブロック列を並
列に符号化する構成としている。また、動画像符号化装
置にはアクセス手段が設けられ、アクセス手段によって
各符号化処理部間で共通に使用される参照画像のデータ
をそれを使用する各符号化処理部に同時に画像メモリか
ら読出される。そのため、参照画像の領域が制限される
事なく、共通の参照画像のデータを用いることが可能と
なり、画像メモリと動画像符号化装置間のデータ転送量
を少なくする事ができる。
れば、画像メモリを共有する複数の符号化処理部を動画
像符号化装置と制御手段とを備え、制御手段の制御によ
り、各符号化処理部が、互いに隣接するブロック列を並
列に符号化する構成としている。また、動画像符号化装
置にはアクセス手段が設けられ、アクセス手段によって
各符号化処理部間で共通に使用される参照画像のデータ
をそれを使用する各符号化処理部に同時に画像メモリか
ら読出される。そのため、参照画像の領域が制限される
事なく、共通の参照画像のデータを用いることが可能と
なり、画像メモリと動画像符号化装置間のデータ転送量
を少なくする事ができる。
【図１】本発明の実施例を示す動画像符号化装置のブロ
ック図である。
ック図である。
【図２】従来の動画像符号化装置の１例を示す構成ブロ
ック図である。
ック図である。
【図３】図２中の画像データバッファのデータ転送を説
明する図である。
明する図である。
【図４】図２の動画像符号化装置と画像メモリを示すブ
ロック図である。
ロック図である。
【図５】画像データを分割処理する動画像符号化装置を
示すブロック図である。
示すブロック図である。
【図６】フレーム中のＭＢを示す図である。
【図７】図１中の符号化処理部の内部を示す構成ブロッ
ク図である。
ク図である。
【図８】図１の符号化処理部のデータ転送を説明する図
である。
である。
【図９】図１中の符号化処理部間のアクセス権の変動を
示す図である。
示す図である。
２００ 動画像符号化装置 ２００Ａ，２００Ｂ 符号化処理部 ２５０ 画像メモリ ｓ２００ 同期制御信号 ｓ２０４ｃ 画像メモリ制御信号 ｓ２５０ 転送データ ＤＴout 符号化データ ２０１ 画像データバッファ ２０２ 動きベクトル検出部 ２０３ ＤＣＴ部 ２０４ 制御部 ２２０ 同期制御部 ｓ２０４ｂ バッファ制御信号 ｓＩ 同期制御インタフェース信号
Claims (1)
- 【請求項１】 画像データを記憶する画像メモリを共有
し、前記画像メモリに記憶された現画像における所定の
大きさのブロックの画像データと参照画像のブロックの
画像データとを用いて動きベクトル検出を行い該現画像
をブロック単位で符号化を行う複数の符号化処理部を備
え、動画像に対する符号化を実施する動画像符号化装置
において、 互いに隣接する前記現画像中のブロック列を前記各符号
化処理部にそれぞれ対応させ該各符号化処理部による前
記符号化を並列に行わせる制御手段と、前記動きベクト
ル検出で使用する前記参照画像のブロックの画像データ
のうち前記各符号化処理部間で共通して使用する画像デ
ータを、該画像データを共通して使用する全ての符号化
処理部に前記画像メモリから同時に読出すアクセス手段
とを、設けたことを特徴とする動画像符号化処理装置。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP13717894A JP3360942B2 (ja) | 1994-06-20 | 1994-06-20 | 動画像符号化装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP13717894A JP3360942B2 (ja) | 1994-06-20 | 1994-06-20 | 動画像符号化装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH089385A true JPH089385A (ja) | 1996-01-12 |
| JP3360942B2 JP3360942B2 (ja) | 2003-01-07 |
Family
ID=15192642
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP13717894A Expired - Fee Related JP3360942B2 (ja) | 1994-06-20 | 1994-06-20 | 動画像符号化装置 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP3360942B2 (ja) |
Cited By (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO1998042136A1 (en) * | 1997-03-19 | 1998-09-24 | Sony Corporation | Image encoding method and device |
| US6263112B1 (en) | 1996-12-13 | 2001-07-17 | Fujitsu Limited | Motion vector searching apparatus and motion picture coding apparatus |
| US6470050B1 (en) | 1999-04-09 | 2002-10-22 | Matsushita Electric Industrial Co., Ltd. | Image coding apparatus and its motion vector detection method |
| JP2007325119A (ja) * | 2006-06-02 | 2007-12-13 | Canon Inc | 画像処理装置及び画像処理方法 |
| US7365777B2 (en) | 2003-03-24 | 2008-04-29 | Fujifilm Corporation | Digital camera |
| JP2010239428A (ja) * | 2009-03-31 | 2010-10-21 | Nec Corp | 統計多重装置、エンコーダ、及び統計多重方法 |
| GB2447402B (en) * | 2006-02-10 | 2011-03-02 | Nvidia Corp | Processing video data |
| US8687222B2 (en) | 2006-08-28 | 2014-04-01 | Fujitsu Semiconductor Limited | Image data buffer apparatus and data transfer system for efficient data transfer |
| US9113162B2 (en) | 2003-11-25 | 2015-08-18 | Nvidia Corporation | Dynamic packet size control for MPEG-4 data partition mode |
-
1994
- 1994-06-20 JP JP13717894A patent/JP3360942B2/ja not_active Expired - Fee Related
Cited By (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6263112B1 (en) | 1996-12-13 | 2001-07-17 | Fujitsu Limited | Motion vector searching apparatus and motion picture coding apparatus |
| WO1998042136A1 (en) * | 1997-03-19 | 1998-09-24 | Sony Corporation | Image encoding method and device |
| US6005628A (en) * | 1997-03-19 | 1999-12-21 | Sony Corporation | Picture encoding method and picture encoding apparatus |
| US6470050B1 (en) | 1999-04-09 | 2002-10-22 | Matsushita Electric Industrial Co., Ltd. | Image coding apparatus and its motion vector detection method |
| US7365777B2 (en) | 2003-03-24 | 2008-04-29 | Fujifilm Corporation | Digital camera |
| US9113162B2 (en) | 2003-11-25 | 2015-08-18 | Nvidia Corporation | Dynamic packet size control for MPEG-4 data partition mode |
| GB2447402B (en) * | 2006-02-10 | 2011-03-02 | Nvidia Corp | Processing video data |
| US8705630B2 (en) | 2006-02-10 | 2014-04-22 | Nvidia Corporation | Adapting one type of encoder to another type of encoder |
| JP2007325119A (ja) * | 2006-06-02 | 2007-12-13 | Canon Inc | 画像処理装置及び画像処理方法 |
| US8687222B2 (en) | 2006-08-28 | 2014-04-01 | Fujitsu Semiconductor Limited | Image data buffer apparatus and data transfer system for efficient data transfer |
| JP2010239428A (ja) * | 2009-03-31 | 2010-10-21 | Nec Corp | 統計多重装置、エンコーダ、及び統計多重方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| JP3360942B2 (ja) | 2003-01-07 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR100298416B1 (ko) | 구획 분류 및 적응 비트 할당을 위한 방법 및 장치 | |
| AU657510B2 (en) | Improved image encoding/decoding method and apparatus | |
| JPH0837662A (ja) | 画像符号化復号化装置 | |
| JPH0595540A (ja) | 動画像符号化装置 | |
| JPH09179987A (ja) | 動きベクトル検出方法及び動きベクトル検出装置 | |
| JPH05308622A (ja) | 画像符号化・復号化装置 | |
| JPH05219529A (ja) | 動きベクトル検出回路 | |
| JPH04334190A (ja) | 映像信号符号化装置及び映像信号符号化方法 | |
| KR101160640B1 (ko) | 데이터 처리 시스템 및 데이터 처리 방법 | |
| JPH089385A (ja) | 動画像符号化装置 | |
| JPH0759096A (ja) | ビデオエンコーダ及びデコーダ | |
| JPH09294262A (ja) | 画像符号化装置 | |
| JPH01179584A (ja) | 動き補償動ベクトル探索方法 | |
| JPH07143494A (ja) | 動画像符号化方法 | |
| US7613351B2 (en) | Video decoder with deblocker within decoding loop | |
| JPH06225279A (ja) | 符号化方法、復号化方法、符号化装置及び復号化装置 | |
| US6097843A (en) | Compression encoding apparatus, encoding method, decoding apparatus, and decoding method | |
| US20040146213A1 (en) | System and method for video data compression | |
| JPH0846977A (ja) | 画像圧縮回路 | |
| JPH0221776A (ja) | 予測性静止画像エンコーダ・デコーダ | |
| JP2776284B2 (ja) | 画像符号化装置 | |
| JP2834134B2 (ja) | 多重符号化装置及び多重復号化装置 | |
| JP3141149B2 (ja) | 画像符号化装置 | |
| JP2008136177A (ja) | 動き検出装置、ＭＯＳ（ｍｅｔａｌ−ｏｘｉｄｅｓｅｍｉｃｏｎｄｕｃｔｏｒ）集積回路および映像システム | |
| JPH07111653A (ja) | 符号化装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20021001 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20081018 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20081018 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20091018 Year of fee payment: 7 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20101018 Year of fee payment: 8 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111018 Year of fee payment: 9 |
|
| LAPS | Cancellation because of no payment of annual fees |