JPH10108197A - 画像符号化装置、画像符号化制御方法および画像符号化制御用プログラムを記録した媒体 - Google Patents
画像符号化装置、画像符号化制御方法および画像符号化制御用プログラムを記録した媒体Info
- Publication number
- JPH10108197A JPH10108197A JP25973096A JP25973096A JPH10108197A JP H10108197 A JPH10108197 A JP H10108197A JP 25973096 A JP25973096 A JP 25973096A JP 25973096 A JP25973096 A JP 25973096A JP H10108197 A JPH10108197 A JP H10108197A
- Authority
- JP
- Japan
- Prior art keywords
- encoding
- difficulty
- filter
- image
- coding
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Image Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
Abstract
(57)【要約】
【課題】 リアルタイムに符号化しながら、入力画像の
特徴に応じてプリフィルタを適応的に使用することがで
きるようにする。 【解決手段】 符号化制御部１５における符号化難易度
計算部４２は、画像の符号化の難易度を表す符号化難易
度を算出する。プリフィルタ制御部５１は、ビットレー
トに対する符号化難易度の比率と、最新のＢピクチャの
符号化難易度と最新のＩピクチャの符号化難易度との比
率によって表される動き成分とに応じて、プリフィルタ
部５０における空間フィルタ５２と時間フィルタ５３の
特性を制御する。
特徴に応じてプリフィルタを適応的に使用することがで
きるようにする。 【解決手段】 符号化制御部１５における符号化難易度
計算部４２は、画像の符号化の難易度を表す符号化難易
度を算出する。プリフィルタ制御部５１は、ビットレー
トに対する符号化難易度の比率と、最新のＢピクチャの
符号化難易度と最新のＩピクチャの符号化難易度との比
率によって表される動き成分とに応じて、プリフィルタ
部５０における空間フィルタ５２と時間フィルタ５３の
特性を制御する。
Description
【０００１】
【発明の属する技術分野】本発明は、画像データを圧縮
符号化する画像符号化装置、画像符号化制御方法および
画像符号化制御用プログラムを記録した媒体に関する。
符号化する画像符号化装置、画像符号化制御方法および
画像符号化制御用プログラムを記録した媒体に関する。
【０００２】
【従来の技術】送信側で画像データを圧縮して送信する
と共に、受信側では圧縮された画像データを伸張する通
信システムや、画像データを圧縮して記録すると共に、
再生時には圧縮された画像データを伸張して出力する圧
縮画像記録再生装置等において、画像データの圧縮の方
法としては、例えばＭＰＥＧ（Moving Picture Experts
Group）規格で採用されている双方向予測符号化方式が
ある。この双方向予測符号化方式では、双方向予測を用
いることで符号化効率を向上させている。双方向予測符
号化方式では、フレーム内符号化、フレーム間順方向予
測符号化および双方向予測符号化の３つのタイプの符号
化が行われ、各符号化タイプによる画像は、それぞれＩ
ピクチャ（intra coded picture ）、Ｐピクチャ（pred
ictive coded picture）およびＢピクチャ（bidirectio
nally predictive coded picture）と呼ばれる。
と共に、受信側では圧縮された画像データを伸張する通
信システムや、画像データを圧縮して記録すると共に、
再生時には圧縮された画像データを伸張して出力する圧
縮画像記録再生装置等において、画像データの圧縮の方
法としては、例えばＭＰＥＧ（Moving Picture Experts
Group）規格で採用されている双方向予測符号化方式が
ある。この双方向予測符号化方式では、双方向予測を用
いることで符号化効率を向上させている。双方向予測符
号化方式では、フレーム内符号化、フレーム間順方向予
測符号化および双方向予測符号化の３つのタイプの符号
化が行われ、各符号化タイプによる画像は、それぞれＩ
ピクチャ（intra coded picture ）、Ｐピクチャ（pred
ictive coded picture）およびＢピクチャ（bidirectio
nally predictive coded picture）と呼ばれる。
【０００３】ところで、上述のＭＰＥＧ規格で採用され
ている双方向予測符号化方式等を用いて、画像符号化装
置で画像データを圧縮符号化すると共に、圧縮符号化さ
れた画像データを画像復号化装置で復号化して伸張する
システムでは、符号化し更に復号化した後の画質は、入
力される映像素材の絵柄によって大きく左右される。す
なわち、映像が高周波成分を多く含んでいる場合や、動
きの激しい絵柄の場合には、空間方向および時間方向の
冗長度が少ない、すなわち符号化難易度が大きいので、
ある一定のビットレートで符号化し更に復号化する場合
には、符号化歪みが発生しやすい。
ている双方向予測符号化方式等を用いて、画像符号化装
置で画像データを圧縮符号化すると共に、圧縮符号化さ
れた画像データを画像復号化装置で復号化して伸張する
システムでは、符号化し更に復号化した後の画質は、入
力される映像素材の絵柄によって大きく左右される。す
なわち、映像が高周波成分を多く含んでいる場合や、動
きの激しい絵柄の場合には、空間方向および時間方向の
冗長度が少ない、すなわち符号化難易度が大きいので、
ある一定のビットレートで符号化し更に復号化する場合
には、符号化歪みが発生しやすい。
【０００４】上述のような符号化難易度が大きい映像素
材が画像符号化装置に入力された場合の符号化歪みを軽
減する目的で、画像符号化装置の入力部分において空間
方向もしくは時間方向についてのローパスフィルタを使
用して、入力映像素材の空間的な高周波成分もしくは動
き成分を、予め低減させる手法が一般に知られている。
このような目的のために用いられるローパスフィルタ
は、プリフィルタもしくは前置フィルタと呼ばれてい
る。
材が画像符号化装置に入力された場合の符号化歪みを軽
減する目的で、画像符号化装置の入力部分において空間
方向もしくは時間方向についてのローパスフィルタを使
用して、入力映像素材の空間的な高周波成分もしくは動
き成分を、予め低減させる手法が一般に知られている。
このような目的のために用いられるローパスフィルタ
は、プリフィルタもしくは前置フィルタと呼ばれてい
る。
【０００５】図７は、空間方向についてのプリフィルタ
と時間方向についてのプリフィルタの双方を設けた画像
符号化装置の構成の一例を示したものである。この画像
符号化装置は、空間方向についてのプリフィルタとして
の空間フィルタ２５２と、時間方向についてのプリフィ
ルタとしての時間フィルタ２５３とを備え、入力画像信
号Ｓ1 は、空間フィルタ２５２，時間フィルタ２５３を
順に通過するようになっている。空間フィルタ２５２は
空間方向のローパスフィルタからなり、具体的には、通
常のディジタルフィルタによって容易に実現される。時
間フィルタ２５３は、時間方向のローパスフィルタから
なり、具体的には、例えば、空間フィルタ２５２の出力
信号を１フレーム分格納するフレームメモリ２５４と、
空間フィルタ２５２の出力信号とフレームメモリ２５４
に格納された１フレーム前の信号とを所定の重み付け
Ｋ：（１−Ｋ）で加算して出力する加算器２５５とで実
現される。なお、０≦Ｋ≦１である。
と時間方向についてのプリフィルタの双方を設けた画像
符号化装置の構成の一例を示したものである。この画像
符号化装置は、空間方向についてのプリフィルタとして
の空間フィルタ２５２と、時間方向についてのプリフィ
ルタとしての時間フィルタ２５３とを備え、入力画像信
号Ｓ1 は、空間フィルタ２５２，時間フィルタ２５３を
順に通過するようになっている。空間フィルタ２５２は
空間方向のローパスフィルタからなり、具体的には、通
常のディジタルフィルタによって容易に実現される。時
間フィルタ２５３は、時間方向のローパスフィルタから
なり、具体的には、例えば、空間フィルタ２５２の出力
信号を１フレーム分格納するフレームメモリ２５４と、
空間フィルタ２５２の出力信号とフレームメモリ２５４
に格納された１フレーム前の信号とを所定の重み付け
Ｋ：（１−Ｋ）で加算して出力する加算器２５５とで実
現される。なお、０≦Ｋ≦１である。
【０００６】画像符号化装置は、更に、時間フィルタ２
５３の出力信号を入力し、符号化する順番に従ってピク
チャ（Ｉピクチャ，Ｐピクチャ，Ｂピクチャ）の順番を
並べ替える画像並べ替え回路２２１と、この画像並べ替
え回路２２１の出力データを入力し、フレーム構造かフ
ィールド構造かを判別し、判別結果に応じた走査変換お
よび１６×１６画素のマクロブロック化を行う走査変換
・マクロブロック化回路２２２と、この走査変換・マク
ロブロック化回路２２２の出力データに基づいて動きベ
クトルを検出する動き検出回路２１４とを備えている。
５３の出力信号を入力し、符号化する順番に従ってピク
チャ（Ｉピクチャ，Ｐピクチャ，Ｂピクチャ）の順番を
並べ替える画像並べ替え回路２２１と、この画像並べ替
え回路２２１の出力データを入力し、フレーム構造かフ
ィールド構造かを判別し、判別結果に応じた走査変換お
よび１６×１６画素のマクロブロック化を行う走査変換
・マクロブロック化回路２２２と、この走査変換・マク
ロブロック化回路２２２の出力データに基づいて動きベ
クトルを検出する動き検出回路２１４とを備えている。
【０００７】画像符号化装置は、更に、走査変換・マク
ロブロック化回路２２２の出力データと予測画像データ
との差分をとる減算回路２３１と、この減算回路２３１
の出力データに対して、ＤＣＴ（離散コサイン変換）ブ
ロック単位でＤＣＴを行い、ＤＣＴ係数を出力するＤＣ
Ｔ回路２３２と、このＤＣＴ回路２３２の出力データを
量子化する量子化回路２３３と、この量子化回路２３３
の出力データを可変長符号化する可変長符号化回路２３
４と、この可変長符号化回路２３４の出力データを一旦
保持し、一定のビットレートのビットストリームからな
る圧縮画像データＳ2 として出力するバッファメモリ２
３５と、量子化回路３３の出力データを逆量子化する逆
量子化回路２３６と、この逆量子化回路２３６の出力デ
ータに対して逆ＤＣＴを行う逆ＤＣＴ回路２３７と、こ
の逆ＤＣＴ回路２３７の出力データと予測画像データと
を加算して出力する加算回路２３８と、この加算回路２
３８の出力データを保持し、動き検出回路２１４から送
られる動きベクトルに応じて動き補償を行って予測画像
データを減算回路２３１および加算回路２３８に出力す
る動き補償回路２３９とを備えている。
ロブロック化回路２２２の出力データと予測画像データ
との差分をとる減算回路２３１と、この減算回路２３１
の出力データに対して、ＤＣＴ（離散コサイン変換）ブ
ロック単位でＤＣＴを行い、ＤＣＴ係数を出力するＤＣ
Ｔ回路２３２と、このＤＣＴ回路２３２の出力データを
量子化する量子化回路２３３と、この量子化回路２３３
の出力データを可変長符号化する可変長符号化回路２３
４と、この可変長符号化回路２３４の出力データを一旦
保持し、一定のビットレートのビットストリームからな
る圧縮画像データＳ2 として出力するバッファメモリ２
３５と、量子化回路３３の出力データを逆量子化する逆
量子化回路２３６と、この逆量子化回路２３６の出力デ
ータに対して逆ＤＣＴを行う逆ＤＣＴ回路２３７と、こ
の逆ＤＣＴ回路２３７の出力データと予測画像データと
を加算して出力する加算回路２３８と、この加算回路２
３８の出力データを保持し、動き検出回路２１４から送
られる動きベクトルに応じて動き補償を行って予測画像
データを減算回路２３１および加算回路２３８に出力す
る動き補償回路２３９とを備えている。
【０００８】図７に示した画像符号化装置では、空間フ
ィルタ２５２によって入力画像信号Ｓ1 の空間的な高周
波成分を除去し、時間フィルタ２５３によって、空間フ
ィルタ２５２の出力信号における動き成分（もしくはフ
レーム間の雑音）を除去する。図７に示した画像符号化
装置におけるその他の動作は、一般的な画像符号化装置
と同様であるので説明を省略する。
ィルタ２５２によって入力画像信号Ｓ1 の空間的な高周
波成分を除去し、時間フィルタ２５３によって、空間フ
ィルタ２５２の出力信号における動き成分（もしくはフ
レーム間の雑音）を除去する。図７に示した画像符号化
装置におけるその他の動作は、一般的な画像符号化装置
と同様であるので説明を省略する。
【０００９】
【発明が解決しようとする課題】ところで、上述のよう
なプリフィルタを常時使用すると、符号化難易度の大き
い絵柄の情報量削減には有効であっても、符号化難易度
の小さい絵柄、例えば静止画のようなものにおいてもフ
ィルタで高周波成分を落としてしまうため、復号化後の
映像は全体としてぼけた印象を与えてしまうことが多い
という問題点がある。
なプリフィルタを常時使用すると、符号化難易度の大き
い絵柄の情報量削減には有効であっても、符号化難易度
の小さい絵柄、例えば静止画のようなものにおいてもフ
ィルタで高周波成分を落としてしまうため、復号化後の
映像は全体としてぼけた印象を与えてしまうことが多い
という問題点がある。
【００１０】一方、非圧縮画像データを予備的に圧縮符
号化（以下、１パス目の圧縮符号化という。）を行って
圧縮符号化後のデータ量を見積もり、次に、見積もった
データ量に基づいて発生符号量の制御を行いながら圧縮
符号化（以下、２パス目の圧縮符号化という。）を行う
という、リアルタイム性を要求されない符号化方法の場
合では、１パス目の圧縮符号化で得られたデータに基づ
いて、符号化難易度が大きい箇所（時間的な箇所）だけ
に対して、２パス目の圧縮符号化においてプリフィルタ
を使用するような手法も知られている。しかしながら、
この手法では、リアルタイムに符号化しながら、入力画
像の特徴に応じてプリフィルタを適応的に使用すること
はできないという問題点がある。
号化（以下、１パス目の圧縮符号化という。）を行って
圧縮符号化後のデータ量を見積もり、次に、見積もった
データ量に基づいて発生符号量の制御を行いながら圧縮
符号化（以下、２パス目の圧縮符号化という。）を行う
という、リアルタイム性を要求されない符号化方法の場
合では、１パス目の圧縮符号化で得られたデータに基づ
いて、符号化難易度が大きい箇所（時間的な箇所）だけ
に対して、２パス目の圧縮符号化においてプリフィルタ
を使用するような手法も知られている。しかしながら、
この手法では、リアルタイムに符号化しながら、入力画
像の特徴に応じてプリフィルタを適応的に使用すること
はできないという問題点がある。
【００１１】本発明はかかる問題点に鑑みてなされたも
ので、その目的は、リアルタイムに符号化しながら、入
力画像の特徴に応じてプリフィルタを適応的に使用する
ことができるようにした画像符号化装置、画像符号化制
御方法および画像符号化制御用プログラムを記録した媒
体を提供することにある。
ので、その目的は、リアルタイムに符号化しながら、入
力画像の特徴に応じてプリフィルタを適応的に使用する
ことができるようにした画像符号化装置、画像符号化制
御方法および画像符号化制御用プログラムを記録した媒
体を提供することにある。
【００１２】
【課題を解決するための手段】請求項１記載の画像符号
化装置は、入力画像データを圧縮符号化する符号化手段
と、この符号化手段の前段に設けられ、入力画像データ
の情報量を削減するためのプリフィルタと、入力画像デ
ータの符号化の難易度を表す符号化難易度を算出する符
号化難易度算出手段と、この符号化難易度算出手段によ
って算出される符号化難易度に応じて、プリフィルタの
特性を制御するプリフィルタ制御手段とを備えたもので
ある。
化装置は、入力画像データを圧縮符号化する符号化手段
と、この符号化手段の前段に設けられ、入力画像データ
の情報量を削減するためのプリフィルタと、入力画像デ
ータの符号化の難易度を表す符号化難易度を算出する符
号化難易度算出手段と、この符号化難易度算出手段によ
って算出される符号化難易度に応じて、プリフィルタの
特性を制御するプリフィルタ制御手段とを備えたもので
ある。
【００１３】請求項７記載の画像符号化制御方法は、入
力画像データを圧縮符号化する符号化手段と、この符号
化手段の前段に設けられ、入力画像データの情報量を削
減するためのプリフィルタとを有する画像符号化装置を
制御する画像符号化制御方法であって、入力画像データ
の符号化の難易度を表す符号化難易度を算出する符号化
難易度算出手順と、この符号化難易度算出手順によって
算出される符号化難易度に応じて、プリフィルタの特性
を制御するプリフィルタ制御手順とを備えたものであ
る。
力画像データを圧縮符号化する符号化手段と、この符号
化手段の前段に設けられ、入力画像データの情報量を削
減するためのプリフィルタとを有する画像符号化装置を
制御する画像符号化制御方法であって、入力画像データ
の符号化の難易度を表す符号化難易度を算出する符号化
難易度算出手順と、この符号化難易度算出手順によって
算出される符号化難易度に応じて、プリフィルタの特性
を制御するプリフィルタ制御手順とを備えたものであ
る。
【００１４】請求項１１記載の画像符号化制御用プログ
ラムを記録した媒体は、入力画像データを圧縮符号化す
る符号化手段と、この符号化手段の前段に設けられ、入
力画像データの情報量を削減するためのプリフィルタと
を有する画像符号化装置を、コンピュータによって制御
するための画像符号化制御用プログラムを記録した媒体
であって、入力画像データの符号化の難易度を表す符号
化難易度を算出する符号化難易度算出手順と、この符号
化難易度算出手順によって算出される符号化難易度に応
じて、プリフィルタの特性を制御するプリフィルタ制御
手順とをコンピュータに実行させるための画像符号化制
御用プログラムを記録したものである。
ラムを記録した媒体は、入力画像データを圧縮符号化す
る符号化手段と、この符号化手段の前段に設けられ、入
力画像データの情報量を削減するためのプリフィルタと
を有する画像符号化装置を、コンピュータによって制御
するための画像符号化制御用プログラムを記録した媒体
であって、入力画像データの符号化の難易度を表す符号
化難易度を算出する符号化難易度算出手順と、この符号
化難易度算出手順によって算出される符号化難易度に応
じて、プリフィルタの特性を制御するプリフィルタ制御
手順とをコンピュータに実行させるための画像符号化制
御用プログラムを記録したものである。
【００１５】請求項１記載の画像符号化装置では、符号
化難易度算出手段によって、入力画像データの符号化の
難易度を表す符号化難易度を算出され、この符号化難易
度に応じて、プリフィルタ制御手段によって、プリフィ
ルタの特性が制御される。
化難易度算出手段によって、入力画像データの符号化の
難易度を表す符号化難易度を算出され、この符号化難易
度に応じて、プリフィルタ制御手段によって、プリフィ
ルタの特性が制御される。
【００１６】請求項７記載の画像符号化制御方法では、
符号化難易度算出手順によって、入力画像データの符号
化の難易度を表す符号化難易度が算出され、この符号化
難易度に応じて、プリフィルタ制御手順によって、プリ
フィルタの特性が制御される。
符号化難易度算出手順によって、入力画像データの符号
化の難易度を表す符号化難易度が算出され、この符号化
難易度に応じて、プリフィルタ制御手順によって、プリ
フィルタの特性が制御される。
【００１７】請求項１１記載の画像符号化制御用プログ
ラムを記録した媒体に記録されたプログラムでは、符号
化難易度算出手順によって、入力画像データの符号化の
難易度を表す符号化難易度が算出され、この符号化難易
度に応じて、プリフィルタ制御手順によって、プリフィ
ルタの特性が制御される。
ラムを記録した媒体に記録されたプログラムでは、符号
化難易度算出手順によって、入力画像データの符号化の
難易度を表す符号化難易度が算出され、この符号化難易
度に応じて、プリフィルタ制御手順によって、プリフィ
ルタの特性が制御される。
【００１８】
【発明の実施の形態】以下、本発明の実施の形態につい
て図面を参照して詳細に説明する。
て図面を参照して詳細に説明する。
【００１９】図２は、本発明の第１の実施の形態に係る
画像符号化装置の概略の構成を示すブロック図である。
この画像符号化装置は、入力画像信号Ｓ1 を入力し、そ
の情報量を削減するためのプリフィルタ部５０と、この
プリフィルタ部５０の出力信号を入力し、圧縮符号化の
ための前処理等を行うエンコーダ制御部１１と、このエ
ンコーダ制御部１１の出力データを所定時間だけ遅延し
て出力するためのＦＩＦＯ（先入れ先出し）メモリ１２
と、このＦＩＦＯメモリ１２の出力データを入力し、ピ
クチャ毎にピクチャタイプに応じた符号化方法によって
圧縮符号化して、圧縮画像データＳ2 を出力する符号化
手段としてのエンコーダ１３と、エンコーダ制御部１１
の出力データに基づいて動きベクトルを検出し、エンコ
ーダ１３に送る動き検出回路１４と、エンコーダ制御部
１１から出力されるイントラＡＣデータＳ3 と動き検出
回路１４から出力されるＭＥ残差データＳ4 とエンコー
ダ１３から出力される発生ビット量データＳ5 とに基づ
いてエンコーダ１３を制御する符号化制御部１５と、こ
の符号化制御部１５からのデータに基づいて、プリフィ
ルタ制御信号Ｓ6 によってプリフィルタ部５０の特性を
制御するプリフィルタ制御部５１とを備えている。図２
に示した画像符号化装置は、圧縮符号化する前の画像デ
ータの特徴に基づいて発生符号量の制御を行うフィード
フォワード型のレート制御を行うように構成されてい
る。
画像符号化装置の概略の構成を示すブロック図である。
この画像符号化装置は、入力画像信号Ｓ1 を入力し、そ
の情報量を削減するためのプリフィルタ部５０と、この
プリフィルタ部５０の出力信号を入力し、圧縮符号化の
ための前処理等を行うエンコーダ制御部１１と、このエ
ンコーダ制御部１１の出力データを所定時間だけ遅延し
て出力するためのＦＩＦＯ（先入れ先出し）メモリ１２
と、このＦＩＦＯメモリ１２の出力データを入力し、ピ
クチャ毎にピクチャタイプに応じた符号化方法によって
圧縮符号化して、圧縮画像データＳ2 を出力する符号化
手段としてのエンコーダ１３と、エンコーダ制御部１１
の出力データに基づいて動きベクトルを検出し、エンコ
ーダ１３に送る動き検出回路１４と、エンコーダ制御部
１１から出力されるイントラＡＣデータＳ3 と動き検出
回路１４から出力されるＭＥ残差データＳ4 とエンコー
ダ１３から出力される発生ビット量データＳ5 とに基づ
いてエンコーダ１３を制御する符号化制御部１５と、こ
の符号化制御部１５からのデータに基づいて、プリフィ
ルタ制御信号Ｓ6 によってプリフィルタ部５０の特性を
制御するプリフィルタ制御部５１とを備えている。図２
に示した画像符号化装置は、圧縮符号化する前の画像デ
ータの特徴に基づいて発生符号量の制御を行うフィード
フォワード型のレート制御を行うように構成されてい
る。
【００２０】符号化制御部１５およびプリフィルタ制御
部５１は、図３に示すように、互いにバス１９を介して
接続されたＣＰＵ（中央処理装置）１６，ＲＯＭ（リー
ド・オンリ・メモリ）１７およびＲＡＭ（ランダム・ア
クセス・メモリ）１８を有するコンピュータによって構
成され、ＣＰＵ１６が、ＲＡＭ１８をワーキングエリア
として、ＲＯＭ１７に格納されたプログラムを実行する
ことによって、後述する符号化制御部１５およびプリフ
ィルタ制御部５１における各機能を実現するようになっ
ている。ＲＯＭ１７は、本発明に係る画像符号化制御用
プログラムを記憶したものであり、ＩＣ（集積回路）で
も良いし、ハードディスク，フロッピィディスク等の磁
気ディスクを記録媒体とする記憶装置でも良いし、ＣＤ
（コンパクトディスク）−ＲＯＭ等の光ディスクを記録
媒体とする記憶装置でも良いし、その他の種類の記録媒
体を用いる記憶装置でも良い。いずれの場合にも、ＩＣ
や種々の記録媒体は、本発明に係る画像符号化制御用プ
ログラムを記録した媒体に相当する。
部５１は、図３に示すように、互いにバス１９を介して
接続されたＣＰＵ（中央処理装置）１６，ＲＯＭ（リー
ド・オンリ・メモリ）１７およびＲＡＭ（ランダム・ア
クセス・メモリ）１８を有するコンピュータによって構
成され、ＣＰＵ１６が、ＲＡＭ１８をワーキングエリア
として、ＲＯＭ１７に格納されたプログラムを実行する
ことによって、後述する符号化制御部１５およびプリフ
ィルタ制御部５１における各機能を実現するようになっ
ている。ＲＯＭ１７は、本発明に係る画像符号化制御用
プログラムを記憶したものであり、ＩＣ（集積回路）で
も良いし、ハードディスク，フロッピィディスク等の磁
気ディスクを記録媒体とする記憶装置でも良いし、ＣＤ
（コンパクトディスク）−ＲＯＭ等の光ディスクを記録
媒体とする記憶装置でも良いし、その他の種類の記録媒
体を用いる記憶装置でも良い。いずれの場合にも、ＩＣ
や種々の記録媒体は、本発明に係る画像符号化制御用プ
ログラムを記録した媒体に相当する。
【００２１】図１は、図２に示した画像符号化装置の詳
細な構成を示すブロック図である。この図に示したよう
に、プリフィルタ部５０は、空間方向についてのプリフ
ィルタとしての空間フィルタ５２と、時間方向について
のプリフィルタとしての時間フィルタ５３とを備え、入
力画像信号Ｓ1 は、空間フィルタ５２，時間フィルタ５
３を順に通過するようになっている。空間フィルタ５２
は空間方向のローパスフィルタからなり、具体的には、
例えばディジタルフィルタによって実現される。時間フ
ィルタ５３は、時間方向のローパスフィルタからなり、
具体的には、例えば、空間フィルタ５２の出力信号を１
フレーム分格納するフレームメモリ５４と、空間フィル
タ５２の出力信号とフレームメモリ５４に格納された１
フレーム前の信号とを所定の重み付けＫ：（１−Ｋ）で
加算して出力する加算器５５とで実現される。なお、Ｋ
は重み付け係数であり、０≦Ｋ≦１である。空間フィル
タ５２は、フィルタ係数を変えることによって、通過帯
域幅等のフィルタの特性を変えることができるようにな
っている。同様に、時間フィルタ５３は、重み付け係数
Ｋの値を変えることによって、通過帯域幅等のフィルタ
の特性を変えることができるようになっている。
細な構成を示すブロック図である。この図に示したよう
に、プリフィルタ部５０は、空間方向についてのプリフ
ィルタとしての空間フィルタ５２と、時間方向について
のプリフィルタとしての時間フィルタ５３とを備え、入
力画像信号Ｓ1 は、空間フィルタ５２，時間フィルタ５
３を順に通過するようになっている。空間フィルタ５２
は空間方向のローパスフィルタからなり、具体的には、
例えばディジタルフィルタによって実現される。時間フ
ィルタ５３は、時間方向のローパスフィルタからなり、
具体的には、例えば、空間フィルタ５２の出力信号を１
フレーム分格納するフレームメモリ５４と、空間フィル
タ５２の出力信号とフレームメモリ５４に格納された１
フレーム前の信号とを所定の重み付けＫ：（１−Ｋ）で
加算して出力する加算器５５とで実現される。なお、Ｋ
は重み付け係数であり、０≦Ｋ≦１である。空間フィル
タ５２は、フィルタ係数を変えることによって、通過帯
域幅等のフィルタの特性を変えることができるようにな
っている。同様に、時間フィルタ５３は、重み付け係数
Ｋの値を変えることによって、通過帯域幅等のフィルタ
の特性を変えることができるようになっている。
【００２２】エンコーダ制御部１１は、プリフィルタ部
５０の出力信号を入力し、符号化する順番に従ってピク
チャ（Ｉピクチャ，Ｐピクチャ，Ｂピクチャ）の順番を
並べ替える画像並べ替え回路２１と、この画像並べ替え
回路２１の出力データを入力し、フレーム構造かフィー
ルド構造かを判別し、判別結果に応じた走査変換および
１６×１６画素のマクロブロック化を行う走査変換・マ
クロブロック化回路２２と、この走査変換・マクロブロ
ック化回路２２の出力データを入力し、Ｉピクチャにお
けるイントラＡＣを算出し、イントラＡＣデータＳ3 を
符号化制御部１５に送ると共に、走査変換・マクロブロ
ック化回路２２の出力データをＦＩＦＯメモリ１２およ
び動き検出回路１４に送るイントラＡＣ演算回路２３と
を備えている。イントラＡＣとは、Ｉピクチャにおい
て、８×８画素のＤＣＴブロック内の各画素の画素値と
ＤＣＴブロック内の画素値の平均値との差分の絶対値の
総和として定義され、絵柄の複雑さを表すものと言え
る。
５０の出力信号を入力し、符号化する順番に従ってピク
チャ（Ｉピクチャ，Ｐピクチャ，Ｂピクチャ）の順番を
並べ替える画像並べ替え回路２１と、この画像並べ替え
回路２１の出力データを入力し、フレーム構造かフィー
ルド構造かを判別し、判別結果に応じた走査変換および
１６×１６画素のマクロブロック化を行う走査変換・マ
クロブロック化回路２２と、この走査変換・マクロブロ
ック化回路２２の出力データを入力し、Ｉピクチャにお
けるイントラＡＣを算出し、イントラＡＣデータＳ3 を
符号化制御部１５に送ると共に、走査変換・マクロブロ
ック化回路２２の出力データをＦＩＦＯメモリ１２およ
び動き検出回路１４に送るイントラＡＣ演算回路２３と
を備えている。イントラＡＣとは、Ｉピクチャにおい
て、８×８画素のＤＣＴブロック内の各画素の画素値と
ＤＣＴブロック内の画素値の平均値との差分の絶対値の
総和として定義され、絵柄の複雑さを表すものと言え
る。
【００２３】エンコーダ１３は、ＦＩＦＯメモリ１２の
出力データと予測画像データとの差分をとる減算回路３
１と、この減算回路３１の出力データに対して、ＤＣＴ
ブロック単位でＤＣＴを行い、ＤＣＴ係数を出力するＤ
ＣＴ回路３２と、このＤＣＴ回路３２の出力データを量
子化する量子化回路３３と、この量子化回路３３の出力
データを可変長符号化する可変長符号化回路３４と、こ
の可変長符号化回路３４の出力データを一旦保持し、一
定のビットレートのビットストリームからなる圧縮画像
データＳ2 として出力するバッファメモリ３５と、量子
化回路３３の出力データを逆量子化する逆量子化回路３
６と、この逆量子化回路３６の出力データに対して逆Ｄ
ＣＴを行う逆ＤＣＴ回路３７と、この逆ＤＣＴ回路３７
の出力データと予測画像データとを加算して出力する加
算回路３８と、この加算回路３８の出力データを保持
し、動き検出回路１４から送られる動きベクトルに応じ
て動き補償を行って予測画像データを減算回路３１およ
び加算回路３８に出力する動き補償回路３９とを備えて
いる。バッファメモリ３５は、可変長符号化回路３４よ
り発生されるビット量を表す発生ビット量データＳ5 を
符号化制御部１５に送るようになっている。
出力データと予測画像データとの差分をとる減算回路３
１と、この減算回路３１の出力データに対して、ＤＣＴ
ブロック単位でＤＣＴを行い、ＤＣＴ係数を出力するＤ
ＣＴ回路３２と、このＤＣＴ回路３２の出力データを量
子化する量子化回路３３と、この量子化回路３３の出力
データを可変長符号化する可変長符号化回路３４と、こ
の可変長符号化回路３４の出力データを一旦保持し、一
定のビットレートのビットストリームからなる圧縮画像
データＳ2 として出力するバッファメモリ３５と、量子
化回路３３の出力データを逆量子化する逆量子化回路３
６と、この逆量子化回路３６の出力データに対して逆Ｄ
ＣＴを行う逆ＤＣＴ回路３７と、この逆ＤＣＴ回路３７
の出力データと予測画像データとを加算して出力する加
算回路３８と、この加算回路３８の出力データを保持
し、動き検出回路１４から送られる動きベクトルに応じ
て動き補償を行って予測画像データを減算回路３１およ
び加算回路３８に出力する動き補償回路３９とを備えて
いる。バッファメモリ３５は、可変長符号化回路３４よ
り発生されるビット量を表す発生ビット量データＳ5 を
符号化制御部１５に送るようになっている。
【００２４】動き検出回路１４は、エンコーダ制御部１
１の出力データに基づいて、圧縮符号化の対象となるピ
クチャの注目マクロブロックと、参照されるピクチャに
おいて注目マクロブロックとの間の画素値の差分の絶対
値和あるいは自乗和が最小となるマクロブロックを探し
て、動きベクトルを検出して動き補償回路３９に送るよ
うになっている。また、動き検出回路１４は、動きベク
トルを求める際に、最小となったマクロブロック間にお
ける画素値の差分の絶対値和あるいは自乗和を、ＭＥ残
差データＳ4 として符号化制御部１５に送るようになっ
ている。
１の出力データに基づいて、圧縮符号化の対象となるピ
クチャの注目マクロブロックと、参照されるピクチャに
おいて注目マクロブロックとの間の画素値の差分の絶対
値和あるいは自乗和が最小となるマクロブロックを探し
て、動きベクトルを検出して動き補償回路３９に送るよ
うになっている。また、動き検出回路１４は、動きベク
トルを求める際に、最小となったマクロブロック間にお
ける画素値の差分の絶対値和あるいは自乗和を、ＭＥ残
差データＳ4 として符号化制御部１５に送るようになっ
ている。
【００２５】符号化制御部１５は、動き検出回路１４か
らのＭＥ残差データＳ4 をピクチャ全体について足し合
わせた値であるＭＥ残差を算出するＭＥ残差計算部４１
と、このＭＥ残差計算部４１によって算出されたＭＥ残
差とイントラＡＣ演算回路２３からのイントラＡＣデー
タＳ3 とに基づいて、ピクチャの符号化の難易度を表す
符号化難易度を算出する符号化難易度計算部４２と、バ
ッファメモリ３５からの発生ビット量データＳ5 に基づ
いて、本実施の形態に係る画像符号化装置によって圧縮
符号化された画像データを伸張する画像復号化装置にお
ける入力バッファに対応する仮想的なバッファであるＶ
ＢＶ（Video Buffering Verifier）バッファのデータ占
有量（以下、単に占有量と言う。）を算出するＶＢＶバ
ッファ占有量計算部４３とを備えている。なお、ＭＥ残
差は、映像の動きの速さおよび絵柄の複雑さを表すもの
と言える。
らのＭＥ残差データＳ4 をピクチャ全体について足し合
わせた値であるＭＥ残差を算出するＭＥ残差計算部４１
と、このＭＥ残差計算部４１によって算出されたＭＥ残
差とイントラＡＣ演算回路２３からのイントラＡＣデー
タＳ3 とに基づいて、ピクチャの符号化の難易度を表す
符号化難易度を算出する符号化難易度計算部４２と、バ
ッファメモリ３５からの発生ビット量データＳ5 に基づ
いて、本実施の形態に係る画像符号化装置によって圧縮
符号化された画像データを伸張する画像復号化装置にお
ける入力バッファに対応する仮想的なバッファであるＶ
ＢＶ（Video Buffering Verifier）バッファのデータ占
有量（以下、単に占有量と言う。）を算出するＶＢＶバ
ッファ占有量計算部４３とを備えている。なお、ＭＥ残
差は、映像の動きの速さおよび絵柄の複雑さを表すもの
と言える。
【００２６】符号化制御部１５は、更に、符号化難易度
計算部４２によって算出された符号化難易度とＶＢＶバ
ッファ占有量計算部４３によって算出されたＶＢＶバッ
ファの占有量とに基づいて、目標符号量を決定する目標
符号量決定部４４と、エンコーダ１３における発生符号
量が目標符号量決定部４４によって決定された目標符号
量となるように量子化回路３３における量子化特性値に
対応する量子化インデックスを決定し、量子化回路３３
に送る量子化インデックス決定部４５とを備えている。
計算部４２によって算出された符号化難易度とＶＢＶバ
ッファ占有量計算部４３によって算出されたＶＢＶバッ
ファの占有量とに基づいて、目標符号量を決定する目標
符号量決定部４４と、エンコーダ１３における発生符号
量が目標符号量決定部４４によって決定された目標符号
量となるように量子化回路３３における量子化特性値に
対応する量子化インデックスを決定し、量子化回路３３
に送る量子化インデックス決定部４５とを備えている。
【００２７】プリフィルタ制御部５１は、符号化制御部
１５における符号化難易度計算部４２によって算出され
た符号化難易度に基づいてプリフィルタ部５０を制御す
るようになっている。
１５における符号化難易度計算部４２によって算出され
た符号化難易度に基づいてプリフィルタ部５０を制御す
るようになっている。
【００２８】ここで、符号化難易度について説明する。
符号化難易度は、ピクチャの符号化の難易度を表すもの
であるが、これは、同じ画質を保つために必要なデータ
量の比率と言い換えることができる。符号化難易度を数
値化する方法は種々考えられるが、本実施の形態では、
ＩピクチャについてはイントラＡＣを用いて符号化難易
度を求め、ＰピクチャおよびＢピクチャについてはＭＥ
残差を用いて符号化難易度を求めることとしている。前
述のように、イントラＡＣは絵柄の複雑さを表し、ＭＥ
残差は映像の動きの速さおよび絵柄の複雑さを表し、こ
れらは符号化の難易度と強い相関があることから、イン
トラＡＣやＭＥ残差を変数とする一次関数等により、イ
ントラＡＣやＭＥ残差から符号化難易度を算出すること
が可能である。
符号化難易度は、ピクチャの符号化の難易度を表すもの
であるが、これは、同じ画質を保つために必要なデータ
量の比率と言い換えることができる。符号化難易度を数
値化する方法は種々考えられるが、本実施の形態では、
ＩピクチャについてはイントラＡＣを用いて符号化難易
度を求め、ＰピクチャおよびＢピクチャについてはＭＥ
残差を用いて符号化難易度を求めることとしている。前
述のように、イントラＡＣは絵柄の複雑さを表し、ＭＥ
残差は映像の動きの速さおよび絵柄の複雑さを表し、こ
れらは符号化の難易度と強い相関があることから、イン
トラＡＣやＭＥ残差を変数とする一次関数等により、イ
ントラＡＣやＭＥ残差から符号化難易度を算出すること
が可能である。
【００２９】次に、符号化難易度に基づいてプリフィル
タ部５０を制御する方法について概念的に説明する。本
実施の形態では、ビットレートに対する符号化難易度の
比率に基づいてプリフィルタ部５０の特性を制御する第
１段階と、動き成分に基づいてプリフィルタ部５０の特
性を制御する第２段階との２段階の制御を行う。
タ部５０を制御する方法について概念的に説明する。本
実施の形態では、ビットレートに対する符号化難易度の
比率に基づいてプリフィルタ部５０の特性を制御する第
１段階と、動き成分に基づいてプリフィルタ部５０の特
性を制御する第２段階との２段階の制御を行う。
【００３０】まず、第１段階について説明する。プリフ
ィルタ部５０によって情報量を削減したいのは、絵柄が
複雑で空間的な高周波成分を多く含んでいたり、動き量
が多かったりランダムな動きをしたりする場合、すなわ
ち符号化難易度が大きい場合である。それ以外の絵柄に
対してプリフィルタを使用すると、空間フィルタによる
ぼけが生じたり、時間フィルタによるジャーキネス（動
きがぎこちないこと）等の副作用だけが目立ち、いいこ
とはない。
ィルタ部５０によって情報量を削減したいのは、絵柄が
複雑で空間的な高周波成分を多く含んでいたり、動き量
が多かったりランダムな動きをしたりする場合、すなわ
ち符号化難易度が大きい場合である。それ以外の絵柄に
対してプリフィルタを使用すると、空間フィルタによる
ぼけが生じたり、時間フィルタによるジャーキネス（動
きがぎこちないこと）等の副作用だけが目立ち、いいこ
とはない。
【００３１】一方、上述のような符号化難易度が大きい
映像であっても、画像符号化装置におけるビットレート
が充分に高い場合、すなわち圧縮率が低い場合には、画
質の劣化は少ないので、プリフィルタを使用する必要は
なくなる。このように、プリフィルタを使用した方が良
いか否かは、符号化難易度だけでなく、ビットレートに
よっても変化する。
映像であっても、画像符号化装置におけるビットレート
が充分に高い場合、すなわち圧縮率が低い場合には、画
質の劣化は少ないので、プリフィルタを使用する必要は
なくなる。このように、プリフィルタを使用した方が良
いか否かは、符号化難易度だけでなく、ビットレートに
よっても変化する。
【００３２】そこで、本実施の形態では、入力画像信号
の符号化難易度がビットレートに対してどれくらい大き
いかという情報に基づいて、プリフィルタ部５０のオ
ン，オフ、通過帯域幅等のフィルタの特性の制御を行う
ようにしている。また、更に、符号化難易度に基づいて
プリフィルタ部５０を制御するには、複数枚のピクチャ
における、ビットレートに対する符号化難易度の比率を
見ることが好ましい。これは、符号化難易度は、ピクチ
ャタイプによって変動するからである。そこで、本実施
の形態では、符号化難易度に基づいてプリフィルタ部５
０を制御するためのパラメータとして、次式によって定
義されるパラメータｘを用いる。
の符号化難易度がビットレートに対してどれくらい大き
いかという情報に基づいて、プリフィルタ部５０のオ
ン，オフ、通過帯域幅等のフィルタの特性の制御を行う
ようにしている。また、更に、符号化難易度に基づいて
プリフィルタ部５０を制御するには、複数枚のピクチャ
における、ビットレートに対する符号化難易度の比率を
見ることが好ましい。これは、符号化難易度は、ピクチ
ャタイプによって変動するからである。そこで、本実施
の形態では、符号化難易度に基づいてプリフィルタ部５
０を制御するためのパラメータとして、次式によって定
義されるパラメータｘを用いる。
【００３３】ｘ＝ΣＤk ／Ｇ
【００３４】なお、上式において、Ｄk はピクチャｋの
符号化難易度を表し、ｋはピクチャの符号化順を表し、
Σはｋ＝１からＮ（Ｎは１ＧＯＰ（グループ・オブ・ピ
クチャ）分のピクチャの枚数）までの総和を意味する。
また、Ｇは次式によって定義される。
符号化難易度を表し、ｋはピクチャの符号化順を表し、
Σはｋ＝１からＮ（Ｎは１ＧＯＰ（グループ・オブ・ピ
クチャ）分のピクチャの枚数）までの総和を意味する。
また、Ｇは次式によって定義される。
【００３５】 Ｇ＝（〔ビットレート〕×Ｎ）／〔ピクチャレート〕
【００３６】なお、上式において、〔ビットレート〕
は、通信回線の伝送容量や記録媒体の記録容量に基づい
て決められる１秒当たりのデータ量（ビット量）を表
し、〔ピクチャレート〕は、１秒当たりのピクチャの枚
数（例えばＮＴＳＣ圏では３０、ＰＡＬ圏では２５）で
ある。従って、Ｇは、Ｎ枚分のピクチャに対応する時間
に割り当てられるデータ量（ビット量）を表し、ｘは、
Ｎ枚分のピクチャに対応する時間に割り当てられるデー
タ量（ビット量）に対するＮ枚分のピクチャの符号化難
易度Ｄk の和の比率を表す。なお、必ずしもＮ枚分のピ
クチャを用いてｘを求める必要はなく、Ｎより大きい数
や小さい数の枚数分のピクチャを用いてｘを求めるよう
にしても良い。ただし、Ｎよりもあまり大きい数をとる
と、パラメータｘの精度が落ち、Ｎよりもあまり小さい
数をとるとパラメータｘの変動が大きくなることに留意
する必要がある。
は、通信回線の伝送容量や記録媒体の記録容量に基づい
て決められる１秒当たりのデータ量（ビット量）を表
し、〔ピクチャレート〕は、１秒当たりのピクチャの枚
数（例えばＮＴＳＣ圏では３０、ＰＡＬ圏では２５）で
ある。従って、Ｇは、Ｎ枚分のピクチャに対応する時間
に割り当てられるデータ量（ビット量）を表し、ｘは、
Ｎ枚分のピクチャに対応する時間に割り当てられるデー
タ量（ビット量）に対するＮ枚分のピクチャの符号化難
易度Ｄk の和の比率を表す。なお、必ずしもＮ枚分のピ
クチャを用いてｘを求める必要はなく、Ｎより大きい数
や小さい数の枚数分のピクチャを用いてｘを求めるよう
にしても良い。ただし、Ｎよりもあまり大きい数をとる
と、パラメータｘの精度が落ち、Ｎよりもあまり小さい
数をとるとパラメータｘの変動が大きくなることに留意
する必要がある。
【００３７】本実施の形態では、第１段階として、例え
ば上記のように定義されたパラメータｘの大きさに応じ
て、プリフィルタ部５０の特性を制御する。具体的に
は、例えば、パラメータｘの大きさに応じて、空間フィ
ルタ５２を実現するディジタルフィルタにおけるタップ
係数（フィルタ係数）を変えることによって、空間フィ
ルタ５２の通過帯域幅等を変え、また、パラメータｘの
大きさに応じて、時間フィルタ５３における重み付け係
数Ｋの値を変えることによって、時間フィルタ５３の通
過帯域幅等を変えることになる。
ば上記のように定義されたパラメータｘの大きさに応じ
て、プリフィルタ部５０の特性を制御する。具体的に
は、例えば、パラメータｘの大きさに応じて、空間フィ
ルタ５２を実現するディジタルフィルタにおけるタップ
係数（フィルタ係数）を変えることによって、空間フィ
ルタ５２の通過帯域幅等を変え、また、パラメータｘの
大きさに応じて、時間フィルタ５３における重み付け係
数Ｋの値を変えることによって、時間フィルタ５３の通
過帯域幅等を変えることになる。
【００３８】図４は、パラメータｘの大きさと空間フィ
ルタ５２の通過帯域幅との関係の一例を示したものであ
る。この図において、横軸はｘの値、縦軸は空間フィル
タ５２の通過帯域幅を表している。この例では、空間フ
ィルタ５２の通過帯域幅を、スルー（そのまま通過；フ
ィルタのオフ），５．０ＭＨｚ，４．５ＭＨｚ，４．０
ＭＨｚ，３．５ＭＨｚの５種類用意し、図４において符
号６１（実線）で示したように、０≦ｘ＜δ1 のときは
スルー、δ1 ≦ｘ＜δ2 のときは５．０ＭＨｚ、δ2 ≦
ｘ＜δ3 のときは４．５ＭＨｚ、δ3 ≦ｘ＜δ4 のとき
は４．０ＭＨｚ、δ4 ≦ｘのときは３．５ＭＨｚを選択
するようにしている。なお、δ1 ＜δ2＜δ3 ＜δ4 で
ある。
ルタ５２の通過帯域幅との関係の一例を示したものであ
る。この図において、横軸はｘの値、縦軸は空間フィル
タ５２の通過帯域幅を表している。この例では、空間フ
ィルタ５２の通過帯域幅を、スルー（そのまま通過；フ
ィルタのオフ），５．０ＭＨｚ，４．５ＭＨｚ，４．０
ＭＨｚ，３．５ＭＨｚの５種類用意し、図４において符
号６１（実線）で示したように、０≦ｘ＜δ1 のときは
スルー、δ1 ≦ｘ＜δ2 のときは５．０ＭＨｚ、δ2 ≦
ｘ＜δ3 のときは４．５ＭＨｚ、δ3 ≦ｘ＜δ4 のとき
は４．０ＭＨｚ、δ4 ≦ｘのときは３．５ＭＨｚを選択
するようにしている。なお、δ1 ＜δ2＜δ3 ＜δ4 で
ある。
【００３９】次に、第２段階について説明する。上記第
１段階のように、パラメータｘの値だけからプリフィル
タ部５０の特性を決定した場合、人間の視覚特性によっ
て次のような不具合が生じる。すなわち、例えば細かい
模様の物体がゆっくりと動くような絵柄では、空間的な
高周波成分が大きいので、符号化難易度は大きくなり、
ｘの値も大きくなる。しかし、ここで、プリフィルタを
きつめにかけてしまう（通過帯域幅を狭してしまう）
と、細かい模様が失われる。ゆっくりとした動きに対し
ては人間の目は良く追従するので、このようなぼけはす
ぐに感知されてしまい、かえって復号化後の視覚的な画
質の印象を悪くする。
１段階のように、パラメータｘの値だけからプリフィル
タ部５０の特性を決定した場合、人間の視覚特性によっ
て次のような不具合が生じる。すなわち、例えば細かい
模様の物体がゆっくりと動くような絵柄では、空間的な
高周波成分が大きいので、符号化難易度は大きくなり、
ｘの値も大きくなる。しかし、ここで、プリフィルタを
きつめにかけてしまう（通過帯域幅を狭してしまう）
と、細かい模様が失われる。ゆっくりとした動きに対し
ては人間の目は良く追従するので、このようなぼけはす
ぐに感知されてしまい、かえって復号化後の視覚的な画
質の印象を悪くする。
【００４０】一方、動きが非常に速い映像については、
人間の視覚特性では、ぼけに対して気付きにくくなって
いる。従って、動きが速い映像であることが分かれば、
プリフィルタはきつめにかけた方が良い。これは、動き
が速い映像において高周波成分を表現しようとすると、
ブロック歪み等の顕著な画質劣化を引き起こすからであ
る。
人間の視覚特性では、ぼけに対して気付きにくくなって
いる。従って、動きが速い映像であることが分かれば、
プリフィルタはきつめにかけた方が良い。これは、動き
が速い映像において高周波成分を表現しようとすると、
ブロック歪み等の顕著な画質劣化を引き起こすからであ
る。
【００４１】このような考え方に基づき、本実施の形態
では、映像の動きの大きさを表す動き成分が大きい場合
にはプリフィルタをきつめにかけ、動き成分が小さい場
合にはプリフィルタを緩めにかけるという処理をリアル
タイムに実現することを考える。映像の動き成分を判断
するパラメータとしては、例えば、ＭＥ残差等に基づい
て算出した最新のＢピクチャの符号化難易度ＤB と、イ
ントラＡＣ等に基づいて算出した最新のＩピクチャの符
号化難易度ＤI との比率ｙ＝ＤI ／ＤB を用いる。動き
が大きい絵柄では、動き予測誤差が増えるし、動きベク
トル自体の符号量も増えるから、Ｂピクチャの符号量は
増え、その結果、ｙ＝ＤI ／ＤB が小さくなる。そこ
で、本実施の形態では、第２段階として、ｙの値が小さ
いほど動き成分が大きいと判断して、プリフィルタをき
つめにかけるように、プリフィルタ部５０を制御する。
このような制御は、例えば、第１段階で決定されたフィ
ルタ特性をｙの値に応じて変更することで実現すること
ができる。
では、映像の動きの大きさを表す動き成分が大きい場合
にはプリフィルタをきつめにかけ、動き成分が小さい場
合にはプリフィルタを緩めにかけるという処理をリアル
タイムに実現することを考える。映像の動き成分を判断
するパラメータとしては、例えば、ＭＥ残差等に基づい
て算出した最新のＢピクチャの符号化難易度ＤB と、イ
ントラＡＣ等に基づいて算出した最新のＩピクチャの符
号化難易度ＤI との比率ｙ＝ＤI ／ＤB を用いる。動き
が大きい絵柄では、動き予測誤差が増えるし、動きベク
トル自体の符号量も増えるから、Ｂピクチャの符号量は
増え、その結果、ｙ＝ＤI ／ＤB が小さくなる。そこ
で、本実施の形態では、第２段階として、ｙの値が小さ
いほど動き成分が大きいと判断して、プリフィルタをき
つめにかけるように、プリフィルタ部５０を制御する。
このような制御は、例えば、第１段階で決定されたフィ
ルタ特性をｙの値に応じて変更することで実現すること
ができる。
【００４２】図４には、第１段階で決定された空間フィ
ルタ５２の通過帯域幅を、ｙの値に応じて３段階に変更
する例を示している。この例では、ｙ≧４の場合には第
１段階で決定された空間フィルタ５２の通過帯域幅を変
更せず、３≦ｙ＜４のときは、符号６２で示したよう
に、第１段階で決定された空間フィルタ５２の通過帯域
幅を０．５ＭＨｚだけ狭くし、２≦ｙ＜３のときは、符
号６３で示したように、第１段階で決定された空間フィ
ルタ５２の通過帯域幅を１．０ＭＨｚだけ狭くし、ｙ＜
２のときは、符号６４で示したように、第１段階で決定
された空間フィルタ５２の通過帯域幅を１．５ＭＨｚだ
け狭くするようにしている。
ルタ５２の通過帯域幅を、ｙの値に応じて３段階に変更
する例を示している。この例では、ｙ≧４の場合には第
１段階で決定された空間フィルタ５２の通過帯域幅を変
更せず、３≦ｙ＜４のときは、符号６２で示したよう
に、第１段階で決定された空間フィルタ５２の通過帯域
幅を０．５ＭＨｚだけ狭くし、２≦ｙ＜３のときは、符
号６３で示したように、第１段階で決定された空間フィ
ルタ５２の通過帯域幅を１．０ＭＨｚだけ狭くし、ｙ＜
２のときは、符号６４で示したように、第１段階で決定
された空間フィルタ５２の通過帯域幅を１．５ＭＨｚだ
け狭くするようにしている。
【００４３】次に、本実施の形態に係る画像符号化装置
の動作について説明する。入力画像信号Ｓ1 は、プリフ
ィルタ部５０の空間フィルタ５２，時間フィルタ５３を
順に通過した後、エンコーダ制御部１１に入力される。
エンコーダ制御部１１では、まず、画像並べ替え回路２
１によって、符号化する順番に従ってピクチャ（Ｉピク
チャ，Ｐピクチャ，Ｂピクチャ）の順番を並べ替え、次
に、走査変換・マクロブロック化回路２２によって、フ
レーム構造かフィールド構造かを判別し、判別結果に応
じた走査変換およびマクロブロック化を行い、次に、Ｉ
ピクチャの場合には、イントラＡＣ演算回路２３によっ
てイントラＡＣを算出してイントラＡＣデータＳ3 を符
号化制御部１５に送る。また、走査変換・マクロブロッ
ク化回路２２の出力データは、イントラＡＣ演算回路２
３を経て、ＦＩＦＯメモリ１２および動き検出回路１４
に送られる。
の動作について説明する。入力画像信号Ｓ1 は、プリフ
ィルタ部５０の空間フィルタ５２，時間フィルタ５３を
順に通過した後、エンコーダ制御部１１に入力される。
エンコーダ制御部１１では、まず、画像並べ替え回路２
１によって、符号化する順番に従ってピクチャ（Ｉピク
チャ，Ｐピクチャ，Ｂピクチャ）の順番を並べ替え、次
に、走査変換・マクロブロック化回路２２によって、フ
レーム構造かフィールド構造かを判別し、判別結果に応
じた走査変換およびマクロブロック化を行い、次に、Ｉ
ピクチャの場合には、イントラＡＣ演算回路２３によっ
てイントラＡＣを算出してイントラＡＣデータＳ3 を符
号化制御部１５に送る。また、走査変換・マクロブロッ
ク化回路２２の出力データは、イントラＡＣ演算回路２
３を経て、ＦＩＦＯメモリ１２および動き検出回路１４
に送られる。
【００４４】ＦＩＦＯメモリ１２は、符号化難易度計算
部４２において、符号化が終了したピクチャに引き続く
Ｎ枚分のピクチャの符号化難易度を算出するのに必要な
時間だけ、入力した画像データを遅延して、エンコーダ
１３に出力する。動き検出回路１４は、動きベクトルを
検出して動き補償回路３９に送ると共に、ＭＥ残差デー
タＳ4 をＭＥ残差計算部４１に送る。
部４２において、符号化が終了したピクチャに引き続く
Ｎ枚分のピクチャの符号化難易度を算出するのに必要な
時間だけ、入力した画像データを遅延して、エンコーダ
１３に出力する。動き検出回路１４は、動きベクトルを
検出して動き補償回路３９に送ると共に、ＭＥ残差デー
タＳ4 をＭＥ残差計算部４１に送る。
【００４５】Ｉピクチャの場合には、エンコーダ１３で
は、減算回路３１において予測画像データとの差分をと
ることなく、ＦＩＦＯメモリ１２の出力データをそのま
まＤＣＴ回路３２に入力してＤＣＴを行い、量子化回路
３３によってＤＣＴ係数を量子化し、可変長符号化回路
３４によって量子化回路３３の出力データを可変長符号
化し、バッファメモリ３５によって可変長符号化回路３
４の出力データを一旦保持し、一定のビットレートのビ
ットストリームからなる圧縮画像データＳ2 として出力
する。また、逆量子化回路３６によって量子化回路３３
の出力データを逆量子化し、逆ＤＣＴ回路３７によって
逆量子化回路３６の出力データに対して逆ＤＣＴを行
い、逆ＤＣＴ回路３７の出力画像データを加算回路３８
を介して動き補償回路３９に入力して保持させる。
は、減算回路３１において予測画像データとの差分をと
ることなく、ＦＩＦＯメモリ１２の出力データをそのま
まＤＣＴ回路３２に入力してＤＣＴを行い、量子化回路
３３によってＤＣＴ係数を量子化し、可変長符号化回路
３４によって量子化回路３３の出力データを可変長符号
化し、バッファメモリ３５によって可変長符号化回路３
４の出力データを一旦保持し、一定のビットレートのビ
ットストリームからなる圧縮画像データＳ2 として出力
する。また、逆量子化回路３６によって量子化回路３３
の出力データを逆量子化し、逆ＤＣＴ回路３７によって
逆量子化回路３６の出力データに対して逆ＤＣＴを行
い、逆ＤＣＴ回路３７の出力画像データを加算回路３８
を介して動き補償回路３９に入力して保持させる。
【００４６】Ｐピクチャの場合には、エンコーダ１３で
は、動き補償回路３９によって、保持している過去のＩ
ピクチャまたはＰピクチャに対応する画像データと動き
検出回路１４からの動きベクトルとに基づいて予測画像
データを生成し、予測画像データを減算回路３１および
加算回路３８に出力する。また、減算回路３１によっ
て、ＦＩＦＯメモリ１２の出力データと動き補償回路３
９からの予測画像データとの差分をとり、ＤＣＴ回路３
２によってＤＣＴを行い、量子化回路３３によってＤＣ
Ｔ係数を量子化し、可変長符号化回路３４によって量子
化回路３３の出力データを可変長符号化し、バッファメ
モリ３５によって可変長符号化回路３４の出力データを
一旦保持し圧縮画像データＳ2 として出力する。また、
逆量子化回路３６によって量子化回路３３の出力データ
を逆量子化し、逆ＤＣＴ回路３７によって逆量子化回路
３６の出力データに対して逆ＤＣＴを行い、加算回路３
８によって逆ＤＣＴ回路３７の出力データと予測画像デ
ータとを加算し、動き補償回路３９に入力して保持させ
る。
は、動き補償回路３９によって、保持している過去のＩ
ピクチャまたはＰピクチャに対応する画像データと動き
検出回路１４からの動きベクトルとに基づいて予測画像
データを生成し、予測画像データを減算回路３１および
加算回路３８に出力する。また、減算回路３１によっ
て、ＦＩＦＯメモリ１２の出力データと動き補償回路３
９からの予測画像データとの差分をとり、ＤＣＴ回路３
２によってＤＣＴを行い、量子化回路３３によってＤＣ
Ｔ係数を量子化し、可変長符号化回路３４によって量子
化回路３３の出力データを可変長符号化し、バッファメ
モリ３５によって可変長符号化回路３４の出力データを
一旦保持し圧縮画像データＳ2 として出力する。また、
逆量子化回路３６によって量子化回路３３の出力データ
を逆量子化し、逆ＤＣＴ回路３７によって逆量子化回路
３６の出力データに対して逆ＤＣＴを行い、加算回路３
８によって逆ＤＣＴ回路３７の出力データと予測画像デ
ータとを加算し、動き補償回路３９に入力して保持させ
る。
【００４７】Ｂピクチャの場合には、エンコーダ１３で
は、動き補償回路３９によって、保持している過去およ
び未来のＩピクチャまたはＰピクチャに対応する２つの
画像データと動き検出回路１４からの２つの動きベクト
ルとに基づいて予測画像データを生成し、予測画像デー
タを減算回路３１および加算回路３８に出力する。ま
た、減算回路３１によって、ＦＩＦＯメモリ１２の出力
データと動き補償回路３９からの予測画像データとの差
分をとり、ＤＣＴ回路３２によってＤＣＴを行い、量子
化回路３３によってＤＣＴ係数を量子化し、可変長符号
化回路３４によって量子化回路３３の出力データを可変
長符号化し、バッファメモリ３５によって可変長符号化
回路３４の出力データを一旦保持し圧縮画像データＳ2
として出力する。なお、Ｂピクチャは動き補償回路３９
に保持させない。
は、動き補償回路３９によって、保持している過去およ
び未来のＩピクチャまたはＰピクチャに対応する２つの
画像データと動き検出回路１４からの２つの動きベクト
ルとに基づいて予測画像データを生成し、予測画像デー
タを減算回路３１および加算回路３８に出力する。ま
た、減算回路３１によって、ＦＩＦＯメモリ１２の出力
データと動き補償回路３９からの予測画像データとの差
分をとり、ＤＣＴ回路３２によってＤＣＴを行い、量子
化回路３３によってＤＣＴ係数を量子化し、可変長符号
化回路３４によって量子化回路３３の出力データを可変
長符号化し、バッファメモリ３５によって可変長符号化
回路３４の出力データを一旦保持し圧縮画像データＳ2
として出力する。なお、Ｂピクチャは動き補償回路３９
に保持させない。
【００４８】なお、バッファメモリ３５は、可変長符号
化回路３４より発生されるビット量を表す発生ビット量
データＳ5 を符号化制御部１５に送る。
化回路３４より発生されるビット量を表す発生ビット量
データＳ5 を符号化制御部１５に送る。
【００４９】符号化制御部１５では、符号化難易度計算
部４２によって、イントラＡＣ演算回路２３からのイン
トラＡＣデータＳ3 とＭＥ残差計算部４１で算出したＭ
Ｅ残差より、符号化難易度を計算し、パラメータｘを求
め、ＶＢＶバッファ占有量計算部４３によってＶＢＶバ
ッファの占有量を計算する。そして、目標符号量決定部
４４によって、パラメータｘとＶＢＶバッファ占有量計
算部４３によって算出されているＶＢＶバッファの占有
量とに基づいて目標符号量を計算し、量子化インデック
ス決定部４５に送り、量子化インデックス決定部４５に
よって、エンコーダ１３における発生符号量が目標符号
量決定部４４によって決定された目標符号量となるよう
に量子化回路３３における量子化特性値に対応する量子
化インデックスを決定し、量子化回路３３に送る。
部４２によって、イントラＡＣ演算回路２３からのイン
トラＡＣデータＳ3 とＭＥ残差計算部４１で算出したＭ
Ｅ残差より、符号化難易度を計算し、パラメータｘを求
め、ＶＢＶバッファ占有量計算部４３によってＶＢＶバ
ッファの占有量を計算する。そして、目標符号量決定部
４４によって、パラメータｘとＶＢＶバッファ占有量計
算部４３によって算出されているＶＢＶバッファの占有
量とに基づいて目標符号量を計算し、量子化インデック
ス決定部４５に送り、量子化インデックス決定部４５に
よって、エンコーダ１３における発生符号量が目標符号
量決定部４４によって決定された目標符号量となるよう
に量子化回路３３における量子化特性値に対応する量子
化インデックスを決定し、量子化回路３３に送る。
【００５０】次に、図５の流れ図を参照して、プリフィ
ルタ部５０の制御に関する動作について説明する。な
お、図５では、簡単のために、空間フィルタ５２の制御
についてのみ示している。この動作では、まず、符号化
難易度計算部４２によって、符号化難易度を計算し、パ
ラメータｘを求める（ステップＳ１０１）。次に、プリ
フィルタ制御部５１は、パラメータｘの値に応じて、例
えば図４に示した関係に基づいて、第１段階として、プ
リフィルタ（ここでは空間フィルタ５２）の通過帯域幅
を決める（ステップＳ１０２）。次に、プリフィルタ制
御部５１は、ＩピクチャとＢピクチャの符号化難易度の
比率ｙを計算し（ステップＳ１０３）、ｙの大きさを判
定し（ステップＳ１０４）、ｙの大きさに応じて以下の
処理を行う。すなわち、図４に示した例では、ｙ≧４の
場合には第１段階で決定された通過帯域幅を変更せず、
３≦ｙ＜４のときは、第１段階で決定された通過帯域幅
を０．５ＭＨｚだけ狭くし（ステップＳ１０５）、２≦
ｙ＜３のときは、第１段階で決定された通過帯域幅を
１．０ＭＨｚだけ狭くし（ステップＳ１０６）、ｙ＜２
のときは、第１段階で決定された空間フィルタ５２の通
過帯域幅を１．５ＭＨｚだけ狭くする（ステップＳ１０
７）。次に、プリフィルタ制御部５１は、以上のように
して決定された通過帯域幅になるように、プリフィルタ
（ここでは空間フィルタ５２）の係数を設定し（ステッ
プＳ１０８）、メインルーチンにリターンする。以上の
動作は、各ピクチャ毎に行われる。
ルタ部５０の制御に関する動作について説明する。な
お、図５では、簡単のために、空間フィルタ５２の制御
についてのみ示している。この動作では、まず、符号化
難易度計算部４２によって、符号化難易度を計算し、パ
ラメータｘを求める（ステップＳ１０１）。次に、プリ
フィルタ制御部５１は、パラメータｘの値に応じて、例
えば図４に示した関係に基づいて、第１段階として、プ
リフィルタ（ここでは空間フィルタ５２）の通過帯域幅
を決める（ステップＳ１０２）。次に、プリフィルタ制
御部５１は、ＩピクチャとＢピクチャの符号化難易度の
比率ｙを計算し（ステップＳ１０３）、ｙの大きさを判
定し（ステップＳ１０４）、ｙの大きさに応じて以下の
処理を行う。すなわち、図４に示した例では、ｙ≧４の
場合には第１段階で決定された通過帯域幅を変更せず、
３≦ｙ＜４のときは、第１段階で決定された通過帯域幅
を０．５ＭＨｚだけ狭くし（ステップＳ１０５）、２≦
ｙ＜３のときは、第１段階で決定された通過帯域幅を
１．０ＭＨｚだけ狭くし（ステップＳ１０６）、ｙ＜２
のときは、第１段階で決定された空間フィルタ５２の通
過帯域幅を１．５ＭＨｚだけ狭くする（ステップＳ１０
７）。次に、プリフィルタ制御部５１は、以上のように
して決定された通過帯域幅になるように、プリフィルタ
（ここでは空間フィルタ５２）の係数を設定し（ステッ
プＳ１０８）、メインルーチンにリターンする。以上の
動作は、各ピクチャ毎に行われる。
【００５１】ここまでは、空間フィルタ５２の制御につ
いて説明してきたが、時間フィルタ５３の制御は、タッ
プ係数の代わりに重み付け係数Ｋによって行う他は、空
間フィルタ５２の制御と同様である。なお、時間フィル
タの特性を表す場合、図４における通過帯域幅の代わり
に、縦軸には例えば重み付け係数Ｋをとる。Ｋの値が小
さいほどフィルタはきつめになる。
いて説明してきたが、時間フィルタ５３の制御は、タッ
プ係数の代わりに重み付け係数Ｋによって行う他は、空
間フィルタ５２の制御と同様である。なお、時間フィル
タの特性を表す場合、図４における通過帯域幅の代わり
に、縦軸には例えば重み付け係数Ｋをとる。Ｋの値が小
さいほどフィルタはきつめになる。
【００５２】以上説明したように本実施の形態に係る画
像符号化装置によれば、入力画像信号をリアルタイムに
符号化しながら、入力画像の符号化難易度に応じてプリ
フィルタ部５０の特性を適応的に制御することができる
ので、入力画像の符号化難易度が大きいときには情報量
を削減することによってブロック歪み等の目に付く歪み
を軽減することができ、入力画像の符号化難易度が小さ
いときには情報量の削減による画質の劣化を防止するこ
とができる。更に、本実施の形態に係る画像符号化装置
によれば、動き成分が大きいときにはプリフィルタをき
つめにかけ、動き成分が小さいときにはプリフィルタを
緩めにかけることができ、プリフィルタによるぼけに気
付かれにくくしながら、復号化後の視覚的な画質の印象
を向上させることができる。
像符号化装置によれば、入力画像信号をリアルタイムに
符号化しながら、入力画像の符号化難易度に応じてプリ
フィルタ部５０の特性を適応的に制御することができる
ので、入力画像の符号化難易度が大きいときには情報量
を削減することによってブロック歪み等の目に付く歪み
を軽減することができ、入力画像の符号化難易度が小さ
いときには情報量の削減による画質の劣化を防止するこ
とができる。更に、本実施の形態に係る画像符号化装置
によれば、動き成分が大きいときにはプリフィルタをき
つめにかけ、動き成分が小さいときにはプリフィルタを
緩めにかけることができ、プリフィルタによるぼけに気
付かれにくくしながら、復号化後の視覚的な画質の印象
を向上させることができる。
【００５３】図６は、本発明の第２の実施の形態に係る
画像符号化装置の構成を示すブロック図である。本実施
の形態に係る画像符号化装置は、ＭＰＥＧ方式の圧縮ア
ルゴリズムとして有名なＴＭ５（test model 5;ISO/IEC
JTC/SC29(1993) ）等で代表されるような、過去に圧縮
符号化して得られた発生符号量に基づいて発生符号量の
制御を行うフィードバック型のレート制御を行う構成の
例である。
画像符号化装置の構成を示すブロック図である。本実施
の形態に係る画像符号化装置は、ＭＰＥＧ方式の圧縮ア
ルゴリズムとして有名なＴＭ５（test model 5;ISO/IEC
JTC/SC29(1993) ）等で代表されるような、過去に圧縮
符号化して得られた発生符号量に基づいて発生符号量の
制御を行うフィードバック型のレート制御を行う構成の
例である。
【００５４】この画像符号化装置は、入力画像信号Ｓ1
を入力し、その情報量を削減するためのプリフィルタ部
５０と、このプリフィルタ部５０の出力信号を入力し、
圧縮符号化のための前処理等を行うエンコーダ制御部１
１と、このエンコーダ制御部１１の出力データを入力
し、ピクチャ毎にピクチャタイプに応じた符号化方法に
よって圧縮符号化して、圧縮画像データＳ2 を出力する
符号化手段としてのエンコーダ１３と、エンコーダ制御
部１１の出力データに基づいて動きベクトルを検出し、
エンコーダ１３に送る動き検出回路１４と、エンコーダ
１３から出力される発生ビット量データＳ7 に基づいて
エンコーダ１３を制御する符号化制御部７５と、この符
号化制御部７５からのデータに基づいて、プリフィルタ
制御信号Ｓ6 によってプリフィルタ部５０の特性を制御
するプリフィルタ制御部５１とを備えている。この画像
符号化装置において、符号化制御部７５以外の構成は、
第１の実施の形態と同様である。
を入力し、その情報量を削減するためのプリフィルタ部
５０と、このプリフィルタ部５０の出力信号を入力し、
圧縮符号化のための前処理等を行うエンコーダ制御部１
１と、このエンコーダ制御部１１の出力データを入力
し、ピクチャ毎にピクチャタイプに応じた符号化方法に
よって圧縮符号化して、圧縮画像データＳ2 を出力する
符号化手段としてのエンコーダ１３と、エンコーダ制御
部１１の出力データに基づいて動きベクトルを検出し、
エンコーダ１３に送る動き検出回路１４と、エンコーダ
１３から出力される発生ビット量データＳ7 に基づいて
エンコーダ１３を制御する符号化制御部７５と、この符
号化制御部７５からのデータに基づいて、プリフィルタ
制御信号Ｓ6 によってプリフィルタ部５０の特性を制御
するプリフィルタ制御部５１とを備えている。この画像
符号化装置において、符号化制御部７５以外の構成は、
第１の実施の形態と同様である。
【００５５】符号化制御部７５は、エンコーダ１３の可
変長符号化回路３４から出力される発生ビット量データ
Ｓ7 に基づいて符号化難易度を算出する符号化難易度計
算部４６と、この符号化難易度計算部４６によって算出
された符号化難易度に基づいて、目標符号量を決定する
目標符号量決定部４４と、エンコーダ１３における発生
符号量が目標符号量決定部４４によって決定された目標
符号量となるように量子化回路３３における量子化特性
値に対応する量子化インデックスを決定し、量子化回路
３３に送る量子化インデックス決定部４５とを備えてい
る。
変長符号化回路３４から出力される発生ビット量データ
Ｓ7 に基づいて符号化難易度を算出する符号化難易度計
算部４６と、この符号化難易度計算部４６によって算出
された符号化難易度に基づいて、目標符号量を決定する
目標符号量決定部４４と、エンコーダ１３における発生
符号量が目標符号量決定部４４によって決定された目標
符号量となるように量子化回路３３における量子化特性
値に対応する量子化インデックスを決定し、量子化回路
３３に送る量子化インデックス決定部４５とを備えてい
る。
【００５６】なお、プリフィルタ制御部５１は、符号化
制御部１５における符号化難易度計算部４６によって算
出された符号化難易度に基づいてプリフィルタ部５０を
制御するようになっている。
制御部１５における符号化難易度計算部４６によって算
出された符号化難易度に基づいてプリフィルタ部５０を
制御するようになっている。
【００５７】本実施の形態では、符号化難易度計算部４
６で算出する符号化難易度として、符号化が終了したピ
クチャのグローバル・コンプレキシティ（Global Compl
exity ）を用いている。なお、グローバル・コンプレキ
シティとは、画面の複雑さを示すパラメータであり、具
体的にはピクチャの圧縮符号化時の発生符号量とピクチ
ャの圧縮符号化時の平均量子化スケールコード（量子化
特性値）との積として求められる（例えば、オーム社発
行の「テレビジョン学会マルチメディア選書ＭＰＥＧ」
の第１１１ページ参照。）。
６で算出する符号化難易度として、符号化が終了したピ
クチャのグローバル・コンプレキシティ（Global Compl
exity ）を用いている。なお、グローバル・コンプレキ
シティとは、画面の複雑さを示すパラメータであり、具
体的にはピクチャの圧縮符号化時の発生符号量とピクチ
ャの圧縮符号化時の平均量子化スケールコード（量子化
特性値）との積として求められる（例えば、オーム社発
行の「テレビジョン学会マルチメディア選書ＭＰＥＧ」
の第１１１ページ参照。）。
【００５８】本実施の形態におけるその他の動作および
効果は、第１の実施の形態と同様である。
効果は、第１の実施の形態と同様である。
【００５９】なお、本発明は、上記各実施の形態に限定
されず、例えば、符号化難易度に基づいてプリフィルタ
部５０を制御する際に、実施の形態で用いたパラメータ
ｘや比率ｙ、あるいはグローバル・コンプレキシティの
他に、符号化難易度が増加傾向にあるのか減少傾向にあ
るのかという変化傾向の情報も加えて判定することで、
今後の入力画像の絵柄の難しさの予測精度を更に向上さ
せて、プリフィルタ部５０の制御をより適切に行うこと
が可能となる。なお、符号化難易度の変化傾向の情報
は、例えば、時系列的に求まった符号化難易度を最小自
乗法等により直線近似し、その傾きから求めることがで
きる。この場合、符号化難易度の変化傾向の情報は、例
えば、符号化難易度計算部４２，４６において求める。
されず、例えば、符号化難易度に基づいてプリフィルタ
部５０を制御する際に、実施の形態で用いたパラメータ
ｘや比率ｙ、あるいはグローバル・コンプレキシティの
他に、符号化難易度が増加傾向にあるのか減少傾向にあ
るのかという変化傾向の情報も加えて判定することで、
今後の入力画像の絵柄の難しさの予測精度を更に向上さ
せて、プリフィルタ部５０の制御をより適切に行うこと
が可能となる。なお、符号化難易度の変化傾向の情報
は、例えば、時系列的に求まった符号化難易度を最小自
乗法等により直線近似し、その傾きから求めることがで
きる。この場合、符号化難易度の変化傾向の情報は、例
えば、符号化難易度計算部４２，４６において求める。
【００６０】また、第１の実施の形態では、図２に示し
たように、エンコーダ１３の他に別のエンコーダを設け
ることなく、圧縮符号化する前の画像データの特徴に基
づいて発生符号量の制御を行うフィードフォワード型の
レート制御を行う構成としたが、本発明は、圧縮符号化
後のデータ量を見積もるためにエンコーダ１３とは別の
１パス目のエンコーダを設けて、この１パス目のエンコ
ーダによって圧縮符号化することによって見積もられた
データ量に基づいて２パス目のエンコーダ１３における
発生符号量の制御を行うフィードフォワード型のレート
制御を行う構成にも適用することができる。この場合に
は、１パス目のエンコーダによって圧縮符号化すること
によって得られた発生符号量に基づいて符号化難易度を
求めることが可能である。
たように、エンコーダ１３の他に別のエンコーダを設け
ることなく、圧縮符号化する前の画像データの特徴に基
づいて発生符号量の制御を行うフィードフォワード型の
レート制御を行う構成としたが、本発明は、圧縮符号化
後のデータ量を見積もるためにエンコーダ１３とは別の
１パス目のエンコーダを設けて、この１パス目のエンコ
ーダによって圧縮符号化することによって見積もられた
データ量に基づいて２パス目のエンコーダ１３における
発生符号量の制御を行うフィードフォワード型のレート
制御を行う構成にも適用することができる。この場合に
は、１パス目のエンコーダによって圧縮符号化すること
によって得られた発生符号量に基づいて符号化難易度を
求めることが可能である。
【００６１】また、第２の実施の形態のようなフィード
バック型のレート制御を行う構成において、既に圧縮符
号化したピクチャの符号化難易度に基づいて、直線近似
等によって今後の数枚分のピクチャの符号化難易度を予
測し、この予測した符号化難易度に基づいてプリフィル
タ部５０を制御するようにしても良い。
バック型のレート制御を行う構成において、既に圧縮符
号化したピクチャの符号化難易度に基づいて、直線近似
等によって今後の数枚分のピクチャの符号化難易度を予
測し、この予測した符号化難易度に基づいてプリフィル
タ部５０を制御するようにしても良い。
【００６２】更に、フィードフォワード型のレート制御
を行う構成において直線近似等によって符号化難易度の
変化傾向を求める場合や、フィードバック型のレート制
御を行う構成において直線近似等によって今後の数枚分
のピクチャの符号化難易度を予測する場合において、シ
ーンチェンジ時には符号化難易度の連続性がなくなるの
で、シーンチェンジ時には、符号化難易度の変化傾向を
求める処理や符号化難易度を予測する処理をシーンチェ
ンジ前までで完結させ、シーンチェンジ後に新たに処理
を行うようにすれば、より精度が向上する。
を行う構成において直線近似等によって符号化難易度の
変化傾向を求める場合や、フィードバック型のレート制
御を行う構成において直線近似等によって今後の数枚分
のピクチャの符号化難易度を予測する場合において、シ
ーンチェンジ時には符号化難易度の連続性がなくなるの
で、シーンチェンジ時には、符号化難易度の変化傾向を
求める処理や符号化難易度を予測する処理をシーンチェ
ンジ前までで完結させ、シーンチェンジ後に新たに処理
を行うようにすれば、より精度が向上する。
【００６３】また、言うまでもなく、図４はプリフィル
タの特性の一例を表したものでありプリフィルタの特性
は適宜に設定することができる。
タの特性の一例を表したものでありプリフィルタの特性
は適宜に設定することができる。
【００６４】また、符号化難易度は、実施の形態で挙げ
たイントラＡＣ，ＭＥ残差，グローバル・コンプレキシ
ティ等を用いたものに限らず、ピクチャの符号化の難易
度を表すものであれば、他のパラメータでも良い。ま
た、動き成分を表すパラメータも、実施の形態で挙げた
比率ｙ＝ＤI ／ＤB に限らず、入力画像データにおける
動きの大きさを表すものであれば、他のパラメータでも
良い。例えば、最新のＰピクチャの符号化難易度ＤP と
最新のＩピクチャの符号化難易度ＤI との比率ＤI ／Ｄ
P を用いても良い。
たイントラＡＣ，ＭＥ残差，グローバル・コンプレキシ
ティ等を用いたものに限らず、ピクチャの符号化の難易
度を表すものであれば、他のパラメータでも良い。ま
た、動き成分を表すパラメータも、実施の形態で挙げた
比率ｙ＝ＤI ／ＤB に限らず、入力画像データにおける
動きの大きさを表すものであれば、他のパラメータでも
良い。例えば、最新のＰピクチャの符号化難易度ＤP と
最新のＩピクチャの符号化難易度ＤI との比率ＤI ／Ｄ
P を用いても良い。
【００６５】また、実施の形態ではプリフィルタ部５０
が空間フィルタ５２と時間フィルタ５３の双方を有する
例を挙げたが、本発明は、プリフィルタとして空間フィ
ルタと時間フィルタのいずれか一方をのみを有する画像
符号化装置にも適用することができる。
が空間フィルタ５２と時間フィルタ５３の双方を有する
例を挙げたが、本発明は、プリフィルタとして空間フィ
ルタと時間フィルタのいずれか一方をのみを有する画像
符号化装置にも適用することができる。
【００６６】
【発明の効果】以上説明したように、請求項１ないし６
のいずれかに記載の画像符号化装置、請求項７ないし１
０のいずれかに記載の画像符号化制御方法または請求項
１１ないし１４のいずれかに記載の画像符号化制御用プ
ログラムを記録した媒体によれば、入力画像データの符
号化の難易度を表す符号化難易度を算出し、この符号化
難易度に応じて、プリフィルタの特性を制御するように
したので、リアルタイムに符号化しながら、入力画像の
特徴に応じてプリフィルタを適応的に使用することがで
き、入力画像の符号化難易度が大きいときには情報量を
削減することによって符号化歪みによる画質の劣化を軽
減することができ、入力画像の符号化難易度が小さいと
きには情報量の削減による画質の劣化を防止することが
できるという効果を奏する。
のいずれかに記載の画像符号化装置、請求項７ないし１
０のいずれかに記載の画像符号化制御方法または請求項
１１ないし１４のいずれかに記載の画像符号化制御用プ
ログラムを記録した媒体によれば、入力画像データの符
号化の難易度を表す符号化難易度を算出し、この符号化
難易度に応じて、プリフィルタの特性を制御するように
したので、リアルタイムに符号化しながら、入力画像の
特徴に応じてプリフィルタを適応的に使用することがで
き、入力画像の符号化難易度が大きいときには情報量を
削減することによって符号化歪みによる画質の劣化を軽
減することができ、入力画像の符号化難易度が小さいと
きには情報量の削減による画質の劣化を防止することが
できるという効果を奏する。
【００６７】また、請求項５または６記載の画像符号化
装置、請求項９または１０記載の画像符号化制御方法ま
たは請求項１３または１４記載の画像符号化制御用プロ
グラムを記録した媒体によれば、入力画像データにおけ
る動きの大きさを表す動き成分を算出し、符号化難易度
と動き成分とに応じてプリフィルタの特性を制御するよ
うにしたので、上記効果に加え、視覚的な画質の印象を
向上させることが可能となるという効果を奏する。
装置、請求項９または１０記載の画像符号化制御方法ま
たは請求項１３または１４記載の画像符号化制御用プロ
グラムを記録した媒体によれば、入力画像データにおけ
る動きの大きさを表す動き成分を算出し、符号化難易度
と動き成分とに応じてプリフィルタの特性を制御するよ
うにしたので、上記効果に加え、視覚的な画質の印象を
向上させることが可能となるという効果を奏する。
【図１】本発明の第１の実施の形態に係る画像符号化装
置の詳細な構成を示すブロック図である。
置の詳細な構成を示すブロック図である。
【図２】本発明の第１の実施の形態に係る画像符号化装
置の概略の構成を示すブロック図である。
置の概略の構成を示すブロック図である。
【図３】図１における符号化制御部およびプリフィルタ
制御部を実現するコンピュータの構成を示すブロック図
である。
制御部を実現するコンピュータの構成を示すブロック図
である。
【図４】図１におけるプリフィルタ制御部の機能を説明
するための特性図である。
するための特性図である。
【図５】本発明の第１の実施の形態に係る画像符号化装
置におけるプリフィルタ部の制御に関する動作を示す流
れ図である。
置におけるプリフィルタ部の制御に関する動作を示す流
れ図である。
【図６】本発明の第２の実施の形態に係る画像符号化装
置の構成を示すブロック図である。
置の構成を示すブロック図である。
【図７】プリフィルタを有する画像符号化装置の構成の
一例を示すブロック図である。
一例を示すブロック図である。
１１…エンコーダ制御部、１２…ＦＩＦＯメモリ、１３
…エンコーダ、１４…動き検出回路、１５…符号化制御
部、１６…ＣＰＵ、１７…ＲＯＭ、１８…ＲＡＭ、２３
…イントラＡＣ演算回路、３１…減算回路、３２…ＤＣ
Ｔ回路、３３…量子化回路、３４…可変長符号化回路、
３５…バッファメモリ、３６…逆量子化回路、３７…逆
ＤＣＴ回路、３９…動き補償回路、４１…ＭＥ残差計算
部、４２…符号化難易度計算部、４３…ＶＢＶバッファ
占有量計算部、４４…目標符号量決定部、４５…量子化
インデックス決定部、５０…プリフィルタ、５１…プリ
フィルタ制御部、５２…空間フィルタ、５３…時間フィ
ルタ
…エンコーダ、１４…動き検出回路、１５…符号化制御
部、１６…ＣＰＵ、１７…ＲＯＭ、１８…ＲＡＭ、２３
…イントラＡＣ演算回路、３１…減算回路、３２…ＤＣ
Ｔ回路、３３…量子化回路、３４…可変長符号化回路、
３５…バッファメモリ、３６…逆量子化回路、３７…逆
ＤＣＴ回路、３９…動き補償回路、４１…ＭＥ残差計算
部、４２…符号化難易度計算部、４３…ＶＢＶバッファ
占有量計算部、４４…目標符号量決定部、４５…量子化
インデックス決定部、５０…プリフィルタ、５１…プリ
フィルタ制御部、５２…空間フィルタ、５３…時間フィ
ルタ
Claims (14)
- 【請求項１】 入力画像データを圧縮符号化する符号化
手段と、 この符号化手段の前段に設けられ、入力画像データの情
報量を削減するためのプリフィルタと、 入力画像データの符号化の難易度を表す符号化難易度を
算出する符号化難易度算出手段と、 この符号化難易度算出手段によって算出される符号化難
易度に応じて、前記プリフィルタの特性を制御するプリ
フィルタ制御手段とを備えたことを特徴とする画像符号
化装置。 - 【請求項２】 前記プリフィルタは、空間的なローパス
フィルタを含むことを特徴とする請求項１記載の画像符
号化装置。 - 【請求項３】 前記プリフィルタは、時間的なローパス
フィルタを含むことを特徴とする請求項１記載の画像符
号化装置。 - 【請求項４】 前記プリフィルタ制御手段は、前記符号
化手段の出力データに対して割り当てられる単位時間当
たりのデータ量に対する符号化難易度の割合に基づい
て、前記プリフィルタの特性を制御することを特徴とす
る請求項１記載の画像符号化装置。 - 【請求項５】 入力画像データにおける動きの大きさを
表す動き成分を算出する動き成分算出手段を更に備え、
前記プリフィルタ制御手段は、前記符号化難易度と前記
動き成分算出手段によって算出される動き成分とに応じ
て、前記プリフィルタの特性を制御することを特徴とす
る請求項１記載の画像符号化装置。 - 【請求項６】 前記動き成分算出手段は、動き成分とし
て、最新の予測符号化画像の符号化難易度と最新のフレ
ーム内符号化画像の符号化難易度との比率を算出するこ
とを特徴とする請求項５記載の画像符号化装置。 - 【請求項７】 入力画像データを圧縮符号化する符号化
手段と、この符号化手段の前段に設けられ、入力画像デ
ータの情報量を削減するためのプリフィルタとを有する
画像符号化装置を制御する画像符号化制御方法であっ
て、 入力画像データの符号化の難易度を表す符号化難易度を
算出する符号化難易度算出手順と、 この符号化難易度算出手順によって算出される符号化難
易度に応じて、前記プリフィルタの特性を制御するプリ
フィルタ制御手順とを備えたことを特徴とする画像符号
化制御方法。 - 【請求項８】 前記プリフィルタ制御手順は、前記符号
化手段の出力データに対して割り当てられる単位時間当
たりのデータ量に対する符号化難易度の割合に基づい
て、前記プリフィルタの特性を制御することを特徴とす
る請求項７記載の画像符号化制御方法。 - 【請求項９】 入力画像データにおける動きの大きさを
表す動き成分を算出する動き成分算出手順を更に備え、
前記プリフィルタ制御手順は、前記符号化難易度と前記
動き成分算出手順によって算出される動き成分とに応じ
て、前記プリフィルタの特性を制御することを特徴とす
る請求項７記載の画像符号化制御方法。 - 【請求項１０】 前記動き成分算出手順は、動き成分と
して、最新の予測符号化画像の符号化難易度と最新のフ
レーム内符号化画像の符号化難易度との比率を算出する
ことを特徴とする請求項９記載の画像符号化制御方法。 - 【請求項１１】 入力画像データを圧縮符号化する符号
化手段と、この符号化手段の前段に設けられ、入力画像
データの情報量を削減するためのプリフィルタとを有す
る画像符号化装置を、コンピュータによって制御するた
めの画像符号化制御用プログラムを記録した媒体であっ
て、 入力画像データの符号化の難易度を表す符号化難易度を
算出する符号化難易度算出手順と、 この符号化難易度算出手順によって算出される符号化難
易度に応じて、前記プリフィルタの特性を制御するプリ
フィルタ制御手順とをコンピュータに実行させるための
画像符号化制御用プログラムを記録した媒体。 - 【請求項１２】 前記プリフィルタ制御手順は、前記符
号化手段の出力データに対して割り当てられる単位時間
当たりのデータ量に対する符号化難易度の割合に基づい
て、前記プリフィルタの特性を制御することを特徴とす
る請求項１１記載の画像符号化制御用プログラムを記録
した媒体。 - 【請求項１３】 前記画像符号化制御用プログラムは、
更に、入力画像データにおける動きの大きさを表す動き
成分を算出する動き成分算出手順をコンピュータに実行
させ、前記プリフィルタ制御手順は、前記符号化難易度
と前記動き成分算出手順によって算出される動き成分と
に応じて、前記プリフィルタの特性を制御することを特
徴とする請求項１１記載の画像符号化制御用プログラム
を記録した媒体。 - 【請求項１４】 前記動き成分算出手順は、動き成分と
して、最新の予測符号化画像の符号化難易度と最新のフ
レーム内符号化画像の符号化難易度との比率を算出する
ことを特徴とする請求項１３記載の画像符号化制御用プ
ログラムを記録した媒体。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP25973096A JPH10108197A (ja) | 1996-09-30 | 1996-09-30 | 画像符号化装置、画像符号化制御方法および画像符号化制御用プログラムを記録した媒体 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP25973096A JPH10108197A (ja) | 1996-09-30 | 1996-09-30 | 画像符号化装置、画像符号化制御方法および画像符号化制御用プログラムを記録した媒体 |
Related Child Applications (2)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2006245804A Division JP2007020216A (ja) | 2006-09-11 | 2006-09-11 | 符号化装置、符号化方法、フィルタ処理装置およびフィルタ処理方法 |
| JP2006245803A Division JP2007006533A (ja) | 2006-09-11 | 2006-09-11 | 符号化装置、符号化方法、フィルタ処理装置およびフィルタ処理方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JPH10108197A true JPH10108197A (ja) | 1998-04-24 |
Family
ID=17338154
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP25973096A Pending JPH10108197A (ja) | 1996-09-30 | 1996-09-30 | 画像符号化装置、画像符号化制御方法および画像符号化制御用プログラムを記録した媒体 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JPH10108197A (ja) |
Cited By (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2000001158A1 (en) * | 1998-06-29 | 2000-01-06 | Sony Corporation | Encoder and encoding method |
| US7177358B2 (en) | 2000-06-27 | 2007-02-13 | Mitsubishi Denki Kabushiki Kaisha | Picture coding apparatus, and picture coding method |
| US7194135B2 (en) | 2002-01-22 | 2007-03-20 | Hitachi Ltd. | Image recording device |
| WO2007136087A1 (ja) * | 2006-05-23 | 2007-11-29 | Olympus Corporation | 画像処理装置 |
| JP2008153946A (ja) * | 2006-12-18 | 2008-07-03 | Ntt Electornics Corp | 画像符号化装置 |
| JP2019161413A (ja) * | 2018-03-12 | 2019-09-19 | 日本放送協会 | 映像符号化装置、映像符号化前処理装置、及びプログラム |
-
1996
- 1996-09-30 JP JP25973096A patent/JPH10108197A/ja active Pending
Cited By (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2000001158A1 (en) * | 1998-06-29 | 2000-01-06 | Sony Corporation | Encoder and encoding method |
| US6480544B1 (en) | 1998-06-29 | 2002-11-12 | Sony Corporation | Encoding apparatus and encoding method |
| US7177358B2 (en) | 2000-06-27 | 2007-02-13 | Mitsubishi Denki Kabushiki Kaisha | Picture coding apparatus, and picture coding method |
| US7194135B2 (en) | 2002-01-22 | 2007-03-20 | Hitachi Ltd. | Image recording device |
| WO2007136087A1 (ja) * | 2006-05-23 | 2007-11-29 | Olympus Corporation | 画像処理装置 |
| US8249368B2 (en) | 2006-05-23 | 2012-08-21 | Olympus Corporation | Image processing device |
| JP2008153946A (ja) * | 2006-12-18 | 2008-07-03 | Ntt Electornics Corp | 画像符号化装置 |
| JP2019161413A (ja) * | 2018-03-12 | 2019-09-19 | 日本放送協会 | 映像符号化装置、映像符号化前処理装置、及びプログラム |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP3952509B2 (ja) | 画像符号化装置、画像符号化方法及び画像符号化プログラムを記録した媒体 | |
| JPH118855A (ja) | デジタル・ビデオ信号エンコーダ及び符号化方法 | |
| KR100227298B1 (ko) | 부호화 화상의 부호량 제어 방법 | |
| JPH09322176A (ja) | 符号化モード選択方法、動画像符号化装置、符号化方法、記録方法、及び伝送方法 | |
| US7965768B2 (en) | Video signal encoding apparatus and computer readable medium with quantization control | |
| JP4345024B2 (ja) | 画像符号化装置、画像符号化方法及び画像符号化プログラムを記録した記録媒体 | |
| JPH0998427A (ja) | 動画像符号化装置 | |
| JPH10108197A (ja) | 画像符号化装置、画像符号化制御方法および画像符号化制御用プログラムを記録した媒体 | |
| JP5656575B2 (ja) | 画像符号化装置 | |
| JP2009017127A (ja) | 符号化装置および符号化方法 | |
| JP2007020216A (ja) | 符号化装置、符号化方法、フィルタ処理装置およびフィルタ処理方法 | |
| JP3937248B2 (ja) | 映像信号符号化方法及び映像信号符号化装置 | |
| JP4399794B2 (ja) | 画像符号化装置及び画像符号化方法 | |
| JP2001008207A (ja) | 動画像符号化装置及びその方法 | |
| JP3934772B2 (ja) | 可変転送レート符号化方法および装置 | |
| JP4359273B2 (ja) | 符号化モード選択方法 | |
| JPH10126794A (ja) | 動き予測フレーム間画像信号圧縮装置 | |
| JP3652889B2 (ja) | 映像符号化方法、映像符号化装置、記録媒体、及び映像通信システム | |
| JP3922581B2 (ja) | 可変転送レート符号化方法および装置 | |
| JPH05344492A (ja) | フレーム間予測符号化方式 | |
| JP4353928B2 (ja) | データ圧縮方法、記録方法、及び伝送方法 | |
| JP4359274B2 (ja) | 動画像圧縮符号化装置 | |
| JP2004241879A (ja) | 画像処理装置および方法、記録媒体、並びにプログラム | |
| JP2007006533A (ja) | 符号化装置、符号化方法、フィルタ処理装置およびフィルタ処理方法 | |
| JPH1066067A (ja) | 映像データ圧縮装置およびその方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20050519 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20050802 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20050922 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20060313 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20060428 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20060712 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20060911 |
|
| A911 | Transfer of reconsideration by examiner before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20061002 |
|
| A912 | Removal of reconsideration by examiner before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A912 Effective date: 20061117 |