JP2005191706A - 動画像符号化方法及びその装置 - Google Patents
動画像符号化方法及びその装置 Download PDFInfo
- Publication number
- JP2005191706A JP2005191706A JP2003427893A JP2003427893A JP2005191706A JP 2005191706 A JP2005191706 A JP 2005191706A JP 2003427893 A JP2003427893 A JP 2003427893A JP 2003427893 A JP2003427893 A JP 2003427893A JP 2005191706 A JP2005191706 A JP 2005191706A
- Authority
- JP
- Japan
- Prior art keywords
- encoding
- prediction
- mode
- coding
- cost
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/48—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using compressed domain processing techniques other than decoding, e.g. modification of transform coefficients, variable length coding [VLC] data or run-length data
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/107—Selection of coding mode or of prediction mode between spatial and temporal predictive coding, e.g. picture refresh
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/146—Data rate or code amount at the encoder output
- H04N19/147—Data rate or code amount at the encoder output according to rate distortion criteria
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/146—Data rate or code amount at the encoder output
- H04N19/15—Data rate or code amount at the encoder output by monitoring actual compressed data size at the memory before deciding storage at the transmission buffer
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/174—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/18—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a set of transform coefficients
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/189—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding
- H04N19/19—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding using optimisation based on Lagrange multipliers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/189—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding
- H04N19/192—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding the adaptation method, adaptation tool or adaptation type being iterative or recursive
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/593—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
- H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
Abstract
【解決手段】入力画像は、予測信号生成部108にて処理され、処理負担の少ない簡易モード判定によって複数の符号化モードに対して簡易符号化コストを計測する。符号化モードは量子化ステップに基づいて候補を絞られた後、MB予測モード選択部109にて、レート−歪み最適化を用いたモード判定により符号化効率の高い符号化モードを選択する。選択された符号化モードは直交変換部102、及び量子化部103にて変換量子化され、可変長符号化された後に多重化され、出力される。
【選択図】 図1
Description
Rec.H.264及びISO/IEC 14496−10として審議されている(以下、「H.264」という)。
図1は、本発明の第1の実施形態に係わる動画像符号化装置の構成を示すブロック図である。
図1によると、動画像信号は符号化部110に入力される。この符号化部110の減算器101は入力信号を直交変換する直交変換部(例えば離散コサイン変換器)102及び直交変換係数(DCT係数)を量子化する量子化部103を介して可変長符号化部112に接続される。量子化部103の出力端は局部復号器を構成する逆量子化部104、逆直交変換部105、加算器106を介してフレームメモリ107に接続される。フレームメモリ107の出力端は後述する予測信号生成部108の入力端に接続される。予測信号生成部108の出力端は後述するMB(マクロブロック)予測モード選択部109に接続される。このMB予測モード選択部109の出力端は減算器101及び加算器106に夫々接続される。
次に図2を用いて、具体的な符号化方式の説明を行う。
図2は、予測信号生成部108の内部構造を示すものである。
図3は、図2のフレーム内符号化部202、もしくはフレーム間符号化部203の内部構造を示すものである。
図1のMB予測モード選択部109及び図3の画素ブロック予測モード決定部315のモード判定では、ラグランジュの未定乗数法に基づくレート−歪み最適化を用いる。
符号化モード候補の選択に関する第1の実施形態について説明する。
符号化モード候補の第1選択方法について説明する。
符号化モード候補の第2選択方法について説明する。
第1の実施形態の変更例について説明する。
図15は、本実施形態で符号化する場合の処理のフローチャートを表している。
一方、発生符号量と符号化歪みを実測し、これらを基にグランジュコストを計算し、モード判定を行う方式は図5に示す形態であり、このときの処理過程は図16のフローチャートに示される。
図5は図2のフレーム内符号化部202(及びフレーム間符号化部203)を示す。
図16に示すフローチャートによると、先ず、最小コストを更新する変数min_costを初期化する(ステップ01)。予測(ステップ02)が実施されると、予測モードループにおいて、直交変換(ステップ05)、量子化(ステップ06)、逆量子化(ステップ07)、逆直交変換(ステップ09)、可変長符号化(ステップ10)及び符号化歪み計算(ステップ12)が順次行われる。この場合、予測モードが増えるとそれに伴って演算量が増大する反面、正確な符号量R11と符号化歪みD13が計算でき、符号化効率の高い高画質な符号化画像が得られる。
次に、予測制御部201でフレーム内符号化が選択されたときの第2の実施形態について説明する。
符号化制御部111によりフレーム内符号化が選択されたときの処理をH.264のフレーム内符号化の4×4予測を例として図9を用いて説明する。
図17に示すフローチャートによると、先ず、最小コストを更新する変数min_costを初期化する(ステップ01)。符号化モード情報を符号化するための符号量が小さいモードとして、隣接ブロックで選択された予測モードから算出されたモードの予測を行う(ステップ02)。生成された予測画素信号と入力画像03を用いて簡易符号化コストを計算する(ステップ04)。cost<Th1の判定を行い(ステップ05)、YES、つまり閾値Th1より簡易符号化コストが小さければ、前記予測モードを最適予測モードと決定し(ステップ16)、階層化処理は終了する。
本変更例では、図17のフローチャートにおいて、隣接ブロックの予測モードから計測される予測モードを実行する一連のステップ、すなわちステップ02、ステップ04、ステップ05は省略することも可能である。
次に16×16予測のモード選択における第3の実施形態について説明する。
図10は16×16予測が選択されたときの第1モード判定部1006を示している。第2モード判定部は図3と変わらないため、第1モード判定部1006のみ図示している。
次にフレーム内符号化とフレーム間符号化が混在する符号化方式の場合についての第4の実施形態について述べる。
第5の実施形態では、フレーム内符号化とフレーム間符号化が混在する符号化方式の場合について、マクロブロック毎にまず、簡易的なモード判定を行い、フレーム内符号化かフレーム間符号化のどちらを行うかを判断する方式について説明する。
図13はこの実施形態の概略を示しており、図1の予測信号生成部108の内部構造が示されている。また図18にフローチャートを示す。
図18によると、先ず、現在のスライスタイプ判定を行う(ステップ01)。この判定がフレーム内符号化スライス(I−スライス)の場合、フレーム間符号化は行われないため、フレーム内符号化を行う(ステップ10)。判定がフレーム間符号化スライス(P−スライス、B−スライス)の場合、最小簡易符号化コストを更新する変数min_costを初期化する(ステップ02)。入力画像03とメモリ07から与えられる参照画素信号から、簡易フレーム内符号化を行う(ステップ04)。計測された最小簡易符号化コストを用いてmin_costを更新する(ステップ05)。さらに簡易フレーム間符号化を行う(ステップ06)。ここで計測されたフレーム間符号化の最小簡易符号化コストがmin_costより小さいかどうかを判定する(ステップ08)。この判定がYESの場合、フレーム間符号化を行い(ステップ09)、レート−歪み最適化を用いて最適符号化モードを決定する(ステップ11)。判定がNOの場合、フレーム内符号化が実行され(ステップ10)、最適符号化モードが決定される(ステップ11)。
102 直交変換部
103 量子化部
104 逆量子化部
105 逆直交変換部
106 加算器
107 フレームメモリ
108 予測信号生成部
109 MB予測モード選択部
110 符号化部
111 符号化制御部
112 可変長符号化部
113 多重化部
114 出力バッファ
Claims (11)
- 入力画像信号を複数の画素ブロックに分割し、これら分割した画素ブロック毎に複数の符号化モードから1つのモードを選択し、この選択された符号化モードによって前記画素ブロックを符号化する動画像符号化方法において、
前記画素ブロックに対応する入力画像信号に基づいて前記複数の符号化モードの各々の方式にしたがって予測信号と符号化モード情報とを生成する予測信号生成ステップと、
前記符号化モード毎に生成された予測信号と前記画素ブロックに対応する入力画像信号とから予測残差信号を生成する予測残差信号生成ステップと、
前記符号化モード毎の予測残差信号を符号化するためのコストである符号化コストを前記予測残差信号とその符号化モード情報から推定した簡易符号化コストを計算する簡易符号化コスト計算ステップと、
前記画素ブロックの予測残差信号を符号化する際の量子化ステップ幅に応じて所定の候補数を決定し、また、前記計算した複数の簡易符号化コストを小さい順に並べ、さらに、この並べた中から最も小さい簡易符号化コストを有する符号化モードを前記決定された所定の候補数だけ符号化モード候補として選択する第1符号化モード選択ステップと、
前記選択された複数の符号化モード候補に対して符号化処理を行い、符号化歪みと符号量を計測して詳細符号化コストを計算する詳細符号化コスト計測ステップと、
前記複数の符号化モード候補の中から、前記計測された詳細符号化コストに基づいて、いずれか1つの符号化モードを選択する第2符号化モード選択ステップと、
を具備する
ことを特徴とする動画像符号化方法。 - 前記第1符号化モード選択ステップにおいて、
前記簡易符号化コストと前記詳細符号化コストとが合致したか否かの候補正解率と、前記量子化ステップ幅との相関関係に基づいて所定の候補数を決定する
ことを特徴とする請求項1記載の動画像符号化方法。 - 前記第1符号化モード選択ステップにおいて、
前記候補数を前記量子化ステップ幅に対応して増加または減少させて、所定の候補数を決定する
ことを特徴とする請求項1記載の動画像符号化方法。 - 前記第1符号化モード選択ステップにおいて、
前記量子化ステップに対応して単調に変動する閾値関数を用いて、前記閾値関数で計算された値より前記簡易符号化コストが小さい候補を選択して、所定の候補数を決定する
ことを特徴とする請求項1記載の動画像符号化方法。 - 入力画像信号を複数の画素ブロックに分割し、フレーム内の複数の方向から1つの方
向を決定し、前記フレーム内で前記決定された方向の、既に符号化された画素から予測
信号を生成し、前記予測信号と前記画素ブロック信号との残差信号を符号化する、フ
レーム内画像符号化方法において、
前記複数の方向を間引いた複数の方向から、それぞれ予測信号を生成し、前記複数の予測信号から、前記間引いた複数の方向からの予測におけるそれぞれの第1の符号化コストを計算し、前記第1の符号化コストが最小となる第1の予測方向を決定する第1階層探索ステップと、
前記第1の予測方向の近傍角となる複数の予測方向について、それぞれ予測信号の生成及び第2の符号化コストの計算を行う第2階層探索ステップと、
前記第1の符号化コスト及び第2の符号化コストの中から、符号化コストが最小となる予測方向を決定し、前記決定された予測方向を用いて、前記画素ブロック信号の符号化を行う符号化モード判定ステップと、
を具備する
ことを特徴とする、フレーム内画像符号化方法。 - 前記第1階層探索ステップを行う前に、前記参照画素と隣接する複数の画素ブロックの予測方向から前記画素ブロックの予測方向を推定し、前記推定された予測方向の予測信号を生成、及び符号化コストを計算し、その符号化コストが閾値より小さいときは、その予測方向を前記画素ブロックの予測モードと決定し、閾値より大きいときは前記第2階層探索ステップまでを行い、符号化候補として用いる
ことを特徴とする請求項5記載の動画像符号化方法。 - 入力画像信号を複数の画素ブロックに分割し、画素ブロック毎に複数の符号化モードから1つのモードを選択して符号化を行う場合に、ブロックサイズの異なるフレーム内符号化を行う動画像符号化方法において、
大画素ブロックに含まれる各小画素ブロックの各符号化モードの予測を行う小画素ブロック符号化モード判定ステップと、
前記決定された各小画素ブロックの各予測モードの重み付き頻度を計算する重み付き計算ステップと、
前記計算された小画素ブロックの各予測モードの重み付き頻度と、前期小画素ブロックの各予測モードの分散値を用いて、前記大画素ブロックの少なくとも1つ以上の予測方向を推定し、前記推定された少なくとも1つ以上の予測方向を優位な予測モード候補として選択し、前記選択された1つ、または、複数の予測モード候補の中で予測精度の高い予測モード候補を選択する大画素ブロック予測モード選択ステップと、
を具備する
ことを特徴とする動画像符号化方法。 - 入力画像信号を複数の画素ブロックに分割し、画素ブロック毎に複数の符号化モードから1つのモードを選択して符号化を行う場合に、フレーム内予測符号化とフレーム間予測符号化が混在する動画像符号化方法において、
フレーム内符号化ピクチャ、または、フレーム内符号化スライスにおいては、高精度なフレーム内予測符号化モード判定を行い、
フレーム間符号化ピクチャ、または、フレーム間符号化スライスにおいては、簡易的なフレーム内予測符号化モード判定ステップを行う
ことを特徴とする動画像符号化方法。 - 入力画像信号を複数の画素ブロックに分割し、画素ブロック毎に複数の符号化モードから1つのモードを選択して符号化を行う場合に、フレーム内符号化とフレーム間符号化が混在する動画像符号化方法において、
マクロブロック毎に、簡易的なモード判定によりフレーム内符号化であるか、あるいはフレーム間符号化を仮決定する簡易モード判定処理ステップと、
仮決定されたフレーム内符号化、フレーム間符号化のいずれかについて、より高精度なモード判定を行う高精度モード判定ステップと、
を具備する
ことを特徴とする動画像符号化方法。 - 入力画像信号を複数の画素ブロックに分割し、これら分割した画素ブロック毎に複数の符号化モードから1つのモードを選択し、この選択された符号化モードによって前記画素ブロックを符号化する動画像符号化装置において、
前記画素ブロックに対応する入力画像信号に基づいて前記複数の符号化モードの各々の方式にしたがって予測信号と符号化モード情報とを生成する予測信号生成手段と、
前記符号化モード毎に生成された予測信号と前記画素ブロックに対応する入力画像信号とから予測残差信号を生成する予測残差信号生成手段と、
前記符号化モード毎の予測残差信号を符号化するためのコストである符号化コストを前記予測残差信号とその符号化モード情報から推定した簡易符号化コストを計算する簡易符号化コスト計算手段と、
前記画素ブロックの予測残差信号を符号化する際の量子化ステップ幅に応じて所定の候補数を決定し、また、前記計算した複数の簡易符号化コストを小さい順に並べ、さらに、この並べた中から最も小さい簡易符号化コストを有する符号化モードを前記決定された所定の候補数だけ符号化モード候補として選択する第1符号化モード選択手段と、
前記選択された複数の符号化モード候補に対して符号化処理を行い、符号化歪みと符号量を計測して詳細符号化コストを計算する詳細符号化コスト計測手段と、
前記複数の符号化モード候補の中から、前記計測された詳細符号化コストに基づいて、いずれか1つの符号化モードを選択する第2符号化モード選択手段と、
を具備する
ことを特徴とする動画像符号化装置。 - 入力画像信号を複数の画素ブロックに分割し、これら分割した画素ブロック毎に複数の符号化モードから1つのモードを選択し、この選択された符号化モードによって前記画素ブロックを符号化する動画像符号化方法をコンピュータによって実現するためのプログラムにおいて、
前記画素ブロックに対応する入力画像信号に基づいて前記複数の符号化モードの各々の方式にしたがって予測信号と符号化モード情報とを生成する予測信号生成機能と、
前記符号化モード毎に生成された予測信号と前記画素ブロックに対応する入力画像信号とから予測残差信号を生成する予測残差信号生成機能と、
前記符号化モード毎の予測残差信号を符号化するためのコストである符号化コストを前記予測残差信号とその符号化モード情報から推定した簡易符号化コストを計算する簡易符号化コスト計算機能と、
前記画素ブロックの予測残差信号を符号化する際の量子化ステップ幅に応じて所定の候補数を決定し、また、前記計算した複数の簡易符号化コストを小さい順に並べ、さらに、この並べた中から最も小さい簡易符号化コストを有する符号化モードを前記決定された所定の候補数だけ符号化モード候補として選択する第1符号化モード選択機能と、
前記選択された複数の符号化モード候補に対して符号化処理を行い、符号化歪みと符号量を計測して詳細符号化コストを計算する詳細符号化コスト計測機能と、
前記複数の符号化モード候補の中から、前記計測された詳細符号化コストに基づいて、いずれか1つの符号化モードを選択する第2符号化モード選択機能と、
を実現する
ことを特徴とする動画像符号化方法のプログラム。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2003427893A JP4127818B2 (ja) | 2003-12-24 | 2003-12-24 | 動画像符号化方法及びその装置 |
US11/016,803 US7751476B2 (en) | 2003-12-24 | 2004-12-21 | Moving picture coding method and moving picture coding apparatus |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2003427893A JP4127818B2 (ja) | 2003-12-24 | 2003-12-24 | 動画像符号化方法及びその装置 |
Related Child Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2007137617A Division JP2007267414A (ja) | 2007-05-24 | 2007-05-24 | フレーム内画像符号化方法及びその装置 |
JP2007137623A Division JP2007251996A (ja) | 2007-05-24 | 2007-05-24 | 動画像符号化方法及びその装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2005191706A true JP2005191706A (ja) | 2005-07-14 |
JP4127818B2 JP4127818B2 (ja) | 2008-07-30 |
Family
ID=34746837
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2003427893A Expired - Fee Related JP4127818B2 (ja) | 2003-12-24 | 2003-12-24 | 動画像符号化方法及びその装置 |
Country Status (2)
Country | Link |
---|---|
US (1) | US7751476B2 (ja) |
JP (1) | JP4127818B2 (ja) |
Cited By (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006014342A (ja) * | 2004-06-27 | 2006-01-12 | Apple Computer Inc | ビデオ・データを符号化するための符号化タイプおよび予測モードの選択 |
JP2007036725A (ja) * | 2005-07-27 | 2007-02-08 | Toshiba Corp | 符号化装置 |
WO2007116617A1 (ja) * | 2006-04-10 | 2007-10-18 | Megachips Corporation | 画像データの生成方法 |
JP2010508684A (ja) * | 2006-10-31 | 2010-03-18 | トムソン ライセンシング | イントラ符号化選択によるビデオ符号化 |
JP2011160469A (ja) * | 2005-11-14 | 2011-08-18 | Samsung Electronics Co Ltd | 単一符号化モードを利用した映像符号化/復号化方法及び装置 |
WO2012096181A1 (en) | 2011-01-13 | 2012-07-19 | Canon Kabushiki Kaisha | Image coding apparatus, image coding method, and program, and image decoding apparatus, image decoding method, and program |
US8254459B2 (en) | 2002-07-14 | 2012-08-28 | Apple Inc. | Adaptive motion estimation |
US8326063B2 (en) | 2006-04-28 | 2012-12-04 | Ntt Docomo, Inc. | Method, apparatus and program for efficient generation of prediction signals |
WO2012176368A1 (ja) * | 2011-06-22 | 2012-12-27 | 日本電気株式会社 | 動画像符号化方法及び動画像符号化装置並びにコンピュータ可読媒体 |
JP2014082616A (ja) * | 2012-10-16 | 2014-05-08 | Nippon Telegr & Teleph Corp <Ntt> | 画像符号化装置、画像復号装置、画像符号化方法、画像復号方法、画像符号化プログラム及び画像復号プログラム |
JP2014090427A (ja) * | 2004-11-04 | 2014-05-15 | Thomson Licensing | ビデオ符号器におけるbフレームの高速モード決定のための方法および装置 |
JP2014096679A (ja) * | 2012-11-08 | 2014-05-22 | Nippon Hoso Kyokai <Nhk> | 画像符号化装置及び画像符号化プログラム |
US8761254B2 (en) | 2007-06-04 | 2014-06-24 | Ntt Docomo, Inc. | Image prediction encoding device, image prediction decoding device, image prediction encoding method, image prediction decoding method, image prediction encoding program, and image prediction decoding program |
WO2016125604A1 (ja) * | 2015-02-06 | 2016-08-11 | ソニー株式会社 | 画像符号化装置および方法 |
JP2018078545A (ja) * | 2016-10-07 | 2018-05-17 | 財團法人工業技術研究院Industrial Technology Research Institute | 画面内予測の予測モードを選択する方法、ビデオ符号化デバイス及び画像処理装置 |
Families Citing this family (38)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7027982B2 (en) * | 2001-12-14 | 2006-04-11 | Microsoft Corporation | Quality and rate control strategy for digital audio |
US7386048B2 (en) | 2002-05-28 | 2008-06-10 | Sharp Laboratories Of America, Inc. | Methods and systems for image intra-prediction mode organization |
US7383180B2 (en) * | 2003-07-18 | 2008-06-03 | Microsoft Corporation | Constant bitrate media encoding techniques |
US7343291B2 (en) * | 2003-07-18 | 2008-03-11 | Microsoft Corporation | Multi-pass variable bitrate media encoding |
JP4127818B2 (ja) * | 2003-12-24 | 2008-07-30 | 株式会社東芝 | 動画像符号化方法及びその装置 |
US20050286777A1 (en) * | 2004-06-27 | 2005-12-29 | Roger Kumar | Encoding and decoding images |
JP2006080925A (ja) * | 2004-09-09 | 2006-03-23 | Toshiba Corp | 動画符号化装置、動画符号化方法および動画符号化プログラム |
KR100708118B1 (ko) * | 2005-01-07 | 2007-04-16 | 삼성전자주식회사 | 복수개의 변형 곱셈 테이블을 이용한 동영상 부호화 및복호화 장치와 그 방법, 및 이를 구현하기 위한프로그램이 기록된 기록 매체 |
KR100703748B1 (ko) * | 2005-01-25 | 2007-04-05 | 삼성전자주식회사 | 다 계층 기반의 비디오 프레임을 효율적으로 예측하는 방법및 그 방법을 이용한 비디오 코딩 방법 및 장치 |
CN101164336B (zh) * | 2005-04-22 | 2010-06-23 | 松下电器产业株式会社 | 影像信息记录装置以及影像信息记录方法 |
WO2007139266A1 (en) * | 2006-06-01 | 2007-12-06 | Electronics And Telecommunications Research Institute | Method and apparatus for video coding on pixel-wise prediction |
JP4752631B2 (ja) * | 2006-06-08 | 2011-08-17 | 株式会社日立製作所 | 画像符号化装置、及び画像符号化方法 |
US8135063B2 (en) * | 2006-09-08 | 2012-03-13 | Mediatek Inc. | Rate control method with frame-layer bit allocation and video encoder |
KR100845303B1 (ko) * | 2006-09-29 | 2008-07-10 | 한국전자통신연구원 | 고속 부호화를 위한 되먹임 구조를 가진 동영상 압축부호화 장치 및 최적 모드 결정 방법 |
US8804829B2 (en) * | 2006-12-20 | 2014-08-12 | Microsoft Corporation | Offline motion description for video generation |
US8428133B2 (en) | 2007-06-15 | 2013-04-23 | Qualcomm Incorporated | Adaptive coding of video block prediction mode |
US8571104B2 (en) * | 2007-06-15 | 2013-10-29 | Qualcomm, Incorporated | Adaptive coefficient scanning in video coding |
CN101637026B (zh) * | 2007-09-12 | 2012-03-28 | 索尼株式会社 | 图像处理装置和方法 |
KR20100065240A (ko) * | 2007-09-12 | 2010-06-16 | 소니 주식회사 | 화상 처리 장치 및 화상 처리 방법 |
US8325800B2 (en) | 2008-05-07 | 2012-12-04 | Microsoft Corporation | Encoding streaming media as a high bit rate layer, a low bit rate layer, and one or more intermediate bit rate layers |
US8379851B2 (en) | 2008-05-12 | 2013-02-19 | Microsoft Corporation | Optimized client side rate control and indexed file layout for streaming media |
US8761253B2 (en) * | 2008-05-28 | 2014-06-24 | Nvidia Corporation | Intra prediction mode search scheme |
US7925774B2 (en) | 2008-05-30 | 2011-04-12 | Microsoft Corporation | Media streaming using an index file |
ES2431337T3 (es) * | 2008-06-04 | 2013-11-26 | Sony Corporation | Nueva estructura de trama para sistemas de múltiples portadoras |
EP2144432A1 (en) * | 2008-07-08 | 2010-01-13 | Panasonic Corporation | Adaptive color format conversion and deconversion |
US8265140B2 (en) | 2008-09-30 | 2012-09-11 | Microsoft Corporation | Fine-grained client-side control of scalable media delivery |
JP5158003B2 (ja) * | 2009-04-14 | 2013-03-06 | ソニー株式会社 | 画像符号化装置と画像符号化方法およびコンピュータ・プログラム |
KR101733735B1 (ko) * | 2009-12-07 | 2017-05-08 | 에스케이 텔레콤주식회사 | 쌍예측을 이용한 멀티 플레인 영상의 부호화/복호화 장치와 방법 및 이를 위한 기록매체 |
GB2494468B (en) * | 2011-09-12 | 2014-01-15 | Canon Kk | Method and device for encoding or decoding information representing prediction modes |
US9781449B2 (en) * | 2011-10-06 | 2017-10-03 | Synopsys, Inc. | Rate distortion optimization in image and video encoding |
US9338463B2 (en) | 2011-10-06 | 2016-05-10 | Synopsys, Inc. | Visual quality measure for real-time video processing |
US20150003524A1 (en) * | 2012-01-13 | 2015-01-01 | Sharp Kabushiki Kaisha | Image decoding device, image encoding device, and data structure of encoded data |
TW201419862A (zh) * | 2012-11-13 | 2014-05-16 | Hon Hai Prec Ind Co Ltd | 影像切割系統及方法 |
CN105578180B (zh) * | 2014-10-16 | 2019-01-15 | 联想(北京)有限公司 | 一种编码方法及装置 |
EP3032830A1 (en) * | 2014-12-08 | 2016-06-15 | Thomson Licensing | Differential coding of intra modes |
US10306229B2 (en) | 2015-01-26 | 2019-05-28 | Qualcomm Incorporated | Enhanced multiple transforms for prediction residual |
US10623774B2 (en) | 2016-03-22 | 2020-04-14 | Qualcomm Incorporated | Constrained block-level optimization and signaling for video coding tools |
US11323748B2 (en) | 2018-12-19 | 2022-05-03 | Qualcomm Incorporated | Tree-based transform unit (TU) partition for video coding |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5963673A (en) * | 1995-12-20 | 1999-10-05 | Sanyo Electric Co., Ltd. | Method and apparatus for adaptively selecting a coding mode for video encoding |
JPH09322176A (ja) | 1995-12-20 | 1997-12-12 | Sanyo Electric Co Ltd | 符号化モード選択方法、動画像符号化装置、符号化方法、記録方法、及び伝送方法 |
JPH10290464A (ja) | 1997-04-14 | 1998-10-27 | Kokusai Denshin Denwa Co Ltd <Kdd> | 符号化モード判定装置 |
JP3938679B2 (ja) | 2001-11-15 | 2007-06-27 | Kddi株式会社 | 最適符号化モード選択型動画像符号化方式 |
RU2322770C2 (ru) * | 2002-04-23 | 2008-04-20 | Нокиа Корпорейшн | Способ и устройство для указания параметров квантователя в системе видеокодирования |
US7236524B2 (en) * | 2002-05-28 | 2007-06-26 | Sharp Laboratories Of America, Inc. | Methods and systems for image intra-prediction mode communication |
JP3977716B2 (ja) * | 2002-09-20 | 2007-09-19 | 株式会社東芝 | 動画像符号化/復号化方法及び装置 |
JP2005151391A (ja) * | 2003-11-19 | 2005-06-09 | Toshiba Corp | 動画像符号化方法、動画像符号化装置およびプログラム |
JP4127818B2 (ja) * | 2003-12-24 | 2008-07-30 | 株式会社東芝 | 動画像符号化方法及びその装置 |
-
2003
- 2003-12-24 JP JP2003427893A patent/JP4127818B2/ja not_active Expired - Fee Related
-
2004
- 2004-12-21 US US11/016,803 patent/US7751476B2/en not_active Expired - Fee Related
Cited By (36)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8254459B2 (en) | 2002-07-14 | 2012-08-28 | Apple Inc. | Adaptive motion estimation |
JP2006014342A (ja) * | 2004-06-27 | 2006-01-12 | Apple Computer Inc | ビデオ・データを符号化するための符号化タイプおよび予測モードの選択 |
JP2014161094A (ja) * | 2004-06-27 | 2014-09-04 | Apple Inc | ビデオ・データを符号化するための符号化タイプおよび予測モードの選択 |
JP2011239443A (ja) * | 2004-06-27 | 2011-11-24 | Apple Inc | ビデオ・データを符号化するための符号化タイプおよび予測モードの選択 |
US8472516B2 (en) | 2004-06-27 | 2013-06-25 | Apple Inc. | Selecting encoding types and predictive modes for encoding video data |
JP2014090427A (ja) * | 2004-11-04 | 2014-05-15 | Thomson Licensing | ビデオ符号器におけるbフレームの高速モード決定のための方法および装置 |
JP2007036725A (ja) * | 2005-07-27 | 2007-02-08 | Toshiba Corp | 符号化装置 |
JP4713972B2 (ja) * | 2005-07-27 | 2011-06-29 | 株式会社東芝 | 符号化装置 |
US9877007B2 (en) | 2005-11-14 | 2018-01-23 | Samsung Electronics Co., Ltd. | Method, medium, and apparatus encoding and/or decoding an image using the same coding mode across components |
JP2011160469A (ja) * | 2005-11-14 | 2011-08-18 | Samsung Electronics Co Ltd | 単一符号化モードを利用した映像符号化/復号化方法及び装置 |
US10455210B2 (en) | 2005-11-14 | 2019-10-22 | Samsung Electronics Co., Ltd. | Method, medium, and apparatus encoding and/or decoding an image using the same coding mode across components |
US9674541B2 (en) | 2005-11-14 | 2017-06-06 | Samsung Electronics Co., Ltd. | Method, medium, and apparatus encoding and/or decoding an image using the same coding mode across components |
US9565445B2 (en) | 2005-11-14 | 2017-02-07 | Samsung Electronics Co., Ltd. | Method, medium, and apparatus encoding and/or decoding an image using the same coding mode across components |
US9497474B2 (en) | 2005-11-14 | 2016-11-15 | Samsung Electronics Co., Ltd. | Method, medium, and apparatus encoding and/or decoding an image using the same coding mode across components |
US8934541B2 (en) | 2005-11-14 | 2015-01-13 | Samsung Electronics Co., Ltd. | Method, medium, and apparatus encoding and/or decoding an image using the same coding mode across components |
WO2007116617A1 (ja) * | 2006-04-10 | 2007-10-18 | Megachips Corporation | 画像データの生成方法 |
US8326063B2 (en) | 2006-04-28 | 2012-12-04 | Ntt Docomo, Inc. | Method, apparatus and program for efficient generation of prediction signals |
US8634670B2 (en) | 2006-04-28 | 2014-01-21 | Ntt Docomo, Inc. | Method, apparatus and program for efficient generation of prediction signals |
JP2010508684A (ja) * | 2006-10-31 | 2010-03-18 | トムソン ライセンシング | イントラ符号化選択によるビデオ符号化 |
US8325804B2 (en) | 2006-10-31 | 2012-12-04 | Thomson Licensing | Video encoding with intra encoding selection |
US8761254B2 (en) | 2007-06-04 | 2014-06-24 | Ntt Docomo, Inc. | Image prediction encoding device, image prediction decoding device, image prediction encoding method, image prediction decoding method, image prediction encoding program, and image prediction decoding program |
EP3905679A1 (en) | 2011-01-13 | 2021-11-03 | Canon Kabushiki Kaisha | Image coding apparatus, image coding method, and program, and image decoding apparatus, image decoding method, and program |
EP3905680A1 (en) | 2011-01-13 | 2021-11-03 | Canon Kabushiki Kaisha | Image coding apparatus, image coding method, and program, and image decoding apparatus, image decoding method, and program |
EP3668095A1 (en) | 2011-01-13 | 2020-06-17 | Canon Kabushiki Kaisha | Image coding apparatus, image coding method, and program, and image decoding apparatus, image decoding method, and program |
EP3668094A1 (en) | 2011-01-13 | 2020-06-17 | Canon Kabushiki Kaisha | Image coding apparatus, image coding method, and program, and image decoding apparatus, image decoding method, and program |
US9445094B2 (en) | 2011-01-13 | 2016-09-13 | Canon Kabushiki Kaisha | Image coding apparatus, image coding method, and program, and image decoding apparatus, image decoding method, and program, relating to use of an image quality control parameter |
WO2012096181A1 (en) | 2011-01-13 | 2012-07-19 | Canon Kabushiki Kaisha | Image coding apparatus, image coding method, and program, and image decoding apparatus, image decoding method, and program |
US9264715B2 (en) | 2011-06-22 | 2016-02-16 | Nec Corporation | Moving image encoding method, moving image encoding apparatus, and computer-readable medium |
WO2012176368A1 (ja) * | 2011-06-22 | 2012-12-27 | 日本電気株式会社 | 動画像符号化方法及び動画像符号化装置並びにコンピュータ可読媒体 |
JPWO2012176368A1 (ja) * | 2011-06-22 | 2015-02-23 | 日本電気株式会社 | 動画像符号化方法及び動画像符号化装置並びにプログラム |
JP2014082616A (ja) * | 2012-10-16 | 2014-05-08 | Nippon Telegr & Teleph Corp <Ntt> | 画像符号化装置、画像復号装置、画像符号化方法、画像復号方法、画像符号化プログラム及び画像復号プログラム |
JP2014096679A (ja) * | 2012-11-08 | 2014-05-22 | Nippon Hoso Kyokai <Nhk> | 画像符号化装置及び画像符号化プログラム |
US10321128B2 (en) | 2015-02-06 | 2019-06-11 | Sony Corporation | Image encoding apparatus and image encoding method |
WO2016125604A1 (ja) * | 2015-02-06 | 2016-08-11 | ソニー株式会社 | 画像符号化装置および方法 |
US10979702B2 (en) | 2015-02-06 | 2021-04-13 | Sony Corporation | Image encoding apparatus and image encoding method |
JP2018078545A (ja) * | 2016-10-07 | 2018-05-17 | 財團法人工業技術研究院Industrial Technology Research Institute | 画面内予測の予測モードを選択する方法、ビデオ符号化デバイス及び画像処理装置 |
Also Published As
Publication number | Publication date |
---|---|
JP4127818B2 (ja) | 2008-07-30 |
US20050157784A1 (en) | 2005-07-21 |
US7751476B2 (en) | 2010-07-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4127818B2 (ja) | 動画像符号化方法及びその装置 | |
JP2007267414A (ja) | フレーム内画像符号化方法及びその装置 | |
US7764738B2 (en) | Adaptive motion estimation and mode decision apparatus and method for H.264 video codec | |
US8665960B2 (en) | Real-time video coding/decoding | |
US7856053B2 (en) | Image coding control method and device | |
KR101177031B1 (ko) | 인터-코딩에 사용된 기준 화상의 수를 최소화하기 위한 방법 및 장치 | |
RU2720975C2 (ru) | Способ кодирования и декодирования изображений, устройство кодирования и декодирования и соответствующие компьютерные программы | |
KR100853931B1 (ko) | 동화상 부호화 장치 및 기록 매체 | |
US20060050786A1 (en) | Moving picture coding apparatus and computer program product | |
US8189667B2 (en) | Moving picture encoding apparatus | |
KR20130020697A (ko) | 동화상 부호화 장치 및 동화상 복호 장치 | |
US20050276331A1 (en) | Method and apparatus for estimating motion | |
US9094687B2 (en) | Video encoder and video decoder | |
JP2008227670A (ja) | 画像符号化装置 | |
JP2006511113A (ja) | 選択されたマクロブロックにおける動き推定のスキップを伴うビデオエンコーディング | |
KR101623064B1 (ko) | 영상 부호화 장치, 영상 부호화 방법 및 영상 부호화 프로그램 | |
KR20070037530A (ko) | 변환 영역에서의 dc 계수 예측 방법 및 장치 | |
JP5178616B2 (ja) | シーンチェンジ検出装置および映像記録装置 | |
JP4130617B2 (ja) | 動画像符号化方法および動画像符号化装置 | |
JP2001128179A (ja) | 動画像符号化装置および方法 | |
JP2007251996A (ja) | 動画像符号化方法及びその装置 | |
JP4964689B2 (ja) | 画像符号化方法,画像復号方法,画像符号化装置,画像復号装置,画像符号化プログラム,画像復号プログラムおよびコンピュータ読み取り可能な記録媒体 | |
JP2008283599A (ja) | 符号化パラメータ選択方法,符号化パラメータ選択装置,符号化パラメータ選択プログラムおよびその記録媒体 | |
JP5358485B2 (ja) | 画像符号化装置 | |
JP4281667B2 (ja) | 画像符号化装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20070206 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20070403 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20070525 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20080122 |
|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20080212 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20080228 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20080325 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20080325 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20080414 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20080509 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20080512 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110523 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110523 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110523 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120523 Year of fee payment: 4 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120523 Year of fee payment: 4 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130523 Year of fee payment: 5 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130523 Year of fee payment: 5 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140523 Year of fee payment: 6 |
|
LAPS | Cancellation because of no payment of annual fees |