JP2003324742A - 画像符号化装置及び画像復号化装置 - Google Patents

Abstract

(57)【要約】 【課題】 高圧縮率でもブロック歪やモスキート・ノイ
ズなどの画質劣化の少ない動画像符号化装置及び動画像
復号化装置を提供する。 【解決手段】 入力画像に対して第一の所定の符号化規
格に従ってフレーム内符号化を行い、符号化情報を順次
出力するとともに、符号化を行った画像の再構成画像を
出力する第一の画像符号化手段と、入力画像に対して第
二の所定の符号化規格に従ってフレーム間予測符号化を
行い、符号化情報を順次出力するとともに、符号化を行
った画像の再構成画像を出力する第二の画像符号化手段
と、前記第一の画像符号化手段の出力する再構成画像と
前記第二の画像符号化手段の出力する再構成画像とのう
ち少なくとも一つを用いてフレーム間予測符号化を行う
画像符号化手段と、第一の画像符号化手段の出力する符
号化情報と第二の画像符号化手段の出力する符号化情報
とを合成して合成符号化情報を出力する符号化情報合成
手段とを備える。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、ディジタル動画像
データを符号化し、圧縮符号化情報を出力する画像符号
化装置、及び、圧縮符号化情報を復号化し、ディジタル
動画像データを出力する画像復号化装置に関する。

【０００２】

【従来の技術】従来、放送・通信・蓄積メディア等にお
いて、ディジタル画像データを取り扱うための画像圧縮
符号化方式が数多く考案されている。これらの画像圧縮
符号化方式では特に、DCT(Discrete Cosine Transform)
等の直交変換、直交変換係数の量子化、及び可変長符号
を組み合わせた変換符号化方式が広く用いられている。

【０００３】変換符号化方式では、自然画像に含まれる
空間周波数スペクトルが、比較的高周波成分が少なく、
低周波側に集中していることに着目し、直交変換によっ
て得られる変換係数のうち、高周波の係数よりも低周波
の係数に多くのビットを割当てている。例えば、主に静
止画像を対象とした規格として、JPEG(Joint Photograp
hic Coding Experts Group)規格があるが、初期の規格
であるJPEG(ITU-T T.81|ISO/IEC10918-1)は、DCT、DCT
係数の量子化、及び可変長符号を組み合わせた画像圧縮
符号化方式である。JPEGは、主観的に良好な画質を保ち
ながら、画像データ情報量を十分の一程度まで圧縮する
ことが可能である。

【０００４】また、動画像では、隣接するフレーム間の
相関が大きい為、フレームそのものよりも、隣接するフ
レーム間の差分を符号化する方が、効率が良い。このよ
うな符号化方法は、予測符号化と呼ばれている。

【０００５】しかし、画面の動きの大きい部分では、単
純なフレーム間の相関は小さくなり、予測符号化の効率
が下がる。そこで、画面の動きを検知して、動きの分を
補償した上で、予測符号化を行うことにより、さらに符
号化効率を上げることができる。このような符号化方法
は、動き補償予測符号化と呼ばれている。

【０００６】動き補償予測符号化は、カメラをパンした
場合等、画面全体が動く場合に特に有効である。さら
に、双方向予測符号化と呼ばれる符号化方法も知られて
いる。双方向予測符号化では、過去と未来の近傍のフレ
ームから予測符号化を行うことで、さらに符号化効率を
上げることができる。

【０００７】例えば、動画像を対象とした代表的な規格
としてMPEG(Moving Picture Experts Group)規格が挙げ
られるが、MPEG規格は、JPEGと同様に、DCT・DCT係数の
量子化・可変長符号を用いる変換符号化方式を基本とし
た上で、さらに双方向の動き補償予測方式を併用してい
る。

【０００８】MPEG規格には、初期のＭＰＥＧ１（IS0/IE
C11172-2）、ディジタル放送やDVD(Digital Versatile
Disk)等に用いられているＭＰＥＧ２(ITU-T H.262|ISO/
IEC13818-2)、主に通信等で用いられるＭＰＥＧ４(ISO/
IEC14496-2)等の種類がある。

【０００９】DCT等を用いる変換符号化方式では、効率
的に画像を圧縮することができるが、圧縮率を比較的高
くした場合には、ブロック歪やモスキート・ノイズと呼
ばれる画質劣化が発生する。

【００１０】DCT等の直交変換における演算量は、画素
数に対して指数関数的に増大する為、直交変換を用いる
画像圧縮符号化方式では、一般に、画面全体をブロック
と呼ばれる８×８画素程度の小領域に分割して、ブロッ
ク単位で変換符号化を行う。この為、圧縮率を高めて、
変換係数の量子化誤差が大きくなると、各ブロックの直
流成分が不連続になり、ブロックの境界でギャップが発
生する。このブロック間のギャップが、ブロック歪とし
て視認される。

【００１１】また、直交変換の基底関数が周期的である
為、入力画像のブロック内に局所的なエッジが存在する
と、変換係数の高周波成分が多くなる。その量子化誤差
によって、再生画像のエッジ近傍に高周波の偽信号が発
生する。この偽信号がモスキート・ノイズとして視認さ
れる。これらの画質劣化は、主観的画質を著しく損なう
ものであり、改善が望まれてきた。

【００１２】こうした要求から、最近では、DWT(Discre
te Wavelet Transform)等の帯域分割フィルタ、量子
化、エントロピー符号を用いたサブバンド階層符号化方
式が普及しつつある。サブバンド階層符号化方式は、画
像を、帯域分割フィルタによって複数のサブバンドに分
割し、さらに低域サブバンドに対して階層的にサブバン
ド分割を繰り返し、それぞれの階層毎に量子化及びエン
トロピー符号化を行う方式である。本方式では、分割す
るサブバンドの階層を増やすことにより、符号化効率を
上げることが可能である。

【００１３】サブバンド階層符号化方式では、演算量が
画素数に概ね比例しており、変換符号化方式のように画
面をブロックに分割する必要性は少ない。画面の領域毎
にビット割り当てを細かく制御する場合には、画面を分
割して符号化を行うが、画面全体に対して符号化を行う
こともできる。この場合、原理的にブロック歪の発生を
抑えることができる。また、DWTの基底関数は、非周期
的であり、局在的な信号に対して、モスキート・ノイズ
が発生しにくい。

【００１４】JPEGの次世代の規格であるJPEG2000(ITU-T
T.800|ISO/IEC15444-1)は、DWTを採用したサブバンド
階層符号化方式である。JPEG2000では、ブロックの代わ
りに、タイルと呼ばれる画面領域毎に処理を行う。タイ
ルは任意の大きさの矩形領域であり、画面全体を多数の
小さいタイルに分割して、タイル毎に細かくビット制御
することが可能である。また、タイルを細かく分割せず
に、画面全体とすることも可能である。JPEG2000は、低
圧縮率から高圧縮率に至るまで、概ねJPEGより優れた画
質を得られている。

【００１５】JPEGやJPEG2000は、主に静止画を対象とし
た規格であるが、動画に適用することもできる。動画は
連続する静止画の集合とみなせるので、各画像を順番に
符号化してやればよい。JPEGを用いて動画像を符号化す
る方式は、正式に規格化がなされていないが、Motion-J
PEGと呼ばれ、ディジタル・カメラ等に、広く普及して
いる。また、JPEG2000を用いて動画像を符号化する方式
は、通称Motion-JPEG2000と呼ばれ、JPEG2000part3(ITU
-T T.800|ISO/IEC15444-3)として現在、規格化作業が行
われている。

【００１６】Motion-JPEG2000を用いた画像符号化装
置、及び画像復号化装置として、例えば特開２００１−
２５８０３１に記載された画像符号化装置、及び画像復
号化装置がある。

【００１７】

【発明が解決しようとする課題】ところで、動画像の圧
縮符号化において、ブロック歪やモスキート・ノイズの
発生を抑えながら、圧縮率を高める為には、サブバンド
階層符号化方式と、動き補償予測符号化方式を組み合わ
せることが有効であると考えられる。しかし、JPEG規格
やMPEG規格等、現時点で普及している画像圧縮符号化規
格においては、サブバンド階層符号化方式と、動き補償
予測符号化方式の双方を採用する規格は存在しない。

【００１８】また、独自にサブバンド階層符号化方式
と、動き補償予測符号化方式を組み合わせた符号化方式
を考案しても、対応する画像符号化装置及び画像復号化
装置が普及していない為に、用途が限定されるという問
題がある。

【００１９】本発明の目的は、既存の画像圧縮符号化規
格を活用しながらも、高い圧縮率と高画質を両立する画
像符号化装置、及び画像復号化装置を提供することを目
的とする。

【００２０】

【課題を解決するための手段】上記課題を解決する為、
本発明の画像符号化装置は、入力画像に対して第一の所
定の符号化規格に従ってフレーム内符号化を行い、符号
化情報を順次出力するとともに、符号化を行った画像の
再構成画像を出力する第一の画像符号化手段と、前記入
力画像に対して前記第一の所定の符号化規格とは異なる
第二の所定の符号化規格に従ってフレーム間予測符号化
を行い、符号化情報を順次出力するとともに、符号化を
行った画像の再構成画像を出力する第二の画像符号化手
段であって、前記第一の画像符号化手段の出力する再構
成画像と前記第二の画像符号化手段の出力する再構成画
像とのうち少なくとも一つを用いてフレーム間予測符号
化を行う画像符号化手段と、前記第一の画像符号化手段
の出力する符号化情報と前記第二の画像符号化手段の出
力する符号化情報とを合成して合成符号化情報を出力す
る符号化情報合成手段と、を備えることを特徴とする。
また、本発明の画像復号化装置は、入力される前記合成
符号化情報を前記第一の所定の符号化規格の符号化情報
と前記第二の所定の符号化規格の符号化情報に分離する
合成符号化情報分離手段と、前記合成符号化情報分離手
段の出力する前記第一の所定の符号化規格の符号化情報
の復号化を行い、復号画像を順次出力する第一の画像復
号化手段と、前記合成符号化情報分離手段の出力する前
記第二の所定の符号化規格の符号化情報の復号化を行
い、復号画像を順次出力する第二の画像復号化手段と、
前記第一の画像復号化手段の出力する復号画像と前記第
二の画像復号化手段の出力する復号画像を格納するフレ
ームバッファを備え、前記第二の画像復号化手段は、前
記第一の画像復号化手段の出力する復号画像と前記第二
の画像復号化手段の出力する復号画像のうち少なくとも
１つを用いてフレーム間予測復号を行うことを特徴と
し、入力される前記合成符号化情報は、前記合成の仕方
に関する情報が埋め込まれた合成符号化情報であって、
前記合成符号化情報分離手段は、前記合成符号化情報に
埋め込まれた合成の仕方に関する情報にしたがって前記
第一の所定の符号化規格の符号化情報と前記第二の所定
の符号化規格の符号化情報に分離することを特徴とす
る。

【００２１】

【発明の実施の形態】以下、本発明を図面を用いて説明
する。なお、以下の説明ではフレーム内符号化を行う第
一の画像符号化方式としてJPEG2000を用いるが、これに
限るものではなく、ウェーブレット変換を用いた符号化
方式などブロック歪やモスキート・ノイズの発生しない
画像符号化方式であればよい。

【００２２】また、フレーム間符号化を行う第二の画像
符号化方式としてMPEG2を用いるが、これに限るもので
はなく、H.261、MPEG1、MPEG4をはじめとする、その他
のフレーム間符号化を行う画像符号化方式であればよ
い。

【００２３】図１は、本発明を適用した画像符号化装置
の第一の実施形態の構成を示す図である。本実施形態の
画像符号化装置は、JPEG2000符号化手段１１、MPEG2符
号化手段１２、フレームバッファ１３・１４、及び符号
化情報合成手段１５を有する。

【００２４】フレームバッファ１３は、画像符号装置に
入力された画像データをいったん格納し、格納された画
像データを双方向予測を行う為の順序でJPEG2000符号化
手段１１及びMPEG2符号化手段１２に出力する。

【００２５】JPEG2000符号化手段１１は、フレームバッ
ファ１３から出力された画像データに対して、フレーム
毎にJPEG2000規格にしたがって符号化を行い、生成され
たJPEG2000符号化情報を符号化情報合成手段１５に出力
するとともに、符号化を行った画像の再構成画像をフレ
ームバッファ１４に出力する。

【００２６】MPEG2符号化手段１２は、フレームバッフ
ァ１３から出力される画像データに対して、MPEG2規格
にしたがってフレーム内符号化、または、フレームバッ
ファ１４からの再構成画像データを用いてフレーム間予
測符号化を行い、生成されたMPEG2符号化情報を符号化
情報合成手段１５に出力するとともに、符号化を行った
画像データの再構成画像データをフレームバッファ１４
に出力する。

【００２７】フレームバッファ１４は、JPEG2000符号化
手段１１及びMPEG2符号化手段１２から出力される再構
成画像データを格納し、MPEG2符号化手段１２において
フレーム間予測符号化を行うために参照される参照画像
データをMPEG2符号化手段１２に出力する。

【００２８】符号化情報合成手段１５は、JPEG2000符号
化手段１１から出力されるJPEG2000符号化情報とMPEG2
符号化手段１２から出力されるMPEG2符号化情報を合成
し、合成符号化情報を出力する。

【００２９】図２は、JPEG2000符号化手段１１の構成を
示す図である。JPEG2000符号化手段１１は、DWT手段２
１、量子化手段２２、エントロピー符号化手段２３、逆
量子化手段２４、及びIDWT手段２５を有する。JPEG2000
符号化手段１１の構成は公知であるので、以下簡単に説
明する。

【００３０】フレームバッファ１３から出力された画像
データは、DWT手段２１に入力される。DWT手段２１にお
いて、画像データは所定の大きさのタイルに分割され、
タイル毎に離散ウェーブレット変換が行われ、DWT係数
が量子化手段２２に出力される。

【００３１】量子化手段２２では、DWT係数が所定の量
子化テーブルにしたがって量子化され、量子化係数がエ
ントロピー符号化手段２３及び逆量子化手段２４に出力
される。エントロピー符号化手段２３では、量子化係数
が所定の符号化テーブルによって符号化され、生成され
た符号化情報を順次出力する。

【００３２】逆量子化手段２４では、量子化係数に対し
て量子化手段２２と逆の操作が行われ、逆量子化された
DWT係数がIDWT手段２５に出力される。IDWT手段２５で
は、逆量子化されたDWT係数に対して逆離散ウェーブレ
ット変換が行われ、再構成画像が生成され、フレームバ
ッファ１４に出力される。

【００３３】図３は、MPEG2符号化手段１２の構成を示
す図である。MPEG2符号化手段１２は、DCT手段３１、量
子化手段３２、可変長符号化手段３３、逆量子化手段３
４、IDCT手段３５、動き補償予測手段３６、セレクタ手
段３７、セレクタ手段３８、減算手段３９、及び加算手
段３１０を有する。MPEG2符号化手段１２の構成も公知
であるので、以下、簡単に説明する。

【００３４】MPEG2符号化手段１２は、フレーム内符号
化を行う場合と、フレーム間符号化を行う場合で動作が
異なる。まず、フレーム内符号化を行う場合について説
明する。フレームバッファ１３から出力された画像デー
タは、セレクタ手段３７に入力される。セレクタ手段３
７は、フレームバッファ１３からの画像データを選択
し、DCT手段３１に出力する。

【００３５】DCT手段３１において、画像データは８×
８画素の大きさのブロックに分割され、ブロック毎に離
散コサイン変換が行われ、DCT係数が量子化手段３２に
出力される。量子化手段３２では、DCT係数が所定の量
子化テーブルにしたがって量子化され、量子化係数が可
変長符号化手段３３及び逆量子化手段３４に出力され
る。

【００３６】可変長符号化手段３３では、量子化係数が
所定の符号化テーブルによって符号化され、生成された
符号化情報が順次出力される。逆量子化手段３４では、
量子化係数に対して量子化手段３２と逆の操作が行わ
れ、逆量子化されたDCT係数がIDCT手段３５に出力され
る。IDCT手段３５では、逆量子化されたDCT係数に対し
て逆離散コサイン変換が行われ、再構成画像データが生
成され、セレクタ手段３８に出力される。セレクタ手段
３８はIDCT手段３５からの再構成画像データを選択し、
フレームバッファ１４に出力する。

【００３７】フレーム間符号化を行う場合について説明
する。フレーム間符号化が行われる場合、DCT手段３
１、量子化手段３２、可変長符号化手段３３、逆量子化
手段３４、及びIDCT手段３５はフレーム内符号化の場合
と同様の動作をするので、説明を省略し、動き補償予測
手段３６、セレクタ手段３７、セレクタ手段３８、減算
手段３９、及び加算手段３１０の動作について説明す
る。

【００３８】フレームバッファ１３から出力された画像
データは、動き補償予測手段３６に入力される。動き補
償予測手段３６では、入力された画像データとフレーム
バッファ１４から出力される参照画像データとを比較
し、最も近い部分の参照画像データを参照ブロックとし
て抜き出して、原産手段３９に出力する。

【００３９】減算手段３９は、画像データのブロックか
ら参照ブロックを減算し、予測誤差を生成してセレクタ
手段３７に出力する。セレクタ手段３７は、予測誤差を
選択してDCT手段３１に出力する。DCT手段３１、量子化
手段３２、可変長符号化手段３３、逆量子化手段３４、
IDCT手段３５は予測誤差に対して、フレーム内符号化の
場合と同様の動作をする。

【００４０】IDCT手段３５は、再構成予測誤差を生成
し、加算手段３１０に出力する。IDCT手段３５の出力す
る再構成予測誤差は、加算手段３１０によって動き補償
予測手段３６の出力する参照ブロックと加算され、再構
成画像データが生成され、セレクタ手段３８に出力され
る。セレクタ手段３８は再構成画像データを選択し、フ
レームバッファ１４に出力する。

【００４１】フレームバッファ１３・１４の動作につい
て説明する。図６に示すように、入力画像のフレーム
０、フレーム１、フレーム２、フレーム３、フレーム４
・・・に対して、IBPBP・・・の順で符号化すると仮定
する。

【００４２】ここで、Iはフレーム内符号化、Pは片方向
のフレーム間予測符号化、Bは双方向のフレーム間予測
符号化される画像データを表す。フレーム１はBピクチ
ャであるので、フレーム０及びフレーム２を用いて双方
向予測符号化が行われる。したがって、フレーム１の前
にフレーム２を符号化する必要がある。同様にフレーム
３の符号化の前に、フレーム４が符号化される必要があ
る。

【００４３】したがって、フレームバッファ１３は、フ
レーム０、フレーム２、フレーム１、フレーム４、フレ
ーム３・・・の順に画像データを出力する。また、フレ
ーム２はPピクチャであるので、フレーム２を符号化す
る際は、フレームバッファ１４は、フレーム０の再構成
画像を参照画像データとして出力する。

【００４４】フレーム１はBピクチャであるので、フレ
ームバッファ１４は、フレーム１を符号化する際、フレ
ーム０及びフレーム２の再構成画像データを参照画像デ
ータとして出力する。以下同様に、フレームバッファ１
４は、参照画像データとしてフレーム２、フレーム２及
びフレーム４・・・を出力する。なお、上記の説明は一
例であって、その他の順序・組み合わせで符号化を行う
場合でも、なんら問題はない。

【００４５】符号化情報合成手段１５の動作について説
明する。図７は、入力された画像データに対して得られ
たMPEG2符号化情報の一例である。SHCはシーケンス層の
符号、GSCはGOP(Group of picture)層の符号、PSC0、PS
C1、PSC2、PSC3、PSC4はフレーム０、フレーム１、フレ
ーム２、フレーム３、フレーム４・・・に対応するピク
チャ層の符号、M0、M1、M2、M3、M4・・・はフレーム
０、フレーム１、フレーム２、フレーム３、フレーム４
・・・のピクチャ層以下の符号である。

【００４６】ここでは、図６と同様に符号化する場合を
想定して、符号化情報はM0、M2、M1、M4、M3・・・の順
で表れているが、実際には、この限りではない。ところ
で、フレーム間予測符号化においては、フレーム間予測
による誤差の伝播が起きると、画質が大きく損なわれ
る。そこで、フレーム間予測による誤差の伝播を抑える
為に、一般に、参照ピクチャとなるフレームの画質を優
先し、Iピクチャ、Pピクチャ、Bピクチャの順に、多く
のビット数が割り当てられる。

【００４７】このことから、本実施例の符号化情報合成
手段１５は、最も重要なIピクチャについてJPEG2000符
号化情報を用い、PピクチャとBピクチャについてMPEG符
号化情報を用いる。したがって、Iピクチャであるフレ
ーム０をJPEG2000符号化情報とする為、図８に示すよう
に、PSC0とM0の間に、ユーザ・データ・スタート・コー
ドとユーザ・データであるUD0としてフレーム０に対す
るJPEG2000符号化情報であるJ0を挿入する。これによ
り、MPEG2規格とJPEG2000規格の合成符号化情報が得ら
れる。

【００４８】この符号化情報は、一般のMPEG2画像復号
化装置で再生することが可能である。その場合、JPEG20
00符号化情報であるJ0は使われず、純粋なMPEG2符号化
情報として取り扱われる。

【００４９】この符号化情報は、フレーム０に対するMP
EG2符号化情報とJPEG2000符号化情報の両方を含んでい
るので、情報量が若干かさむ。そこで、図９に示すよう
に、M0を取り除いて、代わりにユーザ・データ・スター
ト・コードとユーザ・データであるUD0としてフレーム
０に対するJPEG2000符号化情報であるJ0のみを挿入する
こともできる。この場合得られる合成符号化情報は、情
報量の無駄は無いが、一般のMPEG2画像復号化装置で
は、再生することはできない。

【００５０】なお、以上に示した符号化情報の合成は、
任意のフレームに対して適用できる。本実施形態では、
IピクチャのみJPEG2000符号化情報を用いたが、Iピクチ
ャ及びPピクチャについてJPEG2000符号化情報を用いて
もよい。

【００５１】ところで、ブロック歪やモスキート・ノイ
ズは、前述したように、DCT係数の量子化誤差に起因す
るので、量子化スケールが大きくなる程、発生しやす
い。したがって、画像符号化装置における量子化スケー
ルを監視することによって、ブロック歪やモスキート・
ノイズの発生を予測することができる。ブロック歪やモ
スキート・ノイズの発生しやすい条件の場合に、JPEG20
00符号化情報を用い、その他の場合にMPEG2符号化情報
を用いることで、さらに効率的な符号化が可能である。

【００５２】図４は、本発明を適用した画像符号化装置
の第二の実施形態の構成を示す図である。本実施形態
は、符号化情報合成制御手段４６が追加されている点
で、第一の実施形態と異なる。図１と重複する部分につ
いては図１と同じ番号を付し、説明を省略する。

【００５３】MPEG2符号化手段１２は、量子化スケール
情報を符号化情報合成制御手段４６に出力する。符号化
情報合成制御手段４６は、MPEG2符号化手段１２から出
力される量子化スケール情報を用いて、フレーム毎にJP
EG2000符号化情報とMPEG2符号化情報のどちらを使用す
るかを指定する符号化情報合成制御信号を生成し、符号
化情報合成手段１５に出力する。

【００５４】符号化情報合成制御信号の生成の仕方は、
例えば、符号化対象フレームにおける量子化スケールの
平均値を算出し、所定の閾値と比較すればよい。量子化
スケールの平均値が閾値より大きい場合には、JPEG2000
符号化情報を選択するものとし、量子化スケールの平均
値が閾値より小さい場合には、MPEG2符号化情報を選択
するものとする。また、量子化スケールの平均値の代わ
りに、量子化スケールの最大値を用いてもよい。

【００５５】符号化情報合成手段１５は、符号化情報合
成制御手段４６から出力される符号化情報合成制御信号
にしたがって、本発明の画像符号化装置の第一の実施形
態と同様に、JPEG2000符号化情報とMPEG2符号化情報を
合成し、出力する。

【００５６】本実施形態の画像符号化装置によれば、ブ
ロック歪やモスキート・ノイズの発生しやすい条件の場
合にのみ、JPEG2000符号化情報を使用するので、本発明
の画像符号化装置の第一の実施形態に比べ、効率的に画
質劣化を抑えることができる。

【００５７】図５は、本発明を適用した画像復号化装置
の実施形態の構成を示す図である。本実施形態の画像復
号化装置は、JPEG2000復号化手段５１、MPEG2復号化手
段５２、符号化情報分離手段５３、及びフレームバッフ
ァ５４を有する。

【００５８】符号化情報は、符号化情報分離手段５３に
入力される。符号化情報分離手段５３は、入力された符
号化情報をJPEG2000符号化情報とMPEG2符号化情報に分
離し、JPEG2000符号化情報をJPEG2000復号化手段５１
に、MPEG2符号化情報をMPEG2復号化手段５２に出力す
る。

【００５９】JPEG2000復号化手段５１は、符号化情報分
離手段５３から出力されたJPEG2000符号化情報に対し
て、JPEG2000規格にしたがって復号化を行い、生成した
復号画像データをフレームバッファ５４に出力する。MP
EG2符号化手段５２は、符号化情報分離手段５３から出
力されたMPEG2符号化情報に対して、MPEG2規格にしたが
ってフレーム内復号化、または、フレームバッファ５４
からの参照画像データを用いてフレーム間予測復号化を
行い、生成した復号画像データをフレームバッファ５４
に出力する。

【００６０】フレームバッファ５４は、JPEG2000復号化
手段５１及びMPEG2復号化手段５２から出力された復号
画像データを格納し、必要に応じて参照画像データをMP
EG2復号化手段５２に出力するとともに、所定の再生順
序で復号画像データを出力する。このような構成によ
り、本実施例の画像復号化装置は、本発明による画像符
号化装置の生成する合成符号化情報を復号することがで
きる。

【００６１】

【発明の効果】本発明によれば、高圧縮率でありなが
ら、ブロック歪やモスキート・ノイズなど画質劣化の発
生しない動画像符号化装置及び復号化装置が実現でき
る。

【図面の簡単な説明】

【図１】本発明の画像符号化装置の第一の実施例のブロ
ック図である。

【図２】JPEG2000符号化手段のブロック図である。

【図３】MPEG2符号化手段のブロック図である。

【図４】本発明の画像符号化装置の第二の実施例のブロ
ック図である。

【図５】本発明の画像復号化装置の実施例のブロック図
である。

【図６】フレームバッファの動作を説明する為の図であ
る。

【図７】MPEG2符号化情報を説明する為の図である。

【図８】合成符号化情報の第一例を説明する為の図であ
る。

【図９】合成符号化情報の第二例を説明する為の図であ
る。

【符号の説明】

１１…JPEG2000符号化手段、１２…MPEG2符号化手段、
１３…フレームバッファ、１５…符号化情報合成手段。

───────────────────────────────────────────────────── フロントページの続き Ｆターム(参考） 5C059 KK03 KK04 MA00 MA04 MA05 MA14 MA23 MA24 MC11 MC38 ME01 PP05 PP06 PP07 RC12 UA02 UA05 UA33 5J064 AA01 BA09 BA16 BB01 BB03 BC01 BC08 BC16 BC25

Claims (11)

【特許請求の範囲】
1. 【請求項１】入力される画像データを、第一の符号化規
   格に従ってフレーム内符号化し、符号化された情報を順
   次出力するとともに、符号化された前記画像データの再
   構成画像データを出力する第一の画像符号化手段と、 前記画像データに対して第二の符号化規格に従ってフレ
   ーム間予測符号化し、符号化された情報を順次出力する
   第二の画像符号化手段と、 前記第一の画像符号化手段の出力する符号化情報と前記
   第二の画像符号化手段の出力する符号化情報とを合成し
   て合成符号化情報を出力する符号化情報合成手段とを有
   し、 前記第二の画像符号化手段は、 前記第一の画像符号化手段の出力する前記再構成画像を
   用いてフレーム間予測符号化を行うことを特徴とする画
   像符号化装置。
2. 【請求項２】入力される画像データを、第一の符号化規
   格に従ってフレーム内符号化し、符号化された情報を順
   次出力するとともに、符号化された前記画像データの再
   構成画像データを出力する第一の画像符号化手段と、 前記画像データに対して第二の符号化規格に従ってフレ
   ーム間予測符号化し、符号化された情報を順次出力し、
   符号化を行った画像データの再構成画像データを出力す
   るする第二の画像符号化手段と、 前記第一の画像符号化手段の出力する符号化情報と前記
   第二の画像符号化手段の出力する符号化情報とを合成し
   て合成符号化情報を出力する符号化情報合成手段とを有
   し、 前記第二の画像符号化手段は、 前記第一の画像符号化手段が出力する再構成画像データ
   と前記第二の画像符号化手段が出力する再構成画像デー
   タとのうち少なくとも一つを用いてフレーム間予測符号
   化を行うことを特徴とする画像符号化装置。
3. 【請求項３】前記符号化情報合成手段は、 前記第一の画像符号化手段の出力する符号化情報と前記
   第二の画像符号化手段の出力する符号化情報とをフレー
   ム単位で合成することを特徴とする請求項１及び請求項
   ２のうちいずれか一つに記載の画像符号化装置。
4. 【請求項４】符号化情報合成制御手段を有し、 前記符号化情報合成手段は、 前記符号化情報合成制御手段の制御に基づいて、前記第
   一の画像符号化手段の出力する符号化情報と前記第二の
   画像符号化手段の出力する符号化情報との合成の仕方を
   変更し、合成の変更に関する情報を前記合成符号化情報
   に埋め込むことを特徴とする請求項１、２及び３のうち
   いずれか１つに記載された画像符号化装置。
5. 【請求項５】前記符号化情報合成制御手段は、前記第二
   の画像符号化手段の出力する量子化スケール情報を用い
   て前記符号化情報合成手段を制御することを特徴とする
   請求項４に記載の画像符号化装置。
6. 【請求項６】前記第一の符号化規格がウェーブレット変
   換を用いた規格であることを特徴とする請求項１乃至５
   に記載の画像符号化装置。
7. 【請求項７】前記第一の符号化規格がJPEG2000であるこ
   とを特徴とする請求項１乃至６に記載の画像符号化装
   置。
8. 【請求項８】合成符号化情報を第一の符号化規格の符号
   化情報と第二の符号化規格の符号化情報に分離する合成
   符号化情報分離手段と、 前記合成符号化情報分離手段から出力される前記第一の
   符号化規格の符号化情報を復号化し、復号された画像デ
   ータを順次出力する第一の画像復号化手段と、 前記合成符号化情報分離手段から出力される前記第二の
   符号化規格の符号化情報を復号し、復号された画像デー
   タを順次出力する第二の画像復号化手段と、 前記第一の画像復号化手段から出力される復号画像デー
   タと前記第二の画像復号化手段の出力する復号画像デー
   タを格納するフレームバッファを備え、 前記第二の画像復号化手段は、前記第一の画像復号化手
   段の出力する復号画像データと前記第二の画像復号化手
   段の出力する復号画像データのうち少なくとも１つを用
   いてフレーム間予測復号を行うことを特徴とする画像復
   号化装置。
9. 【請求項９】前記合成符号化情報には、合成の仕方に関
   する情報が埋め込まれており、 前記合成符号化情報分離手段は、前記合成符号化情報に
   埋め込まれた合成の仕方に関する情報にしたがって前記
   第一の符号化規格の符号化情報と前記第二の符号化規格
   の符号化情報に分離することを特徴とする請求項８に記
   載の画像復号化装置。
10. 【請求項１０】前記第一の符号化規格がウェーブレット
    変換を用いた規格であることを特徴とする請求項８乃至
    ９に記載の画像復号化装置。
11. 【請求項１１】前記第一の符号化規格がJPEG2000である
    ことを特徴とする請求項８乃至９に記載の画像復号化装
    置。