JP3510433B2 - 画像処理装置 - Google Patents
画像処理装置Info
- Publication number
- JP3510433B2 JP3510433B2 JP31525796A JP31525796A JP3510433B2 JP 3510433 B2 JP3510433 B2 JP 3510433B2 JP 31525796 A JP31525796 A JP 31525796A JP 31525796 A JP31525796 A JP 31525796A JP 3510433 B2 JP3510433 B2 JP 3510433B2
- Authority
- JP
- Japan
- Prior art keywords
- information
- nth
- image
- decoding
- image information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Landscapes
- Compression Or Coding Systems Of Tv Signals (AREA)
Description
【０００１】
【発明の属する技術分野】本発明は、ＭＰＥＧ２（Movi
ng Picture Experts Group 2)等に準拠する大規模な動
画像情報を高速に動き補償して復号する画像処理装置に
関する。
ng Picture Experts Group 2)等に準拠する大規模な動
画像情報を高速に動き補償して復号する画像処理装置に
関する。
【０００２】
【従来の技術】ＭＰＥＧ２に代表される動画像情報のデ
ィジタル圧縮処理技術の要素技術として、圧縮された動
画像情報を復号する際に、画像の動き（移動）をベクト
ル量で記述した所謂「動きベクトル」に従って、或る時
間位置の画面（フレーム）の画像情報から別の時間位置
の画面の画像情報を構築する技術があり、所謂「動き補
償」と呼ばれている。
ィジタル圧縮処理技術の要素技術として、圧縮された動
画像情報を復号する際に、画像の動き（移動）をベクト
ル量で記述した所謂「動きベクトル」に従って、或る時
間位置の画面（フレーム）の画像情報から別の時間位置
の画面の画像情報を構築する技術があり、所謂「動き補
償」と呼ばれている。
【０００３】このように、復号する際に動き補償を行う
ことを前提として圧縮された動画像情報を復号するため
の映像デコーダとして、図６にその構成を示すような画
像処理装置が知られている。即ち、同図に示す画像処理
装置は、ＭＰＥＧ２に準拠して圧縮された画像情報を動
き補償して復号するもので、圧縮された画像情報を復号
するためのＭＰＥＧ２デコーダ３と、該デコーダ３によ
り復号された画像情報を一時的に記憶しておくためのダ
イナミックＲＡＭ(Dynamic Random Access Memory)等か
らなるメモリ５とから構成される。なお、ＭＰＥＧ２デ
コーダ３は、例えばスタンダードセル等の手法を用いて
ＬＳＩ(Large Scale Integrated circuit) チップ等と
して具現化される。
ことを前提として圧縮された動画像情報を復号するため
の映像デコーダとして、図６にその構成を示すような画
像処理装置が知られている。即ち、同図に示す画像処理
装置は、ＭＰＥＧ２に準拠して圧縮された画像情報を動
き補償して復号するもので、圧縮された画像情報を復号
するためのＭＰＥＧ２デコーダ３と、該デコーダ３によ
り復号された画像情報を一時的に記憶しておくためのダ
イナミックＲＡＭ(Dynamic Random Access Memory)等か
らなるメモリ５とから構成される。なお、ＭＰＥＧ２デ
コーダ３は、例えばスタンダードセル等の手法を用いて
ＬＳＩ(Large Scale Integrated circuit) チップ等と
して具現化される。
【０００４】このように構成された従来の画像処理装置
では、ＭＰＥＧ２デコーダ３により復号した或る時間位
置の画面の画像情報を一旦メモリ５に記憶しておく。そ
して、別の時間位置の画面における或る局所領域の画像
はメモリ５に記録された或る時間位置の画面における或
る局所領域の画像が移動してきたものと考え、この局所
領域の画像の移動方向及び移動量を表す動きベクトルに
従って、メモリ５に記憶された画像情報を読み出して動
き補償を行い、別の時間位置の画面の画像情報を構築す
る。この動き補償は、上述の「或る局所領域」を単位と
して画面全体にわたって順次行われるが、以下の説明に
おいては、動き補償を行う上での画面上の処理単位であ
る「局所領域」を「画像ブロック」と記すこととする。
では、ＭＰＥＧ２デコーダ３により復号した或る時間位
置の画面の画像情報を一旦メモリ５に記憶しておく。そ
して、別の時間位置の画面における或る局所領域の画像
はメモリ５に記録された或る時間位置の画面における或
る局所領域の画像が移動してきたものと考え、この局所
領域の画像の移動方向及び移動量を表す動きベクトルに
従って、メモリ５に記憶された画像情報を読み出して動
き補償を行い、別の時間位置の画面の画像情報を構築す
る。この動き補償は、上述の「或る局所領域」を単位と
して画面全体にわたって順次行われるが、以下の説明に
おいては、動き補償を行う上での画面上の処理単位であ
る「局所領域」を「画像ブロック」と記すこととする。
【０００５】
【発明が解決しようとする課題】ところで、一般に、Ｍ
ＰＥＧ２等が対象とする動画像情報のデータ量は、ＪＰ
ＥＧ等が対象とする静止画像情報に比較して規模が大き
なものとなる。この上、画面のサイズが大きくなり、し
かも１秒間の画像のコマ数が増えると、そのデータ量は
著しく増加し、図６に示す従来の装置を構成するＭＰＥ
Ｇ２デコーダ３やメモリ５が処理すべきデータ量が著し
く増えることとなる。
ＰＥＧ２等が対象とする動画像情報のデータ量は、ＪＰ
ＥＧ等が対象とする静止画像情報に比較して規模が大き
なものとなる。この上、画面のサイズが大きくなり、し
かも１秒間の画像のコマ数が増えると、そのデータ量は
著しく増加し、図６に示す従来の装置を構成するＭＰＥ
Ｇ２デコーダ３やメモリ５が処理すべきデータ量が著し
く増えることとなる。
【０００６】しかし、標準的なＭＰＥＧデコーダＬＳＩ
は、縦４８０画素、横７２０画素、１秒間あたり３０フ
レーム程度の解像度を有するＮＴＳＣ(National Televi
sionSystem Committee)方式などの画像情報を対象とし
た復号処理能力しかなく、このため、１個の標準的なＭ
ＰＥＧデコーダＬＳＩのみでは、縦１０８０画素、横１
９２０画素、１秒間あたり３０フレーム程度の解像度を
有するＨＤＴＶ(HighDefinition TeleVision)方式など
の大規模な画像情報を復号することはできない。
は、縦４８０画素、横７２０画素、１秒間あたり３０フ
レーム程度の解像度を有するＮＴＳＣ(National Televi
sionSystem Committee)方式などの画像情報を対象とし
た復号処理能力しかなく、このため、１個の標準的なＭ
ＰＥＧデコーダＬＳＩのみでは、縦１０８０画素、横１
９２０画素、１秒間あたり３０フレーム程度の解像度を
有するＨＤＴＶ(HighDefinition TeleVision)方式など
の大規模な画像情報を復号することはできない。
【０００７】そこで、ＨＤＴＶクラスの大規模な画像情
報を、標準的なＭＰＥＧデコーダＬＳＩを用いて復号し
ようとする場合、図７にその構成を例示すように、復号
処理を並列化した装置が考えられる。即ち、同図に示す
画像処理装置は、画面を画像領域Ａ及びＢの２つの領域
に分割し、これら画像領域Ａ及びＢに対応する画像情報
を処理する２系統のＭＰＥＧ２デコーダ３ａ，３ｂ及び
メモリ５ａ，５ｂを備え、これら画像領域Ａ及びＢに対
応する画像情報を並列処理して復号した後、それぞれの
ＭＰＥＧ２デコーダ３ａ，３ｂにより復号して得られた
画像情報を結合器６ａにより結合して、１画面分の復号
された画像情報を構成するものである。
報を、標準的なＭＰＥＧデコーダＬＳＩを用いて復号し
ようとする場合、図７にその構成を例示すように、復号
処理を並列化した装置が考えられる。即ち、同図に示す
画像処理装置は、画面を画像領域Ａ及びＢの２つの領域
に分割し、これら画像領域Ａ及びＢに対応する画像情報
を処理する２系統のＭＰＥＧ２デコーダ３ａ，３ｂ及び
メモリ５ａ，５ｂを備え、これら画像領域Ａ及びＢに対
応する画像情報を並列処理して復号した後、それぞれの
ＭＰＥＧ２デコーダ３ａ，３ｂにより復号して得られた
画像情報を結合器６ａにより結合して、１画面分の復号
された画像情報を構成するものである。
【０００８】ところが、ＭＰＥＧ２等では、前述のよう
に、動き補償を行う場合、動きベクトルに従ってメモリ
をアクセスして、必要とする画像ブロックの画像情報を
読み出すものとなっており、図７に示す装置の構成で
は、画像領域Ａの画像情報の処理を受け持つデコーダ３
ａは画像領域Ｂの画像情報を記憶するメモリ５ｂをアク
セスすることができない。従って、例えば画像領域Ａに
属する或る画像ブロックについて動き補償するに際して
動きベクトルが画像領域Ｂの画像ブロックの画像情報を
参照するものである場合には、この動きベクトルが指定
する画像情報を参照して動き補償を行うことができず、
画像領域ＡとＢとの境界付近での画像の動きが不自然な
ものとなる。
に、動き補償を行う場合、動きベクトルに従ってメモリ
をアクセスして、必要とする画像ブロックの画像情報を
読み出すものとなっており、図７に示す装置の構成で
は、画像領域Ａの画像情報の処理を受け持つデコーダ３
ａは画像領域Ｂの画像情報を記憶するメモリ５ｂをアク
セスすることができない。従って、例えば画像領域Ａに
属する或る画像ブロックについて動き補償するに際して
動きベクトルが画像領域Ｂの画像ブロックの画像情報を
参照するものである場合には、この動きベクトルが指定
する画像情報を参照して動き補償を行うことができず、
画像領域ＡとＢとの境界付近での画像の動きが不自然な
ものとなる。
【０００９】本発明は、このような問題に鑑みてなされ
たものであり、動画像情報を画面の複数の画像領域に対
応づけて分割して並列的に復号するに際し、画像領域の
境界付近で動き補償が不能となることがなく、画面全体
にわたって適切な動き補償を行うことができる画像処理
装置を提供することを課題とする。
たものであり、動画像情報を画面の複数の画像領域に対
応づけて分割して並列的に復号するに際し、画像領域の
境界付近で動き補償が不能となることがなく、画面全体
にわたって適切な動き補償を行うことができる画像処理
装置を提供することを課題とする。
【００１０】
【００１１】
【課題を解決するための手段】本発明は、前記課題を解
決達成するため、以下の構成を有する。即ち、第１の発
明に係る画像処理装置は、画面を垂直方向に隣接する第
１番目から第Ｎ番目（Ｎは２以上の整数）までのＮ個の
画像領域に分割し、該画像領域を単位として前記画面の
画像情報を並列的に動き補償して復号する画像処理装置
であって、前記第１番目から第Ｎ番目の画像領域に対応
づけて、前記画像情報を第１から第Ｎの画像情報に分割
する情報分割手段と、前記第１から第Ｎの画像情報を第
１から第Ｎの復号情報にそれぞれ復号する第１から第Ｎ
の復号手段と、前記第１番目から第Ｎ番目の画像領域の
それぞれを前記垂直方向に隣接するように、かつ垂直方
向のサイズが少なくとも前記動き補償での動きベクトル
の垂直方向の取り得る最大値よりも大きく設定されたと
ころの２分割して得られる第１番目から第２Ｎ番目まで
の小画像領域に対応づけて、前記第１から第Ｎの復号情
報を第１から第２Ｎの参照情報に分割してそれぞれ記憶
する第１から第２Ｎの記憶手段と、前記第１から第Ｎの
復号情報を前記第１番目から第Ｎ番目の画像領域に対応
づけて結合する情報結合手段とを備え、前記第１から第
Ｎの復号手段は、前記第１から第Ｎの画像情報を前記第
１から第Ｎの復号情報にそれぞれ復号するに際し、該第
１から第Ｎの復号手段の第Ｍ（Ｍは１以上Ｎ以下の整
数）の復号手段が第２Ｍ−２から第２Ｍ＋１の記憶手段
の何れかをアクセスして第２Ｍ−２から第２Ｍ＋１の参
照情報を参照することにより、前記第１から第Ｎの相対
位置が一致する画像情報について並列的に動き補償を行
うことを特徴とする画像処理装置の構成を有する。
決達成するため、以下の構成を有する。即ち、第１の発
明に係る画像処理装置は、画面を垂直方向に隣接する第
１番目から第Ｎ番目（Ｎは２以上の整数）までのＮ個の
画像領域に分割し、該画像領域を単位として前記画面の
画像情報を並列的に動き補償して復号する画像処理装置
であって、前記第１番目から第Ｎ番目の画像領域に対応
づけて、前記画像情報を第１から第Ｎの画像情報に分割
する情報分割手段と、前記第１から第Ｎの画像情報を第
１から第Ｎの復号情報にそれぞれ復号する第１から第Ｎ
の復号手段と、前記第１番目から第Ｎ番目の画像領域の
それぞれを前記垂直方向に隣接するように、かつ垂直方
向のサイズが少なくとも前記動き補償での動きベクトル
の垂直方向の取り得る最大値よりも大きく設定されたと
ころの２分割して得られる第１番目から第２Ｎ番目まで
の小画像領域に対応づけて、前記第１から第Ｎの復号情
報を第１から第２Ｎの参照情報に分割してそれぞれ記憶
する第１から第２Ｎの記憶手段と、前記第１から第Ｎの
復号情報を前記第１番目から第Ｎ番目の画像領域に対応
づけて結合する情報結合手段とを備え、前記第１から第
Ｎの復号手段は、前記第１から第Ｎの画像情報を前記第
１から第Ｎの復号情報にそれぞれ復号するに際し、該第
１から第Ｎの復号手段の第Ｍ（Ｍは１以上Ｎ以下の整
数）の復号手段が第２Ｍ−２から第２Ｍ＋１の記憶手段
の何れかをアクセスして第２Ｍ−２から第２Ｍ＋１の参
照情報を参照することにより、前記第１から第Ｎの相対
位置が一致する画像情報について並列的に動き補償を行
うことを特徴とする画像処理装置の構成を有する。
【００１２】
【００１３】
【００１４】
【００１５】
【００１６】また、第２の発明に係る画像処理装置は、
画面を垂直方向に隣接する第１番目から第Ｎ番目（Ｎは
２以上の整数）までのＮ個の画像領域に分割し、該画像
領域を単位として前記画面の画像情報を並列的に動き補
償して復号する画像処理装置であって、前記画像情報を
輝度情報と色差情報とに分割する第１の情報分割手段
と、前記第１番目から第Ｎ番目の画像領域に対応づけ
て、前記第１の情報分割手段により分割された輝度情報
または色差情報を第１から第Ｎの画像情報に分割する第
２の情報分割手段と、前記第１から第Ｎの画像情報を第
１から第Ｎの復号情報にそれぞれ復号する第１から第Ｎ
の復号手段と、前記第１番目から第Ｎ番目の画像領域の
それぞれを前記垂直方向に隣接するように、かつ垂直方
向のサイズが少なくとも前記動き補償での動きベクトル
の垂直方向の取り得る最大値よりも大きく設定されたと
ころの２分割して得られる第１番目から第２Ｎ番目まで
の小画像領域に対応づけて、前記第１から第Ｎの復号情
報を第１から第２Ｎの参照情報に分割してそれぞれ記憶
する第１から第２Ｎの記憶手段と、前記第１から第Ｎの
復号情報を前記第１番目から第Ｎ番目の画像領域に対応
づけて結合する情報結合手段とを備え、前記第１から第
Ｎの復号手段は、前記第１から第Ｎの画像情報を前記第
１から第Ｎの復号情報にそれぞれ復号するに際し、該第
１から第Ｎの復号手段の第Ｍ（Ｍは１以上Ｎ以下の整
数）の復号手段が第２Ｍ−２から第２Ｍ＋１の記憶手段
の何れかをアクセスして第２Ｍ−２から第２Ｍ＋１の参
照情報を参照することにより、前記第１から第Ｎの相対
位置が一致する画像情報についてそれぞれ並列的に動き
補償を行うことを特徴とする画像処理装置の構成を有す
る。
画面を垂直方向に隣接する第１番目から第Ｎ番目（Ｎは
２以上の整数）までのＮ個の画像領域に分割し、該画像
領域を単位として前記画面の画像情報を並列的に動き補
償して復号する画像処理装置であって、前記画像情報を
輝度情報と色差情報とに分割する第１の情報分割手段
と、前記第１番目から第Ｎ番目の画像領域に対応づけ
て、前記第１の情報分割手段により分割された輝度情報
または色差情報を第１から第Ｎの画像情報に分割する第
２の情報分割手段と、前記第１から第Ｎの画像情報を第
１から第Ｎの復号情報にそれぞれ復号する第１から第Ｎ
の復号手段と、前記第１番目から第Ｎ番目の画像領域の
それぞれを前記垂直方向に隣接するように、かつ垂直方
向のサイズが少なくとも前記動き補償での動きベクトル
の垂直方向の取り得る最大値よりも大きく設定されたと
ころの２分割して得られる第１番目から第２Ｎ番目まで
の小画像領域に対応づけて、前記第１から第Ｎの復号情
報を第１から第２Ｎの参照情報に分割してそれぞれ記憶
する第１から第２Ｎの記憶手段と、前記第１から第Ｎの
復号情報を前記第１番目から第Ｎ番目の画像領域に対応
づけて結合する情報結合手段とを備え、前記第１から第
Ｎの復号手段は、前記第１から第Ｎの画像情報を前記第
１から第Ｎの復号情報にそれぞれ復号するに際し、該第
１から第Ｎの復号手段の第Ｍ（Ｍは１以上Ｎ以下の整
数）の復号手段が第２Ｍ−２から第２Ｍ＋１の記憶手段
の何れかをアクセスして第２Ｍ−２から第２Ｍ＋１の参
照情報を参照することにより、前記第１から第Ｎの相対
位置が一致する画像情報についてそれぞれ並列的に動き
補償を行うことを特徴とする画像処理装置の構成を有す
る。
【００１７】さらにまた、第３の発明に係る画像処理装
置は、画面を垂直方向に隣接する第１番目から第Ｎ番目
（Ｎは２以上の整数）までのＮ個の画像領域に分割し、
該画像領域を単位として前記画面の画像情報を並列的に
動き補償して復号する画像処理装置であって、前記画像
情報を色成分に基づいて分割する第１の情報分割手段
と、前記第１番目から第Ｎ番目の画像領域に対応づけ
て、前記第１の情報分割手段により分割された画像情報
を第１から第Ｎの画像情報に分割する第２の情報分割手
段と、前記第１から第Ｎの画像情報を第１から第Ｎの復
号情報にそれぞれ復号する第１から第Ｎの復号手段と、
前記第１番目から第Ｎ番目の画像領域のそれぞれを前記
垂直方向に隣接するように、かつ垂直方向のサイズが少
なくとも前記動き補償での動きベクトルの垂直方向の取
り得る最大値よりも大きく設定されたところの２分割し
て得られる第１番目から第２Ｎ番目までの小画像領域に
対応づけて、前記第１から第Ｎの復号情報を第１から第
２Ｎの参照情報に分割してそれぞれ記憶する第１から第
２Ｎの記憶手段と、前記第１から第Ｎの復号情報を前記
第１番目から第Ｎ番目の画像領域に対応づけて結合する
情報結合手段とを備え、前記第１から第Ｎの復号手段
は、前記第１から第Ｎの画像情報を前記第１から第Ｎの
復号情報にそれぞれ復号するに際し、該第１から第Ｎの
復号手段の第Ｍ（Ｍは１以上Ｎ以下の整数）の復号手段
が第２Ｍ−２から第２Ｍ＋１の記憶手段の何れかをアク
セスして第２Ｍ−２から第２Ｍ＋１の参照情報を参照す
ることにより、前記第１から第Ｎの相対位置が一致する
画像情報についてそれぞれ並列的に動き補償を行うこと
を特徴とする画像処理装置の構成を有する。
置は、画面を垂直方向に隣接する第１番目から第Ｎ番目
（Ｎは２以上の整数）までのＮ個の画像領域に分割し、
該画像領域を単位として前記画面の画像情報を並列的に
動き補償して復号する画像処理装置であって、前記画像
情報を色成分に基づいて分割する第１の情報分割手段
と、前記第１番目から第Ｎ番目の画像領域に対応づけ
て、前記第１の情報分割手段により分割された画像情報
を第１から第Ｎの画像情報に分割する第２の情報分割手
段と、前記第１から第Ｎの画像情報を第１から第Ｎの復
号情報にそれぞれ復号する第１から第Ｎの復号手段と、
前記第１番目から第Ｎ番目の画像領域のそれぞれを前記
垂直方向に隣接するように、かつ垂直方向のサイズが少
なくとも前記動き補償での動きベクトルの垂直方向の取
り得る最大値よりも大きく設定されたところの２分割し
て得られる第１番目から第２Ｎ番目までの小画像領域に
対応づけて、前記第１から第Ｎの復号情報を第１から第
２Ｎの参照情報に分割してそれぞれ記憶する第１から第
２Ｎの記憶手段と、前記第１から第Ｎの復号情報を前記
第１番目から第Ｎ番目の画像領域に対応づけて結合する
情報結合手段とを備え、前記第１から第Ｎの復号手段
は、前記第１から第Ｎの画像情報を前記第１から第Ｎの
復号情報にそれぞれ復号するに際し、該第１から第Ｎの
復号手段の第Ｍ（Ｍは１以上Ｎ以下の整数）の復号手段
が第２Ｍ−２から第２Ｍ＋１の記憶手段の何れかをアク
セスして第２Ｍ−２から第２Ｍ＋１の参照情報を参照す
ることにより、前記第１から第Ｎの相対位置が一致する
画像情報についてそれぞれ並列的に動き補償を行うこと
を特徴とする画像処理装置の構成を有する。
【００１８】
【００１９】
【００２０】
【００２１】
【００２２】以下、上記構成された本発明の作用につい
て述べる。即ち、第１の発明に係る画像処理装置によれ
ば、情報分割手段は、垂直方向に隣接するように分割さ
れた画面の第１番目から第Ｎ番目の各画像領域に対応づ
けて画像情報を分割し、第１番目から第Ｎ番目の復号手
段のそれぞれは、情報分割手段により分割された第１番
目から第Ｎ番目の各画像領域の画像情報を並列的に復号
して、第１から第２Ｎの記憶手段のそれぞれに与える。
ここで、第１から第２Ｎの記憶手段は、第１から第Ｎの
復号手段が復号した画像情報を、第１から第Ｎの画像領
域のそれぞれをさらに２分割して得られる第１番目から
第２Ｎ番目の小画像領域に対応づけて、第１から第２Ｎ
の参照情報としてそれぞれ記憶する。この結果、復号手
段により復号された１画像領域分の画像情報は、連続す
る奇数番と偶数番との１対の記憶手段に分割して記憶さ
れる。そして、第１番目から第Ｎ番目の各復号手段が情
報分割手段により分割された画像情報を復号する場合、
第Ｍ（Ｍは１以上Ｎ以下の整数）の復号手段は、第２Ｍ
−２から第２Ｍ＋１の記憶手段の何れかをアクセスして
第２Ｍ−２から第２Ｍ＋１の参照情報を参照することに
より、前記第１から第Ｎの画像情報について並列的に動
き補償を行う。情報結合手段は、第１及び第２の復号手
段により動き補償して復号された第１から第Ｎの復号情
報を結合して、画像情報を再構築する。
て述べる。即ち、第１の発明に係る画像処理装置によれ
ば、情報分割手段は、垂直方向に隣接するように分割さ
れた画面の第１番目から第Ｎ番目の各画像領域に対応づ
けて画像情報を分割し、第１番目から第Ｎ番目の復号手
段のそれぞれは、情報分割手段により分割された第１番
目から第Ｎ番目の各画像領域の画像情報を並列的に復号
して、第１から第２Ｎの記憶手段のそれぞれに与える。
ここで、第１から第２Ｎの記憶手段は、第１から第Ｎの
復号手段が復号した画像情報を、第１から第Ｎの画像領
域のそれぞれをさらに２分割して得られる第１番目から
第２Ｎ番目の小画像領域に対応づけて、第１から第２Ｎ
の参照情報としてそれぞれ記憶する。この結果、復号手
段により復号された１画像領域分の画像情報は、連続す
る奇数番と偶数番との１対の記憶手段に分割して記憶さ
れる。そして、第１番目から第Ｎ番目の各復号手段が情
報分割手段により分割された画像情報を復号する場合、
第Ｍ（Ｍは１以上Ｎ以下の整数）の復号手段は、第２Ｍ
−２から第２Ｍ＋１の記憶手段の何れかをアクセスして
第２Ｍ−２から第２Ｍ＋１の参照情報を参照することに
より、前記第１から第Ｎの画像情報について並列的に動
き補償を行う。情報結合手段は、第１及び第２の復号手
段により動き補償して復号された第１から第Ｎの復号情
報を結合して、画像情報を再構築する。
【００２３】
【００２４】
【００２５】
【００２６】
【００２７】さらにまた、第２の発明に係る画像処理装
置によれば、第１の情報分割手段は画像情報を輝度情報
と色差情報とに分割し、第２の情報分割手段は、垂直方
向に隣接するように分割された画面の第１番目から第Ｎ
番目の画像領域に対応づけて第１の情報分割手段により
分割された輝度情報または色差情報を第１から第Ｎの画
像情報にさらに分割する。第１から第Ｎの復号手段のそ
れぞれは、第１及び第２の情報分割手段により分割され
た第１から第Ｎの画像情報を並列的に復号し、独立にア
クセス可能な第１から第２Ｎの記憶手段に分割して記憶
する。即ち、第１から第２Ｎの記憶手段は、第１から第
Ｎの復号手段が復号した画像情報を、第１から第Ｎの画
像領域のそれぞれをさらに２分割して得られる第１番目
から第２Ｎ番目の小画像領域に対応づけて、第１から第
２Ｎの参照情報としてそれぞれ記憶する。従って、復号
手段により復号された１画像領域分の画像情報は、連続
する奇数番と偶数番との１対の記憶手段に分割して記憶
される。そして、第１から第Ｎの各復号手段が第１及び
第２の情報分割手段により分割された第１から第Ｎの画
像情報を復号する場合、第Ｍ（Ｍは１以上Ｎ以下の整
数）の復号手段は、第２Ｍ−２から第２Ｍ＋１の記憶手
段の何れかをアクセスして第２Ｍ−２から第２Ｍ＋１の
参照情報を参照することにより、前記第１から第Ｎの画
像情報について並列的に動き補償を行う。情報結合手段
は、第１及び第２の復号手段により動き補償して復号さ
れた第１から第Ｎの復号情報を結合して、画像情報を再
構築する。このように、１画像領域分の画像情報は奇数
番と偶数番の１対の記憶手段に分割して記憶されるの
で、各復号手段は、記憶手段を単位としてアクセスする
ことにより、「或る画像領域」を動き補償するにあたっ
て、動きベクトルが「別の画像領域」にまたがっていた
としても、「別の画像領域」での復号動作に干渉を与え
ることなく、この動きベクトルに従って記憶手段をアク
セスして「或る画像領域」の動き補償を行うことができ
る。
置によれば、第１の情報分割手段は画像情報を輝度情報
と色差情報とに分割し、第２の情報分割手段は、垂直方
向に隣接するように分割された画面の第１番目から第Ｎ
番目の画像領域に対応づけて第１の情報分割手段により
分割された輝度情報または色差情報を第１から第Ｎの画
像情報にさらに分割する。第１から第Ｎの復号手段のそ
れぞれは、第１及び第２の情報分割手段により分割され
た第１から第Ｎの画像情報を並列的に復号し、独立にア
クセス可能な第１から第２Ｎの記憶手段に分割して記憶
する。即ち、第１から第２Ｎの記憶手段は、第１から第
Ｎの復号手段が復号した画像情報を、第１から第Ｎの画
像領域のそれぞれをさらに２分割して得られる第１番目
から第２Ｎ番目の小画像領域に対応づけて、第１から第
２Ｎの参照情報としてそれぞれ記憶する。従って、復号
手段により復号された１画像領域分の画像情報は、連続
する奇数番と偶数番との１対の記憶手段に分割して記憶
される。そして、第１から第Ｎの各復号手段が第１及び
第２の情報分割手段により分割された第１から第Ｎの画
像情報を復号する場合、第Ｍ（Ｍは１以上Ｎ以下の整
数）の復号手段は、第２Ｍ−２から第２Ｍ＋１の記憶手
段の何れかをアクセスして第２Ｍ−２から第２Ｍ＋１の
参照情報を参照することにより、前記第１から第Ｎの画
像情報について並列的に動き補償を行う。情報結合手段
は、第１及び第２の復号手段により動き補償して復号さ
れた第１から第Ｎの復号情報を結合して、画像情報を再
構築する。このように、１画像領域分の画像情報は奇数
番と偶数番の１対の記憶手段に分割して記憶されるの
で、各復号手段は、記憶手段を単位としてアクセスする
ことにより、「或る画像領域」を動き補償するにあたっ
て、動きベクトルが「別の画像領域」にまたがっていた
としても、「別の画像領域」での復号動作に干渉を与え
ることなく、この動きベクトルに従って記憶手段をアク
セスして「或る画像領域」の動き補償を行うことができ
る。
【００２８】さらにまた、第３の発明に係る画像処理装
置によれば、第１の情報分割手段は画像情報を色成分に
基づいて分割し、第２の情報分割手段は、垂直方向に隣
接するように分割された画面の第１番目から第Ｎ番目の
画像領域に対応づけて第１の情報分割手段により分割さ
れた画像情報を第１から第Ｎの画像情報にさらに分割す
る。第１から第Ｎの復号手段のそれぞれは、第１及び第
２の情報分割手段により分割された第１から第Ｎの画像
情報を並列的に復号し、独立にアクセス可能な第１から
第２Ｎの記憶手段に分割して記憶する。即ち、第１から
第２Ｎの記憶手段は、第１から第Ｎの復号手段が復号し
た画像情報を、第１から第Ｎの画像領域のそれぞれをさ
らに２分割して得られる第１番目から第２Ｎ番目の小画
像領域に対応づけて、第１から第２Ｎの参照情報として
それぞれ記憶する。従って、復号手段により復号された
１画像領域分の画像情報は、連続する奇数番と偶数番と
の１対の記憶手段に分割して記憶される。そして、第１
から第Ｎの各復号手段が第１及び第２の情報分割手段に
より分割された第１から第Ｎの画像情報を復号する場
合、第Ｍ（Ｍは１以上Ｎ以下の整数）の復号手段は、第
２Ｍ−２から第２Ｍ＋１の記憶手段の何れかをアクセス
して第２Ｍ−２から第２Ｍ＋１の参照情報を参照するこ
とにより、前記第１から第Ｎの画像情報について並列的
に動き補償を行う。情報結合手段は、第１及び第２の復
号手段により動き補償して復号された第１から第Ｎの復
号情報を結合して、画像情報を再構築する。このよう
に、１画像領域分の画像情報は奇数番と偶数番の１対の
記憶手段に分割して記憶されるので、各復号手段は、記
憶手段を単位としてアクセスすることにより、「或る画
像領域」を動き補償するにあたって、動きベクトルが
「別の画像領域」にまたがっていたとしても、「別の画
像領域」での復号動作に干渉を与えることなく、この動
きベクトルに従って記憶手段をアクセスして「或る画像
領域」の動き補償を行うことができる。
置によれば、第１の情報分割手段は画像情報を色成分に
基づいて分割し、第２の情報分割手段は、垂直方向に隣
接するように分割された画面の第１番目から第Ｎ番目の
画像領域に対応づけて第１の情報分割手段により分割さ
れた画像情報を第１から第Ｎの画像情報にさらに分割す
る。第１から第Ｎの復号手段のそれぞれは、第１及び第
２の情報分割手段により分割された第１から第Ｎの画像
情報を並列的に復号し、独立にアクセス可能な第１から
第２Ｎの記憶手段に分割して記憶する。即ち、第１から
第２Ｎの記憶手段は、第１から第Ｎの復号手段が復号し
た画像情報を、第１から第Ｎの画像領域のそれぞれをさ
らに２分割して得られる第１番目から第２Ｎ番目の小画
像領域に対応づけて、第１から第２Ｎの参照情報として
それぞれ記憶する。従って、復号手段により復号された
１画像領域分の画像情報は、連続する奇数番と偶数番と
の１対の記憶手段に分割して記憶される。そして、第１
から第Ｎの各復号手段が第１及び第２の情報分割手段に
より分割された第１から第Ｎの画像情報を復号する場
合、第Ｍ（Ｍは１以上Ｎ以下の整数）の復号手段は、第
２Ｍ−２から第２Ｍ＋１の記憶手段の何れかをアクセス
して第２Ｍ−２から第２Ｍ＋１の参照情報を参照するこ
とにより、前記第１から第Ｎの画像情報について並列的
に動き補償を行う。情報結合手段は、第１及び第２の復
号手段により動き補償して復号された第１から第Ｎの復
号情報を結合して、画像情報を再構築する。このよう
に、１画像領域分の画像情報は奇数番と偶数番の１対の
記憶手段に分割して記憶されるので、各復号手段は、記
憶手段を単位としてアクセスすることにより、「或る画
像領域」を動き補償するにあたって、動きベクトルが
「別の画像領域」にまたがっていたとしても、「別の画
像領域」での復号動作に干渉を与えることなく、この動
きベクトルに従って記憶手段をアクセスして「或る画像
領域」の動き補償を行うことができる。
【００２９】
【００３０】
【００３１】
【００３２】
【発明の実施の形態】以下、図１から図５を参照しなが
ら、本発明の実施の形態に係る画像処理装置について詳
細に説明する。ここで、図１は、第１の実施の形態に係
る画像処理装置の構成を表すブロック図、図２は第１の
実施形態に係る画像処理装置の動き補償の動作を説明す
るための説明図、図３は図１に示す第１の実施形態の装
置の構成において画面の分割数を３分割に拡張した場合
のブロック図、図４は第２の実施の形態に係る画像処理
装置の構成を表すブロック図、図５は図４に示す第２の
実施形態に係る装置の構成において輝度情報に関して画
面を２分割した場合のブロック図である。なお、各図に
おいて、同一要素または相当する要素には同一符号を付
す。
ら、本発明の実施の形態に係る画像処理装置について詳
細に説明する。ここで、図１は、第１の実施の形態に係
る画像処理装置の構成を表すブロック図、図２は第１の
実施形態に係る画像処理装置の動き補償の動作を説明す
るための説明図、図３は図１に示す第１の実施形態の装
置の構成において画面の分割数を３分割に拡張した場合
のブロック図、図４は第２の実施の形態に係る画像処理
装置の構成を表すブロック図、図５は図４に示す第２の
実施形態に係る装置の構成において輝度情報に関して画
面を２分割した場合のブロック図である。なお、各図に
おいて、同一要素または相当する要素には同一符号を付
す。
【００３３】（第１の実施の形態について）先ず、図１
から図３を用いて、本発明の第１の実施形態に係る画像
処理装置について説明する。本実施形態の画像処理装置
は、画面を分割して得られる各画像領域に対応する画像
情報を複数のデコーダが参照可能に構成され、各デコー
ダが動き補償を行うに際して、そのデコーダが動き補償
の対象とする画像領域以外の画像領域の画像情報を動き
ベクトルに従って参照することが可能なように構成され
る。これにより、画像領域境界付近において、動きベク
トルに従った動き補償を可能とするものである。
から図３を用いて、本発明の第１の実施形態に係る画像
処理装置について説明する。本実施形態の画像処理装置
は、画面を分割して得られる各画像領域に対応する画像
情報を複数のデコーダが参照可能に構成され、各デコー
ダが動き補償を行うに際して、そのデコーダが動き補償
の対象とする画像領域以外の画像領域の画像情報を動き
ベクトルに従って参照することが可能なように構成され
る。これにより、画像領域境界付近において、動きベク
トルに従った動き補償を可能とするものである。
【００３４】即ち、図１に示す本実施形態の画像処理装
置は、後述する図２に示すように、画面を上下２分割し
て得られる画像領域ＲＡ及びＲＢに対応するそれぞれの
画像情報を並列処理するものであって、圧縮された画像
情報のビットストリームを、その画面上の位置を検出し
て上下２つの画像領域ＲＡ及びＲＢに対応づけて分割
（スライス）するスライス検出器１（情報分割手段の前
段）と、該スライス検出器１により分割された上下の画
像領域ＲＡ及びＲＢのそれぞれに対応する画像情報を後
述のデコーダ３Ａ及び３Ｂの動作タイミングに合うよう
に時間調整してそれぞれ出力するＦＩＦＯ(First-In Fi
rst-Out)からなるバッファ２Ａ及び２Ｂ（情報分割手段
の後段）と、該バッファ２Ａ及び２Ｂにより時間調整さ
れた上下の画像領域ＲＡ及びＲＢに対応する画像情報の
それぞれを動き補償して復号するデコーダ３Ａ及び３Ｂ
（複数の復号手段）と、該デコーダ３Ａまたは３Ｂの何
れかを選択して後述のメモリ５Ａ−２に接続するセレク
タ４Ａ−２（復号手段の一部）と、前記デコーダ３Ａま
たは３Ｂの何れかを選択して後述のメモリ５Ｂ−１に接
続するセレクタ４Ｂ−１（復号手段の一部）と、前記デ
コーダ３Ａが復号した画像情報を動き補償の際の参照情
報として記憶する記憶部５Ａ（複数の記憶手段の一部）
と、前記デコーダ３Ｂが復号した画像情報を記憶する記
憶部５Ｂ（複数の記憶手段の一部）と、前記デコーダ３
Ａ及び３Ｂにより動き補償して復号された上下の画像領
域ＲＡ及びＲＢに対応する画像情報を結合して一画面分
の画像情報を構成する結合器６（情報結合手段）とを備
えて構成される。
置は、後述する図２に示すように、画面を上下２分割し
て得られる画像領域ＲＡ及びＲＢに対応するそれぞれの
画像情報を並列処理するものであって、圧縮された画像
情報のビットストリームを、その画面上の位置を検出し
て上下２つの画像領域ＲＡ及びＲＢに対応づけて分割
（スライス）するスライス検出器１（情報分割手段の前
段）と、該スライス検出器１により分割された上下の画
像領域ＲＡ及びＲＢのそれぞれに対応する画像情報を後
述のデコーダ３Ａ及び３Ｂの動作タイミングに合うよう
に時間調整してそれぞれ出力するＦＩＦＯ(First-In Fi
rst-Out)からなるバッファ２Ａ及び２Ｂ（情報分割手段
の後段）と、該バッファ２Ａ及び２Ｂにより時間調整さ
れた上下の画像領域ＲＡ及びＲＢに対応する画像情報の
それぞれを動き補償して復号するデコーダ３Ａ及び３Ｂ
（複数の復号手段）と、該デコーダ３Ａまたは３Ｂの何
れかを選択して後述のメモリ５Ａ−２に接続するセレク
タ４Ａ−２（復号手段の一部）と、前記デコーダ３Ａま
たは３Ｂの何れかを選択して後述のメモリ５Ｂ−１に接
続するセレクタ４Ｂ−１（復号手段の一部）と、前記デ
コーダ３Ａが復号した画像情報を動き補償の際の参照情
報として記憶する記憶部５Ａ（複数の記憶手段の一部）
と、前記デコーダ３Ｂが復号した画像情報を記憶する記
憶部５Ｂ（複数の記憶手段の一部）と、前記デコーダ３
Ａ及び３Ｂにより動き補償して復号された上下の画像領
域ＲＡ及びＲＢに対応する画像情報を結合して一画面分
の画像情報を構成する結合器６（情報結合手段）とを備
えて構成される。
【００３５】また、記憶部５Ａ及び５Ｂのそれぞれは、
独立にアクセス可能なメモリ５Ａ−１，５Ａ−２（複数
のメモリ空間）及びメモリ５Ｂ−１，５Ｂ−２（複数の
メモリ空間）を有して構成される。このうち、メモリ５
Ａ−２及び５Ｂ−１は、それぞれセレクタ４Ａ−２及び
４Ｂ−１を介してデコーダ３Ａまたは３Ｂの何れかに選
択的に接続される。逆に言うと、メモリ５Ａ−２及び５
Ｂ−１は、デコーダ３Ａ及び３Ｂの何れからも選択的に
アクセス可能に構成されている。なお、メモリ５Ａ−１
及び５Ｂ−２は、それぞれデコーダ３Ａ及び３Ｂによっ
てのみ直接的にアクセスが可能となっている。
独立にアクセス可能なメモリ５Ａ−１，５Ａ−２（複数
のメモリ空間）及びメモリ５Ｂ−１，５Ｂ−２（複数の
メモリ空間）を有して構成される。このうち、メモリ５
Ａ−２及び５Ｂ−１は、それぞれセレクタ４Ａ−２及び
４Ｂ−１を介してデコーダ３Ａまたは３Ｂの何れかに選
択的に接続される。逆に言うと、メモリ５Ａ−２及び５
Ｂ−１は、デコーダ３Ａ及び３Ｂの何れからも選択的に
アクセス可能に構成されている。なお、メモリ５Ａ−１
及び５Ｂ−２は、それぞれデコーダ３Ａ及び３Ｂによっ
てのみ直接的にアクセスが可能となっている。
【００３６】ここで、記憶部５Ａ及び５Ｂが動き補償の
際の参照情報として記憶する画像情報と画面の各画像領
域との対応関係について説明しておく。図２に各メモリ
に記憶される画像情報と画面（画像領域）との対応関係
を示すように、記憶部５Ａ及び５Ｂは、例えば画面を垂
直方向（上下）に隣接するように２分割して得られる画
像領域ＲＡ及びＲＢに対応する画像情報をデコーダ３Ａ
及び３Ｂからそれぞれ入力して参照情報として記憶す
る。
際の参照情報として記憶する画像情報と画面の各画像領
域との対応関係について説明しておく。図２に各メモリ
に記憶される画像情報と画面（画像領域）との対応関係
を示すように、記憶部５Ａ及び５Ｂは、例えば画面を垂
直方向（上下）に隣接するように２分割して得られる画
像領域ＲＡ及びＲＢに対応する画像情報をデコーダ３Ａ
及び３Ｂからそれぞれ入力して参照情報として記憶す
る。
【００３７】この記憶部５Ａを構成するメモリ５Ａ−１
及び５Ａ−２は、画像領域ＲＡをさらに垂直方向に隣接
するように２分割して得られる小領域ＲＡ１及びＲＡ２
（小画像領域）に対応づけて、デコーダ３Ａから入力す
る画像領域ＲＡの画像情報を分割して記憶し、同様に、
記憶部５Ｂを構成するメモリ５Ｂ−１及び５Ｂ−２は、
画像領域ＲＢを２分割して得られる小領域ＲＢ１及びＲ
Ｂ２に対応づけて、デコーダ３Ｂから入力する画像領域
ＲＢの画像情報を分割して記憶する。
及び５Ａ−２は、画像領域ＲＡをさらに垂直方向に隣接
するように２分割して得られる小領域ＲＡ１及びＲＡ２
（小画像領域）に対応づけて、デコーダ３Ａから入力す
る画像領域ＲＡの画像情報を分割して記憶し、同様に、
記憶部５Ｂを構成するメモリ５Ｂ−１及び５Ｂ−２は、
画像領域ＲＢを２分割して得られる小領域ＲＢ１及びＲ
Ｂ２に対応づけて、デコーダ３Ｂから入力する画像領域
ＲＢの画像情報を分割して記憶する。
【００３８】ところで、ＭＰＥＧ２では、動きベクトル
がとり得る最大値が規定されており、図２に示す各小領
域ＲＡ１〜ＲＢ２の垂直方向のサイズ（高さ）は各画像
ブロックの動きベクトルが取り得る最大値よりも大きく
設定される。これにより、或る小領域に属する画像ブロ
ックの動きベクトルが、２つ以上離れた小領域の画像情
報を参照することがなくなり、後述するように、デコー
ダ３Ａ及び３Ｂが各画像領域ＲＡ及びＲＢの画像情報を
並列に処理する過程において同一のメモリを同時にアク
セスすること（所謂メモリのバッティング）がなくな
る。このように、動きベクトルの最大値と小領域のサイ
ズとの関係は、メモリのバッティングの観点から規定さ
れる。
がとり得る最大値が規定されており、図２に示す各小領
域ＲＡ１〜ＲＢ２の垂直方向のサイズ（高さ）は各画像
ブロックの動きベクトルが取り得る最大値よりも大きく
設定される。これにより、或る小領域に属する画像ブロ
ックの動きベクトルが、２つ以上離れた小領域の画像情
報を参照することがなくなり、後述するように、デコー
ダ３Ａ及び３Ｂが各画像領域ＲＡ及びＲＢの画像情報を
並列に処理する過程において同一のメモリを同時にアク
セスすること（所謂メモリのバッティング）がなくな
る。このように、動きベクトルの最大値と小領域のサイ
ズとの関係は、メモリのバッティングの観点から規定さ
れる。
【００３９】ただし、必要とする画像品質を得ることが
できれば、必ずしも厳密にこれらの関係を遵守して、メ
モリのバッティングを完全に回避する必要はなく、視覚
上、所定の画像品質が得られる範囲内で小領域のサイズ
を動きベクトルが取り得る最大値よりも小さくして、或
る程度のメモリのバッティングを許容することし、メモ
リの記憶容量を節約するように構成してもよい。
できれば、必ずしも厳密にこれらの関係を遵守して、メ
モリのバッティングを完全に回避する必要はなく、視覚
上、所定の画像品質が得られる範囲内で小領域のサイズ
を動きベクトルが取り得る最大値よりも小さくして、或
る程度のメモリのバッティングを許容することし、メモ
リの記憶容量を節約するように構成してもよい。
【００４０】なお、本実施形態では、小領域ＲＡ１〜Ｒ
Ｂ２が垂直方向に隣接するように分割されたことに対応
して、垂直方向（縦方向）のサイズを規定したが、小領
域が隣接する方向において、各小領域のサイズが動きベ
クトルの最大値よりも大きければよく、仮に小領域が水
平方向に隣接するものであれば、小領域の水平方向（横
方向）のサイズが動きベクトルの最大値よりも大きけれ
ばよい。
Ｂ２が垂直方向に隣接するように分割されたことに対応
して、垂直方向（縦方向）のサイズを規定したが、小領
域が隣接する方向において、各小領域のサイズが動きベ
クトルの最大値よりも大きければよく、仮に小領域が水
平方向に隣接するものであれば、小領域の水平方向（横
方向）のサイズが動きベクトルの最大値よりも大きけれ
ばよい。
【００４１】以下、このように構成された本実施形態の
画像処理装置の動き補償の動作について説明する。前述
のように、ＭＰＥＧに準拠する画像情報を復号する場
合、画像ブロックを単位として動きベクトルに従って順
次動き補償を行う。即ち、図１に示すデコーダ３Ａは、
先ず、図２に示す小領域ＲＡ１に属する画像ブロックａ
１に相当する部分から動き補償を開始し、これと平行し
て、デコーダ３Ｂは小領域ＲＢ１に属するブロックｂ１
に相当する部分から動き補償を開始する。
画像処理装置の動き補償の動作について説明する。前述
のように、ＭＰＥＧに準拠する画像情報を復号する場
合、画像ブロックを単位として動きベクトルに従って順
次動き補償を行う。即ち、図１に示すデコーダ３Ａは、
先ず、図２に示す小領域ＲＡ１に属する画像ブロックａ
１に相当する部分から動き補償を開始し、これと平行し
て、デコーダ３Ｂは小領域ＲＢ１に属するブロックｂ１
に相当する部分から動き補償を開始する。
【００４２】ここで、画像領域ＲＡに属する画像ブロッ
クａ１〜ａ５の位置と、画像領域ＲＢに属する画像ブロ
ックｂ１〜ｂ５の位置とは、それぞれの画像領域におけ
る相対位置が一致するものとなっている。従って、画像
領域ＲＡに属する画像ブロックａ１〜ａ５と画像領域Ｒ
Ｂに属する画像ブロックｂ１〜ｂ５との画面上の距離
は、小領域の垂直方向のサイズの２倍分だけ離れ、これ
により、その最大値が小領域の垂直方向のサイズを超え
ることのない画像ブロックａ１〜ａ５及び画像ブロック
ｂ１〜ｂ５のそれぞれの動きベクトルは、後述するよう
に、各画像情報について並列に動き補償を行う過程にお
いて、同一の小領域を参照することがなくなる。
クａ１〜ａ５の位置と、画像領域ＲＢに属する画像ブロ
ックｂ１〜ｂ５の位置とは、それぞれの画像領域におけ
る相対位置が一致するものとなっている。従って、画像
領域ＲＡに属する画像ブロックａ１〜ａ５と画像領域Ｒ
Ｂに属する画像ブロックｂ１〜ｂ５との画面上の距離
は、小領域の垂直方向のサイズの２倍分だけ離れ、これ
により、その最大値が小領域の垂直方向のサイズを超え
ることのない画像ブロックａ１〜ａ５及び画像ブロック
ｂ１〜ｂ５のそれぞれの動きベクトルは、後述するよう
に、各画像情報について並列に動き補償を行う過程にお
いて、同一の小領域を参照することがなくなる。
【００４３】このように、記憶部５Ａ及び５Ｂがそれぞ
れ記憶する画像情報と画面の各画像領域との対応関係が
設定されて、以下のように動き補償が行われる。即ち、
先ず、図２に示す画像ブロックａ１に相当する部分を動
き補償する場合、この画像ブロックａ１の動きベクトル
は、小領域ＲＡ１の内部に収まっており、デコーダ３Ａ
は、メモリ５Ａ−１を直接アクセスして画像ブロックａ
１の動きベクトルに従って動き補償を行う。
れ記憶する画像情報と画面の各画像領域との対応関係が
設定されて、以下のように動き補償が行われる。即ち、
先ず、図２に示す画像ブロックａ１に相当する部分を動
き補償する場合、この画像ブロックａ１の動きベクトル
は、小領域ＲＡ１の内部に収まっており、デコーダ３Ａ
は、メモリ５Ａ−１を直接アクセスして画像ブロックａ
１の動きベクトルに従って動き補償を行う。
【００４４】一方、上述の画像ブロックａ１に相当する
部分の処理と平行して、画像ブロックｂ１に相当する部
分の動き補償が行われる。この場合、この画像ブロック
ｂ１の動きベクトルがとり得る垂直方向の最大範囲は、
小領域ＲＡ２とＲＢ１との両方にまたがっている。従っ
て、この場合、セレクタ４Ａ−２及び４Ｂ−１の選択状
態はデコーダ３Ｂに設定され、デコーダ３Ｂは、セレク
タ４Ａ−２または４Ｂ−１を介してメモリ５Ａ−２また
は５Ｂ−１の何れかをアクセスして動き補償を行う。
部分の処理と平行して、画像ブロックｂ１に相当する部
分の動き補償が行われる。この場合、この画像ブロック
ｂ１の動きベクトルがとり得る垂直方向の最大範囲は、
小領域ＲＡ２とＲＢ１との両方にまたがっている。従っ
て、この場合、セレクタ４Ａ−２及び４Ｂ−１の選択状
態はデコーダ３Ｂに設定され、デコーダ３Ｂは、セレク
タ４Ａ−２または４Ｂ−１を介してメモリ５Ａ−２また
は５Ｂ−１の何れかをアクセスして動き補償を行う。
【００４５】次に、ブロックａ２に相当する部分を動き
補償する場合、この画像ブロックａ２の動きベクトルが
取り得る垂直方向の最大範囲は依然として小領域ＲＡ１
の内部に収まっているので、デコーダ３Ａは、メモリ５
Ａ−１をアクセスして動き補償を行う。
補償する場合、この画像ブロックａ２の動きベクトルが
取り得る垂直方向の最大範囲は依然として小領域ＲＡ１
の内部に収まっているので、デコーダ３Ａは、メモリ５
Ａ−１をアクセスして動き補償を行う。
【００４６】一方、上述のブロックａ２に相当する部分
の処理と平行して、ブロックｂ２に相当する部分の動き
補償が行われる。この場合、この画像ブロックｂ２の動
きベクトルが取り得る垂直方向の最大範囲は小領域ＲＢ
１の中に収まっている。従って、この場合、セレクタ４
Ｂ−１の選択状態はデコーダ３Ｂに維持され、デコーダ
３Ｂはセレクタ４Ｂ−１を介してメモリ５Ｂ−１をアク
セスして動き補償を行う。なお、この場合、メモリ５Ａ
−２は、デコーダ３Ａ及び３Ｂの何れにもアクセスされ
ないので、セレクタ４Ａ−２の選択状態はどのようであ
ってもよい。
の処理と平行して、ブロックｂ２に相当する部分の動き
補償が行われる。この場合、この画像ブロックｂ２の動
きベクトルが取り得る垂直方向の最大範囲は小領域ＲＢ
１の中に収まっている。従って、この場合、セレクタ４
Ｂ−１の選択状態はデコーダ３Ｂに維持され、デコーダ
３Ｂはセレクタ４Ｂ−１を介してメモリ５Ｂ−１をアク
セスして動き補償を行う。なお、この場合、メモリ５Ａ
−２は、デコーダ３Ａ及び３Ｂの何れにもアクセスされ
ないので、セレクタ４Ａ−２の選択状態はどのようであ
ってもよい。
【００４７】次に、画像ブロックａ３に相当する部分を
動き補償する場合、この画像ブロックａ３の動きベクト
ルが取り得る垂直方向の最大範囲は、小領域ＲＡ１とＲ
Ａ２との両方にまたがっている。従って、この場合、セ
レクタ４Ａ−２の選択状態はデコーダ３Ａに変更され、
デコーダ３Ａはメモリ５Ａ−１または５Ａ−２の何れか
をアクセスして動き補償を行う。
動き補償する場合、この画像ブロックａ３の動きベクト
ルが取り得る垂直方向の最大範囲は、小領域ＲＡ１とＲ
Ａ２との両方にまたがっている。従って、この場合、セ
レクタ４Ａ−２の選択状態はデコーダ３Ａに変更され、
デコーダ３Ａはメモリ５Ａ−１または５Ａ−２の何れか
をアクセスして動き補償を行う。
【００４８】一方、上述の画像ブロックａ３に相当する
部分の処理と平行して、画像ブロックｂ３に相当する部
分の動き補償が行われる。この場合、この画像ブロック
ｂ３の動きベクトルがとり得る垂直方向の最大範囲は、
小領域ＲＢ１とＲＢ２との両方にまたがっている。従っ
て、この場合、セレクタ４Ｂ−１の選択状態はデコーダ
３Ｂに維持され、デコーダ３Ｂはメモリ５Ｂ−１または
５Ｂ−２の何れかをアクセスして動き補償を行う。
部分の処理と平行して、画像ブロックｂ３に相当する部
分の動き補償が行われる。この場合、この画像ブロック
ｂ３の動きベクトルがとり得る垂直方向の最大範囲は、
小領域ＲＢ１とＲＢ２との両方にまたがっている。従っ
て、この場合、セレクタ４Ｂ−１の選択状態はデコーダ
３Ｂに維持され、デコーダ３Ｂはメモリ５Ｂ−１または
５Ｂ−２の何れかをアクセスして動き補償を行う。
【００４９】次に、画像ブロックａ４に相当する部分を
動き補償する場合、この画像ブロックａ４の動きベクト
ルがとり得る垂直方向の最大範囲は小領域ＲＡ２の内部
に収まっているので、セレクタ４Ａ−２の選択状態はデ
コーダ３Ａに維持され、デコーダ３Ａは、このセレクタ
４Ａ−２を介してメモリ５Ａ−２をアクセスして動き補
償を行う。
動き補償する場合、この画像ブロックａ４の動きベクト
ルがとり得る垂直方向の最大範囲は小領域ＲＡ２の内部
に収まっているので、セレクタ４Ａ−２の選択状態はデ
コーダ３Ａに維持され、デコーダ３Ａは、このセレクタ
４Ａ−２を介してメモリ５Ａ−２をアクセスして動き補
償を行う。
【００５０】一方、上述の画像ブロックａ４に相当する
部分の処理と平行して、画像ブロックｂ４に相当する部
分の動き補償が行われる。この場合、この画像ブロック
ｂ４の動きベクトルがとり得る垂直方向の最大範囲は、
小領域ＲＢ２の内部に収まっているので、デコーダ３Ｂ
はメモリ５Ｂ−２をアクセスして動き補償を行う。な
お、この場合、メモリ５Ｂ−１は、デコーダ３Ａ及び３
Ｂの何れにもアクセスされないので、セレクタ４Ｂ−１
の選択状態はどのようであってもよい。
部分の処理と平行して、画像ブロックｂ４に相当する部
分の動き補償が行われる。この場合、この画像ブロック
ｂ４の動きベクトルがとり得る垂直方向の最大範囲は、
小領域ＲＢ２の内部に収まっているので、デコーダ３Ｂ
はメモリ５Ｂ−２をアクセスして動き補償を行う。な
お、この場合、メモリ５Ｂ−１は、デコーダ３Ａ及び３
Ｂの何れにもアクセスされないので、セレクタ４Ｂ−１
の選択状態はどのようであってもよい。
【００５１】最後に、画像ブロックａ５に相当する部分
を動き補償する場合、この画像ブロックａ５の動きベク
トルがとり得る垂直方向の最大範囲は、小領域ＲＡ２と
ＲＢ１との両方にまたがっている。従って、この場合、
セレクタ４Ａ−２の選択状態はデコーダ３Ａに維持され
ると共にセレクタ４Ｂ−１の選択状態はデコーダ３Ａに
変更され、デコーダ３Ａは、セレクタ４Ａ−２または４
Ｂ−１を介してメモリ５Ａ−２または５Ｂ−１の何れか
をアクセスして動き補償を行う。
を動き補償する場合、この画像ブロックａ５の動きベク
トルがとり得る垂直方向の最大範囲は、小領域ＲＡ２と
ＲＢ１との両方にまたがっている。従って、この場合、
セレクタ４Ａ−２の選択状態はデコーダ３Ａに維持され
ると共にセレクタ４Ｂ−１の選択状態はデコーダ３Ａに
変更され、デコーダ３Ａは、セレクタ４Ａ−２または４
Ｂ−１を介してメモリ５Ａ−２または５Ｂ−１の何れか
をアクセスして動き補償を行う。
【００５２】一方、上述の画像ブロックａ５に相当する
部分の処理と平行して、画像ブロックｂ５に相当する部
分の動き補償が行われる。この場合、この画像ブロック
ｂ５の動きベクトルは小領域ＲＢ２の内部に収まってい
るので、デコーダ３Ｂは、メモリ５Ｂ−２をアクセスし
て動き補償を行う。
部分の処理と平行して、画像ブロックｂ５に相当する部
分の動き補償が行われる。この場合、この画像ブロック
ｂ５の動きベクトルは小領域ＲＢ２の内部に収まってい
るので、デコーダ３Ｂは、メモリ５Ｂ−２をアクセスし
て動き補償を行う。
【００５３】このように、画像ブロックａ１〜ａ５と画
像ブロックｂ１〜ｂ５とを並列的に動き補償して復号処
理する過程において、この復号処理の対象となっている
画像ブロックに応じてセレクタ４Ａ−２及び４Ｂ−１の
選択状態が設定され、デコーダ３Ａ及び３Ｂは、同一の
メモリを同時にアクセスする場合がない。また、画面上
の任意の画像ブロックについても画像ブロックａ１〜ａ
５またはｂ１〜ｂ５の何れかに含めて表現することがで
き、デコーダ３Ａ及び３Ｂは、それぞれの動きベクトル
に従って動き補償に必要な画像情報（参照情報）が記憶
されたメモリをバッティングを生じることなく並列にア
クセスする。
像ブロックｂ１〜ｂ５とを並列的に動き補償して復号処
理する過程において、この復号処理の対象となっている
画像ブロックに応じてセレクタ４Ａ−２及び４Ｂ−１の
選択状態が設定され、デコーダ３Ａ及び３Ｂは、同一の
メモリを同時にアクセスする場合がない。また、画面上
の任意の画像ブロックについても画像ブロックａ１〜ａ
５またはｂ１〜ｂ５の何れかに含めて表現することがで
き、デコーダ３Ａ及び３Ｂは、それぞれの動きベクトル
に従って動き補償に必要な画像情報（参照情報）が記憶
されたメモリをバッティングを生じることなく並列にア
クセスする。
【００５４】従って、本実施形態の画像処理装置によれ
ば、前述の従来装置のように単純に分割された画像情報
を参照して動き補償する場合と異なり、画像領域ＲＡと
ＲＢとの境界でも動き補償を正常に行って、それぞれの
画像領域に対応する画像情報について並列に動き補償を
行うことが可能となり、自然な動きが再現された画像情
報を構築することができる。
ば、前述の従来装置のように単純に分割された画像情報
を参照して動き補償する場合と異なり、画像領域ＲＡと
ＲＢとの境界でも動き補償を正常に行って、それぞれの
画像領域に対応する画像情報について並列に動き補償を
行うことが可能となり、自然な動きが再現された画像情
報を構築することができる。
【００５５】なお、上述の図１に示す本実施形態の画像
処理装置は、画面を２分割して得られる画像領域ＲＡ及
びＲＢに対応づけて画像情報を並列処理するものとして
構成したが、必要に応じて分割数（並列処理段数）を増
やしてもよい。例えば画面を３分割して得られる画像領
域に対応づけて画像情報を並列して復号しようとする場
合、図３に示すように、図１に示す装置の構成おいて、
さらにバッファ２Ｃ、デコーダ３Ｃ、セレクタ４Ｃ−
１、記憶部５Ｃ（メモリ５Ｃ−１，５Ｃ−２）の各要素
を加えて構成すればよい。
処理装置は、画面を２分割して得られる画像領域ＲＡ及
びＲＢに対応づけて画像情報を並列処理するものとして
構成したが、必要に応じて分割数（並列処理段数）を増
やしてもよい。例えば画面を３分割して得られる画像領
域に対応づけて画像情報を並列して復号しようとする場
合、図３に示すように、図１に示す装置の構成おいて、
さらにバッファ２Ｃ、デコーダ３Ｃ、セレクタ４Ｃ−
１、記憶部５Ｃ（メモリ５Ｃ−１，５Ｃ−２）の各要素
を加えて構成すればよい。
【００５６】なお、この場合のスライス検出器１及び結
合器６は、新たに加えた上述の要素に対応するために機
能が拡張されたものとして構成されると共に、各記憶部
５Ａ〜５Ｃは、画面の分割数の増加に応じて記憶容量が
調整（減少）されたものとして構成される。
合器６は、新たに加えた上述の要素に対応するために機
能が拡張されたものとして構成されると共に、各記憶部
５Ａ〜５Ｃは、画面の分割数の増加に応じて記憶容量が
調整（減少）されたものとして構成される。
【００５７】また、上述した図１及び図３に示す本実施
形態の画像処理装置の場合、記憶部（例えば記憶部５
Ａ）を２つのメモリ（例えばメモリ５Ａ−１及び５Ａ−
２）から構成して、これら２つのメモリを独立にアクセ
ス可能な記憶部５Ａのメモリ空間としたが、そもそも各
メモリ（５Ａ−１〜５Ｃ−２）を独立した記憶部として
取り扱ってもよく、この場合、ひとつのデコーダが復号
した画像情報を２つの記憶部に分割して記憶するものと
なる。
形態の画像処理装置の場合、記憶部（例えば記憶部５
Ａ）を２つのメモリ（例えばメモリ５Ａ−１及び５Ａ−
２）から構成して、これら２つのメモリを独立にアクセ
ス可能な記憶部５Ａのメモリ空間としたが、そもそも各
メモリ（５Ａ−１〜５Ｃ−２）を独立した記憶部として
取り扱ってもよく、この場合、ひとつのデコーダが復号
した画像情報を２つの記憶部に分割して記憶するものと
なる。
【００５８】このように構成した場合、例えば、図３に
示すデコーダ３Ｂ（第Ｍの復号手段）は、処理の対象と
する画像ブロックの位置によって、メモリ５Ａ−２（第
２Ｍ−２の記憶手段）からメモリ５Ｃ−１（第２Ｍ＋１
の記憶手段）の何れかをアクセスして、これらのメモリ
に記憶された画像情報（参照情報）を参照して動き補償
を行う。
示すデコーダ３Ｂ（第Ｍの復号手段）は、処理の対象と
する画像ブロックの位置によって、メモリ５Ａ−２（第
２Ｍ−２の記憶手段）からメモリ５Ｃ−１（第２Ｍ＋１
の記憶手段）の何れかをアクセスして、これらのメモリ
に記憶された画像情報（参照情報）を参照して動き補償
を行う。
【００５９】さらに、本実施形態では、図１及び図３に
示す記憶部（例えば記憶部５Ａ）を２つのメモリから構
成して、独立にアクセス可能な複数のメモリ空間を実現
したが、記憶部は各画像領域の小領域毎に独立してアク
セス可能であればよく、例えばデュアルポートメモリな
どのように複数のアドレスを同時に指定が可能なデバイ
ス用いて構成することも可能である。
示す記憶部（例えば記憶部５Ａ）を２つのメモリから構
成して、独立にアクセス可能な複数のメモリ空間を実現
したが、記憶部は各画像領域の小領域毎に独立してアク
セス可能であればよく、例えばデュアルポートメモリな
どのように複数のアドレスを同時に指定が可能なデバイ
ス用いて構成することも可能である。
【００６０】さらにまた、本実施形態では、例えばデコ
ーダ３Ａがアクセス可能なメモリの個数を、各セレクタ
の選択状態によって最大３個（メモリ５Ａ−１，５Ａ−
２，５Ｂ−１）までとしたが、各デコーダがすべてのメ
モリをアクセス可能に構成してもよい。
ーダ３Ａがアクセス可能なメモリの個数を、各セレクタ
の選択状態によって最大３個（メモリ５Ａ−１，５Ａ−
２，５Ｂ−１）までとしたが、各デコーダがすべてのメ
モリをアクセス可能に構成してもよい。
【００６１】（第２の実施の形態について）次に、図４
及び図５を用いて、本発明の第２の実施の形態に係る画
像処理装置について説明する。前述の第１の実施形態の
画像処理装置は、画面上の物理的な領域である画像領域
に対応づけて画像情報を分割して並列処理を行うもので
あるが、本実施形態の画像処理装置は、輝度や色差など
の属性（データ構造）に着目して画像情報を分割して並
列処理を行うものである。
及び図５を用いて、本発明の第２の実施の形態に係る画
像処理装置について説明する。前述の第１の実施形態の
画像処理装置は、画面上の物理的な領域である画像領域
に対応づけて画像情報を分割して並列処理を行うもので
あるが、本実施形態の画像処理装置は、輝度や色差など
の属性（データ構造）に着目して画像情報を分割して並
列処理を行うものである。
【００６２】一般に、カラー画像情報は、輝度と色差、
またはＲＧＢ(Red-Green-Blue)等の各成分に分解して符
号／復号の処理がなされる。本実施形態の画像処理装置
は、この点に着目して構成されたものであって、カラー
画像情報を輝度成分（輝度情報）及び色差成分（色差情
報）の各成分の復号処理を別々のデコーダに分担させ
て、輝度成分及び色差成分のそれぞれの動き補償を並列
に行うものである。
またはＲＧＢ(Red-Green-Blue)等の各成分に分解して符
号／復号の処理がなされる。本実施形態の画像処理装置
は、この点に着目して構成されたものであって、カラー
画像情報を輝度成分（輝度情報）及び色差成分（色差情
報）の各成分の復号処理を別々のデコーダに分担させ
て、輝度成分及び色差成分のそれぞれの動き補償を並列
に行うものである。
【００６３】即ち、図４に示す本実施形態の画像処理装
置は、カラー画像情報のビットストリームを入力して、
カラー画像情報の輝度成分及び色差成分をそれぞれ復号
する輝度用デコーダ３０及び色差用デコーダ３１と、該
輝度用デコーダ３０及び色差用デコーダ３１が復号した
画像情報の輝度成分及び色差成分をそれぞれ格納する輝
度用メモリ５０及び色差用メモリ５１とを備えて構成さ
れる。
置は、カラー画像情報のビットストリームを入力して、
カラー画像情報の輝度成分及び色差成分をそれぞれ復号
する輝度用デコーダ３０及び色差用デコーダ３１と、該
輝度用デコーダ３０及び色差用デコーダ３１が復号した
画像情報の輝度成分及び色差成分をそれぞれ格納する輝
度用メモリ５０及び色差用メモリ５１とを備えて構成さ
れる。
【００６４】このように構成された本実施形態の装置の
場合、輝度用デコーダ３０及び色差用デコーダ３１は、
カラー画像情報のビットストリームを入力して、それぞ
れカラー画像情報の輝度成分及び色差成分を復号し、輝
度用メモリ５０及び色差用メモリ５１にそれぞれ格納す
る。
場合、輝度用デコーダ３０及び色差用デコーダ３１は、
カラー画像情報のビットストリームを入力して、それぞ
れカラー画像情報の輝度成分及び色差成分を復号し、輝
度用メモリ５０及び色差用メモリ５１にそれぞれ格納す
る。
【００６５】ここで、動き補償を行う場合、輝度用デコ
ーダ３０及び色差用デコーダ３１は、輝度用メモリ５０
及び色差用メモリ５１を動きベクトルに従ってそれぞれ
アクセスして、必要とする画像ブロックの画像情報を読
み出し、この画像情報を用いて動き補償した画像情報の
輝度成分及び色差成分を、後段側に接続されるＤ／Ａコ
ンバータ（図示なし）に与える。
ーダ３０及び色差用デコーダ３１は、輝度用メモリ５０
及び色差用メモリ５１を動きベクトルに従ってそれぞれ
アクセスして、必要とする画像ブロックの画像情報を読
み出し、この画像情報を用いて動き補償した画像情報の
輝度成分及び色差成分を、後段側に接続されるＤ／Ａコ
ンバータ（図示なし）に与える。
【００６６】このように、本実施形態の装置では、カラ
ー画像情報を輝度成分と色差成分とに分割して並列処理
することにより、ひとつのデコーダの負担が過大となら
ないように処理の対象とするデータ量を抑えるものとな
っている。なお、本実施形態では、輝度成分と色差成分
とからなるカラー画像情報を復号するものとして装置を
構成したが、前述のように、ＲＧＢ系のカラー画像情報
を復号する装置として構成する場合には、カラー画像情
報を、Ｒ(Red)成分、Ｇ(Green)成分、Ｂ(Blue)成分の色
成分に分割して、各色成分毎に画像情報を並列に動き補
償して復号するように構成すればよく、処理の対象とす
る画像情報の種類に応じて分割の基準を適切に選択すれ
ばよい。
ー画像情報を輝度成分と色差成分とに分割して並列処理
することにより、ひとつのデコーダの負担が過大となら
ないように処理の対象とするデータ量を抑えるものとな
っている。なお、本実施形態では、輝度成分と色差成分
とからなるカラー画像情報を復号するものとして装置を
構成したが、前述のように、ＲＧＢ系のカラー画像情報
を復号する装置として構成する場合には、カラー画像情
報を、Ｒ(Red)成分、Ｇ(Green)成分、Ｂ(Blue)成分の色
成分に分割して、各色成分毎に画像情報を並列に動き補
償して復号するように構成すればよく、処理の対象とす
る画像情報の種類に応じて分割の基準を適切に選択すれ
ばよい。
【００６７】（第３の実施の形態について）次に、図５
を用いて、本発明の第３の実施の形態に係る画像処理装
置について説明する。前述のように、第２の実施形態の
画像処理装置は、画像情報を輝度成分と色差成分とに分
割して並列処理するものとして構成したが、図５に示す
本実施形態の画像処理装置は、第１の実施形態の装置と
第２の実施形態の装置とを組み合わせて構成されたもの
であり、輝度成分と色差成分との並列に処理する過程に
おいて、画面を分割して得られる画像領域に対応づけ
て、輝度成分または色差成分の処理をさらに並列化する
ように構成したものである。
を用いて、本発明の第３の実施の形態に係る画像処理装
置について説明する。前述のように、第２の実施形態の
画像処理装置は、画像情報を輝度成分と色差成分とに分
割して並列処理するものとして構成したが、図５に示す
本実施形態の画像処理装置は、第１の実施形態の装置と
第２の実施形態の装置とを組み合わせて構成されたもの
であり、輝度成分と色差成分との並列に処理する過程に
おいて、画面を分割して得られる画像領域に対応づけ
て、輝度成分または色差成分の処理をさらに並列化する
ように構成したものである。
【００６８】ところで、輝度成分を処理する上での画面
の分割数と、色差成分を処理する上での画面の分割数と
は必ずしも同一にする必要はない。即ち、ＭＰＥＧ等で
は、画像情報の輝度成分に対して色差成分は間引かれて
画像の画素数が減ったものとなっており、このため、一
般に輝度成分に比較して色差成分の復号には処理能力を
それほど必要としない。
の分割数と、色差成分を処理する上での画面の分割数と
は必ずしも同一にする必要はない。即ち、ＭＰＥＧ等で
は、画像情報の輝度成分に対して色差成分は間引かれて
画像の画素数が減ったものとなっており、このため、一
般に輝度成分に比較して色差成分の復号には処理能力を
それほど必要としない。
【００６９】本実施形態の装置は、この点に着目して、
そのデータ量に応じて輝度成分と色差成分との処理を担
うデコーダの配分数を調整して構成したものであり、デ
ータ量が多い輝度成分の復号処理には２個のデコーダを
配分してさらに並列処理化すると共に、データ量が比較
的少ない色差成分の復号には１個のデコーダを配分する
ことにより、画像情報のデータ構造に整合させて、効率
的にデコーダを配分して構成したものである。
そのデータ量に応じて輝度成分と色差成分との処理を担
うデコーダの配分数を調整して構成したものであり、デ
ータ量が多い輝度成分の復号処理には２個のデコーダを
配分してさらに並列処理化すると共に、データ量が比較
的少ない色差成分の復号には１個のデコーダを配分する
ことにより、画像情報のデータ構造に整合させて、効率
的にデコーダを配分して構成したものである。
【００７０】即ち、図５に示す画像処理装置は、図１に
示す第１の実施形態の装置を輝度成分の処理系として用
い、さらに、色差成分の処理を行うために、図１に示す
装置の構成に図４に示す色差用デコーダ３１と色差用メ
モリ５１とからなる色差成分の処理系を加えて構成した
ものである。
示す第１の実施形態の装置を輝度成分の処理系として用
い、さらに、色差成分の処理を行うために、図１に示す
装置の構成に図４に示す色差用デコーダ３１と色差用メ
モリ５１とからなる色差成分の処理系を加えて構成した
ものである。
【００７１】ただし、図５に示す装置を構成するスライ
ス検出器１は、圧縮された画像データのビットストリー
ムを、輝度成分と色差成分とに分割すると共に、輝度成
分については、画面を垂直方向に隣接するように２分割
して得られる各画像領域に対応づけてさらに２分割する
ものとして構成される。
ス検出器１は、圧縮された画像データのビットストリー
ムを、輝度成分と色差成分とに分割すると共に、輝度成
分については、画面を垂直方向に隣接するように２分割
して得られる各画像領域に対応づけてさらに２分割する
ものとして構成される。
【００７２】また、同図に示すデコーダ３Ａ，３Ｂ及び
デコーダ３１は、スライス検出器１から入力する画像情
報の輝度成分及び色差成分のそれぞれを復号するものと
して構成され、このうち、デコーダ３Ａ及び３Ｂは、画
像領域に対応づけてさらに２分割された輝度成分のそれ
ぞれを復号する。さらに、結合器６は、輝度用のデコー
ダ３Ａ，３Ｂ及び色差用のデコーダ３Ｃのそれぞれが復
号した画像情報の輝度成分及び色差成分を一画面の画像
情報に結合するものとして構成される。
デコーダ３１は、スライス検出器１から入力する画像情
報の輝度成分及び色差成分のそれぞれを復号するものと
して構成され、このうち、デコーダ３Ａ及び３Ｂは、画
像領域に対応づけてさらに２分割された輝度成分のそれ
ぞれを復号する。さらに、結合器６は、輝度用のデコー
ダ３Ａ，３Ｂ及び色差用のデコーダ３Ｃのそれぞれが復
号した画像情報の輝度成分及び色差成分を一画面の画像
情報に結合するものとして構成される。
【００７３】このように構成された本実施形態の装置
は、画像情報を輝度成分と色差成分とに分割して動き補
償の復号処理を並列に行うと共に、輝度成分については
画面の各画像領域に対応づけてさらに分割して復号処理
を並列化し、画像情報のデータ構造に応じてデコーダの
配分が適正化されたものとして実現される。
は、画像情報を輝度成分と色差成分とに分割して動き補
償の復号処理を並列に行うと共に、輝度成分については
画面の各画像領域に対応づけてさらに分割して復号処理
を並列化し、画像情報のデータ構造に応じてデコーダの
配分が適正化されたものとして実現される。
【００７４】なお、本実施形態では、輝度成分の処理に
対しては２個のデコーダを配分し、色差成分に対しては
１個のデコーダを配分して構成したが、デコーダの配分
はこれに限られるものではなく、各成分のデータ量とデ
コーダ単体の処理能力とに応じて、その配分を適切に定
めればよい。同様に、画像情報がＲＧＢ系のものである
場合にも、各色成分のデータ量等に応じてデコーダの配
分を定めればよい。
対しては２個のデコーダを配分し、色差成分に対しては
１個のデコーダを配分して構成したが、デコーダの配分
はこれに限られるものではなく、各成分のデータ量とデ
コーダ単体の処理能力とに応じて、その配分を適切に定
めればよい。同様に、画像情報がＲＧＢ系のものである
場合にも、各色成分のデータ量等に応じてデコーダの配
分を定めればよい。
【００７５】上述の第１及び第３の実施形態の説明にお
いて、並列処理のための画面の分割方向を垂直方向とし
たが、画面の分割方向はこれに限定されるものではな
く、水平方向（左右）や２次元方向であってもよく、更
には、適当にこれらの分割方向を組み合わせて構成する
こともでき、必要に応じて分割の方向を適切に定めれば
よい。
いて、並列処理のための画面の分割方向を垂直方向とし
たが、画面の分割方向はこれに限定されるものではな
く、水平方向（左右）や２次元方向であってもよく、更
には、適当にこれらの分割方向を組み合わせて構成する
こともでき、必要に応じて分割の方向を適切に定めれば
よい。
【００７６】
【発明の効果】以上の説明から明らかなように、本発明
によれば、以下のような効果を得ることができる。即
ち、第１の発明に係る画像処理装置によれば、画面を分
割して得られる複数の画像領域に対応する画像情報を参
照して動き補償を並列に実行するに際し、或る画像領域
の画像情報を複数の復号手段（デコーダ）が参照可能な
ように構成したので、動きベクトルが他の画像領域の参
照情報（画像情報）を参照する場合であっても、必要と
する参照情報を参照して動き補償を並列に行うことがで
き、各画像領域の境界付近でも画像の動きが自然な画像
情報に復号することができる。しかも、画像情報を並列
に処理するので、復号手段単体の性能を上げることな
く、大規模な画像情報を高速に動き補償して復号するこ
とができる。
によれば、以下のような効果を得ることができる。即
ち、第１の発明に係る画像処理装置によれば、画面を分
割して得られる複数の画像領域に対応する画像情報を参
照して動き補償を並列に実行するに際し、或る画像領域
の画像情報を複数の復号手段（デコーダ）が参照可能な
ように構成したので、動きベクトルが他の画像領域の参
照情報（画像情報）を参照する場合であっても、必要と
する参照情報を参照して動き補償を並列に行うことがで
き、各画像領域の境界付近でも画像の動きが自然な画像
情報に復号することができる。しかも、画像情報を並列
に処理するので、復号手段単体の性能を上げることな
く、大規模な画像情報を高速に動き補償して復号するこ
とができる。
【００７７】
【００７８】
【００７９】さらにまた、第２の発明に係る画像処理装
置によれば、第１の発明に係る画像処理装置により得ら
れる効果を併せて得ることができ、輝度及び色差成分か
らなる大規模な画像情報をさらに一層高速に動き補償し
て復号することができる。
置によれば、第１の発明に係る画像処理装置により得ら
れる効果を併せて得ることができ、輝度及び色差成分か
らなる大規模な画像情報をさらに一層高速に動き補償し
て復号することができる。
【００８０】
【００８１】さらにまた、第３の発明に係る画像処理装
置によれば、第１の発明に係る画像処理装置により得ら
れる効果を得ることができ、ＲＧＢ等の色成分からなる
大規模な画像情報をさらに一層高速に動き補償して復号
することができる。
置によれば、第１の発明に係る画像処理装置により得ら
れる効果を得ることができ、ＲＧＢ等の色成分からなる
大規模な画像情報をさらに一層高速に動き補償して復号
することができる。
【図１】第１の実施の形態に係る画像処理装置の構成を
表すブロック図である。
表すブロック図である。
【図２】第１の実施の形態に係る画像処理装置の動き補
償の動作を説明するための説明図である。
償の動作を説明するための説明図である。
【図３】第１の実施の形態に係る画像処理装置において
画面の分割数を３分割に拡張した場合の構成を表すブロ
ック図である。
画面の分割数を３分割に拡張した場合の構成を表すブロ
ック図である。
【図４】第２の実施の形態に係る画像処理装置の構成を
表すブロック図である。
表すブロック図である。
【図５】第２の実施の形態に係る画像処理装置において
輝度成分に関して画面を２分割して並列処理する場合の
構成を表すブロック図である。
輝度成分に関して画面を２分割して並列処理する場合の
構成を表すブロック図である。
【図６】ＭＰＥＧ２に準拠した従来の画像処理装置を表
すブロック図である。
すブロック図である。
【図７】動き補償を並列処理する従来の画像処理装置の
動作を説明するための説明図である。
動作を説明するための説明図である。
１ スライス検出器
２Ａ，２Ｂ，２Ｃ バッファ
３Ａ，３Ｂ，３Ｃ デコーダ
４Ａ−２，４Ｂ−１，４Ｂ−２，４Ｃ−１ セレクタ
５Ａ〜５Ｃ 記憶部
５Ａ−１，５Ａ−２，５Ｂ−１，５Ｂ−２，５Ｃ−１，
５Ｃ−２ メモリ ６ 結合器 ３０ 輝度用デコーダ ３１ 色差用デコーダ ５０ 輝度用メモリ ５１ 色差用メモリ
５Ｃ−２ メモリ ６ 結合器 ３０ 輝度用デコーダ ３１ 色差用デコーダ ５０ 輝度用メモリ ５１ 色差用メモリ
─────────────────────────────────────────────────────
フロントページの続き
(58)調査した分野(Int.Cl.7，ＤＢ名)
H04N 7/24 - 7/68
Claims (3)
- 【請求項１】 画面を垂直方向に隣接する第１番目から
第Ｎ番目（Ｎは２以上の整数）までのＮ個の画像領域に
分割し、該画像領域を単位として前記画面の画像情報を
並列的に動き補償して復号する画像処理装置であって、 前記第１番目から第Ｎ番目の画像領域に対応づけて、前
記画像情報を第１から第Ｎの画像情報に分割する情報分
割手段と、 前記第１から第Ｎの画像情報を第１から第Ｎの復号情報
にそれぞれ復号する第１から第Ｎの復号手段と、 前記第１番目から第Ｎ番目の画像領域のそれぞれを前記
垂直方向に隣接するように、かつ垂直方向のサイズが少
なくとも前記動き補償での動きベクトルの垂直方向の取
り得る最大値よりも大きく設定されたところの２分割し
て得られる第１番目から第２Ｎ番目までの小画像領域に
対応づけて、前記第１から第Ｎの復号情報を第１から第
２Ｎの参照情報に分割してそれぞれ記憶する第１から第
２Ｎの記憶手段と、 前記第１から第Ｎの復号情報を前記第１番目から第Ｎ番
目の画像領域に対応づけて結合する情報結合手段とを備
え、 前記第１から第Ｎの復号手段は、前記第１から第Ｎの画
像情報を前記第１から第Ｎの復号情報にそれぞれ復号す
るに際し、該第１から第Ｎの復号手段の第Ｍ（Ｍは１以
上Ｎ以下の整数）の復号手段が第２Ｍ−２から第２Ｍ＋
１の記憶手段の何れかをアクセスして第２Ｍ−２から第
２Ｍ＋１の参照情報を参照することにより、前記第１か
ら第Ｎの相対位置が一致する画像情報について並列的に
動き補償を行うことを特徴とする画像処理装置。 - 【請求項２】 画面を垂直方向に隣接する第１番目から
第Ｎ番目（Ｎは２以上の整数）までのＮ個の画像領域に
分割し、該画像領域を単位として前記画面の画像情報を
並列的に動き補償して復号する画像処理装置であって、 前記画像情報を輝度情報と色差情報とに分割する第１の
情報分割手段と、 前記第１番目から第Ｎ番目の画像領域に対応づけて、前
記第１の情報分割手段により分割された輝度情報または
色差情報を第１から第Ｎの画像情報に分割する第２の情
報分割手段と、 前記第１から第Ｎの画像情報を第１から第Ｎの復号情報
にそれぞれ復号する第１から第Ｎの復号手段と、 前記第１番目から第Ｎ番目の画像領域のそれぞれを前記
垂直方向に隣接するように、かつ垂直方向のサイズが少
なくとも前記動き補償での動きベクトルの垂直方向の取
り得る最大値よりも大きく設定されたところの２分割し
て得られる第１番目から第２Ｎ番目までの小画像領域に
対応づけて、前記第１から第Ｎの復号情報を第１から第
２Ｎの参照情報に分割してそれぞれ記憶する第１から第
２Ｎの記憶手段と、 前記第１から第Ｎの復号情報を前記第１番目から第Ｎ番
目の画像領域に対応づけて結合する情報結合手段とを備
え、 前記第１から第Ｎの復号手段は、前記第１から第Ｎの画
像情報を前記第１から第Ｎの復号情報にそれぞれ復号す
るに際し、該第１から第Ｎの復号手段の第Ｍ（Ｍは１以
上Ｎ以下の整数）の復号手段が第２Ｍ−２から第２Ｍ＋
１の記憶手段の何れかをアクセスして第２Ｍ−２から第
２Ｍ＋１の参照情報を参照することにより、前記第１か
ら第Ｎの相対位置が一致する画像情報についてそれぞれ
並列的に動き補償を行うことを特徴とする画像処理装
置。 - 【請求項３】 画面を垂直方向に隣接する第１番目から
第Ｎ番目（Ｎは２以上の整数）までのＮ個の画像領域に
分割し、該画像領域を単位として前記画面の画像情報を
並列的に動き補償して復号する画像処理装置であって、 前記画像情報を色成分に基づいて分割する第１の情報分
割手段と、 前記第１番目から第Ｎ番目の画像領域に対応づけて、前
記第１の情報分割手段により分割された画像情報を第１
から第Ｎの画像情報に分割する第２の情報分割手段と、 前記第１から第Ｎの画像情報を第１から第Ｎの復号情報
にそれぞれ復号する第１から第Ｎの復号手段と、 前記第１番目から第Ｎ番目の画像領域のそれぞれを前記
垂直方向に隣接するように、かつ垂直方向のサイズが少
なくとも前記動き補償での動きベクトルの垂直方向の取
り得る最大値よりも大きく設定されたところの２分割し
て得られる第１番目から第２Ｎ番目までの小画像領域に
対応づけて、前記第１から第Ｎの復号情報を第１から第
２Ｎの参照情報に分割してそれぞれ記憶する第１から第
２Ｎの記憶手段と、 前記第１から第Ｎの復号情報を前記第１番目から第Ｎ番
目の画像領域に対応づけて結合する情報結合手段とを備
え、 前記第１から第Ｎの復号手段は、前記第１から第Ｎの画
像情報を前記第１から第Ｎの復号情報にそれぞれ復号す
るに際し、該第１から第Ｎの復号手段の第Ｍ（Ｍは１以
上Ｎ以下の整数）の復号手段が第２Ｍ−２から第２Ｍ＋
１の記憶手段の何れかをアクセスして第２Ｍ−２から第
２Ｍ＋１の参照情報を参照することにより、前記第１か
ら第Ｎの相対位置が一致する画像情報についてそれぞれ
並列的に動き補償を行うことを特徴とする画像処理装
置。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP31525796A JP3510433B2 (ja) | 1996-11-26 | 1996-11-26 | 画像処理装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP31525796A JP3510433B2 (ja) | 1996-11-26 | 1996-11-26 | 画像処理装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH10164584A JPH10164584A (ja) | 1998-06-19 |
| JP3510433B2 true JP3510433B2 (ja) | 2004-03-29 |
Family
ID=18063262
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP31525796A Expired - Fee Related JP3510433B2 (ja) | 1996-11-26 | 1996-11-26 | 画像処理装置 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP3510433B2 (ja) |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20150043645A1 (en) * | 2012-06-20 | 2015-02-12 | Google Inc. | Video stream partitioning to allow efficient concurrent hardware decoding |
| US9100657B1 (en) | 2011-12-07 | 2015-08-04 | Google Inc. | Encoding time management in parallel real-time video encoding |
| US9357223B2 (en) | 2008-09-11 | 2016-05-31 | Google Inc. | System and method for decoding using parallel processing |
| US9794574B2 (en) | 2016-01-11 | 2017-10-17 | Google Inc. | Adaptive tile data size coding for video and image compression |
| US10542258B2 (en) | 2016-01-25 | 2020-01-21 | Google Llc | Tile copying for video compression |
Families Citing this family (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP4906197B2 (ja) * | 2000-05-29 | 2012-03-28 | ソニー株式会社 | 復号装置および方法、並びに記録媒体 |
| KR20020000392A (ko) * | 2000-06-24 | 2002-01-05 | 박종섭 | 가변 복호기의 자가 진단 장치 |
| JP2005332372A (ja) * | 2004-04-23 | 2005-12-02 | Ricoh Co Ltd | 画像処理装置及び画像形成装置 |
| US8300700B2 (en) | 2005-09-20 | 2012-10-30 | Mitsubishi Electric Corporation | Image encoding method and image decoding method, image encoder and image decoder, and image encoded bit stream and recording medium |
| US8300694B2 (en) | 2005-09-20 | 2012-10-30 | Mitsubishi Electric Corporation | Image encoding method and image decoding method, image encoder and image decoder, and image encoded bit stream and recording medium |
| EP2228997B1 (en) * | 2005-09-20 | 2017-10-18 | Mitsubishi Electric Corporation | Image decoding method, Image decoder. |
| US8306112B2 (en) | 2005-09-20 | 2012-11-06 | Mitsubishi Electric Corporation | Image encoding method and image decoding method, image encoder and image decoder, and image encoded bit stream and recording medium |
| KR101366091B1 (ko) * | 2006-03-28 | 2014-02-21 | 삼성전자주식회사 | 영상 부호화 및 복호화 방법과 장치 |
| JP5309700B2 (ja) * | 2008-06-03 | 2013-10-09 | 富士通株式会社 | 動画像復号装置および符号化装置 |
| CN102057678A (zh) | 2008-06-10 | 2011-05-11 | 松下电器产业株式会社 | 解码装置、解码方法及接收装置 |
| JP5999515B2 (ja) | 2012-02-28 | 2016-09-28 | パナソニックＩｐマネジメント株式会社 | 画像処理装置、及び、画像処理方法 |
| JP6070223B2 (ja) * | 2013-01-31 | 2017-02-01 | 株式会社Ｊｖｃケンウッド | 映像信号処理装置及び方法 |
| JP7317630B2 (ja) * | 2019-08-14 | 2023-07-31 | キヤノン株式会社 | 画像処理装置、画像処理方法、及びプログラム |
-
1996
- 1996-11-26 JP JP31525796A patent/JP3510433B2/ja not_active Expired - Fee Related
Cited By (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US9357223B2 (en) | 2008-09-11 | 2016-05-31 | Google Inc. | System and method for decoding using parallel processing |
| USRE49727E1 (en) | 2008-09-11 | 2023-11-14 | Google Llc | System and method for decoding using parallel processing |
| US9100657B1 (en) | 2011-12-07 | 2015-08-04 | Google Inc. | Encoding time management in parallel real-time video encoding |
| US9762931B2 (en) | 2011-12-07 | 2017-09-12 | Google Inc. | Encoding time management in parallel real-time video encoding |
| US20150043645A1 (en) * | 2012-06-20 | 2015-02-12 | Google Inc. | Video stream partitioning to allow efficient concurrent hardware decoding |
| US9794574B2 (en) | 2016-01-11 | 2017-10-17 | Google Inc. | Adaptive tile data size coding for video and image compression |
| US10542258B2 (en) | 2016-01-25 | 2020-01-21 | Google Llc | Tile copying for video compression |
Also Published As
| Publication number | Publication date |
|---|---|
| JPH10164584A (ja) | 1998-06-19 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP3510433B2 (ja) | 画像処理装置 | |
| US5581310A (en) | Architecture for a high definition video frame memory and an accompanying data organization for use therewith and efficient access therefrom | |
| US6088047A (en) | Motion compensated digital video decoding with buffered picture storage memory map | |
| JP3742167B2 (ja) | 画像表示制御装置 | |
| US5920352A (en) | Image memory storage system and method for a block oriented image processing system | |
| KR100440522B1 (ko) | 화상메모리특유의하드웨어스펙에기인하는각종지연요인을저장방식및판독방식의개선에의해극복한화상복호장치및화상메모리 | |
| EP0454414B1 (en) | Video signal display | |
| JP5582429B2 (ja) | デコーダおよび方法 | |
| US6493005B1 (en) | On screen display | |
| CN102523372B (zh) | 共享存储器的多视频频道显示装置和方法 | |
| US6215822B1 (en) | Motion compensated digital video decoding and buffer memory addressing therefor | |
| JP3436367B2 (ja) | デジタルビデオ信号プロセッサ装置 | |
| CN102572360B (zh) | 共享存储器多视频通道显示装置和方法 | |
| JPH08237662A (ja) | ビデオ・デコンプレッション・プロセッサのための画素内挿フィルタ | |
| JP2009534931A (ja) | 共有メモリマルチビデオチャネルディスプレイ装置および方法 | |
| US6437787B1 (en) | Display master control | |
| DE60009140T2 (de) | Verfahren und system zur dekodierung von videosequenzen und grafiken | |
| US5929911A (en) | Multiformat reduced memory MPEG-2 compliant decoder | |
| JPH08294115A (ja) | Ｍｐｅｇ復号化器及びその復号化方法 | |
| CN101461232B (zh) | 共享存储器多视频通道显示装置和方法 | |
| US7015918B2 (en) | 2-D luma and chroma DMA optimized for 4 memory banks | |
| JP2863096B2 (ja) | 並列処理による画像復号装置 | |
| JPH11143441A (ja) | 画像表示制御装置および画像表示制御方法 | |
| CN101461233A (zh) | 共享存储器多视频通道显示装置和方法 | |
| US20040213467A1 (en) | Image processing apparatus |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20031224 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20031225 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20080109 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090109 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100109 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110109 Year of fee payment: 7 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120109 Year of fee payment: 8 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130109 Year of fee payment: 9 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130109 Year of fee payment: 9 |
|
| LAPS | Cancellation because of no payment of annual fees |