JP4900721B2 - 画像処理装置 - Google Patents

画像処理装置 Download PDF

Info

Publication number
JP4900721B2
JP4900721B2 JP2008061989A JP2008061989A JP4900721B2 JP 4900721 B2 JP4900721 B2 JP 4900721B2 JP 2008061989 A JP2008061989 A JP 2008061989A JP 2008061989 A JP2008061989 A JP 2008061989A JP 4900721 B2 JP4900721 B2 JP 4900721B2
Authority
JP
Japan
Prior art keywords
luminance signal
unit
region
input
processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2008061989A
Other languages
English (en)
Other versions
JP2009218974A (ja
Inventor
祐次郎 谷
篤司 内山
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
MegaChips Corp
Original Assignee
MegaChips Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by MegaChips Corp filed Critical MegaChips Corp
Priority to JP2008061989A priority Critical patent/JP4900721B2/ja
Priority to US12/400,997 priority patent/US8224081B2/en
Publication of JP2009218974A publication Critical patent/JP2009218974A/ja
Application granted granted Critical
Publication of JP4900721B2 publication Critical patent/JP4900721B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/86—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/182—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Of Band Width Or Redundancy In Fax (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Facsimile Image Signal Circuits (AREA)

Description

本発明は、画像処理装置に関し、特に、ＨＤ Ｐｈｏｔｏにおけるエンコーダ及びデコーダに関する。
ＪＰＥＧよりも高画質で、ＪＰＥＧ２０００よりも回路構成及び演算処理が簡素化された静止画ファイルフォーマットとして、マイクロソフト社よりＨＤ Ｐｈｏｔｏ（又はＪＰＥＧ ＸＲ）が提案されている。
ＨＤ Ｐｈｏｔｏにおけるエンコーダは、所定の周波数変換処理（ＰＣＴ）を実行する周波数変換部と、ブロック歪みを軽減するための所定のプレフィルタ処理を実行するプレフィルタとを備えて構成されている。周波数変換部は、縦４画素×横４画素の画素ブロックを処理単位領域として、周波数変換処理を実行する。プレフィルタは、周波数変換部による複数の処理単位領域にオーバーラップする領域を処理単位領域として、周波数変換処理が実行される前にプレフィルタ処理を実行する。
また、ＨＤ Ｐｈｏｔｏにおけるデコーダは、上記の周波数変換処理に対応する周波数逆変換処理を実行する周波数逆変換部と、上記のプレフィルタ処理に対応するポストフィルタ処理を実行するポストフィルタとを備えて構成されている。周波数逆変換部は、縦４画素×横４画素の画素ブロックを処理単位領域として、周波数逆変換処理を実行する。ポストフィルタは、周波数逆変換部による複数の処理単位領域にオーバーラップする領域を処理単位領域として、周波数逆変換処理が実行された後にポストフィルタ処理を実行する。
さらに、ＨＤ Ｐｈｏｔｏでは、ＲＧＢ色空間で表現された画像のみならず、ＹＵＶ色空間で表現された画像をも処理可能である。ＨＤ Ｐｈｏｔｏにおけるエンコーダにおいて、ＹＵＶ色空間の画像を処理する場合には、エンコーダは、輝度信号（Ｙ信号）を処理する輝度信号処理部と、色差信号（Ｕ信号及びＶ信号）を処理する色差信号処理部とを備える。輝度信号処理部及び色差信号処理部は、上記のプレフィルタ及び周波数変換部をそれぞれ備える。あるいは、輝度信号処理部及び色差信号処理部は、一つのプレフィルタ及び一つの周波数変換部を共有する。同様に、ＨＤ Ｐｈｏｔｏにおけるデコーダにおいて、ＹＵＶ色空間の画像を処理する場合には、デコーダは、輝度信号を処理する輝度信号処理部と、色差信号を処理する色差信号処理部とを備える。輝度信号処理部及び色差信号処理部は、上記のポストフィルタ及び周波数逆変換部をそれぞれ備える。あるいは、輝度信号処理部及び色差信号処理部は、一つのポストフィルタ及び一つの周波数逆変換部を共有する。
なお、ＨＤ Ｐｈｏｔｏの詳細については、例えば下記非特許文献１に開示されており、ＪＰＥＧ ＸＲの詳細については、例えば下記非特許文献２に開示されている。
"HD Photo -Photographic Still Image File Format", [online], ２００６年１１月７日, Microsoft Corporation, [２００７年１０月１０日検索], インターネット＜URL: http://www.microsoft.com/whdc/xps/hdphotodpk.mspx＞ "Coding of Still Pictures -JBIG JPEG", [online], 19 December 2007, ISO/IEC JTC 1/SC 29/WG1 N 4392, [２００８年３月４日検索], インターネット＜URL: http://www.itscj.ipsj.or.jp/sc29/open/29view/29n9026t.doc＞
ＹＵＶ４４４形式の画像においては、画素平面の一行内における信号の個数が、Ｙ信号、Ｕ信号、及びＶ信号の全てに関して同一である。従って、ＨＤ Ｐｈｏｔｏにおけるエンコーダ及びデコーダにおいて、輝度信号処理部及び色差信号処理部は、画素平面内の同一位置の画素に関するＹ信号、Ｕ信号、及びＶ信号をそれぞれ処理可能である。
一方、ＹＵＶ４２２形式の画像においては、画素平面の一行内におけるＵ信号及びＶ信号の各個数は、Ｙ信号のそれに対して半分である。従って、ＨＤ Ｐｈｏｔｏにおけるエンコーダ及びデコーダにおいては、輝度信号処理部が処理する画素に関する画素平面内の位置と、色差信号処理部が処理する画素に関する画素平面内の位置との間にずれが生じないよう、何らかの対策を施す必要がある。
本発明はかかる事情に鑑みて成されたものであり、画素平面の一行内における信号の個数が輝度信号よりも色差信号のほうが少ない画像を処理可能な画像処理装置に関して、画素平面内における、輝度信号処理部が処理する画素の位置と、色差信号処理部が処理する画素の位置との間にずれが生じることを回避することが可能な、画像処理装置を得ることを目的とする。
本発明の第１の態様に係る画像処理装置は、輝度信号を処理する輝度信号処理部と、色差信号を処理する色差信号処理部とを備え、画素平面の一行内における信号の個数が輝度信号よりも色差信号のほうが少ない画像を処理可能な画像処理装置であって、前記輝度信号処理部は、周波数変換処理を実行する周波数変換部と、前記周波数変換部の複数の処理単位領域にオーバーラップする領域を処理単位領域として、前記周波数変換処理が実行される前にプレフィルタ処理を実行するプレフィルタと、前記輝度信号処理部の外部から輝度信号が入力され、前記プレフィルタによって処理すべき輝度信号を前記プレフィルタに入力する信号入力部とを有し、前記信号入力部は記憶部を含み、外部から前記画像処理装置への第１の入力処理ステップにおいて、前記信号入力部は、外部から入力された第１の輝度信号のうち、当該第１の入力処理ステップにおいて前記プレフィルタによって処理すべき第１部分を前記プレフィルタに入力するとともに、前記第１の輝度信号のうち残りの第２部分を前記記憶部に記憶し、前記第１の入力処理ステップに続く第２の入力処理ステップにおいて、前記信号入力部は、前記記憶部から読み出した前記第１の輝度信号の前記第２部分と、外部から入力された第２の輝度信号のうち、当該第２の入力処理ステップにおいて前記プレフィルタによって処理すべき第１部分とを前記プレフィルタに入力するとともに、前記第２の輝度信号のうち残りの第２部分を前記記憶部に記憶する。
本発明の第２の態様に係る画像処理装置は、第１の態様に係る画像処理装置において特に、各入力処理ステップにおいて、前記輝度信号処理部及び前記色差信号処理部には、同一画素に対応する輝度信号及び色差信号がそれぞれ入力されることを特徴とする。
本発明の第３の態様に係る画像処理装置は、輝度信号を処理する輝度信号処理部と、色差信号を処理する色差信号処理部とを備え、画素平面の一行内における信号の個数が輝度信号よりも色差信号のほうが少ない画像を処理可能な画像処理装置であって、前記輝度信号処理部は、周波数逆変換処理を実行する周波数逆変換部と、前記周波数逆変換部の複数の処理単位領域にオーバーラップする領域を処理単位領域として、前記周波数逆変換処理が実行された後にポストフィルタ処理を実行するポストフィルタと、前記ポストフィルタによって処理された輝度信号が前記ポストフィルタから入力され、前記輝度信号処理部の外部に輝度信号を出力する信号出力部とを有し、前記信号出力部は記憶部を含み、前記画像処理装置から外部への第１の出力処理ステップにおいて、前記信号出力部は、前記ポストフィルタから入力された第１の輝度信号のうち、当該第１の出力処理ステップにおいて外部に出力すべき第１部分を出力するとともに、前記第１の輝度信号のうち残りの第２部分を前記記憶部に記憶し、前記第１の出力処理ステップに続く第２の出力処理ステップにおいて、前記信号出力部は、前記記憶部から読み出した前記第１の輝度信号の前記第２部分と、前記ポストフィルタから入力された第２の輝度信号のうち、当該第２の出力処理ステップにおいて外部に出力すべき第１部分とを出力するとともに、前記第２の輝度信号のうち残りの第２部分を前記記憶部に記憶する。
本発明の第４の態様に係る画像処理装置は、第３の態様に係る画像処理装置において特に、各出力処理ステップにおいて、前記輝度信号処理部及び前記色差信号処理部からは、同一画素に対応する輝度信号及び色差信号がそれぞれ出力されることを特徴とする。
本発明によれば、画素平面内における、輝度信号処理部が処理する画素の位置と、色差信号処理部が処理する画素の位置との間にずれが生じることを回避することができる。
以下、本発明の実施の形態について、図面を用いて詳細に説明する。なお、異なる図面において同一の符号を付した要素は、同一又は相応する要素を示すものとする。
後述の第１の実施の形態では、本発明に係る画像処理装置をＨＤ Ｐｈｏｔｏにおけるエンコーダ（特に周波数変換器）に適用する例について説明する。また、後述の第２の実施の形態では、本発明に係る画像処理装置をＨＤ Ｐｈｏｔｏにおけるデコーダ（特に周波数逆変換器）に適用する例について説明する。
＜第１の実施の形態＞
図１は、本発明の第１の実施の形態に係る画像処理装置１の構成を示すブロック図である。画像処理装置１は、輝度信号処理部２と色差信号処理部３とを備えて構成されている。画像処理装置１は、画素平面の一行内における信号の個数が輝度信号よりも色差信号のほうが少ない画像を処理可能である。以下の例では、輝度信号処理部２は、ＹＵＶ４２２形式のＹ信号を処理し、色差信号処理部３は、ＹＵＶ４２２形式のＵ信号及びＶ信号を処理する。
輝度信号処理部２は、信号入力部２１、プレフィルタ２２、及び周波数変換部２３を備えて構成されている。信号入力部２１は記憶部２４を有しており、プレフィルタ２２は記憶部２５，２６を有している。記憶部２６は、ラインメモリであり、画素平面の行の長さに応じた記憶容量を有している。一方、記憶部２４，２５の各記憶容量は、画素平面の行の長さに依存しない。
色差信号処理部３は、プレフィルタ３２及び周波数変換部３３を備えて構成されている。プレフィルタ３２は、記憶部３５，３６を有している。記憶部３６は、ラインメモリであり、画素平面の行の長さに応じた記憶容量を有している。一方、記憶部３５の記憶容量は、画素平面の行の長さに依存しない。
図１には、輝度信号処理部２及び色差信号処理部３がプレフィルタ２２，３２を個別に備える例を示したが、一つのプレフィルタを輝度信号処理部２と色差信号処理部３とで共有しても良い。同様に、図１には、輝度信号処理部２及び色差信号処理部３が周波数変換部２３，３３を個別に備える例を示したが、一つの周波数変換部を輝度信号処理部２と色差信号処理部３とで共有しても良い。
図２は、画素平面内の一つのマクロブロックＭＢを示す図である。マクロブロックＭＢは、縦１６画素×横１６画素の、合計２５６個の画素で構成されている。マクロブロックＭＢ内には、縦４個×横４個の、合計１６個の画素ブロックＲＡが規定されている。各画素ブロックＲＡは、縦４画素×横４画素の、合計１６個の画素で構成されている。周波数変換部２３，３３は、各画素ブロックＲＡを処理単位領域として、所定の周波数変換処理（ＰＣＴ：HD Photo Core Transform）を実行する。なお、ＹＵＶ４２２形式においては、周波数変換部２３，３３の一つの処理単位領域（画素ブロックＲＡ）内に、Ｙ信号は１６個（縦４個×横４個）存在し、Ｕ信号及びＶ信号はそれぞれ８個（縦４個×横２個）存在する。
また、マクロブロックＭＢよりも上下左右の各方向に２画素ずつ広い、縦２０画素×横２０画素の画素ブロックＯＢが規定されている。画素ブロックＯＢ内には、縦５個×横５個の、合計２５個の画素ブロックＲＢが規定されている。各画素ブロックＲＢは、縦４画素×横４画素の、合計１６個の画素で構成されている。プレフィルタ２２，３２は、各画素ブロックＲＢを処理単位領域として、所定のプレフィルタ処理を実行する。但し、画素平面の周縁においては、縦４画素×横４画素の処理単位領域が確保されず、縦４画素×横２画素、縦２画素×横４画素、又は縦２画素×横２画素の画素ブロックが、プレフィルタ２２，３２の処理単位領域となる。なお、上記と同様に、ＹＵＶ４２２形式においては、プレフィルタ２２，３２の一つの処理単位領域（画素ブロックＲＢ）内に、Ｙ信号は１６個存在し、Ｕ信号及びＶ信号はそれぞれ８個存在する。
図２に示すように、プレフィルタ２２，３２の処理単位領域である画素ブロックＲＢ１（斜線ハッチングを付している）は、周波数変換部２３，３３の処理単位領域である４個の画素ブロックＲＡ１〜ＲＡ４（砂地ハッチングを付している）にオーバーラップしている。このように、プレフィルタ２２，３２は、周波数変換部２３，３３の複数の処理単位領域にオーバーラップする領域を処理単位領域として、プレフィルタ処理を実行する。その結果、ブロック歪みが低減される。
図３〜１９は、画像処理装置１の動作を説明するための図である。各図の（Ａ）は輝度信号処理部２の動作に関連し、各図の（Ｂ）は色差信号処理部３の動作に関連する。説明の簡略化のため、各図には、画素平面の左端に位置するマクロブロックＭＢに対応する画素ブロックＲ１１，Ｒ２１と、画素平面の中央に位置するマクロブロックＭＢに対応する画素ブロックＲ１２，Ｒ２２と、画素平面の右端に位置するマクロブロックＭＢに対応する画素ブロックＲ１３，Ｒ２３とを抜き出して示している。
また、説明の明確化のため、図３〜１９においては、画像処理装置１の前段の外部装置（例えば撮像素子）から輝度信号処理部２又は色差信号処理部３への輝度信号又は色差信号の入力処理が完了した領域には、ジグザグハッチングを付している。同様に、信号入力部２１からプレフィルタ２２への輝度信号の転送処理が完了した領域には、斜線ハッチングを付している。同様に、輝度信号が記憶部２４内に記憶されている領域には、横縞ハッチングを付している。同様に、プレフィルタ２２，３２によるプレフィルタ処理が完了した領域には、砂地ハッチングを付している。同様に、輝度信号又は色差信号が記憶部２５，３５内に記憶されている領域には、網目ハッチングを付している。
まず図３の（Ａ）を参照して、この時点では、画素ブロックＲ１１〜Ｒ１３のうち、各画素ブロック内の上２行の領域に関して、プレフィルタ２２によるプレフィルタ処理が完了している。この領域に関するプレフィルタ処理後の輝度信号は、記憶部２６内に記憶されている。また、図３の（Ｂ）を参照して、この時点では、画素ブロックＲ２１〜Ｒ２３のうち、各画素ブロック内の上２行の領域に関して、プレフィルタ３２によるプレフィルタ処理が完了している。この領域に関するプレフィルタ処理後の輝度信号は、記憶部３６内に記憶されている。
＜画像処理装置１への第１の入力処理ステップ＞
次に図４の（Ａ）を参照して、画像処理装置１の前段の外部装置から輝度信号処理部２の信号入力部２１に、縦１６画素×横４画素の画素ブロックに相当する、縦１６個×横４個の輝度信号（領域Ｍ１）が入力される。また、図４の（Ｂ）を参照して、画像処理装置１の前段の外部装置から色差信号処理部３に、輝度信号処理部２に輝度信号が入力された画素ブロックと同一の画素ブロック（縦１６画素×横４画素）に相当する、縦１６個×横２個の色差信号（領域Ｎ１）が入力される。
次に図５の（Ａ）を参照して、領域Ｍ１のうちの左２列の領域Ｍ２に関する輝度信号が、信号入力部２１からプレフィルタ２２に転送される。領域Ｍ１のうちの右２列の領域Ｍ３に関する輝度信号は、この時点ではプレフィルタ２２に転送されることなく、記憶部２４内に記憶される。また、図５の（Ｂ）を参照して、領域Ｎ１に関する色差信号が、プレフィルタ３２に入力される。
次に図６の（Ａ）を参照して、プレフィルタ２２は、領域Ｍ２に関する縦１６個×横２個の輝度信号に対して、４行×２列のプレフィルタ素子を４回使用して、プレフィルタ処理を実行する。また、図６の（Ｂ）を参照して、プレフィルタ３２は、領域Ｎ１に関する縦１６個×横２個の色差信号に対して、４行×２列のプレフィルタ素子を４回使用して、プレフィルタ処理を実行する。
次に図７の（Ａ）を参照して、領域Ｍ２に関するプレフィルタ処理後の輝度信号が、記憶部２５内に記憶される。また、図７の（Ｂ）を参照して、領域Ｎ１に関するプレフィルタ処理後の輝度信号が、記憶部３５内に記憶される。
＜画像処理装置１への第２の入力処理ステップ＞
次に図８の（Ａ）を参照して、画像処理装置１の前段の外部装置から輝度信号処理部２の信号入力部２１に、縦１６画素×横１６画素の画素ブロックに相当する、縦１６個×横１６個の輝度信号（領域Ｍ４）が入力される。また、図８の（Ｂ）を参照して、画像処理装置１の前段の外部装置から色差信号処理部３に、輝度信号処理部２に輝度信号が入力された画素ブロックと同一の画素ブロック（縦１６画素×横１６画素）に相当する、縦１６個×横８個の色差信号（領域Ｎ２）が入力される。
次に図９の（Ａ）を参照して、記憶部２４から読み出された領域Ｍ３に関する輝度信号と、領域Ｍ４のうちの左１４列の領域Ｍ５に関する輝度信号とが、信号入力部２１からプレフィルタ２２に転送される。領域Ｍ４のうちの右２列の領域Ｍ６に関する輝度信号は、この時点ではプレフィルタ２２に転送されることなく、記憶部２４内に記憶される。また、図９の（Ｂ）を参照して、領域Ｎ２に関する色差信号が、プレフィルタ３２に入力される。
次に図１０の（Ａ）を参照して、プレフィルタ２２は、領域Ｍ３，Ｍ５に関する縦１６個×横１６個の輝度信号に対して、４行×４列のプレフィルタ素子を１６回使用して、プレフィルタ処理を実行する。また、図１０の（Ｂ）を参照して、プレフィルタ３２は、領域Ｎ２に関する縦１６個×横８個の色差信号に対して、４行×４列のプレフィルタ素子を８回使用して、プレフィルタ処理を実行する。
次に図１１の（Ａ）を参照して、領域Ｍ５のうちの右２列の領域Ｍ８に関するプレフィルタ処理後の輝度信号が、記憶部２５内に記憶される。これとともに、画素ブロックＲ１１に関する、縦１６個×横１６個のプレフィルタ処理後の輝度信号が、プレフィルタ２２から周波数変換部２３に転送される。具体的には、記憶部２６から読み出した、画素ブロックＲ１１内の上２行に関する輝度信号と、記憶部２５から読み出した、領域Ｍ２のうちの上１４行に関する輝度信号と、領域Ｍ３のうちの上１４行に関する輝度信号と、領域Ｍ５のうち左１２列の領域Ｍ７のうちの、上１４行に関する輝度信号とが、プレフィルタ２２から周波数変換部２３に転送される。周波数変換部２３は、転送されてきた輝度信号に対して周波数変換処理を実行する。なお、領域Ｍ２，Ｍ３，Ｍ７のうちの下２行に関する、プレフィルタ処理後の輝度信号は、記憶部２６内に記憶される。
また、図１１の（Ｂ）を参照して、領域Ｎ２のうちの右２列の領域Ｎ４に関するプレフィルタ処理後の色差信号が、記憶部３５内に記憶される。これとともに、画素ブロックＲ２１に関する、縦１６個×横８個のプレフィルタ処理後の色差信号が、プレフィルタ３２から周波数変換部３３に転送される。具体的には、記憶部３６から読み出した、画素ブロックＲ２１内の上２行に関する色差信号と、記憶部３５から読み出した、領域Ｎ１のうちの上１４行に関する色差信号と、領域Ｎ２のうち左６列の領域Ｎ３のうちの、上１４行に関する色差信号とが、プレフィルタ３２から周波数変換部３３に転送される。周波数変換部３３は、転送されてきた色差信号に対して周波数変換処理を実行する。なお、領域Ｎ１，Ｎ３のうちの下２行に関する、プレフィルタ処理後の色差信号は、記憶部３６内に記憶される。
＜画像処理装置１への第３の入力処理ステップ＞
次に図１２の（Ａ）を参照して、画像処理装置１の前段の外部装置から輝度信号処理部２の信号入力部２１に、縦１６画素×横１６画素の画素ブロックに相当する、縦１６個×横１６個の輝度信号（領域Ｍ９）が入力される。また、図１２の（Ｂ）を参照して、画像処理装置１の前段の外部装置から色差信号処理部３に、輝度信号処理部２に輝度信号が入力された画素ブロックと同一の画素ブロック（縦１６画素×横１６画素）に相当する、縦１６個×横８個の色差信号（領域Ｎ５）が入力される。
次に図１３の（Ａ）を参照して、記憶部２４から読み出された領域Ｍ６に関する輝度信号と、領域Ｍ９のうちの左１４列の領域Ｍ１０に関する輝度信号とが、信号入力部２１からプレフィルタ２２に転送される。領域Ｍ９のうちの右２列の領域Ｍ１１に関する輝度信号は、この時点ではプレフィルタ２２に転送されることなく、記憶部２４内に記憶される。また、図１３の（Ｂ）を参照して、領域Ｎ５に関する色差信号が、プレフィルタ３２に入力される。
次に図１４の（Ａ）を参照して、プレフィルタ２２は、領域Ｍ６，Ｍ１０に関する縦１６個×横１６個の輝度信号に対して、４行×４列のプレフィルタ素子を１６回使用して、プレフィルタ処理を実行する。また、図１４の（Ｂ）を参照して、プレフィルタ３２は、領域Ｎ５に関する縦１６個×横８個の色差信号に対して、４行×４列のプレフィルタ素子を８回使用して、プレフィルタ処理を実行する。
次に図１５の（Ａ）を参照して、領域Ｍ１０のうちの右２列の領域Ｍ１３に関するプレフィルタ処理後の輝度信号が、記憶部２５内に記憶される。これとともに、画素ブロックＲ１２に関する、縦１６個×横１６個のプレフィルタ処理後の輝度信号が、プレフィルタ２２から周波数変換部２３に転送される。具体的には、記憶部２６から読み出した、画素ブロックＲ１２内の上２行に関する輝度信号と、記憶部２５から読み出した、領域Ｍ８のうちの上１４行に関する輝度信号と、領域Ｍ６のうちの上１４行に関する輝度信号と、領域Ｍ１０のうち左１２列の領域Ｍ１２のうちの、上１４行に関する輝度信号とが、プレフィルタ２２から周波数変換部２３に転送される。周波数変換部２３は、転送されてきた輝度信号に対して周波数変換処理を実行する。なお、領域Ｍ８，Ｍ６，Ｍ１２のうちの下２行に関する、プレフィルタ処理後の輝度信号は、記憶部２６内に記憶される。
また、図１５の（Ｂ）を参照して、領域Ｎ５のうちの右２列の領域Ｎ７に関するプレフィルタ処理後の色差信号が、記憶部３５内に記憶される。これとともに、画素ブロックＲ２２に関する、縦１６個×横８個のプレフィルタ処理後の色差信号が、プレフィルタ３２から周波数変換部３３に転送される。具体的には、記憶部３６から読み出した、画素ブロックＲ２２内の上２行に関する色差信号と、記憶部３５から読み出した、領域Ｎ４のうちの上１４行に関する色差信号と、領域Ｎ５のうち左６列の領域Ｎ６のうちの、上１４行に関する色差信号とが、プレフィルタ３２から周波数変換部３３に転送される。周波数変換部３３は、転送されてきた色差信号に対して周波数変換処理を実行する。なお、領域Ｎ４，Ｎ６のうちの下２行に関する、プレフィルタ処理後の色差信号は、記憶部３６内に記憶される。
＜画像処理装置１への第４の入力処理ステップ＞
次に図１６の（Ａ）を参照して、画像処理装置１の前段の外部装置から輝度信号処理部２の信号入力部２１に、縦１６画素×横１２画素の画素ブロックに相当する、縦１６個×横１２個の輝度信号（領域Ｍ１４）が入力される。また、図１６の（Ｂ）を参照して、画像処理装置１の前段の外部装置から色差信号処理部３に、輝度信号処理部２に輝度信号が入力された画素ブロックと同一の画素ブロック（縦１６画素×横１２画素）に相当する、縦１６個×横６個の色差信号（領域Ｎ８）が入力される。なお、説明の簡略化のため、画素ブロックＲ１１〜Ｒ１３，Ｒ２１〜Ｒ２３の下段の画素ブロックに関する輝度信号又は色差信号の入力処理については、以下の説明では考慮しないものとする。
次に図１７の（Ａ）を参照して、記憶部２４から読み出された領域Ｍ１１に関する輝度信号と、領域Ｍ１４に関する輝度信号とが、信号入力部２１からプレフィルタ２２に転送される。また、図１７の（Ｂ）を参照して、領域Ｎ８に関する色差信号が、プレフィルタ３２に入力される。
次に図１８の（Ａ）を参照して、プレフィルタ２２は、領域Ｍ１１，Ｍ１４に関する縦１６個×横１４個の輝度信号に対して、４行×４列のプレフィルタ素子を１２回、及び４行×２列のプレフィルタ素子を４回使用して、プレフィルタ処理を実行する。また、図１８の（Ｂ）を参照して、プレフィルタ３２は、領域Ｎ８に関する縦１６個×横６個の色差信号に対して、４行×４列のプレフィルタ素子を４回、及び４行×２列のプレフィルタ素子を４回使用して、プレフィルタ処理を実行する。
次に図１９の（Ａ）（及び図１８の（Ａ））を参照して、画素ブロックＲ１３に関する、縦１６個×横１６個のプレフィルタ処理後の輝度信号が、プレフィルタ２２から周波数変換部２３に転送される。具体的には、記憶部２６から読み出した、画素ブロックＲ１３内の上２行に関する輝度信号と、記憶部２５から読み出した、領域Ｍ１３のうちの上１４行に関する輝度信号と、領域Ｍ１１のうちの上１４行に関する輝度信号と、領域Ｍ１４のうちの上１４行に関する輝度信号とが、プレフィルタ２２から周波数変換部２３に転送される。周波数変換部２３は、転送されてきた輝度信号に対して周波数変換処理を実行する。なお、領域Ｍ１３，Ｍ１１，Ｍ１４のうちの下２行に関する、プレフィルタ処理後の輝度信号は、記憶部２６内に記憶される。
また、図１９の（Ｂ）（及び図１８の（Ｂ））を参照して、画素ブロックＲ２３に関する、縦１６個×横８個のプレフィルタ処理後の色差信号が、プレフィルタ３２から周波数変換部３３に転送される。具体的には、記憶部３６から読み出した、画素ブロックＲ２３内の上２行に関する色差信号と、記憶部３５から読み出した、領域Ｎ７のうちの上１４行に関する色差信号と、領域Ｎ８のうちの上１４行に関する色差信号とが、プレフィルタ３２から周波数変換部３３に転送される。周波数変換部３３は、転送されてきた色差信号に対して周波数変換処理を実行する。なお、領域Ｎ７，Ｎ８のうちの下２行に関する、プレフィルタ処理後の色差信号は、記憶部３６内に記憶される。
＜まとめ＞
第１の実施の形態に係る画像処理装置１によれば、外部から画像処理装置１への第１の入力処理ステップにおいて、信号入力部２１は、外部から入力された第１の輝度信号（領域Ｍ１）のうち、当該第１の入力処理ステップにおいてプレフィルタ２２によって処理すべき第１部分（領域Ｍ２）をプレフィルタ２２に入力するとともに、第１の輝度信号のうち残りの第２部分（領域Ｍ３）を記憶部２４に記憶する。また、第１の入力処理ステップに続く第２の入力処理ステップにおいて、信号入力部２１は、記憶部２４から読み出した第１の輝度信号の第２部分（領域Ｍ３）と、外部から入力された第２の輝度信号（領域Ｍ４）のうち、当該第２の入力処理ステップにおいてプレフィルタ２２によって処理すべき第１部分（領域Ｍ５）とをプレフィルタ２２に入力するとともに、第２の輝度信号のうち残りの第２部分（領域Ｍ６）を記憶部２４に記憶する。そして、第３の入力処理ステップ以降は、第２の入力処理ステップと同様の動作が繰り返される。
また、図４に示したように、第１の入力処理ステップにおいては、画素平面内の同一の位置の画素ブロックに対応する輝度信号（領域Ｍ１）及び色差信号（領域Ｎ１）が、輝度信号処理部２及び色差信号処理部３に同時に入力される。同様に、図８に示したように、第２の入力処理ステップにおいては、画素平面内の同一の位置の画素ブロックに対応する輝度信号（領域Ｍ４）及び色差信号（領域Ｎ２）が、輝度信号処理部２及び色差信号処理部３に同時に入力される。第３の入力処理ステップ以降についても同様である。
従って、第１の実施の形態に係る画像処理装置１によれば、輝度信号及び色差信号が周波数変換部２３，３３に入力される時点よりも前に、輝度信号処理部２が処理する、画素平面内における画素の位置と、色差信号処理部３が処理する、画素平面内における画素の位置との間にずれが生じることを回避することができる。
＜第２の実施の形態＞
図２０は、本発明の第２の実施の形態に係る画像処理装置５の構成を示すブロック図である。画像処理装置５は、輝度信号処理部６と色差信号処理部７とを備えて構成されている。画像処理装置５は、画素平面の一行内における信号の個数が輝度信号よりも色差信号のほうが少ない画像を処理可能である。以下の例では、輝度信号処理部６は、ＹＵＶ４２２形式のＹ信号を処理し、色差信号処理部７は、ＹＵＶ４２２形式のＵ信号及びＶ信号を処理する。
輝度信号処理部６は、信号出力部６１、ポストフィルタ６２、及び周波数逆変換部６３を備えて構成されている。信号出力部６１は記憶部６４を有しており、ポストフィルタ６２は記憶部６５，６６を有している。記憶部６６は、ラインメモリであり、画素平面の行の長さに応じた記憶容量を有している。一方、記憶部６４，６５の各記憶容量は、画素平面の行の長さに依存しない。
色差信号処理部７は、ポストフィルタ７２及び周波数逆変換部７３を備えて構成されている。ポストフィルタ７２は、記憶部７５，７６を有している。記憶部７６は、ラインメモリであり、画素平面の行の長さに応じた記憶容量を有している。一方、記憶部７５の記憶容量は、画素平面の行の長さに依存しない。
図２０には、輝度信号処理部６及び色差信号処理部７がポストフィルタ６２，７２を個別に備える例を示したが、一つのポストフィルタを輝度信号処理部６と色差信号処理部７とで共有しても良い。同様に、図２０には、輝度信号処理部６及び色差信号処理部７が周波数逆変換部６３，７３を個別に備える例を示したが、一つの周波数逆変換部を輝度信号処理部６と色差信号処理部７とで共有しても良い。
図２を参照して、周波数逆変換部６３，７３は、各画素ブロックＲＡを処理単位領域として、上述の周波数変換処理（ＰＣＴ）に対応する所定の周波数逆変換処理を実行する。また、ポストフィルタ６２，７２は、各画素ブロックＲＢを処理単位領域として、上述のプレフィルタ処理に対応する所定のポストフィルタ処理をそれぞれ実行する。但し、画素平面の周縁においては、縦４画素×横４画素の処理単位領域が確保されず、縦４画素×横２画素、縦２画素×横４画素、又は縦２画素×横２画素の画素ブロックが、ポストフィルタ６２，７２の処理単位領域となる。
図２に示すように、ポストフィルタ６２，７２の処理単位領域である画素ブロックＲＢ１は、周波数逆変換部６３，７３の処理単位領域である４個の画素ブロックＲＡ１〜ＲＡ４にオーバーラップしている。
図２１〜３６は、画像処理装置５の動作を説明するための図である。各図の（Ａ）は輝度信号処理部６の動作に関連し、各図の（Ｂ）は色差信号処理部７の動作に関連する。説明の簡略化のため、各図には、画素平面の左端に位置するマクロブロックＭＢに対応する画素ブロックＲ３１，Ｒ４１と、画素平面の中央に位置するマクロブロックＭＢに対応する画素ブロックＲ３２，Ｒ４２と、画素平面の右端に位置するマクロブロックＭＢに対応する画素ブロックＲ３３，Ｒ４３とを抜き出して示している。
また、説明の明確化のため、図２１〜３６においては、周波数逆変換部６３，７３からポストフィルタ６２，７２への輝度信号又は色差信号の転送処理が完了した領域には、ジグザグハッチングを付している。同様に、ポストフィルタ６２，７２によってポストフィルタ処理が実行される領域には、斜線ハッチングを付している。同様に、輝度信号又は色差信号が記憶部６５，７５内に記憶されている領域には、横縞ハッチングを付している。同様に、ポストフィルタ６２，７２によるポストフィルタ処理が完了した領域には、砂地ハッチングを付している。同様に、輝度信号が記憶部６４内に記憶されている領域には、網目ハッチングを付している。
まず図２１の（Ａ）を参照して、この時点では、画素ブロックＲ３１〜Ｒ３３の上段に位置する３個の画素ブロックのうち、各画素ブロック内の上１４行の領域に関する輝度信号については、ポストフィルタ６２によるポストフィルタ処理が完了している。また、上記３個の画素ブロックのうち、各画素ブロックの下２行の領域Ｖ０に関する輝度信号については、ポストフィルタ６２によるポストフィルタ処理が実行されることなく、記憶部６６内に記憶されている。また、図２１の（Ｂ）を参照して、この時点では、画素ブロックＲ４１〜Ｒ４３の上段に位置する３個の画素ブロックのうち、各画素ブロック内の上１４行の領域に関する色差信号については、ポストフィルタ７２によるポストフィルタ処理が完了している。また、上記３個の画素ブロックのうち、各画素ブロックの下２行の領域Ｗ０に関する色差信号については、ポストフィルタ７２によるポストフィルタ処理が実行されることなく、記憶部７６内に記憶されている。
次に図２２の（Ａ）を参照して、周波数逆変換部６３からポストフィルタ６２に、縦１６画素×横１６画素の画素ブロックに相当する、縦１６個×横１６個の輝度信号（領域Ｖ１）が入力される。また、図２２の（Ｂ）を参照して、周波数逆変換部７３からポストフィルタ７２に、ポストフィルタ６２に輝度信号が入力された画素ブロックと同一の画素ブロック（縦１６画素×横１６画素）に相当する、縦１６個×横８個の色差信号（領域Ｗ１）が入力される。
次に図２３の（Ａ）を参照して、領域Ｖ２に関する輝度信号に対して、ポストフィルタ６２によるポストフィルタ処理が実行される。領域Ｖ２は、領域Ｖ１のうちの左１４列かつ上１４行の領域と、当該領域の上辺に接する、領域Ｖ０のうちの２行×１４列の領域とから成る。また、領域Ｖ２の右辺に接する１６行×２列の領域Ｖ３に関する輝度信号については、この時点ではポストフィルタ６２によるポストフィルタ処理が実行されることなく、記憶部６５内に記憶される。また、領域Ｖ１のうちの下２行の領域に関する輝度信号は、記憶部６６内に記憶される。
また、図２３の（Ｂ）を参照して、領域Ｗ２に関する色差信号に対して、ポストフィルタ７２によるポストフィルタ処理が実行される。領域Ｗ２は、領域Ｗ１のうちの左６列かつ上１４行の領域と、当該領域の上辺に接する、領域Ｗ０のうちの２行×６列の領域とから成る。また、領域Ｗ２の右辺に接する１６行×２列の領域Ｗ３に関する色差信号については、この時点ではポストフィルタ７２によるポストフィルタ処理が実行されることなく、記憶部７５内に記憶される。また、領域Ｗ１のうちの下２行の領域に関する色差信号は、記憶部７６内に記憶される。
次に図２４の（Ａ）を参照して、ポストフィルタ６２は、領域Ｖ２に関する縦１６個×横１４個の輝度信号に対して、４行×２列のポストフィルタ素子を４回、及び４行×４列のポストフィルタ素子を１２回使用して、ポストフィルタ処理を実行する。ポストフィルタ処理後の輝度信号は、信号出力部６１に転送される。また、図２４の（Ｂ）を参照して、ポストフィルタ７２は、領域Ｗ２に関する縦１６個×横６個の色差信号に対して、４行×２列のポストフィルタ素子を４回、及び４行×４列のポストフィルタ素子を４回使用して、ポストフィルタ処理を実行する。
＜画像処理装置５からの第１の出力処理ステップ＞
次に図２５の（Ａ）を参照して、領域Ｖ２のうちの左１２列の領域Ｖ４に関するポストフィルタ処理後の輝度信号が、信号出力部６１から画像処理装置５の後段の外部装置（例えば表示装置）に向けて出力される。領域Ｖ２のうちの右２列の領域Ｖ５に関するポストフィルタ処理後の輝度信号は、この時点では外部に出力されることなく、記憶部６４内に記憶される。また、図２５の（Ｂ）を参照して、領域Ｗ２に関するポストフィルタ処理後の色差信号が、画像処理装置５の後段の外部装置に向けて出力される。領域Ｖ４及び領域Ｗ２は、画素平面内の同一の画素ブロック（縦１６画素×横１２画素）に対応している。
次に図２６の（Ａ）を参照して、周波数逆変換部６３からポストフィルタ６２に、縦１６画素×横１６画素の画素ブロックに相当する、縦１６個×横１６個の輝度信号（領域Ｖ６）が入力される。また、図２６の（Ｂ）を参照して、周波数逆変換部７３からポストフィルタ７２に、ポストフィルタ６２に輝度信号が入力された画素ブロックと同一の画素ブロック（縦１６画素×横１６画素）に相当する、縦１６個×横８個の色差信号（領域Ｗ４）が入力される。
次に図２７の（Ａ）を参照して、記憶部６５から読み出した領域Ｖ３に関する輝度信号と、領域Ｖ７に関する輝度信号とに対して、ポストフィルタ６２によるポストフィルタ処理が実行される。領域Ｖ７は、領域Ｖ６のうちの左１４列かつ上１４行の領域と、当該領域の上辺に接する、領域Ｖ０のうちの２行×１４列の領域とから成る。また、領域Ｖ７の右辺に接する１６行×２列の領域Ｖ８に関する輝度信号については、この時点ではポストフィルタ６２によるポストフィルタ処理が実行されることなく、記憶部６５内に記憶される。また、領域Ｖ６のうちの下２行の領域に関する輝度信号は、記憶部６６内に記憶される。
また、図２７の（Ｂ）を参照して、記憶部７５から読み出した領域Ｗ３に関する色差信号と、領域Ｗ５に関する色差信号とに対して、ポストフィルタ７２によるポストフィルタ処理が実行される。領域Ｗ５は、領域Ｗ４のうちの左６列かつ上１４行の領域と、当該領域の上辺に接する、領域Ｗ０のうちの２行×６列の領域とから成る。また、領域Ｗ５の右辺に接する１６行×２列の領域Ｗ６に関する色差信号については、この時点ではポストフィルタ７２によるポストフィルタ処理が実行されることなく、記憶部７５内に記憶される。また、領域Ｗ４のうちの下２行の領域に関する色差信号は、記憶部７６内に記憶される。
次に図２８の（Ａ）を参照して、ポストフィルタ６２は、領域Ｖ３，Ｖ７に関する縦１６個×横１６個の輝度信号に対して、４行×４列のポストフィルタ素子を１６回使用して、ポストフィルタ処理を実行する。ポストフィルタ処理後の輝度信号は、信号出力部６１に転送される。また、図２８の（Ｂ）を参照して、ポストフィルタ７２は、領域Ｗ３，Ｗ５に関する縦１６個×横８個の色差信号に対して、４行×４列のポストフィルタ素子を８回使用して、ポストフィルタ処理を実行する。
＜画像処理装置５からの第２の出力処理ステップ＞
次に図２９の（Ａ）を参照して、記憶部６４から読み出した領域Ｖ５に関するポストフィルタ処理後の輝度信号と、領域Ｖ３に関するポストフィルタ処理後の輝度信号と、領域Ｖ７のうちの左１２列の領域Ｖ９に関するポストフィルタ処理後の輝度信号とが、信号出力部６１から画像処理装置５の後段の外部装置に向けて出力される。領域Ｖ７のうちの右２列の領域Ｖ１０に関するポストフィルタ処理後の輝度信号は、この時点では外部に出力されることなく、記憶部６４内に記憶される。また、図２９の（Ｂ）を参照して、領域Ｗ３，Ｗ５に関するポストフィルタ処理後の色差信号が、画像処理装置５の後段の外部装置に向けて出力される。領域Ｖ５，Ｖ３，Ｖ９と領域領域Ｗ３，Ｗ５とは、画素平面内の同一の画素ブロック（縦１６画素×横１６画素）に対応している。
次に図３０の（Ａ）を参照して、周波数逆変換部６３からポストフィルタ６２に、縦１６画素×横１６画素の画素ブロックに相当する、縦１６個×横１６個の輝度信号（領域Ｖ１１）が入力される。また、図３０の（Ｂ）を参照して、周波数逆変換部７３からポストフィルタ７２に、ポストフィルタ６２に輝度信号が入力された画素ブロックと同一の画素ブロック（縦１６画素×横１６画素）に相当する、縦１６個×横８個の色差信号（領域Ｗ７）が入力される。
次に図３１の（Ａ）を参照して、記憶部６５から読み出した領域Ｖ８に関する輝度信号と、領域Ｖ１２に関する輝度信号とに対して、ポストフィルタ６２によるポストフィルタ処理が実行される。領域Ｖ１２は、領域Ｖ１１のうちの左１４列かつ上１４行の領域と、当該領域の上辺に接する、領域Ｖ０のうちの２行×１４列の領域とから成る。また、領域Ｖ１２の右辺に接する１６行×２列の領域Ｖ１３に関する輝度信号については、この時点ではポストフィルタ６２によるポストフィルタ処理が実行されることなく、記憶部６５内に記憶される。また、領域Ｖ１１のうちの下２行の領域に関する輝度信号は、記憶部６６内に記憶される。
また、図３１の（Ｂ）を参照して、記憶部７５から読み出した領域Ｗ６に関する色差信号と、領域Ｗ８に関する色差信号とに対して、ポストフィルタ７２によるポストフィルタ処理が実行される。領域Ｗ８は、領域Ｗ７のうちの左６列かつ上１４行の領域と、当該領域の上辺に接する、領域Ｗ０のうちの２行×６列の領域とから成る。また、領域Ｗ８の右辺に接する１６行×２列の領域Ｗ９に関する色差信号については、この時点ではポストフィルタ７２によるポストフィルタ処理が実行されることなく、記憶部７５内に記憶される。また、領域Ｗ７のうちの下２行の領域に関する色差信号は、記憶部７６内に記憶される。
次に図３２の（Ａ）を参照して、ポストフィルタ６２は、領域Ｖ８，Ｖ１２に関する縦１６個×横１６個の輝度信号に対して、４行×４列のポストフィルタ素子を１６回使用して、ポストフィルタ処理を実行する。ポストフィルタ処理後の輝度信号は、信号出力部６１に転送される。また、図３２の（Ｂ）を参照して、ポストフィルタ７２は、領域Ｗ６，Ｗ８に関する縦１６個×横８個の色差信号に対して、４行×４列のポストフィルタ素子を８回使用して、ポストフィルタ処理を実行する。
＜画像処理装置５からの第３の出力処理ステップ＞
次に図３３の（Ａ）を参照して、記憶部６４から読み出した領域Ｖ１０に関するポストフィルタ処理後の輝度信号と、領域Ｖ８に関するポストフィルタ処理後の輝度信号と、領域Ｖ１２のうちの左１２列の領域Ｖ１４に関するポストフィルタ処理後の輝度信号とが、信号出力部６１から画像処理装置５の後段の外部装置に向けて出力される。領域Ｖ１２のうちの右２列の領域Ｖ１５に関するポストフィルタ処理後の輝度信号は、この時点では外部に出力されることなく、記憶部６４内に記憶される。また、図３３の（Ｂ）を参照して、領域Ｗ６，Ｗ８に関するポストフィルタ処理後の色差信号が、画像処理装置５の後段の外部装置に向けて出力される。領域Ｖ１０，Ｖ８，Ｖ１４と領域領域Ｗ６，Ｗ８とは、画素平面内の同一の画素ブロック（縦１６画素×横１６画素）に対応している。
次に図３４の（Ａ）を参照して、記憶部６５から読み出した領域Ｖ１３に関する輝度信号に対して、ポストフィルタ６２によるポストフィルタ処理が実行される。また、図３４の（Ｂ）を参照して、記憶部７５から読み出した領域Ｗ９に関する色差信号に対して、ポストフィルタ７２によるポストフィルタ処理が実行される。
次に図３５の（Ａ）を参照して、ポストフィルタ６２は、領域Ｖ１３に関する縦１６個×横２個の輝度信号に対して、４行×２列のポストフィルタ素子を４回使用して、ポストフィルタ処理を実行する。ポストフィルタ処理後の輝度信号は、信号出力部６１に転送される。また、図３５の（Ｂ）を参照して、ポストフィルタ７２は、領域Ｗ９に関する縦１６個×横２個の色差信号に対して、４行×２列のポストフィルタ素子を４回使用して、ポストフィルタ処理を実行する。
＜画像処理装置５からの第４の出力処理ステップ＞
次に図３６の（Ａ）（及び図３５の（Ａ））を参照して、記憶部６４から読み出した領域Ｖ１５に関するポストフィルタ処理後の輝度信号と、領域Ｖ１３に関するポストフィルタ処理後の輝度信号とが、信号出力部６１から画像処理装置５の後段の外部装置に向けて出力される。また、図３６の（Ｂ）（及び図３５の（Ｂ））を参照して、領域Ｗ９に関するポストフィルタ処理後の色差信号が、画像処理装置５の後段の外部装置に向けて出力される。領域Ｖ１５，Ｖ１３と領域領域Ｗ９とは、画素平面内の同一の画素ブロック（縦１６画素×横４画素）に対応している。
＜まとめ＞
第２の実施の形態に係る画像処理装置５によれば、画像処理装置５から外部への第１の出力処理ステップにおいて、信号出力部６１は、ポストフィルタ６２から入力された第１の輝度信号（領域Ｖ２）のうち、当該第１の出力処理ステップにおいて外部に出力すべき第１部分（領域Ｖ４）を出力するとともに、第１の輝度信号のうち残りの第２部分（領域Ｖ５）を記憶部６４に記憶する。また、第１の出力処理ステップに続く第２の出力処理ステップにおいて、信号出力部６１は、記憶部６４から読み出した第１の輝度信号の第２部分（領域Ｖ５）と、ポストフィルタ６２から入力された第２の輝度信号（領域Ｖ３，Ｖ７）のうち、当該第２の出力処理ステップにおいて外部に出力すべき第１部分（領域Ｖ３，Ｖ９）とを出力するとともに、第２の輝度信号のうち残りの第２部分（領域Ｖ１０）を記憶部６４に記憶する。そして、第３の出力処理ステップ以降は、第２の出力処理ステップと同様の動作が繰り返される。
また、図２５に示したように、第１の出力処理ステップにおいては、画素平面内の同一の位置の画素ブロックに対応する輝度信号（領域Ｖ４）及び色差信号（領域Ｗ２）が、輝度信号処理部６及び色差信号処理部７から同時に出力される。同様に、図２９に示したように、第２の出力処理ステップにおいては、画素平面内の同一の位置の画素ブロックに対応する輝度信号（領域Ｖ５，Ｖ３，Ｖ９）及び色差信号（領域Ｗ３，Ｗ５）が、輝度信号処理部６及び色差信号処理部７から同時に出力される。第３の出力処理ステップ以降についても同様である。
従って、第２の実施の形態に係る画像処理装置５によれば、ポストフィルタ処理後の輝度信号及び色差信号が画像処理装置５から出力される時点よりも前に、輝度信号処理部６が処理する、画素平面内における画素の位置と、色差信号処理部７が処理する、画素平面内における画素の位置との間にずれが生じることを回避することができる。
本発明の第１の実施の形態に係る画像処理装置の構成を示すブロック図である。 画素平面内の一つのマクロブロックを示す図である。 画像処理装置の動作を説明するための図である。 画像処理装置の動作を説明するための図である。 画像処理装置の動作を説明するための図である。 画像処理装置の動作を説明するための図である。 画像処理装置の動作を説明するための図である。 画像処理装置の動作を説明するための図である。 画像処理装置の動作を説明するための図である。 画像処理装置の動作を説明するための図である。 画像処理装置の動作を説明するための図である。 画像処理装置の動作を説明するための図である。 画像処理装置の動作を説明するための図である。 画像処理装置の動作を説明するための図である。 画像処理装置の動作を説明するための図である。 画像処理装置の動作を説明するための図である。 画像処理装置の動作を説明するための図である。 画像処理装置の動作を説明するための図である。 画像処理装置の動作を説明するための図である。 本発明の第２の実施の形態に係る画像処理装置の構成を示すブロック図である。 画像処理装置の動作を説明するための図である。 画像処理装置の動作を説明するための図である。 画像処理装置の動作を説明するための図である。 画像処理装置の動作を説明するための図である。 画像処理装置の動作を説明するための図である。 画像処理装置の動作を説明するための図である。 画像処理装置の動作を説明するための図である。 画像処理装置の動作を説明するための図である。 画像処理装置の動作を説明するための図である。 画像処理装置の動作を説明するための図である。 画像処理装置の動作を説明するための図である。 画像処理装置の動作を説明するための図である。 画像処理装置の動作を説明するための図である。 画像処理装置の動作を説明するための図である。 画像処理装置の動作を説明するための図である。 画像処理装置の動作を説明するための図である。
符号の説明
１，５ 画像処理装置
２，６ 輝度信号処理部
３，７ 色差信号処理部
２１ 信号入力部
２２，３２ プレフィルタ
２３，３３ 周波数変換部
２４〜２６，３５，３６，６４〜６６，７５，７６ 記憶部
６１ 信号出力部
６２，７２ ポストフィルタ
６３，７３ 周波数逆変換部

Claims (4)

  1. 輝度信号を処理する輝度信号処理部と、色差信号を処理する色差信号処理部とを備え、画素平面の一行内における信号の個数が輝度信号よりも色差信号のほうが少ない画像を処理可能な画像処理装置であって、
    前記輝度信号処理部は、
    周波数変換処理を実行する周波数変換部と、
    前記周波数変換部の複数の処理単位領域にオーバーラップする領域を処理単位領域として、前記周波数変換処理が実行される前にプレフィルタ処理を実行するプレフィルタと、
    前記輝度信号処理部の外部から輝度信号が入力され、前記プレフィルタによって処理すべき輝度信号を前記プレフィルタに入力する信号入力部と
    を有し、
    前記信号入力部は記憶部を含み、
    外部から前記画像処理装置への第１の入力処理ステップにおいて、前記信号入力部は、外部から入力された第１の輝度信号のうち、当該第１の入力処理ステップにおいて前記プレフィルタによって処理すべき第１部分を前記プレフィルタに入力するとともに、前記第１の輝度信号のうち残りの第２部分を前記記憶部に記憶し、
    前記第１の入力処理ステップに続く第２の入力処理ステップにおいて、前記信号入力部は、前記記憶部から読み出した前記第１の輝度信号の前記第２部分と、外部から入力された第２の輝度信号のうち、当該第２の入力処理ステップにおいて前記プレフィルタによって処理すべき第１部分とを前記プレフィルタに入力するとともに、前記第２の輝度信号のうち残りの第２部分を前記記憶部に記憶する、画像処理装置。
  2. 各入力処理ステップにおいて、前記輝度信号処理部及び前記色差信号処理部には、同一画素に対応する輝度信号及び色差信号がそれぞれ入力される、請求項１に記載の画像処理装置。
  3. 輝度信号を処理する輝度信号処理部と、色差信号を処理する色差信号処理部とを備え、画素平面の一行内における信号の個数が輝度信号よりも色差信号のほうが少ない画像を処理可能な画像処理装置であって、
    前記輝度信号処理部は、
    周波数逆変換処理を実行する周波数逆変換部と、
    前記周波数逆変換部の複数の処理単位領域にオーバーラップする領域を処理単位領域として、前記周波数逆変換処理が実行された後にポストフィルタ処理を実行するポストフィルタと、
    前記ポストフィルタによって処理された輝度信号が前記ポストフィルタから入力され、前記輝度信号処理部の外部に輝度信号を出力する信号出力部と
    を有し、
    前記信号出力部は記憶部を含み、
    前記画像処理装置から外部への第１の出力処理ステップにおいて、前記信号出力部は、前記ポストフィルタから入力された第１の輝度信号のうち、当該第１の出力処理ステップにおいて外部に出力すべき第１部分を出力するとともに、前記第１の輝度信号のうち残りの第２部分を前記記憶部に記憶し、
    前記第１の出力処理ステップに続く第２の出力処理ステップにおいて、前記信号出力部は、前記記憶部から読み出した前記第１の輝度信号の前記第２部分と、前記ポストフィルタから入力された第２の輝度信号のうち、当該第２の出力処理ステップにおいて外部に出力すべき第１部分とを出力するとともに、前記第２の輝度信号のうち残りの第２部分を前記記憶部に記憶する、画像処理装置。
  4. 各出力処理ステップにおいて、前記輝度信号処理部及び前記色差信号処理部からは、同一画素に対応する輝度信号及び色差信号がそれぞれ出力される、請求項３に記載の画像処理装置。
JP2008061989A 2008-03-12 2008-03-12 画像処理装置 Expired - Fee Related JP4900721B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2008061989A JP4900721B2 (ja) 2008-03-12 2008-03-12 画像処理装置
US12/400,997 US8224081B2 (en) 2008-03-12 2009-03-10 Image processor

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2008061989A JP4900721B2 (ja) 2008-03-12 2008-03-12 画像処理装置

Publications (2)

Publication Number Publication Date
JP2009218974A JP2009218974A (ja) 2009-09-24
JP4900721B2 true JP4900721B2 (ja) 2012-03-21

Family

ID=41063092

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008061989A Expired - Fee Related JP4900721B2 (ja) 2008-03-12 2008-03-12 画像処理装置

Country Status (2)

Country Link
US (1) US8224081B2 (ja)
JP (1) JP4900721B2 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014087861A1 (ja) * 2012-12-06 2014-06-12 ソニー株式会社 画像処理装置、画像処理方法、およびプログラム

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2655793A1 (fr) * 1989-12-08 1991-06-14 Philips Laboratoires Philips Procede et dispositif de decodage d'images animees.
JP2909239B2 (ja) * 1991-03-27 1999-06-23 株式会社東芝 高能率符号化記録再生装置
AU698055B2 (en) * 1994-07-14 1998-10-22 Johnson-Grace Company Method and apparatus for compressing images
JPH11220729A (ja) * 1998-02-03 1999-08-10 Sony Corp 映像符号化装置、映像復号化装置及び歪み検出装置
JP2002010268A (ja) * 2000-06-27 2002-01-11 Mitsubishi Electric Corp 画像符号化装置および画像符号化方法
JP2002237953A (ja) * 2001-02-07 2002-08-23 Sony Corp 画像データ処理装置およびその方法、ならびにカメラ・システム
US7085320B2 (en) * 2001-07-31 2006-08-01 Wis Technologies, Inc. Multiple format video compression
KR100663430B1 (ko) * 2002-04-22 2007-01-02 삼성전자주식회사 휴대용 단말기의 줌화면 표시장치 및 방법
US7379609B2 (en) * 2002-07-19 2008-05-27 Samsung Electronics Co., Ltd. Image processing apparatus and method for conversion between raster and block formats
US7792194B2 (en) * 2003-04-10 2010-09-07 Lefan Zhong MPEG artifacts post-processed filtering architecture
JP4689440B2 (ja) * 2005-11-04 2011-05-25 キヤノン株式会社 撮像装置、及び処理方法
SG140508A1 (en) * 2006-08-31 2008-03-28 St Microelectronics Asia Multimode filter for de-blocking and de-ringing
US8098941B2 (en) * 2007-04-03 2012-01-17 Aptina Imaging Corporation Method and apparatus for parallelization of image compression encoders

Also Published As

Publication number Publication date
JP2009218974A (ja) 2009-09-24
US20090232393A1 (en) 2009-09-17
US8224081B2 (en) 2012-07-17

Similar Documents

Publication Publication Date Title
US20210076051A1 (en) Coding apparatus, coding method, decoding apparatus, and decoding method
EP1613095B1 (en) Deblocking filter apparatus and methods using sub-macro-block-shifting register arrays
JP4680608B2 (ja) 画像復号装置及び方法
JP2011097556A (ja) ビデオ圧縮のためのデブロッキング装置及び方法
TW201233188A (en) Image processing device and image processing method
KR20060060919A (ko) Ｈ.264/ｍｐｅｇ-4 에서의 블록킹 효과를 제거하기 위한디블록 필터 및 필터링 방법
TWI290438B (en) A pipelined deblocking filter
JP2014011634A (ja) 画像符号化装置、画像符号化方法及びプログラム、画像復号装置、画像復号方法及びプログラム
CN103986929A (zh) 图像处理设备
EP2880861B1 (en) Method and apparatus for video processing incorporating deblocking and sample adaptive offset
EP1771009A1 (en) Image encoding device, image decoding device, and integrated circuit used therein
JP3940672B2 (ja) 画像処理装置及び画像処理方法
US8971401B2 (en) Image decoding device
JP4900721B2 (ja) 画像処理装置
JP4896944B2 (ja) 画像復号装置
JP4919231B2 (ja) 画像処理装置
JP4900722B2 (ja) 画像処理装置
CN115170409A (zh) 图像处理方法、装置、设备、可读存储介质及程序产品
TW201116064A (en) Deblocking apparatus and method for video compression
JP2000069478A (ja) 画像処理装置及び方法並びに記憶媒体
JP4963690B2 (ja) 画像処理装置
US8494293B2 (en) Image processor
JP2005252514A (ja) デジタル画像信号復号化装置及び復号化方法
JP5240916B2 (ja) 画像処理装置
JP5061330B2 (ja) 画像処理装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20110303

RD01 Notification of change of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7421

Effective date: 20110621

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20111206

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20111208

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20111221

R150 Certificate of patent or registration of utility model

Ref document number: 4900721

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150113

Year of fee payment: 3

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees