JP3915802B2 - Image decoding method and image decoding apparatus - Google Patents

Image decoding method and image decoding apparatus Download PDF

Info

Publication number
JP3915802B2
JP3915802B2 JP2004198752A JP2004198752A JP3915802B2 JP 3915802 B2 JP3915802 B2 JP 3915802B2 JP 2004198752 A JP2004198752 A JP 2004198752A JP 2004198752 A JP2004198752 A JP 2004198752A JP 3915802 B2 JP3915802 B2 JP 3915802B2
Authority
JP
Japan
Prior art keywords
signal
field
generated
interpolation
pixel
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Lifetime
Application number
JP2004198752A
Other languages
Japanese (ja)
Other versions
JP2004336817A (en
Inventor
裕弘 平野
教洋 鈴木
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hitachi Ltd
Original Assignee
Hitachi Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hitachi Ltd filed Critical Hitachi Ltd
Priority to JP2004198752A priority Critical patent/JP3915802B2/en
Publication of JP2004336817A publication Critical patent/JP2004336817A/en
Application granted granted Critical
Publication of JP3915802B2 publication Critical patent/JP3915802B2/en
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Images

Landscapes

  • Television Systems (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Description

本発明は画像信号を高能率符号化して送受信する画像信号の符号化・復号化方式および装置に係り、特に、動き補償予測符号化と直交変換符号化を組み合せたビデオ符号化の動きベクトルで、復号した画像信号に対して動き補償の走査変換を行なって高品質な画像で受像するに好適な画像信号の符号化・復号化方法と装置に係る。
The present invention relates to an image signal encoding / decoding method and apparatus for transmitting and receiving an image signal with high efficiency encoding, and in particular, a motion vector of video encoding that combines motion compensated prediction encoding and orthogonal transform encoding. performs a scan conversion of motion compensation on the decoded image signal according to the encoding and decoding method and apparatus suitable for image signals to the image receiving a high-quality image.

画像信号の高能率符号化の分野では、これまで種々の符号化方式が考案されてきた。このうち、動き補償予測符号化と直交変換符号化を組み合せたビデオ符号化方式は、前フレームの信号を動きベクトルで動き補償して生成した予測信号と、現フレームの信号との差分信号を予測誤差信号として抽出し、この予測誤差信号をＤＣＴ変換（離散コサイン変換）した変換係数を符号化することで、圧縮効率の高い符号化が実現できる。そして、国際標準規格であるＭＰＥＧ１、ＭＰＥＧ２のビデオ符号化に採用され、今後のティジタル放送やＣＡＴＶやパッケージメディアを対象とした研究開発が進められている。この符号化方式を用いるディジタル放送では、２０メガ前後のビットレートで、原画像と同等の高品質な画像が受像できる。ただ、画像信号の多くはインタレース走査であるため、これに起因したラインフリッカやペアリングなどのインタレース妨害による画質劣化が発生するという問題が残る。
In the field of high-efficiency encoding of image signals, various encoding schemes have been devised so far. Of these, video encoding system that combines a motion compensation prediction coding and orthogonal transform coding, the prediction signal generated by motion compensation with motion vector signal of the previous frame, predicting a difference signal between the signal of the current frame By encoding a transform coefficient obtained by extracting the error signal and performing DCT transform (discrete cosine transform) on the prediction error signal, coding with high compression efficiency can be realized. It has been adopted for MPEG1 and MPEG2 video coding, which are international standards, and research and development for future digital broadcasting, CATV, and package media are underway. In digital broadcasting using this encoding method, a high-quality image equivalent to the original image can be received at a bit rate of about 20 mega. However, since most of the image signals are interlaced scanning, there remains a problem that image quality deterioration due to interlace interference such as line flicker and pairing due to this occurs.

一方、インタレース妨害を低減する技術として、インタレース走査で抜けた走査線の信号を補間処理で生成してノンインタレース走査の信号で表示するインタレース〜ノンインタレース変換が知られている。ただ、補償信号の生成に、画像の動きに応じて特性を変化させる動き適応の信号処理が必要になる。しかし、動きの情報はインタレース走査の信号で検出するために検出もれや誤検出が発生し、これに起因した画像劣化が発生するという問題がある。   On the other hand, as a technique for reducing interlace interference, interlace to non-interlace conversion is known in which a scanning line signal missing in interlace scanning is generated by interpolation processing and displayed as a non-interlace scanning signal. However, the generation of the compensation signal requires motion adaptive signal processing that changes the characteristics according to the motion of the image. However, since motion information is detected by an interlaced scanning signal, there is a problem that a detection error or a false detection occurs, and image deterioration due to this occurs.

したがって、ディジタル放送の復号画像に対して上述のインタース妨害の低減技術をほどこしても、画質改善の効果は少なく、高品質というディジタル放送の特長を充分に生かすことができないという問題点がある。   Therefore, there is a problem that even if the interference interference reduction technique described above is applied to the decoded image of the digital broadcast, the effect of improving the image quality is small and the high quality digital broadcast feature cannot be fully utilized.

特開平９−１８２０３２号公報Japanese Patent Laid-Open No. 9-182032

本発明の目的は、上記の問題点の解決を図り、インタレース妨害の発生がほとんどなく、高品質・高精細な画像で受像できる画像信号の復号化方法とその装置を提供することにある。
SUMMARY OF THE INVENTION An object of the present invention is to solve the above-described problems and provide an image signal decoding method and apparatus capable of receiving a high-quality and high-definition image with almost no interlace interference.

上記目的を達成するため、例えば、特許請求の範囲に記載されるように構成する。 In order to achieve the above object, for example, it is configured as described in the claims.

本発明によれば、インタレース妨害やジャダー妨害のない高品質・高精細な画像を受像できる画像信号の符号化・復号化方式および装置が実現でき、画像の画質改善や向上に顕著な効果が得られる。   According to the present invention, it is possible to realize an image signal encoding / decoding method and apparatus capable of receiving a high-quality and high-definition image free from interlace interference and judder interference, and has a remarkable effect on image quality improvement and improvement. can get.

本発明の一実施形態における動き補償の予測符号化および動き補償の走査変換処理について、図１，図２の動作概略図をもとに説明する。
図１は、映像信号がインタレース走査で、動きが垂直方向の時の動作を示す。
同図（ａ）のフレーム間の予測符号化では、例えば、インタレース走査の第１フィールドの信号系列、第２フィールドの信号系列に対して、１フレーム期間での動きベクトルＶ（水平Ｖ x ，垂直Ｖ y ）を抽出する。なお、後述する動き補償の走査変換処理に整合する様に、動きベクトルＶは、Ｖ x ＝２ｍ，Ｖ y ＝２ｎ（ｍ＝０，±１，±２，…，ｎ＝０，±１，±２，…）の組み合せのもので抽出する。
そしと、この動きベクトルＶで動き補償して生成した予測信号と、原信号との差分を予測誤差信号として検出する。例えば、動きベクトルＶ 0 では、走査線ａと１，Ｖ 1 では走査線ａと２，Ｖ 2 では走査線ａと３との信号の差分を予測誤差信号として検出する。
一方、動き補償の走査変換処理では、インタレース走査で抜けた走査線（図中の黒丸で示す補間走査線）の信号を、動きベクトルＶをもとに生成する。例えば、第１（２）フィールドの補間走査線ａ（ａ′）は、動きベクトルＶ 0 では第２（１）フィールドの走査線αとα′から（α＋α′）／２、Ｖ 1 では走査線βとβ′）／２，Ｖ 2 では走査線γとγ′から（γ＋γ′）／２の補間信号を生成する。そして、この補間信号で、インタレース〜ノンインタレース変換を実現する。
なお、予測符号化での動きベクトルＶに対してＶ x ＝２ｍ，Ｖ y ＝２ｎの制約をもうけない場合には、動き補償の走査変換処理では動きベクトルＶのうちＶ x ＝２ｍ，Ｖ y ＝２ｎの条件を満すものを選別する。そして、この動きベクトルをもとに、上述した補間信号を生成する。
同図（ｂ）に示すフィールド間の予測符号化では第１（２）フィールドの信号系列に対して、１フィールド期間での動きベクトルを抽出し、この動きベクトルで動き補償して生成した予測信号と、第２（１）フィールドの信号との差分を予測誤差信号として検出する。
動き補償の走査変換処理では、動きベクトルＶのうち、その成分がＶ x ＝ｍ，Ｖ y ＝ｎの条件を満すものを選択する。そして、選別した動きベクトルをもとに、インタレース走査で抜けた走査線（図中の黒丸で示す補間走査線）の信号を生成する。例えば第１（２）フィールドの補間走査線ａ（ａ′）は、動きベクトルＶＶ 0 ′では第２（１）フィールドの走査線α，Ｖ 1 ′では走査界線β，Ｖ 2 ′では走査線αで、補間信号を生成する。
以上に述べた様に、本発明の一実施形態では動き補償の走査変換処理に適した動きベクトルを用いることで、理想に近い補間信号が生成できる。一方、動き補償の走査変換処理の条件を満す動きベクトルがない場合は、従来技術と同様の動き適応の信号処理で補間信号を生成する。
なお、動き補償の走査変換処理では、補間の精度は動きベクトルに左右される。このため、動きベクトルの精度が悪いと画像が劣化することが予想される。しかしながら、動き補償のフレーム間差分信号の成分が大きい領域は、従来技術と同様に動き適応の信号処理に変更することで、この種の画質の劣化は回避できる。そして、本発明の一実施形態では、従来技術に比較して、インタレース妨害が極めて少なく、かつ、解像度が高い高品質な走査変換が達成できる。
さて、映像信号には、ノンインタレース走査のものもある。例えばシネマ画像やコマーシャルフィルムは毎秒２４フレームもしくは３０フレームのノンインタレース走査のシ信号とみなすことができる。この値の信号では、大面積フリッカを回避するため、フレーム数変換の処理で例えば毎秒６０フレームの信号に変換して表示する。
第２は、この種のノンインタレース走査の映像信号に対する本発明の一実施形態における動き補償の予測符号化および動き補償の走査変換の概略図である。
予測符号化では、フレーム間での動きベクトルＶを抽出し、この動きベクトルで動き補償した前フレームの信号と現フレームの信号との差分を予測誤差信号として検出する。例えば、動きベクトルＶ 0 では走査線ａと１，Ｖ 1 では走査線ａと２、Ｖ 2 では走査線ａと３との差分を予測誤差信号として検出する。
一方、動き補償の走査変換処理では、同図に示す動きベクトルで図中の黒丸で示す補間走査線の信号を生成し、例えば標準モードはフレーム数の３０〜６０変換、シネマモードでは２４〜６０変換を実現する。すなわち、標準モードでは、補間走査線ａは、動きベクトルＶ 0 では走査線αとα′から（α＋α′）／２、Ｖ 2 では走査線βとβ′から（βとβ′）／２、Ｖ 4 では走査線γとγ′から（γ＋γ′）／２の補間信号を生成する。一方、シネマモードでは、補間走査線ａは、動きベクトルＶ 0 では走査線αとα′から（α＋α′）／２、Ｖ 3 では走査線βとβ′から（β＋β′）／２の補間信号を生成する。また、補間走査線ａ′は、動きベクトルＶ 0 では走査線γとγ′から（γ＋γ′）／２、Ｖ 4 では走査線α′とα″から（α′＋α″）／２の補間信号を生成する。そして、動き補償の走査変換処理に適したこれら動きベクトルで、理想に近い補間信号を生成する。
なお、この動き補償の走査変換処理を行なうに適したう動きベクトルがない場合は、従来と同様に、前フレームの信号、あるいは前後のフレームの信号の平均値などで、補間信号を生成する。
また、動き補償の走査変換処理は、動き補償のフレーム間差分信号の成分が小さな領域に対して行なう。そして、動きベクトルの精度の悪さに起因する画質の劣化を回避する。 したがって、本発明の一実施形態では、従来に比較して、解像度が高く、かつ、ジャダー妨害（動きの滑らかさが損なられる妨害）の少ないフレーム数変換の走査変換が達成できる。
本発明の第１の実施例について、図３に示す全体ブロック構成図により説明する。本実施例は、符号化部の動き補償予測符号化で用いる動きベクトルを、動き補償の走査変換処理に適した形態のものに制限して符号化を行なうに好適なものである。なお、本実施例では、フレーム間の動き補償予測符号化とＤＣＴ変換（離散コサイン変換）の直交変換符号化を組み合せたビデオ符号化の場合を例に説明する。 Motion compensation predictive coding and motion compensation scan conversion processing according to an embodiment of the present invention will be described with reference to the operation schematic diagrams of FIGS.
FIG. 1 shows the operation when the video signal is interlaced and the motion is in the vertical direction.
In the inter-frame predictive encoding in FIG. 6A, for example, the motion vector V (horizontal V x , horizontal frame x 1) in one frame period is applied to the signal sequence of the first field and the signal sequence of the second field in interlace scanning . Extract vertical V y ). It should be noted that the motion vector V is V x = 2m, V y = 2n (m = 0, ± 1, ± 2,..., N = 0, ± 1, so as to be consistent with the scan conversion processing for motion compensation described later . Extract with a combination of ± 2, ...).
Then, the difference between the prediction signal generated by motion compensation using the motion vector V and the original signal is detected as a prediction error signal. For example, the motion vector V 0, for detecting a difference signal of the scanning lines a and 1, V 1 the scanning lines a and 2, V in 2 scanning lines a and 3 as a prediction error signal.
On the other hand, in the motion compensation scan conversion process, a signal of a scan line (interpolated scan line indicated by a black circle in the figure) missing in interlace scan is generated based on the motion vector V. For example, the first (2) Field of the interpolated scanning line a (a '), the motion vector V 0 in the second (1) Field of the scanning lines alpha and alpha' from (α + α ') / 2 , V 1 the scanning line In β and β ′) / 2, V 2 , an interpolation signal of (γ + γ ′) / 2 is generated from the scanning lines γ and γ ′. Then, interlaced to non-interlaced conversion is realized with this interpolation signal.
Incidentally, V x = 2m relative motion vector V in the predictive coding, V y = a case without the constraints of 2n is, V x = 2m of the motion vector V in the scan conversion process of the motion compensation, V y = 2 n is selected. Based on this motion vector, the above-described interpolation signal is generated.
In the inter-field predictive coding shown in FIG. 5B, a prediction signal generated by extracting a motion vector in one field period from the signal sequence of the first (2) field and performing motion compensation with this motion vector. And the difference from the signal of the second (1) field is detected as a prediction error signal.
In the scan conversion process for motion compensation, a motion vector V whose components satisfy the conditions of V x = m and V y = n is selected. Then, based on the selected motion vector, a signal of a scanning line (interpolated scanning line indicated by a black circle in the figure) missing in interlace scanning is generated. For example, the interpolated scanning line a (a ′) in the first (2) field is the scanning line α in the second (1) field scanning line α, V 1 ′ in the motion vector VV 0 ′, and the scanning line α in V 2 ′. Thus, an interpolation signal is generated.
As described above, in one embodiment of the present invention, an interpolation signal close to ideal can be generated by using a motion vector suitable for scan conversion processing for motion compensation. On the other hand, when there is no motion vector that satisfies the conditions of the scan conversion processing for motion compensation, an interpolation signal is generated by the motion adaptive signal processing similar to the prior art.
In the scan conversion process for motion compensation, the accuracy of interpolation depends on the motion vector. For this reason, when the accuracy of the motion vector is poor, it is expected that the image deteriorates. However, this type of deterioration in image quality can be avoided by changing the motion compensation signal processing in a region where the component of the inter-frame difference signal for motion compensation is the same as in the prior art. In one embodiment of the present invention, it is possible to achieve high-quality scan conversion with extremely low interlace interference and high resolution as compared with the prior art.
Some video signals are non-interlaced. For example, cinema images and commercial films can be regarded as non-interlaced scanning signals of 24 frames or 30 frames per second. In order to avoid large-area flicker, the signal having this value is converted into a signal of, for example, 60 frames per second by a frame number conversion process and displayed.
The second is a schematic diagram of predictive coding of motion compensation and scan conversion of motion compensation in an embodiment of the present invention for a video signal of this type of non-interlaced scanning.
In predictive coding, a motion vector V between frames is extracted, and a difference between a previous frame signal and a current frame signal motion-compensated with the motion vector is detected as a prediction error signal. For example, the difference between the scanning lines a and 1 for the motion vector V 0 and the scanning lines a and 2 for V 1 and the scanning lines a and 3 for V 2 is detected as a prediction error signal.
On the other hand, in motion compensation scanning conversion processing, signals of interpolation scanning lines indicated by black circles in the figure are generated with the motion vectors shown in the figure. For example, the standard mode converts 30-60 frames, and the cinema mode 24-60. Realize the conversion. That is, in the standard mode, interpolation scanning line a is 'from (alpha + alpha' motion vector V 0 in scan lines alpha and α) / 2, V 2 the 'from (beta and beta' and scanning lines beta beta) / 2, In V 4 , an interpolation signal of (γ + γ ′) / 2 is generated from the scanning lines γ and γ ′. On the other hand, in the cinema mode, the interpolated scanning line a is an interpolated signal from the scanning lines α and α ′ to (α + α ′) / 2 for the motion vector V 0 , and from the scanning lines β and β ′ to (β + β ′) / 2 for V 3. Is generated. The interpolated scanning line a ′ is an interpolated signal from the scanning lines γ and γ ′ to (γ + γ ′) / 2 for the motion vector V 0 , and from the scanning lines α ′ and α ″ to (α ′ + α ″) / 2 for V 4. Is generated. Then, an interpolation signal close to ideal is generated with these motion vectors suitable for scan conversion processing for motion compensation.
When there is no motion vector suitable for performing the scan conversion processing for motion compensation, an interpolation signal is generated using the average value of the signal of the previous frame or the signal of the previous and subsequent frames, as in the prior art.
The motion compensation scan conversion process is performed on a region where the component of the motion compensation inter-frame difference signal is small. Then, degradation of image quality due to poor motion vector accuracy is avoided. Therefore, according to the embodiment of the present invention, it is possible to achieve scan conversion of frame number conversion with higher resolution and less judder disturbance (disturbance in which the smoothness of motion is impaired) as compared with the prior art.
A first embodiment of the present invention will be described with reference to an overall block diagram shown in FIG. The present embodiment is suitable for encoding by limiting the motion vector used in the motion compensation prediction encoding of the encoding unit to a form suitable for the scan conversion process of motion compensation. In the present embodiment, a case of video coding combining motion compensation prediction coding between frames and orthogonal transform coding of DCT transform (discrete cosine transform) will be described as an example.

同図（ａ）の符号化部では、画像信号ＶＳは前処理部１に入力し、ディジタル化、および、画像情報ＰＩ（画像フォーマットや符号化モードなどの情報）にもとづいた所定の画像フォーマット変換を行ない、符号化画像信号系列Ｓ１を生成する。例えば、ＭＰＥＧ１，２に準拠したビデオ符号化では、Ｓ１は、６つのブロック（４つの輝度信号ブロックと２つの色差信号ブロック、ブロックサイズは８画素×８ライン）で構成されるマクロブロックの信号系列になる。   In the encoding unit of FIG. 5A, the image signal VS is input to the preprocessing unit 1, digitized, and predetermined image format conversion based on image information PI (information such as image format and encoding mode). To generate an encoded image signal sequence S1. For example, in video encoding conforming to MPEG1 and 2, S1 is a macroblock signal sequence composed of six blocks (four luminance signal blocks and two color difference signal blocks, the block size is 8 pixels × 8 lines). become.

符号化画像信号系列Ｓ１は、所定の符号化モードに従い、フレーム内符号化フレーム（Ｉピクチャと略称）はＤＣＴ変換符号化、フレーム間符号化フレーム（Ｐピクチャと略称）は動き補償フレーム間予測符号化とＤＣＴ変換符号化する。
図４は、インタレース走査の画像信号に対する符号化モードの概略図である。同図（ａ）の偶数／奇数フィールドの独立符号化では、第１フィールドの信号、第２フィールドの信号でそれぞれ符号化フレームの系列を構成して符号化する。また、同図（ｂ）の順次走査変換後の符号化では、第１フィールドの信号と第２フィールドの信号とを合成して符号化フレームの系列を構成し、符号化を行なう。
一方、同図（ｃ）のフレーム間／フィールド間適応予測符号化では、第１フィールドの信号、第２フィールドの信号からなる符号化フレームの系列に対して、フレーム間とフィールド間の予測誤差信号の小さい方を選択して符号化する。以下では、同図（ａ）の独立符号化を例に、符号化の動作を説明する。 The encoded image signal sequence S1 is in accordance with a predetermined encoding mode, an intra-frame encoded frame (abbreviated as I picture) is DCT transform encoded, and an inter-frame encoded frame (abbreviated as P picture) is a motion compensation inter-frame prediction code. And DCT transform coding.
FIG. 4 is a schematic diagram of an encoding mode for an interlaced scanning image signal. In the independent encoding of the even / odd field in FIG. 5A, the sequence of the encoded frame is composed of the first field signal and the second field signal, respectively. Also, in the encoding after the progressive scan conversion in FIG. 5B, the first field signal and the second field signal are combined to form a sequence of encoded frames, and encoding is performed.
On the other hand, in the inter-frame / inter-field adaptive predictive coding shown in FIG. 6C, the inter-frame and inter-field prediction error signals are obtained for a sequence of encoded frames composed of the first field signal and the second field signal. The smaller one is selected and encoded. Hereinafter, the encoding operation will be described by taking the independent encoding of FIG.

スイッチ４，１１は、Ｉピクチャの符号化モードでは端子ａ、Ｐピクチャの符号化モードでは端子ｂに接続して符号化処理を行なう。すなわち、スイッチ４は、Ｉピクチャの時は原画像の符号化画像信号系列Ｓ１、Ｐピクチャ時は、減算部３で信号系列Ｓ１からＭＣ信号生成部１３で生成するフレーム間動き補償予測信号系列Ｓ１０を減算して得られるフレーム間予測誤差信号系列Ｓ２を、信号Ｓ３に出力する。   The switches 4 and 11 are connected to the terminal a in the I picture encoding mode and connected to the terminal b in the P picture encoding mode to perform the encoding process. That is, the switch 4 uses the encoded image signal sequence S1 of the original image for the I picture, and the interframe motion compensated prediction signal sequence S10 generated by the MC signal generation unit 13 from the signal sequence S1 by the subtraction unit 3 for the P picture. Is output as a signal S3.

ＤＣＴ部５は、信号Ｓ３の各ブロック（８画素×８ライン）の信号に対して、８行×８列のＤＣＴ変換行列との行列演算を行ない、変換係数信号系列Ｓ４を生成する。量子化部６は、所定の特性で変換係数の量子化処理を行ない、係数量子化信号系列Ｓ５を生成する。なお、量子化の特性は、バッファ部１６のバッファ滞留量に応じて制御し、所定の伝送ビットレートを確保する。   The DCT unit 5 performs a matrix operation on the signal of each block (8 pixels × 8 lines) of the signal S3 with a DCT transformation matrix of 8 rows × 8 columns to generate a transform coefficient signal sequence S4. The quantization unit 6 performs a transform coefficient quantization process with predetermined characteristics to generate a coefficient quantized signal sequence S5. Note that the quantization characteristic is controlled according to the buffer retention amount of the buffer unit 16 to ensure a predetermined transmission bit rate.

逆量子化部８は、逆量子化処理で変換係数信号系列Ｓ６を復号し、ＩＤＣＴ部９は８行×８列のＤＣＴ変換逆行列との行列演算を行ない、Ｉピクチャ時は符号化画像信号系列、Ｐピクチャ時はフレーム間予測誤差信号系列の信号Ｓ７を復号する。そして、加算部１０は、フレーム間動き補償予測信号系列Ｓ１０との加算を行ない、Ｐピクチャ時の符号化画像信号系列を復号する。スイッチ１１は、Ｉピクチャ時は端子ａ、Ｐピクチャ時は端子ｂに接続し、復号した符号化画像信号系列Ｓ８を出力する。フレームメモリ部１２では１フレームの期間遅延させた信号Ｓ９を生成する。   The inverse quantization unit 8 decodes the transform coefficient signal sequence S6 by inverse quantization processing, the IDCT unit 9 performs a matrix operation with the DCT transform inverse matrix of 8 rows × 8 columns, and an encoded image signal for I picture For a sequence or P picture, the signal S7 of the inter-frame prediction error signal sequence is decoded. Then, the addition unit 10 performs addition with the inter-frame motion compensation prediction signal sequence S10, and decodes the encoded image signal sequence for the P picture. The switch 11 is connected to the terminal a for the I picture and to the terminal b for the P picture, and outputs the decoded encoded image signal sequence S8. The frame memory unit 12 generates a signal S9 delayed for one frame.

動きベクトル検出部２は、画像情報ＰＩに応じて、復号化部での動き補償の走査変換処理にも整合した動きベクトルＭＶを抽出する。すなわち、画像信号がインタレース走査では図１の走査線補間に示した様に、フレーム間符号化では動きベクトルＶ0，Ｖ1，Ｖ2（Ｖx＝２ｍ，Ｖy＝２ｎ）を抽出する。また、画像信号がノンインタレース走査では図２の走査線補間に示した動きベクトルを抽出する。なお、動きベクトルは、ブロックマッチング法などで抽出する。そして、ＭＣ信号生成部１３は、動きベクトルＭＶで信号Ｓ９に動きの補償処理を行ない、フレーム間動き補償予測信号系列Ｓ１０を生成する。 The motion vector detection unit 2 extracts a motion vector MV that is consistent with the scan conversion processing for motion compensation in the decoding unit according to the image information PI. That is, as shown in the scanning line interpolation in FIG. 1 when the image signal is interlaced, motion vectors V 0 , V 1 and V 2 (V x = 2m, V y = 2n) are extracted in inter-frame coding. . When the image signal is non-interlaced scanning, the motion vector shown in the scanning line interpolation of FIG. 2 is extracted. The motion vector is extracted by a block matching method or the like. Then, the MC signal generation unit 13 performs a motion compensation process on the signal S9 with the motion vector MV, and generates an inter-frame motion compensation prediction signal sequence S10.

ＶＬＣ部７，１４は、係数量子化信号系列Ｓ５と動きベクトルＭＶに所定の可変長符号化処理を行ない、符号化画像データ系列Ｓ１１と、符号化動きベクトル系列Ｓ１２とを生成する。そして、多重部１５では、画像情報ＰＩの符号化パラメタなどの各種データと、符号化画像データ系列Ｓ１１と、符号化動きベクトル系列Ｓ１２を時分割に多重する処理を行ない、生成した符号化データ系列Ｓ１３をバッファ部１６に入力する。   The VLC units 7 and 14 perform a predetermined variable length encoding process on the coefficient quantized signal sequence S5 and the motion vector MV to generate an encoded image data sequence S11 and an encoded motion vector sequence S12. The multiplexing unit 15 performs a process of multiplexing the various data such as the encoding parameter of the image information PI, the encoded image data sequence S11, and the encoded motion vector sequence S12 in a time division manner, and generates the encoded data sequence. S13 is input to the buffer unit 16.

バッファ部１６から一定のビットレートで信号を読み出し、符号化ビットストリーム信号ＰＣＤを生成する。なお、図面には明示していないが、この信号ＰＣＤは伝送媒体に応じた符号誤り対策やディジタル変調などの所定のチャネル符号化（例えばディジタル放送などでは多値ＱＡＭや多値ＶＳＢなどのディジタル変調）して伝送する。   A signal is read from the buffer unit 16 at a constant bit rate, and an encoded bit stream signal PCD is generated. Although not explicitly shown in the drawing, this signal PCD is a predetermined channel encoding such as countermeasure against code error or digital modulation according to the transmission medium (for example, digital modulation such as multi-level QAM and multi-level VSB in digital broadcasting). ) And transmit.

同図（ｂ）の復号化部では、チャネル復号化して復号した復号化ビットストリーム信号ＰＣＤは、バッファ部１７に入力する。そして、バッファ部より読み出した符号化データ系列Ｓ１３は、ＤＭＰＸ部１８で、符号化画像データ系列Ｓ１１と、符号化動きベクトル系列Ｓ１２と、画像情報ＰＩの符号化パラメタ等の各種データとを分離する。   In the decoding unit shown in FIG. 5B, the decoded bit stream signal PCD decoded by channel decoding is input to the buffer unit 17. The encoded data sequence S13 read from the buffer unit is separated by the DMPX unit 18 into the encoded image data sequence S11, the encoded motion vector sequence S12, and various data such as the encoding parameter of the image information PI. .

ＩＶＬＣ部１９，２０は、可変長符号の復号処理を行ない、係数量子化信号系列Ｓ５と、動きベクトルＭＶとを復号する。   The IVLC units 19 and 20 perform a variable length code decoding process, and decode the coefficient quantized signal sequence S5 and the motion vector MV.

逆量子化部８は、逆量子化処理で変換係数信号系列Ｓ４を復号し、ＩＤＣＴ部９は、８行×８列のＤＣＴ変換逆行列との行列演算を行なう。そして、Ｉピクチャ時の復号では符号化画像信号系列、Ｐピクチャ時の復号ではフレーム間予測誤差信号系列に対応する信号Ｓ３を復号する。加算部２１は、ＭＣ信号生成部２４で生成するフレーム間動き補償予測信号系列Ｓ１０を加算し、Ｐピクチャ時の符号化画像信号系列Ｓ１４を復号する。スイッチ２２は、Ｉピクチャ時は端子ａ、Ｐピクチャ時は端子ｂに接続し、その出力に復号した符号化画像信号系列Ｓ１５を得る。   The inverse quantization unit 8 decodes the transform coefficient signal sequence S4 by inverse quantization processing, and the IDCT unit 9 performs a matrix operation with the DCT transform inverse matrix of 8 rows × 8 columns. Then, in the decoding at the time of I picture, the encoded image signal sequence is decoded, and in the decoding at the time of P picture, the signal S3 corresponding to the inter-frame prediction error signal sequence is decoded. The adding unit 21 adds the inter-frame motion compensated prediction signal sequence S10 generated by the MC signal generating unit 24, and decodes the encoded image signal sequence S14 for the P picture. The switch 22 is connected to the terminal a for I pictures and to the terminal b for P pictures, and obtains a decoded encoded image signal sequence S15 as an output thereof.

フレームメモリ部２３は、１フレームの期間遅延させた信号Ｓ９を生成し、ＭＣ信号生成部２４は、この信号に対して動きベクトルＭＶによる動きの補償処理を行ない、フレーム間動き補償予測信号系列Ｓ１０を生成する。   The frame memory unit 23 generates a signal S9 delayed by a period of one frame, and the MC signal generation unit 24 performs a motion compensation process using the motion vector MV on the signal, and performs an interframe motion compensated prediction signal sequence S10. Is generated.

ＭＣ補間部２５は、動きベクトルＭＶと、画像情報ＰＩと、信号Ｓ３のフレーム間予測誤差信号系列をもとに、図１、あるいは図２に示す様な動き補償の走査変換処理を行ない、メイン信号系列Ｓ１６と補間信号系列Ｓ１７とを生成する。
なお、この動作の詳細については後述する。
The MC interpolation unit 25 performs a motion compensation scan conversion process as shown in FIG . 1 or FIG. 2 based on the motion vector MV, the image information PI, and the inter-frame prediction error signal sequence of the signal S3. A signal sequence S16 and an interpolation signal sequence S17 are generated.
Details of this operation will be described later.

後処理部２６は、画像フォーマットの変換処理、インタレース〜ノンインタレース走査変換あるいはフレーム数変換の処理、および、アナログ信号への変換を行ない、ノンインタレース走査の画像信号ＶＳＤを復号する。この信号はノンインタレース走査の画像表示部（図面には明示せず）に呈示し、高品質・高精細な画像を受像する。   The post-processing unit 26 performs image format conversion processing, interlace to non-interlace scan conversion or frame number conversion processing, and conversion to an analog signal, and decodes the non-interlace scan image signal VSD. This signal is presented to a non-interlaced scanning image display (not shown in the drawing) to receive a high-quality and high-definition image.

以上で全体ブロック構成による説明を終え、つぎに、ＭＣ補間部２５について、図５乃至図８に示す実施例をもとに説明する。   The description of the overall block configuration is thus completed, and the MC interpolation unit 25 will be described based on the embodiments shown in FIGS.

図５は、この第１の構成例図で、動き補償の走査変換処理に用いる動きベクトルの精度が極めて高い場合に好適なものである。   FIG. 5 is a diagram illustrating the first configuration example, which is suitable when the accuracy of the motion vector used in the scan conversion processing for motion compensation is extremely high.

復号した符号化画像信号系列Ｓ１５は、フィールドメモリ部２７−１と、ＭＣＩＰ部２９とに入力する。フィールドメモリ部は１フィールド期間の信号の遅延を行なう。そして、この出力信号でメイン信号系列Ｓ１６を生成する。また、この信号をフィールドメモリ部２７−２で１フィールド期間遅延させ、信号Ｓ１５に対して１フレーム期間遅延した信号Ｓ９を生成する。なお、同図の点線で囲んだ部分は、図１に示したフレームメモリ部２３に相当する。したがって、この部分をフレームメモリとして共用する形態で構成することもできる。   The decoded encoded image signal sequence S15 is input to the field memory unit 27-1 and the MCIP unit 29. The field memory unit delays a signal for one field period. Then, the main signal series S16 is generated from this output signal. Further, this signal is delayed by one field period in the field memory unit 27-2 to generate a signal S9 delayed by one frame period with respect to the signal S15. A portion surrounded by a dotted line in the figure corresponds to the frame memory unit 23 shown in FIG. Therefore, this portion can be configured to be shared as a frame memory.

補間ＭＶ生成部２８は、画像情報ＰＩで動き補償の走査変換がインタレース〜ノンインタレース走査変換、フレーム数変換のいずれであるかを判別する。そして、前者の場合は図１、後者の場合は図２に示した様に、動きベクトルＭＶをもとに、動き補償の補間信号の生成に必要な補間動きベクトルＩＭＶを生成する。
例えば、図１（ａ）において、動きベクトルＭＶがＶ0の場合には信号Ｓ９の走査線αと信号Ｓ１５の走査線α′の信号、Ｖ1の場合には信号Ｓ９の走査部βと信号Ｓ１５の走査線β′の信号とを指定する補間動きベクトルＩＭＶを生成する。 The interpolation MV generation unit 28 determines whether the motion compensation scan conversion is interlace to non-interlace scan conversion or frame number conversion based on the image information PI. Then, as shown in FIG. 1 in the former case and in FIG. 2 in the latter case, an interpolation motion vector IMV necessary for generating a motion compensation interpolation signal is generated based on the motion vector MV.
For example, in FIG. 1A, when the motion vector MV is V 0 , the signal of the scanning line α of the signal S9 and the signal of the scanning line α ′ of the signal S15, and when the motion vector MV is V 1 , An interpolated motion vector IMV specifying the signal of the scanning line β ′ in S15 is generated.

ＭＣＩＰ部２９は、信号Ｓ９とＳ１５に対して、補間動きベクトルＩＭＶで指定する走査線の信号を取り出し、この両者の信号の平均値で動き補償の補間信号をつくり、補間信号系列Ｓ１７を生成する。   The MCIP unit 29 extracts signals of the scanning line specified by the interpolation motion vector IMV from the signals S9 and S15, generates a motion compensation interpolation signal by using the average value of both signals, and generates an interpolation signal sequence S17. .

つぎに、この第２の構成例を図６，図７に示す。これは、動きベクトルの精度が若干悪い場合にも好適なものである。   Next, this second configuration example is shown in FIGS. This is also suitable when the motion vector accuracy is slightly poor.

図６に示す構成例図において、フィールドメモリ部２７−１と２７−２とでフレームメモリを構成し、第１の構成例と同様に、メイン信号系列Ｓ１６の信号と、動き補償の走査変換処理に使用する信号Ｓ１５、および、この信号に対して１フレーム期間遅延した信号Ｓ９を生成する。なお、同図の点線で囲んだ部分は、図３に示したフレームメモリ部２３に相当するため、図３の実施例ではこの部分を共用する形態で構成することもできる。   In the configuration example diagram shown in FIG. 6, the field memory units 27-1 and 27-2 constitute a frame memory, and the signal of the main signal series S <b> 16 and motion compensation scan conversion processing are performed as in the first configuration example. And a signal S9 delayed for one frame period with respect to this signal. 3 corresponds to the frame memory unit 23 shown in FIG. 3, and therefore, the embodiment shown in FIG. 3 can be configured to share this part.

ＭＣ補間制御部３０は、動きベクトルＭＶと、画像情報ＰＩと、信号Ｓ３で得られる動き補償のフレーム間差分信号成分とで、動き補償の補間信号の生成に必要な補間動きベクトルＩＭＶと、動き適応係数ｋｍ，１−ｋｍを生成する。画像情報ＰＩで、動き補償の走査変換がインタレース〜ノンインタレース走査変換かフレーム数変換のいずれであるかを判別する。そして、前者では図１、後者では図２に示した様に、動き補償の補間信号の生成に必要な補間動きベクトルＩＭＶを生成する。ただし、第１の構成例とは異なり、この補間動きベクトルＩＭＶは、図７（ａ）に示す特性で生成する。ブロック（８画素×８ライン）単位に、信号Ｓ３の予測誤差信号、すなわち、動き補償のフレーム間差分信号成分の絶対値和Σ｜Ｓ３｜を計測する。そして、これが閾値Ｔｈ未満の時は動きベクトルの精度が高いと判断し、第１の構成例と同様に、動きベクトルＭＶをもとに補間動きベクトルＩＭＶを生成する。一方、Σ｜Ｓ３｜が閾値Ｔｈ以上では動きベクトルの精度が悪いと判断し、補間動きベクトルには０を生成する。また、動き適応係数ｋｍは、図７（ｂ）に示す様に、Σ｜Ｓ３｜の値に応じて０から１まで変化する特性の係数値を生成する。   The MC interpolation control unit 30 uses the motion vector MV, the image information PI, and the inter-frame difference signal component of motion compensation obtained by the signal S3, the interpolation motion vector IMV necessary for generating a motion compensation interpolation signal, The adaptive coefficients km and 1-km are generated. It is determined from the image information PI whether the motion compensation scan conversion is interlace to non-interlace scan conversion or frame number conversion. Then, as shown in FIG. 1 for the former and FIG. 2 for the latter, an interpolation motion vector IMV necessary for generating an interpolation signal for motion compensation is generated. However, unlike the first configuration example, the interpolation motion vector IMV is generated with the characteristics shown in FIG. The prediction error signal of the signal S3, that is, the absolute value sum Σ | S3 | of the motion compensation inter-frame difference signal component is measured for each block (8 pixels × 8 lines). When this is less than the threshold Th, it is determined that the accuracy of the motion vector is high, and an interpolated motion vector IMV is generated based on the motion vector MV, as in the first configuration example. On the other hand, if Σ | S3 | is equal to or greater than the threshold value Th, it is determined that the accuracy of the motion vector is poor, and 0 is generated as the interpolation motion vector. Further, as shown in FIG. 7B, the motion adaptive coefficient km generates a coefficient value having a characteristic that changes from 0 to 1 in accordance with the value of Σ | S3 |.

ＭＣＩＰ部２９は、信号Ｓ９とＳ１５に対して、補間動きベクトルで指定する走査線の信号を取り出し、この両者の信号の平均値で動き補償の補間信号Ｓ１８を生成する。なお、動きベクトルの精度が悪い場合はＩＭＶ＝０であるので、信号Ｓ１８は、従来技術の静止モードの補間信号と同等のものになる。   The MCIP unit 29 extracts the scanning line signal specified by the interpolation motion vector from the signals S9 and S15, and generates an interpolation signal S18 for motion compensation using the average value of both signals. Note that when the accuracy of the motion vector is poor, IMV = 0, so the signal S18 is equivalent to the interpolation signal in the still mode of the prior art.

フィールド内補間部３１は、信号Ｓ１６をもとにフイールド内演算処理を行ない、同一フィールド信号で従来技術の動画モードと同様な動画像の補間信号Ｓ１９を生成する。   The intra-field interpolation unit 31 performs intra-field calculation processing based on the signal S16, and generates a moving image interpolation signal S19 similar to the moving image mode of the prior art with the same field signal.

係数加重部３２−１は、信号Ｓ１８に動き適応係数１−ｋｍ，係数加算部３２−２は信号Ｓ１９に動き適応係数ｋｍをそれぞれ係数加重する。そして、加算部３３で両者の信号を加算し、補間信号系列Ｓ１７を生成する。   The coefficient weighting unit 32-1 weights the signal S18 with the motion adaptive coefficient 1-km, and the coefficient adding unit 32-2 weights the signal S19 with the motion adaptive coefficient km. Then, the adder 33 adds both signals to generate an interpolation signal sequence S17.

つぎに、この第３の構成例を図８に示す。これは、動きベクトルの精度が相当に悪い場合にも好適なものである。   Next, this third configuration example is shown in FIG. This is also suitable when the accuracy of the motion vector is considerably poor.

同図（ａ）の構成図において、フィールドメモリ部２７−１と２７−２とでフレームメモリを構成し、第１，第２の構成例と同様、メイン信号系列Ｓ１６の信号と、動き補償の走査変換処理に使用する信号Ｓ１５と、この信号を１フレーム期間遅延させた信号Ｓ９とを生成する。なお、同図の点線で囲んだ部分は、図３に示したフレームメモリ部２３に相当するので、図３の実施例ではこの部分を共用する形態で構成することもできる。   In the configuration diagram of FIG. 5A, the field memory units 27-1 and 27-2 constitute a frame memory, and, as in the first and second configuration examples, the signal of the main signal sequence S16 and the motion compensation A signal S15 used for the scan conversion process and a signal S9 obtained by delaying this signal by one frame period are generated. The portion surrounded by a dotted line in FIG. 3 corresponds to the frame memory unit 23 shown in FIG. 3, so that the embodiment shown in FIG. 3 can be configured to share this portion.

減算部３４は、信号Ｓ１５とＳ９との減算を行ない、フレーム間の差分信号Ｓ２０を生成する。   The subtracting unit 34 performs subtraction between the signals S15 and S9 to generate a difference signal S20 between frames.

ＭＣ補間制御部３５は、動きベクトルＭＶと、画像情報ＰＩと、信号Ｓ３の動き補償のフレーム間差分信号成分と、フレーム間の差分信号Ｓ２０とで、補間動きベクトルＩＭＶと、動き適応係数ｋｍ，１−ｋｍを生成する。画像情報ＰＩで、動き補償の走査変換がインタレース〜ノンインタレース走査変換かフレーム数変換のいずれであるかを判別する。そして、前者の時は図１、後者の時は図２に示した動き補償の補間信号の生成に必要な補間動きベクトルを、同図（ｂ）に示す特性で生成する。すなわち、Ｉピクチャでは補間動きベクトルにＩＭＶ＝０を生成する。一方、Ｐピクチャでは、動き補償のフレーム間差分信号成分の大小で生成する。すなわち、ブロック（８画素×８ライン）単位に、信号Ｓ３の絶対値和Σ｜Ｓ３｜を計測する。そして、これが閾値Ｔｈ未満の時は、動きベクトルの精度が高いと判定し、動きベクトルＭＶをもとに対応する補間動きベクトルを生成する。一方、閾値Ｔｈ以上では動きベクトルの精度は悪いと判定し、補間動きベクトルにはＩＭＶ＝０を生成する。また、動き適応係数ｋｍは、ＰピクチャではΣ｜Ｓ３｜の大小、Ｉピクチャではフレーム間の差分信号の絶対値｜Ｓ２０｜の大小で、０から１の範囲で変化する係数値を生成する。
The MC interpolation control unit 35 uses the motion vector MV, the image information PI, the inter-frame difference signal component of the motion compensation of the signal S3, and the inter-frame difference signal S20, the interpolated motion vector IMV, the motion adaptive coefficient km, 1-km is generated. It is determined from the image information PI whether the motion compensation scan conversion is interlace to non-interlace scan conversion or frame number conversion. In the former case, an interpolation motion vector necessary for generating an interpolation signal for motion compensation shown in FIG . 1 and in the latter case is generated with the characteristics shown in FIG. That is, IMV = 0 is generated as an interpolated motion vector for an I picture. On the other hand, the P picture is generated with the magnitude of the difference signal component between frames for motion compensation. That is, the absolute value sum Σ | S3 | of the signal S3 is measured for each block (8 pixels × 8 lines). When this is less than the threshold value Th, it is determined that the accuracy of the motion vector is high, and a corresponding interpolated motion vector is generated based on the motion vector MV. On the other hand, it is determined that the accuracy of the motion vector is poor above the threshold Th, and IMV = 0 is generated as the interpolated motion vector. The motion adaptation coefficient km is a magnitude of Σ | S3 | in the P picture and a magnitude of the absolute value | S20 | of the difference signal between frames in the I picture, and generates a coefficient value that varies in the range of 0 to 1.

ＭＣＩＰ部２９は、信号Ｓ９とＳ１５に対して、補間動きベクトルで指定する走査線の信号を取り出し、この両者の信号の平均値で動き補償の補間信号Ｓ１８を生成する。なお、ＩピクチャおよびＰピクチャで動きベクトルの精度が悪い場合は、ＩＭＶ＝０であるので、信号Ｓ１８は従来技術の静止モードの補間信号との同等のものになる。   The MCIP unit 29 extracts the scanning line signal specified by the interpolation motion vector from the signals S9 and S15, and generates an interpolation signal S18 for motion compensation using the average value of both signals. Note that when the accuracy of the motion vector is poor in the I picture and the P picture, IMV = 0, so that the signal S18 is equivalent to the interpolation signal in the still mode of the prior art.

フィールド内補間部３１は、信号Ｓ１６をもとにフィールド内演算処理を行ない、従来技術と同様に同一フィールドの信号で動画モードに対応する動画像の補間信号Ｓ１９を生成する。   The intra-field interpolation unit 31 performs intra-field arithmetic processing based on the signal S16, and generates a moving image interpolation signal S19 corresponding to the moving image mode using the same field signal as in the conventional technique.

係数加重部３２−１と３２−２では、信号Ｓ１８とＳ１９にそれぞれ動き適応係数１−ｋｍ，ｋｍの係数値を加重し、加算部３３で両者の信号を加算して、補間信号系列Ｓ１７を生成する。   In the coefficient weighting units 32-1 and 32-2, the signals S18 and S19 are weighted with the coefficient values of the motion adaptive coefficients 1-km and km, respectively, and both signals are added by the adding unit 33 to obtain an interpolation signal sequence S17. Generate.

なお、第２，第３の構成例における動き適応係数ｋｍは、図示した様に係数値が段階的に変化する特性で実現することが望ましいが、場合によっては０か１かの２値特性で実現することもできる。   It should be noted that the motion adaptive coefficient km in the second and third configuration examples is preferably realized with a characteristic in which the coefficient value changes stepwise as shown in the figure, but depending on the case, it may be a binary characteristic of 0 or 1. It can also be realized.

つぎに、後処理部２６の一構成例を図９により説明する。メイン信号系列Ｓ１６と、補間信号系列Ｓ１７は、画像フォーマット変換部３６−１，３６−２に入力し、符号化画像信号系列からもとの走査形態の画像信号のフォーマットへの画像フォーマット変換処理を行ない、輝度信号と２つの色差信号からなる画像系列ＶＭＳとＶＩＰとを復号する。水平時間圧縮部３７−１，３７−２は、画像情報ＰＩにより、インタレース〜ノンインタレース走査変換では水平方向に時間軸を１／２に圧縮する信号処理、フレーム数変換では例えば標準モードの３０〜６０変換は時間方向に時間軸を１／２に圧縮する信号処理を行なう。そして、時分割多重部３８では、両者の信号を時分割に多重し、ノンインタレース走査の形態の画像系列ＶＰを生成する。ＲＧＢ変換部３９は、所定のマトリクス演算の処理を行ない、３原色ＲＧＢ系の画像系列ＶＲに変換する。そして、ＤＡ変換部４０ではアナログ信号への変換を行ない、ノンインタレース走査の画像信号ＶＳＤを復号する。   Next, a configuration example of the post-processing unit 26 will be described with reference to FIG. The main signal series S16 and the interpolation signal series S17 are input to the image format conversion units 36-1 and 36-2, and an image format conversion process from the encoded image signal series to the format of the image signal in the original scanning form is performed. Then, the image series VMS and VIP composed of the luminance signal and the two color difference signals are decoded. The horizontal time compression units 37-1 and 37-2 use image information PI to perform signal processing for compressing the time axis by half in the horizontal direction in interlaced to non-interlaced scanning conversion, for example, in standard mode in frame number conversion. In the 30 to 60 conversion, signal processing for compressing the time axis by half in the time direction is performed. Then, the time division multiplexing unit 38 multiplexes both signals in a time division manner, and generates an image sequence VP in the form of non-interlaced scanning. The RGB conversion unit 39 performs a predetermined matrix calculation process and converts the image sequence VR into the three primary colors RGB system. Then, the DA converter 40 performs conversion into an analog signal, and decodes the non-interlaced scanning image signal VSD.

なお、図３のその他のブロック部は、従来のＭＰＥＧ１，２のビデオ符号化の符号化部、復号化部と同様に構成すればよいので、説明は省略する。   The other block units in FIG. 3 may be configured in the same manner as the conventional MPEG 1 and 2 video encoding encoding and decoding units, and thus the description thereof is omitted.

以上に述べた様に、本実施例によれば、インタレース妨害あるいはジャダー妨害がなく、高品質・高精細な画像で受像する画像信号の符号化・復号化装置が実現でき、画質改善に顕著な効果が達成できる。   As described above, according to this embodiment, it is possible to realize an image signal encoding / decoding apparatus that receives high-quality and high-definition images without interlace interference or judder interference, and is remarkable in improving image quality. Effects can be achieved.

つぎに、本発明の第２の実施例について、図１０に示す全体ブロック構成図で説明する。本実施例は、復号化部で動きベクトルのうちの動き補償の走査変換処理に適したものを選別し、この選別した動きベクトルを用いてノンインタレース走査の画像信号を復号するに好適なものである。なお、本実施例では、フレーム間の動き補償予測符号化とＤＣＴ直交変換符号化を組み合せたＭＰＥＧ１，２に準拠するビデオ符号化の場合を例に説明する。   Next, a second embodiment of the present invention will be described with reference to the overall block diagram shown in FIG. In this embodiment, the decoding unit selects a motion vector suitable for scan conversion processing for motion compensation, and is suitable for decoding a non-interlaced image signal using the selected motion vector. It is. In the present embodiment, a case of video coding conforming to MPEG 1 and 2 combining motion compensation prediction coding between frames and DCT orthogonal transform coding will be described as an example.

同図（ａ）の符号化部では、画像信号ＶＳは前処理部１でディジタル化、および所定の画像フォーマット変換を行ない、符号化画像信号系列Ｓ１を生成する。
すなわち、６つのブロック（４つの輝度信号ブロックと２つの色差信号ブロック、ブロックサイズは８画素×８ライン）で構成されるマクロブロックの信号系列を生成する。 In the encoding unit shown in FIG. 5A, the image signal VS is digitized by the preprocessing unit 1 and subjected to predetermined image format conversion to generate an encoded image signal sequence S1.
That is, a macroblock signal sequence composed of six blocks (four luminance signal blocks and two color difference signal blocks, block size is 8 pixels × 8 lines) is generated.

スイッチ４と１１は、フレーム内のＤＣＴ符号化を行なう符号化モードがＩピクチャでは端子ａ、動き補償フレーム間予測符号化とＤＣＴ符号化を行なう符号化モードがＰピクチャでは端子ｂに接続する。そして、ＤＣＴ部５には、Ｉピクチャの時は原画像の符号化画像信号系列Ｓ１、Ｐピクチャ時はフレーム間予測誤差信号系列Ｓ２が、それぞれ、信号Ｓ３として入力される。なお、減算部３は、ＭＣ信号生成部１３で生成するフレーム間動き補償予測信号系列Ｓ１０と符号化画像信号系列Ｓ１との減算処理で、フレーム間予測誤差信号系列Ｓ２を生成する。   The switches 4 and 11 are connected to the terminal a when the coding mode for performing DCT coding within a frame is I picture, and to the terminal b when the coding mode for performing motion compensation interframe prediction coding and DCT coding is P picture. The DCT unit 5 receives an encoded image signal sequence S1 of the original image for an I picture and an interframe prediction error signal sequence S2 for a P picture as a signal S3. The subtraction unit 3 generates an inter-frame prediction error signal sequence S2 by a subtraction process between the inter-frame motion compensation prediction signal sequence S10 and the encoded image signal sequence S1 generated by the MC signal generation unit 13.

ＤＣＴ部５は、信号Ｓ３の各ブロック（８画素×８ライン）を単位に、８行×８列のＤＣＴ変換行列との行列演算を行ない、変換係数信号系列Ｓ４を生成する。量子化部６は、変換係数を量子化して係数量子化信号系列Ｓ５を生成する。なお、所定の伝送ビットレートを確保するため、バッファ部１６のバッファ滞留量に応じて特性を変更して量子化処理を行なう。   The DCT unit 5 performs a matrix operation with the DCT transformation matrix of 8 rows × 8 columns for each block (8 pixels × 8 lines) of the signal S3 to generate a transformation coefficient signal sequence S4. The quantization unit 6 quantizes the transform coefficient to generate a coefficient quantized signal sequence S5. In order to secure a predetermined transmission bit rate, the quantization process is performed by changing the characteristics according to the buffer retention amount of the buffer unit 16.

逆量子化部８は、逆量子化の処理で変換係数信号系列Ｓ６を復号し、ＩＤＣＴ部９は８行×８列のＤＣＴ変換逆行列との行列演算を行なう。そして、エピクチャ時は符号化画像信号系列、Ｐピクチャ時はフレーム間予測誤差信号系列の信号Ｓ７を復号する。加算部１０は、フレーム間動き補償予測信号系列Ｓ１０との加算処理を行ない、Ｐピクチャ時の符号化画像信号系列を復号する。スイッチ１１は、エピクチャ時は端子ａ、Ｐピクチャ時は端子ｂに接続し、その出力の復号した符号化画像信号系列Ｓ８はフレームメモリ部１２に入力し、その出力に１フレーム期間遅延させた信号Ｓ９を得る。   The inverse quantization unit 8 decodes the transform coefficient signal sequence S6 by the inverse quantization process, and the IDCT unit 9 performs a matrix operation with the DCT transform inverse matrix of 8 rows × 8 columns. Then, the signal S7 of the encoded image signal sequence is decoded during the e-picture, and the inter-frame prediction error signal sequence is decoded during the P-picture. The adder 10 performs an addition process with the inter-frame motion compensated prediction signal sequence S10 and decodes the encoded image signal sequence for the P picture. The switch 11 is connected to the terminal a for e-picture, and to the terminal b for P-picture. The decoded encoded image signal sequence S8 of the output is input to the frame memory unit 12, and the output is a signal delayed by one frame period. Get S9.

動きベクトル検出部４１では、ブロックマッチング法などで、１フレーム期間の動きベクトルＭＶを抽出する。なお、第１の実施例とは異なり、復号化部での動き補償の走査変換処理には不都合な動きベクトルも含まれる。ＭＣ信号生成部１３は、信号Ｓ９を動きベクトルＭＶで動きの補償処理を行ない、フレーム間動き補償予測信号系列Ｓ１０を生成する。   The motion vector detection unit 41 extracts a motion vector MV for one frame period by a block matching method or the like. Unlike the first embodiment, the motion compensation scan conversion process in the decoding unit includes an inconvenient motion vector. The MC signal generation unit 13 performs a motion compensation process on the signal S9 with the motion vector MV, and generates an inter-frame motion compensated prediction signal sequence S10.

ＶＬＣ部７、１４は、係数量子化信号系列Ｓ５と動きベクトルＭＶに対して所定の可変長符号化の処理を行ない、符号化画像データ系列Ｓ１１と、符号化動きベクトル系列Ｓ１２を生成する。多重部１５は、信号系列Ｓ１１と、Ｓ１２と、画像情報ＰＩの符号化パラメタなどの各種データとを所定の時系列に多重する処理を行ない、その出力の符号化データ系列Ｓ１３をバッファ部１６に入力する。
そして、バッファ部１６から一定のビットレートで読み出し、符号化ビットストリーム信号ＰＣＤを生成する。なお、この信号ＰＣＤは、図面には明示していないが、伝送媒体に応じた符号誤り対策やディジタル変調など所定のチャネル符号化を行なって伝送する。 The VLC units 7 and 14 perform predetermined variable length coding processing on the coefficient quantized signal sequence S5 and the motion vector MV, and generate an encoded image data sequence S11 and an encoded motion vector sequence S12. The multiplexing unit 15 performs a process of multiplexing the signal series S11, S12 and various data such as the encoding parameters of the image information PI into a predetermined time series, and outputs the encoded data series S13 to the buffer unit 16. input.
And it reads out from the buffer part 16 with a fixed bit rate, and produces | generates the encoding bit stream signal PCD. The signal PCD is transmitted after being subjected to predetermined channel coding such as code error countermeasures and digital modulation according to the transmission medium, although not explicitly shown in the drawing.

同図（ｂ）の復号化部では、チャネル復号化して復号した符号化ビットストリーム信号ＰＣＤは、バッファ部１７に入力する。そして、バッファ部より読み出した符号化データ系列Ｓ１３は、ＤＭＰＸ部１８で、符号化画像データ系列Ｓ１１と、符号化動きベクトル系列Ｓ１２と、画像情報ＰＩの各種データとに分離する。
In the decoding unit shown in FIG. 5B, the encoded bit stream signal PCD decoded by channel decoding is input to the buffer unit 17. The encoded data sequence S13 read from the buffer unit is separated by the DMPX unit 18 into an encoded image data sequence S11, an encoded motion vector sequence S12, and various data of the image information PI.

ＩＶＬＣ部１９，２０は、可変長符号の復号化処理を行ない、係数量子化信号系列Ｓ５と、動きベクトルＭＶをそれぞれ復号する。   The IVLC units 19 and 20 perform variable-length code decoding processing to decode the coefficient quantized signal sequence S5 and the motion vector MV, respectively.

逆量子化部８は、逆量子化の処理で変換係数信号系列Ｓ４を復号し、ＩＤＣＴ部は、８行×８列のＤＣＴ変換逆行列との行列演算を行なう。そして、Ｉピクチャ時では符号化画像信号系列、Ｐピクチャ時ではフレーム間予測誤差信号系列にそれぞれ対応した信号Ｓ３を復号する。また、加算部２１は、ＭＣ信号生成部２４で生成したフレーム間動き補償予測信号系列Ｓ１０を加算し、その出力にＰピクチャ時の符号化画像信号系列Ｓ１４を生成する。そして、スイッチ２２は、エピクチャ時は端子ａ、Ｐピクチャ時は端子ｂに接続し、その出力には復号した符号化画像信号系列Ｓ１５を得る。
The inverse quantization unit 8 decodes the transform coefficient signal sequence S4 by the inverse quantization process, and the IDCT unit performs a matrix operation with a DCT transform inverse matrix of 8 rows × 8 columns. Then, the signal S3 corresponding to the encoded image signal sequence for the I picture and the inter-frame prediction error signal sequence for the P picture are decoded. Further, the adding unit 21 adds the inter-frame motion compensated prediction signal sequence S10 generated by the MC signal generating unit 24, and generates an encoded image signal sequence S14 for P picture as an output thereof. The switch 22 is connected to the terminal a for e-picture and to the terminal b for P-picture, and a decoded encoded image signal sequence S15 is obtained at the output.

フレームメモリ部２３は、入力信号を１フレーム期間遅延させた信号Ｓ９を生成する。そして、ＭＣ信号生成部２４は、この信号Ｓ９を動きベクトルＭＶで動きの補償処理を行ない、フレーム間動き補償予測信号系列Ｓ１０を生成する。   The frame memory unit 23 generates a signal S9 obtained by delaying the input signal by one frame period. Then, the MC signal generation unit 24 performs a motion compensation process on the signal S9 using the motion vector MV, and generates an inter-frame motion compensation prediction signal sequence S10.

ＭＶセレクト部４２は、画像情報ＰＩに応じて、動きベクトルＭＶのうち、動き補償の走査変換処理に整合するものを選別する処理を行なう。すなわち、画像信号がインタレース走査では、図１の走査線補間に示した様な動きベクトルＶ0，Ｖ1，Ｖ2を、ノンインタレース走査では図２の走査線補間に示した様な動きベクトルが選出される領域はＨ、選出されない領域はＬの信号の選別領域信号ＭＣＭを生成する。
The MV selection unit 42 performs a process of selecting a motion vector MV that matches a scan conversion process for motion compensation in accordance with the image information PI. That is, when the image signal is interlaced scanning, the motion vectors V 0 , V 1 , and V 2 as shown in the scanning line interpolation of FIG. 1 are used, and when the image signal is non-interlaced scanning, the motion as shown in the scanning line interpolation of FIG. A region for selecting a vector is generated as H, and a region for which a vector is not selected is generated as a selected region signal MCM.

ＭＣ補間部４３は、選別動きベクトルＭＶ’と、選別領域信号ＭＣＭと、画像情報ＰＩと、信号Ｓ３のフレーム間予測誤差信号系列とで図１や図２に示した動き補償の走査変換処理を行ない、メイン信号系列Ｓ１６と補間信号系列Ｓ１７とを生成する。なお、この構成ならびに動作については後に詳述する。   The MC interpolation unit 43 performs the motion compensation scan conversion processing shown in FIGS. 1 and 2 using the selected motion vector MV ′, the selected region signal MCM, the image information PI, and the inter-frame prediction error signal sequence of the signal S3. The main signal sequence S16 and the interpolation signal sequence S17 are generated. This configuration and operation will be described in detail later.

後処理部２６は、画像フォーマットの変換処理、メイン信号系列Ｓ１６と補間信号系列Ｓ１７とによるインタレース〜ノンインタレース走査変換やフレーム数変換の処理、アナログ信号への変換の処理を行ない、ノンインタレース走査の画像信号ＶＳＤを復号する。そして、この信号は、ノンインタレース走査の画像表示部（図面には明示せず）に表示して、高品質・高精細な画像を受像する。   The post-processing unit 26 performs image format conversion processing, interlace to non-interlace scan conversion and frame number conversion processing using the main signal sequence S16 and the interpolation signal sequence S17, and conversion to analog signals. The image signal VSD of the race scan is decoded. This signal is displayed on a non-interlaced scanning image display unit (not shown in the drawing) to receive a high-quality and high-definition image.

図１１は、ＭＣ補間部４３の一構成例図である。フィールドメモリ部２７−１と２７−２は１フィールド期間の信号遅延を行ない、同図の点線で囲んだ部分がフレームメモリに相当する構成で、メイン信号系列Ｓ１６と、動き補償の走査変換処理に使用する信号Ｓ１５、およびこの信号を１フレーム期間遅延させた信号Ｓ９とを生成する。   FIG. 11 is a configuration example diagram of the MC interpolation unit 43. The field memory units 27-1 and 27-2 perform signal delay for one field period, and a portion surrounded by a dotted line in the figure corresponds to a frame memory, and is used for the main signal series S16 and motion compensation scan conversion processing. A signal S15 to be used and a signal S9 obtained by delaying this signal by one frame period are generated.

動き検出部４４は、信号Ｓ１５とＳ９との減算処理でフレーム間の差分成分を抽出し、この差分成分をもとにフレーム間の動き情報ＭＩ（静止時は０）を生成する。   The motion detection unit 44 extracts a difference component between frames by subtracting the signals S15 and S9, and generates motion information MI (0 when stationary) based on the difference component.

ＭＣ補間制御部４５は、動き補償の補間信号の生成に必要な補間動きベクトルＩＭＶと、動き適応係数ｋｍ、１−ｋｍを生成する。この動作概略図を図１２に示す。同図（ａ）の第１の特性では補間動きベクトルは、選別領域信号ＭＣＭがＨの時は、選別動きベクトルＭＶ’をもとに、インタレース〜ノンインタレース走査変換では図１、フレーム数変換では図２に示した動き補償の補間信号の生成に必要なＩＭＶを生成する。一方、選別領域信号ＭＣＭがＬの時は、補間動きベクトルには０を生成する。また、動き適応係数ｋｍは、選別領域信号ＭＣＭがＨの時はｋｍ＝０、Ｌの時にはフレーム間の動き情報ＭＩのレベルに応じて０から１まで変化する特性の係数値を生成する。したがって、この特性では、選別領域信号ＭＣＭがＨの領域では動き補償の走査変換処理、Ｌの領域では従来技術と同様の動き適応処理で補間信号を生成する。   The MC interpolation control unit 45 generates an interpolation motion vector IMV and motion adaptive coefficients km and 1-km necessary for generating a motion compensation interpolation signal. A schematic diagram of this operation is shown in FIG. In the first characteristic of FIG. 5A, the interpolated motion vector is the same as that shown in FIG. 1 for interlaced to non-interlaced scan conversion based on the selected motion vector MV ′ when the selected region signal MCM is H. In the conversion, an IMV necessary for generating an interpolation signal for motion compensation shown in FIG. 2 is generated. On the other hand, when the selection area signal MCM is L, 0 is generated as the interpolation motion vector. The motion adaptive coefficient km generates a coefficient value having a characteristic that changes from 0 to 1 according to the level of motion information MI between frames when km = 0 when the selection region signal MCM is H, and when L. Therefore, with this characteristic, an interpolation signal is generated by a scan conversion process for motion compensation when the selected area signal MCM is H, and by a motion adaptation process similar to the prior art in the L area.

一方、同図（ｂ）の第２の特性では、補間動きベクトルは、選別領域信号ＭＣＭがＨで、信号Ｓ３の予測誤差信号、すなわち、動き補償のフレーム間差分信号成分の絶対値和Σ｜Ｓ3｜（例えば８画素×８ラインのブロック単位）が閾値Ｔｈ未満の場合に、選別動きベクトルＭＶ’をもとに生成する。これ以外の場合には、補間動きベクトルには０を生成する。また、動き適応係数ｋｍは、選別領域信号がＨの領域では、Σ｜Ｓ3｜の値に対応して０から１まで変化する特性の係数値、選別領域信号がＬの領域では、フレーム間の動き情報ＭＩに対応して０から１まで変化する特性の係数値を生成する。 On the other hand, in the second characteristic of FIG. 5B, the interpolated motion vector is such that the selected region signal MCM is H and the prediction error signal of the signal S3, that is, the absolute value sum Σ | When S 3 | (for example, a block unit of 8 pixels × 8 lines) is less than the threshold value Th, it is generated based on the selected motion vector MV ′. In other cases, 0 is generated for the interpolation motion vector. The motion adaptive coefficient km is a coefficient value of a characteristic that changes from 0 to 1 corresponding to the value of Σ | S 3 | in the region where the selection region signal is H, and between frames in the region where the selection region signal is L. The coefficient value of the characteristic which changes from 0 to 1 corresponding to the motion information MI is generated.

図１１にもどり、ＭＣＩＰ部２９は、補間動きベクトルＩＭＶで指定する信号Ｓ９と信号Ｓ１５の走査線の信号を取り出し、この両者の信号の平均値で動き補償の補間信号Ｓ１８を生成する。なお、ＩＭＶ＝０の場合には、信号Ｓ１８では従来技術における静止モードと同等の補間信号を生成することになる。   Returning to FIG. 11, the MCIP unit 29 extracts the scanning line signals of the signal S9 and the signal S15 specified by the interpolation motion vector IMV, and generates a motion compensation interpolation signal S18 by using the average value of these signals. When IMV = 0, the signal S18 generates an interpolation signal equivalent to the still mode in the prior art.

フィールド内補間部３１は、信号Ｓ１６をもとにフィールド内演算処理を行ない、同一フィールドの信号で従来技術の動画モードと同様な動画像の補間信号Ｓ１９を生成する。   The intra-field interpolation unit 31 performs an intra-field calculation process based on the signal S16, and generates a moving image interpolation signal S19 similar to that in the moving image mode of the prior art using the same field signal.

係数加重部３２−１は信号Ｓ１８に動き適応係数１−ｋｍ、係数加重部３２−２は信号Ｓ１９に動き適応係数ｋｍをそれぞれ係数加重する。そして、両者の信号は加算部３３で加算して、補間信号系列Ｓ１７を生成する。   The coefficient weighting unit 32-1 weights the signal S18 with the motion adaptive coefficient 1-km, and the coefficient weighting unit 32-2 weights the signal S19 with the motion adaptive coefficient km. Then, both signals are added by the adder 33 to generate an interpolation signal series S17.

なお、図中の点線で囲んだ部分は、図１０のフレームメモリ部２３に相当する。このため、図１０の実施例において、この部分を共用する形態で構成することもできる。   A portion surrounded by a dotted line in the figure corresponds to the frame memory unit 23 in FIG. For this reason, in the embodiment of FIG. 10, it is also possible to configure this part in a shared form.

以上に述べた様に、本実施例によれば、インタレース妨害やジャダー妨害がなく、高品質・高精細な画像で受像できる画像信号の符号化・復号化装置ができ、画質改善に顕著な効果がえられる。また、本実施例に示した復号化部の構成は、先の第１の実施例における復号化部として用いることもできる。   As described above, according to the present embodiment, an image signal encoding / decoding device that can be received as a high-quality and high-definition image without interlace interference and judder interference can be obtained, which is remarkable for image quality improvement. The effect is obtained. The configuration of the decoding unit shown in the present embodiment can also be used as the decoding unit in the first embodiment.

さて、本発明においては、復号化部の構成は第１、第２の実施例の他にも、様々な形態で実現することが可能である。   In the present invention, the configuration of the decoding unit can be realized in various forms in addition to the first and second embodiments.

図１３は、復号化部の第３の実施例の全体ブロック構成図である。   FIG. 13 is an overall block configuration diagram of the third embodiment of the decoding unit.

チャネル復号化した符号化ビットストリーム信号ＰＣＤは、バッファ部１７に入力する。そして、バッファ部から読み出した符号化データ系列Ｓ１３は、ビデオ復号化部４６に入力する。ビデオ復号化部は図３、図１０の点線で囲んだ部分に相当し、前述したビデオ復号化の処理を行ない、復号した符号化画像信号系列Ｓ１５と、動きベクトルＭＶと、信号Ｓ３のＰピクチャ時のフレーム間予測誤差信号系列と、画像情報ＰＩとを出力する。   The encoded bit stream signal PCD subjected to channel decoding is input to the buffer unit 17. Then, the encoded data sequence S13 read from the buffer unit is input to the video decoding unit 46. The video decoding unit corresponds to a portion surrounded by a dotted line in FIGS. 3 and 10, and performs the above-described video decoding process. The decoded encoded image signal sequence S15, the motion vector MV, and the P picture of the signal S3 An inter-frame prediction error signal sequence and image information PI are output.

画像フォーマット変換部４７は、符号化画像信号系列に対して画像フォーマット変換の処理を行ない、もとの走査形態の画像信号系列ＶＦＣを生成する。   The image format conversion unit 47 performs an image format conversion process on the encoded image signal sequence, and generates an image signal sequence VFC in the original scanning form.

ＭＣ補間部４８は、インタレース〜ノンインタレース走査変換では図１、フレーム数変換では図２に示した動き補償の走査変換処理を行ない、メイン信号系列Ｓ１６と補間信号系列Ｓ１７とを生成する。すなわち、図５乃至図８と同様な構成で、動きベクトルＭＶをもとに生成した補間動きベクトルＩＭＶ、および信号Ｓ３より検出する動き補償のフレーム間差分信号で生成した動き適応係数ｋｍ、１−ｋｍを用いて、補間信号系列Ｓ１７をつくる。   The MC interpolation unit 48 performs the motion compensation scan conversion process shown in FIG. 1 for interlaced to non-interlaced scan conversion and FIG. 2 for frame number conversion, and generates a main signal sequence S16 and an interpolation signal sequence S17. That is, with the same configuration as in FIGS. 5 to 8, the motion adaptive coefficient km, 1−1 generated by the interpolated motion vector IMV generated based on the motion vector MV and the inter-frame difference signal of motion compensation detected from the signal S3. The interpolation signal sequence S17 is created using km.

ノンインタレース系列変換部４９は、画像情報ＰＩにより、インタレース〜ノンインタレース走査変換の場合はメイン信号系列Ｓ１６と補間信号系列Ｓ１７を水平方向に１／２に時間軸を圧縮する処理、フレーム数変換の例えば標準モードの３０〜６０変換の場合は時間方向に１／２に時間軸を圧縮する処理を行なう。
そして、圧縮した両者の信号を時系列に多重してノンインタレース走査の信号を生成し、３原色ＲＧＢ変換、アナログ変換を行ない、ノンインタレース走査の画像信号ＶＳＤを復元する。 In the case of interlaced to non-interlaced scan conversion, the non-interlaced sequence conversion unit 49 performs processing for compressing the time axis by halving the main signal sequence S16 and the interpolation signal sequence S17 in the horizontal direction by the frame, In the case of number conversion, for example, 30 to 60 conversion in the standard mode, a process of compressing the time axis by half in the time direction is performed.
Then, the compressed signals are multiplexed in time series to generate a non-interlaced scanning signal, and the three primary colors RGB conversion and analog conversion are performed to restore the non-interlaced scanning image signal VSD.

本実施例は、符号化部での動き補償予測符号化において、動き補償の走査変換処理に適した形態の動きベクトルでビデオ符号化したものに好適なもので、インタレース妨害やジャダー妨害のない高品質・高精細な画像で受像する復号化装置が実現できる。   The present embodiment is suitable for video encoding with a motion vector in a form suitable for scan conversion processing for motion compensation in motion compensation predictive coding in the encoder, and there is no interlace interference or judder interference. A decoding device that receives high-quality and high-definition images can be realized.

図１４は、復号化部の第４の実施例の全体ブロック構成図である。   FIG. 14 is an overall block configuration diagram of the fourth embodiment of the decoding unit.

チャネル復号化した符号化ビットストリーム信号ＰＣＤは、バッファ部１７に入力する。そして、バッファ部から読み出した符号化データ系列Ｓ１３は、ビデオ復号化部４６に入力する。これは、図３、図１０の点線で囲んだ部分に相当し、前述したビデオ復号化の処理を行なって、復号した符号化画像信号系列Ｓ１５と、動きベクトルＭＶと、信号Ｓ３のＰピクチャ時のフレーム間予測誤差信号系列（動き補償のフレーム間差分信号に相当）と、画像情報ＰＩとを出力する。   The encoded bit stream signal PCD subjected to channel decoding is input to the buffer unit 17. Then, the encoded data sequence S13 read from the buffer unit is input to the video decoding unit 46. This corresponds to a portion surrounded by a dotted line in FIG. 3 and FIG. 10, and the above-described video decoding process is performed, and a decoded encoded image signal sequence S15, a motion vector MV, and a P picture of the signal S3. The inter-frame prediction error signal sequence (corresponding to the motion compensation inter-frame difference signal) and the image information PI are output.

ＭＶセレクト部４２は、画像情報ＰＩに応じて、動きベクトルＭＶから動き補償の走査変換処理に整合するものを選別する処理を行なう。すわなち、画像信号がインタレース走査では図１の走査線補間に示した動きベクトル、ノンインタレース走査では図２の走査線補間に示した動きベクトルを選別動きベクトルＭＶ’として生成する。また、動きベクトルの選出が行なわれた領域はＨ、行なわれない領域はＬの選別領域信号ＭＣＭを生成する。   The MV selector 42 performs a process of selecting a motion vector MV that matches the scan conversion process for motion compensation in accordance with the image information PI. In other words, when the image signal is interlaced scanning, the motion vector shown in the scanning line interpolation of FIG. 1 is generated as the selected motion vector MV ′. Further, a selection region signal MCM of H is generated for the region where the motion vector is selected, and L is selected for the region where the motion vector is not selected.

画像フォーマット変換部４７は、符号化画像信号系列からもとの走査形態の信号系列に変換する画像フォーマット変換の処理を行ない、画像信号系列ＶＦＣを生成する。   The image format conversion unit 47 performs an image format conversion process for converting an encoded image signal sequence into a signal sequence in the original scanning form, and generates an image signal sequence VFC.

ＭＣ補間部５０は、動き補償の走査変換処理、すなわち、インタレース〜ノンインタレース走査変換では図１、フレーム数変換では図２に示した信号処理を行ない、メイン信号系列Ｓ１６と補間信号系列Ｓ１７とを生成する。これは、図１１、１２に示す構成、特性によって実現できる。そして、補間動きベクトルＩＭＶと、動き適応係数ｋｍ、１−ｋｍを用いて、補間信号系列Ｓ１７を生成する。   The MC interpolator 50 performs the signal processing shown in FIG. 1 for motion compensation scan conversion processing, that is, interlace to non-interlace scan conversion, and FIG. 2 for frame number conversion, and performs the main signal sequence S16 and the interpolation signal sequence S17. And generate This can be realized by the configuration and characteristics shown in FIGS. Then, an interpolation signal sequence S17 is generated using the interpolation motion vector IMV and the motion adaptive coefficients km and 1-km.

ノンインタレース系列変換部４９は、メイン信号系列Ｓ１６と補間信号系列Ｓ１７の時間軸圧縮の処理を行なう。すなわち、画像情報ＰＩにより、インタレース〜ノンインタレース走査変換の場合は水平方向に１／２、フレーム数変換の例えば標準モードの３０〜６０変換では時間方向に１／２の圧縮を行なう。そして、圧縮した両者の信号を時系列に多重してノンインタレース走査の信号を生成し、３原色ＲＧＢ変換、アナログ変換を行ない、ノンインタレース走査の画像信号ＶＳＤを復号する。   The non-interlaced sequence conversion unit 49 performs time axis compression processing of the main signal sequence S16 and the interpolation signal sequence S17. That is, according to the image information PI, 1/2 compression is performed in the horizontal direction in the case of interlaced to non-interlaced scanning conversion, and 1/2 compression in the time direction in 30-60 conversion of the standard mode, for example, in the standard mode conversion. Then, both the compressed signals are multiplexed in time series to generate a non-interlaced scanning signal, the three primary colors RGB conversion and analog conversion are performed, and the non-interlaced scanning image signal VSD is decoded.

本実施例によれば、インタレース妨害やジャダー妨害のない高品質・高精細な画像で受像する復号化装置が実現できる。   According to the present embodiment, it is possible to realize a decoding apparatus that receives high-quality and high-definition images without interlace interference and judder interference.

以上に述べた実施例の説明では、ビデオ符号化としてフレーム間の動き補償予測符号化とＤＣＴ変換符号化の組み合せを例に述べたが、これに限定されることなく、種々の形態の動き補償予測符号化と直交変換符号化との組み合せによる符号化にも適用できることは明らかである。   In the description of the embodiment described above, the combination of interframe motion compensated prediction coding and DCT transform coding has been described as an example of video coding. However, the present invention is not limited to this, and various forms of motion compensation are possible. It is clear that the present invention can also be applied to coding by a combination of predictive coding and orthogonal transform coding.

動き補償の予測符号化と走査線補間の原理概略図。FIG. 3 is a schematic diagram illustrating the principle of predictive coding for motion compensation and scanning line interpolation. 動き補償の予測符号化と走査線補間の原理概略図。FIG. 3 is a schematic diagram illustrating the principle of predictive coding for motion compensation and scanning line interpolation. 本発明の第１の実施例の全体ブロック構成図。The whole block block diagram of the 1st Example of this invention. 符号化モードの概略図。Schematic of encoding mode. ＭＣ補間部の第１の構成例図。The 1st structural example figure of MC interpolation part. ＭＣ補間部の第２の構成例図。The 2nd structural example figure of MC interpolation part. ＭＣ補間制御部の動作概略図。The operation | movement schematic diagram of MC interpolation control part. ＭＣ補間部の第３の構成例図。The 3rd structural example figure of MC interpolation part. 後処理部の一構成例図。The structural example figure of a post-processing part. 本発明の第２の実施例の全体ブロック構成図。The whole block block diagram of the 2nd Example of this invention. 第２の実施例におけるＭＣ補間部の一構成例図。FIG. 10 is a configuration example diagram of an MC interpolation unit in the second embodiment. 第２の実施例におけるＭＣ補間制御部の特性概略図。The characteristic schematic diagram of MC interpolation control part in the 2nd example. 本発明の復号化部の第３の実施例の全体ブロック構成図。The whole block block diagram of the 3rd Example of the decoding part of this invention. 本発明の復号化部の第４の実施例の全体ブロック構成図。The whole block block diagram of the 4th Example of the decoding part of this invention.

符号の説明Explanation of symbols

１…前処理部、２，４１…動きベクトル検出部、３，３４…減算部、４，１１，２２…スイッチ、５…ＤＣＴ部、６…量子化部、７，１４…ＶＬＣ部、８…逆量子化部、９…ＩＤＣＴ部、１０，２１，３３…加算部、１２，２３…フレームメモリ部、１３，２４…ＭＣ信号生成部、１５…ＭＰＸ部、１６，１７…バッファ部、１８…ＤＭＰＸ部、１９，２０…ＩＶＬＣ部、２５，４３，４８，５０…ＭＣ補間部、２６…後処理部、２７…フィールドメモリ部、２８…補間ＭＶ生成部、２９…ＭＣＩＰ部、３０，３５，４５…ＭＣ補間制御部、３１…フィールド内補間部、３２…係数加重部、３６，４７…画像フォーマット変換部、３７…水平時間圧縮部、３８…時分割多重部、３９…ＲＧＢ変換部、４０…ＤＡ変換部、４２…ＭＶセレクト部、４４…動き検出部、４６…ビデオ復号化部、４９…ノンインタレース系列変換部。
DESCRIPTION OF SYMBOLS 1 ... Pre-processing part, 2, 41 ... Motion vector detection part, 3,34 ... Subtraction part, 4, 11 , 22 ... Switch, 5 ... DCT part, 6 ... Quantization part, 7, 14 ... VLC part, 8 ... Inverse quantization unit, 9 ... IDCT unit, 10, 21, 33 ... addition unit, 12, 23 ... frame memory unit, 13, 24 ... MC signal generation unit, 15 ... MPX unit, 16, 17 ... buffer unit, 18 ... DMPX unit, 19, 20 ... IVLC unit, 25, 43, 48, 50 ... MC interpolation unit, 26 ... post-processing unit, 27 ... field memory unit, 28 ... interpolation MV generation unit, 29 ... MCIP unit, 30, 35, 45 ... MC interpolation control unit, 31 ... intra-field interpolation unit, 32 ... coefficient weighting unit, 36, 47 ... image format conversion unit, 37 ... horizontal time compression unit, 38 ... time division multiplexing unit, 39 ... RGB conversion unit, 40 ... DA converter, 42 ... MV select , 44 ... motion detection unit, 46 ... video decoder, 49 ... non-interlaced stream conversion unit.

Claims (16)

インタレース走査の画像信号が動き補償予測符号化された符号化信号を、受信し、復号し、ノンインタレース走査の画像信号に変換する復号化方法において、
補間信号の生成が行われる画素を通り、且つ、該補間信号の生成が行われるフィールドの１フィールド期間前のフィールドにおける画素を始点とし、該補間信号の生成が行われるフィールドの１フィールド期間後のフィールドにおける画素を終点とする動きベクトルを該復号した符号化信号から選出し、
該動きベクトルの両端にて指定される画素の信号値の平均値で補間信号の生成を行うことを特徴とする復号化方法。 In a decoding method for receiving, decoding, and converting an encoded signal in which an interlaced scanning image signal is motion compensated predictive encoded into a non-interlaced scanning image signal,
A pixel that passes through a pixel in which the interpolation signal is generated and that is in the field one field period before the field in which the interpolation signal is generated starts, and is one field after the field in which the interpolation signal is generated. Selecting a motion vector whose end point is a pixel in the field from the decoded encoded signal;
A decoding method, wherein an interpolation signal is generated with an average value of signal values of pixels designated at both ends of the motion vector. 請求項１記載の復号化方法において、
補間信号の生成が行われる画素を通る前記動きベクトルが選出される領域においては、前記動きベクトルの両端にて指定される画素の信号値の平均値で補間信号の生成を行い、
補間信号の生成が行われる画素を通る前記動きベクトルが選出されない領域においては、該補間信号の生成が行われるフィールドの１フィールド期間前のフィールドの画素における信号値と該補間信号の生成が行われるフィールドの１フィールド期間後のフィールドの画素における信号値との平均値または該補間信号の生成が行われるフィールドの１フィールド期間前のフィールドの画素における信号値を信号値として補間信号の生成を行うことを特徴とする復号化方法。 The decoding method according to claim 1, wherein
In the region where the motion vector passing through the pixel where the interpolation signal is generated is selected , the interpolation signal is generated with the average value of the pixel signal values specified at both ends of the motion vector,
In the region where the motion vector passing through the pixel where the interpolation signal is generated is not selected, the signal value and the interpolation signal are generated in the pixel in the field one field period before the field where the interpolation signal is generated. Interpolation signal generation is performed using the average value of the signal value of the pixel in the field after one field period of the field or the signal value of the pixel in the field before one field period of the field in which the interpolation signal is generated as the signal value. A decoding method characterized by the above. 請求項１または２に記載の復号化方法において、
前記補間信号の生成が行われる画素を通る動きベクトルが選出される領域においては、前記動きベクトルの両端にて指定される画素の信号値の平均値で第１補間信号の生成を行い、
前記補間信号の生成が行われる画素を通る動きベクトルが選出されない領域においては、同一フィールド内の信号での補間演算処理により生成された第２補間信号を信号値として、または、前記第１補間信号と第２補間信号に係数加重し加算したものを信号値として補間信号の生成を行うことを特徴とする復号化方法。 The decoding method according to claim 1 or 2,
In a region where a motion vector passing through a pixel on which the interpolation signal is generated is selected, a first interpolation signal is generated with an average value of signal values of pixels specified at both ends of the motion vector,
In a region where a motion vector passing through a pixel where the interpolation signal is generated is not selected, the second interpolation signal generated by the interpolation calculation process using the signal in the same field is used as a signal value, or the first interpolation signal And a method of generating an interpolation signal using a signal value obtained by weighting and adding a coefficient to the second interpolation signal. 請求項１から３のいずれか一に記載の復号化方法において、
動き補償のフレーム間差分信号の所定単位内の絶対値和が閾値未満の場合に、前記動きベクトルの両端にて指定される画素の信号値の平均値で補間信号の生成を行うことを特徴とする復号化方法。 In the decoding method as described in any one of Claim 1 to 3,
When the sum of absolute values within a predetermined unit of the inter-frame difference signal for motion compensation is less than a threshold value, an interpolation signal is generated with an average value of pixel signal values specified at both ends of the motion vector. Decryption method to do. インタレース走査の画像信号が動き補償予測符号化された符号化信号を、受信し、復号し、前記ノンインタレース走査の画像信号に変換する復号化方法において、
該補間信号の生成が行われるフィールドの補間信号の生成が行われる画素を終点とし、且つ、該フィールドの１フィールド期間前のフィールドにおける画素を始点とする動きベクトルを前記符号化信号から選出し、
該始点の画素の信号値の平均値で補間信号の生成を行うことを特徴とする復号化方法。 In a decoding method for receiving, decoding, and converting an encoded signal in which an interlaced scanning image signal is motion-compensated prediction encoded into the non-interlaced scanning image signal,
Selecting a motion vector starting from a pixel in a field preceding the field in which the generation of the interpolation signal of the field in which the interpolation signal is generated, and starting from a pixel in the field before one field period of the field from the encoded signal;
A decoding method, wherein an interpolation signal is generated with an average value of signal values of pixels at the start point. 請求項５に記載の復号化方法において、
前記補間信号の生成が行われるフィールドの補間信号の生成が行われる画素を終点とし、且つ、該フィールドの１フィールド期間前のフィールドにおける画素を始点とする前記動きベクトルが選出される領域においては、前記動きベクトルの前記始点の画素の信号値の平均値で補間信号の生成を行い、
前記補間信号の生成が行われるフィールドの補間信号の生成が行われる画素を終点とし、且つ、該フィールドの１フィールド期間前のフィールドにおける画素を始点とする前記動きベクトルが選出されない領域においては、該補間信号の生成が行われるフィールドの１フィールド期間前のフィールドの画素における信号値と該補間信号の生成が行われるフィールドの１フィールド期間後のフィールドの画素における信号値との平均値または該補間信号の生成が行われるフィールドの１フィールド期間前のフィールドの画素における信号値を信号値として補間信号の生成を行うことを特徴とする復号化方法。 The decoding method according to claim 5, wherein
In the region where the motion vector starting from the pixel in the field before one field period of the field is selected as the end point, and the motion vector starting from the pixel in the field one field before the field is selected in the field where the interpolation signal is generated, Generate an interpolation signal with the average value of the signal values of the starting pixel of the motion vector,
In a region where the motion vector starting from the pixel in the field before one field period of the field where the interpolation signal is generated in the field where the interpolation signal is generated is not selected, The average value of the signal value in the field pixel one field period before the field where the interpolation signal is generated and the signal value in the field pixel one field period after the field where the interpolation signal is generated, or the interpolation signal A decoding method characterized in that an interpolation signal is generated using a signal value at a pixel in a field one field period before the field in which generation is performed as a signal value. 請求項５または６に記載の復号化方法において、
前記補間信号の生成が行われるフィールドの補間信号の生成が行われる画素を終点とし、且つ、該フィールドの１フィールド期間前のフィールドにおける画素を始点とする前記動きベクトルが選出される領域においては、前記動きベクトルの前記始点の画素の信号値の平均値で補間信号の生成を行い、
前記補間信号の生成が行われるフィールドの補間信号の生成が行われる画素を終点とし、且つ、該フィールドの１フィールド期間前のフィールドにおける画素を始点とする前記動きベクトルが選出されない領域においては、同一フィールド内の信号での補間演算処理により生成された第２補間信号を信号値として、または、前記第１補間信号と第２補間信号に係数加重し加算したものを信号値として補間信号の生成を行うことを特徴とする復号化方法。 The decoding method according to claim 5 or 6,
In the region where the motion vector starting from the pixel in the field before one field period of the field is selected as the end point, and the motion vector starting from the pixel in the field one field before the field is selected in the field where the interpolation signal is generated, Generate an interpolation signal with the average value of the signal values of the starting pixel of the motion vector,
It is the same in a region where the motion vector starting from the pixel in the field one field period before the end point of the pixel in which the interpolation signal generation of the field where the interpolation signal is generated is not selected is selected. Generation of an interpolation signal using the second interpolation signal generated by the interpolation calculation processing with the signal in the field as a signal value, or a signal value obtained by adding a coefficient weight to the first interpolation signal and the second interpolation signal. Decoding method characterized by performing. 請求項５から７のいずれか一に記載の復号化方法において、
動き補償のフレーム間差分信号の所定単位内の絶対値和が閾値未満の場合に、前記動きベクトルの始点の画素の信号値の平均値で補間信号の生成を行うことを特徴とする復号化方法。 The decoding method according to any one of claims 5 to 7,
A decoding method comprising: generating an interpolated signal with an average value of signal values of pixels at the start point of the motion vector when a sum of absolute values within a predetermined unit of an inter-frame difference signal for motion compensation is less than a threshold value . インタレース走査の画像信号が動き補償予測符号化された符号化信号を、受信し、復号し、ノンインタレース走査の画像信号に変換する復号化装置において、
補間信号の生成が行われる画素を通り、且つ、該補間信号の生成が行われるフィールドの１フィールド期間前のフィールドにおける画素を始点とし、該補間信号の生成が行われるフィールドの１フィールド期間後のフィールドにおける画素を終点とする動きベクトルを該符号化信号から選出する動きベクトル選出部と、
該動きベクトルの両端にて指定される画素の信号値の平均値で補間信号の生成を行う補間信号生成部とを備えることを特徴とする復号化装置。 In a decoding apparatus that receives, decodes, and converts an encoded signal in which an interlaced scanning image signal is motion compensated predictive encoded into a non-interlaced scanned image signal,
A pixel that passes through a pixel in which the interpolation signal is generated and that is in the field one field period before the field in which the interpolation signal is generated starts, and is one field after the field in which the interpolation signal is generated. A motion vector selection unit that selects a motion vector having a pixel in the field as an end point from the encoded signal;
A decoding apparatus comprising: an interpolation signal generation unit configured to generate an interpolation signal using an average value of signal values of pixels designated at both ends of the motion vector. 請求項９記載の復号化装置において、
前記補間信号生成部は、
補間信号の生成が行われる画素を通る前記動きベクトルが選出される領域においては、前記動きベクトルの両端にて指定される画素の信号値の平均値で補間信号の生成を行い、
補間信号の生成が行われる画素を通る前記動きベクトルが選出されない領域においては、該補間信号の生成が行われるフィールドの１フィールド期間前のフィールドの画素における信号値または該補間信号の生成が行われるフィールドの１フィールド期間前のフィールドの画素における信号値と該補間信号の生成が行われるフィールドの１フィールド期間後のフィールドの画素における信号値との信号値の平均値で補間信号の生成を行うことを特徴とする復号化装置。 The decoding device according to claim 9, wherein
The interpolation signal generator is
In the region where the motion vector passing through the pixel where the interpolation signal is generated is selected , the interpolation signal is generated with the average value of the pixel signal values specified at both ends of the motion vector,
In the region where the motion vector passing through the pixel where the interpolation signal is generated is not selected, the signal value in the field pixel or the interpolation signal is generated one field period before the field where the interpolation signal is generated. Interpolation signal generation is performed using an average value of signal values of a signal value in a field pixel one field period before the field and a signal value in a field pixel one field period after the field in which the generation of the interpolation signal is performed. A decoding device characterized by the above. 請求項９または１０に記載の復号化装置において、
前記補間信号生成部は、
前記補間信号の生成が行われる画素を通る動きベクトルが選出される領域においては、前記動きベクトルの両端にて指定される画素の信号値の平均値で第１補間信号の生成を行い、
前記補間信号の生成が行われる画素を通る動きベクトルが選出されない領域においては、同一フィールド内の信号での補間演算処理により生成された第２補間信号を信号値として、または、前記第１補間信号と第２補間信号に係数加重し加算したものを信号値として補間信号の生成を行うことを特徴とする復号化装置。 The decoding device according to claim 9 or 10,
The interpolation signal generator is
In a region where a motion vector passing through a pixel on which the interpolation signal is generated is selected, a first interpolation signal is generated with an average value of signal values of pixels specified at both ends of the motion vector,
In a region where a motion vector passing through a pixel where the interpolation signal is generated is not selected, the second interpolation signal generated by the interpolation calculation process using the signal in the same field is used as a signal value, or the first interpolation signal And a second interpolation signal with a coefficient weighted and added to generate an interpolation signal using the signal value as a signal value. 請求項９から１１のいずれか一に記載の復号化装置において、
前記補間信号生成部は、
動き補償のフレーム間差分信号の所定単位内の絶対値和が閾値未満の場合に、前記動きベクトルの両端にて指定される画素の信号値の平均値で補間信号の生成を行うことを特徴とする復号化装置。 The decoding device according to any one of claims 9 to 11,
The interpolation signal generator is
When the sum of absolute values within a predetermined unit of the inter-frame difference signal for motion compensation is less than a threshold value, an interpolation signal is generated with an average value of pixel signal values specified at both ends of the motion vector. Decoding device to perform. インタレース走査の画像信号が動き補償予測符号化された符号化信号を、受信し、復号し、前記ノンインタレース走査の画像信号に変換する復号化装置において、
前記補間信号の生成が行われるフィールドの補間信号の生成が行われる画素を終点とし、且つ、該フィールドの１フィールド期間前のフィールドにおける画素を始点とする動きベクトルを前記符号化信号から選出する動きベクトル選出部と、
該始点の画素の信号値を変数とする平均の関数の値を信号値として補間信号の生成を行う補間信号生成部とを備えることを特徴とする復号化装置。 In a decoding apparatus that receives, decodes, and converts an encoded signal obtained by interlaced scanning image signal motion compensation prediction encoding into the non-interlaced scanning image signal,
A motion for selecting from the encoded signal a motion vector starting from a pixel in a field one field period before the end of the field in which the interpolation signal is generated for the field in which the interpolation signal is generated. A vector selection department,
A decoding apparatus comprising: an interpolation signal generation unit configured to generate an interpolation signal using an average function value having a signal value of a pixel at the start point as a variable as a signal value. 請求項１３に記載の復号化装置において、
前記補間信号生成部は、
前記補間信号の生成が行われるフィールドの補間信号の生成が行われる画素を終点とし、且つ、該フィールドの１フィールド期間前のフィールドにおける画素を始点とする前記動きベクトルが選出される領域においては、前記動きベクトルの前記始点の画素の信号値を変数とする平均の関数の値を信号値として補間信号の生成を行い、
前記補間信号の生成が行われるフィールドの補間信号の生成が行われる画素を終点とし、且つ、該フィールドの１フィールド期間前のフィールドにおける画素を始点とする前記動きベクトルが選出されない領域においては、該補間信号の生成が行われるフィールドの１フィールド期間前のフィールドの画素における信号値または該補間信号の生成が行われるフィールドの１フィールド期間前のフィールドの画素における信号値と該補間信号の生成が行われるフィールドの１フィールド期間後のフィールドの画素における信号値との信号値を変数とする平均の関数の値を信号値として補間信号の生成を行うことを特徴とする復号化装置。 The decoding device according to claim 13,
The interpolation signal generator is
In the region where the motion vector starting from the pixel in the field before one field period of the field is selected as the end point, and the motion vector starting from the pixel in the field one field before the field is selected in the field where the interpolation signal is generated, An interpolation signal is generated using the value of an average function having the signal value of the pixel at the starting point of the motion vector as a variable,
In a region where the motion vector starting from the pixel in the field before one field period of the field where the interpolation signal is generated in the field where the interpolation signal is generated is not selected, The signal value in the pixel in the field one field before the field where the interpolation signal is generated or the signal value in the pixel in the field one field before the field where the interpolation signal is generated and the interpolation signal are generated. A decoding apparatus, characterized in that an interpolation signal is generated using a value of an average function having a signal value of a signal value of a pixel in a field after one field period of a field as a variable as a signal value. 請求項１３または１４に記載の復号化装置において、
前記補間信号生成部は、
前記補間信号の生成が行われるフィールドの補間信号の生成が行われる画素を終点とし、且つ、該フィールドの１フィールド期間前のフィールドにおける画素を始点とする前記動きベクトルが選出される領域においては、前記動きベクトルの前記始点の画素の信号値を変数とする平均の関数の値を信号値として補間信号の生成を行い、
前記補間信号の生成が行われるフィールドの補間信号の生成が行われる画素を終点とし、且つ、該フィールドの１フィールド期間前のフィールドにおける画素を始点とする前記動きベクトルが選出されない領域においては、同一フィールド内の信号での補間演算処理により生成された第２補間信号を信号値として、または、前記第１補間信号と第２補間信号に係数加重し加算したものを信号値として補間信号の生成を行うことを特徴とする復号化装置。 The decoding device according to claim 13 or 14,
The interpolation signal generator is
In the region where the motion vector starting from the pixel in the field before one field period of the field is selected as the end point, and the motion vector starting from the pixel in the field one field before the field is selected in the field where the interpolation signal is generated, An interpolation signal is generated using the value of an average function having the signal value of the pixel at the starting point of the motion vector as a variable,
It is the same in a region where the motion vector starting from the pixel in the field one field period before the end point of the pixel in which the interpolation signal generation of the field where the interpolation signal is generated is not selected is selected. Generation of an interpolation signal using the second interpolation signal generated by the interpolation calculation processing with the signal in the field as a signal value, or a signal value obtained by adding a coefficient weight to the first interpolation signal and the second interpolation signal. A decoding device characterized in that: 請求項１３から１５のいずれか一に記載の復号化装置において、
前記補間信号生成部は、
動き補償のフレーム間差分信号の所定単位内の絶対値和が閾値未満の場合に、前記動きベクトルの始点の画素の信号値を変数とする平均の関数の値を信号値として補間信号の生成を行うことを特徴とする復号化装置。 The decoding device according to any one of claims 13 to 15,
The interpolation signal generator is
When the sum of absolute values within a predetermined unit of the inter-frame difference signal for motion compensation is less than a threshold value, an interpolation signal is generated using the value of an average function with the signal value of the pixel at the start point of the motion vector as a signal value. A decoding device characterized in that:
JP2004198752A 2004-07-06 2004-07-06 Image decoding method and image decoding apparatus Expired - Lifetime JP3915802B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2004198752A JP3915802B2 (en) 2004-07-06 2004-07-06 Image decoding method and image decoding apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2004198752A JP3915802B2 (en) 2004-07-06 2004-07-06 Image decoding method and image decoding apparatus

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP17641294A Division JP3612739B2 (en) 1994-07-28 1994-07-28 Image signal decoding apparatus and image signal decoding method

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2006223759A Division JP4258537B2 (en) 2006-08-21 2006-08-21 Image signal generation method and image signal generation apparatus

Publications (2)

Publication Number Publication Date
JP2004336817A JP2004336817A (en) 2004-11-25
JP3915802B2 true JP3915802B2 (en) 2007-05-16

Family

ID=33509370

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2004198752A Expired - Lifetime JP3915802B2 (en) 2004-07-06 2004-07-06 Image decoding method and image decoding apparatus

Country Status (1)

Country Link
JP (1) JP3915802B2 (en)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4861636B2 (en) * 2005-04-19 2012-01-25 パナソニック株式会社 Image processing apparatus and image processing program
JP2009010492A (en) 2007-06-26 2009-01-15 Hitachi Ltd Image decoder and image conversion circuit

Also Published As

Publication number Publication date
JP2004336817A (en) 2004-11-25

Similar Documents

Publication Publication Date Title
US5453799A (en) Unified motion estimation architecture
US8548059B2 (en) Image information encoding method and encoder, and image information decoding method and decoder
WO2002001883A1 (en) Image encoder and image encoding method
KR100235988B1 (en) Video format conversion appratus and its method in dtv
JPH07212761A (en) Hierarchical coder and hierarchical decoder
JP3469815B2 (en) Digital video processing device and digital video processing method
US20070230918A1 (en) Video Quality Enhancement and/or Artifact Reduction Using Coding Information From a Compressed Bitstream
JP3915802B2 (en) Image decoding method and image decoding apparatus
JP4258537B2 (en) Image signal generation method and image signal generation apparatus
JP3612739B2 (en) Image signal decoding apparatus and image signal decoding method
JP4035808B2 (en) Moving image scanning structure conversion apparatus and moving image scanning structure conversion method
JPH10126749A (en) Sequential scanning conversion device
JP3617088B2 (en) Television receiver
JP4305480B2 (en) Television receiver, television receiving method, image signal processing apparatus, image signal processing method, motion vector detection method
JP2004236353A (en) Television receiver
JP2000032470A (en) Image encoder, image encoding method, and image decoder
JP2000069479A (en) Picture encoding device/method
JP2000036961A (en) Image coder, image coding method and image decoder
JP2004304846A (en) Image coding method and apparatus

Legal Events

Date Code Title Description
RD01 Notification of change of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7421

Effective date: 20060421

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20060620

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20060821

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20061114

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20061214

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20070116

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20070129

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100216

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110216

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110216

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120216

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120216

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130216

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130216

Year of fee payment: 6

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313111

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313111

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

EXPY Cancellation because of completion of term