JP7343662B2 - Decoding device and program - Google Patents

Decoding device and program Download PDF

Info

Publication number
JP7343662B2
JP7343662B2 JP2022109409A JP2022109409A JP7343662B2 JP 7343662 B2 JP7343662 B2 JP 7343662B2 JP 2022109409 A JP2022109409 A JP 2022109409A JP 2022109409 A JP2022109409 A JP 2022109409A JP 7343662 B2 JP7343662 B2 JP 7343662B2
Authority
JP
Japan
Prior art keywords
predicted image
intra prediction
area
unit
decoding device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2022109409A
Other languages
Japanese (ja)
Other versions
JP2022125265A (en
Inventor
俊輔 岩村
敦郎 市ヶ谷
和博 千田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Japan Broadcasting Corp
Original Assignee
Japan Broadcasting Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Japan Broadcasting Corp filed Critical Japan Broadcasting Corp
Priority to JP2022109409A priority Critical patent/JP7343662B2/en
Publication of JP2022125265A publication Critical patent/JP2022125265A/en
Priority to JP2023141326A priority patent/JP2023159443A/en
Application granted granted Critical
Publication of JP7343662B2 publication Critical patent/JP7343662B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Compression Or Coding Systems Of Tv Signals (AREA)

Description

本発明は、復号装置及びプログラムに関する。 The present invention relates to a decoding device and a program.

Ｈ．２６５／ＨＥＶＣ（Ｈｉｇｈ Ｅｆｆｉｃｉｅｎｃｙ Ｖｉｄｅｏ Ｃｏｄｉｎｇ）に代表される動画像の符号化方式では、フレーム間の時間的相関を利用したインター予測及びフレーム内の空間的相関を利用したイントラ予測の２種類の予測を切り替えながら予測を行って残差信号を生成した後、直交変換処理やループフィルタ処理やエントロピー符号化処理を行い得られたストリームを出力するように構成されている。 H. Video coding methods such as H.265/HEVC (High Efficiency Video Coding) use two types of prediction: inter prediction that uses temporal correlation between frames, and intra prediction that uses spatial correlation within frames. After performing prediction while switching and generating a residual signal, it is configured to perform orthogonal transform processing, loop filter processing, and entropy encoding processing and output the resulting stream.

ＨＥＶＣにおけるイントラ予測では、Ｐｌａｎａｒ予測やＤＣ予測や方向予測の計３５種類のモードが用意されており、エンコーダで決定されたモードに従って、隣接する復号済み参照画素を用いてイントラ予測を行うように構成されている。 Intra prediction in HEVC has a total of 35 types of modes, including planar prediction, DC prediction, and directional prediction, and is configured to perform intra prediction using adjacent decoded reference pixels according to the mode determined by the encoder. has been done.

ここで、イントラ予測では、フレーム内で最も左上に位置するＣＵ（Ｃｏｄｉｎｇ Ｕｎｉｔ）等、隣接する復号済み参照画素が存在しないＣＵでは、規定した値（１０ビットの動画像であれば「５１２」）を埋める処理により、予測画像を生成する際に用いる参照画素を作り出すように構成されている。 Here, in intra prediction, for a CU (Coding Unit) located at the upper leftmost position in a frame, where there is no adjacent decoded reference pixel, a specified value ("512" for a 10-bit video) is used. The configuration is such that reference pixels used when generating a predicted image are created by filling in the pixels.

また、従来のＨＥＶＣでは、符号化処理が、左上からラスタースキャン順に行われるために、参照画素が復号済みでない場合がある。このような場合には、最も近い復号済み参照画素を０次外挿した値を用いて予測画像を生成するように構成されている。 Furthermore, in conventional HEVC, since encoding processing is performed in raster scan order starting from the upper left, reference pixels may not have been decoded yet. In such a case, the predicted image is generated using a zero-order extrapolated value of the nearest decoded reference pixel.

ＣＵは、複数のブロック（ＴＵ：Ｔｒａｎｓｆｏｒｍ Ｕｎｉｔ）に分割され直交変換処理が施される。ＨＥＶＣにおいて、適用するイントラ予測の種類を示すイントラ予測モードは、ＣＵ内で共通であり、複数のＴＵに対して共通したイントラ予測モードを用いて予測が行われる。 The CU is divided into a plurality of blocks (TU: Transform Unit) and subjected to orthogonal transformation processing. In HEVC, an intra prediction mode indicating the type of intra prediction to be applied is common within a CU, and prediction is performed using the common intra prediction mode for a plurality of TUs.

イントラ予測では、図７に示すように、ラスタースキャン順による符号化処理により、ＣＵ＃Ｘの左下や右上に位置する参照画素Ｎが復号済みでない場合が多く、このような場合に、復号済みでない参照画素が存在する方向からの方向予測を行うと予測精度が低下し、符号化効率が低減してしまうという問題点があった。 In intra prediction, as shown in FIG. 7, reference pixels N located at the lower left or upper right of CU#X are often not decoded due to the encoding process based on the raster scan order. There is a problem in that when directional prediction is performed from the direction in which reference pixels exist, prediction accuracy decreases and encoding efficiency decreases.

以下、図８（ａ）～図８（ｄ）を用いて、かかる問題点について具体的に説明する。図８は、従来のＨＥＶＣにおけるイントラ予測の一例について示す。 This problem will be specifically explained below using FIGS. 8(a) to 8(d). FIG. 8 shows an example of intra prediction in conventional HEVC.

かかる例では、図８（ａ）に示すように、図７の例の場合と同様に、ＣＵ＃Ａ１（フレーム内の左上のＣＵ）の参照画素については、全てが復号済みである。同様に、図８（ｃ）に示すように、ＣＵ＃Ａ３（フレーム内の左下のＣＵ）の参照画素については、全てが復号済みである。 In this example, as shown in FIG. 8A, all reference pixels of CU #A1 (upper left CU in the frame) have been decoded, as in the example of FIG. Similarly, as shown in FIG. 8C, all reference pixels of CU #A3 (lower left CU in the frame) have been decoded.

これに対して、図８（ｂ）に示すように、ＣＵ＃Ａ１内に位置する参照画素Ｗ１～Ｗ３は復号済みであるが、ＣＵ＃Ａ３内に位置する参照画素Ｂ１～Ｂ４は復号されていないので、そのままＣＵ＃Ａ２（フレーム内の右上のＣＵ）の予測画像を生成する際の参照画素とすることはできない。 On the other hand, as shown in FIG. 8(b), reference pixels W1 to W3 located in CU#A1 have been decoded, but reference pixels B1 to B4 located in CU#A3 have not been decoded. Therefore, it cannot be used as a reference pixel when generating a predicted image of CU #A2 (upper right CU in the frame).

このため、従来のＨＥＶＣでは、図８（ｂ）に示すように、ＣＵ＃Ａ１内に位置する復号済み参照画素Ｗ１～Ｗ３の一番下に位置する参照画素Ｗ１の値を、ＣＵ＃Ａ３内の同じ列に位置する未復号参照画素Ｂ１～Ｂ４にコピーするように規定されている。 Therefore, in conventional HEVC, as shown in FIG. 8(b), the value of the reference pixel W1 located at the bottom of the decoded reference pixels W1 to W3 located within CU#A1 is It is specified that the pixel data is copied to undecoded reference pixels B1 to B4 located in the same column.

同様に、従来のＨＥＶＣでは、図８（ｄ）に示すように、ＣＵ＃Ａ３内に位置する復号済み参照画素Ｂ１～Ｂ３の一番下に位置する参照画素Ｂ１の値を、ＣＵ＃Ａ３の下側に存在するＣＵ内の同じ列に位置する未復号参照画素Ｐ３にコピーするように規定されている。 Similarly, in conventional HEVC, as shown in FIG. 8(d), the value of reference pixel B1 located at the bottom of decoded reference pixels B1 to B3 located in CU #A3 is It is specified that the pixel is copied to the undecoded reference pixel P3 located in the same column in the CU located below.

したがって、図８の例のように、左下から右上に向かって方向予測が行われる場合、生成された予測画像の多くはコピーで埋められた未復号参照画素により構成されているため、予測精度が低下し、符号化効率が低減してしまうという問題点があった。 Therefore, when directional prediction is performed from the lower left to the upper right, as in the example in FIG. There was a problem in that the coding efficiency decreased.

かかる問題点を解決するために、ＴＵ分割が行われるイントラ予測において、ＣＵ内に存在する複数のＴＵに対する符号化処理順として、ラスタースキャン順（例えば、Ｚ型）の他、Ｕ型やＸ型等の符号化順に自由度を持たせることによって予測精度の向上を図る技術が知られている（非特許文献１参照）。 In order to solve this problem, in intra prediction in which TU division is performed, the coding processing order for multiple TUs existing in a CU is not limited to raster scan order (for example, Z type), U type or X type. There is a known technique for improving prediction accuracy by giving a degree of freedom to the encoding order, such as (see Non-Patent Document 1).

望月等、「平均値座標に基づいた適用イントラ予測方式」、情報処理学会研究報告、ｖｏｌ、２０１２－ＡＶＭ－７７、Ｎｏ．１２Mochizuki et al., “Applied intra prediction method based on average value coordinates”, Information Processing Society of Japan Research Report, vol. 2012-AVM-77, No. 12

しかしながら、上述の非特許文献１に規定されている技術では、ＣＵ単位でどのような符号化処理順を用いるのかについてのフラグを伝送する必要があるため、伝送する情報量が増大してしまう他、全ての符号化処理順の中からどの符号化処理順が良いかを選択するために、符号化装置側では全ての組み合わせを試す必要があり、符号化装置側の計算時間が増大してしまうという問題点があった。 However, with the technology specified in the above-mentioned Non-Patent Document 1, it is necessary to transmit a flag indicating what encoding processing order is to be used for each CU, which increases the amount of information to be transmitted. , In order to select which encoding processing order is better from among all the encoding processing orders, the encoding device needs to try all combinations, which increases the calculation time on the encoding device side. There was a problem.

そこで、本発明は、上述した課題を解決するためになされたものであり、符号化装置によって伝送する情報量を増大させることなく、また、符号化装置側の計算時間を増大させることなく、予測精度や符号化効率を向上させることができる符号化装置、復号装置及びプログラムを提供することを目的とする。 Therefore, the present invention has been made to solve the above-mentioned problems. It is an object of the present invention to provide an encoding device, a decoding device, and a program that can improve accuracy and encoding efficiency.

本発明の第１の特徴は、動画像を構成するフレーム単位の原画像を符号化対象ブロックに分割して符号化するように構成されている符号化装置であって、イントラ予測モードに基づいて、前記符号化対象ブロック内において復号済みでない隣接画素から予測画像が生成される合成領域を決定するように構成されている合成領域決定部と、前記合成領域に含まれるか否かに基づいて、各領域の予測画像の生成方法を変更するように構成されているイントラ予測部とを具備することを要旨とする。 A first feature of the present invention is an encoding device configured to divide an original image in units of frames constituting a moving image into blocks to be encoded and encode the blocks based on an intra prediction mode. , a compositing area determining unit configured to determine a compositing area in which a predicted image is generated from adjacent pixels that have not been decoded in the encoding target block, and based on whether or not they are included in the compositing area, The gist of the present invention is to include an intra prediction unit configured to change a method of generating a predicted image for each region.

本発明の第２の特徴は、動画像を構成するフレーム単位の原画像を符号化対象ブロックに分割して復号するように構成されている復号装置であって、イントラ予測モードに基づいて、前記符号化対象ブロック内において復号済みでない隣接画素から予測画像が生成される合成領域を決定するように構成されている合成領域決定部と、前記合成領域に含まれるか否かに基づいて、各領域の予測画像の生成方法を変更するように構成されているイントラ予測部とを具備することを要旨とする。 A second feature of the present invention is a decoding device configured to divide an original image in units of frames constituting a moving image into blocks to be coded and decode the blocks based on an intra prediction mode. a composition region determination unit configured to determine a composition region in which a predicted image is generated from adjacent pixels that have not been decoded in the encoding target block; The gist of the present invention is to include an intra prediction unit configured to change a method of generating a predicted image.

本発明の第３の特徴は、コンピュータを、上述の第１又は第２の特徴に記載の符号化装置として機能させるためのプログラムであることを要旨とする。 A third feature of the present invention is a program for causing a computer to function as the encoding device according to the first or second feature.

本発明の第４の特徴は、コンピュータを、上述の第１又は第２の特徴に記載の復号装置として機能させるためのプログラムであることを要旨とする。 A fourth feature of the present invention is a program for causing a computer to function as the decoding device according to the first or second feature.

本発明によれば、符号化装置によって伝送する情報量を増大させることなく、また、符号化装置側の計算時間を増大させることなく、予測精度や符号化効率を向上させることができる符号化装置、復号装置及びプログラムを提供することができる。 According to the present invention, an encoding device that can improve prediction accuracy and encoding efficiency without increasing the amount of information transmitted by the encoding device and without increasing the calculation time on the encoding device side. , a decoding device and program can be provided.

図１は、第１の実施形態に係る符号化装置１の機能ブロック図である。FIG. 1 is a functional block diagram of an encoding device 1 according to the first embodiment. 図２は、第１の実施形態において予測画像が生成される様子の一例を示す図である。FIG. 2 is a diagram illustrating an example of how a predicted image is generated in the first embodiment. 図３は、第１の実施形態において予測画像が生成される様子の一例を示す図である。FIG. 3 is a diagram illustrating an example of how a predicted image is generated in the first embodiment. 図４は、第１の実施形態に係る復号装置３の機能ブロック図である。FIG. 4 is a functional block diagram of the decoding device 3 according to the first embodiment. 図５は、第１の実施形態に係る符号化装置１及び復号装置３の動作を示すフローチャートである。FIG. 5 is a flowchart showing the operations of the encoding device 1 and the decoding device 3 according to the first embodiment. 図６は、第２の実施形態において予測画像が生成される様子の一例を示す図である。FIG. 6 is a diagram illustrating an example of how a predicted image is generated in the second embodiment. 図７は、従来のＨＥＶＣにおいて予測画像が生成される様子の一例を示す図である。FIG. 7 is a diagram illustrating an example of how a predicted image is generated in conventional HEVC. 図８は、従来のＨＥＶＣにおいて予測画像が生成される様子の一例を示す図である。FIG. 8 is a diagram illustrating an example of how a predicted image is generated in conventional HEVC.

（第１の実施形態）
以下、図１～図５を参照して、本発明の第１の実施形態に係る符号化装置１及び復号装置３について説明する。ここで、本実施形態に係る符号化装置１及び復号装置３は、ＨＥＶＣにおけるイントラ予測に対応するように構成されている。 (First embodiment)
An encoding device 1 and a decoding device 3 according to a first embodiment of the present invention will be described below with reference to FIGS. 1 to 5. Here, the encoding device 1 and the decoding device 3 according to this embodiment are configured to support intra prediction in HEVC.

本実施形態に係る符号化装置１は、動画像を構成するフレーム単位の原画像を符号化対象ブロックに分割して符号化するように構成されている。なお、本実施形態では、符号化対象のＣＵの左側及び上側に隣接する画素は全て復号済みであるものとする。 The encoding device 1 according to the present embodiment is configured to divide an original image in units of frames constituting a moving image into encoding target blocks and encode them. In this embodiment, it is assumed that all pixels adjacent to the left side and above the CU to be encoded have already been decoded.

また、本実施形態に係る符号化装置１は、ＣＵを複数のＴＵに分割することができるように構成されていてもよい。したがって、本実施形態では、符号化対象ブロックは、ＣＵであってもよいし、ＴＵであってもよい。以下、本実施形態では、符号化対象ブロックとしてＣＵが用いられるケースを例にして説明する。 Furthermore, the encoding device 1 according to this embodiment may be configured to be able to divide a CU into a plurality of TUs. Therefore, in this embodiment, the encoding target block may be a CU or a TU. Hereinafter, in this embodiment, a case where a CU is used as a block to be encoded will be described as an example.

また、本実施形態では、ＣＵの符号化順及び復号順として、従来のＨＥＶＣで用いられているラスタースキャン順（図７や図８に示すようなＺ型）が用いられているケースを例にして説明しているが、かかる符号化順及び復号順として、Ｕ型やＸ型等の他の符号化順及び復号順が用いられていてもよい。 Furthermore, in this embodiment, a case is taken as an example in which the raster scan order (Z-type as shown in FIGS. 7 and 8) used in conventional HEVC is used as the CU encoding order and decoding order. However, as the encoding order and decoding order, other encoding orders and decoding orders such as U-type and X-type may be used.

図１に示すように、本実施形態に係る符号化装置１は、イントラ予測モード決定部１１と、合成領域決定部１２と、イントラ予測部１３と、残差信号生成部１４と、直交変換・量子化部１５と、逆直交変換・逆量子化部１６と、局部復号画像生成部１７と、メモリ部１８と、エントロピー符号化部１９とを具備している。 As shown in FIG. 1, the encoding device 1 according to the present embodiment includes an intra prediction mode determination section 11, a synthesis region determination section 12, an intra prediction section 13, a residual signal generation section 14, and an orthogonal transform/transform It includes a quantization section 15, an inverse orthogonal transform/inverse quantization section 16, a locally decoded image generation section 17, a memory section 18, and an entropy encoding section 19.

イントラ予測モード決定部１１は、ＣＵに適用する最適なイントラ予測モードを決定するように構成されている。 The intra prediction mode determining unit 11 is configured to determine the optimal intra prediction mode to be applied to the CU.

合成領域決定部１２は、イントラ予測モード決定部１１によって決定されたイントラ予測モードに基づいて、ＣＵ内において復号済みでない隣接画素から予測画像が生成される合成領域Ｘを決定するように構成されている。 The compositing region determining unit 12 is configured to determine a compositing region X in which a predicted image is generated from adjacent pixels that have not been decoded within the CU, based on the intra prediction mode determined by the intra prediction mode determining unit 11. There is.

具体的には、図２に示すように、合成領域決定部１２は、イントラ予測モード決定部１１によって決定されたイントラ予測モードの方向が左下から右上に向かう方向である場合（すなわち、左下から右上に向かって方向予測が行われる場合）に、ＣＵ＃Ａ２内において復号済みでない隣接画素Ｂ１～Ｂ４から予測画像が生成される合成領域Ｘを決定するように構成されていてもよい。 Specifically, as shown in FIG. 2, when the direction of the intra prediction mode determined by the intra prediction mode determination unit 11 is from the lower left to the upper right (that is, from the lower left to the upper right In the case where directional prediction is performed toward CU#A2), the composition area X in which a predicted image is generated from adjacent pixels B1 to B4 that have not been decoded in CU#A2 may be determined.

また、本発明は、イントラ予測モード決定部１１によって決定されたイントラ予測モードの方向が右上から左下に向かう方向である場合（すなわち、右上から左下に向かって方向予測が行われる場合）にも適用可能であるが、以下、イントラ予測モード決定部１１によって決定されたイントラ予測モードの方向が左下から右上に向かう方向である場合（すなわち、左下から右上に向かって方向予測が行われる場合）を例に挙げて説明する。 Furthermore, the present invention is also applicable when the direction of the intra prediction mode determined by the intra prediction mode determination unit 11 is from the upper right to the lower left (that is, when direction prediction is performed from the upper right to the lower left). However, in the following, an example will be given in which the direction of the intra prediction mode determined by the intra prediction mode determining unit 11 is from the lower left to the upper right (that is, when direction prediction is performed from the lower left to the upper right). I will list and explain.

なお、本明細書の図において、イントラ予測モードの方向（予測方向）を示す矢印は、ＨＥＶＣ規格書における記載と同様に、イントラ予測の対象の画素から参照画素に向かうものとする（以下同様）。 In addition, in the figures of this specification, the arrow indicating the direction of the intra prediction mode (prediction direction) is assumed to be directed from the pixel to be intra-predicted to the reference pixel, as described in the HEVC standard (the same applies hereinafter). .

イントラ予測部１３は、合成領域決定部１２によって決定された合成領域Ｘに含まれるか否かに基づいて、各領域の予測画像の生成方法を変更するように構成されている。 The intra prediction unit 13 is configured to change the method of generating a predicted image for each area based on whether the area is included in the synthesis area X determined by the synthesis area determination unit 12.

具体的には、イントラ予測部１３は、図３（ａ）に示すように、ＣＵ＃Ａ２において、合成領域Ｘに含まれていない領域（すなわち、参照画素Ｗ１～Ｗ３が復号済みである領域）Ｙでは、イントラ予測モード決定部１１によって決定されたイントラ予測モードを用いて、復号済み参照画素Ｗ１～Ｗ３に基づいて予測画像を生成するように構成されている。 Specifically, as shown in FIG. 3(a), the intra prediction unit 13 detects an area in CU#A2 that is not included in the synthesis area X (that is, an area where reference pixels W1 to W3 have been decoded). Y is configured to use the intra prediction mode determined by the intra prediction mode determination unit 11 to generate a predicted image based on the decoded reference pixels W1 to W3.

一方、イントラ予測部１３は、図３（ｂ）に示すように、ＣＵ＃Ａ２において、合成領域Ｘに含まれている領域（すなわち、参照画素Ｂ２～Ｂ４が復号済みでない領域）では、予め規定した予測方法を用いて予測画像を生成するように構成されている。 On the other hand, as shown in FIG. 3(b), the intra prediction unit 13 determines that in the area included in the compositing area The system is configured to generate a predicted image using a predicted prediction method.

ここで、予め規定した予測方法とは、例えば、ＤＣ予測やＰｌａｎａｒ予測等のイントラ予測の他、隣接する復号済み参照画素の値の平均等で予測画像を生成する予測方法等が挙げられる。 Here, the predefined prediction method includes, for example, intra prediction such as DC prediction and planar prediction, as well as a prediction method that generates a predicted image by averaging the values of adjacent decoded reference pixels.

なお、符号化装置１及び復号装置３において、かかる予測方法について予め決定していれば、如何なる予測方法を使う場合であっても、符号化装置１から復号装置３に対して、かかる予測方法を示す新たなフラグを伝送する必要はない。 Note that, as long as such a prediction method is determined in advance in the encoding device 1 and the decoding device 3, no matter what prediction method is used, the encoding device 1 can transmit the prediction method to the decoding device 3. There is no need to transmit a new flag indicating the

また、合成領域決定部１２によって決定された合成領域は、イントラ予測モードの方向及び隣接する画素が復号済みであるか否かによって一意に決定することができるため、符号化装置１から復号装置３に対して、新たに合成領域がどの領域であるかを示すフラグを伝送する必要はない。 Furthermore, since the synthesis area determined by the synthesis area determination unit 12 can be uniquely determined depending on the direction of the intra prediction mode and whether or not adjacent pixels have been decoded, There is no need to newly transmit a flag indicating which area is the synthesis area.

例えば、図３（ｂ）に示すように、イントラ予測部１３は、ＣＵ＃Ａ２における合成領域Ｘに含まれている領域内の画素Ｘ１の位置では、Ｐｌａｎａｒ予測を用いて、画素Ｗ３、画素Ｄ１、画素Ｄ２及び画素Ｄ４を合成することによって予測画像を生成するように構成されていてもよい。ここで、画素Ｄ４には、画素Ｂ４の値がコピーされており、画素Ｂ４には、画素Ｗ１の値がコピーされている。 For example, as shown in FIG. 3B, the intra prediction unit 13 uses Planar prediction at the position of the pixel X1 in the area included in the synthesis area , the pixel D2 and the pixel D4 may be configured to generate the predicted image. Here, the value of pixel B4 is copied to pixel D4, and the value of pixel W1 is copied to pixel B4.

残差信号生成部１４は、イントラ予測部１３によって生成された予測画像と原画像との差分により残差信号を生成するように構成されている。 The residual signal generation unit 14 is configured to generate a residual signal based on the difference between the predicted image generated by the intra prediction unit 13 and the original image.

直交変換・量子化部１５は、残差信号生成部１４によって生成された残差信号に対して直交変換処理及び量子化処理を施し、量子化された変換係数を生成するように構成されている。 The orthogonal transformation/quantization unit 15 is configured to perform orthogonal transformation processing and quantization processing on the residual signal generated by the residual signal generation unit 14 to generate quantized transformation coefficients. .

逆直交変換・逆量子化部１６は、直交変換・量子化部１５によって生成された量子化された変換係数に対して、再び逆量子化処理及び逆直交変換処理を施し、量子化された残差信号を生成するように構成されている。 The inverse orthogonal transform/inverse quantization unit 16 performs inverse quantization processing and inverse orthogonal transform processing again on the quantized transform coefficients generated by the orthogonal transform/quantization unit 15, and converts the quantized residuals into The circuit is configured to generate a difference signal.

局部復号画像生成部１７は、逆直交変換・逆量子化部１６によって生成された量子化された残差信号に対してイントラ予測部１３によって生成された予測画像を加えることで局部復号画像を生成するように構成されている。 The local decoded image generation unit 17 generates a locally decoded image by adding the predicted image generated by the intra prediction unit 13 to the quantized residual signal generated by the inverse orthogonal transform/inverse quantization unit 16. is configured to do so.

メモリ部１８は、局部復号画像生成部１７によって生成された局部復号画像を参照画像として利用可能に保持するように構成されている。 The memory unit 18 is configured to hold the locally decoded image generated by the locally decoded image generator 17 so that it can be used as a reference image.

エントロピー符号化部１９は、イントラ予測モード決定部１１によって決定されたイントラ予測モード等を含むフラグ情報や量子化された変換係数に対してエントロピー符号化処理を施してストリーム出力するように構成されている。 The entropy encoding unit 19 is configured to perform entropy encoding processing on the flag information including the intra prediction mode etc. determined by the intra prediction mode determination unit 11 and the quantized transform coefficients, and output the resulting stream. There is.

また、本実施形態に係る復号装置３は、動画像を構成するフレーム単位の原画像をＣＵに分割して復号するように構成されている。また、本実施形態に係る復号装置３は、本実施形態に係る符号化装置１と同様に、ＣＵを複数のＴＵに分割することができるように構成されている。 Furthermore, the decoding device 3 according to the present embodiment is configured to decode an original image in units of frames constituting a moving image by dividing it into CUs. Further, the decoding device 3 according to this embodiment is configured to be able to divide a CU into a plurality of TUs, similarly to the encoding device 1 according to this embodiment.

図４に示すように、本実施形態に係る復号装置３は、エントロピー復号部３１と、合成領域決定部３２と、イントラ予測部３３と、逆量子化・逆変換部３４と、局部復号画像生成部３５と、メモリ部３６とを具備している。 As shown in FIG. 4, the decoding device 3 according to the present embodiment includes an entropy decoding section 31, a synthesis region determining section 32, an intra prediction section 33, an inverse quantization/inverse transformation section 34, and a locally decoded image generation section 34. It has a section 35 and a memory section 36.

エントロピー復号部３１は、符号化装置１から出力されたストリームから、変換係数やフラグ情報等を復号するように構成されている。ここで、変換係数は、符号化装置１によって、フレーム単位の原画像をＣＵに分割して符号化された信号として得られた量子化された変換係数である。また、フラグ情報は、予測モード等の付随する情報を含む。 The entropy decoding unit 31 is configured to decode transform coefficients, flag information, etc. from the stream output from the encoding device 1. Here, the transform coefficients are quantized transform coefficients obtained by the encoding device 1 as a signal encoded by dividing an original image in units of frames into CUs. Further, the flag information includes accompanying information such as prediction mode.

合成領域決定部３２は、エントロピー復号部３１によって出力されたイントラ予測モードに基づいて、ＣＵ内において復号済みでない隣接画素から予測画像が生成される合成領域Ｘを決定するように構成されている。 The compositing area determining unit 32 is configured to determine a compositing area X in which a predicted image is generated from adjacent pixels that have not been decoded within the CU, based on the intra prediction mode output by the entropy decoding unit 31.

具体的には、図２に示すように、合成領域決定部３２は、エントロピー復号部３１によって出力されたイントラ予測モードの方向が左下から右上に向かう方向である場合（すなわち、左下から右上に向かって方向予測が行われる場合）に、ＣＵ＃Ａ２内において復号済みでない隣接画素Ｂ１～Ｂ４から予測画像が生成される合成領域Ｘを決定するように構成されていてもよい。 Specifically, as shown in FIG. 2, when the direction of the intra prediction mode output by the entropy decoding unit 31 is from the lower left to the upper right (that is, from the lower left to the upper right), (in the case where direction prediction is performed), the composition area X in which a predicted image is generated from adjacent pixels B1 to B4 that have not been decoded in CU #A2 may be determined.

イントラ予測部３３は、合成領域決定部３２によって決定された合成領域Ｘ及びエントロピー復号部３１によって出力されたイントラ予測モードを用いて、予測画像を生成するように構成されていてもよい。 The intra prediction unit 33 may be configured to generate a predicted image using the synthesis area X determined by the synthesis area determining unit 32 and the intra prediction mode output by the entropy decoding unit 31.

具体的には、イントラ予測部３３は、イントラ予測部１３と同様に、合成領域決定部１２によって決定された合成領域Ｘに含まれるか否かに基づいて、各領域の予測画像の生成方法を変更するように構成されている。 Specifically, like the intra prediction unit 13, the intra prediction unit 33 determines a method for generating a predicted image for each area based on whether or not it is included in the synthesis area X determined by the synthesis area determination unit 12. configured to change.

例えば、イントラ予測部３３は、図３（ａ）に示すように、ＣＵ＃Ａ２において、合成領域Ｘに含まれていない領域（すなわち、参照画素Ｗ１～Ｗ３が復号済みである領域）Ｙでは、エントロピー復号部３１によって出力されたイントラ予測モードを用いて、復号済み参照画素Ｗ１～Ｗ３に基づいて予測画像を生成するように構成されている。 For example, as shown in FIG. 3A, the intra prediction unit 33 calculates, in CU#A2, in an area Y that is not included in the synthesis area X (that is, an area where reference pixels W1 to W3 have been decoded), It is configured to use the intra prediction mode output by the entropy decoding unit 31 to generate a predicted image based on the decoded reference pixels W1 to W3.

一方、イントラ予測部３３は、図３（ｂ）に示すように、ＣＵ＃Ａ２において、合成領域Ｘに含まれている領域（すなわち、参照画素Ｂ２～Ｂ４が復号済みでない領域）では、上述の予め規定した予測方法を用いて予測画像を生成するように構成されている。 On the other hand, as shown in FIG. 3(b), the intra prediction unit 33 performs the above-mentioned process in the area included in the synthesis area It is configured to generate a predicted image using a predefined prediction method.

逆量子化・逆変換部３４は、エントロピー復号部３１によって出力された量子化された変換係数に対して逆量子化処理及び逆変換処理（例えば、逆直交変換処理）を施すことによって、残差信号を生成するように構成されている。 The inverse quantization/inverse transform unit 34 performs an inverse quantization process and an inverse transform process (for example, inverse orthogonal transform process) on the quantized transform coefficients output by the entropy decoding unit 31 to obtain a residual difference. configured to generate a signal.

局部復号画像生成部３５は、イントラ予測部３３によって生成された予測画像と逆量子化・逆変換部３４によって生成された残差信号とを加えることで局部復号画像を生成するように構成されている。 The local decoded image generation unit 35 is configured to generate a locally decoded image by adding the predicted image generated by the intra prediction unit 33 and the residual signal generated by the inverse quantization/inverse transformation unit 34. There is.

メモリ部３６は、局部復号画像生成部３５によって生成された局部復号画像を、イントラ予測及びインター予測のための参照画像として利用可能に保持するように構成されている。 The memory unit 36 is configured to hold the locally decoded image generated by the locally decoded image generator 35 so that it can be used as a reference image for intra prediction and inter prediction.

図５に、本実施形態に係る符号化装置１及び復号装置３によって予測画像を生成する動作の一例について説明するためのフローチャートについて示す。 FIG. 5 shows a flowchart for explaining an example of the operation of generating a predicted image by the encoding device 1 and the decoding device 3 according to the present embodiment.

第１に、図５を参照して、本実施形態に係る符号化装置１によって予測画像を生成する動作の一例について説明する。 First, with reference to FIG. 5, an example of the operation of generating a predicted image by the encoding device 1 according to the present embodiment will be described.

図５に示すように、ステップＳ１０１において、符号化装置１は、ＣＵに適用する最適なイントラ予測モードを決定する。 As shown in FIG. 5, in step S101, the encoding device 1 determines the optimal intra prediction mode to be applied to the CU.

ステップＳ１０２において、符号化装置１は、ステップＳ１０１において決定されたイントラ予測モードに基づいて、ＣＵ内において復号済みでない隣接画素から予測画像が生成される合成領域Ｘを決定する。 In step S102, the encoding device 1 determines a synthesis region X in which a predicted image is generated from adjacent pixels that have not been decoded in the CU, based on the intra prediction mode determined in step S101.

ステップＳ１０３において、符号化装置１は、ＣＵ内において、予測画像を生成する領域が合成領域に含まれているか否かについて判定する。「Ｎｏ」の場合、本動作は、ステップＳ１０４に進み、「Ｙｅｓ」の場合、本動作は、ステップＳ１０５に進む。 In step S103, the encoding device 1 determines whether or not a region for generating a predicted image is included in the synthesis region within the CU. If “No”, the operation proceeds to step S104; if “Yes”, the operation proceeds to step S105.

ステップＳ１０４において、符号化装置１は、ステップＳ１０１において決定されたイントラ予測モードを用いて、復号済み参照画素に基づいて予測画像を生成する。 In step S104, the encoding device 1 generates a predicted image based on the decoded reference pixels using the intra prediction mode determined in step S101.

ステップＳ１０５において、符号化装置１は、上述の予め規定した予測方法を用いて予測画像を生成する。 In step S105, the encoding device 1 generates a predicted image using the above-mentioned predefined prediction method.

第２に、図５を参照して、本実施形態に係る復号装置３によって予測画像を生成する動作の一例について説明する。 Second, with reference to FIG. 5, an example of the operation of generating a predicted image by the decoding device 3 according to this embodiment will be described.

図５に示すように、ステップＳ１０１において、復号装置３は、エントロピー復号処理によって得られた情報に基づいてイントラ予測モードを決定する。 As shown in FIG. 5, in step S101, the decoding device 3 determines an intra prediction mode based on the information obtained by the entropy decoding process.

ステップＳ１０２において、復号装置３は、ステップＳ１０１において決定されたイントラ予測モードに基づいて、ＣＵ内において復号済みでない隣接画素から予測画像が生成される合成領域Ｘを決定する。 In step S102, the decoding device 3 determines a synthesis region X in which a predicted image is generated from adjacent pixels that have not been decoded in the CU, based on the intra prediction mode determined in step S101.

ステップＳ１０３において、復号装置３は、ＣＵ内において、予測画像を生成する領域が合成領域に含まれているか否かについて判定する。「Ｎｏ」の場合、本動作は、ステップＳ１０４に進み、「Ｙｅｓ」の場合、本動作は、ステップＳ１０５に進む。 In step S103, the decoding device 3 determines whether or not a region in which a predicted image is to be generated is included in the synthesis region within the CU. If “No”, the operation proceeds to step S104; if “Yes”, the operation proceeds to step S105.

ステップＳ１０４において、復号装置３は、ステップＳ１０１において決定されたイントラ予測モードを用いて、復号済み参照画素に基づいて予測画像を生成する。 In step S104, the decoding device 3 generates a predicted image based on the decoded reference pixels using the intra prediction mode determined in step S101.

ステップＳ１０５において、復号装置３は、上述の予め規定した予測方法を用いて予測画像を生成する。 In step S105, the decoding device 3 generates a predicted image using the above-described predefined prediction method.

本実施形態に係る符号化装置１及び復号装置３によれば、イントラ予測モードの方向（予測方向）の参照先に未復号画素が含まれている場合、隣接する復号済み参照画素をコピーすることで補間した参照画素を用いて生成した予測画像と予め規定した予測方法を用いて生成した予測画像とを合成することにより新たな予測画像を生成することで、予測精度低下を抑制することができる。 According to the encoding device 1 and the decoding device 3 according to the present embodiment, when an undecoded pixel is included in the reference destination of the intra prediction mode direction (prediction direction), adjacent decoded reference pixels can be copied. By generating a new predicted image by combining the predicted image generated using reference pixels interpolated with the predicted image generated using a predefined prediction method, it is possible to suppress the decrease in prediction accuracy. .

（第２の実施形態）
以下、図６を参照して、本発明の第２の実施形態に係る符号化装置１及び復号装置３について、上述の第１の実施形態に係る符号化装置１及び復号装置３との相違点に着目して説明する。 (Second embodiment)
Hereinafter, with reference to FIG. 6, differences between the encoding device 1 and decoding device 3 according to the second embodiment of the present invention and the encoding device 1 and decoding device 3 according to the above-described first embodiment will be explained. The explanation will focus on

本実施形態に係る符号化装置１では、イントラ予測部１３は、合成領域Ｘに含まれる領域と合成領域Ｘに含まれない領域Ｙとの間の境界領域において、所定条件が満たされる場合に、かかる境界領域の予測画像に対して平滑フィルタを適用するように構成されている。 In the encoding device 1 according to the present embodiment, the intra prediction unit 13 performs the following operations when a predetermined condition is satisfied in the boundary area between the area included in the synthesis area X and the area Y not included in the synthesis area X. It is configured to apply a smoothing filter to the predicted image of the boundary area.

同様に、本実施形態に係る復号装置３では、イントラ予測部３３は、合成領域Ｘに含まれる領域と合成領域Ｘに含まれない領域Ｙとの間の境界領域において、所定条件が満たされる場合に、かかる境界領域の予測画像に対して平滑フィルタを適用するように構成されている。 Similarly, in the decoding device 3 according to the present embodiment, the intra prediction unit 33 detects that when a predetermined condition is satisfied in the boundary area between the area included in the synthesis area X and the area Y not included in the synthesis area In addition, it is configured to apply a smoothing filter to the predicted image of the boundary area.

例えば、図６の例では、かかる境界領域には、合成領域Ｘに含まれる領域内の画素Ｘ１、Ｘ２、Ｘ３、Ｘ４及び合成領域Ｘに含まれない領域Ｙ内の画素Ｙ１、Ｙ２、Ｙ３が位置する領域が該当する。 For example, in the example of FIG. 6, the boundary area includes pixels X1, X2, X3, and X4 in the area included in the synthesis area X, and pixels Y1, Y2, and Y3 in the area Y that is not included in the synthesis area X. The area in which it is located corresponds.

また、所定条件としては、かかる境界領域における不連続性が所定閾値よりも高いことが挙げられる。ここで、不連続性の評価としては、例えば、水平方向の差分や垂直方向の差分や斜め方向の差分等の線形結合で表わす方法が挙げられる。 Further, the predetermined condition includes that the discontinuity in the boundary region is higher than a predetermined threshold value. Here, discontinuity can be evaluated by, for example, a method of expressing by a linear combination of horizontal differences, vertical differences, diagonal differences, and the like.

すなわち、イントラ予測部１３及びイントラ予測部３３は、かかる境界領域における不連続性の評価の値が所定閾値よりも高い場合には、かかる境界領域の予測画像に対して平滑フィルタを適用するように構成されている。 That is, the intra prediction unit 13 and the intra prediction unit 33 apply a smoothing filter to the predicted image of the boundary area when the evaluation value of discontinuity in the boundary area is higher than a predetermined threshold. It is configured.

例えば、図６の例では、イントラ予測部１３及びイントラ予測部３３は、かかる境界領域における不連続性の評価の値が所定閾値よりも高い場合には、合成領域Ｘに含まれる領域内の画素Ｘ１、Ｘ２、Ｘ３、Ｘ４及び合成領域Ｘに含まれない領域Ｙ内の画素Ｙ１、Ｙ２、Ｙ３が位置する領域の予測画像に対して平滑フィルタを適用するように構成されている。 For example, in the example of FIG. 6, if the evaluation value of discontinuity in the boundary region is higher than a predetermined threshold, the intra prediction unit 13 and the intra prediction unit 33 The smoothing filter is configured to be applied to the predicted image of the area where pixels Y1, X2, X3, and X4 and the pixels Y1, Y2, and Y3 in the area Y that are not included in the synthesis area X are located.

なお、図６の例では、イントラ予測部１３及びイントラ予測部３３は、合成領域Ｘに含まれる領域内の画素Ｘ５、Ｘ６、Ｘ７が位置する領域の予測画像に対しても平滑フィルタを適用するように構成されている。 Note that in the example of FIG. 6, the intra prediction unit 13 and the intra prediction unit 33 also apply the smoothing filter to the predicted image of the area where pixels X5, X6, and X7 in the area included in the synthesis area X are located. It is configured as follows.

ここで、符号化装置１と復号装置３との間で、上述の所定閾値を共有することで、符号化装置１から復号装置３に対して新たなフラグを伝送する必要がなくなる。 Here, by sharing the above-mentioned predetermined threshold value between the encoding device 1 and the decoding device 3, there is no need to transmit a new flag from the encoding device 1 to the decoding device 3.

本実施形態に係る符号化装置１及び復号装置３によれば、合成領域Ｘに含まれるか否かに基づいて各領域の予測画像の生成方法を変更することに起因する境界領域の不連続性を低減することができ、符号化性能を向上させることができる。 According to the encoding device 1 and the decoding device 3 according to the present embodiment, the discontinuity of the boundary region is caused by changing the method of generating the predicted image of each region based on whether it is included in the synthesis region X. can be reduced, and encoding performance can be improved.

（第３の実施形態）
以下、図６を参照して、本発明の第３の実施形態に係る符号化装置１及び復号装置３について、上述の第１及び第２の実施形態に係る符号化装置１及び復号装置３との相違点に着目して説明する。 (Third embodiment)
Hereinafter, with reference to FIG. 6, the encoding device 1 and the decoding device 3 according to the third embodiment of the present invention will be explained. The explanation will focus on the differences between the two.

本実施形態に係る符号化装置１及び復号装置３において、イントラ予測部１３及びイントラ予測部３３は、合成領域Ｘに含まれる領域において、従来のＨＥＶＣにおける予測方法を用いて生成された予測画像（コピーによって埋められた未復号参照画素に基づいて生成された予測画像）及び合成領域Ｘにおいて生成された予測画像（上述の予め規定した予測方法を用いて生成された予測画像）の加重平均によって予測画像を生成するように構成されている。 In the encoding device 1 and the decoding device 3 according to the present embodiment, the intra prediction unit 13 and the intra prediction unit 33 perform a predicted image ( The predicted image generated based on the undecoded reference pixels filled in by copying) and the predicted image generated in the synthesis area X (the predicted image generated using the above-mentioned predefined prediction method) are predicted. configured to generate an image.

なお、本実施形態に係る符号化装置１及び復号装置３において、イントラ予測部１３及びイントラ予測部３３は、上述の所定条件が満たされる場合にのみ、合成領域Ｘに含まれる領域において、従来のＨＥＶＣにおける予測方法を用いて生成された予測画像（コピーによって埋められた未復号参照画素に基づいて生成された予測画像）及び合成領域Ｘにおいて生成された予測画像（上述の予め規定した予測方法を用いて生成された予測画像）の加重平均によって予測画像を生成するように構成されていてもよい。 Note that in the encoding device 1 and the decoding device 3 according to the present embodiment, the intra prediction unit 13 and the intra prediction unit 33 perform conventional prediction in the area included in the synthesis area A predicted image generated using the prediction method in HEVC (a predicted image generated based on undecoded reference pixels filled in by copying) and a predicted image generated in the synthesis area The predicted image may be generated by a weighted average of the predicted images (generated using the predicted image).

本実施形態に係る符号化装置１及び復号装置３では、イントラ予測部１３及びイントラ予測部３３は、かかる加重平均を算出する際に用いる重み係数を算出するように構成されていてもよい。 In the encoding device 1 and the decoding device 3 according to this embodiment, the intra prediction unit 13 and the intra prediction unit 33 may be configured to calculate a weighting coefficient used when calculating the weighted average.

イントラ予測部１３及びイントラ予測部３３は、重み係数として予め定めた規定の値を用いるように構成されていてもよいし、予測画像を生成する際の復号済み参照画素の信用度を用いて重み係数を算出するように構成されていてもよい。 The intra prediction unit 13 and the intra prediction unit 33 may be configured to use a predetermined value as a weighting coefficient, or may be configured to use a weighting coefficient using the reliability of the decoded reference pixel when generating a predicted image. may be configured to calculate.

なお、図３（ｂ）の例では、復号済み参照画素Ｗ１～Ｗ４の信用度は高く、コピーによって生成された参照画素Ｂ１～Ｂ４の信用度は低い。また、参照画素Ｂ１の信用度と参照画素Ｂ４の信用度を比べると、コピー元に近い参照画素Ｂ４の信用度の方が高い。 In the example of FIG. 3(b), the reliability of the decoded reference pixels W1 to W4 is high, and the reliability of the reference pixels B1 to B4 generated by copying is low. Further, when comparing the reliability of the reference pixel B1 and the reliability of the reference pixel B4, the reliability of the reference pixel B4, which is closer to the copy source, is higher.

また、イントラ予測部１３及びイントラ予測部３３は、合成領域Ｘに含まれる領域と合成領域Ｘに含まれない領域Ｙとの間の境界領域からの距離に応じて、かかる重み係数を算出するように構成されていてもよい。 In addition, the intra prediction unit 13 and the intra prediction unit 33 calculate the weighting coefficient according to the distance from the boundary area between the area included in the synthesis area X and the area Y not included in the synthesis area X. It may be configured as follows.

例えば、イントラ予測部１３及びイントラ予測部３３は、かかる境界領域付近では、従来のＨＥＶＣにおける予測方法を用いて生成された予測画像（コピーによって埋められた未復号参照画素に基づいて生成された予測画像）の重み係数が強くなるように算出し、かかる境界領域から離れた領域では、合成領域Ｘにおいて生成された予測画像（上述の予め規定した予測方法を用いて生成された予測画像）の重み係数が強くなるように算出してもよい。 For example, the intra prediction unit 13 and the intra prediction unit 33 use a predicted image generated using a conventional HEVC prediction method (a predicted image generated based on undecoded reference pixels filled in by copying) near the boundary area. The weighting coefficient of the predicted image (image) is calculated to be strong, and in areas away from the boundary area, the weighting of the predicted image generated in the synthesis area X (the predicted image generated using the above-mentioned predefined prediction method) Calculations may be made so that the coefficient becomes stronger.

（その他の実施形態）
上述のように、本発明について、上述した実施形態によって説明したが、かかる実施形態における開示の一部をなす論述及び図面は、本発明を限定するものであると理解すべきではない。かかる開示から当業者には様々な代替実施形態、実施例及び運用技術が明らかとなろう。 (Other embodiments)
As mentioned above, the present invention has been explained using the embodiments described above, but the statements and drawings that form part of the disclosure in these embodiments should not be understood as limiting the present invention. Various alternative embodiments, implementations, and operational techniques will be apparent to those skilled in the art from such disclosure.

また、上述の実施形態では特に触れていないが、上述の符号化装置１及び復号装置３によって行われる各処理をコンピュータに実行させるプログラムが提供されてもよい。また、かかるプログラムは、コンピュータ読取り可能媒体に記録されていてもよい。コンピュータ読取り可能媒体を用いれば、かかるプログラムをコンピュータにインストールすることが可能である。ここで、かかるプログラムが記録されたコンピュータ読取り可能媒体は、非一過性の記録媒体であってもよい。非一過性の記録媒体は、特に限定されるものではないが、例えば、ＣＤ－ＲＯＭやＤＶＤ－ＲＯＭ等の記録媒体であってもよい。 Further, although not specifically mentioned in the above-described embodiment, a program that causes a computer to execute each process performed by the above-described encoding device 1 and decoding device 3 may be provided. Moreover, such a program may be recorded on a computer-readable medium. Computer readable media allow such programs to be installed on a computer. Here, the computer-readable medium on which such a program is recorded may be a non-transitory recording medium. The non-transitory recording medium is not particularly limited, and may be, for example, a recording medium such as a CD-ROM or a DVD-ROM.

或いは、上述の符号化装置１及び復号装置３内の少なくとも一部の機能を実現するためのプログラムを記憶するメモリ及びメモリに記憶されたプログラムを実行するプロセッサによって構成されるチップが提供されてもよい。 Alternatively, a chip may be provided that includes a memory that stores a program for realizing at least some of the functions in the encoding device 1 and decoding device 3 described above, and a processor that executes the program stored in the memory. good.

１…符号化装置
１１…イントラ予測モード決定部
１２…合成領域決定部
１３…イントラ予測部
１４…残差信号生成部
１５…直交変換・量子化部
１６…逆量子化部・逆直交変換部
１７…局部復号画像生成部
１８…メモリ部
１９…エントロピー符号化部
３…復号装置
３１…エントロピー復号部
３２…合成領域決定部
３３…イントラ予測部
３４…逆量子化・逆変換部
３５…局部復号画像生成部
３６…メモリ部 1... Encoding device 11... Intra prediction mode determining section 12... Synthesis region determining section 13... Intra prediction section 14... Residual signal generating section 15... Orthogonal transform/quantization section 16... Inverse quantization section/inverse orthogonal transform section 17 ...Local decoded image generation section 18...Memory section 19...Entropy encoding section 3...Decoding device 31...Entropy decoding section 32...Synthesis area determination section 33...Intra prediction section 34...Dequantization/inverse transformation section 35...Local decoded image Generation unit 36...memory unit

Claims (2)

動画像を構成するフレーム単位の原画像を分割した符号化対象ブロックを復号するように構成されている復号装置であって、
符号化側から伝送されるフラグ情報により指定される予測モードに基づいて決定する第１予測処理により第１予測画像を生成する第１予測部と、
前記符号化対象ブロックにおける合成領域を決定するように構成されている合成領域決定部と、
前記第１予測処理と異なる第２予測処理であって、符号化側から伝送される前記フラグ情報のほかに新たなフラグ情報の伝送なく決定される前記第２予測処理により、第２予測画像を生成する第２予測部と、
前記合成領域に含まれる予測画像を、前記第１予測画像と前記第２予測画像との加重平均により生成する予測画像合成部とを具備しており、
前記予測画像合成部は、前記加重平均に用いる重みを前記合成領域に含まれる画素の位置に応じて画素ごとに決定することを特徴とする復号装置。 A decoding device configured to decode a coding target block obtained by dividing an original image in units of frames constituting a moving image,
a first prediction unit that generates a first predicted image by a first prediction process determined based on a prediction mode specified by flag information transmitted from the encoding side;
a compositing region determining unit configured to determine a compositing region in the encoding target block;
A second prediction process that is different from the first prediction process and is determined without transmitting any new flag information in addition to the flag information transmitted from the encoding side, generates a second predicted image. a second prediction unit that generates;
a predicted image synthesis unit that generates a predicted image included in the synthesis area by a weighted average of the first predicted image and the second predicted image;
The decoding device is characterized in that the predicted image synthesis unit determines the weight used for the weighted average for each pixel according to the position of the pixel included in the synthesis area. コンピュータを請求項１に記載の復号装置として機能させるためのプログラム。 A program for causing a computer to function as the decoding device according to claim 1.
JP2022109409A 2020-06-24 2022-07-07 Decoding device and program Active JP7343662B2 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2022109409A JP7343662B2 (en) 2020-06-24 2022-07-07 Decoding device and program
JP2023141326A JP2023159443A (en) 2020-06-24 2023-08-31 Decoding device and program

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2020109183A JP7104101B2 (en) 2020-06-24 2020-06-24 Encoding device, decoding device and program
JP2022109409A JP7343662B2 (en) 2020-06-24 2022-07-07 Decoding device and program

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2020109183A Division JP7104101B2 (en) 2020-06-24 2020-06-24 Encoding device, decoding device and program

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2023141326A Division JP2023159443A (en) 2020-06-24 2023-08-31 Decoding device and program

Publications (2)

Publication Number Publication Date
JP2022125265A JP2022125265A (en) 2022-08-26
JP7343662B2 true JP7343662B2 (en) 2023-09-12

Family

ID=72666058

Family Applications (3)

Application Number Title Priority Date Filing Date
JP2020109183A Active JP7104101B2 (en) 2020-06-24 2020-06-24 Encoding device, decoding device and program
JP2022109409A Active JP7343662B2 (en) 2020-06-24 2022-07-07 Decoding device and program
JP2023141326A Pending JP2023159443A (en) 2020-06-24 2023-08-31 Decoding device and program

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2020109183A Active JP7104101B2 (en) 2020-06-24 2020-06-24 Encoding device, decoding device and program

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2023141326A Pending JP2023159443A (en) 2020-06-24 2023-08-31 Decoding device and program

Country Status (1)

Country Link
JP (3) JP7104101B2 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7104101B2 (en) * 2020-06-24 2022-07-20 日本放送協会 Encoding device, decoding device and program

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7104101B2 (en) 2020-06-24 2022-07-20 日本放送協会 Encoding device, decoding device and program

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2006106935A1 (en) * 2005-04-01 2006-10-12 Matsushita Electric Industrial Co., Ltd. Image decoding apparatus and image decoding method
JP5908619B2 (en) * 2010-01-07 2016-04-26 株式会社東芝 Moving picture coding apparatus and moving picture decoding apparatus
EP3125559B1 (en) * 2010-08-17 2018-08-08 M&K Holdings Inc. Apparatus for decoding an intra prediction mode
WO2012077795A1 (en) * 2010-12-09 2012-06-14 シャープ株式会社 Image coding device, image decoding device, and data structure
JP2012205288A (en) * 2011-03-28 2012-10-22 Jvc Kenwood Corp Image decoding device, image decoding method, and image decoding program
KR20120140181A (en) * 2011-06-20 2012-12-28 한국전자통신연구원 Method and apparatus for encoding and decoding using filtering for prediction block boundary

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7104101B2 (en) 2020-06-24 2022-07-20 日本放送協会 Encoding device, decoding device and program

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
Test Model under Consideration，Joint Collaborative Team on Video Coding (JCT-VC) of ITU-T SG16 WP3 and ISO/IEC JTC1/SC29/WG11 2nd Meeting: Geneva, CH, 21-28 July, 2010, [JCTVC-B205]，JCTVC-B205 (version 1)，ITU-T，2012年03月19日，＜URL:http://phenix.it-sudparis.eu/jct/doc_end_user/documents/20_Geneva/wg11/JCTVC-B205.zip＞: JCTVC-B205_draft007.doc: p.151-156

Also Published As

Publication number Publication date
JP2020167729A (en) 2020-10-08
JP2023159443A (en) 2023-10-31
JP2022125265A (en) 2022-08-26
JP7104101B2 (en) 2022-07-20

Similar Documents

Publication Publication Date Title
JP5277257B2 (en) Video decoding method and video encoding method
JP5306486B2 (en) Motion vector predictive coding method, motion vector predictive decoding method, moving picture coding apparatus, moving picture decoding apparatus, and programs thereof
WO2011099468A1 (en) Predictive coding method for motion vector, predictive decoding method for motion vector, video coding device, video decoding device, and programs therefor
JP2023109986A (en) Extended reference intra-picture prediction
KR20080088040A (en) Method and apparatus for video encoding and decoding
US11750822B2 (en) Encoding device, decoding device, and program
WO2011125730A1 (en) Image encoding device, image encoding method, image decoding device, and image decoding method
JP2011029863A (en) Decoding processing method
JP2016154395A (en) Method and apparatus for encoding/decoding video using motion vector of previous block as motion vector for current block
JP2023159443A (en) Decoding device and program
JP5677576B2 (en) Video decoding method and video encoding method
JP7476279B2 (en) Encoding device, decoding device, and program
JP2023138826A (en) Intra prediction device, image coding device, image decoding device, and program
JP6956471B2 (en) Coding device, decoding device and program
JP2009005217A (en) Image encoding method, image decoding method, image encoding apparatus, image decoding apparatus, image encoding program, image decoding program, and computer readable recording medium
JP7460384B2 (en) Prediction device, encoding device, decoding device, and program
JP6740534B2 (en) Encoding device, decoding device and program
JP7092455B2 (en) Encoding device, decoding device and program
JP2020053725A (en) Predictive image correction device, image encoding device, image decoding device, and program
JP2018152851A (en) Encoding device, decoding device, and program
JP7279128B2 (en) Prediction device and program
JP5957513B2 (en) Video decoding method
JP6886825B2 (en) Predictors, encoders, decoders, and programs
WO2011142221A1 (en) Encoding device and decoding device
JP2024096929A (en) Encoding device, decoding device, and program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220707

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230801

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230831

R150 Certificate of patent or registration of utility model

Ref document number: 7343662

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150