JP2022105653A - デブロッキングフィルタ制御装置及びプログラム - Google Patents

Abstract

【課題】入力映像のビット深度に応じてデブロッキングフィルタ処理を適切に制御可能とする。
【解決手段】復号済み画像に対するデブロッキングフィルタ処理を制御するデブロッキングフィルタ制御装置は、前記デブロッキングフィルタ処理におけるフィルタ強度を制御するパラメータ値を導出するパラメータ導出部と、映像信号のビット深度である入力ビット深度に基づいて前記パラメータ値を変換することにより変換パラメータ値を出力するパラメータ変換部と、を備え、前記パラメータ変換部は、前記入力ビット深度が規定ビット深度よりも小さい場合、前記パラメータ値にオフセット値を加算した結果に対してビットシフトを行うことにより前記変換パラメータ値を出力し、前記パラメータ変換部は、前記入力ビット深度に基づいて前記オフセット値を変更する。
【選択図】図１

Description

本発明は、デブロッキングフィルタ制御装置及びプログラムに関する。

映像符号化方式では、原画像をブロックに分割し、分割したブロック単位で予測処理や変換処理、量子化処理を適用するため、復号画像にブロック歪が生じてしまう場合がある。このため、ＨＥＶＣ（Ｈｉｇｈ Ｅｆｆｉｃｉｅｎｃｙ Ｖｉｄｅｏ Ｃｏｄｉｎｇ）及び／又は非特許文献１に記載のＶＶＣ（Ｖｅｒｓａｔｉｌｅ Ｖｉｄｅｏ Ｃｏｄｉｎｇ）の規格案（以下、ＶＶＣ）などの映像符号化方式では、復号画像に対してインループフィルタ処理を施すことによりブロック歪を軽減するデブロッキングフィルタが導入されている。

ＨＥＶＣ及び／又はＶＶＣにおけるデブロッキングフィルタは、変換処理を行うブロック（変換ブロック）の各境界について、デブロッキングフィルタ処理前の復号画像の境界付近の領域の画素値及び境界を跨ぐ変換ブロックに適用した量子化パラメータ等に応じて適用制御を行う。このようなデブロッキングフィルタ処理におけるフィルタ強度を制御するパラメータ値の１つとして「ｔ_C」がある。

ＨＥＶＣにおいてはビット深度が８ビットである映像信号をメインの符号化対象のターゲットとしていることから、ＨＥＶＣにおいて規定される量子化パラメータＱＰに対応するｔ_Cの値のテーブルは、ビット深度が８ビットの映像信号に対応する値が格納されている。一方、ＶＶＣにおいてはビット深度が１０ビットである映像信号をメインの符号化対象のターゲットとしていることから、ｔ_Cのテーブルには１０ビットの映像信号に対応する値が規定されている。

上述のように、ＶＶＣでは、デブロッキングフィルタ処理について、１０ビット映像信号に対応するｔ_Cテーブルが規定されていることから、符号化対象の映像のビット深度が１０ビットでなかった場合には、入力映像のビット深度に基づいてｔ_Cの変換処理が施される。具体的には、非特許文献１には、次の式に示すように、ビットシフト及びオフセットにより変換処理を行うことが記載されている。

ｔ_C＝ＢｉｔＤｅｐｔｈ＜１０？（ｔ_C’＋２）＞＞（１０－ＢｉｔＤｅｐｔｈ）：ｔ_C’×（１＜＜（ＢｉｔＤｅｐｔｈ－１０））

但し、「ＢｉｔＤｅｐｔｈ」は入力映像のビット深度であり、「ｔ_C’」は変換前のｔ_Cであり、「＞＞」は右シフト演算を表し、「＜＜」は左シフト演算を表している。この変換式は、入力映像のビット深度が１０ビット未満である場合、
ｔ_C＝（ｔ_C’＋２）＞＞（１０－ＢｉｔＤｅｐｔｈ）
により変換後のｔ_Cを算出し、入力映像のビット深度が１０ビット以上である場合、
ｔ_C＝ｔ_C’×（１＜＜（ＢｉｔＤｅｐｔｈ－１０））
により変換後のｔ_Cを算出することを意味している。

ＪＶＥＴ－Ｑ２００１ "Ｖｅｒｓａｔｉｌｅ Ｖｉｄｅｏ Ｃｏｄｉｎｇ （Ｄｒａｆｔ ８）"

第１の態様に係るデブロッキングフィルタ制御装置は、映像信号を符号化する符号化装置又は符号化された映像信号を復号する復号装置において、復号済み画像に対するデブロッキングフィルタ処理を制御するデブロッキングフィルタ制御装置であって、前記デブロッキングフィルタ処理におけるフィルタ強度を制御するパラメータ値を導出するパラメータ導出部と、前記映像信号のビット深度である入力ビット深度に基づいて前記パラメータ値を変換することにより変換パラメータ値を出力するパラメータ変換部と、を備え、前記パラメータ変換部は、前記入力ビット深度が規定ビット深度よりも小さい場合、前記パラメータ値にオフセット値を加算した結果に対してビットシフトを行うことにより前記変換パラメータ値を出力し、前記オフセット値は、前記入力ビット深度に基づいて変更されることを要旨とする。

第２の態様に係るプログラムは、コンピュータを第１の態様に係るデブロッキングフィルタ制御装置として機能させることを要旨とする。

実施形態に係る符号化装置の構成を示す図である。 実施形態に係るデブロッキングフィルタの動作例を示す図である。 実施形態に係るパラメータ変換部の動作を示す図である。 実施形態に係る復号装置の構成を示す図である。

本願発明者らは、鋭意検討の結果、非特許文献１に記載の変換式は、所定の条件下で正しく機能しないという問題点を見出した。特に、非特許文献１に記載の変換式は、入力映像のビット深度が９ビットである場合において適切な変換処理を行うことができないため、意図しないデブロッキングフィルタ処理による画素値の補正が生じ、映像の劣化を引き起こす懸念がある。

そこで、本開示は、入力映像のビット深度に応じてデブロッキングフィルタ処理を適切に制御可能とすることを目的とする。

図面を参照して、実施形態に係る符号化装置及び復号装置について説明する。実施形態に係る符号化装置及び復号装置は、ＭＰＥＧ（Ｍｏｖｉｎｇ Ｐｉｃｔｕｒｅ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）に代表される動画像の符号化及び復号をそれぞれ行う。以下の図面の記載において、同一又は類似の部分には同一又は類似の符号を付している。

＜符号化装置＞
まず、本実施形態に係る符号化装置の構成について説明する。図１は、本実施形態に係る符号化装置１の構成を示す図である。符号化装置１は、画像を分割して得たブロック単位で符号化を行う装置である。

図１に示すように、符号化装置１は、ブロック分割部１００と、減算部１１０と、変換・量子化部１２０と、エントロピー符号化部１３０と、逆量子化・逆変換部１４０と、合成部１５０と、デブロッキングフィルタ１６０と、デブロッキングフィルタ制御装置１６１と、メモリ１７０と、予測部１８０とを有する。

ブロック分割部１００は、動画像を構成するフレーム（或いはピクチャ）単位の入力画像を複数の画像ブロックに分割し、分割により得た画像ブロックを減算部１１０に出力する。画像ブロックのサイズは、例えば３２×３２画素、１６×１６画素、８×８画素、又は４×４画素等である。画像ブロックの形状は正方形に限らず矩形（非正方形）であってもよい。画像ブロックは、符号化装置１が符号化を行う単位（符号化対象ブロック）であり、且つ復号装置が復号を行う単位（復号対象ブロック）である。このような画像ブロックはＣＵ（Ｃｏｄｉｎｇ Ｕｎｉｔ）と呼ばれることがある。

ブロック分割部１００に入力される映像信号のビット深度（以下、「入力ビット深度」と呼ぶ）は、基本的には１０ビットであるものとする。但し、入力ビット深度は、８ビット乃至１４ビットの範囲内で変更され得る。入力ビット深度を示す値（ビット数）は、ブロック分割部１００からデブロッキングフィルタ制御装置１６１に出力されてもよいし、ブロック分割部１００の前段の機能部（いわゆる、前処理部）からデブロッキングフィルタ制御装置１６１に出力されてもよい。

ブロック分割部１００は、輝度信号と色差信号とに対してブロック分割を行う。輝度ブロック及び色差ブロックを特に区別しないときは単に符号化対象ブロックと呼ぶ。

減算部１１０は、ブロック分割部１００から出力される符号化対象ブロックと、符号化対象ブロックを予測部１８０が予測して得た予測ブロックとの差分（誤差）を表す予測残差を算出する。減算部１１０は、ブロックの各画素値から予測ブロックの各画素値を減算することにより予測残差を算出し、算出した予測残差を変換・量子化部１２０に出力する。

変換・量子化部１２０は、ブロック単位で変換処理及び量子化処理を行う。変換・量子化部１２０は、変換部１２１と、量子化部１２２とを有する。

変換部１２１は、減算部１１０から出力される予測残差に対して変換処理を行って周波数成分ごとの変換係数を算出し、算出した変換係数を量子化部１２２に出力する。変換処理（変換）とは、画素領域の信号を周波数領域の信号に変換する処理をいい、例えば、離散コサイン変換（ＤＣＴ）、離散サイン変換（ＤＳＴ）、カルーネンレーブ変換（ＫＬＴ）、及びそれらを整数化した変換等をいう。また、変換処理には画素領域の信号を周波数領域の信号に変換することなくスケーリング等により調整する変換スキップを含んでもよい。

量子化部１２２は、変換部１２１から出力される変換係数を量子化パラメータ及び量子化行列を用いて量子化し、量子化した変換係数をエントロピー符号化部１３０及び逆量子化・逆変換部１４０に出力する。また、量子化部１２２は、量子化処理に関する情報（具体的には、量子化処理で用いた量子化パラメータ及び量子化行列の情報）を、エントロピー符号化部１３０、逆量子化部１４１、及びデブロッキングフィルタ制御装置１６１に出力する。

ここで、量子化パラメータは、１つのブロックに対して１つの値が設定されるパラメータである。具体的には、量子化パラメータは、ブロック内の各変換係数に対して共通して適用されるパラメータであって、量子化の粗さ（ステップサイズ）を定めるパラメータである。量子化行列は、１つのブロック内の成分ごとに設定される値からなる行列である。具体的には、量子化行列は、ブロックサイズに応じてｉ×ｊ要素の成分ごとに設定される値（重み付け係数）からなる行列であって、変換係数の低周波から高周波にわたる成分ごとに量子化の粗さを調整するために用いられる。

エントロピー符号化部１３０は、量子化部１２２から出力される変換係数に対してエントロピー符号化を行い、データ圧縮を行って符号化ストリーム（ビットストリーム）を生成し、符号化ストリームを符号化装置１の外部に出力する。エントロピー符号化には、ハフマン符号及び／又はＣＡＢＡＣ（Ｃｏｎｔｅｘｔ－ｂａｓｅｄ Ａｄａｐｔｉｖｅ Ｂｉｎａｒｙ Ａｒｉｔｈｍｅｔｉｃ Ｃｏｄｉｎｇ；コンテキスト適応型２値算術符号）等を用いることができる。

また、エントロピー符号化部１３０は、ブロック分割部１００から各符号化対象ブロックのサイズ・形状等の情報及びビット深度を取得し、量子化部１２２から量子化処理に関する情報を取得し、予測部１８０から予測に関する情報（例えば、予測モードや動きベクトルの情報）を取得し、これらの情報の符号化も行う。

逆量子化・逆変換部１４０は、ブロック単位で逆量子化処理及び逆変換処理を行う。逆量子化・逆変換部１４０は、逆量子化部１４１と、逆変換部１４２とを有する。

逆量子化部１４１は、量子化部１２２が行う量子化処理に対応する逆量子化処理を行う。具体的には、逆量子化部１４１は、量子化部１２２から出力される変換係数を、量子化パラメータ及び量子化行列を用いて逆量子化することにより変換係数を復元し、復元した変換係数を逆変換部１４２に出力する。

逆変換部１４２は、変換部１２１が行う変換処理に対応する逆変換処理を行う。例えば、変換部１２１がＤＣＴを行った場合には、逆変換部１４２は逆ＤＣＴを行う。逆変換部１４２は、逆量子化部１４１から出力される変換係数に対して逆変換処理を行って予測残差を復元し、復元した予測残差である復元予測残差を合成部１５０に出力する。

合成部１５０は、逆変換部１４２から出力される復元予測残差を、予測部１８０から出力される予測ブロックと画素単位で合成する。合成部１５０は、復元予測残差の各画素値と予測ブロックの各画素値を加算して符号化対象ブロックを復元（復号）し、復元したブロック単位の復号画像（復元ブロック）をデブロッキングフィルタ１６０に出力する。

デブロッキングフィルタ１６０は、復元ブロックと当該復元ブロックに隣接する隣接ブロックとからなる２つのブロックのブロック境界に対するフィルタ処理を行い、フィルタ処理後の復元ブロックをメモリ１７０に出力する。フィルタ処理は、ブロック単位の処理に起因する信号劣化を軽減するための処理であって、隣り合う２つのブロックのブロック境界における信号のギャップを平滑化するフィルタ処理である。デブロッキングフィルタ１６０は、一般的に信号の変動を緩やかにするローパスフィルタとして構成されている。

図２は、本実施形態に係るデブロッキングフィルタ１６０の動作例を示す図である。図２に示す例では、デブロッキングフィルタ１６０は、８×８画素のブロックごとのブロック境界を対象としてフィルタ処理を行う一例を示しているが、４×４画素のブロックごとのブロック境界を対象としてフィルタ処理を行ってもよい。また、デブロッキングフィルタ１６０は、４行又は４列を単位としてフィルタ処理を行う。図２に示すブロックＰ及びＱでは、デブロッキングフィルタ１６０のフィルタ処理の１単位であり、ブロックサイズが４×４画素である一例を示している。ブロックＰ及びＱのそれぞれは、サブブロックと呼ばれてもよい。

デブロッキングフィルタ制御装置１６１は、デブロッキングフィルタ１６０を制御する。具体的には、デブロッキングフィルタ制御装置１６１は、対象ブロック対のブロック境界に対するフィルタ処理を行うか否かを示す境界強度（Ｂｓ：Ｂｏｕｎｄａｒｙ ｓｔｒｅｎｇｔｈ）、及びデブロッキングフィルタ１６０のフィルタ強度を制御する。境界強度Ｂｓとは、フィルタ処理を適用するか否か、及びそのフィルタ処理の種類を決定するためのパラメータをいう。なお、フィルタ処理を行うか否かの制御は、境界強度Ｂｓを１以上とするか又はゼロとするかの制御とみなすことができる。

デブロッキングフィルタ制御装置１６１は、対象ブロック対の境界近傍領域における画素値の変動や、予測モード、量子化パラメータ、動き補償予測（インター予測）に用いる動きベクトルの値に基づいて、デブロッキングフィルタ１６０を制御する。

また、本実施形態に係るデブロッキングフィルタ制御装置１６１は、入力ビット深度と、量子化処理及び逆量子化処理で用いた量子化パラメータとに基づいて、デブロッキングフィルタ１６０のフィルタ強度を制御する。以下において、符号化対象ブロック又はそのサブブロックがブロックＰであり、隣接ブロック又はそのサブブロックがブロックＱであるものとする。

デブロッキングフィルタ制御装置１６１は、例えば下記の表１に基づいて境界強度Ｂｓを決定する。境界強度Ｂｓの値は０，１，２のいずれかとする。なお、輝度信号と色差信号のブロックに対する境界強度をそれぞれ算出してもよいし、輝度信号と色差信号のブロックの境界強度の組み合わせを一つの境界強度として判定してもよい。

表１に示すように、デブロッキングフィルタ制御装置１６１は、ブロックＰ及びＱの少なくとも一方にイントラ予測が適用されている場合、Ｂｓの値を２とする。

一方、デブロッキングフィルタ制御装置１６１は、ブロックＰ及びＱの両方にインター予測が適用されており、且つ少なくとも以下の（ａ）乃至（ｃ）の中の１つの条件を満たす場合には、Ｂｓ値を１とし、その他の場合には、Ｂｓ値を０とする。

（ａ）ブロックＰ及びＱの少なくとも一方が有意な変換係数（すなわち、非ゼロ変換係数）を含むこと。

（ｂ）ブロックＰ及びＱの動きベクトルの数又は参照画像が異なること。

（ｃ）ブロックＰ及びＱの動きベクトルの差の絶対値が閾値（例えば１画素）以上であること。

デブロッキングフィルタ制御装置１６１は、境界強度Ｂｓの値が０の場合、ブロックＰ及びＱの境界に対するフィルタ処理を行わないようデブロッキングフィルタ１６０を制御する。

デブロッキングフィルタ制御装置１６１は、パラメータ導出部１６１ａを有する。パラメータ導出部１６１ａは、ブロックＰに対する量子化処理及び逆量子化処理で用いた量子化パラメータＱｐ_Pと、ブロックＱに対する量子化処理及び逆量子化処理で用いた量子化パラメータＱｐ_Qと、オフセット値ｐｑＯｆｆｓｅｔとに基づいて、デブロッキングフィルタ１６０のフィルタ強度を制御するためのパラメータ値（閾値）β及びｔ_C’を導出する。

第１に、パラメータ導出部１６１ａは、例えば次の式により変数ｑＰを算出する。

ｑＰ＝（（Ｑｐ_Q＋Ｑｐ_P＋１）＞＞１）＋ｑｐＯｆｆｓｅｔ

但し、「＞＞」は、シフト演算子（右シフト演算）を示す。この式は、基本的には、ブロックＰの量子化パラメータＱｐ_Pと、ブロックＱの量子化パラメータＱｐ_Qとの平均を求める計算式である。

第２に、パラメータ導出部１６１ａは、例えば次の式により、パラメータ値βを導出するためのＱを算出する。

Ｑ＝Ｃｌｉｐ３（０，６３，ｑＰ＋（ｓｌｉｃｅ＿ｂｅｔａ＿ｏｆｆｓｅｔ＿ｄｉｖ２＜＜１））

但し、“＜＜”はシフト演算子（左シフト演算）を示す。“Ｃｌｉｐ３（Ｘ，Ｙ，Ｚ）”は、ＺがＸより小さければＸを返し、ＺがＹより大きければＹを返し、それ以外の場合はＺを返すクリップ演算子である。ｓｌｉｃｅ＿ｂｅｔａ＿ｏｆｆｓｅｔ＿ｄｉｖ２は、復号装置２にシグナリングするパラメータの１つである。

また、パラメータ導出部１６１ａは、例えば次の式により、パラメータ値ｔ_C’を導出するためのＱを算出する。

Ｑ＝Ｃｌｉｐ３（０，６５，ｑＰ＋２＊（ｂＳ－１）＋（ｓｌｉｃｅ＿ｔｃ＿ｏｆｆｓｅｔ＿ｄｉｖ２＜＜１））

ここで、“ｂＳ”はＢｓ値である。ｓｌｉｃｅ＿ｔｃ＿ｏｆｆｓｅｔ＿ｄｉｖ２は、復号装置２にシグナリングするパラメータの１つである。

第３に、パラメータ導出部１６１ａは、次の表２により、それぞれ算出したＱからパラメータ値β及びｔ_C’を導出する。

ここで、ｔ_C’は、１０ビットのビット深度の映像信号に対応した値である。

デブロッキングフィルタ制御装置１６１は、パラメータ変換部１６１ｂをさらに有する。パラメータ変換部１６１ｂは、入力ビット深度に基づいてパラメータ値ｔ_C’を変換することにより変換パラメータ値ｔ_Cを出力する。変換パラメータ値ｔ_Cは、入力ビット深度に対応するよう変換処理を施した後のｔ_C’の値を表す。

本実施形態において、パラメータ変換部１６１ｂは、入力ビット深度が規定ビット深度よりも小さい場合、パラメータ値ｔ_C’にオフセット値を加算した結果に対してビットシフトを行うことにより変換パラメータ値ｔ_Cを出力する。パラメータ変換部１６１ｂは、入力ビット深度に基づいてオフセット値を変更する。パラメータ変換部１６１ｂの動作の詳細については後述する。

デブロッキングフィルタ制御装置１６１は、フィルタ強度制御部１６１ｃをさらに有する。フィルタ強度制御部１６１ｃは、境界強度Ｂｓの値と、パラメータ値β及びｔ_Cとに基づいて、デブロッキングフィルタ１６０のフィルタ強度を制御する。

フィルタ強度制御部１６１ｃは、境界強度Ｂｓの値が１又は２の場合には、次の式を満たす場合にのみ、フィルタ処理を行うようデブロッキングフィルタ１６０を制御してもよい（図２参照）。

また、フィルタ強度制御部１６１ｃは、フィルタ処理を行う場合、以下の条件式を全て満たす場合に強いフィルタを適用し、それ以外の場合に弱いフィルタを適用してもよい（図２参照）。

図１に戻り、メモリ１７０は、デブロッキングフィルタ１６０から出力される復元ブロックをフレーム単位で復号画像として蓄積する。メモリ１７０は、記憶している復号画像を予測部１８０に出力する。

予測部１８０は、ブロック単位で予測処理を行うことにより、符号化対象ブロックに対応する予測ブロックを生成し、生成した予測ブロックを減算部１１０及び合成部１５０に出力する。予測部１８０は、インター予測部１８１と、イントラ予測部１８２と、切替部１８３とを有する。

インター予測部１８１は、メモリ１７０に記憶された復号画像を参照画像として用いて、ブロックマッチング等の手法により動きベクトルを算出し、符号化対象ブロックを予測してインター予測ブロックを生成し、生成したインター予測ブロックを切替部１８３に出力する。インター予測部１８１は、複数の参照画像を用いるインター予測（典型的には、双予測）や、１つの参照画像を用いるインター予測（片方向予測）の中から最適なインター予測方法を選択し、選択したインター予測方法を用いてインター予測を行う。インター予測部１８１は、インター予測に関する情報（動きベクトル等）をエントロピー符号化部１３０及びデブロッキングフィルタ制御装置１６１に出力する。

イントラ予測部１８２は、複数のイントラ予測モードの中から、符号化対象ブロックに適用する最適なイントラ予測モードを選択し、選択したイントラ予測モードを用いて符号化対象ブロックを予測する。イントラ予測部１８２は、メモリ１７０に記憶された復号画像のうち、符号化対象ブロックに隣接する復号済み画素値を参照してイントラ予測ブロックを生成し、生成したイントラ予測ブロックを切替部１８３に出力する。また、イントラ予測部１８２は、選択したイントラ予測モードに関する情報をエントロピー符号化部１３０及びデブロッキングフィルタ制御装置１６１に出力する。

切替部１８３は、インター予測部１８１から出力されるインター予測ブロックとイントラ予測部１８２から出力されるイントラ予測ブロックとを切り替えて、いずれかの予測ブロックを減算部１１０及び合成部１５０に出力する。

次に、本実施形態に係るパラメータ変換部１６１ｂの動作について説明する。図３は、本実施形態に係るパラメータ変換部１６１ｂの動作を示す図である。

図３に示すように、ステップＳ１において、パラメータ変換部１６１ｂは、入力ビット深度が規定ビット深度よりも小さいか否かを判定する。以下において、パラメータ値をｔ_C’、オフセット値をｏｆｓ、入力ビット深度をＢｉｔＤｅｐｔｈ、規定ビット深度をｂ、変換パラメータ値をｔ_Cとする。本実施形態において、規定ビット深度ｂは、１０ビットであるものとする。

入力ビット深度が規定ビット深度よりも小さい場合（ステップＳ１：ＹＥＳ）、ステップＳ２において、パラメータ変換部１６１ｂは、次の式によりオフセット値ｏｆｓを算出する。

ｏｆｓ＝１≪（ｂ－１－ＢｉｔＤｅｐｔｈ）

そして、ステップＳ３において、パラメータ変換部１６１ｂは、次の式により変換パラメータ値ｔ_Cを算出する。

ｔ_C＝（ｔ_C’＋ｏｆｓ）≫（ｂ－ＢｉｔＤｅｐｔｈ）

一方、入力ビット深度が規定ビット深度よりも小さい場合（ステップＳ１：ＮＯ）、ステップＳ４において、パラメータ変換部１６１ｂは、次の式により変換パラメータ値ｔ_Cを算出する。

ｔ_C＝ｔ_C’×（１≪（ＢｉｔＤｅｐｔｈ－ｂ））

次に、本実施形態に係るデブロッキングフィルタ制御装置１６１の作用効果について説明する。

上述した非特許文献１に記載の変換式は、入力ビット深度が９ビットである場合が考慮されていない。非特許文献１に記載の変換式を９ビットの映像信号に対して適用すると、元のｔ_C’の値に２を加算したのちに１ビットシフトしてしまうと、適正な値とならない問題がある。

表２に示すように、Ｑに小さい値が設定されている場合には（即ち量子化ステップの小さい場合）、量子化誤差が映像にあまり含まれていないことから、ｔ_C’の値は０に設定されており、デブロッキングフィルタ処理が適用された場合にも値は補正されないよう構成されている。しかしながら、非特許文献１に記載の変換式は、９ビット映像信号に対する変換を行うことでｔ_C’が０に設定されていたとしても、
ｔ_C＝（ｔ_C’＋２）＞＞１
の処理により、変換後のｔ_Cの値は１となる。その結果、意図しないデブロッキングフィルタ処理による画素値の補正が生じてしまい、映像の劣化を引き起こす原因となる。

これに対し、本実施形態によれば、入力ビット深度ＢｉｔＤｅｐｔｈに応じて変更されるオフセット値ｏｆｓという新たな概念を導入し、次の式により変換後のｔ_Cを算出する。

ｔ_C＝（ｔ_C’＋ｏｆｓ）≫（ｂ－ＢｉｔＤｅｐｔｈ）
ｏｆｓ＝１≪（ｂ－１－ＢｉｔＤｅｐｔｈ）

これにより、上述したような問題を解決できる。なお、規定ビット深度ｂが１０ビットである場合、次の式により変換後のｔ_Cを算出することになる。

ｔ_C＝ＢｉｔＤｅｐｔｈ＜１０？（ｔ_C′＋ｏｆｓ）＞＞（１０－ＢｉｔＤｅｐｔｈ）：ｔ_C′×（１＜＜（ＢｉｔＤｅｐｔｈ－１０））
ｏｆｓ＝１≪（９－ＢｉｔＤｅｐｔｈ）

＜復号装置＞
次に、本実施形態に係る復号装置の構成について、上述した符号化装置の構成との相違点を主として説明する。図４は、本実施形態に係る復号装置２の構成を示す図である。復号装置２は、符号化ストリームから復号対象ブロックを復号する装置である。

図４に示すように、復号装置２は、エントロピー復号部２００と、逆量子化・逆変換部２１０と、合成部２２０と、デブロッキングフィルタ２３０と、デブロッキングフィルタ制御装置２３１と、メモリ２４０と、予測部２５０とを有する。

エントロピー復号部２００は、符号化装置１により生成された符号化ストリームを復号し、各種のシグナリング情報を復号する。具体的には、エントロピー復号部２００は、復号対象ブロックに適用された量子化処理に関する情報を取得し、取得した情報を逆量子化部２１１及びデブロッキングフィルタ制御装置２３１に出力する。また、エントロピー復号部２００は、復号対象ブロックに適用された予測に関する情報（例えば、予測種別情報、動きベクトル情報）を取得し、取得した情報を予測部２５０及びデブロッキングフィルタ制御装置２３１に出力する。

また、エントロピー復号部２００は、符号化ストリームを復号し、量子化された変換係数を取得し、取得した変換係数を逆量子化・逆変換部２１０（逆量子化部２１１）に出力する。

逆量子化・逆変換部２１０は、ブロック単位で逆量子化処理及び逆変換処理を行う。逆量子化・逆変換部２１０は、逆量子化部２１１と、逆変換部２１２とを有する。

逆量子化部２１１は、符号化装置１の量子化部１２２が行う量子化処理に対応する逆量子化処理を行う。逆量子化部２１１は、エントロピー復号部２００から出力される量子化変換係数を、量子化パラメータ及び量子化行列を用いて逆量子化することにより、復号対象ブロックの変換係数を復元し、復元した変換係数を逆変換部２１２に出力する。

逆変換部２１２は、符号化装置１の変換部１２１が行う変換処理に対応する逆変換処理を行う。逆変換部２１２は、逆量子化部２１１から出力される変換係数に対して逆変換処理を行って予測残差を復元し、復元した予測残差（復元予測残差）を合成部２２０に出力する。

合成部２２０は、逆変換部２１２から出力される予測残差と、予測部２５０から出力される予測ブロックとを画素単位で合成することにより、復号対象ブロックを復元（復号）し、復元ブロックをデブロッキングフィルタ２３０に出力する。

デブロッキングフィルタ２３０は、符号化装置１のデブロッキングフィルタ１６０と同様な動作を行う。

デブロッキングフィルタ制御装置２３１は、エントロピー復号部２００から出力される情報（ビット深度の情報等）に基づいて、符号化装置１のデブロッキングフィルタ制御装置１６１と同様な動作を行う。具体的には、デブロッキングフィルタ制御装置２３１は、符号化装置１のデブロッキングフィルタ制御装置１６１と同様に、パラメータ導出部２３１ａと、パラメータ変換部２３１ｂと、フィルタ強度制御部２３１ｃとを有する。ここで、パラメータ変換部２３１ｂは、図３のフローに従って動作する。

メモリ２４０は、デブロッキングフィルタ２３０から出力される復元ブロックをフレーム単位で復号画像として記憶する。メモリ２４０は、フレーム単位の復号画像を復号装置２の外部に出力する。

予測部２５０は、ブロック単位で予測を行う。予測部２５０は、インター予測部２５１と、イントラ予測部２５２と、切替部２５３とを有する。

インター予測部２５１は、メモリ２４０に記憶された復号画像を参照画像として用いて、復号対象ブロックをインター予測により予測する。インター予測部２５１は、エントロピー復号部２００から出力される動きベクトル情報を用いてインター予測を行うことによりインター予測ブロックを生成し、生成したインター予測ブロックを切替部２５３に出力する。

イントラ予測部２５２は、メモリ２４０に記憶された復号画像のうち復号対象ブロックに隣接する参照画素を参照し、エントロピー復号部２００から出力される情報に基づいて、復号対象ブロックをイントラ予測により予測する。そして、イントラ予測部２５２は、イントラ予測ブロックを生成し、生成したイントラ予測ブロックを切替部２５３に出力する。

切替部２５３は、インター予測部２５１から出力されるインター予測ブロックとイントラ予測部２５２から出力されるイントラ予測ブロックとを切り替えて、いずれかの予測ブロックを合成部２２０に出力する。

＜その他の実施形態＞
上述した実施形態において、入力ビット深度が９ビットである場合とそれ以外の場合とで別々の変換式を用いるようにしてもよい。このような手法において、入力ビット深度が９ビットである場合には、それ以外の場合に用いるオフセット値とは異なるオフセット値が設定されるようにすればよい。

符号化装置１が行う各処理をコンピュータに実行させるプログラムが提供されてもよい。復号装置２が行う各処理をコンピュータに実行させるプログラムが提供されてもよい。プログラムは、コンピュータ読取り可能媒体に記録されていてもよい。コンピュータ読取り可能媒体を用いれば、コンピュータにプログラムをインストールすることが可能である。ここで、プログラムが記録されたコンピュータ読取り可能媒体は、非一過性の記録媒体であってもよい。非一過性の記録媒体は、特に限定されるものではないが、例えば、ＣＤ－ＲＯＭやＤＶＤ－ＲＯＭ等の記録媒体であってもよい。

符号化装置１が行う各処理を実行する回路を集積化し、符号化装置１を半導体集積回路（チップセット、ＳｏＣ）により構成してもよい。復号装置２が行う各処理を実行する回路を集積化し、復号装置２を半導体集積回路（チップセット、ＳｏＣ）により構成してもよい。

以上、図面を参照して実施形態について詳しく説明したが、具体的な構成は上述のものに限られることはなく、要旨を逸脱しない範囲内において様々な設計変更等をすることが可能である。

本願は、日本国特許出願第２０２０－０６７０４３号（２０２０年４月２日出願）の優先権を主張し、その内容の全てが本願明細書に組み込まれている。

Claims (6)

1. 映像信号を符号化する符号化装置又は符号化された映像信号を復号する復号装置において、復号済み画像に対するデブロッキングフィルタにおける処理を制御するデブロッキングフィルタ制御装置であって、
   前記デブロッキングフィルタにおける前記処理を制御するパラメータ値（ｔ_C’）を導出するパラメータ導出部と、
   前記映像信号のビット深度である入力ビット深度に基づいて前記パラメータ値（ｔ_C’）を変換することにより変換パラメータ値（ｔ_C）を出力するパラメータ変換部と、を備え、
   前記パラメータ変換部は、前記入力ビット深度が規定ビット深度よりも小さい場合、前記パラメータ値（ｔ_C’）にオフセット値を加算した結果に対してビットシフトを行うことにより前記変換パラメータ値（ｔ_C）を出力し、
   前記パラメータ変換部は、前記入力ビット深度に基づいて前記オフセット値を変更することを特徴とするデブロッキングフィルタ制御装置。
2. 前記パラメータ変換部は、前記入力ビット深度が前記規定ビット深度よりも小さい場合、前記パラメータ値をｔ_C’、前記オフセット値をｏｆｓ、前記入力ビット深度をＢｉｔＤｅｐｔｈ、前記規定ビット深度をｂ、前記変換パラメータ値をｔ_Cとしたとき、
   ｔ_C＝（ｔ_C’＋ｏｆｓ）≫（ｂ－ＢｉｔＤｅｐｔｈ）
   により前記変換パラメータ値を算出し、
   ｏｆｓ＝１≪（ｂ－１－ＢｉｔＤｅｐｔｈ）
   により前記オフセット値を算出することを特徴とする請求項１に記載のデブロッキングフィルタ制御装置。
3. 前記パラメータ変換部は、前記入力ビット深度が前記規定ビット深度以上である場合、
   ｔ_C＝ｔ_C’×（１≪（ＢｉｔＤｅｐｔｈ－ｂ））
   により前記変換パラメータ値（ｔ_C）を算出することを特徴とする請求項２に記載のデブロッキングフィルタ制御装置。
4. 前記規定ビット深度が１０ビットであることを特徴とする請求項１乃至３のいずれか１項に記載のデブロッキングフィルタ制御装置。
5. 前記入力ビット深度が９ビットであることを特徴とする請求項４に記載のデブロッキングフィルタ制御装置。
6. コンピュータを請求項１乃至５のいずれか１項に記載のデブロッキングフィルタ制御装置として機能させることを特徴とするプログラム。

Images