JP6276199B2 - 有意性マップ符号化の計算量低減 - Google Patents

有意性マップ符号化の計算量低減 Download PDF

Info

Publication number
JP6276199B2
JP6276199B2 JP2014553480A JP2014553480A JP6276199B2 JP 6276199 B2 JP6276199 B2 JP 6276199B2 JP 2014553480 A JP2014553480 A JP 2014553480A JP 2014553480 A JP2014553480 A JP 2014553480A JP 6276199 B2 JP6276199 B2 JP 6276199B2
Authority
JP
Japan
Prior art keywords
context
quantized transform
significance map
transform coefficient
index
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2014553480A
Other languages
English (en)
Other versions
JP2015508619A (ja
Inventor
チェウン アウイェウン
チェウン アウイェウン
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of JP2015508619A publication Critical patent/JP2015508619A/ja
Application granted granted Critical
Publication of JP6276199B2 publication Critical patent/JP6276199B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46Embedding additional information in the video signal during the compression process
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46Embedding additional information in the video signal during the compression process
    • H04N19/463Embedding additional information in the video signal during the compression process by compressing encoding parameters before transmission
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/91Entropy coding, e.g. variable length coding [VLC] or arithmetic coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Description

(関連出願の相互参照)
本出願は、米国特許法第119条(e)の下で、2012年1月20日出願の米国仮特許出願番号61/589,183「COMPLEXITY REDUCTION OF SIGNIFICANCE MAP CODING」の優先権を主張するものであり、その開示内容全体は、引用により明示的に本明細書に組み込まれる。
(技術分野)
本発明は、映像符号化の分野に関する。より詳細には、本発明は、映像符号化における計算量低減に関する。
significant_coeff_flagを符号化することに関して、以下の符号化方法、すなわち、輝度に関して9個のコンテキストを有し色差に関して6個のコンテキストを有する4×4位置ベース符号化方法、輝度に関して11個のコンテキストを有し色差に関して11個のコンテキストを有する8×8位置ベース符号化方法、及び輝度に関して7個のコンテキストを有し色差に関して4個のコンテキストを有する16×16/32×32マスクベース符号化方法が利用される。
図1に示すように、4×4位置ベース符号化方法は、輝度102及び色差100に関して種々のグループの有意性マップ(significance map)を有する。従って、色差102及び輝度100に関する種々のマッピングは、有意性マップ内の位置を、対応するコンテキストインデックスインクリメントにマッピングするように用いられる。結果的に、以下の計算、すなわち、コンテキストインクリメントを求めるために2つの15要素マッピングテーブルを使用することと、4×4、8×8、及び16×16/32×32有意性マップの符号化においてコンテキストインクリメントを求めるために輝度/色差判定に基づくブランチを必要とすることと、が存在する。
高効率映像符号化(HEVC)などの映像符号化においてsignificant_coeff_flagを符号化する計算量は、4×4輝度及び色差コンテキストに同じマッピングを使用して低減することができる。結果的に、15要素ルックアップテーブル及び複数のブランチを削除して、significant_coeff_flagのコンテキストインデックスを選択することができ、WDテキストはさらに簡略化される。
一態様では、デバイス内でプログラムされた非零4×4有意性マップの符号化における計算量を低減する方法は、量子化変換係数をスキャンする段階と、非零量子化係数終端位置を求める段階と、量子化変換係数から有意性マップを生成する段階と、を含み、非零量子化係数終端位置より前の量子化変換係数の有意性は、輝度及び色差に関して同じコンテキスト番号及び同じマッピングを有し、コンテキストインデックスインクリメントが求められる。コンテキストインクリメントマッピングは、単一の15要素ルックアップテーブルを含む。本方法はさらに、8×8、16×16、及び32×32有意性マップの少なくとも1つの輝度/色差判定に基づいてコンテキストオフセットを求めることなく、ビデオコンテンツを符号化する段階を含む。デバイスは、パーソナルコンピュータ、ラップトップコンピュータ、コンピュータワークステーション、サーバ、メインフレームコンピュータ、ハンドヘルドコンピュータ、携帯情報端末、セルラ電話/携帯電話、スマートフォン、スマートアプライアンス、ゲームコンソール、デジタルカメラ、デジタルカムコーダ、カメラ付き携帯電話、携帯音楽プレーヤー、タブレットコンピュータ、ビデオプレーヤー、DVDライター/プレーヤー、高精細ビデオライター/プレーヤー、テレビジョン、及び家庭用娯楽システムからなるグループから選択される。
別の態様では、エンコーダは、量子化変換係数をスキャンするように構成されハードウェア内でプログラムされたスキャンモジュールと、非零量子化変換係数終端位置を生成するように構成されハードウェア内でプログラムされた第1の生成モジュールと、量子化変換係数から有意性マップを生成するように構成されハードウェア内でプログラムされた第2の生成モジュールとを含み、非零量子化係数終端位置より前の量子化変換係数の有意性は、輝度及び色差に関して同じコンテキスト番号及び同じマッピングを有し、コンテキストインデックスインクリメントが求められる。コンテキストインクリメントマッピングは、単一の15要素ルックアップテーブルを含む。エンコーダはさらに、8×8、16×16、及び32×32有意性マップの少なくとも1つの輝度/色差判定に基づいてコンテキストオフセットを求めることなく、ビデオコンテンツを符号化するようにハードウェア内でプログラムされた符号化モジュールを含む。エンコーダは、パーソナルコンピュータ、ラップトップコンピュータ、コンピュータワークステーション、サーバ、メインフレームコンピュータ、ハンドヘルドコンピュータ、携帯情報端末、セルラ電話/携帯電話、スマートフォン、スマートアプライアンス、ゲームコンソール、デジタルカメラ、デジタルカムコーダ、カメラ付き携帯電話、携帯音楽プレーヤー、タブレットコンピュータ、ビデオプレーヤー、DVDライター/プレーヤー、高精細ビデオライター/プレーヤー、テレビジョン、及び家庭用娯楽システムからなるグループから選択されるデバイス内に含まれる。
別の態様では、装置は、量子化変換係数から有意性マップを生成するためのアプリケーションを格納するための非一時的メモリを備え、非零量子化係数終端位置より前の量子化変換係数の有意性は、輝度及び色差に関して同じコンテキスト番号及び同じマッピングを有しコンテキストインデックスインクリメントが求められ、装置はさらに、メモリに接続され、アプリケーションを処理するように構成された処理構成要素を備える。アプリケーションはさらに、量子化変換係数をスキャンするようになっている。コンテキストインクリメントマッピングは、単一の15要素ルックアップテーブルを含む。アプリケーションはさらに、8×8、16×16、及び32×32有意性マップの少なくとも1つの輝度/色差判定に基づいてコンテキストオフセットを求めることなくビデオコンテンツを符号化するようになっている。
幾つかの実施形態による輝度及び色差に関する種々のグルーピングを含む有意性マップの図表を示す。 輝度及び色差コンテキストが、同じコンテキスト番号、及び同じコンテキストインデックスインクリメントマッピングを有する場合の、幾つかの実施形態による有意性マップの図表を示す。 幾つかの実施形態による有意性マップ符号化の計算量低減方法のフローチャートを示す。 計算量低減有意性マップ符号化方法を実行するように構成された、幾つかの実施形態による例示的なコンピューティングデバイスのブロック図を示す。 幾つかの実施形態によるHEVCエンコーダの概略図を示す。 幾つかの実施形態によるHEVCデコーダの概略図を示す。
ビデオ圧縮を利用して、デジタルビデオ情報が、より効率的に送信及び受信される。ビデオ圧縮は、ビデオシーケンス内の冗長なデータを削減又は削除するための技術を利用する。高効率映像符号化(HEVC)では、ビデオフレームは、符号化ユニット(CU)に分割される。CUは、予測又は変換に関してより小さいブロックに分割することができる。各CUはさらに、予測ユニット(PU)及び変換ユニット(TU)に分割することができる。
CUは、典型的には、Yで示される輝度成分と、U及びVで示される色差成分とを有する。
データブロックを符号化するために、ブロックに関する予測ブロックが得られる。予測ブロックは、イントラ(I)予測(例えば、空間予測)又はインター(P又はB)予測(例えば、時間予測)のいずれかを介して得ることができる。予測ブロックを識別する上で、元のビデオデータブロックとその予測ブロックとの間の差分が求められる。この差分は、予測誤差データと呼ばれ、符号化されたブロックのブロック内の画素値と符号化されたブロックを表すように選択された予測ブロック内の画素値との間の画素の差分を示す。圧縮を向上するために、予測誤差データを変換することができる(例えば、離散コサイン変換(DCT)又は他の変換を用いて)。
変換ブロック内の予測誤差データは、空間的な画素領域内に存在する画素差分値の2次元(2D)配列内に配列することができる。変換は、予測誤差の画素値を、周波数領域などの変換領域内の変換係数の2次元配列に変換する。さらなる圧縮に関して、変換係数は、エントロピー符号化の前に量子化することができる。エントロピー符号化器は、コンテキスト適応型可変長符号化(CAVLC:Context Adaptive Variable Length Coding)、コンテキスト適応型2値算術符号化(CABAC:Context Adaptive Binary Arithmetic Coding)、確率内部分割エントロピー符号化(PIPE:Probability Interval Partitioning Entropy Coding)、又は他のエントロピー符号化などのエントロピー符号化を、量子化変換係数に適用する。
量子化変換係数のブロックをエントロピー符号化するために、通常、スキャン処理が実行され、ブロック内の量子化変換係数の2次元(2D)配列が、特定のスキャン順序に従って、順序付けられた1次元(1D)配列の変換係数(例えば、ベクトル)において処理される。エントロピー符号化は、1D配列の変換係数に適用される。変換ユニット内の量子化変換係数のスキャンにより、エントロピー符号化器に関する2D配列の変換係数がシリアル化される。有意性マップを生成して、有意(例えば、非零)係数位置を示すことができる。スキャンは、有意(例えば、非零)係数の絶対値、及び/又は有意係数の正負符号に適用することができる。
HEVC規格では、4×4非零係数位置が、4×4有意性マップによって符号化される。HEVC規格での4×4有意性マップは、以下のように符号化される。終端有意係数の座標が送信される。次に、スキャン順序内の終端有意係数より前の各係数に関して、1ビットシンボルのsignificant_coeff_flagが送信される。
高効率映像符号化(HEVC)などの映像符号化においてsignificant_coeff_flagを符号化することの計算量は、同じマッピングを使用して色差コンテキスト及び輝度コンテキストを選択して低減することができる。結果的に、15要素のルックアップテーブル及び複数のブランチを削除して、コンテキストインデックスを選択することができ、WDテキストはさらに簡略化される。HM5.0では、デコーダ実行時間の0−3%の低減が観測されている。AI_HE、RA_HE、LB_HEに関するBDレートは、それぞれ0.00%、−0.01%、0.01%である。AI_LC、RA_LC、LB_LCに関するBDレートは、それぞれ0.00%、0.01%、−0.01%である。RA_HE10に関するBDレートは、0.03%である。
図2のグルーピングカラーで示すように、4×4輝度コンテキスト200と同じグルーピングは、4×4色差コンテキスト202のグルーピングに再利用することができる。結果的に、以下の態様、すなわち、以前に用いられていた色差の15要素マッピングテーブルが削除されることと、8×8/16×16/32×32有意性マップの少なくとも1つにおいて初期コンテキストオフセットを求めるための、輝度/色差判定に基づくブランチがさらに削除されることにおいて、計算量が低減される。
コンテキスト削減は、HM5.0に統合されている。シミュレーションが3つのマイクロソフトHPCクラスタで実行され、共通のテスト条件及び参照構成は、以下のとおりである。
・全てのイントラシミュレーションは、AMD Opteron Processor 6136 cluster @ 2.4GHz上で実行される。
・全てのRAシミュレーションは、Intel Xeon X5690 cluster @ 3.47GHz上で実行される。
・全てのLDシミュレーションは、Intel Xeon X5680 cluster @ 3.33GHz上で実行される。
表1は、有意性マップの符号化に関する計算量低減のBDレート及びタイミングを示す。

表1 計算量低減のBDレート
表3に示すように、本明細書で説明する方法は、デコーダ実行時間を0%から3%低減し、−0.01%から0.03%の輝度BDレート平均をもたらした。
表2:有意性マップ符号化計算量低減の平均復号時間

表3:有意性マップ符号化計算量低減の平均BDR
HM5.0に関して変更されたシンタックス要素significant_coeff_flagに関するctxldxlncの導出処理は、以下のとおりである。
この処理に対する入力は、色成分インデックスcIdx、現在のスキャン位置係数(xC,yC)、変換ブロック幅log2TrafoWidth、及び変換ブロック高さlog2TrafoHeightである。この処理の出力は、ctxIdxIncである。
変数sigCtxは、現在の位置(xC,yC)、色成分インデックスcIdx、変換ブロックサイズ、及びシンタックス要素significant_coeff_flagの以前に復号されたバイナリデータに依存する。sigCtxの導出に関して、以下が適用される。
・log2TrafoWidthがlog2TrafoHeightに等しく、log2TrafoWidthが2に等しい場合には、sigCtxは、表4で規定されたctxIdxMap4x4[]を使用して以下のように得られる。

sigCtx=ctxIdxMap4x4[(yC<<2)+xC]

・或いは、log2TrafoWidthがlog2TrafoHeightに等しく、log2TrafoWidthが3に等しい場合には、sigCtxは、表5で規定されたctxIdxMap8x8[]を使用して以下のように得られる。

sigCtx=((xC+yC)==0)?10:ctxIdxMap8x8[((yC>>1)<<2)+(xC>>1)]

sigCtx+=9

・或いは、xC+yCが0に等しい場合には、sigCtxは、以下のようにして得られる。

sigCtx=20

・或いは、xC+yCが0より大きい場合には、sigCtxは、シンタックス要素significant_coeff_flagの以前に復号されたバイナリデータを使用して、以下のようにして得られる。
・変数sigCtxは、以下のように初期化される。

sigCtx=0

・xCが、(1<<log2TrafoWidth)−1よりも小さい場合には、以下が適用される。

sigCtx=sigCtx+significant_coeff_flag[xC+1][yC]

・xCが、(1<<log2TrafoWidth)−1よりも小さく、yCが(1<<log2TrafoHeight)−1よりも小さい場合には、以下が適用される。

sigCtx=sigCtx+significant_coeff_flag[xC+1][yC+1]

・xCが、(1<<log2TrafoWidth)−2よりも小さい場合には、以下が適用される。

sigCtx=sigCtx+significant_coeff_flag[xC+2][yC]

・以下の条件の全てが真の場合、
・yCが、(1<<log2TrafoHeight)−1よりも小さい
・xC%4が0に等しくない、又はyC%4が2に等しくない
以下が適用される。

sigCtx=sigCtx+significant_coeff_flag[xC][yC+1]

・yCが、(1<<log2TrafoHeight)−2よりも小さく、sigCtxが4よりも小さい場合には、以下が適用される。

sigCtx=sigCtx+significant_coeff_flag[xC][yC+2]

・変数sigCtxは、以下のように変更される。
・cIdxが、0に等しく、xC+yCが、(1<<(max(log2TrafoWidth,log2TrafoHeight)−2))−1よりも大きい場合には、以下が適用される。

sigCtx=((sigCtx+1)>>1)+24

・上記の条件以外の場合には、以下が適用される。

sigCtx=((sigCtx+1)<<1)+21
コンテキストインデックスインクリメントctxIdxIncは、色成分インデックスcIdx及びsigCtxを使用して、以下のように得られる。
・cIdxが0に等しい場合、ctxIdxIncは、以下のように得られる。

ctxIdxInc=sigCtx

・或いは、cIdxが0より大きい場合、ctxIdxIncは、以下のように得られる。

ctxIdxInc=27+sigCtx
表4−ctxIdxMap4x4[i]の仕様

表5−ctxIdxMap8x8[i]の仕様
コンテキストの導出は、輝度に関しては32×32よりも小さい又はそれに等しく、色差に関しては16×16よりも小さい又はそれに等しい最大変換サイズ、及び4×4よりも大きい又はそれに等しい最小変換サイズを前提とする。
表6−significant_coeff_flag ctxIdxに関する変数initValueの値
図3は、幾つかの実施形態による4×4有意性マップ符号化の計算量低減方法のフローチャートを示す。ステップ300において、少なくとも1つの量子化非零変換係数を含む量子化変換係数がスキャンされる。ステップ302において、スキャン順序内の非零量子化係数終端位置が求められる。ステップ304において、非零係数終端位置が符号化される。ステップ306において、非零係数終端位置より前の量子化変換係数の有意性が、輝度及び色差係数に関して同じコンテキスト番号及びコンテキストインクリメントマッピングで符号化される。幾つかの実施形態では、より多い又は少ないステップが実行される。幾つかの実施形態では、ステップの順序は変更される。
図4は、計算量低減有意性マップ符号化方法を実行するように構成された、幾つかの実施形態による例示的なコンピューティングデバイスのブロック図を示す。コンピューティングデバイス400を使用して、画像及びビデオなどの情報を、取得、格納、計算、処理、伝達、及び/又は表示することができる。コンピューティングデバイス400を実装するのに好適なハードウェア構成は、全体が、ネットワークインタフェース402、メモリ404、プロセッサ406、I/Oデバイス408、バス410、及び記憶デバイス412を含む。プロセッサの選択は、十分な速度が選択される限り、決定的ではない。メモリ404は、本技術分野で公知の任意の従来のコンピュータメモリとすることができる。記憶デバイス412は、ハードドライブ、CDROM、CDRW、DVD、DVDRW、Blu−ray(登録商標)、フラッシュメモリカード、又は他の任意の記憶デバイスを含むことができる。コンピューティングデバイス400は、1つ又はそれ以上のネットワークインタフェース402を含むことができる。ネットワークインタフェースの実施例は、イーサネット(登録商標)又は他の種類のLANに接続されたネットワークカードを含む。I/Oデバイス408は、以下のもの、すなわち、キーボード、マウス、モニタ、スクリーン、プリンタ、モデム、タッチスクリーン、ボタンインタフェース、及び他のデバイスのうちの1つ又はそれ以上を含むことができる。計算量低減有意性マップ符号化方法を実行するために使用される計算量低減有意性マップ符号化アプリケーション430は、記憶デバイス412及びメモリ404に格納され、アプリケーションが典型的に処理されるように処理される可能性が高い。コンピューティングデバイス400は、図4に示すより多い又は少ない構成要素を含むことができる。幾つかの実施形態には、計算量低減有意性マップ符号化ハードウェア420が含まれる。図4のコンピューティングデバイス400は、計算量低減有意性マップ符号化方法に関するアプリケーション430及びハードウェア420を含むが、計算量低減有意性マップ符号化方法は、ハードウェア、ファームウェア、ソフトウェア、又はそれらの任意の組み合わせの形で、コンピューティングデバイスに実装することができる。例えば、幾つかの実施形態では、計算量低減有意性マップ符号化アプリケーション430は、メモリ内にプログラムされ、プロセッサを用いて実行される。別の実施例では、幾つかの実施形態において、計算量低減有意性マップ符号化ハードウェア420は、計算量低減有意性マップ符号化方法を実行するように専用に設計されたゲートを含む、プログラムされたハードウェアロジックである。
幾つかの実施形態では、計算量低減有意性マップ符号化アプリケーション430は、幾つかのアプリケーション及び/又はモジュールを含む。幾つかの実施形態では、モジュールはさらに、1つ又はそれ以上のサブモジュールを含む。幾つかの実施形態では、より少ない又は追加のモジュールを含むことができる。
好適なコンピューティングデバイスの実施例は、パーソナルコンピュータ、ラップトップコンピュータ、コンピュータワークステーション、サーバ、メインフレームコンピュータ、ハンドヘルドコンピュータ、携帯情報端末、セルラ電話/携帯電話、スマートアプライアンス、ゲームコンソール、デジタルカメラ、デジタルカムコーダ、カメラ付き携帯電話、スマートフォン、携帯音楽プレーヤー、タブレットコンピュータ、移動体デバイス、ビデオプレーヤー、ビデオディスクライター/プレーヤー(例えば、DVDライター/プレーヤー、Blu−ray(登録商標)ライター/プレーヤー)、テレビジョン、家庭用娯楽システム、又は他の任意の好適なコンピューティングデバイスを含む。
図5は、幾つかの実施形態によるHEVCエンコーダの概略図を示す。エンコーダ500は、全体的な符号化制御構成要素、変換スケーリング及び量子化構成要素、スケーリング及び逆変換構成要素、イントラピクチャ推定構成要素、イントラピクチャ予測構成要素、デブロッキングフィルタ及びSAOフィルタ構成要素、動き補償構成要素、動き推定構成要素、及びヘッダフォーマット化及びCABAC構成要素を含む。入力ビデオ信号は、エンコーダ500で受信され、符号化ツリーユニット(CTU)に分割される。HEVCエンコーダ構成要素は、ビデオデータを処理し、符号化されたビットストリームを生成する。エンコーダ500は、有意性マップ符号化の計算量低減を実行する。
図6は、幾つかの実施形態によるHEVCデコーダの概略図を示す。デコーダ600は、エントロピー復号構成要素、逆量子化構成要素、逆変換構成要素、現在フレーム構成要素、イントラ予測構成要素、過去フレーム構成要素、動き補償構成要素、デブロッキングフィルタ、及びSAO構成要素を含む。入力ビットストリーム(例えば、符号化されたビデオ)は、デコーダ600によって受信され、ディスプレイ用の復号されたビットストリームが生成される。
計算量低減有意性マップ符号化方法を利用するために、デジタルカメラなどのデバイスを使用してビデオを取得することができる。計算量低減有意性マップ符号化方法を自動的に使用して、ビデオ処理が実行される。計算量低減有意性マップ符号化方法は、ユーザの介在を必要とせずに自動的に実行することができる。
計算量低減有意性マップ符号化方法は、動作中に、輝度コンテキスト及び色差コンテキストを選択するのに同じマッピングを使用することによって、高効率映像符号化(HEVC)などの映像符号化においてsignificant_coeff_flagの符号化の計算量を低減する。結果的に、15要素のルックアップテーブル及び複数のブランチを削除して、コンテキストインデックスを選択することができ、WDテキストはさらに簡略化される。
計算量低減有意性マップ符号化の幾つかの実施形態
1.デバイス内でプログラムされた非零4×4有意性マップの符号化における計算量を低減する方法は、
a.量子化変換係数をスキャンする段階と、
b.非零量子化係数終端位置を求める段階と、
c.量子化変換係数から有意性マップを生成する段階と、
を含み、非零量子化係数終端位置より前の量子化変換係数の有意性は、輝度及び色差に関して同じコンテキスト番号及び同じマッピングを有し、コンテキストインデックスインクリメントが求められる。
2.コンテキストインクリメントマッピングは、単一の15要素ルックアップテーブルを含む、条項1の方法。
3.8×8、16×16、及び32×32有意性マップの少なくとも1つの輝度/色差判定に基づいてコンテキストオフセットを求めることなく、ビデオコンテンツを符号化する段階をさらに含む、条項1の方法。
4.デバイスは、パーソナルコンピュータ、ラップトップコンピュータ、コンピュータワークステーション、サーバ、メインフレームコンピュータ、ハンドヘルドコンピュータ、携帯情報端末、セルラ電話/携帯電話、スマートフォン、スマートアプライアンス、ゲームコンソール、デジタルカメラ、デジタルカムコーダ、カメラ付き携帯電話、携帯音楽プレーヤー、タブレットコンピュータ、ビデオプレーヤー、DVDライター/プレーヤー、高精細ビデオライター/プレーヤー、テレビジョン、及び家庭用娯楽システムからなるグループから選択される、条項1の方法。
5.エンコーダは、
a.量子化変換係数をスキャンするように構成されハードウェア内でプログラムされたスキャンモジュールと、
b.非零量子化変換係数終端位置を生成するように構成されハードウェア内でプログラムされた第1の生成モジュールと、
c.量子化変換係数から有意性マップを生成するように構成されハードウェア内でプログラムされた第2の生成モジュールと、
を含み、非零量子化係数終端位置より前の量子化変換係数の有意性は、輝度及び色差に関して同じコンテキスト番号及び同じマッピングを有し、コンテキストインデックスインクリメントが求められる。
6.コンテキストインクリメントマッピングは、単一の15要素ルックアップテーブルを含む、条項5のエンコーダ。
7.8×8、16×16、及び32×32有意性マップの少なくとも1つの輝度/色差判定に基づいてコンテキストオフセットを求めることなく、ビデオコンテンツを符号化するようにハードウェア内でプログラムされた符号化モジュールをさらに含む、条項5のエンコーダ。
8.エンコーダは、パーソナルコンピュータ、ラップトップコンピュータ、コンピュータワークステーション、サーバ、メインフレームコンピュータ、ハンドヘルドコンピュータ、携帯情報端末、セルラ電話/携帯電話、スマートフォン、スマートアプライアンス、ゲームコンソール、デジタルカメラ、デジタルカムコーダ、カメラ付き携帯電話、携帯音楽プレーヤー、タブレットコンピュータ、ビデオプレーヤー、DVDライター/プレーヤー、高精細ビデオライター/プレーヤー、テレビジョン、及び家庭用娯楽システムからなるグループから選択されるデバイス内に含まれる、条項5のエンコーダ。
9.装置は、
a.量子化変換係数から有意性マップを生成するためのアプリケーションを格納するための非一時的メモリを備え、
非零量子化係数終端位置より前の量子化変換係数の有意性は、輝度及び色差に関して同じコンテキスト番号及び同じマッピングを有し、コンテキストインデックスインクリメントが求められ、
装置はさらに、
b.メモリに接続され、アプリケーションを処理するように構成された処理構成要素を備える。
10.アプリケーションはさらに、量子化変換係数をスキャンするようになっている、条項9の装置。
11.コンテキストインクリメントマッピングは、単一の15要素ルックアップテーブルを含む、条項9のエンコーダ。
12.アプリケーションはさらに、8×8、16×16、及び32×32有意性マップの少なくとも1つの輝度/色差判定に基づいてコンテキストオフセットを求めることなくビデオコンテンツを符号化するようになっている、条項9の装置。
詳細が組み込まれた具体的な実施形態に関して本発明を説明しており、本発明の構成及び動作の原理を理解することが容易になっている。このような、本明細書での具体的な実施形態及びその詳細への言及は、特許請求の範囲の範疇に限定されることを意図するものではない。特許請求の範囲によって規定される本発明の思想及び範囲から逸脱することなく、例示目的で選択した実施形態において、他の様々な変更を行うことができることは、当業者に容易に理解されるであろう。

Claims (8)

  1. 4×4ブロックの量子化変換係数に対する有意性マップを対象として、コンテキストを割り当てる際量子化変換係数のインデクスからコンテキストインデクスを導出するために使用されるマッピングテーブルを、4×4ブロックの量子化変換係数の輝度成分に割り当てるコンテキストと4×4ブロックの量子化変換係数の色差成分に割り当てるコンテキストとの間において共有して、コンテキストを共有する符号化係数に対する第0番から第8番までの9個のグループへのグルーピングが同じ状態で、有意性マップ符号化処理を適用する符号化部を備える、符号化装置。
  2. 前記符号化部は、前記4×4ブロックの量子化変換係数の輝度成分と前記4×4ブロックの量子化変換係数の色差成分との間において同じ前記マッピングテーブルを用いて、前記量子化変換係数が非ゼロであるか否かを示すフラグであるsignificant_coeff_flagのコンテキストを割り当てることにより、前記有意性マップ符号化処理を適用する、
    請求項1に記載の符号化装置。
  3. 前記マッピングテーブルは、前記量子化変換係数のインデクスと前記コンテキストインデクスを導出するための中間変数sigCtxとをマッピングする、請求項1に記載の符号化装置。
  4. 符号化装置が実行する方法であって、
    4×4ブロックの量子化変換係数に対する有意性マップを対象として、コンテキストを割り当てる際量子化変換係数のインデクスからコンテキストインデクスを導出するために使用されるマッピングテーブルを、4×4ブロックの量子化変換係数の輝度成分に割り当てるコンテキストと4×4ブロックの量子化変換係数の色差成分に割り当てるコンテキストとの間において共有して、コンテキストを共有する符号化係数に対する第0番から第8番までの9個のグループへのグルーピングが同じ状態で、有意性マップ符号化処理を適用するステップを含む、方法。
  5. 前記有意性マップ符号化処理を適用するステップは、前記4×4ブロックの量子化変換係数の輝度成分と前記4×4ブロックの量子化変換係数の色差成分との間において同じ前記マッピングテーブルを用いて、前記量子化変換係数が非ゼロであるか否かを示すフラグであるsignificant_coeff_flagのコンテキストを割り当てることにより、前記有意性マップ符号化処理を適用するステップを含む、請求項4に記載の方法。
  6. 前記マッピングテーブルは、前記量子化変換係数のインデクスと前記コンテキストインデクスを導出するための中間変数sigCtxとをマッピングする、請求項4に記載の方法。
  7. コンピュータプログラムであって、
    4×4ブロックの量子化変換係数に対する有意性マップを対象として、コンテキストを割り当てる際量子化変換係数のインデクスからコンテキストインデクスを導出するために使用されるマッピングテーブルを、4×4ブロックの量子化変換係数の輝度成分に割り当てるコンテキストと4×4ブロックの量子化変換係数の色差成分に割り当てるコンテキストとの間において共有して、コンテキストを共有する符号化係数に対する第0番から第8番までの9個のグループへのグルーピングが同じ状態で、有意性マップ符号化処理を適用するステップを符号化装置に実行させる、コンピュータプログラム。
  8. 請求項に記載のコンピュータプログラムを記録した記録媒体。
JP2014553480A 2012-01-20 2013-01-18 有意性マップ符号化の計算量低減 Active JP6276199B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201261589183P 2012-01-20 2012-01-20
US61/589,183 2012-01-20
PCT/US2013/022267 WO2013109967A1 (en) 2012-01-20 2013-01-18 Complexity reduction of significance map coding

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2016010588A Division JP6176342B2 (ja) 2012-01-20 2016-01-22 有意性マップ符号化の計算量低減

Publications (2)

Publication Number Publication Date
JP2015508619A JP2015508619A (ja) 2015-03-19
JP6276199B2 true JP6276199B2 (ja) 2018-02-07

Family

ID=48797196

Family Applications (4)

Application Number Title Priority Date Filing Date
JP2014553480A Active JP6276199B2 (ja) 2012-01-20 2013-01-18 有意性マップ符号化の計算量低減
JP2016010588A Active JP6176342B2 (ja) 2012-01-20 2016-01-22 有意性マップ符号化の計算量低減
JP2017123995A Pending JP2017192147A (ja) 2012-01-20 2017-06-26 有意性マップ符号化の計算量低減
JP2017123996A Pending JP2017192148A (ja) 2012-01-20 2017-06-26 有意性マップ符号化の計算量低減

Family Applications After (3)

Application Number Title Priority Date Filing Date
JP2016010588A Active JP6176342B2 (ja) 2012-01-20 2016-01-22 有意性マップ符号化の計算量低減
JP2017123995A Pending JP2017192147A (ja) 2012-01-20 2017-06-26 有意性マップ符号化の計算量低減
JP2017123996A Pending JP2017192148A (ja) 2012-01-20 2017-06-26 有意性マップ符号化の計算量低減

Country Status (6)

Country Link
US (4) US20130188728A1 (ja)
EP (2) EP2786575A4 (ja)
JP (4) JP6276199B2 (ja)
KR (5) KR20140110938A (ja)
CN (6) CN107027037B (ja)
WO (1) WO2013109967A1 (ja)

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107027037B (zh) * 2012-01-20 2020-06-23 索尼公司 降低复杂度的有效图编码方法及装置
US9294766B2 (en) 2013-09-09 2016-03-22 Apple Inc. Chroma quantization in video coding
US20160057564A1 (en) 2014-08-25 2016-02-25 Hyundai Motor Company Bluetooth pairing method using a wired connection
US9781424B2 (en) * 2015-01-19 2017-10-03 Google Inc. Efficient context handling in arithmetic coding
KR20180039578A (ko) 2015-09-08 2018-04-18 삼성전자주식회사 엔트로피 부호화 및 복호화를 위한 장치 및 방법
CN106851280B (zh) * 2017-01-04 2018-04-13 西安万像电子科技有限公司 图像压缩的方法和装置
CN107948652B (zh) * 2017-11-21 2021-04-13 海信视像科技股份有限公司 一种进行图像转换的方法和设备
CN114745544B (zh) 2019-05-28 2024-05-28 杜比实验室特许公司 用信号发送量化参数的方法和计算机可读记录介质
EP4035367A1 (en) * 2019-09-23 2022-08-03 InterDigital VC Holdings France, SAS Video encoding and decoding using block area based quantization matrices
US11432006B2 (en) * 2020-08-14 2022-08-30 Tencent America LLC Chroma mode video coding
KR20220090250A (ko) 2020-12-22 2022-06-29 주식회사 브로넷 가두리 양식장에 인공 수류를 발생시켜 적조 발생을 저감시키는 방법

Family Cites Families (45)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS5576043A (en) 1978-11-30 1980-06-07 Nippon Steel Corp Steel having partial form memory effect
JP3569963B2 (ja) * 1993-09-08 2004-09-29 ソニー株式会社 画像圧縮装置
US5790706A (en) * 1996-07-03 1998-08-04 Motorola, Inc. Method and apparatus for scanning of transform coefficients
WO2001076255A1 (en) * 2000-04-04 2001-10-11 Koninklijke Philips Electronics N.V. Video encoding method using a wavelet transform
JP5041626B2 (ja) * 2000-04-14 2012-10-03 ソニー株式会社 復号装置、復号方法、およびプログラム
CN100566419C (zh) * 2001-07-02 2009-12-02 高通股份有限公司 以无损的方式编码数字图像数据的设备和方法
US7099387B2 (en) * 2002-03-22 2006-08-29 Realnetorks, Inc. Context-adaptive VLC video transform coefficients encoding/decoding methods and apparatuses
CN101631247B (zh) * 2002-04-18 2011-07-27 株式会社东芝 运动图像编码/解码方法和装置
ES2277174T3 (es) * 2002-05-02 2007-07-01 Fraunhofer-Gesellschaft Zur Forderung Der Angewandten Forschung E.V. Codificacion aritmetica de coeficientes de transformacion.
JP4724351B2 (ja) * 2002-07-15 2011-07-13 三菱電機株式会社 画像符号化装置、画像符号化方法、画像復号装置、画像復号方法、および通信装置
KR100751422B1 (ko) * 2002-12-27 2007-08-23 한국전자통신연구원 스테레오스코픽 비디오 부호화 및 복호화 방법, 부호화 및복호화 장치
US7379608B2 (en) * 2003-12-04 2008-05-27 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung, E.V. Arithmetic coding for transforming video and picture data units
US20070025441A1 (en) * 2005-07-28 2007-02-01 Nokia Corporation Method, module, device and system for rate control provision for video encoders capable of variable bit rate encoding
KR100736086B1 (ko) * 2005-09-06 2007-07-06 삼성전자주식회사 엔트로피 코딩의 성능 향상 방법 및 장치, 상기 방법을이용한 비디오 코딩 방법 및 장치
KR100873636B1 (ko) 2005-11-14 2008-12-12 삼성전자주식회사 단일 부호화 모드를 이용하는 영상 부호화/복호화 방법 및장치
US7983343B2 (en) * 2006-01-12 2011-07-19 Lsi Corporation Context adaptive binary arithmetic decoding for high definition video
KR20140101872A (ko) * 2007-01-11 2014-08-20 톰슨 라이센싱 Mpeg-4 avc 하이 레벨 코딩에 있어서 cavlc 4:4:4 인트라 프로파일, high 4:4:4 인트라 프로파일, 및 high 4:4:4 예측 프로파일에 대하여 coded_block_flag 신택스 엘리먼트 및 coded_block_pattern 신택스 엘리먼트의 신택스를 사용하는 방법 및 장치
KR101356733B1 (ko) * 2007-03-07 2014-02-05 삼성전자주식회사 컨텍스트 기반 적응적 이진 산술 부호화, 복호화 방법 및장치
US8891615B2 (en) * 2008-01-08 2014-11-18 Qualcomm Incorporated Quantization based on rate-distortion modeling for CABAC coders
CN101500159B (zh) * 2008-01-31 2012-01-11 华为技术有限公司 一种图像熵编码、熵解码的方法及装置
CN101257625B (zh) * 2008-04-01 2011-04-20 海信集团有限公司 视频编解码中的位置索引方法及视频解码器
US20100040136A1 (en) * 2008-08-13 2010-02-18 Horizon Semiconductors Ltd. Method for performing binarization using a lookup table
US8279924B2 (en) * 2008-10-03 2012-10-02 Qualcomm Incorporated Quantization parameter selections for encoding of chroma and luma video blocks
EP2351375A1 (en) * 2008-10-30 2011-08-03 GVBB Holdings S.A.R.L Image encoding apparatus, image encoding method, and image encoding program
CN101771868B (zh) * 2008-12-31 2016-03-02 华为技术有限公司 对图像的量化处理方法及装置
EP2396969A4 (en) * 2009-02-13 2012-12-12 Research In Motion Ltd MODIFIED ENTROPIC CODING FOR IMAGES AND VIDEOS
US20100278232A1 (en) * 2009-05-04 2010-11-04 Sehoon Yea Method Coding Multi-Layered Depth Images
WO2011002914A1 (en) * 2009-06-30 2011-01-06 Massachusetts Institute Of Technology System and method for providing high throughput entropy coding using syntax element partitioning
US8526745B2 (en) * 2009-12-03 2013-09-03 Sony Corporation Embedded graphics coding: reordered bitstream for parallel decoding
EP2559166B1 (en) * 2010-04-13 2017-11-01 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Probability interval partioning encoder and decoder
KR102310816B1 (ko) * 2010-05-12 2021-10-13 인터디지털 매디슨 페턴트 홀딩스 에스에이에스 통합된 유효성 맵 코딩을 위한 방법 및 장치
US9288496B2 (en) * 2010-12-03 2016-03-15 Qualcomm Incorporated Video coding using function-based scan order for transform coefficients
US8755620B2 (en) * 2011-01-12 2014-06-17 Panasonic Corporation Image coding method, image decoding method, image coding apparatus, image decoding apparatus, and image coding and decoding apparatus for performing arithmetic coding and/or arithmetic decoding
CN102118616A (zh) * 2011-02-24 2011-07-06 深圳市同洲电子股份有限公司 图片解码方法及图片解码器
US20130016789A1 (en) * 2011-07-15 2013-01-17 General Instrument Corporation Context modeling techniques for transform coefficient level coding
US20130101047A1 (en) * 2011-10-19 2013-04-25 Sony Corporation Context reduction of significance map coding of 4x4 and 8x8 transform coefficient in hm4.0
ES2496365T3 (es) 2011-10-24 2014-09-18 Blackberry Limited Codificación y descodificación de mapas significativos usando selección de la partición
US8891630B2 (en) * 2011-10-24 2014-11-18 Blackberry Limited Significance map encoding and decoding using partition set based context assignment
MX346677B (es) * 2011-11-04 2017-03-29 Sharp Kk * Dispositivo de decodificacion aritmetica, dispositivo de decodificacion de imagenes, dispositivo de codificacion aritmetica, dispositivo de codificacion de imagenes y metodo de decodificacion aritmetica.
CN104067614B (zh) 2011-12-28 2018-07-27 夏普株式会社 算术解码装置、图像解码装置以及算术编码装置
CN107493476A (zh) 2012-01-12 2017-12-19 寰发股份有限公司 统一显著性位图上下文选择的方法及装置
US9743116B2 (en) * 2012-01-19 2017-08-22 Huawei Technologies Co., Ltd. High throughput coding for CABAC in HEVC
CN107027037B (zh) * 2012-01-20 2020-06-23 索尼公司 降低复杂度的有效图编码方法及装置
CN107302364B (zh) 2012-01-20 2021-01-19 Ge视频压缩有限责任公司 从数据流解码具有变换系数级别的多个变换系数的装置
EP2618578B1 (en) * 2012-01-20 2015-07-15 BlackBerry Limited Methods and devices for context set selection

Also Published As

Publication number Publication date
US11025938B2 (en) 2021-06-01
US20180115781A1 (en) 2018-04-26
KR20140110938A (ko) 2014-09-17
KR20180030251A (ko) 2018-03-21
US20180115782A1 (en) 2018-04-26
CN110536141A (zh) 2019-12-03
KR20160034424A (ko) 2016-03-29
WO2013109967A1 (en) 2013-07-25
CN103460701B (zh) 2017-06-09
EP2786575A4 (en) 2016-08-03
CN107333138B (zh) 2020-06-16
CN110536141B (zh) 2021-07-06
CN107027037A (zh) 2017-08-08
JP6176342B2 (ja) 2017-08-09
EP3550840A1 (en) 2019-10-09
US20210243464A1 (en) 2021-08-05
CN103460701A (zh) 2013-12-18
CN107333138A (zh) 2017-11-07
CN111683255A (zh) 2020-09-18
CN111683255B (zh) 2022-08-02
JP2016105633A (ja) 2016-06-09
KR20160035095A (ko) 2016-03-30
CN105847827B (zh) 2019-03-08
CN107027037B (zh) 2020-06-23
JP2015508619A (ja) 2015-03-19
JP2017192147A (ja) 2017-10-19
CN105847827A (zh) 2016-08-10
JP2017192148A (ja) 2017-10-19
EP2786575A1 (en) 2014-10-08
KR20180030250A (ko) 2018-03-21
US20130188728A1 (en) 2013-07-25

Similar Documents

Publication Publication Date Title
JP6176342B2 (ja) 有意性マップ符号化の計算量低減
TWI759389B (zh) 用於視訊寫碼之低複雜度符號預測
RU2563681C2 (ru) Отдельное кодирование позиции последнего значимого коэффициента видеоблока при кодировании видео
US9055290B2 (en) Coding the position of a last significant coefficient within a video block based on a scanning order for the block in video coding
RU2595897C2 (ru) Определение контекстов для кодирования данных коэффициентов преобразования при кодировании видео
CN115379241B (zh) 用于对最后有效系数标志进行代码化的方法和设备
US20120163448A1 (en) Coding the position of a last significant coefficient of a video block in video coding
JP2018511227A (ja) フレーム内符号化方法、フレーム内復号化方法、エンコーダ、及びデコーダ
US20200296370A1 (en) Implicit transform selection in video coding
JP2019508969A (ja) 最適化されたコンパクト多重パス変換を使用する効率的な変換コーディング
JP2015533061A (ja) コンテキスト適応型、マルチレベル有意性コーディングに関するコンテキスト導出
KR20130054354A (ko) 비디오 코딩에서 고정 소수점 변환들을 위한 가변 로컬화 비트 깊이 증가
US10992937B2 (en) Coefficient coding with grouped bypass bins

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20150723

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20150826

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20151026

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20151221

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160122

RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20160219

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20160308

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20160426

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160613

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20160628

A912 Re-examination (zenchi) completed and case transferred to appeal board

Free format text: JAPANESE INTERMEDIATE CODE: A912

Effective date: 20160812

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20170703

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20180111

R150 Certificate of patent or registration of utility model

Ref document number: 6276199

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150