JP6071001B2 - ブロックベースの混合解像度のデータ刈り込みを使用したビデオ復号化 - Google Patents
ブロックベースの混合解像度のデータ刈り込みを使用したビデオ復号化 Download PDFInfo
- Publication number
- JP6071001B2 JP6071001B2 JP2013528310A JP2013528310A JP6071001B2 JP 6071001 B2 JP6071001 B2 JP 6071001B2 JP 2013528310 A JP2013528310 A JP 2013528310A JP 2013528310 A JP2013528310 A JP 2013528310A JP 6071001 B2 JP6071001 B2 JP 6071001B2
- Authority
- JP
- Japan
- Prior art keywords
- blocks
- pruned
- picture
- version
- metadata
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/119—Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/136—Incoming video signal characteristics or properties
- H04N19/14—Coding unit complexity, e.g. amount of activity or edge presence estimation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/46—Embedding additional information in the video signal during the compression process
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/48—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using compressed domain processing techniques other than decoding, e.g. modification of transform coefficients, variable length coding [VLC] data or run-length data
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/587—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal sub-sampling or interpolation, e.g. decimation or subsequent interpolation of pictures in a video sequence
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/59—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
- H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Description
(1)2011年1月20日に出願された“A SAMPLING−BASED SUPER−RESOLUTION APPROACH FOR EFFICENT VIDEO COMPRESSION”と題する国際(PCT)特許出願シリアル番号PCT/US11/000107号明細書(テクニカラー社整理番号PU100004)
(2)2011年1月21日に出願された“DATA PRUNING FOR VIDEO COMPRESSION USING EXAMPLE−BASED SUPER−RESOLUTION”と題する国際(PCT)特許出願シリアル番号PCT/US11/000117号明細書(テクニカラー社整理番号PU100014)
(3)2011年9月XX日に出願された“METHODS AND APPARATUS FOR ENCODING VIDEO SIGNALS USING MOTION COMPENSATED EXAMPLE−BASED SUPER−RESOLUTION FOR VIDEO COMPRESSION”と題する国際(PCT)特許出願シリアル番号XXXX号明細書(テクニカラー社整理番号PU100190)
(4)2011年9月XX日に出願された“METHODS AND APPARATUS FOR DECODING VIDEO SIGNALS USING MOTION COMPENSATED EXAMPLE−BASED SUPER−RESOLUTION FOR VIDEO COMPRESSION”と題する国際(PCT)特許出願シリアル番号XXXX号明細書(テクニカラー社整理番号PU100266)
(5)2011年9月XX日に出願された“METHODS AND APPARATUS FOR ENCODING VIDEO SIGNALS USING EXAMPLE−BASED DATA PRUNING FOR IMPROVED VIDEO COMPRESSION EFFICIENCY”と題する国際(PCT)特許出願シリアル番号XXXX号明細書(テクニカラー社整理番号PU100193)
(6)2011年9月XX日に出願された“METHODS AND APPARATUS FOR DECODING VIDEO SIGNALS USING EXAMPLE−BASED DATA PRUNING FOR IMPROVED VIDEO COMPRESSION EFFICIENCY”と題する国際(PCT)特許出願シリアル番号XXXX号明細書(テクニカラー社整理番号PU100267)
(7)2011年9月XX日に出願された“METHODS AND APPARATUS FOR ENCODING VIDEO SIGNALS FOR BLOCK−BASED MIXED−RESOLUTION DATA PRUNING”と題する国際(PCT)特許出願シリアル番号XXXX号明細書(テクニカラー社整理番号PU100194)
(8)2011年9月XX日に出願された“METHODS AND APPARATUS FOR EFFICIENT REFERENCE DATA ENCODING FOR VIDEO COMPRESSION BY IMAGE CONTENT BASED SEARCH AND RANKING”と題する国際(PCT)特許出願シリアル番号XXXX号明細書(テクニカラー社整理番号PU100195)
(9)2011年9月XX日に出願された“METHOD AND APPARATUS FOR EFFICIENT REFERENCE DATA DECODING FOR VIDEO COMPRESSION BY IMAGE CONTENT BASED SEARCH AND RANKING”と題する国際(PCT)特許出願シリアル番号XXXX号明細書(テクニカラー社整理番号PU110106)
(10)2011年9月XX日に出願された“METHOD AND APPARATUS FOR ENCODING VIDEO SIGNALS FOR EXAMPLE−BASED DATA PRUNING USING INTRA−FRAME PATCH SIMILARITY”と題する国際(PCT)特許出願シリアル番号XXXX号明細書(テクニカラー社整理番号PU100196)
(11)2011年9月XX日に出願された“METHOD AND APPARATUS FOR DECODING VIDEO SIGNALS WITH EXAMPLE−BASED DATA PRUNING USING INTRA−FRAME PATCH SIMILARITY”と題する国際(PCT)特許出願シリアル番号XXXX号明細書(テクニカラー社整理番号PU100296)
(12)2011年9月XX日に出願された“PRUNING DECISION OPTIMIZATION IN EXAMPLE−BASED DATA PRUNING COMPRESSION”と題する国際(PCT)特許出願シリアル番号XXXX号明細書(テクニカラー社整理番号PU10197)
本発明の原理は、一般には、ビデオ符号化およびビデオ復号化に関し、より詳細には、ビデオの圧縮効率を高めるためにブロックベースの混合解像度のデータ刈り込み(data pruning)を行う方法および装置に関する。
入力ビデオフレームは、最初に非重複ブロックに分割される。そのブロックのサイズは、例えば、16×16ピクセルまたは8×8ピクセルなど、異なることもあり得る。しかし、ブロック分割は、最大圧縮効率を実現することができるように、符号器が使用するのと同じサイズの分割にすることが望ましい。例えば、標準化/国際標準化機構/国際電気標準会議(ISO/IEC)の動画像符号化専門家グループ(MPEG−4)第10部先進動画符号化(AVC)標準/国際電気通信連合、電気通信標準化部門(ITU−T)H.264推奨(以下、「MPEG−4AVC規格」と呼ぶ)に従った符号化において、マクロブロックは、16×16ピクセルである。従って、MPEG−4AVC規格を伴う実施形態において、データ刈り込み用のブロックサイズの好適な選択は、16×16ピクセルである。
回復プロセスの刈り込まれたブロックを正しく復元するために、ブロックの位置を、メタデータによって表されるとおりに、復号器側に送らなければならない。ある簡易な手法は、汎用のロスレスデータ圧縮アルゴリズムを使用して位置データを圧縮するものである。しかし、本システムの場合、刈り込まれたブロックは、低解像度ブロックまたは平坦ブロックであり、その低解像度ブロックまたは平坦ブロックは、刈り込まれたブロックが高周波数信号を含むか否かを検出することによって特定され得るという事実によって、よりよい圧縮効率を実現することが可能である。
E=|B−HB| (1)
この式において、Eは、高周波数信号のエネルギーであり、Bは、入力ブロック画像であり、Hは、帯域幅Fmを有する低域通過フィルタであり、HBは、Bが低域通過フィルタされたバージョンである。|.|は、画像のエネルギーを計算する関数である。
[フラグ] [閾値] [符号化された座標シーケンス]
「フラグ」セグメントは、次のシーケンスが誤検出ブロックまたは刈り込みブロックの座標であるかどうかを示す2進数である。「閾値」数は、数式(1)を使用した低解像度または平坦ブロックの識別に使用される。
復元プロセスは、刈り込まれたビデオが復号化された後に実行される。復元の前に、刈り込まれたブロックの位置は、本明細書で説明したように、メタデータを復号化することによって得られる。
[付記1]
ピクチャの刈り込まれたバージョンをビデオシーケンスによって回復するための装置であって、
前記ピクチャの前記刈り込まれたバージョン内の1または複数の刈り込まれたブロックを識別するための刈り込みブロック識別器(610)と、
前記ピクチャの前記刈り込まれたバージョンを回復するメタデータを復号化するためのメタデータ復号器(615)であって、前記メタデータは、前記1または複数の置換ブロックの位置情報を含む、メタデータ復号器と、
前記1または複数の刈り込まれたブロックに対して1または複数の置換ブロックをそれぞれ生成するためのブロック復元器(620)と
を備える、装置。
[付記2]
前記ピクチャの前記刈り込まれたバージョンは、前記ピクチャの前記元バージョンを複数のブロックに分割し、前記1または複数の刈り込まれたブロックを前記1または複数の置換ブロックにそれぞれ置き換えることによって生成され、前記1または複数の刈り込まれたブロックのうちの少なくとも所定の1つにおけるすべてのピクセルは、同じ色値または低い解像度の色値のうちの1つを有し、前記低い解像度の色値は、前記1または複数の置換ブロックに関して判定される、付記2に記載の装置。
[付記3]
前記同じ色値は、前記複数のブロックのうちの前記少なくとも1つ内の前記ピクセルの色の平均値と等しい、付記2に記載の装置。
[付記4]
前記ピクチャの前記刈り込まれたバージョンは、混合解像度ピクチャである、付記2に記載の装置。
[付記5]
前記1または複数の刈り込まれたブロックは、前記1または複数の置換ブロックのそれぞれよりも、指定された周波数以上の少ない情報を備える、付記2に記載の装置。
[付記6]
前記位置情報は、前記1または複数の置換ブロックの座標情報を備える、付記1に記載の装置。
[付記7]
前記刈り込みブロック識別器(610)は、前記ピクチャの前記刈り込まれたバージョン内の前記1または複数の刈り込まれたブロックを識別する識別プロセスを実行し、前記1または複数の刈り込まれたブロックのうちの所定の1つは、指定された周波数よりも大きい前記1または複数の刈り込まれたブロックのうちの前記所定の1つの信号成分のエネルギー量に基づいて、前記識別プロセスによって識別される、付記1に記載の装置。
[付記8]
前記メタデータは、前記識別プロセスに関する誤検出ブロックおよび欠損ブロックの位置情報も含む、付記7に記載の装置。
[付記9]
前記メタデータが前記ピクチャの前記刈り込まれたバージョンを回復する際の使用から省略されたとき、修復及びテクスチャ合成のうちの少なくとも1を使用して、前記ピクチャの前記刈り込まれたバージョンを回復する、付記1に記載の装置。
[付記10]
ピクチャの刈り込まれたバージョンをビデオシーケンスによって回復するための方法であって、
前記ピクチャの前記刈り込まれたバージョン内の1または複数の刈り込まれたブロックを識別する(610)ステップと、
復号器を使用して、前記ピクチャの前記刈り込まれたバージョンを回復するメタデータを復号化する(1100)ステップであって、前記メタデータは、前記1または複数の置換ブロックの位置情報を含む、ステップと、
前記1または複数の刈り込まれたブロックに対して1または複数の置換ブロックをそれぞれ生成する(725)ステップと
を備える、方法。
[付記11]
前記ピクチャの前記刈り込まれたバージョンは、前記ピクチャの前記元バージョンを複数のブロックに分割し(710)、前記1または複数の刈り込まれたブロックを前記1または複数の置換ブロックにそれぞれ置き換える(725)ことよって生成され、前記1または複数の刈り込まれたブロックのうちの少なくとも所定の1つ内のすべてのピクセルは、同じ色値または低い解像度の色値のうちの1つを有し、前記低い解像度の色値は、前記1または複数の置換ブロックに関して判定される、付記10に記載の方法。
[付記12]
前記同じ色値は、前記複数のブロックのうちの前記少なくとも1つ内の前記ピクセルの色の平均値と等しい、付記11に記載の方法。
[付記13]
前記ピクチャの前記刈り込まれたバージョンは、混合解像度ピクチャ(800)である、付記11に記載の方法。
[付記14]
前記1または複数の刈り込まれたブロックは、前記1または複数の置換ブロック(900)のそれぞれよりも、指定された周波数以上の少ない情報を備える、付記11に記載の方法。
[付記15]
前記位置情報は、前記1または複数の置換ブロックの座標情報を備える、付記10に記載の方法。
[付記16]
前記識別するステップは、前記ピクチャの前記刈り込まれたバージョン内の前記1または複数の刈り込まれたブロックを識別する識別プロセスを実行し、前記1または複数の刈り込まれたブロックのうちの所定の1つは、指定された周波数よりも大きい前記1または複数の刈り込まれたブロックのうちの前記所定の1つの信号成分のエネルギー量に基づいて、前記識別プロセスによって識別される、付記10に記載の方法。
[付記17]
前記メタデータは、前記識別プロセス(1135)に関する誤検出ブロックおよび欠損ブロックの位置情報も含む、付記16に記載の方法。
[付記18]
前記メタデータが前記ピクチャの前記刈り込まれたバージョンを回復する際の使用から省略された場合、修復及びテクスチャ合成のうちの少なくとも1を使用して、前記ピクチャの前記刈り込まれたバージョンを回復することを特徴とする付記10に記載の方法。
[付記19]
ピクチャの刈り込まれたバージョンをビデオシーケンスによって回復するための装置であって、
前記ピクチャの前記刈り込まれたバージョン内の1または複数の刈り込まれたブロックを識別するための手段(610)と、
前記ピクチャの前記刈り込まれたバージョンを回復するメタデータを復号化するための手段(615)であって、前記メタデータは、前記1または複数の置換ブロックの位置情報を含む、手段と、
前記1または複数の刈り込まれたブロックに対して1または複数の置換ブロックをそれぞれ生成するための手段(620)と
を備える、装置
[付記20]
前記ピクチャの前記刈り込まれたバージョンは、前記ピクチャの前記元バージョンを複数のブロックに分割し、前記1または複数の刈り込まれたブロックを前記1または複数の置換ブロックにそれぞれ置き換えることによって生成され、前記1または複数の刈り込まれたブロックのうちの少なくとも所定の1つにおけるすべてのピクセルは、同じ色値または低い解像度の色値のうちの1つを有し、前記低い解像度の色値は、前記1または複数の置換ブロックに関して判定される、付記19に記載の装置。
[付記21]
前記同じ色値は、前記複数のブロックのうちの前記少なくとも1つ内の前記ピクセルの色の平均値と等しい、付記20に記載の装置。
[付記22]
前記ピクチャの前記刈り込まれたバージョンは、混合解像度ピクチャである、付記20に記載の装置。
[付記23]
前記1または複数の刈り込まれたブロックは、前記1または複数の置換ブロックのそれぞれよりも、指定された周波数以上の少ない情報を備える、付記20に記載の装置。
[付記24]
前記位置情報は、前記1または複数の置換ブロックの座標情報を備える、付記19に記載の装置。
[付記25]
前記識別するための手段(610)は、前記ピクチャの前記刈り込まれたバージョン内の前記1または複数の刈り込まれたブロックを識別する識別プロセスを実行し、前記1または複数の刈り込まれたブロックのうちの所定の1つは、指定された周波数よりも大きい前記1または複数の刈り込まれたブロックのうちの前記所定の1つの信号成分のエネルギー量に基づいて、前記識別プロセスによって識別される、付記19に記載の装置。
[付記26]
前記メタデータは、前記識別プロセスに関する誤検出ブロックおよび欠損ブロックの位置情報も含む、付記25に記載の装置。
[付記27]
前記メタデータが前記ピクチャの前記刈り込まれたバージョンを回復する際の使用から省略された場合、修復及びテクスチャ合成のうちの少なくとも1を使用して、前記ピクチャの前記刈り込まれたバージョンを回復する、付記19に記載の装置。
Claims (15)
- ビデオシーケンスにおけるピクチャの刈り込まれたバージョンを回復するための装置であって、
前記ピクチャの前記刈り込まれたバージョン内の1つまたは複数の刈り込まれたブロックを識別するための刈り込みブロック識別器と、
前記ピクチャの前記刈り込まれたバージョンを回復するためのメタデータを復号化するためのメタデータ復号器であって、前記メタデータは、前記1つまたは複数の刈り込まれたブロックの位置情報を含む、メタデータ復号器と、
前記1つまたは複数の刈り込まれたブロックを復元することにより前記刈り込まれたバージョンを回復するためのブロック復元器と、
を備え、
前記ピクチャの前記刈り込まれたバージョンは、前記ピクチャの元バージョンを複数のブロックに分割し、1つまたは複数の刈り込まれるべきブロックを1つまたは複数の置換ブロックにそれぞれ置き換えることによって生成され、前記1つまたは複数の刈り込まれたブロックのうちの少なくとも所定の1つにおけるすべてのピクセルは、同じ色値を有する、前記装置。 - 前記同じ色値は、前記複数のブロックのうちの前記少なくとも1つ内の前記ピクセルの色値の平均と等しい、請求項1に記載の装置。
- 前記ピクチャの前記刈り込まれたバージョンは、混合解像度ピクチャである、請求項1に記載の装置。
- 前記1つまたは複数の刈り込まれたブロックは、前記1つまたは複数の置換ブロックのそれぞれよりも少ない、指定された周波数を超える情報を備える、請求項1に記載の装置。
- ビデオシーケンスにおけるピクチャの刈り込まれたバージョンを回復するための装置であって、
前記ピクチャの前記刈り込まれたバージョン内の1つまたは複数の刈り込まれたブロックを識別するための刈り込みブロック識別器と、
前記ピクチャの前記刈り込まれたバージョンを回復するためのメタデータを復号化するためのメタデータ復号器であって、前記メタデータは、前記1つまたは複数の刈り込まれたブロックの位置情報を含む、メタデータ復号器と、
前記1つまたは複数の刈り込まれたブロックを復元することにより前記刈り込まれたバージョンを回復するためのブロック復元器と、
を備え、
前記刈り込みブロック識別器は、前記ピクチャの前記刈り込まれたバージョン内の前記1つまたは複数の刈り込まれたブロックを識別する識別プロセスを実行し、前記1つまたは複数の刈り込まれたブロックのうちの所定の1つは、指定された周波数よりも大きい前記1つまたは複数の刈り込まれたブロックのうちの前記所定の1つの信号成分のエネルギー量に基づいて、前記識別プロセスによって識別され、
前記メタデータは、前記識別プロセスに関する誤検出ブロックおよび欠損ブロックの位置情報も含む、前記装置。 - ビデオシーケンスにおけるピクチャの刈り込まれたバージョンを回復するための方法であって、
前記ピクチャの前記刈り込まれたバージョン内の1つまたは複数の刈り込まれたブロックを識別するステップと、
復号器を使用して、前記ピクチャの前記刈り込まれたバージョンを回復するためのメタデータを復号化するステップであって、前記メタデータは、前記1つまたは複数の刈り込まれたブロックの位置情報を含む、ステップと、
前記1つまたは複数の刈り込まれたブロックを復元することにより前記刈り込まれたバージョンを回復するステップと、
を備え、
前記ピクチャの前記刈り込まれたバージョンは、前記ピクチャの元バージョンを複数のブロックに分割し、1つまたは複数の刈り込まれるべきブロックを1つまたは複数の置換ブロックにそれぞれ置き換えることよって生成され、前記1つまたは複数の刈り込まれたブロックのうちの少なくとも所定の1つ内のすべてのピクセルは、同じ色値を有する、前記方法。 - 前記同じ色値は、前記複数のブロックのうちの前記少なくとも1つ内の前記ピクセルの色値の平均と等しい、請求項6に記載の方法。
- 前記ピクチャの前記刈り込まれたバージョンは、混合解像度ピクチャである、請求項6に記載の方法。
- 前記1つまたは複数の刈り込まれたブロックは、前記1つまたは複数の置換ブロックのそれぞれよりも少ない、指定された周波数を超える情報を備える、請求項6に記載の方法。
- ビデオシーケンスにおけるピクチャの刈り込まれたバージョンを回復するための方法であって、
前記ピクチャの前記刈り込まれたバージョン内の1つまたは複数の刈り込まれたブロックを識別するステップと、
復号器を使用して、前記ピクチャの前記刈り込まれたバージョンを回復するためのメタデータを復号化するステップであって、前記メタデータは、前記1つまたは複数の刈り込まれたブロックの位置情報を含む、ステップと、
前記1つまたは複数の刈り込まれたブロックを復元することにより前記刈り込まれたバージョンを回復するステップと、
を備え、
前記識別するステップは、前記ピクチャの前記刈り込まれたバージョン内の前記1つまたは複数の刈り込まれたブロックを識別する識別プロセスを実行し、前記1つまたは複数の刈り込まれたブロックのうちの所定の1つは、指定された周波数よりも大きい前記1つまたは複数の刈り込まれたブロックのうちの前記所定の1つの信号成分のエネルギー量に基づいて、前記識別プロセスによって識別され、
前記メタデータは、前記識別プロセスに関する誤検出ブロックおよび欠損ブロックの位置情報も含む、前記方法。 - ビデオシーケンスにおけるピクチャの刈り込まれたバージョンを回復するための装置であって、
前記ピクチャの前記刈り込まれたバージョン内の1つまたは複数の刈り込まれたブロックを識別するための手段と、
前記ピクチャの前記刈り込まれたバージョンを回復するためのメタデータを復号化するための手段であって、前記メタデータは、前記1つまたは複数の刈り込まれたブロックの位置情報を含む、手段と、
前記1つまたは複数の刈り込まれたブロックを復元することにより前記刈り込まれたバージョンを回復するための手段と、
を備え、
前記ピクチャの前記刈り込まれたバージョンは、前記ピクチャの元バージョンを複数のブロックに分割し、1つまたは複数の刈り込まれるべきブロックを1つまたは複数の置換ブロックにそれぞれ置き換えることによって生成され、前記1つまたは複数の刈り込まれたブロックのうちの少なくとも所定の1つにおけるすべてのピクセルは、同じ色値を有する、前記装置。 - 前記同じ色値は、前記複数のブロックのうちの前記少なくとも1つ内の前記ピクセルの色値の平均と等しい、請求項11に記載の装置。
- 前記ピクチャの前記刈り込まれたバージョンは、混合解像度ピクチャである、請求項11に記載の装置。
- 前記1つまたは複数の刈り込まれたブロックは、前記1つまたは複数の置換ブロックのそれぞれよりも少ない、指定された周波数を超える情報を備える、請求項11に記載の装置。
- ビデオシーケンスにおけるピクチャの刈り込まれたバージョンを回復するための装置であって、
前記ピクチャの前記刈り込まれたバージョン内の1つまたは複数の刈り込まれたブロックを識別するための手段と、
前記ピクチャの前記刈り込まれたバージョンを回復するためのメタデータを復号化するための手段であって、前記メタデータは、前記1つまたは複数の刈り込まれたブロックの位置情報を含む、手段と、
前記1つまたは複数の刈り込まれたブロックを復元することにより前記刈り込まれたバージョンを回復するための手段と、
を備え、
前記識別するための手段は、前記ピクチャの前記刈り込まれたバージョン内の前記1つまたは複数の刈り込まれたブロックを識別する識別プロセスを実行し、前記1つまたは複数の刈り込まれたブロックのうちの所定の1つは、指定された周波数よりも大きい前記1つまたは複数の刈り込まれたブロックのうちの前記所定の1つの信号成分のエネルギー量に基づいて、前記識別プロセスによって識別され、
前記メタデータは、前記識別プロセスに関する誤検出ブロックおよび欠損ブロックの位置情報も含む、前記装置。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US40308710P | 2010-09-10 | 2010-09-10 | |
US61/403,087 | 2010-09-10 | ||
PCT/US2011/050920 WO2012033967A1 (en) | 2010-09-10 | 2011-09-09 | Video decoding using block- based mixed - resolution data pruning |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2013541276A JP2013541276A (ja) | 2013-11-07 |
JP2013541276A5 JP2013541276A5 (ja) | 2016-04-07 |
JP6071001B2 true JP6071001B2 (ja) | 2017-02-01 |
Family
ID=44652033
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013528310A Expired - Fee Related JP6071001B2 (ja) | 2010-09-10 | 2011-09-09 | ブロックベースの混合解像度のデータ刈り込みを使用したビデオ復号化 |
JP2013528309A Expired - Fee Related JP6067563B2 (ja) | 2010-09-10 | 2011-09-09 | ブロックに基づいたミクスドレゾリューションのデータプルーニングを使用した映像符号化 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013528309A Expired - Fee Related JP6067563B2 (ja) | 2010-09-10 | 2011-09-09 | ブロックに基づいたミクスドレゾリューションのデータプルーニングを使用した映像符号化 |
Country Status (7)
Country | Link |
---|---|
US (2) | US20130182776A1 (ja) |
EP (2) | EP2614640A1 (ja) |
JP (2) | JP6071001B2 (ja) |
KR (2) | KR101869459B1 (ja) |
CN (2) | CN103210648B (ja) |
BR (1) | BR112013005316A2 (ja) |
WO (2) | WO2012033966A1 (ja) |
Families Citing this family (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101791919B1 (ko) | 2010-01-22 | 2017-11-02 | 톰슨 라이센싱 | 예시-기반의 초 해상도를 이용하여 비디오 압축을 위한 데이터 프루닝 |
CN102823242B (zh) | 2010-01-22 | 2016-08-10 | 汤姆森特许公司 | 基于取样超分辨率视频编码和解码的方法和装置 |
EP2645712A1 (en) * | 2012-03-26 | 2013-10-02 | Siemens Aktiengesellschaft | Image downsampling |
GB2525208B (en) * | 2014-04-15 | 2020-04-08 | Advanced Risc Mach Ltd | Method of and apparatus for generating an encoded frame |
US10115177B2 (en) | 2014-06-27 | 2018-10-30 | Samsung Electronics Co., Ltd. | Online texture compression and decompression in hardware |
US9947071B2 (en) * | 2014-06-27 | 2018-04-17 | Samsung Electronics Co., Ltd. | Texture pipeline with online variable rate dictionary compression |
TWI631835B (zh) | 2014-11-12 | 2018-08-01 | 弗勞恩霍夫爾協會 | 用以解碼媒體信號之解碼器、及用以編碼包含用於主要媒體資料之元資料或控制資料的次要媒體資料之編碼器 |
WO2016133293A1 (ko) * | 2015-02-16 | 2016-08-25 | 삼성전자 주식회사 | 메타데이터 기반 영상 처리 방법 및 장치 |
US10623775B1 (en) * | 2016-11-04 | 2020-04-14 | Twitter, Inc. | End-to-end video and image compression |
WO2018150083A1 (en) * | 2017-02-16 | 2018-08-23 | Nokia Technologies Oy | A method and technical equipment for video processing |
US10860399B2 (en) | 2018-03-15 | 2020-12-08 | Samsung Display Co., Ltd. | Permutation based stress profile compression |
US10713997B2 (en) * | 2018-03-23 | 2020-07-14 | Valve Corporation | Controlling image display via mapping of pixel values to pixels |
US10776957B2 (en) | 2018-10-02 | 2020-09-15 | Samsung Electronics Co., Ltd. | Online image compression in hardware |
US10803791B2 (en) | 2018-10-31 | 2020-10-13 | Samsung Display Co., Ltd. | Burrows-wheeler based stress profile compression |
US11308873B2 (en) | 2019-05-23 | 2022-04-19 | Samsung Display Co., Ltd. | Redundancy assisted noise control for accumulated iterative compression error |
US11432009B2 (en) * | 2019-07-02 | 2022-08-30 | Intel Corporation | Techniques for encoding and decoding immersive video |
US11477429B2 (en) | 2019-07-05 | 2022-10-18 | Electronics And Telecommunications Research Institute | Method for processing immersive video and method for producing immersive video |
US11245931B2 (en) | 2019-09-11 | 2022-02-08 | Samsung Display Co., Ltd. | System and method for RGBG conversion |
US20220201307A1 (en) | 2020-12-23 | 2022-06-23 | Tencent America LLC | Method and apparatus for video coding |
Family Cites Families (22)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5446806A (en) * | 1993-11-15 | 1995-08-29 | National Semiconductor Corporation | Quadtree-structured Walsh transform video/image coding |
DE69815251T2 (de) * | 1997-04-02 | 2004-04-29 | Koninklijke Philips Electronics N.V. | Bildbearbeitungssystem und -verfahren |
CN1133327C (zh) * | 1997-12-23 | 2003-12-31 | 汤姆森特许公司 | 低噪声编码解码装置和方法 |
US7623706B1 (en) * | 2000-09-29 | 2009-11-24 | Hewlett-Packard Development Company, L.P. | Reduction of chromatic bleeding artifacts in images containing subsampled chrominance values |
US7379496B2 (en) * | 2002-09-04 | 2008-05-27 | Microsoft Corporation | Multi-resolution video coding and decoding |
JP3759932B2 (ja) * | 2003-01-15 | 2006-03-29 | ティーオーエー株式会社 | 画像圧縮方法及び伸張方法 |
JP3944738B2 (ja) * | 2003-03-18 | 2007-07-18 | ソニー株式会社 | 画像処理装置および方法、記録媒体、並びにプログラム |
JP4205008B2 (ja) * | 2004-04-08 | 2009-01-07 | 三菱電機株式会社 | 画像データ通信方法 |
JP2006203744A (ja) * | 2005-01-24 | 2006-08-03 | Victor Co Of Japan Ltd | 静止画生成装置及び静止画生成方法 |
WO2006110890A2 (en) * | 2005-04-08 | 2006-10-19 | Sarnoff Corporation | Macro-block based mixed resolution video compression system |
AU2006201210A1 (en) * | 2006-03-23 | 2007-10-11 | Canon Information Systems Research Australia Pty Ltd | Motion characterisation |
EP1926321A1 (en) * | 2006-11-27 | 2008-05-28 | Matsushita Electric Industrial Co., Ltd. | Hybrid texture representation |
KR101381600B1 (ko) * | 2006-12-20 | 2014-04-04 | 삼성전자주식회사 | 텍스처 합성을 이용한 영상의 부호화, 복호화 방법 및 장치 |
JP4829836B2 (ja) * | 2007-04-26 | 2011-12-07 | キヤノン株式会社 | 画像符号化装置、画像符号化装置の制御方法、コンピュータプログラム、復号装置、及びコンピュータ可読記憶媒体 |
CN101681499B (zh) * | 2007-06-14 | 2013-04-24 | 汤姆逊许可证公司 | 修改经编码的比特流 |
US8081842B2 (en) * | 2007-09-07 | 2011-12-20 | Microsoft Corporation | Image resizing for web-based image search |
US8204325B2 (en) * | 2008-01-18 | 2012-06-19 | Sharp Laboratories Of America, Inc. | Systems and methods for texture synthesis for video coding with side information |
US8189933B2 (en) * | 2008-03-31 | 2012-05-29 | Microsoft Corporation | Classifying and controlling encoding quality for textured, dark smooth and smooth video content |
JP2012503416A (ja) * | 2008-09-18 | 2012-02-02 | トムソン ライセンシング | ビデオ画像の刈り取り方法及び装置 |
KR20110065997A (ko) * | 2009-12-10 | 2011-06-16 | 삼성전자주식회사 | 영상처리장치 및 영상처리방법 |
JP5457853B2 (ja) * | 2010-01-20 | 2014-04-02 | キヤノン株式会社 | 画像符号化装置、画像符号化方法、プログラム及び記憶媒体 |
US20110210960A1 (en) * | 2010-02-26 | 2011-09-01 | Google Inc. | Hierarchical blurring of texture maps |
-
2011
- 2011-09-09 US US13/821,270 patent/US20130182776A1/en not_active Abandoned
- 2011-09-09 KR KR1020137005893A patent/KR101869459B1/ko not_active Application Discontinuation
- 2011-09-09 JP JP2013528310A patent/JP6071001B2/ja not_active Expired - Fee Related
- 2011-09-09 CN CN201180053976.XA patent/CN103210648B/zh not_active Expired - Fee Related
- 2011-09-09 JP JP2013528309A patent/JP6067563B2/ja not_active Expired - Fee Related
- 2011-09-09 WO PCT/US2011/050919 patent/WO2012033966A1/en active Application Filing
- 2011-09-09 KR KR1020137009098A patent/KR101885633B1/ko active IP Right Grant
- 2011-09-09 BR BR112013005316A patent/BR112013005316A2/pt not_active Application Discontinuation
- 2011-09-09 EP EP11757521.7A patent/EP2614640A1/en not_active Withdrawn
- 2011-09-09 WO PCT/US2011/050920 patent/WO2012033967A1/en active Application Filing
- 2011-09-09 EP EP11758317.9A patent/EP2614646A1/en not_active Withdrawn
- 2011-09-09 CN CN201180043595.3A patent/CN103098468B/zh not_active Expired - Fee Related
- 2011-09-09 US US13/821,083 patent/US20130170558A1/en not_active Abandoned
Also Published As
Publication number | Publication date |
---|---|
KR20130139261A (ko) | 2013-12-20 |
EP2614640A1 (en) | 2013-07-17 |
WO2012033967A1 (en) | 2012-03-15 |
BR112013005316A2 (pt) | 2016-08-16 |
CN103210648B (zh) | 2017-06-09 |
WO2012033966A1 (en) | 2012-03-15 |
CN103210648A (zh) | 2013-07-17 |
CN103098468A (zh) | 2013-05-08 |
JP6067563B2 (ja) | 2017-01-25 |
CN103098468B (zh) | 2017-02-15 |
KR101869459B1 (ko) | 2018-06-20 |
KR101885633B1 (ko) | 2018-08-06 |
JP2013541276A (ja) | 2013-11-07 |
EP2614646A1 (en) | 2013-07-17 |
US20130170558A1 (en) | 2013-07-04 |
US20130182776A1 (en) | 2013-07-18 |
KR20130139238A (ko) | 2013-12-20 |
JP2013539934A (ja) | 2013-10-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6071001B2 (ja) | ブロックベースの混合解像度のデータ刈り込みを使用したビデオ復号化 | |
JP2013541276A5 (ja) | ||
CN113039798B (zh) | 解码设备实现的译码方法及解码器 | |
US9338477B2 (en) | Recovering a pruned version of a picture in a video sequence for example-based data pruning using intra-frame patch similarity | |
KR101855542B1 (ko) | 예제 기반 데이터 프루닝을 이용한 비디오 부호화 | |
KR101878515B1 (ko) | 움직임 보상된 샘플 기반 초해상도를 이용한 비디오 인코딩 | |
CN113196769A (zh) | 对与运动信息预测子有关的信息进行编码和解码 | |
CN115209161B (zh) | 视频译码方法、解码器、解码设备、存储介质 | |
WO2020058433A1 (en) | Motion vector predictor index coding for video coding | |
CN118368415A (zh) | 去块效应滤波自适应的编码器、解码器及对应方法 | |
WO2012123321A1 (en) | Method for reconstructing and coding an image block | |
CN117640928A (zh) | 用于指示条带的图像分割信息的解码器及对应方法 | |
WO2023123398A1 (zh) | 滤波方法、滤波装置以及电子设备 | |
CN112868231A (zh) | 视频编码和解码 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140909 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20140909 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20151030 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20151117 |
|
A524 | Written submission of copy of amendment under section 19 (pct) |
Free format text: JAPANESE INTERMEDIATE CODE: A524 Effective date: 20160217 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20160419 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20160719 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20160920 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20161019 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20161122 |
|
RD03 | Notification of appointment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7423 Effective date: 20161125 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20161128 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20161221 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6071001 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
R371 | Transfer withdrawn |
Free format text: JAPANESE INTERMEDIATE CODE: R371 |
|
R371 | Transfer withdrawn |
Free format text: JAPANESE INTERMEDIATE CODE: R371 |
|
S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
LAPS | Cancellation because of no payment of annual fees | ||
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |