JP2009510934A - ウェーブレット変換マルチメディア符号化における補間技術 - Google Patents
ウェーブレット変換マルチメディア符号化における補間技術 Download PDFInfo
- Publication number
- JP2009510934A JP2009510934A JP2008533636A JP2008533636A JP2009510934A JP 2009510934 A JP2009510934 A JP 2009510934A JP 2008533636 A JP2008533636 A JP 2008533636A JP 2008533636 A JP2008533636 A JP 2008533636A JP 2009510934 A JP2009510934 A JP 2009510934A
- Authority
- JP
- Japan
- Prior art keywords
- frames
- decoded
- wavelet
- low frequency
- information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
- H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/12—Selection from among a plurality of transforms or standards, e.g. selection between discrete cosine transform [DCT] and sub-band transform or selection between H.263 and H.264
- H04N19/122—Selection of transform size, e.g. 8x8 or 2x4x8 DCT; Selection of sub-band transforms of varying structure or type
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/1883—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit relating to sub-band structure, e.g. hierarchical level, directional tree, e.g. low-high [LH], high-low [HL], high-high [HH]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
- H04N19/63—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding using sub-band based transform, e.g. wavelets
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
- H04N19/63—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding using sub-band based transform, e.g. wavelets
- H04N19/635—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding using sub-band based transform, e.g. wavelets characterised by filter definition or implementation details
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
- Detection And Prevention Of Errors In Transmission (AREA)
Abstract
この開示は、ウェーブレット変換符号化方式の中のフレーム補間技術を説明している。フレーム補間は、ウェーブレット変換符号化方式にしたがって符号化された2つの連続低周波フレーム間に1つ以上の補間されたフレームを生成するのに使用され得る。このような補間は、ウェーブレット変換によって符号化されたマルチメディア系列のフレームレートを高めるのに有益であり得る。さらに、この技術は、失われたフレーム(例えば、無線送信中に失われ得るフレーム)を補間するのに使用され得る。
【選択図】 図1
【選択図】 図1
Description
米国特許法第119条のもとでの優先権の主張
本特許出願は、2005年9月27日に出願され、本発明の譲受人に譲渡され、それによって参照によって本明細書に明示的に取り入れられた仮出願第60/721,436号に対して優先権を主張している。
本特許出願は、2005年9月27日に出願され、本発明の譲受人に譲渡され、それによって参照によって本明細書に明示的に取り入れられた仮出願第60/721,436号に対して優先権を主張している。
本開示は、マルチメディアの符号化および復号、より詳しくは、ウェーブレット変換符号化方式に対する復号技術に関する。
多数の種々のマルチメディア符号化技術および標準が、ディジタルのマルチメディア系列(multimedia sequence)を符号化するために確立された。多くの現在の技術は、ブロックに基づく符号化を使用している。ブロックに基づく符号化では、マルチメディア系列のフレームは、ディスクリートなデータブロックに分割され、ブロックは、他のブロックとの差に基づいて符号化される。
動き(motion)に基づくブロック符号化技術は、動きベクトル(motion vector)を使用して、マルチメディアフレームのブロックを、マルチメディア系列中の他のフレームのブロック内の画素に対する動きに基づいて符号化する。動きベクトルは、現在のマルチメディアブロックを符号化するのに使用された異なるフレームのブロックを識別する。このような動きベクトルを使用することによって、マルチメディア系列を伝えるのに必要とされる情報は、符号化された現在のブロックと動きベクトルによって識別される予測ブロックとの間の差を示す差情報を送ることによって低減することができる。
幾つかの空間に基づく符号化技術も、ブロック符号化技術に依存する。とくに、空間に基づく符号化は、所与のフレーム内のブロックを使用して、符号化されるそれぞれのブロックを予測し得る。さらに、離散コサイン変換(discrete cosine transform, DCT)技術は、通常、画素のブロックに対して動作する。DCT技術は、画像およびビデオ圧縮にしばしば使用され、単独で、または他のブロックに基づく符号化技術と共に使用され得る。
ウェーブレット変換符号化は、DCT技術のようなブロックに基づく符号化技術に対する1つの実行可能な代わりとなるもの(alternative)である。ウェーブレット変換符号化は、離散ウェーブレット変換(Discrete Wavelet Transform, DWT)と呼ばれることもある。ウェーブレット変換符号化を使用するビデオまたは画像のマルチメディアの圧縮は、DCT符号化でよく示されるブロッキネスのアーチファクト(blockiness artifacts)(タイリング(tiling)と呼ばれることもある)を取り除くことができる。さらに、とくにピーク信号対雑音比(Peak Signal to Noise Ratio, PSNR)または平均二乗誤差(Mean Squared Error, MSE)のメトリクスを使用して評価されるときは、ウェーブレットに基づくマルチメディア圧縮は、ブロックに基づくDCT圧縮よりも性能が優れていることが多い。さらに、ウェーブレットに基づく符号化を用いて圧縮されたマルチメディアフレームまたは画像の主観的品質(subjective quality)は、同じ圧縮比において、ブロックDCT方法よりも優れているように思われ得る。
この開示は、ウェーブレット変換符号化方式の中のフレーム補間技術を説明している。フレーム補間技術は、ウェーブレット変換符号化方式にしたがって符号化された2つの連続フレームまたは2つの連続低周波フレームの間に、1つ以上の補間されたフレームを生成するのに使用され得る。このような補間は、いわゆるフレームレート アップコンバーション(frame rate up-conversion, FRUC)を提供し、ウェーブレット変換によって符号化されたマルチメディア系列の有効フレームレートを高めるのに有益であり得る。さらに、この技術は、失われたフレーム(例えば、無線送信中に失われ得るフレーム)を補間するのに使用され得る。
この開示の技術は、高周波成分の1つ以上が送信中に失われるときに、そうでなければ失われたであろうフレームを補間するのに非常に有益であり得る。マルチレベルウェーブレット変換符号化が使用されるとき、例えば、幾つかの元のフレームは、1つの低周波成分、幾つかの高周波成分、および動き領域(motion field)として表わされ得る。低周波成分は、高周波成分よりも多くのビットを用いて符号化され、より大きい電力で送信され、受信を確実にすることができる。高周波成分が送信中に失われたまたは損なわれた場合、失われたフレームの補間を使用することができるので、このような高周波成分は、より低い確かさで符号化または送信されてもよい。
幾つかの実施形態において、この開示は、マルチメディア系列の符号化されたフレームに関連するウェーブレット情報を受信することと、マルチメディア系列の符号化されたフレームを復号することと、ウェーブレット情報に基づいて、復号されたフレーム間に1つ以上の追加のフレームを補間することとを含む方法を与える。
幾つかの実施形態において、この開示は、マルチメディア系列の符号化されたフレームに関連するウェーブレット情報を受信する受信機と、マルチメディア系列の符号化されたフレームを復号し、ウェーブレット情報に基づいて、復号されたフレーム間に1つ以上の追加のフレームを補間する復号器とを含む装置を与える。
幾つかの実施形態において、この開示は、ウェーブレット変換符号化方式にしたがってウェーブレット情報によって符号化されたマルチメディア系列のフレームを復号し、ウェーブレット情報に基づいて、復号されたフレーム間に1つ以上の追加のフレームを補間するように構成されたプロセッサを与える。
幾つかの実施形態において、この開示は、マルチメディア系列の符号化されたフレームに関連するウェーブレット情報を受信する手段と、マルチメディア系列の符号化されたフレームを復号する手段と、ウェーブレット情報に基づいて、復号されたフレーム間に1つ以上の追加のフレームを補間する手段とを含む装置を与える。
本明細書に説明された技術は、ハードウェア、ソフトウェア、ファームウェア、またはそれの任意の組合せにおいて実施され得る。ソフトウェアにおいて実施されるときは、ソフトウェアは、ディジタル信号プロセッサ(digital signal processor, DSP)または他のタイプのプロセッサにおいて実行され得る。この技術を実行するソフトウェアは、最初にコンピュータ読み出し可能媒体のような機械読み出し可能媒体に記憶され、プロセッサまたは他の機械にロードされて実行され、本明細書に説明されているように遷移結果(transitional effect)のビデオの符号化または復号を可能にし得る。
したがって、この開示は、命令を含む機械読み出し可能媒体であって、命令は、実行されると、機械に、マルチメディア系列の符号化されたフレームに関連するウェーブレット情報を受信することと、マルチメディア系列の符号化されたフレームを復号することと、ウェーブレット情報に基づいて、復号されたフレーム間に1つ以上の追加のフレームを補間することとをさせる、機械読み出し可能媒体をさらに考える。
1つ以上の実施形態の詳細は、添付の図面および以下の説明に示されている。他の特徴、目的、および長所は、説明および図面から、並びに請求項から明らかになるであろう。
この開示は、ウェーブレット変換符号化方式の中のフレーム補間技術を説明している。ウェーブレット変換符号化は、離散コサイン変換(discrete cosine transform, DCT)技術のようなブロックに基づく符号化技術に代わるものであり、多くの場合に、ブロックに基づくDCT圧縮よりも性能が優れている。ウェーブレットに基づく符号化は、マルチメディア系列の連続フレームを結合して、低周波および高周波のウェーブレット成分(“サブバンドフレーム”と呼ばれることもある)を生成することに関わる。低周波成分および高周波成分は、ウェーブレット変換符号化方式にしたがってマルチメディアフレームを符号化するのに使用することができる低周波および高周波のウェーブレット情報の例である。
とくに、低周波ウェーブレット情報は、符号化されたフレームの粗いまたは低い時間分解能のバージョン(coarse or low temporal resolution version)であり、通常、符号化された2つのフレームの平均画素値として表わされる。高周波ウェーブレット情報は、符号化されたフレームの追加の詳細を与え、通常、符号化されたフレームの画素間の差として表わされる。2つの連続フレームに対するウェーブレットに基づく符号化情報は、低周波ウェーブレット情報、高周波ウェーブレット情報、および2つの連続フレームの画素間の動きを示す動き領域(motion field)を含む。
多くの場合に、ウェーブレット変換符号化プロセスは、複数のレベルで繰り返され、符号化プロセスの各それぞれのレベルにおいて2つの連続低周波サブバンドフレームに対して適用される。マルチレベルウェーブレット変換符号化が使用されるとき、例えば、幾つかの元のフレームは、1つの低周波成分、幾つかの高周波成分、および動き領域として表わされ得る。
この開示にしたがって、フレーム補間は、2つの連続フレームまたは2つの連続低周波フレーム間に1つ以上の追加の補間されたフレームを生成するために、ウェーブレットに基づく復号プロセス中に使用される。補間は、いわゆるフレームレート アップコンバーション(frame rate up-conversion, FRUC)を支援して、ウェーブレット変換によって符号化されたマルチメディア系列の有効フレームレートを高めるのに有益であり得る。さらに、この技術は、失われたフレーム(例えば、無線送信中に失われ得るフレーム)を補間するのに使用され得る。再び言うが、マルチレベルウェーブレット変換符号化が使用されるとき、幾つかの元のフレームは、1つの低周波成分、幾つかの高周波成分、および動き領域として表われされ得る。この場合、この開示の技術は、高周波成分の1つ以上が送信中に失われるときに、そうでなければ失われたであろうフレームを補間するのに非常に有益であり得る。
図1は、この開示にしたがってウェーブレット変換符号化技術を実施し得るビデオ符号化および復号システム10を示すブロック図である。示されているように、システム10はビデオ符号器デバイス2およびビデオ復号器デバイス4を含む。符号化されたマルチメディア系列は、ビデオ符号器デバイス2からビデオ復号器デバイス4に通信チャネル5によって送信され得る。この目的のために、ビデオ符号器デバイス2およびビデオ復号器デバイス4は、送信機12および受信機16をそれぞれ含み、このような通信を助ける。通信は、有線または無線通信であり得る。
例えば、ビデオ符号器デバイス2は、ビデオの1本以上のチャネルを無線加入者デバイスに放送するのに使用される放送ネットワークデバイスの一部を形成し得る。この場合に、ビデオ符号器デバイス2は、符号化されたデータを幾つかのビデオ復号器デバイス(すなわち、放送サービスの多くの加入者)に送信し得る。しかしながら、単純化のために、1つのビデオ復号器デバイス4が図1に示されている。ビデオ符号器デバイス2およびビデオ復号器デバイス4は、1つ以上のプロセッサ、ディジタル信号プロセッサ、特定用途向け集積回路(application specific integrated circuits, ASIC)、フィールド プログラマブル ゲート アレイ(field programmable gate arrays, FPGA)、ディスクリートロジック、ソフトウェア、ハードウェア、ファームウェア、またはその任意の組合せとして実施され得る。
ビデオ符号器デバイス2の例は、符号化されたビデオデータを放送するのに使用される任意のインフラストラクチャ ノードまたは無線基地局を含み得る。他方で、ビデオ復号器デバイス4は、符号化されたビデオを受信するユーザデバイスを含み得る。一例として、ビデオ復号器デバイス4は、ディジタルテレビジョン、無線通信デバイス、ポータブル ディジタル アシスタント(portable digital assistant, PDA)、ラップトップ コンピュータ、またはデスクトップ コンピュータ、ディジタル音楽およびビデオデバイス、例えば、商標“iPod”のもとで販売されているもの、あるいは無線電話(radiotelephone)、例えば、セルラ、衛星、または地上波に基づく無線電話の一部として実施され得る。他の例において、ビデオ符号器デバイス2およびビデオ復号器デバイス4の両者は、テレビ電話(video telephony)、等によってこのようなデバイス間でビデオデータを通信するユーザデバイスを含み得る。
システム10において示されている構成要素は、本明細書に説明されている技術を実施するのに適用可能なものの例であるが、符号器デバイス2および復号器デバイス4は、所望であれば、多くの他の構成要素を含み得る。さらに、この開示の技術は、システム10または放送システムのようなシステムにおいて使用するように必ずしも限定されているわけではない。この技術は、ウェーブレット変換符号化技術がマルチメディア系列を符号化するのに使用される任意のビデオ符号化環境における適用を見付け得る。
図1に示されているように、ビデオ符号器デバイス2はウェーブレット変換コーデック(CODEC)14を含み、これはマルチメディア系列のウェーブレット変換符号化を行う。マルチメディア系列は、最初にメモリ位置(memory location)に記憶され得る。記憶位置は、単純化のために図1には示されていない。このようなメモリは、ビデオ符号器デバイス2の一部であるか、またはビデオ符号器デバイス2にマルチメディア系列を与える外部メモリであり得る。ウェーブレット変換コーデック14によって符号化されるマルチメディア系列は、放送として符号化され送信される生の実時間のビデオまたはビデオおよびオーディオの系列を含むか、あるいは放送としてまたはオンデマンドで符号化され送信される予め記録され記憶されたビデオまたはビデオおよびオーディオの系列を含み得る。
ウェーブレット変換コーデック14は、マルチメディア系列のフレームに対して1つ以上のレベルのウェーブレット変換符号化を実施し得る。とくに、ウェーブレット変換コーデック14は、マルチメディア系列の連続フレームを結合して、低周波成分および高周波成分(サブバンドフレーム)を生成する。低周波成分(低周波サブバンドフレーム)は、符号化されたフレームの粗いまたは低い時間分解能のバージョンであり、通常、符号化された2つの連続フレームの平均画素値として表わされる。高周波成分(高周波サブバンドフレーム)は、符号化されたフレームの追加の詳細を与え、通常、符号化された2つの連続フレームの画素間の差として表わされる。ウェーブレット変換コーデック14は、低周波成分、高周波成分、および2つの連続フレームの画素間の動きを示す動き領域を生成する。さらに、幾つかの場合において、ウェーブレット変換コーデック14は、複数のレベルでウェーブレット符号化プロセスを繰り返し、符号化プロセスの各それぞれのレベルにおいて、2つの連続低周波サブバンドフレームに対してこのプロセスを適用する。マルチレベルウェーブレット変換符号化が使用されるとき、例えば、幾つかの元のフレームは、1つの低周波成分、幾つかの高周波成分、および動き領域として表わされ得る。
ウェーブレット変換コーデック14は、高周波成分よりも多くのビットを用いて低周波成分を符号化し得る。さらに、送信機12は、高周波成分よりも大きい電力を用いて低周波成分をチャネル5によって送信し得る。この開示の技術は、高周波成分の1つ以上がこのような送信中に失われるときに、そうでなければ失われたであろうフレームを補間するのに非常に有益であり得る。この開示の技術は、元のフレーム間にフレームを補間し、符号器における元のマルチメディア系列よりも高いフレームレートで、復号器においてマルチメディア出力を得るのにも非常に有益であり得る。
ビデオ復号器デバイス4の受信機16は、ウェーブレット変換符号化方式にしたがってマルチメディア系列のフレームを符号化するウェーブレット情報を受信する。次に、ウェーブレット変換コーデック18は、ウェーブレット情報に基づいてマルチメディア系列のフレームを復号する。とくに、ウェーブレット変換コーデック18は、フレームを復号し、ウェーブレット変換コーデック14によって符号化された元のフレームを再構成する。この開示によると、ウェーブレット変換コーデック18は補間ユニット15を含んでいる。復号プロセス中に、補間ユニット15は、ウェーブレット情報に基づいて、復号されたフレームまたは復号された低周波フレーム間に1つ以上の追加のフレームを補間する。この復号および補間プロセスの追加の詳細は、別途記載する。
図2は、ウェーブレット変換符号化の概念を示す概念図である。このようなウェーブレットに基づく符号化は、符号化側ではウェーブレット変換コーデック14によって、復号側ではウェーブレットに基づく変換コーデック18によって実行され得る。より具体的には、図2は、3段階の動き補償時間フィルタリング(motion compensated temporal filtering, MCTF)20を示しており、これは、オクターブに基づく4つの帯域の分解を生成する。プロセスは、ウェーブレットに基づく符号化において一般的であるハーフィルタ(Harr filter)、等を使用し得る。
図2の説明(notation)は次の通りである。フレームt−1、t−2、t−3、t−4、t−5、t−6、t−7、およびt−8は、符号化されたビデオ系列の時間的に隣り合うフレーム(temporally adjacent frame)を表わしている。分解のこの第1のレベルにおけるフレーム間の動きについて、動き領域は図2に示されていない。フレームt−L1およびt−H1は、フレームt−1およびt−2のウェーブレットに基づく符号化に関連する低周波成分および高周波成分を表わす。フレームt−L2およびt−H2は、フレームt−3およびt−4のウェーブレットに基づく符号化に関連する低周波成分および高周波成分を表わす。フレームt−L3およびt−H3は、フレームt−5およびt−6のウェーブレットに基づく符号化に関連する低周波成分および高周波成分を表わす。フレームt−L4およびt−H4は、フレームt−7およびt−8のウェーブレットに基づく符号化に関連する低周波成分および高周波成分を表わす。
符号化の第2のレベルにおいて、フレームt−LL1およびt−LH1は、サブバンドフレームt−L1およびt−L2のウェーブレットに基づく符号化に関連する低周波成分および高周波成分を表わす。ラベル“mf2”は、フレームt−L1とt−L2との間の動き領域を示す。フレームt−LL2およびt−LH2は、サブバンドフレームt−L3およびt−L4のウェーブレットに基づく符号化に関連する低周波成分および高周波成分を表わす。ラベル“mf3”は、フレームt−L3とt−L4との間の動き領域を示す。
符号化フレームの第3のレベルにおいて、t−LLL1およびt−LLH1は、サブバンドフレームt−LL1およびt−LL2のウェーブレットに基づく符号化に関連する低周波成分および高周波成分を表わす。ラベル“mf1”は、フレームt−LL1とt−LL2との間の動き領域を示す。
図2に示されている3段階のMCTF20では、フレームt−1ないしt−8の符号化プロセスにおいて、8個の時間サブバンドフレーム(temporal sub-band frame)、すなわち、1つのt−LLLフレーム、1つのt−LLHフレーム、2つのt−LHフレーム、および4つのt−Hフレームが生成され送信される。7個の動き領域、すなわち、t−LL1とt−LL2との間の動き領域mf1、t−L1とt−L2との間の動き領域mf2、t−L3とt−L4との間の動き領域mf3、第1のレベルの分解における4つの他の動き領域(これらは単純化のためにラベルを付けられていない)がある。したがって、3段階のウェーブレット符号化を用いてフレームt−1ないしt−8を符号化するために、ウェーブレット情報は、1つの低周波成分と7つの異なる高周波成分とを含む。
なお、L[m,n]およびH[m,n]は、時間の(temporal)低周波および高周波のフレームであり、A[m,n]およびB[m,n]は、第1および第2のフレームであり、(dmdn)は、動きベクトルである。
動き情報は、MCTFにおいて重要な役割を果たす。時間フィルタリング(temporal filtering)は、動きの軌跡(motion trajectory)に沿って行われる。MCTF中に符号器によって使用される動き情報は、復号器において必要とされる。
この開示にしたがう補間は、異なるレベルにおける動き領域にわたる冗長を利用している。例えば、mf1は、mf2の情報も含んでいる。このような冗長は、符号器支援のフレームレート アップコンバージョン(encoder assisted frame rate up conversion, EA-FRUC)に良いシナリオを与える。とくに、少なくとも1つの動き領域は、このような補間技術を使用して、別の動き領域から導き出すことができる。
図3は、この開示にしたがってウェーブレット変換復号技術を示すフローチャートを示している。図3に示されているように、受信機16は、マルチメディア系列の符号化されたフレームに関連するウェーブレット情報を受信する(31)。ウェーブレット情報は、例えば、マルチメディア系列のフレームを符号化する情報であり、低周波ウェーブレット情報、高周波ウェーブレット情報、および動き情報を含み得る。既に記載したように、低周波ウェーブレット情報は、1つ以上の低周波サブバンドフレームを含み、高周波ウェーブレット情報よりも多くのビットおよび大きいエネルギを使用して送られ、低周波ウェーブレット情報の送信を保証し得る。
高周波ウェーブレット情報も、サブバンドフレーム、すなわち、1つ以上の高周波サブバンドフレームを含み得る。高周波情報が比較的に重要でない(less essential)とき、高周波ウェーブレット情報は、低周波ウェーブレット情報よりも少ないビットおよび/または少ないエネルギを用いて送られてもよく、補間が、1つ以上の欠落した(missing)高周波サブバンドフレームに対処することができる。動き情報は、2つの連続低周波フレームおよび/またはサブバンドフレーム間の動きを示す動き領域を含み得る。
ウェーブレット情報が受信されると(31)、ウェーブレット変換コーデック18はマルチメディア系列の符号化されたフレームを復号する(32)。とくに、(図2を参照すると)受信機16は、t−LLL1、t−H1、t−LH1、t−H2、t−LLH1、t−H3、t−LH2、t−H4、および動き領域を受信し得る。ウェーブレット変換コーデック18は、t−LLL1およびt−LLH1に基づいてt−LL1およびt−LL2を生成し、t−LL1およびt−LH1に基づいてt−L1およびt−L2を生成し、t−LL2およびt−LH2に基づいてt−L3およびt−L4を生成し得る。ウェーブレット変換コーデック18は、さらに、t−L1およびt−H1に基づいてt−1およびt−2を生成し、t−L2およびt−H2に基づいてt−3およびt−4を生成し、t−L3およびt−H3に基づいてt−5およびt−6を生成し、t−L4およびt−H4に基づいてt−7およびt−8を生成し得る。
次に、ウェーブレット変換コーデック18の補間ユニット15は、ウェーブレット情報に基づいて、復号されたフレーム間に1つ以上の追加のフレームを補間する(33)。この補間は、1つ以上の欠落したフレームを生成するか、または追加のフレームを取り入れて、復号されたマルチメディア系列における有効フレームレートを高めるために行われ得る。例えば、t−H1、t−LH1、またはt−H2の何れも受信されなかったときは、t−LL1とt−LL2との間の補間を使用して、t−2、t−3、およびt−4を再構成することができる。その代わりに、補間は、例えば、t−1とt−2との間、t−2とt−3との間、t−3とt−4との間、等に追加のフレームを生成するのに使用されることができる。
一般に、補間ユニット15は、2つの復号された低周波フレームと、2つの復号された低周波フレーム間の動きを表わす動きの軌跡(motion trajectory)とに基づいて、1つ以上の低周波フレームを補間し得る。幾つかの場合において、1つ以上の追加のフレームが、2つの時間的に隣り合う復号されたフレーム間に補間される。このように、任意の数のフレームが補間され得る。補間プロセスにおいて、1つ以上の追加のフレームに対する画素値は、2つの時間的に隣り合う復号されたフレームの画素間の動きの軌跡に基づいて生成される。動き領域において具体化される動き情報は、2つの時間的に隣り合う復号されたフレームの画素間の動きの軌跡を与える。動きの軌跡は、通常は、2つの時間的に隣り合う復号されたフレーム間において、線形であるが、この開示は線形補間に必ずしも限定されず、非線形補間にも拡張され得る。
補間は、時間的に隣り合う復号されたフレームの復号された画素に基づいて、補間されたフレームの全画素に対して行われ得る。言い換えると、補間は、2つの時間的に隣り合う復号されたフレームの復号された画素と、2つの時間的に隣り合う復号されたフレームの復号された画素間の動きの軌跡とに基づいて、1つ以上の追加のフレームの全画素を補間することを含み得る。
図4は、2つの低周波フレーム間に1つのフレームを補間することを含むウェーブレット変換復号を示す概念図である。この例では、図示されているように、低周波フレームはt−LL1およびt−LL2であり、これらはt−LLL1およびt−LLH1から生成することができる。動き領域“mf1”において具体化される動き情報を使用して、フレームt−LL2の画素45とフレームt−LL1の対応する画素46との間の線形の動きの軌跡48を定義する。この場合に、補間されたフレーム42のそのそれぞれの画素の補間は、動きの軌跡48に沿った画素44である。単純化のために、図4は、フレーム42の1つの画素(画素44)の補間を示している。しかしながら、実際には、フレーム42の全画素は、復号されたフレームt−LL1およびt−LL2内の対応する画素と、そのようなフレーム間の動きの軌跡とに基づいて、同様のやり方で補間され得る。
幾つかの場合において、幾つかのフレームが、復号されたフレーム、すなわち、2つ以上のフレーム間の動きの軌跡に沿って補間され得る。図5は、2つの低周波フレーム間に3つのフレームを補間することを含むウェーブレット変換復号を示す概念図である。所望であれば、追加のフレームをさらに補間することができる。
図5の例には、低周波フレームt−LL1およびt−LL2が示されており、これらはt−LLL1およびt−LLH1から生成される。動き領域“mf1”において具体化される動き情報は、フレームt−LL2の画素55とフレームt−LL1の対応する画素56との間の線形の動きの軌跡58を定義するのに使用される。この場合に、補間されたフレーム52A、52B、および52Cに対するそのそれぞれの画素の補間により、補間された画素54A、54B、および54Cがそれぞれ生成され、これらの全ては動きの軌跡58に沿っている。図4のように、図5は、フレームごとに1つのみの画素(フレーム52A、52B、および52Cに対して画素54A、54B、および54C)を補間することを示している。しかしながら、ここでも、フレーム52A、52B、および52Cの全ての画素は、復号されたフレームt−LL1およびt−LL2内の対応する画素と、このようなフレーム間の異なる画素によって定義される動きの軌跡とに基づいて、同様のやり方で補間されることができる。
図6は、この開示にしたがってウェーブレット変換符号化技術を実施し得るビデオ符号化および復号システムを示す別のブロック図である。図6に示されているように、システム60は、ビデオ符号器デバイス62およびビデオ復号器デバイス64を含んでいる。符号化されたマルチメディア系列は、ビデオ符号器デバイス62からビデオ復号器デバイス64に通信チャネル65によって送信される。通信チャネル65は、有線または無線であり得る。
ビデオ符号器デバイス62は、ウェーブレット変換符号化モジュール74を含み、これは、マルチメディア系列のウェーブレット変換符号化を行う。とくに、ウェーブレット変換符号化モジュール74は、例えば、マルチメディア系列の連続フレームを結合して、低周波および高周波成分(サブバンドフレーム)を生成することと、連続フレームの画素間の動きを示す動き領域とによって、マルチメディア系列のフレームに対するウェーブレット変換符号化の1つ以上のレベルを実施し得る。さらに、ウェーブレット変換符号化モジュール74は、複数のレベルにおいてウェーブレット符号化プロセスを繰り返し、符号化プロセスの各それぞれのレベルにおいて、2つの連続の低周波サブバンドフレームに対してこのプロセスを適用し得る。送信モジュール72は、符号化されたウェーブレット情報、例えば、1つ以上の低周波成分、1つ以上の高周波成分、および1つ以上の動き領域を、ビデオ復号デバイス64に送信する。ウェーブレット変換符号化モジュール74は、ウェーブレット変換符号化方式にしたがって符号化を行う符号器を含み得る。送信モジュール72は、情報を送信する送信機、または情報の送信および受信の両者を行うトランシーバを含み得る。
受信モジュール76は、ウェーブレット変換符号化方式にしたがってマルチメディア系列のフレームを符号化するのに使用されたウェーブレット情報を受信する。次に、ウェーブレット変換復号モジュール78は、ウェーブレット情報に基づいてマルチメディア系列のフレームを復号する。とくに、ウェーブレット変換復号モジュール78は、フレームを復号して、ウェーブレット変換符号化モジュール74によって符号化された元のフレームを再構成する。この開示によると、ウェーブレット変換復号モジュール78は、補間モジュール75を含む。したがって、復号プロセス中に、補間モジュール75は、ウェーブレット情報に基づいて、復号されたフレーム間に1つ以上の追加のフレームを補間する。この補間は、追加のフレームを加えて、復号されたビデオにおけるフレームレートを高めるか、またはウェーブレット情報の送信中に失われた1つ以上のフレームを補間し得る。ウェーブレット変換復号モジュール78は、ウェーブレット変換符号化方式にしたがって復号を行い、さらに、これに関連して補間モジュール75を介して補間技術を実施する復号器を含み得る。受信モジュール76は、情報を受信する受信機、または情報の送信および受信の両者を行うトランシーバを含み得る。
この開示にしたがって、送信手段は、送信機12(図1)または送信モジュール72(図6)を含み得る。同様に、受信手段は、受信機16(図1)または受信モジュール76(図6)を含み得る。ウェーブレット変換符号化手段は、ウェーブレット変換コーデック14(図1)または変換符号化モジュール74(図6)を含み得る。ウェーブレット変換復号手段は、ウェーブレット変換コーデック18(図1)または変換復号モジュール78(図6)を含み得る。補間手段は、補間ユニット15(図1)または補間モジュール75(図6)を含み得る。
多くの実施形態は、ウェーブレット変換符号化に関連してフレームを補間することについて説明されている。本明細書に説明されている技術は、ハードウェア、ソフトウェア、ファームウェア、またはその任意の組合せにおいて実施され得る。ソフトウェアにおいて実施されるときは、この技術は、命令を収めているプログラムコードを含むコンピュータ読み出し可能媒体(または他の機械読み出し可能媒体)によって部分的に実現され得る。命令は、実行されると、本明細書に説明されている技術の1つ以上を行う。この場合に、コンピュータ読み出し可能媒体は、ランダム アクセス メモリ(random access memory, RAM)、例えば、同期ダイナミック ランダム アクセス メモリ(synchronous dynamic random access memory, SDRAM)、読み出し専用メモリ(read-only memory, ROM)、不揮発性ランダム アクセス メモリ(non-volatile random access memory, NVRAM)、電気的に消去可能なプログラム可能な読み出し専用メモリ(electrically erasable programmable read-only memory, EEPROM)、フラッシュメモリ、磁気または光データ記憶媒体、等を含み得る。
命令は、1つ以上のプロセッサまたは他の機械、例えば、1つ以上のディジタル信号プロセッサ(digital signal processor, DSP)、汎用マイクロプロセッサ、特定用途向け集積回路(application specific integrated circuit, ASIC)、フィールド プログラマブル ゲート アレイ(field programmable gate array, FPGA)、または他の同等の集積またはディスクリートロジック回路によって実行され得る。通常、命令を実行する機械は、装置を含み得る。幾つかの実施形態において、本明細書に説明されている機能は、符号化および復号のために構成された専用ソフトウェアモジュールまたはハードウェアユニット内に備えられるか、または結合されたビデオ符号器−復号器(encoder-decoder, CODEC)に組み込まれ得る。
それにもかかわらず、本発明の請求項の範囲から逸脱することなく、説明された技術に対して、種々の変更が行われ得る。したがって、上述の特定の実施形態および他の実施形態が、請求項の範囲内である。
5・・・通信チャネル、10,60・・・ビデオ符号化および復号システム、20・・・動き補償時間フィルタリング(MCTF)、42,52・・・フレーム、44,45,46,54,55,56・・・画素、48,58・・・動きの軌跡。
Claims (29)
- マルチメディア系列の符号化されたフレームに関連するウェーブレット情報を受信することと、
マルチメディア系列の符号化されたフレームを復号することと、
ウェーブレット情報に基づいて、復号されたフレーム間に1つ以上の追加のフレームを補間することとを含む方法。 - ウェーブレット情報は、低周波ウェーブレット情報、高周波ウェーブレット情報、および動き情報を含む請求項1記載の方法。
- 補間することは、2つの復号された低周波フレームと、2つの復号された低周波フレーム間の動きを表わす動きの軌跡とに基づいて、1つ以上の低周波フレームを補間することを含む請求項1記載の方法。
- 2つの時間的に隣り合う復号されたフレーム間に2つ以上の追加のフレームを補間することをさらに含む請求項1記載の方法。
- ウェーブレット情報は、ウェーブレット変換符号化方式にしたがってマルチメディア系列の符号化されたフレームを符号化するために使用される請求項1記載の方法。
- 補間することは、2つの時間的に隣り合う復号されたフレームの画素間の動きの軌跡に基づいて、1つ以上の追加のフレームに対する画素値を定義することを含む請求項1記載の方法。
- 動きの軌跡は、2つの時間的に隣り合う復号されたフレーム間で線形である請求項6記載の方法。
- 低周波ウェーブレット情報は、高周波ウェーブレット情報と異なるビットレートで符号化される請求項2記載の方法。
- 低周波ウェーブレット情報は、高周波ウェーブレット情報と異なる電力レベルで送信される請求項2記載の方法。
- 補間することは、2つの時間的に隣り合う復号されたフレームの復号された画素と、2つの時間的に隣り合う復号されたフレームの復号された画素間の動きの軌跡とに基づいて、1つ以上の追加のフレームの全画素を補間することを含む請求項1記載の方法。
- マルチメディア系列の符号化されたフレームに関連するウェーブレット情報を受信する受信機と、
マルチメディア系列の符号化されたフレームを復号し、ウェーブレット情報に基づいて、復号されたフレーム間に1つ以上の追加のフレームを補間する復号器とを含む装置。 - ウェーブレット情報は、低周波ウェーブレット情報、高周波ウェーブレット情報、および動き情報を含む請求項11記載の装置。
- 復号器は、2つの復号された低周波フレームと、2つの復号された低周波フレーム間の動きを表わす動きの軌跡とに基づいて、1つ以上の低周波フレームを補間する請求項11記載の装置。
- 復号器は、2つの時間的に隣り合う復号されたフレーム間に2つ以上の追加のフレームを補間する請求項11記載の装置。
- ウェーブレット情報は、ウェーブレット変換符号化方式にしたがってマルチメディア系列の符号化されたフレームを符号化するために使用される請求項11記載の装置。
- 復号器は、2つの時間的に隣り合う復号されたフレームの画素間の動きの軌跡に基づいて1つ以上の追加のフレームに対する画素値を定義することによって、1つ以上の追加のフレームを補間する請求項11記載の装置。
- 動きの軌跡は、2つの時間的に隣り合う復号されたフレーム間で線形である請求項16記載の装置。
- 低周波ウェーブレット情報は、高周波ウェーブレット情報と異なるビットレートで符号化される請求項12記載の装置。
- 低周波ウェーブレット情報は、高周波ウェーブレット情報と異なる電力レベルで送信される請求項12記載の装置。
- 復号器は、2つの時間的に隣り合う復号されたフレームの復号された画素と、2つの時間的に隣り合う復号されたフレームの復号された画素間の動きの軌跡とに基づいて、1つ以上の追加のフレームの全画素を補間する請求項11記載の装置。
- 命令を含む機械読み出し可能媒体であって、命令は、実行されると、機械に、
マルチメディア系列の符号化されたフレームに関連するウェーブレット情報を受信することと、
マルチメディア系列の符号化されたフレームを復号することと、
ウェーブレット情報に基づいて、復号されたフレーム間に1つ以上の追加のフレームを補間することとをさせる、機械読み出し可能媒体。 - ウェーブレット情報は、低周波ウェーブレット情報、高周波ウェーブレット情報、および動き情報を含む請求項21記載の機械読み出し可能媒体。
- 機械読み出し可能媒体は、2つの復号された低周波フレームと、2つの復号された低周波フレーム間の動きを表わす動きの軌跡とに基づいて、1つ以上の低周波フレームを補間する請求項21記載の機械読み出し可能媒体。
- 機械読み出し可能媒体は、2つの時間的に隣り合う復号されたフレームの画素間の動きの軌跡に基づいて、1つ以上の追加のフレームに対する画素値を定義することによって、1つ以上の追加のフレームを補間する請求項21記載の機械読み出し可能媒体。
- ウェーブレット変換符号化方式にしたがってウェーブレット情報によって符号化されたマルチメディア系列のフレームを復号し、
ウェーブレット情報に基づいて、復号されたフレーム間に1つ以上の追加のフレームを補間するように構成されているプロセッサ。 - ウェーブレット情報は、低周波ウェーブレット情報、高周波ウェーブレット情報、および動き情報を含む請求項25記載のプロセッサ。
- プロセッサは、2つの復号された低周波フレームと、2つの復号された低周波フレーム間の動きを表わす動きの軌跡とに基づいて、1つ以上の低周波フレームを補間する請求項25記載のプロセッサ。
- プロセッサは、2つの時間的に隣り合う復号されたフレームの画素間の動きの軌跡に基づいて、1つ以上の追加のフレームに対する画素値を定義することによって、1つ以上の追加のフレームを補間する請求項25記載のプロセッサ。
- マルチメディア系列の符号化されたフレームに関連するウェーブレット情報を受信する手段と、
マルチメディア系列の符号化されたフレームを復号する手段と、
ウェーブレット情報に基づいて、復号されたフレーム間に1つ以上の追加のフレームを補間する手段とを含む装置。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US72143605P | 2005-09-27 | 2005-09-27 | |
US11/505,789 US8755440B2 (en) | 2005-09-27 | 2006-08-16 | Interpolation techniques in wavelet transform multimedia coding |
PCT/US2006/037990 WO2007038721A2 (en) | 2005-09-27 | 2006-09-27 | Interpolation techniques in wavelet transform multimedia coding |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2009510934A true JP2009510934A (ja) | 2009-03-12 |
Family
ID=37807873
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008533636A Pending JP2009510934A (ja) | 2005-09-27 | 2006-09-27 | ウェーブレット変換マルチメディア符号化における補間技術 |
Country Status (9)
Country | Link |
---|---|
US (1) | US8755440B2 (ja) |
EP (1) | EP1938614A2 (ja) |
JP (1) | JP2009510934A (ja) |
KR (1) | KR20080066708A (ja) |
CN (1) | CN101313586B (ja) |
AR (1) | AR055187A1 (ja) |
CL (1) | CL2006002555A1 (ja) |
TW (1) | TW200729964A (ja) |
WO (1) | WO2007038721A2 (ja) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102005025095A1 (de) * | 2005-06-01 | 2006-12-07 | Giesecke & Devrient Gmbh | Datenträger und Verfahren zu seiner Herstellung |
US8494049B2 (en) * | 2007-04-09 | 2013-07-23 | Cisco Technology, Inc. | Long term reference frame management with error video feedback for compressed video communication |
US9598011B2 (en) | 2014-01-09 | 2017-03-21 | Northrop Grumman Systems Corporation | Artificial vision system |
MX371127B (es) * | 2014-07-16 | 2020-01-17 | Yamzz Ip Bv | Compresion, descompresion y despliegue de video de nivel múltiple para aplicaciones de 4k y 8k. |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH06319127A (ja) * | 1993-05-06 | 1994-11-15 | Mitsubishi Electric Corp | 映像信号符号化装置 |
JP2005524352A (ja) * | 2002-04-29 | 2005-08-11 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | 複数基準フレームに基づいた動き補償時間的フィルタ化を用いたスケーラブルなウェーブレット・ベースの符号化 |
Family Cites Families (20)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4383272A (en) * | 1981-04-13 | 1983-05-10 | Bell Telephone Laboratories, Incorporated | Video signal interpolation using motion estimation |
US5995539A (en) * | 1993-03-17 | 1999-11-30 | Miller; William J. | Method and apparatus for signal transmission and reception |
US5574747A (en) | 1995-01-04 | 1996-11-12 | Interdigital Technology Corporation | Spread spectrum adaptive power control system and method |
GB2305569B (en) * | 1995-09-21 | 1999-07-21 | Innovision Res Ltd | Motion compensated interpolation |
KR100359821B1 (ko) * | 2000-01-20 | 2002-11-07 | 엘지전자 주식회사 | 움직임 보상 적응형 영상 압축과 복원방법 및 그 장치와디코더 |
US6738523B1 (en) * | 2000-09-14 | 2004-05-18 | Eastman Kodak Company | Parallel inverse discrete wavelet transform |
US6944225B2 (en) * | 2001-07-24 | 2005-09-13 | Sharp Laboratories Of America, Inc. | Resolution-scalable video compression |
JP2003069998A (ja) * | 2001-08-28 | 2003-03-07 | Canon Inc | 画像処理装置及び画像処理方法 |
JP3620836B2 (ja) | 2002-04-25 | 2005-02-16 | アイシン精機株式会社 | 開閉体の動作機構 |
EP1504608A2 (en) | 2002-04-29 | 2005-02-09 | Koninklijke Philips Electronics N.V. | Motion compensated temporal filtering based on multiple reference frames for wavelet coding |
US7515634B2 (en) * | 2002-06-28 | 2009-04-07 | Qualcomm Incorporated | Computationally constrained video encoding |
CN1669327A (zh) | 2002-07-17 | 2005-09-14 | 皇家飞利浦电子股份有限公司 | 视频编码方法和设备 |
AU2003256009A1 (en) | 2002-09-11 | 2004-04-30 | Koninklijke Philips Electronics N.V. | Video coding method and device |
AU2002951574A0 (en) * | 2002-09-20 | 2002-10-03 | Unisearch Limited | Method of signalling motion information for efficient scalable video compression |
EP1554887A1 (en) | 2002-10-16 | 2005-07-20 | Koninklijke Philips Electronics N.V. | Fully scalable 3-d overcomplete wavelet video coding using adaptive motion compensated temporal filtering |
EP1568232A1 (en) * | 2002-11-27 | 2005-08-31 | Koninklijke Philips Electronics N.V. | Video encoding method |
US7321625B2 (en) * | 2002-12-13 | 2008-01-22 | Ntt Docomo, Inc. | Wavelet based multiresolution video representation with spatially scalable motion vectors |
JP2006521039A (ja) * | 2003-02-25 | 2006-09-14 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | オーバコンプリートウェーブレット展開での動き補償時間フィルタリングを使用した3次元ウェーブレットビデオ符号化 |
AU2004302413B2 (en) * | 2003-08-26 | 2008-09-04 | Samsung Electronics Co., Ltd | Scalable video coding method and apparatus using pre-decoder |
KR100586882B1 (ko) * | 2004-04-13 | 2006-06-08 | 삼성전자주식회사 | 모션 스케일러빌리티를 지원하는 코딩 방법 및 장치 |
-
2006
- 2006-08-16 US US11/505,789 patent/US8755440B2/en not_active Expired - Fee Related
- 2006-09-26 CL CL2006002555A patent/CL2006002555A1/es unknown
- 2006-09-27 KR KR1020087010012A patent/KR20080066708A/ko active IP Right Grant
- 2006-09-27 AR ARP060104249A patent/AR055187A1/es not_active Application Discontinuation
- 2006-09-27 JP JP2008533636A patent/JP2009510934A/ja active Pending
- 2006-09-27 WO PCT/US2006/037990 patent/WO2007038721A2/en active Application Filing
- 2006-09-27 TW TW095135795A patent/TW200729964A/zh unknown
- 2006-09-27 EP EP06815752A patent/EP1938614A2/en not_active Withdrawn
- 2006-09-27 CN CN2006800436688A patent/CN101313586B/zh not_active Expired - Fee Related
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH06319127A (ja) * | 1993-05-06 | 1994-11-15 | Mitsubishi Electric Corp | 映像信号符号化装置 |
JP2005524352A (ja) * | 2002-04-29 | 2005-08-11 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | 複数基準フレームに基づいた動き補償時間的フィルタ化を用いたスケーラブルなウェーブレット・ベースの符号化 |
Also Published As
Publication number | Publication date |
---|---|
US20070201755A1 (en) | 2007-08-30 |
WO2007038721A3 (en) | 2007-06-14 |
EP1938614A2 (en) | 2008-07-02 |
CN101313586A (zh) | 2008-11-26 |
WO2007038721A2 (en) | 2007-04-05 |
CN101313586B (zh) | 2010-12-08 |
CL2006002555A1 (es) | 2008-01-04 |
US8755440B2 (en) | 2014-06-17 |
AR055187A1 (es) | 2007-08-08 |
TW200729964A (en) | 2007-08-01 |
KR20080066708A (ko) | 2008-07-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR101183304B1 (ko) | Sdmctf 인코딩된 비디오의 3d 부-대역 디코딩에서의 공간 확장성 | |
US8442108B2 (en) | Adaptive updates in motion-compensated temporal filtering | |
KR101176650B1 (ko) | 3d 부-대역 코딩을 위한 내장형 기본 계층 코덱 | |
US8817872B2 (en) | Method and apparatus for encoding/decoding multi-layer video using weighted prediction | |
US7027512B2 (en) | Spatio-temporal hybrid scalable video coding apparatus using subband decomposition and method | |
KR100703788B1 (ko) | 스무딩 예측을 이용한 다계층 기반의 비디오 인코딩 방법,디코딩 방법, 비디오 인코더 및 비디오 디코더 | |
US20070009039A1 (en) | Video encoding and decoding methods and apparatuses | |
US20060165302A1 (en) | Method of multi-layer based scalable video encoding and decoding and apparatus for the same | |
MX2007000254A (es) | Metodo y aparato para utilizar tecnicas de conversion ascendente de indice de cuadro en codificacion de video que se puede escalar. | |
EP1787478A1 (en) | Encoder-assisted adaptive video frame interpolation | |
JP2007531377A (ja) | 順次走査変換機構を用いた多重記述符号化映像送信 | |
US20030202599A1 (en) | Scalable wavelet based coding using motion compensated temporal filtering based on multiple reference frames | |
US20060062298A1 (en) | Method for encoding and decoding video signals | |
US20030202597A1 (en) | Wavelet based coding using motion compensated filtering based on both single and multiple reference frames | |
JP2007081720A (ja) | 符号化方法 | |
US20110228854A1 (en) | Apparatus and method for encoding/decoding a video signal | |
US20100208797A1 (en) | Distributed video encoder and decoder, and distributed video encoding and decoding method | |
JP2009510934A (ja) | ウェーブレット変換マルチメディア符号化における補間技術 | |
EP1878252A1 (en) | Method and apparatus for encoding/decoding multi-layer video using weighted prediction | |
Maugey et al. | Side information estimation and new symmetric schemes for multi-view distributed video coding | |
JP2006502677A (ja) | 無制約及びリフティング型動き補償時間フィルタ処理のための効率的動きベクトル予測 | |
US20110069763A1 (en) | Scalable video encoding/decoding method and apparatus for increasing image quality of base layer | |
KR20100082700A (ko) | 와이너-지브 부호화 및 복호화 시스템 및 방법 | |
AU2012100852A6 (en) | A two-description video coding method based on Wyner Ziv theory | |
Do et al. | Motion linearity based skip decision for Wyner-Ziv coding |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20101207 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20110426 |