JP2014503134A - 立体画像及びマルチビュー画像の伝送、処理及びレンダリングのためのシステム及び方法 - Google Patents
立体画像及びマルチビュー画像の伝送、処理及びレンダリングのためのシステム及び方法 Download PDFInfo
- Publication number
- JP2014503134A JP2014503134A JP2013518483A JP2013518483A JP2014503134A JP 2014503134 A JP2014503134 A JP 2014503134A JP 2013518483 A JP2013518483 A JP 2013518483A JP 2013518483 A JP2013518483 A JP 2013518483A JP 2014503134 A JP2014503134 A JP 2014503134A
- Authority
- JP
- Japan
- Prior art keywords
- depth map
- bandwidth
- image
- color data
- filter
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/275—Image signal generators from 3D object models, e.g. computer-generated stereoscopic image signals
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T1/00—General purpose image data processing
- G06T1/0021—Image watermarking
- G06T1/0028—Adaptive watermarking, e.g. Human Visual System [HVS]-based watermarking
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N11/00—Colour television systems
- H04N11/02—Colour television systems with bandwidth reduction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/111—Transformation of image signals corresponding to virtual viewpoints, e.g. spatial image interpolation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/139—Format conversion, e.g. of frame-rate or size
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/156—Mixing image signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/161—Encoding, multiplexing or demultiplexing different image signal components
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/194—Transmission of image signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/46—Embedding additional information in the video signal during the compression process
- H04N19/467—Embedding additional information in the video signal during the compression process characterised by the embedded information being invisible, e.g. watermarking
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/59—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2201/00—General purpose image data processing
- G06T2201/005—Image watermarking
- G06T2201/0202—Image watermarking whereby the quality of watermarked images is measured; Measuring quality or performance of watermarking methods; Balancing between quality and robustness
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N2213/00—Details of stereoscopic systems
- H04N2213/003—Aspects relating to the "2D+depth" image format
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Image Processing (AREA)
Abstract
【選択図】図4
Description
本願は、2010年7月7日に出願された米国仮特許出願第61/362,134号の利益を主張し、この米国仮特許出願は引用することによりその全体が本明細書の一部をなすものとする。
前記深度マップにおける深度値のヒストグラムを生成することと、
前記ヒストグラムに対してモーダル解析を実行することと、
により、前記モダリティを特定することを更に含むことができる。本方法は、前記ヒストグラムに対してグレースケールモルフォロジークロージング演算を適用することであって、0.0又は1.0の深度値を除去する、適用することを更に含むことができる。「モダリティ」という用語は、深度値の頻度ヒストグラム等における、値の出現の頻度における主成分を指すように意図されている。こうしたモダリティは、頻度分布(複数の場合もある)の大きい極大値によって示される。0.0又は1.0の深度(Z)値に言及するとき、意図されているものは、正規化された深度マップ又は0.0から1.0の範囲を有する深度マップであり、ここで、0.0は無限大での距離を示し、1.0は任意にカメラに近い点を表し、0.5はカメラシステムの自然収束点を表す。
前記深度マップに対して可逆的な統計的符号化方法を適用することと、
を更に含むことができる。前記深度マップに対して空間デシメーション演算を実行することは、前記深度マップにキュービック削減フィルターを適用することと、繰返しの連続した1オクターブバイキュービック削減を実行することとのうちの少なくとも一方を含むことができる。前記深度マップに対して可逆的な統計的符号化方法を適用することは、
前記深度マップを7ビット/画素表現に変換して、ハフマン符号化方式を用いて統計的に符号化することと、
前記深度マップに対して算術符号化を適用することと、
前記深度マップに対して2次元コードブック符号化方式を適用することと、
のうちの少なくとも1つを更に含むことができる。
帯域幅削減深度マップ及びカラーデータを含む帯域幅削減3D画像を受信するステップと、
前記カラーデータの統計的ドメインを使用するフィルターを適用して前記帯域幅削減深度マップの帯域幅を復元する、適用するステップと、
を含む。前記フィルターは、少なくとも1つのオブジェクト境界を含む前記カラーデータの不連続性を一致させることにより、前記帯域幅削減深度マップにおける不連続性を復元するように構成される。本方法は、深度画像に基づくレンダリング(DIBR)法を適用することであって、前記復元された深度マップ及び前記カラー画像をワープさせて、立体3Dディスプレイ又は自動立体3Dディスプレイに適した少なくとも1つのビューを構築する、適用することを更に含むことができる。
前記カラーデータにオプティカルフロー法を適用するステップと、
前記カラーに対して動き補償及び画像ワーピングを適用して、動き補償画素のテーブルを生成する、適用するステップと、
前記動き補償画素のテーブルから遮られた画素の候補の時間予測及び空間予測のうちの一方を適用するステップと、
前記遮られた画素の候補に対して統計的インペインティング(statistical in-painting)手順を適用するステップと、
前記統計的インペインティング手順から得られた画素をワープさせ、表示するための画像の左眼ビュー及び右眼ビューを得る、ワープさせるステップと、
を更に含むことができる。本方法は、前記深度マップからのディスオクルージョンを分類して、遮られた画素の候補の空間予測に通知する、分類するステップと、
前記深度マップにZ平滑化法を適用して、処理済み深度マップを生成する、適用するステップと、
を更に含むことができる。前記ワープさせるステップは前記処理済み深度マップによって通知される。
Claims (42)
- 3次元(3D)像を送信するコンピューター実装方法であって、
少なくとも1つの3D画像から深度マップ及びカラーデータを抽出するステップと、
前記深度マップの帯域幅を削減して、帯域幅削減深度マップを生成する、削減するステップと、
前記カラーデータ内に前記帯域幅削減深度マップを挿入して、帯域幅削減3D画像を生成する、挿入するステップと、
ディスプレイに送り出すために前記帯域幅削減3D画像を伝送チャネルに送出するステップと、
を含む3次元像を送信するコンピューター実装方法。 - 前記深度マップの帯域幅を削減するステップは、前記カラーデータにおける少なくとも1つのオブジェクト境界に対応する少なくとも1つの不連続性を含む、前記深度マップの少なくとも1つの領域を保持することを含む、請求項1に記載の方法。
- 前記深度マップの帯域幅を削減するステップは、前記深度マップにおける深度値を表す分布におけるモダリティに関連する深度値を除去することを更に含む、請求項1に記載の方法。
- 前記深度マップにおける深度値のヒストグラムを生成することと、
前記ヒストグラムに対してモーダル解析を実行することと、
により、前記モダリティを特定することを更に含む、請求項3に記載の方法。 - 前記ヒストグラムに対してグレースケールモルフォロジークロージング演算を適用することであって、0.0又は1.0の深度値を除去する、適用することを更に含む、請求項4に記載の方法。
- メディアン画像処理フィルターを用いて前記深度マップをフィルタリングすることを更に含む、請求項3に記載の方法。
- 前記メディアン画像処理フィルターは5×5メディアンフィルターである、請求項6に記載の方法。
- 前記深度マップに対して空間デシメーション演算を実行することと、
前記深度マップに対して可逆的な統計的符号化方法を適用することと、
を更に含む、請求項3に記載の方法。 - 前記深度マップに対して空間デシメーション演算を実行するステップは、前記深度マップにキュービック削減フィルターを適用することと、繰返しの連続した1オクターブバイキュービック削減を実行することとのうちの少なくとも一方を含む、請求項8に記載の方法。
- 前記深度マップに対して可逆的な統計的符号化方法を適用するステップは、
前記深度マップを7ビット/画素表現に変換するとともに、ハフマン符号化方式を用いて統計的に符号化することと、
前記深度マップに対して算術符号化を適用することと、
前記深度マップに対して2次元コードブック符号化方式を適用することと、
のうちの少なくとも1つを更に含む、請求項8に記載の方法。 - 前記カラーデータ内に前記帯域幅削減深度マップを挿入するステップは、前記深度マップを透かしとしてカラーデータに追加することを含む、請求項1に記載の方法。
- 3次元(3D)像を受信するコンピューター実装方法であって、
帯域幅削減深度マップ及びカラーデータを含む帯域幅削減3D画像を受信するステップと、
前記カラーデータの統計的ドメインを使用するフィルターを適用して前記帯域幅削減深度マップの帯域幅を復元する、適用するステップと、
を含む、3次元像を受信するコンピューター実装方法。 - 前記フィルターは、少なくとも1つのオブジェクト境界を含む前記カラーデータの不連続性を一致させることにより、前記帯域幅削減深度マップにおける不連続性を復元するように構成される、請求項12に記載の方法。
- 深度画像に基づくレンダリング(DIBR)法を適用するステップであって、前記復元された深度マップ及び前記カラー画像をワープさせて、立体3Dディスプレイ又は自動立体3Dディスプレイに適した少なくとも1つのビューを構築する、適用するステップを更に含む、請求項12に記載の方法。
- 少なくとも1つの前記フィルターはRGBZOフィルターである、請求項12に記載の方法。
- 前記RGBZOフィルターは、第1のドメインとしての前記帯域幅削減深度マップ、第2のドメインとしての前記カラーデータ、及び空間重み付け関数によって提供される2つのラジオシティ重み付け関数を使用する、請求項15に記載の方法。
- 前記帯域幅削減深度マップに対して、第1オクターブのアップスケーリングされた深度マップが生成されるまで、1オクターブバイキュービックアップスケーリング及びそれに続くRGBZOフィルターの適用の反復を繰り返し施すステップを更に含む、請求項15に記載の方法。
- 前記帯域幅削減深度マップに対して、1オクターブバイキュービックアップスケーリング及びそれに続くRGBZOフィルターの適用の反復を繰り返し施すステップは、前記深度マップのエッジ勾配と前記カラーデータのカラーエッジ勾配との差を含む誤差関数を最小化して、前記アップスケーリングされた深度マップの出力を正則化する、請求項17に記載の方法。
- 前記帯域幅削減深度マップに対して、1オクターブバイキュービックアップスケーリング及びそれに続くRGBZOフィルターの適用の反復を繰り返し施すステップの前に、前記帯域幅削減深度マップに対して可逆復号化方法を適用するステップを更に含む、請求項17に記載の方法。
- 前記DIBR法を適用するステップは、
前記カラーデータにオプティカルフロー法を適用するステップと、
前記カラーに対して動き補償及び画像ワーピングを適用して、動き補償画素のテーブルを生成する、適用するステップと、
前記動き補償画素のテーブルから遮られた画素の候補の時間予測及び空間予測のうちの一方を適用するステップと、
前記遮られた画素の候補に対して統計的インペインティング手順を適用するステップと、
前記統計的インペインティング手順から得られた画素をワープさせて、表示するための画像の左眼ビュー及び右眼ビューを得る、ワープさせるステップと、
を更に含む、請求項14に記載の方法。 - 前記深度マップからのディスオクルージョンを分類して、遮られた画素の候補の空間予測に通知する、分類するステップと、
前記深度マップにZ平滑化法を適用して、処理済み深度マップを生成する、適用するステップと、
を更に含む、請求項20に記載の方法。 - 前記ワープさせるステップは、前記処理済み深度マップによって通知される、請求項21に記載の方法。
- 3次元(3D)像を処理するコンピューター実行可能命令を含むコンピューター可読媒体であって、前記命令は、
帯域幅削減深度マップ及びカラーデータを含む帯域幅削減3D画像を受信し、
前記カラーデータの統計的ドメインを使用するフィルターを適用して前記帯域幅削減深度マップの帯域幅を復元する
ように構成されている、3次元像を処理するコンピューター実行可能命令を含むコンピューター可読媒体。 - 前記命令は、
深度画像に基づくレンダリング(DIBR)法を適用して、前記復元された深度マップ及び前記カラー画像をワープさせて、立体3Dディスプレイ又は自動立体3Dディスプレイに適した少なくとも1つのビューを構築する
ように更に構成されている、請求項23に記載のコンピューター可読媒体。 - 少なくとも1つの前記フィルターは、前記カラーデータの統計的ドメインを使用して前記帯域幅削減深度マップの前記帯域幅を復元するように動作可能である、請求項23に記載のコンピューター可読媒体。
- 前記フィルターはRGBZOフィルターである、請求項23に記載のコンピューター可読媒体。
- 前記RGBZOは、第1のドメインとしての前記帯域幅削減深度マップ、第2のドメインとしての前記カラーデータ、及び空間重み付け関数によって提供される2つのラジオシティ重み付け関数を使用する、請求項26に記載のコンピューター可読媒体。
- 前記命令は、
前記帯域幅削減深度マップに対して、第1オクターブのアップスケーリングされた深度マップが生成されるまで、1オクターブバイキュービックアップスケーリング及びそれに続くRGBZOフィルターの適用の反復を繰り返し施す
ように更に構成されている、請求項26に記載のコンピューター可読媒体。 - 前記帯域幅削減深度マップに対して、1オクターブバイキュービックアップスケーリング及びそれに続くRGBZOフィルターの適用の反復を繰り返し施すことは、前記深度マップのエッジ勾配と前記カラーデータのカラーエッジ勾配との差を含む誤差関数を最小化して、前記アップスケーリングされた深度マップの出力を正則化する、請求項28に記載のコンピューター可読媒体。
- 帯域幅削減深度マップを含む少なくとも1つの帯域幅削減画像を受信し復元する受信機であって、
帯域幅削減深度マップ及びカラーデータを含む帯域幅削減3D画像を受信し、
前記カラーデータの統計的ドメインを使用するフィルターを適用して前記帯域幅削減深度マップの帯域幅を復元する
ように構成されている、帯域幅削減深度マップを含む少なくとも1つの帯域幅削減画像を受信し復元する受信機。 - 前記帯域幅削減深度マップの帯域幅を復元することは、少なくとも1つのオブジェクト境界を含む前記カラーデータの不連続性を一致させることにより、前記帯域幅削減深度マップにおける不連続性を復元することに基づく、請求項30に記載の受信機。
- 前記復元された深度マップ及び前記カラー画像をワープさせて、立体3Dディスプレイ又は自動立体3Dディスプレイに適した少なくとも1つのビューを構築する、深度画像に基づくレンダリング(DIBR)モジュールを更に備える、請求項30に記載の受信機。
- 前記フィルターはRGBZOフィルターである、請求項30に記載の受信機。
- 前記RGBZOは、第1のドメインとしての前記深度マップ、第2のドメインとしての前記カラーデータ、及び空間重み付け関数によって提供される2つのラジオシティ重み付け関数を使用する、請求項33に記載の受信機。
- 前記帯域幅削減深度マップに対して、第1オクターブのアップスケーリングされた深度マップが生成されるまで、1オクターブバイキュービックアップスケーリング及びそれに続くRGBZOフィルターの適用の反復を繰り返し施すモジュールを更に含む、請求項33に記載の受信機。
- 前記深度マップに対して、1オクターブバイキュービックアップスケーリング及びそれに続くRGBZOフィルターの適用の反復を繰り返し施すモジュールは、前記深度マップのエッジ勾配と前記カラーデータのカラーエッジ勾配との差を含む誤差関数を最小化して、前記アップスケーリングされた深度マップの出力を正則化する、請求項36に記載の受信機。
- 特定用途向け集積回路(ASIC)を用いて実装されている、請求項30に記載の受信機。
- 3D像を送信し、受信し、レンダリングするシステムであって、
少なくとも1つの3D画像から深度マップ及びカラーデータを抽出し、
前記深度マップの帯域幅を削減して帯域幅削減深度マップを生成し、
前記カラーデータ内に前記帯域幅削減深度マップを挿入して、帯域幅削減3D画像を生成し、
前記帯域幅削減3D画像を伝送チャネルに送出する
送信機と、
前記伝送チャネルから帯域幅削減深度マップ及びカラーデータを含む帯域幅削減3D画像を受信し、
前記カラーデータの統計的ドメインを使用するフィルターを適用して前記帯域幅削減深度マップの帯域幅を復元し、
ディスプレイ上に復元された前記深度マップ及び前記カラーデータをレンダリングする
受信機と、
を具備するシステム。 - 前記深度マップの帯域幅を削減することは、前記カラーデータにおける少なくとも1つのオブジェクト境界に対応する少なくとも1つの不連続性を含む、前記深度マップの少なくとも1つの領域を保持することを含む、請求項38に記載のシステム。
- 前記フィルターは、少なくとも1つのオブジェクト境界を含む前記カラーデータの不連続性を一致させることにより、前記帯域幅削減深度マップにおける不連続性を復元するように構成される、請求項38に記載のシステム。
- 前記カラーデータの統計的ドメインを使用して帯域幅削減深度マップの帯域幅を復元するように構成されている、RGBZOフィルター。
- 第1のドメインとしての前記帯域幅削減深度マップ、第2のドメインとしての前記カラーデータ、及び空間重み付け関数によって提供される2つのラジオシティ重み付け関数を使用する、請求項41に記載のRGBZOフィルター。
Applications Claiming Priority (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US36213410P | 2010-07-07 | 2010-07-07 | |
US61/362,134 | 2010-07-07 | ||
US12/880,426 US8774267B2 (en) | 2010-07-07 | 2010-09-13 | System and method for transmission, processing, and rendering of stereoscopic and multi-view images |
US12/880,426 | 2010-09-13 | ||
PCT/US2011/041404 WO2012005947A2 (en) | 2010-07-07 | 2011-06-22 | System and method for transmission, processing, and rendering of stereoscopic and multi-view images |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015112738A Division JP2015201870A (ja) | 2010-07-07 | 2015-06-03 | 立体画像及びマルチビュー画像の伝送、処理及びレンダリングのためのシステム及び方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2014503134A true JP2014503134A (ja) | 2014-02-06 |
JP6029583B2 JP6029583B2 (ja) | 2016-11-24 |
Family
ID=45438567
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013518483A Expired - Fee Related JP6029583B2 (ja) | 2010-07-07 | 2011-06-22 | 立体画像及びマルチビュー画像の伝送、処理及びレンダリングのためのシステム及び方法 |
JP2015112738A Pending JP2015201870A (ja) | 2010-07-07 | 2015-06-03 | 立体画像及びマルチビュー画像の伝送、処理及びレンダリングのためのシステム及び方法 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015112738A Pending JP2015201870A (ja) | 2010-07-07 | 2015-06-03 | 立体画像及びマルチビュー画像の伝送、処理及びレンダリングのためのシステム及び方法 |
Country Status (6)
Country | Link |
---|---|
US (3) | US8774267B2 (ja) |
EP (1) | EP2591608A2 (ja) |
JP (2) | JP6029583B2 (ja) |
KR (1) | KR101498535B1 (ja) |
CA (1) | CA2803583A1 (ja) |
WO (1) | WO2012005947A2 (ja) |
Families Citing this family (44)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8611604B2 (en) * | 2009-06-03 | 2013-12-17 | Chubu University Educational Foundation | Object detection device |
US9305398B2 (en) * | 2010-10-08 | 2016-04-05 | City University Of Hong Kong | Methods for creating and displaying two and three dimensional images on a digital canvas |
EP2648407A4 (en) * | 2010-12-02 | 2014-07-30 | Korea Electronics Telecomm | METHOD AND DEVICE FOR TRANSMITTING STEREOSCOPIC VIDEO CONTENT |
JP5820985B2 (ja) * | 2011-01-19 | 2015-11-24 | パナソニックIpマネジメント株式会社 | 立体画像処理装置および立体画像処理方法 |
JPWO2012111757A1 (ja) * | 2011-02-18 | 2014-07-07 | ソニー株式会社 | 画像処理装置および画像処理方法 |
MX2013009234A (es) * | 2011-02-18 | 2013-08-29 | Sony Corp | Dispositivo de procesamiento de imagenes y metodo de procesamiento de imagenes. |
JP2012186781A (ja) * | 2011-02-18 | 2012-09-27 | Sony Corp | 画像処理装置および画像処理方法 |
US8654181B2 (en) * | 2011-03-28 | 2014-02-18 | Avid Technology, Inc. | Methods for detecting, visualizing, and correcting the perceived depth of a multicamera image sequence |
US8887206B2 (en) | 2011-06-09 | 2014-11-11 | Cstereo3D, Llc | Device and method for rendering and delivering 3-D content |
US8743180B2 (en) * | 2011-06-28 | 2014-06-03 | Cyberlink Corp. | Systems and methods for generating a depth map and converting two-dimensional data to stereoscopic data |
TWI481262B (zh) * | 2011-07-28 | 2015-04-11 | Ind Tech Res Inst | 影像編碼系統及影像編碼方法 |
EP2742695A4 (en) | 2011-08-10 | 2016-08-31 | Ericsson Telefon Ab L M | METHOD AND APPARATUS FOR CREATING A DISOCLEMENT CARD USED FOR 3D VIDEO CODING |
US9191646B2 (en) * | 2011-08-29 | 2015-11-17 | Nokia Technologies Oy | Apparatus, a method and a computer program for video coding and decoding |
JP5978573B2 (ja) * | 2011-09-06 | 2016-08-24 | ソニー株式会社 | 映像信号処理装置および映像信号処理方法 |
CN103108197A (zh) * | 2011-11-14 | 2013-05-15 | 辉达公司 | 一种用于3d视频无线显示的优先级压缩方法和*** |
US20150237323A1 (en) * | 2012-07-23 | 2015-08-20 | Thomlson Licensing | 3d video representation using information embedding |
KR101904718B1 (ko) * | 2012-08-27 | 2018-10-05 | 삼성전자주식회사 | 컬러 영상 및 깊이 영상 촬영 장치 및 방법 |
US10085017B2 (en) * | 2012-11-29 | 2018-09-25 | Advanced Micro Devices, Inc. | Bandwidth saving architecture for scalable video coding spatial mode |
ITTO20130503A1 (it) * | 2013-06-18 | 2014-12-19 | Sisvel Technology Srl | Metodo e dispositivo per la generazione, memorizzazione, trasmissione, ricezione e riproduzione di mappe di profondita¿ sfruttando le componenti di colore di un¿immagine facente parte di un flusso video tridimensionale |
US8983223B2 (en) | 2013-07-23 | 2015-03-17 | Nvidia Corporation | Low-complexity bilateral filter (BF) implementation in a data processing device |
EP2833637A1 (en) | 2013-07-31 | 2015-02-04 | Thomson Licensing | Method for processing a current image of an image sequence, and corresponding computer program and processing device |
CN104427323B (zh) | 2013-08-23 | 2016-08-10 | 鸿富锦精密工业(深圳)有限公司 | 基于深度的三维图像处理方法 |
KR102080611B1 (ko) * | 2013-09-26 | 2020-02-25 | 엘지디스플레이 주식회사 | 이미지 생성 장치 및 방법 |
US20160094837A1 (en) * | 2014-09-30 | 2016-03-31 | 3DOO, Inc. | Distributed stereoscopic rendering for stereoscopic projecton and display |
US9756375B2 (en) | 2015-01-22 | 2017-09-05 | Microsoft Technology Licensing, Llc | Predictive server-side rendering of scenes |
US9449414B1 (en) | 2015-03-05 | 2016-09-20 | Microsoft Technology Licensing, Llc | Collaborative presentation system |
US10554713B2 (en) | 2015-06-19 | 2020-02-04 | Microsoft Technology Licensing, Llc | Low latency application streaming using temporal frame transformation |
US9635339B2 (en) * | 2015-08-14 | 2017-04-25 | Qualcomm Incorporated | Memory-efficient coded light error correction |
KR102174258B1 (ko) | 2015-11-06 | 2020-11-04 | 삼성전자주식회사 | 무안경 3d 디스플레이 장치 및 그 제어 방법 |
US9569812B1 (en) | 2016-01-07 | 2017-02-14 | Microsoft Technology Licensing, Llc | View rendering from multiple server-side renderings |
EP3434012A1 (en) * | 2016-03-21 | 2019-01-30 | InterDigital CE Patent Holdings | Dibr with depth map preprocessing for reducing visibility of holes by locally blurring hole areas |
BR112018077095A8 (pt) * | 2016-06-27 | 2023-04-04 | Bosch Gmbh Robert | Sistemas e métodos para a manipulação de oclusão dinâmica |
KR102608466B1 (ko) | 2016-11-22 | 2023-12-01 | 삼성전자주식회사 | 영상 처리 방법 및 영상 처리 장치 |
US10319149B1 (en) * | 2017-02-17 | 2019-06-11 | Snap Inc. | Augmented reality anamorphosis system |
US10776992B2 (en) * | 2017-07-05 | 2020-09-15 | Qualcomm Incorporated | Asynchronous time warp with depth data |
US10924525B2 (en) | 2018-10-01 | 2021-02-16 | Microsoft Technology Licensing, Llc | Inducing higher input latency in multiplayer programs |
US11488359B2 (en) | 2019-08-28 | 2022-11-01 | Snap Inc. | Providing 3D data for messages in a messaging system |
WO2021042134A1 (en) * | 2019-08-28 | 2021-03-04 | Snap Inc. | Generating 3d data in a messaging system |
US11189104B2 (en) | 2019-08-28 | 2021-11-30 | Snap Inc. | Generating 3D data in a messaging system |
US11457196B2 (en) | 2019-08-28 | 2022-09-27 | Snap Inc. | Effects for 3D data in a messaging system |
US11410401B2 (en) | 2019-08-28 | 2022-08-09 | Snap Inc. | Beautification techniques for 3D data in a messaging system |
CN112738534B (zh) * | 2019-10-28 | 2023-06-23 | 阿里巴巴集团控股有限公司 | 数据处理方法及***、服务器和存储介质 |
US11055879B1 (en) * | 2020-04-03 | 2021-07-06 | Varjo Technologies Oy | Encoder and encoding method for mitigating discrepancies in reconstructed images |
US11758101B2 (en) | 2020-08-25 | 2023-09-12 | Samsung Electronics Co., Ltd. | Restoration of the FOV of images for stereoscopic rendering |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH09289638A (ja) * | 1996-04-23 | 1997-11-04 | Nec Corp | 3次元画像符号化復号方式 |
WO2010007285A1 (fr) * | 2008-06-24 | 2010-01-21 | France Telecom | Procede et dispositif de remplissage des zones d'occultation d'une carte de profondeur ou de disparites estimee a partir d'au moins deux images |
Family Cites Families (25)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5614952A (en) * | 1994-10-11 | 1997-03-25 | Hitachi America, Ltd. | Digital video decoder for decoding digital high definition and/or digital standard definition television signals |
BR9508403A (pt) * | 1994-07-14 | 1997-11-11 | Johnson Grace Company | Método e aparato para compressão de imagens |
US6957350B1 (en) * | 1996-01-30 | 2005-10-18 | Dolby Laboratories Licensing Corporation | Encrypted and watermarked temporal and resolution layering in advanced television |
WO1997034184A1 (en) * | 1996-03-13 | 1997-09-18 | Reveo, Inc | Stereoscopic spatial-multiplexing image display system with phase-retardation error correcting optics |
US6055330A (en) * | 1996-10-09 | 2000-04-25 | The Trustees Of Columbia University In The City Of New York | Methods and apparatus for performing digital image and video segmentation and compression using 3-D depth information |
US6148027A (en) * | 1997-05-30 | 2000-11-14 | Sarnoff Corporation | Method and apparatus for performing hierarchical motion estimation using nonlinear pyramid |
US6473516B1 (en) * | 1998-05-22 | 2002-10-29 | Asa Systems, Inc. | Large capacity steganography |
US6269175B1 (en) * | 1998-08-28 | 2001-07-31 | Sarnoff Corporation | Method and apparatus for enhancing regions of aligned images using flow estimation |
US6556704B1 (en) * | 1999-08-25 | 2003-04-29 | Eastman Kodak Company | Method for forming a depth image from digital image data |
US20020061062A1 (en) * | 2000-11-22 | 2002-05-23 | O'brien Royal | Filtering system and method for digital interactive streams |
US20030235338A1 (en) * | 2002-06-19 | 2003-12-25 | Meetrix Corporation | Transmission of independently compressed video objects over internet protocol |
KR100556848B1 (ko) * | 2003-05-13 | 2006-03-10 | 엘지전자 주식회사 | 디지털 워터마킹을 이용한 동영상 부호화/복호화 장치 및방법 |
US8134637B2 (en) * | 2004-01-28 | 2012-03-13 | Microsoft Corporation | Method and system to increase X-Y resolution in a depth (Z) camera using red, blue, green (RGB) sensing |
KR100656783B1 (ko) * | 2004-12-14 | 2006-12-12 | 한국전자통신연구원 | 양안식 입체 영상 전송 장치 및 그 방법과 그를 이용한양안식 입체 영상 렌더링 장치 및 그 방법 |
US7671894B2 (en) * | 2004-12-17 | 2010-03-02 | Mitsubishi Electric Research Laboratories, Inc. | Method and system for processing multiview videos for view synthesis using skip and direct modes |
US8384763B2 (en) * | 2005-07-26 | 2013-02-26 | Her Majesty the Queen in right of Canada as represented by the Minster of Industry, Through the Communications Research Centre Canada | Generating a depth map from a two-dimensional source image for stereoscopic and multiview imaging |
US7477777B2 (en) * | 2005-10-28 | 2009-01-13 | Aepx Animation, Inc. | Automatic compositing of 3D objects in a still frame or series of frames |
JP4725595B2 (ja) * | 2008-04-24 | 2011-07-13 | ソニー株式会社 | 映像処理装置、映像処理方法、プログラム及び記録媒体 |
WO2009131703A2 (en) * | 2008-04-25 | 2009-10-29 | Thomson Licensing | Coding of depth signal |
WO2010022185A1 (en) * | 2008-08-19 | 2010-02-25 | Digimarc Corporation | Methods and systems for content processing |
JP2010081001A (ja) * | 2008-09-24 | 2010-04-08 | National Institute Of Information & Communication Technology | 2d互換3d表示装置及び3d視装置 |
JP5216010B2 (ja) * | 2009-01-20 | 2013-06-19 | 本田技研工業株式会社 | ウインドシールド上の雨滴を同定するための方法及び装置 |
US8270752B2 (en) * | 2009-03-17 | 2012-09-18 | Mitsubishi Electric Research Laboratories, Inc. | Depth reconstruction filter for depth coding videos |
WO2010108024A1 (en) * | 2009-03-20 | 2010-09-23 | Digimarc Coporation | Improvements to 3d data representation, conveyance, and use |
KR101807886B1 (ko) * | 2009-10-14 | 2017-12-11 | 돌비 인터네셔널 에이비 | 깊이 맵 처리를 위한 방법 및 디바이스 |
-
2010
- 2010-09-13 US US12/880,426 patent/US8774267B2/en not_active Expired - Fee Related
-
2011
- 2011-06-22 CA CA2803583A patent/CA2803583A1/en not_active Abandoned
- 2011-06-22 JP JP2013518483A patent/JP6029583B2/ja not_active Expired - Fee Related
- 2011-06-22 KR KR1020137003159A patent/KR101498535B1/ko not_active IP Right Cessation
- 2011-06-22 EP EP11804046.8A patent/EP2591608A2/en not_active Withdrawn
- 2011-06-22 WO PCT/US2011/041404 patent/WO2012005947A2/en active Application Filing
-
2014
- 2014-05-28 US US14/288,646 patent/US20140269935A1/en not_active Abandoned
- 2014-05-28 US US14/288,623 patent/US8988502B2/en not_active Expired - Fee Related
-
2015
- 2015-06-03 JP JP2015112738A patent/JP2015201870A/ja active Pending
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH09289638A (ja) * | 1996-04-23 | 1997-11-04 | Nec Corp | 3次元画像符号化復号方式 |
WO2010007285A1 (fr) * | 2008-06-24 | 2010-01-21 | France Telecom | Procede et dispositif de remplissage des zones d'occultation d'une carte de profondeur ou de disparites estimee a partir d'au moins deux images |
Non-Patent Citations (2)
Title |
---|
JPN6014027237; A.K.Riemens et al: 'Multi-step joint bilateral depth upsampling' Proc. SPIE Vol.7257, 2009, Page.72570M.1-72570M.12 * |
JPN6014027238; Kwan-Jung Oh et al: 'Depth Reconstruction Filter and Down/Up Sampling for Depth Coding in 3-D Video' IEEE SIGNAL PROCESSING LETTERS Vol.16, No.9, 200909, P. 747-750 * |
Also Published As
Publication number | Publication date |
---|---|
US8988502B2 (en) | 2015-03-24 |
CA2803583A1 (en) | 2012-01-12 |
KR20130091323A (ko) | 2013-08-16 |
KR101498535B1 (ko) | 2015-03-04 |
US20140267607A1 (en) | 2014-09-18 |
EP2591608A2 (en) | 2013-05-15 |
US20140269935A1 (en) | 2014-09-18 |
JP2015201870A (ja) | 2015-11-12 |
WO2012005947A2 (en) | 2012-01-12 |
WO2012005947A3 (en) | 2014-06-26 |
JP6029583B2 (ja) | 2016-11-24 |
US8774267B2 (en) | 2014-07-08 |
US20120008672A1 (en) | 2012-01-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6029583B2 (ja) | 立体画像及びマルチビュー画像の伝送、処理及びレンダリングのためのシステム及び方法 | |
US11770558B2 (en) | Stereoscopic video encoding and decoding methods and apparatus | |
JP6526686B2 (ja) | フルパララックス圧縮ライトフィールド3dイメージングシステムのための方法 | |
Lee et al. | A fast and efficient multi-view depth image coding method based on temporal and inter-view correlations of texture images | |
US20230068178A1 (en) | A method, an apparatus and a computer program product for volumetric video encoding and decoding | |
Park et al. | Depth-image-based rendering for 3DTV service over T-DMB | |
US20100309287A1 (en) | 3D Data Representation, Conveyance, and Use | |
US20100215251A1 (en) | Method and device for processing a depth-map | |
Daribo et al. | Distance dependent depth filtering in 3D warping for 3DTV | |
US12010329B2 (en) | Embedding data within transformed coefficients using bit partitioning operations | |
Pająk et al. | Perceptual depth compression for stereo applications | |
Wang et al. | Hiding depth information in compressed 2D image/video using reversible watermarking | |
Xu et al. | Adaptive depth truncation filter for MVC based compressed depth image | |
Vázquez et al. | 3D-TV: Coding of disocclusions for 2D+ depth representation of multiview images | |
GB2620655A (en) | Image processing using residual frames and differential frames | |
EP3035688B1 (en) | Encoding and decoding of 3d hdr images using a tapestry representation | |
Duan et al. | Enhancing wedgelet-based depth modeling in 3d-HEVC | |
Lee et al. | Depth resampling for mixed resolution multiview 3D videos | |
Park et al. | Ho-Cheon Wey |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20140620 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20140701 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140827 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20150205 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20150603 |
|
A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A711 Effective date: 20150702 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20150702 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20150917 |
|
A912 | Re-examination (zenchi) completed and case transferred to appeal board |
Free format text: JAPANESE INTERMEDIATE CODE: A912 Effective date: 20151113 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160810 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20161018 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6029583 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |