JP2018182755A - 符号化装置および符号化方法、復号装置および復号方法 - Google Patents
符号化装置および符号化方法、復号装置および復号方法 Download PDFInfo
- Publication number
- JP2018182755A JP2018182755A JP2018136595A JP2018136595A JP2018182755A JP 2018182755 A JP2018182755 A JP 2018182755A JP 2018136595 A JP2018136595 A JP 2018136595A JP 2018136595 A JP2018136595 A JP 2018136595A JP 2018182755 A JP2018182755 A JP 2018182755A
- Authority
- JP
- Japan
- Prior art keywords
- dimensional
- image data
- unit
- viewpoints
- data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/161—Encoding, multiplexing or demultiplexing different image signal components
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/111—Transformation of image signals corresponding to virtual viewpoints, e.g. spatial image interpolation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/172—Processing image signals image signals comprising non-image signal components, e.g. headers or format information
- H04N13/178—Metadata, e.g. disparity information
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/194—Transmission of image signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/204—Image signal generators using stereoscopic image cameras
- H04N13/243—Image signal generators using stereoscopic image cameras using three or more 2D image sensors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/204—Image signal generators using stereoscopic image cameras
- H04N13/246—Calibration of cameras
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/257—Colour aspects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/261—Image signal generators with monoscopic-to-stereoscopic image conversion
- H04N13/268—Image signal generators with monoscopic-to-stereoscopic image conversion based on depth image-based rendering [DIBR]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/271—Image signal generators wherein the generated image signals comprise depth maps or disparity maps
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/275—Image signal generators from 3D object models, e.g. computer-generated stereoscopic image signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/275—Image signal generators from 3D object models, e.g. computer-generated stereoscopic image signals
- H04N13/279—Image signal generators from 3D object models, e.g. computer-generated stereoscopic image signals the virtual viewpoint locations being selected by the viewers or determined by tracking
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/286—Image signal generators having separate monoscopic and stereoscopic modes
- H04N13/289—Switching between monoscopic and stereoscopic modes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/296—Synchronisation thereof; Control thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/182—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
- H04N19/36—Scalability techniques involving formatting the layers as a function of picture distortion after decoding, e.g. signal-to-noise [SNR] scalability
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N2213/00—Details of stereoscopic systems
- H04N2213/003—Aspects relating to the "2D+depth" image format
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Library & Information Science (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
Description
1.第1実施の形態:伝送システム(図1乃至図9)
2.第2実施の形態:伝送システム(図10乃至図16)
3.第3実施の形態:伝送システム(図17乃至図19)
4.第4実施の形態:伝送システム(図20乃至図25)
5.第5実施の形態:伝送システム(図26乃至図29)
6.第6実施の形態:コンピュータ(図30)
(伝送システムの第1実施の形態の構成例)
図1は、本開示を適用した伝送システムの第1実施の形態の構成例を示すブロック図である。
図2は、図1の変換部21の構成例を示すブロック図である。
図3は、所定の表示画像生成方式に対応する複数の視点の例を示す図である。
図4は、カメラ関連情報の例を示す図である。
図5は、図1の撮像装置11と符号化装置12の符号化処理を説明するフローチャートである。
図6は、図1の変換部33の第1の構成例を示すブロック図である。
図7は、図1の変換部33の第2の構成例を示すブロック図である。
図8は、図1の変換部33の第3の構成例を示すブロック図である。
図9は、図1の変換部33の構成が図8の構成である場合の復号装置13の復号処理を説明するフローチャートである。この復号処理は、例えば、符号化装置12から符号化ストリームが伝送されてきたとき開始される。
(伝送システムの第2実施の形態の構成例)
図10は、本開示を適用した伝送システムの第2実施の形態の構成例を示すブロック図である。
図11は、図10の撮像装置171の構成例を示すブロック図である。
図12は、同期ずれ情報の例を示す図である。
図13は、図10の符号化装置172の構成例を示すブロック図である。
図14は、図10の撮像装置171と符号化装置172の符号化処理を説明するフローチャートである。
図15は、図10の復号部191の構成例を示すブロック図である。
図16は、図10の変換部192の構成が、3次元データがオクルージョン3次元データを用いて補正されない点を除いて図8の構成と同一である場合の復号装置173の復号処理を説明するフローチャートである。この復号処理は、例えば、符号化装置172から符号化ストリームが伝送されてきたとき、開始される。
(伝送システムの第3実施の形態の構成例)
図17は、本開示を適用した伝送システムの第3実施の形態の構成例を示すブロック図である。
図18は、図17の合成装置283の構成例を示すブロック図である。
図17の撮像装置11と符号化装置12、撮像装置281と符号化装置282の符号化処理は、図5の符号化処理と同様であるので、説明は省略する。
(伝送システムの第4実施の形態における合成装置の構成例)
本開示を適用した伝送システムの第4実施の形態の構成は、合成装置283が合成装置340に代わり、復号装置284の変換部33が変換部380に代わる点、および視点群同期ずれ情報が座標変換情報に代わる点を除いて、図17の伝送システム280の構成と同一である。従って、以下では、合成装置340と変換部380についてのみ説明する。
図21は、図20の座標変換データ生成部341による座標変換データを生成する処理を説明する図である。
図22は、座標変換情報の例を示す図である。
図23は、図20の合成装置340の合成処理を説明するフローチャートである。
図24は、復号装置284の表示画像生成方式が自由視点表示画像生成方式である場合の変換部380の構成例を示すブロック図である。
図25は、第4実施の形態における復号装置284の復号処理を説明するフローチャートである。この復号処理は、例えば、合成装置340から符号化ストリームが伝送されてきたとき開始される。
(伝送システムの第5実施の形態における合成装置の構成例)
本開示を適用した伝送システムの第5実施の形態の構成は、合成装置283が合成装置400に代わり、復号装置284の変換部33が変換部420に代わる点、および視点群同期ずれ情報が色ずれ補正情報に代わる点を除いて、図17の伝送システム280の構成と同一である。従って、以下では、合成装置400と変換部420についてのみ説明する。
図27は、色ずれ補正情報の例を示す図である。
図28は、図26の合成装置400の合成処理を説明するフローチャートである。
図29は、変換部420の構成例を示すブロック図である。
(本開示を適用したコンピュータの説明)
上述した一連の処理は、ハードウエアにより実行することもできるし、ソフトウエアにより実行することもできる。一連の処理をソフトウエアにより実行する場合には、そのソフトウエアを構成するプログラムが、コンピュータにインストールされる。ここで、コンピュータには、専用のハードウエアに組み込まれているコンピュータや、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば汎用のパーソナルコンピュータなどが含まれる。
複数の第1の視点の2次元画像データから生成された被写体の3次元データから、所定の表示画像生成方式に対応する複数の第2の視点の2次元画像データと第3の視点に対する各画素の被写体の奥行き方向の位置を示すデプス画像データとを生成する2次元データ生成部と、
前記2次元データ生成部により生成された前記複数の第2の視点の2次元画像データと前記デプス画像データを符号化する符号化部と、
前記符号化部により符号化された前記複数の第2の視点の2次元画像データと前記デプス画像データを伝送する伝送部と
を備える符号化装置。
(2)
前記複数の第1の視点と前記複数の第2の視点とは異なる
ように構成された
前記(1)に記載の符号化装置。
(3)
前記複数の第2の視点は、同一円上に等間隔に存在する
ように構成された
前記(1)または(2)に記載の符号化装置。
(4)
前記複数の第2の視点のうちの少なくも2つの視点は、略水平方向に並ぶ
ように構成された
前記(1)または(2)に記載の符号化装置。
(5)
前記伝送部は、前記複数の第2の視点のうちの水平方向に並ぶ2つの視点を特定する情報を伝送する
ように構成された
前記(4)に記載の符号化装置。
(6)
前記伝送部は、前記複数の第2の視点の2次元画像データにおけるオクルージョン領域の前記3次元データを伝送する
ように構成された
前記(1)乃至(5)のいずれかに記載の符号化装置。
(7)
前記2次元データ生成部は、前記複数の第2の視点のカメラパラメータに基づいて、前記3次元データから前記複数の第2の視点の2次元画像データを生成し、前記第3の視点のカメラパラメータに基づいて、前記デプス画像データを生成し、
前記伝送部は、前記複数の第2の視点および前記第3の視点の前記カメラパラメータを伝送する
ように構成された
前記(1)乃至(6)のいずれかに記載の符号化装置。
(8)
前記所定の表示画像生成方式の数は、複数である
ように構成された
前記(1)乃至(7)のいずれかに記載の符号化装置。
(9)
前記複数の第2の視点と前記第3の視点は同一である
ように構成された
前記(1)乃至(8)のいずれかに記載の符号化装置。
(10)
符号化装置が、
複数の第1の視点の2次元画像データから生成された被写体の3次元データから、所定の表示画像生成方式に対応する複数の第2の視点の2次元画像データと第3の視点に対する各画素の被写体の奥行き方向の位置を示すデプス画像データとを生成する2次元データ生成ステップと、
前記2次元データ生成ステップの処理により生成された前記複数の第2の視点の2次元画像データと前記デプス画像データを符号化する符号化ステップと、
前記符号化ステップの処理により符号化された前記複数の第2の視点の2次元画像データと前記デプス画像データを伝送する伝送ステップと
を含む符号化方法。
(11)
所定の表示画像生成方式に対応する複数の第1の視点の2次元画像データの符号化データと、第2の視点に対する各画素の被写体の奥行き方向の位置を示すデプス画像データの符号化データとを復号する復号部と、
前記復号部による復号の結果得られる前記複数の第1の視点の第2次元画像データと前記デプス画像データとを用いて、被写体の3次元データを生成する3次元データ生成部と、
前記3次元データ生成部により生成された前記3次元データに基づいて、前記所定の表示画像生成方式で2次元画像データを表示画像データとして生成する2次元データ生成部と
を備える復号装置。
(12)
前記複数の第1の視点は、同一円上に等間隔に存在する
ように構成された
前記(11)に記載の復号装置。
(13)
前記複数の第1の視点のうちの少なくも2つの視点は、略水平方向に並ぶ
ように構成された
前記(11)に記載の復号装置。
(14)
前記複数の第1の視点のうちの水平方向に並ぶ2つの視点を特定する情報を受け取る受け取り部
をさらに備える
前記(13)に記載の復号装置。
(15)
前記複数の第1の視点の2次元画像データと前記デプス画像データは、複数の第3の視点の2次元画像データから生成された被写体の3次元データから生成される
ように構成された
前記(11)乃至(14)のいずれかに記載の復号装置。
(16)
前記3次元データ生成部は、前記複数の第1の視点の2次元画像データ、前記デプス画像データ、および前記複数の第1の視点の2次元画像データにおけるオクルージョン領域の3次元データを用いて、前記被写体の3次元データを生成する
ように構成された
前記(15)に記載の復号装置。
(17)
前記3次元データ生成部は、前記複数の第1の視点および前記第2の視点のカメラパラメータに基づいて、前記被写体の3次元データを生成する
ように構成された
前記(11)乃至(16)のいずれかに記載の復号装置。
(18)
前記所定の表示画像生成方式の数は、複数である
ように構成された
前記(11)乃至(17)のいずれかに記載の復号装置。
(19)
前記複数の第1の視点と前記第2の視点は同一である
ように構成された
前記(11)乃至(18)のいずれかに記載の復号装置。
(20)
復号装置が、
所定の表示画像生成方式に対応する複数の第1の視点の2次元画像データの符号化データと、第2の視点に対する各画素の被写体の奥行き方向の位置を示すデプス画像データの符号化データとを復号する復号ステップと、
前記復号ステップの処理による復号の結果得られる前記複数の第1の視点の第2次元画像データと前記デプス画像データとを用いて、被写体の3次元データを生成する3次元データ生成ステップと、
前記3次元データ生成ステップの処理により生成された前記3次元データに基づいて、前記所定の表示画像生成方式で2次元画像データを表示画像データとして生成する2次元データ生成ステップと
を含む復号方法。
Claims (16)
- 被写体の3次元データから複数の第1の視点の2次元画像データと第2の視点に対する各画素の被写体の奥行き方向の位置を示すデプス画像データとを生成する2次元データ生成部と、
前記2次元データ生成部により生成された複数の前記第1の視点の前記2次元画像データと前記デプス画像データを符号化する符号化部と、
前記符号化部により符号化された複数の前記第1の視点の前記2次元画像データと前記デプス画像データを伝送する伝送部と
を備える符号化装置。 - 複数の前記第1の視点は、同一円上に等間隔に存在する
ように構成された
請求項1に記載の符号化装置。 - 複数の前記第1の視点のうちの少なくも2つの視点は、略水平方向に並ぶ
ように構成された
請求項1に記載の符号化装置。 - 前記伝送部は、複数の前記第1の視点のうちの水平方向に並ぶ2つの視点を特定する情報を伝送する
ように構成された
請求項3に記載の符号化装置。 - 前記伝送部は、複数の前記第1の視点の前記2次元画像データにおけるオクルージョン領域の前記3次元データを伝送する
ように構成された
請求項1に記載の符号化装置。 - 前記2次元データ生成部は、複数の前記第1の視点のカメラパラメータに基づいて、前記3次元データから複数の前記第1の視点の前記2次元画像データを生成し、前記第2の視点の前記カメラパラメータに基づいて、前記デプス画像データを生成し、
前記伝送部は、複数の前記第1の視点および前記第2の視点の前記カメラパラメータを伝送する
ように構成された
請求項1に記載の符号化装置。 - 複数の前記第1の視点と前記第2の視点は同一である
ように構成された
請求項1に記載の符号化装置。 - 符号化装置が、
被写体の3次元データから複数の第1の視点の2次元画像データと第2の視点に対する各画素の被写体の奥行き方向の位置を示すデプス画像データとを生成する2次元データ生成ステップと、
前記2次元データ生成ステップの処理により生成された複数の前記第1の視点の前記2次元画像データと前記デプス画像データを符号化する符号化ステップと、
前記符号化ステップの処理により符号化された複数の前記第1の視点の前記2次元画像データと前記デプス画像データを伝送する伝送ステップと
を含む符号化方法。 - 被写体の3次元データから生成された複数の第1の視点の2次元画像データの符号化データと、第2の視点に対する各画素の被写体の奥行き方向の位置を示すデプス画像データの符号化データとを復号する復号部と、
前記復号部による復号の結果得られる複数の前記第1の視点の前記2次元画像データと前記デプス画像データとを用いて、被写体の前記3次元データを生成する3次元データ生成部と、
前記3次元データ生成部により生成された前記3次元データに基づいて前記2次元画像データを生成する2次元データ生成部と
を備える復号装置。 - 複数の前記第1の視点は、同一円上に等間隔に存在する
ように構成された
請求項9に記載の復号装置。 - 複数の前記第1の視点のうちの少なくも2つの視点は、略水平方向に並ぶ
ように構成された
請求項9に記載の復号装置。 - 複数の前記第1の視点のうちの水平方向に並ぶ2つの視点を特定する情報を受け取る受け取り部
をさらに備える
請求項11に記載の復号装置。 - 前記3次元データ生成部は、複数の前記第1の視点の前記2次元画像データ、前記デプス画像データ、および複数の前記第1の視点の前記2次元画像データにおけるオクルージョン領域の前記3次元データを用いて、前記被写体の前記3次元データを生成する
ように構成された
請求項9に記載の復号装置。 - 前記3次元データ生成部は、複数の前記第1の視点および前記第2の視点のカメラパラメータに基づいて、前記被写体の前記3次元データを生成する
ように構成された
請求項9に記載の復号装置。 - 複数の前記第1の視点と前記第2の視点は同一である
ように構成された
請求項9に記載の復号装置。 - 復号装置が、
被写体の3次元データから生成された複数の第1の視点の2次元画像データの符号化データと第2の視点に対する各画素の被写体の奥行き方向の位置を示すデプス画像データの符号化データとを復号する復号ステップと、
前記復号ステップの処理による復号の結果得られる複数の前記第1の視点の前記2次元画像データと前記デプス画像データとを用いて、被写体の前記3次元データを生成する3次元データ生成ステップと、
前記3次元データ生成ステップの処理により生成された前記3次元データに基づいて前記2次元画像データを生成する2次元データ生成ステップと
を含む復号方法。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015221233 | 2015-11-11 | ||
JP2015221233 | 2015-11-11 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017550061A Division JP6384744B2 (ja) | 2015-11-11 | 2016-10-28 | 符号化装置および符号化方法 |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021003267A Division JP7143905B2 (ja) | 2015-11-11 | 2021-01-13 | 画像処理装置および方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2018182755A true JP2018182755A (ja) | 2018-11-15 |
JP6872131B2 JP6872131B2 (ja) | 2021-05-19 |
Family
ID=58695131
Family Applications (3)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017550061A Active JP6384744B2 (ja) | 2015-11-11 | 2016-10-28 | 符号化装置および符号化方法 |
JP2018136595A Active JP6872131B2 (ja) | 2015-11-11 | 2018-07-20 | 符号化装置および符号化方法、復号装置および復号方法 |
JP2021003267A Active JP7143905B2 (ja) | 2015-11-11 | 2021-01-13 | 画像処理装置および方法 |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017550061A Active JP6384744B2 (ja) | 2015-11-11 | 2016-10-28 | 符号化装置および符号化方法 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021003267A Active JP7143905B2 (ja) | 2015-11-11 | 2021-01-13 | 画像処理装置および方法 |
Country Status (14)
Country | Link |
---|---|
US (1) | US11716487B2 (ja) |
EP (1) | EP3343914A4 (ja) |
JP (3) | JP6384744B2 (ja) |
KR (1) | KR102516992B1 (ja) |
CN (2) | CN113286137B (ja) |
AU (2) | AU2016352648A1 (ja) |
BR (1) | BR112018009070A8 (ja) |
CA (1) | CA3004241A1 (ja) |
MX (1) | MX2018005501A (ja) |
PH (1) | PH12018500977A1 (ja) |
RU (1) | RU2721678C2 (ja) |
SG (1) | SG11201803682RA (ja) |
WO (1) | WO2017082076A1 (ja) |
ZA (1) | ZA201802193B (ja) |
Families Citing this family (22)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10269181B2 (en) * | 2017-05-31 | 2019-04-23 | Verizon Patent And Licensing Inc. | Methods and systems for generating a virtualized projection of a customized view of a real-world scene for inclusion within virtual reality media content |
US10311630B2 (en) * | 2017-05-31 | 2019-06-04 | Verizon Patent And Licensing Inc. | Methods and systems for rendering frames of a virtual scene from different vantage points based on a virtual entity description frame of the virtual scene |
JP7003994B2 (ja) * | 2017-08-08 | 2022-01-21 | ソニーグループ株式会社 | 画像処理装置および方法 |
JP7119425B2 (ja) | 2018-03-01 | 2022-08-17 | ソニーグループ株式会社 | 画像処理装置、符号化装置、復号化装置、画像処理方法、プログラム、符号化方法及び復号化方法 |
CN108769643A (zh) * | 2018-06-15 | 2018-11-06 | 深圳超多维科技有限公司 | 视频拍摄方法、装置及*** |
CN112369016A (zh) * | 2018-07-06 | 2021-02-12 | 索尼公司 | 信息处理装置、信息处理方法和程序 |
CN110876050B (zh) * | 2018-08-31 | 2021-08-20 | 盎锐(上海)信息科技有限公司 | 基于3d摄像机的数据处理装置及方法 |
JP2020086700A (ja) | 2018-11-20 | 2020-06-04 | ソニー株式会社 | 画像処理装置、画像処理方法、プログラム、及び、表示装置 |
JP2020095465A (ja) | 2018-12-12 | 2020-06-18 | ソニー株式会社 | 画像処理装置、画像処理方法、及び、プログラム |
JP2022028091A (ja) | 2018-12-19 | 2022-02-15 | ソニーグループ株式会社 | 画像処理装置、画像処理方法、及び、プログラム |
US11825066B2 (en) | 2018-12-25 | 2023-11-21 | Sony Corporation | Video reproduction apparatus, reproduction method, and program |
WO2020181073A1 (en) | 2019-03-07 | 2020-09-10 | Alibaba Group Holding Limited | Method, apparatus, terminal, capturing system and device for setting capturing devices |
CN111669570B (zh) * | 2019-03-07 | 2023-12-19 | 阿里巴巴集团控股有限公司 | 多角度自由视角视频数据处理方法及装置、介质、设备 |
JPWO2020262261A1 (ja) | 2019-06-28 | 2020-12-30 | ||
EP4026094A4 (en) * | 2019-10-07 | 2022-11-09 | Huawei Technologies Co., Ltd. | VIDEO-BASED POINT CLOUD COMPRESSION (V-PCC) TIME INFORMATION |
CN114556433A (zh) | 2019-10-21 | 2022-05-27 | 索尼集团公司 | 信息处理装置、3d数据生成方法及程序 |
CN112788325B (zh) * | 2019-11-06 | 2023-06-02 | Oppo广东移动通信有限公司 | 一种图像处理方法、编码装置、解码装置及存储介质 |
JP2021099430A (ja) * | 2019-12-23 | 2021-07-01 | セイコーエプソン株式会社 | 表示装置の制御方法及び表示装置 |
KR102242710B1 (ko) * | 2019-12-31 | 2021-04-22 | 서울과학기술대학교 산학협력단 | 반자유 시점 영상을 제공하는 장치 |
JPWO2021187093A1 (ja) | 2020-03-17 | 2021-09-23 | ||
US20230260199A1 (en) * | 2020-07-30 | 2023-08-17 | Sony Group Corporation | Information processing device, information processing method, video distribution method, and information processing system |
CN114926605B (zh) * | 2022-07-19 | 2022-09-30 | 北京飞渡科技有限公司 | 一种三维模型的抽壳方法 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010079505A (ja) * | 2008-09-25 | 2010-04-08 | Kddi Corp | 画像生成装置及びプログラム |
JP2010157825A (ja) * | 2008-12-26 | 2010-07-15 | Victor Co Of Japan Ltd | 画像符号化装置、画像符号化方法およびそのプログラム |
JP2010531604A (ja) * | 2007-06-26 | 2010-09-24 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | 3次元ビデオ信号をエンコードするための方法及びシステム、含まれる3次元ビデオ信号、並びに3次元ビデオ信号のためのデコーダのための方法及び信号 |
JP2011519227A (ja) * | 2008-04-25 | 2011-06-30 | トムソン ライセンシング | 奥行き信号の符号化 |
JP2012023488A (ja) * | 2010-07-13 | 2012-02-02 | Ntt Docomo Inc | 画像処理装置、画像処理方法、表示装置及びプログラム |
JP2012518367A (ja) * | 2009-02-19 | 2012-08-09 | トムソン ライセンシング | 3d映像フォーマット |
Family Cites Families (20)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3231618B2 (ja) * | 1996-04-23 | 2001-11-26 | 日本電気株式会社 | 3次元画像符号化復号方式 |
US20050185711A1 (en) * | 2004-02-20 | 2005-08-25 | Hanspeter Pfister | 3D television system and method |
US8244025B2 (en) * | 2006-03-20 | 2012-08-14 | Siemens Energy, Inc. | Method of coalescing information about inspected objects |
CN101453662B (zh) * | 2007-12-03 | 2012-04-04 | 华为技术有限公司 | 立体视频通信终端、***及方法 |
CN101472190B (zh) * | 2007-12-28 | 2013-01-23 | 华为终端有限公司 | 多视角摄像及图像处理装置、*** |
EP2197217A1 (en) * | 2008-12-15 | 2010-06-16 | Koninklijke Philips Electronics N.V. | Image based 3D video format |
JP2010157821A (ja) * | 2008-12-26 | 2010-07-15 | Victor Co Of Japan Ltd | 画像符号化装置、画像符号化方法およびそのプログラム |
US8750632B2 (en) | 2008-12-26 | 2014-06-10 | JVC Kenwood Corporation | Apparatus and method for encoding images from multiple viewpoints and associated depth information |
JP2010157823A (ja) | 2008-12-26 | 2010-07-15 | Victor Co Of Japan Ltd | 画像符号化装置、画像符号化方法およびそのプログラム |
KR101694821B1 (ko) * | 2010-01-28 | 2017-01-11 | 삼성전자주식회사 | 다시점 비디오스트림에 대한 링크 정보를 이용하는 디지털 데이터스트림 전송 방법와 그 장치, 및 링크 정보를 이용하는 디지털 데이터스트림 전송 방법과 그 장치 |
HU1000640D0 (en) * | 2010-11-29 | 2011-02-28 | Holografika Hologrameloeallito Fejlesztoe Es Forgalmazo Kft | Image coding and decoding method and apparatus for efficient encoding and decoding of 3d field content |
EP2668634B1 (en) * | 2011-01-24 | 2019-04-24 | Intel Corporation | Method and system for acquisition, representation, compression, and transmission of three-dimensional data |
CN102724520A (zh) * | 2011-03-29 | 2012-10-10 | 青岛海信电器股份有限公司 | 视频处理方法和*** |
US20120314031A1 (en) * | 2011-06-07 | 2012-12-13 | Microsoft Corporation | Invariant features for computer vision |
US9351028B2 (en) * | 2011-07-14 | 2016-05-24 | Qualcomm Incorporated | Wireless 3D streaming server |
JP2013211777A (ja) * | 2012-03-30 | 2013-10-10 | Sharp Corp | 画像符号化装置、画像復号装置、画像符号化方法、画像復号方法およびプログラム |
KR102126532B1 (ko) * | 2013-09-30 | 2020-06-24 | 엘지디스플레이 주식회사 | 멀티뷰 영상 생성 방법과 이를 이용한 입체 영상 표시 장치 |
GB2525170A (en) | 2014-04-07 | 2015-10-21 | Nokia Technologies Oy | Stereo viewing |
CN107155341B (zh) * | 2014-07-31 | 2020-01-10 | 惠普发展公司,有限责任合伙企业 | 三维扫描***和框架 |
US20170004647A1 (en) * | 2015-06-30 | 2017-01-05 | Microsoft Technology Licensing, Llc | Rendering graphics data on demand |
-
2016
- 2016-10-28 CA CA3004241A patent/CA3004241A1/en active Pending
- 2016-10-28 WO PCT/JP2016/082024 patent/WO2017082076A1/ja active Application Filing
- 2016-10-28 AU AU2016352648A patent/AU2016352648A1/en not_active Abandoned
- 2016-10-28 MX MX2018005501A patent/MX2018005501A/es unknown
- 2016-10-28 SG SG11201803682RA patent/SG11201803682RA/en unknown
- 2016-10-28 BR BR112018009070A patent/BR112018009070A8/pt unknown
- 2016-10-28 CN CN202110383257.XA patent/CN113286137B/zh active Active
- 2016-10-28 US US15/765,805 patent/US11716487B2/en active Active
- 2016-10-28 EP EP16864039.9A patent/EP3343914A4/en not_active Ceased
- 2016-10-28 CN CN201680064678.3A patent/CN108353157B/zh active Active
- 2016-10-28 RU RU2018116473A patent/RU2721678C2/ru active
- 2016-10-28 KR KR1020187012316A patent/KR102516992B1/ko active IP Right Grant
- 2016-10-28 JP JP2017550061A patent/JP6384744B2/ja active Active
-
2018
- 2018-04-04 ZA ZA2018/02193A patent/ZA201802193B/en unknown
- 2018-05-04 PH PH12018500977A patent/PH12018500977A1/en unknown
- 2018-07-20 JP JP2018136595A patent/JP6872131B2/ja active Active
-
2021
- 2021-01-13 JP JP2021003267A patent/JP7143905B2/ja active Active
- 2021-05-27 AU AU2021203450A patent/AU2021203450B2/en active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010531604A (ja) * | 2007-06-26 | 2010-09-24 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | 3次元ビデオ信号をエンコードするための方法及びシステム、含まれる3次元ビデオ信号、並びに3次元ビデオ信号のためのデコーダのための方法及び信号 |
JP2011519227A (ja) * | 2008-04-25 | 2011-06-30 | トムソン ライセンシング | 奥行き信号の符号化 |
JP2010079505A (ja) * | 2008-09-25 | 2010-04-08 | Kddi Corp | 画像生成装置及びプログラム |
JP2010157825A (ja) * | 2008-12-26 | 2010-07-15 | Victor Co Of Japan Ltd | 画像符号化装置、画像符号化方法およびそのプログラム |
JP2012518367A (ja) * | 2009-02-19 | 2012-08-09 | トムソン ライセンシング | 3d映像フォーマット |
JP2012023488A (ja) * | 2010-07-13 | 2012-02-02 | Ntt Docomo Inc | 画像処理装置、画像処理方法、表示装置及びプログラム |
Non-Patent Citations (2)
Title |
---|
ALJOSCHA SMOLIC: "3D video and free viewpoint video - From capture to display", PATTERN RECOGNITION, vol. 44, no. 9, JPN6021008671, 1 September 2011 (2011-09-01), pages 1958 - 1968, XP055562508, ISSN: 0004462915, DOI: 10.1016/j.patcog.2010.09.005 * |
谷本正幸: "究極の映像通信を目指して", 信学技報, vol. Vol.110, No.323, CS2010-59, JPN7021000794, December 2010 (2010-12-01), pages 73 - 78, ISSN: 0004462914 * |
Also Published As
Publication number | Publication date |
---|---|
ZA201802193B (en) | 2020-08-26 |
US11716487B2 (en) | 2023-08-01 |
CN108353157A (zh) | 2018-07-31 |
CN113286137A (zh) | 2021-08-20 |
WO2017082076A1 (ja) | 2017-05-18 |
JP6384744B2 (ja) | 2018-09-05 |
BR112018009070A2 (ja) | 2018-10-30 |
RU2018116473A (ru) | 2019-11-05 |
CA3004241A1 (en) | 2017-05-18 |
EP3343914A4 (en) | 2019-04-10 |
KR102516992B1 (ko) | 2023-04-04 |
CN113286137B (zh) | 2024-02-02 |
MX2018005501A (es) | 2018-08-01 |
KR20180081720A (ko) | 2018-07-17 |
AU2016352648A1 (en) | 2018-05-10 |
CN108353157B (zh) | 2021-06-08 |
JPWO2017082076A1 (ja) | 2018-07-26 |
US20180302647A1 (en) | 2018-10-18 |
AU2021203450B2 (en) | 2022-11-24 |
AU2021203450A1 (en) | 2021-06-24 |
JP7143905B2 (ja) | 2022-09-29 |
BR112018009070A8 (pt) | 2019-02-26 |
PH12018500977A1 (en) | 2019-01-28 |
RU2721678C2 (ru) | 2020-05-21 |
RU2018116473A3 (ja) | 2019-11-05 |
JP2021072639A (ja) | 2021-05-06 |
SG11201803682RA (en) | 2018-06-28 |
EP3343914A1 (en) | 2018-07-04 |
JP6872131B2 (ja) | 2021-05-19 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7143905B2 (ja) | 画像処理装置および方法 | |
JP6911765B2 (ja) | 画像処理装置および画像処理方法 | |
KR102527566B1 (ko) | 화상 처리 장치 및 화상 처리 방법 | |
CN108886611B (zh) | 全景立体视频***的拼接方法和装置 | |
JP7009996B2 (ja) | 画像処理装置および画像処理方法 | |
JP2011151773A (ja) | 映像処理装置及び制御方法 | |
KR101233399B1 (ko) | 다시점 깊이 영상 생성 방법 및 장치 | |
JP6599634B2 (ja) | 多視点画像符号化装置、多視点画像復号装置、補助情報生成装置、画像復元装置及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190912 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20200617 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200707 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200903 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20201117 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210113 |
|
C60 | Trial request (containing other claim documents, opposition documents) |
Free format text: JAPANESE INTERMEDIATE CODE: C60 Effective date: 20210113 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20210121 |
|
C21 | Notice of transfer of a case for reconsideration by examiners before appeal proceedings |
Free format text: JAPANESE INTERMEDIATE CODE: C21 Effective date: 20210126 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210316 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20210329 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6872131 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |