JP4952657B2 - 擬似立体画像生成装置、画像符号化装置、画像符号化方法、画像伝送方法、画像復号化装置及び画像復号化方法 - Google Patents
擬似立体画像生成装置、画像符号化装置、画像符号化方法、画像伝送方法、画像復号化装置及び画像復号化方法 Download PDFInfo
- Publication number
- JP4952657B2 JP4952657B2 JP2008142434A JP2008142434A JP4952657B2 JP 4952657 B2 JP4952657 B2 JP 4952657B2 JP 2008142434 A JP2008142434 A JP 2008142434A JP 2008142434 A JP2008142434 A JP 2008142434A JP 4952657 B2 JP4952657 B2 JP 4952657B2
- Authority
- JP
- Japan
- Prior art keywords
- image signal
- control signal
- image
- depth
- encoding
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Processing Or Creating Images (AREA)
Description
擬似的な立体画像を生成する際の基本となるシーンを有する複数の基本奥行きモデルを発生する基本奥行きモデル発生手段(77〜70)と、前記複数の基本奥行きモデルを合成するための合成比率を示す第1の制御信号に基づいて、前記複数の基本奥行きモデルを合成して合成奥行きモデルを生成する合成手段(76)と、非立体画像信号と前記合成奥行きモデルとから奥行き推定データを生成する奥行き推定データ生成手段(82)と、前記非立体画像信号の重み付けをするための重み付け係数を示す第2の制御信号に基づいて、前記非立体画像信号に対して前記重み付け係数を乗ずる重み付け手段(81)と、奥行きを示すパラメータと輻輳を示すパラメータを含む第3の制御信号により調整された前記奥行き推定データ及び前記重み付け手段により得られた乗算結果に基づいて非立体画像のテクスチャをシフトして前記擬似的な立体画像信号を生成するテクスチャシフト手段(92)とを有することを特徴とする擬似立体画像生成装置(52)を提供する。
第1の実施形態の擬似立体画像信号を生成するための非立体画像信号の符号化について図1から図11を参照して説明する。図1は画像符号化装置の構成例を示すブロック図である。図1に示すように、画像符号化装置1は、制御信号判定部11と、制御信号符号化部12と、画像信号符号化部13と、多重化部14を備える。
第2の実施形態の画像符号化装置1は、制御信号CTL1〜CTL3及び非立体画像信号aを符号化する方式が第1の実施形態の画像符号化装置1と異なる。また、第2の実施形態の画像復号化装置51は、符号化ビット列b1及び符号化ビット列b2を復号化する方式が第1の実施形態の画像復号化装置51と異なる。それ以外については、第1の実施形態と同様であるので説明を省略する。
第3の実施形態の画像符号化装置2は、制御信号CTL1〜CTL3を符号化する方式、及び制御信号CTL1〜CTL3の符号化ビット列b1をパケットのヘッダ部に含める点が第1、第2の実施形態の画像符号化装置1と異なる。また、第3の実施形態の画像復号化装置51は、パケット化された符号化ビット列cから制御信号CTL1〜CTL3の符号化ビット列b1と非立体画像信号aの符号化ビット列b2を分離する点と、制御信号CTL1〜CTL3の符号化ビット列b1を復号化する方式が第1、第2の実施形態の画像復号化装置51と異なる。それ以外については、第1、第2の実施形態と同様であるので説明を省略する。
第4の実施形態の画像符号化装置2は、制御信号CTL1〜CTL3を符号化する方式、及び制御信号CTL1〜CTL3の符号化ビット列b1をTSパケットのヘッダ部に含める点が第3の実施形態の画像符号化装置2と異なる。また、第4の実施形態の画像復号化装置51は、TSパケットの符号化ビット列cから制御信号CTL1〜CTL3の符号化ビット列b1を分離する点と、制御信号CTL1〜CTL3の符号化ビット列b1を復号化する方式が第3の実施形態の画像復号化装置51と異なる。それ以外については、第3の実施形態と同様であるので説明を省略する。
12 制御信号符号化部
13 画像信号符号化部
14 多重化部
51 画像復号化装置
52 擬似立体画像生成装置
61 分離部
62 制御信号復号化部
63 画像信号復号化部
75 スイッチ
76 奥行きモデル合成部
77,78,79 フレームメモリ
80,91 制御信号判定部
81 重み付け部
82 加算部
92 テクスチャシフト部
93 オクルージョン補償部
94 ポスト処理部
Claims (8)
- 擬似的な立体画像を生成する際の基本となるシーンを有する複数の基本奥行きモデルを発生する基本奥行きモデル発生手段と、
前記複数の基本奥行きモデルを合成するための合成比率を示す第1の制御信号に基づいて、前記複数の基本奥行きモデルを合成して合成奥行きモデルを生成する合成手段と、
非立体画像信号と前記合成奥行きモデルとから奥行き推定データを生成する奥行き推定データ生成手段と、
前記非立体画像信号の重み付けをするための重み付け係数を示す第2の制御信号に基づいて、前記非立体画像信号に対して前記重み付け係数を乗ずる重み付け手段と、
奥行きを示すパラメータと輻輳を示すパラメータを含む第3の制御信号により調整された前記奥行き推定データ及び前記重み付け手段により得られた乗算結果に基づいて非立体画像のテクスチャをシフトして前記擬似的な立体画像信号を生成するテクスチャシフト手段と
を有することを特徴とする擬似立体画像生成装置。 - 前記第1〜第3の制御信号が存在するか否かを判定する判定手段を備え、
前記判定手段が前記第1〜第3の制御信号が存在しないと判定した場合に、前記合成手段は、予め設定された合成比率に基づいて合成奥行きモデルを生成し、前記重み付け手段は予め設定された重み付け係数に基づいて前記非立体画像信号に重み付けをし、前記テクスチャシフト手段は予め設定された奥行きを示すパラメータと輻輳を示すパラメータに基づいて前記擬似的な立体画像信号を生成することを特徴とする請求項1記載の擬似立体画像生成装置。 - 前記テクスチャシフト手段より生成された前記擬似的な立体画像信号に対して、テクスチャの存在しない部分であるオクルージョンを前記非立体画像信号の対応部分で補償するオクルージョン補償手段と、
前記オクルージョン補償手段により補償された擬似的な立体画像信号に対してポスト処理をして、前記非立体像信号とは別視点の画像信号として出力するポスト処理手段と
を備えることを特徴とする請求項1又は2に記載の擬似立体画像生成装置。 - 非立体画像信号を符号化する画像信号符号化手段と、
擬似的な立体画像を生成する際の基本となるシーンを有する複数の基本奥行きモデルを合成するための合成比率を示す第1の制御信号と、前記非立体画像信号に重み付けをするための重み付け係数を示す第2の制御信号と、奥行き推定データを調整するための奥行きを示すパラメータと輻輳を示すパラメータを含む第3の制御信号を符号化する制御信号符号化手段と、
前記画像信号符号化手段により符号化された非立体画像信号と前記制御信号符号化手段により符号化された第1〜第3の制御信号を多重化して符号化ビット列を生成する多重化手段と
を有することを特徴とする画像符号化装置。 - 非立体画像信号を符号化する画像信号符号化ステップと、
擬似的な立体画像な立体画像を生成する際の基本となるシーンを有する複数の基本奥行きモデルを合成するための合成比率を示す第1の制御信号と、前記非立体画像信号に重み付けをするための重み付け係数を示す第2の制御信号と、奥行き推定データを調整するための奥行きを示すパラメータと輻輳を示すパラメータを含む第3の制御信号を符号化する制御信号符号化ステップと、
前記画像信号符号化ステップにより符号化された非立体画像信号と前記制御信号符号化ステップにより符号化された第1〜第3の制御信号を多重化して符号化ビット列を生成する多重化ステップと
を有することを特徴とする画像符号化方法。 - 非立体画像信号を符号化する画像信号符号化ステップと、
擬似的な立体画像を生成する際の基本となるシーンを有する複数の基本奥行きモデルを合成するための合成比率を示す第1の制御信号と、前記非立体画像信号に重み付けをするための重み付け係数を示す第2の制御信号と、奥行き推定データを調整するための奥行きを示すパラメータと輻輳を示すパラメータを含む第3の制御信号を符号化する制御信号符号化ステップと、
前記画像信号符号化ステップにより符号化された非立体画像信号と前記制御信号符号化ステップにより符号化された第1〜第3の制御信号とを備えた符号化ビット列をパケット化するパケット化ステップと
を有することを特徴とする画像伝送方法。 - 非立体画像信号と、擬似的な立体画像を生成する際の基本となるシーンを有する複数の基本奥行きモデルを合成するための合成比率を示す第1の制御信号と、前記非立体画像信号に対して重み付けをするための重み付け係数を示す第2の制御信号と、奥行き推定データを調整するための奥行きを示すパラメータと輻輳を示すパラメータを含む第3の制御信号とを含む符号化ビット列から、前記第1〜第3の制御信号と前記非立体画像信号とを分離して出力する分離手段と、
前記第1〜第3の制御信号と前記非立体画像信号をそれぞれ復号化する復号化手段と
を有することを特徴とする画像復号化装置。 - 非立体画像信号と、擬似的な立体画像を生成する際の基本となるシーンを有する複数の基本奥行きモデルを合成するための合成比率を示す第1の制御信号と、前記非立体画像信号に対して重み付けをするための重み付け係数を示す第2の制御信号と、奥行き推定データを調整するための奥行きを示すパラメータと輻輳を示すパラメータを含む第3の制御信号とを含む符号化ビット列から、前記第1〜第3の制御信号と前記非立体画像信号とを分離して出力する分離ステップと、
前記第1〜第3の制御信号と前記非立体画像信号をそれぞれ復号化する復号化ステップと
を有することを特徴とする画像復号化方法。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008142434A JP4952657B2 (ja) | 2007-07-19 | 2008-05-30 | 擬似立体画像生成装置、画像符号化装置、画像符号化方法、画像伝送方法、画像復号化装置及び画像復号化方法 |
US12/219,327 US8463019B2 (en) | 2007-07-19 | 2008-07-18 | Pseudo 3D image generation device, image encoding device, image encoding method, image transmission method, image decoding device, and image decoding method |
US13/437,269 US8532405B2 (en) | 2007-07-19 | 2012-04-02 | Pseudo 3D image generation device, image encoding device, image encoding method, image transmission method, image decoding device, and image decoding method |
US13/437,286 US8532407B2 (en) | 2007-07-19 | 2012-04-02 | Pseudo 3D image generation device, image encoding device, image encoding method, image transmission method, image decoding device, and image decoding method |
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007187824 | 2007-07-19 | ||
JP2007187824 | 2007-07-19 | ||
JP2008142434A JP4952657B2 (ja) | 2007-07-19 | 2008-05-30 | 擬似立体画像生成装置、画像符号化装置、画像符号化方法、画像伝送方法、画像復号化装置及び画像復号化方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2009044722A JP2009044722A (ja) | 2009-02-26 |
JP4952657B2 true JP4952657B2 (ja) | 2012-06-13 |
Family
ID=40444900
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008142434A Active JP4952657B2 (ja) | 2007-07-19 | 2008-05-30 | 擬似立体画像生成装置、画像符号化装置、画像符号化方法、画像伝送方法、画像復号化装置及び画像復号化方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4952657B2 (ja) |
Families Citing this family (23)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9124874B2 (en) | 2009-06-05 | 2015-09-01 | Qualcomm Incorporated | Encoding of three-dimensional conversion information with two-dimensional video sequence |
JP5402483B2 (ja) | 2009-10-02 | 2014-01-29 | 株式会社Jvcケンウッド | 擬似立体画像作成装置及び擬似立体画像表示システム |
JP5454396B2 (ja) * | 2010-03-23 | 2014-03-26 | 株式会社Jvcケンウッド | 立体画像生成装置および立体画像生成方法、情報送信装置および情報送信方法 |
JP5304714B2 (ja) * | 2010-04-09 | 2013-10-02 | 株式会社Jvcケンウッド | 擬似立体画像生成装置及びカメラ |
JP5197683B2 (ja) | 2010-06-30 | 2013-05-15 | 株式会社東芝 | 奥行き信号生成装置及び方法 |
JP5304758B2 (ja) * | 2010-09-08 | 2013-10-02 | 株式会社Jvcケンウッド | 多視点画像作成装置及び多視点画像作成方法並びに多視点画像表示システム |
JP2012129845A (ja) * | 2010-12-16 | 2012-07-05 | Jvc Kenwood Corp | 画像処理装置 |
CN102572457A (zh) * | 2010-12-31 | 2012-07-11 | 财团法人工业技术研究院 | 前景深度地图产生模块及其方法 |
CN107197227B (zh) | 2011-03-18 | 2019-05-10 | 索尼公司 | 图像处理设备、图像处理方法和计算机可读存储介质 |
JP5047381B1 (ja) * | 2011-06-10 | 2012-10-10 | シャープ株式会社 | 映像生成装置、映像表示装置、テレビ受像装置、映像生成方法及びコンピュータプログラム |
WO2013031575A1 (ja) * | 2011-08-31 | 2013-03-07 | ソニー株式会社 | 画像処理装置および画像処理方法 |
BR112014004062A2 (pt) | 2011-08-31 | 2017-03-07 | Sony Corp | dispositivos e métodos de codificação e decodificação |
JP5708395B2 (ja) * | 2011-09-16 | 2015-04-30 | 株式会社Jvcケンウッド | 映像表示装置及び映像表示方法 |
JP6024110B2 (ja) | 2012-01-26 | 2016-11-09 | ソニー株式会社 | 画像処理装置、画像処理方法、プログラム、端末装置及び画像処理システム |
JP5807571B2 (ja) * | 2012-01-31 | 2015-11-10 | 株式会社Jvcケンウッド | 画像処理装置、画像処理方法及び画像処理プログラム |
JP5807570B2 (ja) * | 2012-01-31 | 2015-11-10 | 株式会社Jvcケンウッド | 画像処理装置、画像処理方法及び画像処理プログラム |
JP5807569B2 (ja) * | 2012-01-31 | 2015-11-10 | 株式会社Jvcケンウッド | 画像処理装置、画像処理方法及び画像処理プログラム |
US8971611B2 (en) | 2012-02-08 | 2015-03-03 | JVC Kenwood Corporation | Image process device, image process method, and image process program |
JP5971017B2 (ja) * | 2012-08-03 | 2016-08-17 | 株式会社Jvcケンウッド | 画像処理装置、画像処理方法及び画像処理プログラム |
CN104350745B (zh) * | 2012-07-04 | 2018-12-11 | 英特尔公司 | 基于全景的3d视频译码 |
JP5962393B2 (ja) * | 2012-09-28 | 2016-08-03 | 株式会社Jvcケンウッド | 画像処理装置、画像処理方法及び画像処理プログラム |
US9466090B2 (en) | 2013-06-20 | 2016-10-11 | Intel Corporation | Subset based compression and decompression of graphics data |
US10387991B2 (en) | 2016-07-01 | 2019-08-20 | Intel Corporation | Method and apparatus for frame buffer compression |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000078611A (ja) * | 1998-08-31 | 2000-03-14 | Toshiba Corp | 立体映像受信装置及び立体映像システム |
JP4624587B2 (ja) * | 2001-03-29 | 2011-02-02 | 株式会社バンダイナムコゲームス | 画像生成装置、プログラム及び情報記憶媒体 |
EP1501317A4 (en) * | 2002-04-25 | 2006-06-21 | Sharp Kk | Image data generation device, image data reproduction device and image data recording medium |
JP4214976B2 (ja) * | 2003-09-24 | 2009-01-28 | 日本ビクター株式会社 | 擬似立体画像作成装置及び擬似立体画像作成方法並びに擬似立体画像表示システム |
JP2007129494A (ja) * | 2005-11-02 | 2007-05-24 | Epson Imaging Devices Corp | ディスプレイ装置 |
-
2008
- 2008-05-30 JP JP2008142434A patent/JP4952657B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
JP2009044722A (ja) | 2009-02-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4952657B2 (ja) | 擬似立体画像生成装置、画像符号化装置、画像符号化方法、画像伝送方法、画像復号化装置及び画像復号化方法 | |
US8532405B2 (en) | Pseudo 3D image generation device, image encoding device, image encoding method, image transmission method, image decoding device, and image decoding method | |
JP6406327B2 (ja) | 受信装置および受信方法 | |
JP5429034B2 (ja) | 立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法 | |
US9219911B2 (en) | Image processing apparatus, image processing method, and program | |
JP6365697B2 (ja) | 受信装置および受信方法 | |
US20120257014A1 (en) | Stereo image data transmitting apparatus and stereo image data receiving apparatus | |
US20140078248A1 (en) | Transmitting apparatus, transmitting method, receiving apparatus, and receiving method | |
JP5682149B2 (ja) | 立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法 | |
WO2013005571A1 (ja) | 送信装置、送信方法および受信装置 | |
WO2012057048A1 (ja) | 立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法 | |
WO2013011834A1 (ja) | 送信装置、送信方法および受信装置 | |
WO2012026342A1 (ja) | 立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法 | |
WO2012063675A1 (ja) | 立体画像データ送信装置、立体画像データ送信方法および立体画像データ受信装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20100624 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20100909 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20110420 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20110426 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20110627 |
|
A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A712 Effective date: 20111012 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20120214 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20120227 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 4952657 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20150323 Year of fee payment: 3 |