JP2001285895A - 画像データ符号化装置及びその方法 - Google Patents
画像データ符号化装置及びその方法Info
- Publication number
- JP2001285895A JP2001285895A JP2000092646A JP2000092646A JP2001285895A JP 2001285895 A JP2001285895 A JP 2001285895A JP 2000092646 A JP2000092646 A JP 2000092646A JP 2000092646 A JP2000092646 A JP 2000092646A JP 2001285895 A JP2001285895 A JP 2001285895A
- Authority
- JP
- Japan
- Prior art keywords
- image data
- encoding
- perspective information
- parameter
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Image Processing (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
- Image Analysis (AREA)
Abstract
(57)【要約】
【課題】 ３次元画像データを符号化する際に、所望の
データ量おける視点に近い領域での画質を高める。 【解決手段】 右眼画像及び左眼画像から視差情報を検
出する。得られた視差情報の大小により右目左目それぞ
れの画像の遠近情報を検出する。遠近情報により視点に
近い領域と遠い領域とに分割し、近い領域に対してはデ
ータ圧縮度を減少させ、逆に遠い領域に対してはデータ
圧縮度を増大させるように符号化パラメータ（量子化値
及び動き探索範囲）を設定、制御する。
データ量おける視点に近い領域での画質を高める。 【解決手段】 右眼画像及び左眼画像から視差情報を検
出する。得られた視差情報の大小により右目左目それぞ
れの画像の遠近情報を検出する。遠近情報により視点に
近い領域と遠い領域とに分割し、近い領域に対してはデ
ータ圧縮度を減少させ、逆に遠い領域に対してはデータ
圧縮度を増大させるように符号化パラメータ（量子化値
及び動き探索範囲）を設定、制御する。
Description
【０００１】
【発明の属する技術分野】本発明は３次元画像データな
どの複数種類の多眼画像データを符号化する画像データ
符号化装置及びその方法に関する。
どの複数種類の多眼画像データを符号化する画像データ
符号化装置及びその方法に関する。
【０００２】
【従来の技術】従来から３次元画像データを符号化する
際に、画像データの一方、例えば右チャンネル（以下
「Ｒｃｈ」と示す。）画像データを参照して他方のデー
タ、例えば左チャンネル（以下「Ｌｃｈ」と示す。）画
像データを符号化することが行なわれている。
際に、画像データの一方、例えば右チャンネル（以下
「Ｒｃｈ」と示す。）画像データを参照して他方のデー
タ、例えば左チャンネル（以下「Ｌｃｈ」と示す。）画
像データを符号化することが行なわれている。
【０００３】一般に、３次元画像を処理する場合、左画
像と右画像とは相関が高いため、Ｌｃｈの符号化結果を
利用してＲｃｈの符号化を行なうことができる。
像と右画像とは相関が高いため、Ｌｃｈの符号化結果を
利用してＲｃｈの符号化を行なうことができる。
【０００４】図１で示されるようにＬｃｈの画像とＲｃ
ｈの画像は相関が高く、図中ＲｃｈのＡの部分を符号化
する際には、Ａに対応する位置Ａ’の近傍エリアＣ内で
最も類似する部分Ｂを検出し、Ａ’とＢとの変位量（Ｍ
Ｖ）と差分値（Ａ−Ｂ）を用いて符合化することができ
る。
ｈの画像は相関が高く、図中ＲｃｈのＡの部分を符号化
する際には、Ａに対応する位置Ａ’の近傍エリアＣ内で
最も類似する部分Ｂを検出し、Ａ’とＢとの変位量（Ｍ
Ｖ）と差分値（Ａ−Ｂ）を用いて符合化することができ
る。
【０００５】そのため、３次元画像の符号化は、図２に
より符号化を行うことになる。図２において、Ｌｃｈ画
像データはＬｃｈ符号化部により符号化し、Ｒｃｈ画像
データはＬｃｈ符号化部の符号化結果を復号した復号画
像データと相関をとり符号化する。その後、Ｌｃｈ、Ｒ
ｃｈそれぞれに符号化された画像符号データは多重化部
により多重化され、Ｌｃｈ、Ｒｃｈ符号化データとして
出力される。
より符号化を行うことになる。図２において、Ｌｃｈ画
像データはＬｃｈ符号化部により符号化し、Ｒｃｈ画像
データはＬｃｈ符号化部の符号化結果を復号した復号画
像データと相関をとり符号化する。その後、Ｌｃｈ、Ｒ
ｃｈそれぞれに符号化された画像符号データは多重化部
により多重化され、Ｌｃｈ、Ｒｃｈ符号化データとして
出力される。
【０００６】また、符号化に際してＭＰＥＧ規格を用い
た場合、多眼画像プロファイル（Ｍｕｌｔｉ−ｖｉｅｗ
Ｐｒｏｆｉｌｅ）と定義され、図３により符号化を行
なうことになる。図３において、Ｌｃｈ画像データ及び
Ｒｃｈ画像データはＤＣＴ変換、量子化される。その後
可変長符号化部により符号化され、多重化部で多重化さ
れＬｃｈ、Ｒｃｈ画像符号データとして出力される。ま
た、量子化部で量子化された画像データは復号化（逆量
子化、逆ＤＣＴ変換）が行われ、フレームメモリに書き
込まれる。フレーム間データの動き（動きベクトル）を
検出する動き補償部及びＬｃｈ画像データとＲｃｈ画像
データとの視差（視差ベクトル）を検出する視差補償部
では、入力された画像データと対応する復号画像データ
を読み出す。
た場合、多眼画像プロファイル（Ｍｕｌｔｉ−ｖｉｅｗ
Ｐｒｏｆｉｌｅ）と定義され、図３により符号化を行
なうことになる。図３において、Ｌｃｈ画像データ及び
Ｒｃｈ画像データはＤＣＴ変換、量子化される。その後
可変長符号化部により符号化され、多重化部で多重化さ
れＬｃｈ、Ｒｃｈ画像符号データとして出力される。ま
た、量子化部で量子化された画像データは復号化（逆量
子化、逆ＤＣＴ変換）が行われ、フレームメモリに書き
込まれる。フレーム間データの動き（動きベクトル）を
検出する動き補償部及びＬｃｈ画像データとＲｃｈ画像
データとの視差（視差ベクトル）を検出する視差補償部
では、入力された画像データと対応する復号画像データ
を読み出す。
【０００７】その後、入力された画像データと対応する
復号画像データとの差分を取り、ＤＣＴ部に供給され
る。また、量子化制御部は多重化部で出力されたＬ、Ｒ
ｃｈ画像符号データにより、Ｌｃｈ、Ｒｃｈそれぞれの
量子化部での量子化値の制御を行っている。
復号画像データとの差分を取り、ＤＣＴ部に供給され
る。また、量子化制御部は多重化部で出力されたＬ、Ｒ
ｃｈ画像符号データにより、Ｌｃｈ、Ｒｃｈそれぞれの
量子化部での量子化値の制御を行っている。
【０００８】
【発明が解決しようとする課題】一般に、３次元画像の
場合、図４で示されるように、視点に近い領域は時間的
に変化するデータ間の動きが大きく、より鮮明であり、
符号量が増大する。
場合、図４で示されるように、視点に近い領域は時間的
に変化するデータ間の動きが大きく、より鮮明であり、
符号量が増大する。
【０００９】しかしながら、図３から明らかなように、
符号化パラメータである量子化値は、量子化制御におい
て、可変長符号化され、多重化されたＬｃｈ、Ｒｃｈ画
像符号データから所望のデータ量になるように量子化値
を適宜制御されている。すなわち、出力されたＬｃｈ、
Ｒｃｈ画像符号データ量が所望のデータ量以上の場合に
は量子化部での量子化値を増大させ、データ圧縮度を増
大させている。
符号化パラメータである量子化値は、量子化制御におい
て、可変長符号化され、多重化されたＬｃｈ、Ｒｃｈ画
像符号データから所望のデータ量になるように量子化値
を適宜制御されている。すなわち、出力されたＬｃｈ、
Ｒｃｈ画像符号データ量が所望のデータ量以上の場合に
は量子化部での量子化値を増大させ、データ圧縮度を増
大させている。
【００１０】フレーム間の画像データの動き（動きベク
トル）を検出する動き補償を行う際には固定の動き探索
範囲より、動き補償を行なっている。
トル）を検出する動き補償を行う際には固定の動き探索
範囲より、動き補償を行なっている。
【００１１】そのため、視点に近い領域の画像データを
符号化した際には、動きが大きいため、固定の動き探索
範囲では探索範囲が不十分であり、差分値の符号化デー
タ量が大きくなる。また、より鮮明であるため、符号化
データ量が大きくなる。
符号化した際には、動きが大きいため、固定の動き探索
範囲では探索範囲が不十分であり、差分値の符号化デー
タ量が大きくなる。また、より鮮明であるため、符号化
データ量が大きくなる。
【００１２】そのため、量子化値制御において、所望の
Ｌｃｈ、Ｒｃｈ画像符号データ量では視点に近い領域の
量子化値は大きくなり、低画質となってしまう問題が生
じる。
Ｌｃｈ、Ｒｃｈ画像符号データ量では視点に近い領域の
量子化値は大きくなり、低画質となってしまう問題が生
じる。
【００１３】
【課題を解決するための手段】上記従来技術の有する問
題を解決するために、本発明は、まず、第１の画像デー
タを参照しながら第２の画像データを符号化することに
より複数の多眼画像データを符号化する装置であって、
前記第１の画像データと前記第２の画像データから画像
の遠近情報を得る遠近情報検出手段と、前記の遠近情報
検出手段で得られた遠近情報により前記第１の画像デー
タの第1符号化パラメータを設定する第１符号化パラメ
ータ設定手段と、前記遠近情報を考慮し前記第２の画像
データの第２符号化パラメータを設定する第２符号化パ
ラメータ設定手段と、前記第１の画像データを符号化す
る第１符号化手段と、前記第２の画像データを符号化す
る第２符号化手段とを有することを特徴とする。従来技
術のように、固定の値や符号化し、多重化された画像符
号データのみで符号化パラメータ（動き探索範囲及び量
子化値）を設定するのではなく、画像の遠近情報を考慮
して符号化パラメータを設定することで、視点に近い領
域の高画質化が可能となる。
題を解決するために、本発明は、まず、第１の画像デー
タを参照しながら第２の画像データを符号化することに
より複数の多眼画像データを符号化する装置であって、
前記第１の画像データと前記第２の画像データから画像
の遠近情報を得る遠近情報検出手段と、前記の遠近情報
検出手段で得られた遠近情報により前記第１の画像デー
タの第1符号化パラメータを設定する第１符号化パラメ
ータ設定手段と、前記遠近情報を考慮し前記第２の画像
データの第２符号化パラメータを設定する第２符号化パ
ラメータ設定手段と、前記第１の画像データを符号化す
る第１符号化手段と、前記第２の画像データを符号化す
る第２符号化手段とを有することを特徴とする。従来技
術のように、固定の値や符号化し、多重化された画像符
号データのみで符号化パラメータ（動き探索範囲及び量
子化値）を設定するのではなく、画像の遠近情報を考慮
して符号化パラメータを設定することで、視点に近い領
域の高画質化が可能となる。
【００１４】ここで、前記遠近情報検出手段は、第１の
画像データと第２の画像データの視差情報により画像の
遠近情報を検出し、第１符号化パラメータ設定手段と第
２符号化パラメータ設定手段は、前記遠近情報に基づい
て、符号化パラメータである動き探索範囲パラメータを
設定し、前記遠近情報と符号化し多重化された画像符号
データにより符号化パラメータである量子化値を設定す
る。また前記の第１の画像データと第２の画像データ
は、Ｒｃｈ画像データとＬｃｈ画像データとすることが
できる。
画像データと第２の画像データの視差情報により画像の
遠近情報を検出し、第１符号化パラメータ設定手段と第
２符号化パラメータ設定手段は、前記遠近情報に基づい
て、符号化パラメータである動き探索範囲パラメータを
設定し、前記遠近情報と符号化し多重化された画像符号
データにより符号化パラメータである量子化値を設定す
る。また前記の第１の画像データと第２の画像データ
は、Ｒｃｈ画像データとＬｃｈ画像データとすることが
できる。
【００１５】また、本発明は、第１の画像データを参照
しながら第２の画像データを符号化することにより複数
の多眼画像データを符号化する方法であって、前記第１
の画像データと前記の第２の画像データから画像の遠近
情報を得る遠近情報検出ステップと、前記の遠近情報検
出ステップで得られた遠近情報により前記第１の画像デ
ータの第1符号化パラメータを設定する第１符号化パラ
メータ設定ステップと、前記遠近情報を考慮して前記第
２の画像データの第２符号化パラメータを設定する第２
符号化パラメータ設定ステップと、前記第１の画像デー
タを符号化する第１符号化ステップと、前記第２の画像
データを符号化する第２符号化ステップとを有すること
を特徴とする。この発明によっても、従来技術のように
固定の値や符号化し多重化された画像符号データのみで
符号化パラメータ（動き探索範囲及び量子化値）を設定
するのではなく画像の遠近情報を考慮して符号化パラメ
ータを設定することで、視点に近い領域の高画質化が可
能となる。
しながら第２の画像データを符号化することにより複数
の多眼画像データを符号化する方法であって、前記第１
の画像データと前記の第２の画像データから画像の遠近
情報を得る遠近情報検出ステップと、前記の遠近情報検
出ステップで得られた遠近情報により前記第１の画像デ
ータの第1符号化パラメータを設定する第１符号化パラ
メータ設定ステップと、前記遠近情報を考慮して前記第
２の画像データの第２符号化パラメータを設定する第２
符号化パラメータ設定ステップと、前記第１の画像デー
タを符号化する第１符号化ステップと、前記第２の画像
データを符号化する第２符号化ステップとを有すること
を特徴とする。この発明によっても、従来技術のように
固定の値や符号化し多重化された画像符号データのみで
符号化パラメータ（動き探索範囲及び量子化値）を設定
するのではなく画像の遠近情報を考慮して符号化パラメ
ータを設定することで、視点に近い領域の高画質化が可
能となる。
【００１６】ここで、前記遠近情報検出ステップは、第
１の画像データと第２の画像データとの視差情報により
画像の遠近情報を検出し、第１の符号化パラメータ設定
ステップと第２符号化パラメータ設定ステップは、前記
遠近情報に基づいて、符号化パラメータである動き探索
範囲パラメータを設定し、前記遠近情報と符号化され、
多重化された画像符号データにより符号化パラメータで
ある量子価値を設定する。
１の画像データと第２の画像データとの視差情報により
画像の遠近情報を検出し、第１の符号化パラメータ設定
ステップと第２符号化パラメータ設定ステップは、前記
遠近情報に基づいて、符号化パラメータである動き探索
範囲パラメータを設定し、前記遠近情報と符号化され、
多重化された画像符号データにより符号化パラメータで
ある量子価値を設定する。
【００１７】
【発明の実施の形態】以下、図面に基づき本発明の実施
形態について２種類の多眼画像データ(Ｌｃｈ画像デー
タとＲｃｈ画像データ）をＭＰＥＧ規格に基づき符号化
する場合を例にとり説明する。
形態について２種類の多眼画像データ(Ｌｃｈ画像デー
タとＲｃｈ画像データ）をＭＰＥＧ規格に基づき符号化
する場合を例にとり説明する。
【００１８】図５は、本実施形態における画像データ符
号化装置の全体構成ブロック図を示している。前処理部
１と遠近情報検出部２とＬｃｈ符号化パラメータ設定部
３とＬｃｈ符号化部４及びＲｃｈ符号化パラメータ設定
部５とＲｃｈ符号化部６と多重化部７が設けており、そ
れぞれＬｃｈ画像データ及びＲｃｈ画像データを入力し
て圧縮符号化を行う。
号化装置の全体構成ブロック図を示している。前処理部
１と遠近情報検出部２とＬｃｈ符号化パラメータ設定部
３とＬｃｈ符号化部４及びＲｃｈ符号化パラメータ設定
部５とＲｃｈ符号化部６と多重化部７が設けており、そ
れぞれＬｃｈ画像データ及びＲｃｈ画像データを入力し
て圧縮符号化を行う。
【００１９】前処理部１はＭＰＥＧ規格に基づき符号化
するため、画像データの並び替え及び走査変換と１６×
１６画素のマクロブロック化が行われる。遠近情報検出
部２はＬｃｈ画像データとＲｃｈ画像データから画像の
遠近情報を検出し、Ｌｃｈ、Ｒｃｈそれぞれの符号化パ
ラメータ設定部３、５に対し、Ｌｃｈ、Ｒｃｈそれぞれ
の画像データの遠近情報を供給する。
するため、画像データの並び替え及び走査変換と１６×
１６画素のマクロブロック化が行われる。遠近情報検出
部２はＬｃｈ画像データとＲｃｈ画像データから画像の
遠近情報を検出し、Ｌｃｈ、Ｒｃｈそれぞれの符号化パ
ラメータ設定部３、５に対し、Ｌｃｈ、Ｒｃｈそれぞれ
の画像データの遠近情報を供給する。
【００２０】Ｌｃｈ、Ｒｃｈそれぞれの符号化パラメー
タ設定部３、５は遠近情報検出部２で検出された遠近情
報と多重化部７で多重化されたＬｃｈ、Ｒｃｈ符号化デ
ータのデータ量からＬｃｈ、Ｒｃｈそれぞれの符号化部
４、６に符号化パラメータをフィードバックする。ま
た、Ｒｃｈ符号化部６は、Ｌｃｈ符号化部４で符号化さ
れたＬｃｈ画像符号データを参照しつつＲｃｈ画像デー
タの符号化を行う。そのため、遠近情報検出部２は視差
ベクトルを、Ｌｃｈ符号化部４はＬｃｈ復号画像データ
をＲｃｈ符号化部６に供給する。
タ設定部３、５は遠近情報検出部２で検出された遠近情
報と多重化部７で多重化されたＬｃｈ、Ｒｃｈ符号化デ
ータのデータ量からＬｃｈ、Ｒｃｈそれぞれの符号化部
４、６に符号化パラメータをフィードバックする。ま
た、Ｒｃｈ符号化部６は、Ｌｃｈ符号化部４で符号化さ
れたＬｃｈ画像符号データを参照しつつＲｃｈ画像デー
タの符号化を行う。そのため、遠近情報検出部２は視差
ベクトルを、Ｌｃｈ符号化部４はＬｃｈ復号画像データ
をＲｃｈ符号化部６に供給する。
【００２１】図６は、遠近情報検出部２の構成ブロック
図を示している。
図を示している。
【００２２】まず、入力されたＬｃｈ画像データとＲｃ
ｈ画像データより視差検出部１１においてＲｃｈ画像デ
ータのマクロブロックともっとも良く一致するＬｃｈ画
像データのマクロブロックを検索し、視差ベクトルを検
出する。次に遠近判定部１２で視差ベクトルの大小によ
り図７で示すようにマクロブロックごとにＬｃｈ、Ｒｃ
ｈ画像データそれぞれに対して遠近情報を割り当てる。
ｈ画像データより視差検出部１１においてＲｃｈ画像デ
ータのマクロブロックともっとも良く一致するＬｃｈ画
像データのマクロブロックを検索し、視差ベクトルを検
出する。次に遠近判定部１２で視差ベクトルの大小によ
り図７で示すようにマクロブロックごとにＬｃｈ、Ｒｃ
ｈ画像データそれぞれに対して遠近情報を割り当てる。
【００２３】図８は、Ｌｃｈ符号化パラメータ設定部３
の構成ブロック図を示している。動き探索範囲設定部２
１では入力されたＬｃｈの遠近情報に対して、図９のよ
うに、視点に近いマクロブロックに対しては動き探索範
囲設定パラメータを大きく、それとは逆に遠いマクロブ
ロックに対しては動き探索範囲設定パラメータを小さく
設定する。また、量子化値設定部２２では、入力された
Ｌｃｈ，Ｒｃｈ符号化データ量が所望のデータ量となる
ように量子化値を決定し、入力された遠近情報からマク
ロブロックごとに量子化値の重み付けを行う。
の構成ブロック図を示している。動き探索範囲設定部２
１では入力されたＬｃｈの遠近情報に対して、図９のよ
うに、視点に近いマクロブロックに対しては動き探索範
囲設定パラメータを大きく、それとは逆に遠いマクロブ
ロックに対しては動き探索範囲設定パラメータを小さく
設定する。また、量子化値設定部２２では、入力された
Ｌｃｈ，Ｒｃｈ符号化データ量が所望のデータ量となる
ように量子化値を決定し、入力された遠近情報からマク
ロブロックごとに量子化値の重み付けを行う。
【００２４】また、図５に示したＲｃｈ符号化パラメー
タ設定部５の構成は上述したＬｃｈ符号化パラメータ設
定部３と同一であるため、その説明を割愛する。
タ設定部５の構成は上述したＬｃｈ符号化パラメータ設
定部３と同一であるため、その説明を割愛する。
【００２５】図１０は、Ｌｃｈ符号化部４の構成ブロッ
ク図を示している。ＭＰＥＧ規格では、前方予測符号
化、後方予測符号化、双方向予測符号化が行われる。そ
のため、差分器３１にて時間的に後の画面や時間的に前
の画面でもっとも良く一致するとして検索されたマクロ
ブロックとの差分を演算する。尚、イントラマクロブロ
ックの場合は差分演算を行わずそのままＤＣＴ部３２に
供給される。
ク図を示している。ＭＰＥＧ規格では、前方予測符号
化、後方予測符号化、双方向予測符号化が行われる。そ
のため、差分器３１にて時間的に後の画面や時間的に前
の画面でもっとも良く一致するとして検索されたマクロ
ブロックとの差分を演算する。尚、イントラマクロブロ
ックの場合は差分演算を行わずそのままＤＣＴ部３２に
供給される。
【００２６】差分値又はイントラマクロブロック画像デ
ータは８×８画素のブロック単位でＤＣＴ部３２でＤＣ
Ｔ変換され、得られたＤＣＴ係数は量子化部３３に供給
される。量子化部３３では、Ｌｃｈ符号化パラメータ設
定部３で供給された量子化値を用いて量子化し、可変長
符号化部３４に供給する。可変長符号化部３４では連続
するゼロデータの個数と非ゼロデータのレベルをあわせ
てコード化する可変長符号化を行う。
ータは８×８画素のブロック単位でＤＣＴ部３２でＤＣ
Ｔ変換され、得られたＤＣＴ係数は量子化部３３に供給
される。量子化部３３では、Ｌｃｈ符号化パラメータ設
定部３で供給された量子化値を用いて量子化し、可変長
符号化部３４に供給する。可変長符号化部３４では連続
するゼロデータの個数と非ゼロデータのレベルをあわせ
てコード化する可変長符号化を行う。
【００２７】一方、量子化されたＤＣＴ係数は逆量子化
部３５及び逆ＤＣＴ部３６にも供給されて復号され、復
号画像データはフレームメモリ３７に格納される。な
お、逆量子化部３５及び逆ＤＣＴ部３６で復号画像デー
タが差分量の場合、フレームメモリ３７内の復号画像デ
ータは、加算器３８で加算された後に格納される。この
ように復号された復号画像データは動き補償部３９とＲ
ｃｈ符号化部６に供給される。
部３５及び逆ＤＣＴ部３６にも供給されて復号され、復
号画像データはフレームメモリ３７に格納される。な
お、逆量子化部３５及び逆ＤＣＴ部３６で復号画像デー
タが差分量の場合、フレームメモリ３７内の復号画像デ
ータは、加算器３８で加算された後に格納される。この
ように復号された復号画像データは動き補償部３９とＲ
ｃｈ符号化部６に供給される。
【００２８】動き補償部３９では符号化すべき入力画像
データと復号画像データとに基づいて、カレントマクロ
ブロック（符号化すべき画像データ）ともっとも良く一
致するマクロブロックをＬｃｈ符号化パラメータ設定部
３で供給された動き探索範囲パラメータを用いて検索
し、動きベクトルを検出する。検出された動きベクトル
は可変長符号化部３４に供給される。
データと復号画像データとに基づいて、カレントマクロ
ブロック（符号化すべき画像データ）ともっとも良く一
致するマクロブロックをＬｃｈ符号化パラメータ設定部
３で供給された動き探索範囲パラメータを用いて検索
し、動きベクトルを検出する。検出された動きベクトル
は可変長符号化部３４に供給される。
【００２９】また、フレームメモリ３７の復号画像デー
タから動きベクトルで指定される対応マクロブロックを
出力し、差分器３１にてカレントマクロブロックとの差
分が演算される。
タから動きベクトルで指定される対応マクロブロックを
出力し、差分器３１にてカレントマクロブロックとの差
分が演算される。
【００３０】図１１は、Ｒｃｈ符号化部６の構成ブロッ
ク図を示している。Ｒｃｈ符号化部６の構成は前述のＬ
ｃｈ符号化部４とほぼ同一であるが、Ｒｃｈ符号化部６
ではＬｃｈ符号化部４と同様に時間的に前後する画像デ
ータ間の動きベクトル及び差分値を用いて圧縮符号化す
るとともに、図１で示したようにＬｃｈ復号画像データ
との動き量（視差）及び差分値に基づいて符号化する。
そのため、逆量子化部３５及び逆ＤＣＴ部３６で復号さ
れる復号画像データが視差の差分量の場合は、フレーム
メモリ３７内の復号画像データが加算器４２で加算され
た後に格納される。このように復号された復号画像デー
タは視差補償部４３に供給される。
ク図を示している。Ｒｃｈ符号化部６の構成は前述のＬ
ｃｈ符号化部４とほぼ同一であるが、Ｒｃｈ符号化部６
ではＬｃｈ符号化部４と同様に時間的に前後する画像デ
ータ間の動きベクトル及び差分値を用いて圧縮符号化す
るとともに、図１で示したようにＬｃｈ復号画像データ
との動き量（視差）及び差分値に基づいて符号化する。
そのため、逆量子化部３５及び逆ＤＣＴ部３６で復号さ
れる復号画像データが視差の差分量の場合は、フレーム
メモリ３７内の復号画像データが加算器４２で加算され
た後に格納される。このように復号された復号画像デー
タは視差補償部４３に供給される。
【００３１】視差補償部４３で遠近情報検出部２から供
給された視差ベクトルが可変長符号化部３４に供給され
る。また、フレームメモリ３７の復号画像データから視
差ベクトルで指定される対応マクロブロックを出力し、
差分器４１にてカレントマクロブロックとの差分が演算
される。その後、Ｌｃｈ符号化部４同様、前方予測符号
化、及び後方予測符号化を行うため、差分器３１に供給
される。
給された視差ベクトルが可変長符号化部３４に供給され
る。また、フレームメモリ３７の復号画像データから視
差ベクトルで指定される対応マクロブロックを出力し、
差分器４１にてカレントマクロブロックとの差分が演算
される。その後、Ｌｃｈ符号化部４同様、前方予測符号
化、及び後方予測符号化を行うため、差分器３１に供給
される。
【００３２】図１２は、本実施形態における符号化方法
における処理の流れを示している。全体の構成として、
前処理ステップ５１、遠近情報検出ステップ５２、Ｌｃ
ｈ符号化パラメータ設定ステップ５３、Ｌｃｈ符号化ス
テップ５４、Ｒｃｈ符号化パラメータ設定ステップ５
５、Ｒｃｈ符号化ステップ５６、多重化ステップ５７か
ら構成されている。各ステップの処理については、前記
の画像データ符号化装置と同一であるため、その説明は
割愛する。
における処理の流れを示している。全体の構成として、
前処理ステップ５１、遠近情報検出ステップ５２、Ｌｃ
ｈ符号化パラメータ設定ステップ５３、Ｌｃｈ符号化ス
テップ５４、Ｒｃｈ符号化パラメータ設定ステップ５
５、Ｒｃｈ符号化ステップ５６、多重化ステップ５７か
ら構成されている。各ステップの処理については、前記
の画像データ符号化装置と同一であるため、その説明は
割愛する。
【００３３】また、本実施形態においては２種類の多眼
画像データを用いているが、任意のｎ種類の多眼画像デ
ータを符号化する任意の符号化方式についても適用でき
ることは言うまでもなく、符号化方法としてＭＰＥＧ以
外の方法も可能である。
画像データを用いているが、任意のｎ種類の多眼画像デ
ータを符号化する任意の符号化方式についても適用でき
ることは言うまでもなく、符号化方法としてＭＰＥＧ以
外の方法も可能である。
【００３４】
【発明の効果】以上説明したように、本発明により複数
種類の多眼画像データを符号化する際は、所望のデータ
量において視点に近い領域の画質を劣化させることなく
符号化を行うことが可能となる。
種類の多眼画像データを符号化する際は、所望のデータ
量において視点に近い領域の画質を劣化させることなく
符号化を行うことが可能となる。
【図１】３次元画像データのＬｃｈ画像データとＲｃｈ
画像データの関係を示す説明図である。
画像データの関係を示す説明図である。
【図２】従来技術の全体構成ブロック図である。
【図３】従来技術の符号化装置の構成ブロック図であ
る。
る。
【図４】従来技術の問題点を説明するための図である。
【図５】本発明の実施形態における画像データ符号化装
置の全体構成ブロック図である。
置の全体構成ブロック図である。
【図６】図５における遠近情報検出部の構成ブロック図
である。
である。
【図７】遠近情報の割り当ての説明図である。
【図８】図５における符号化パラメータ設定部の構成ブ
ロック図である。
ロック図である。
【図９】符号化パラメータ設定の説明図である。
【図１０】図５におけるＬｃｈ符号化部の構成ブロック
図である。
図である。
【図１１】図５におけるＲｃｈ符号化部の構成ブロック
図である。
図である。
【図１２】本発明の実施形態における画像データ符号化
方法の処理手順の図である。
方法の処理手順の図である。
１ 前処理部、２ 遠近情報検出部、３ Ｌｃｈ符号化
パラメータ設定部、４Ｌｃｈ符号化部、５ Ｒｃｈ符号
化パラメータ設定部、６ Ｒｃｈ符号化部、７多重化
部、１１ 視差検出部、１２ 遠近判定部、２１ 動き
探索範囲設定部、２２ 量子化値設定部、３１ 差分
器、３２ ＤＣＴ部、３３ 量子化部、３４ 可変長符
号化部、３５ 逆量子化部、３６ 逆ＤＣＴ部、３７
フレームメモリ、３８ 加算器、３９ 動き補償部、４
１ 差分器、４２ 加算器、４３視差補償部、５１ 前
処理ステップ、５２ 遠近情報検出ステップ、５３ Ｌ
ｃｈ符号化パラメータ設定ステップ、５４ Ｌｃｈ符号
化ステップ、５５ Ｒｃｈ符号化パラメータ設定ステッ
プ、５６ Ｒｃｈ符号化ステップ、５７ 多重化ステッ
プ
パラメータ設定部、４Ｌｃｈ符号化部、５ Ｒｃｈ符号
化パラメータ設定部、６ Ｒｃｈ符号化部、７多重化
部、１１ 視差検出部、１２ 遠近判定部、２１ 動き
探索範囲設定部、２２ 量子化値設定部、３１ 差分
器、３２ ＤＣＴ部、３３ 量子化部、３４ 可変長符
号化部、３５ 逆量子化部、３６ 逆ＤＣＴ部、３７
フレームメモリ、３８ 加算器、３９ 動き補償部、４
１ 差分器、４２ 加算器、４３視差補償部、５１ 前
処理ステップ、５２ 遠近情報検出ステップ、５３ Ｌ
ｃｈ符号化パラメータ設定ステップ、５４ Ｌｃｈ符号
化ステップ、５５ Ｒｃｈ符号化パラメータ設定ステッ
プ、５６ Ｒｃｈ符号化ステップ、５７ 多重化ステッ
プ
───────────────────────────────────────────────────── フロントページの続き Ｆターム(参考） 5B057 CA13 CA16 CB13 CB18 CG05 5C059 KK02 LB18 MA00 MA04 MA05 MA23 MA31 MC16 ME01 NN03 NN28 PP04 PP13 PP26 RB06 RB10 RC11 RC16 SS12 UA02 UA33 5C061 AB04 AB08 5J064 AA01 AA05 BA13 BA15 BA16 BB01 BC02 BC08 BD01
Claims (8)
- 【請求項１】 第１の画像データを参照しながら第２の
画像データを符号化することにより複数の多眼画像デー
タを符号化する装置であって、 前記第１の画像データと前記第２の画像データから画像
の遠近情報を得る遠近情報検出手段と、 前記の遠近情報検出手段で得られた遠近情報を考慮して
前記第１の画像データの第1符号化パラメータを設定す
る第１符号化パラメータ設定手段と、 前記遠近情報を考慮して前記第２の画像データの第２符
号化パラメータを設定する第２符号化パラメータ設定手
段と、 前記第1符号化パラメータに従って、前記第１の画像デ
ータを符号化する第１符号化手段と、及び前記第２符号
化パラメータに従って、前記第２の画像データを符号化
する第２符号化手段と、 を有することを特徴とする画像データ符号化装置。 - 【請求項２】 請求項１記載の装置において、 前記遠近情報検出手段は、前記第１の画像データと第２
の画像データの視差情報に基づいて遠近情報を検出する
ことを特徴とする画像データ符号化装置。 - 【請求項３】 請求項１記載の装置において、 前記第１符号化パラメータ設定手段と第２パラメータ設
定手段は、 前記遠近情報に基づいて符号化パラメータである、画像
データのフレーム間での動きを検出する際の動き探索範
囲パラメータを設定し、 前記遠近情報と前記第1符号化手段と第２符号化手段に
より符号化された画像符号データに基づき、符号化パラ
メータである、符号化する際の量子化値パラメータを設
定することを特徴とする画像データ符号化装置。 - 【請求項４】 請求項１〜３のいずれかに記載の装置に
おいて、 前記第１の画像データと第２の画像データは、右眼（右
チャンネル）画像データと左眼（左チャンネル）画像デ
ータであることを特徴とする画像データ符号化装置。 - 【請求項５】 第１の画像データを参照しながら第２の
画像データを符号化することにより複数の多眼画像デー
タを符号化する方法であって、 前記第１の画像データと第２の画像データから画像の遠
近情報を得る遠近情報検出ステップと、 前記の遠近情報検出ステップで得られた遠近情報を考慮
し前記第１の画像データの第1符号化パラメータを設定
する第１符号化パラメータ設定ステップと、 前記遠近情報を考慮し前記第２の画像データの第２符号
化パラメータを設定する第２符号化パラメータ設定ステ
ップと、 前記第1符号化パラメータに従って、前記第１の画像デ
ータを符号化する第１符号化ステップと、 前記第２符号化パラメータに従って、前記第２の画像デ
ータを符号化する第２符号化ステップと、 を有することを特徴とする画像データ符号化方法。 - 【請求項６】 請求項５記載の方法において、 前記遠近情報検出ステップは、前記第１の画像データと
第２の画像データの視差情報に基づいて遠近情報を検出
することを特徴とする画像データ符号化方法。 - 【請求項７】 請求項５記載の方法において、 前記第１符号化パラメータ設定ステップと第２パラメー
タ設定ステップは、 前記遠近情報に基づいて符号化パラメータである、画像
データのフレーム間での動きを検出する際の動き探索範
囲パラメータと、 前記遠近情報と前記第１符号化ステップと第２符号化ス
テップにより符号化された画像符号データに基づき、符
号化パラメータである符号化する際の量子化値パラメー
タを設定することを特徴とする画像データ符号化方法。 - 【請求項８】 請求項５〜７のいずれかに記載の方法に
おいて、 前記第１の画像データと第２の画像データは、右（右チ
ャンネル）画像データと左（左チャンネル）画像データ
であることを特徴とする画像データ符号化方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2000092646A JP2001285895A (ja) | 2000-03-30 | 2000-03-30 | 画像データ符号化装置及びその方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2000092646A JP2001285895A (ja) | 2000-03-30 | 2000-03-30 | 画像データ符号化装置及びその方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2001285895A true JP2001285895A (ja) | 2001-10-12 |
Family
ID=18607944
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2000092646A Pending JP2001285895A (ja) | 2000-03-30 | 2000-03-30 | 画像データ符号化装置及びその方法 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2001285895A (ja) |
Cited By (12)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2008167267A (ja) * | 2006-12-28 | 2008-07-17 | Mitsubishi Electric Corp | ステレオ画像符号化装置、ステレオ画像符号化方法及びステレオ画像符号化プログラム |
| WO2009001791A1 (ja) * | 2007-06-25 | 2008-12-31 | Nippon Telegraph And Telephone Corporation | 映像符号化方法及び復号方法、それらの装置、それらのプログラム並びにプログラムを記録した記録媒体 |
| JP2009502084A (ja) * | 2005-07-18 | 2009-01-22 | エレクトロニクス アンド テレコミュニケーションズ リサーチ インスチチュート | 時間及び視点間参照映像バッファを活用した予測符号化／復号化装置及びその方法 |
| US7697609B2 (en) | 2003-05-13 | 2010-04-13 | Lg Electronics Inc. | Apparatus and method for encoding and decoding a moving picture using digital watermarking |
| WO2011129164A1 (ja) * | 2010-04-16 | 2011-10-20 | シャープ株式会社 | 多視点画像符号化装置 |
| WO2011139060A2 (en) * | 2010-05-05 | 2011-11-10 | Samsung Electronics Co., Ltd. | Method and system for communication of stereoscopic three dimensional video information |
| WO2011158562A1 (ja) * | 2010-06-14 | 2011-12-22 | シャープ株式会社 | 多視点画像符号化装置 |
| JP2012023662A (ja) * | 2010-07-16 | 2012-02-02 | Sony Corp | 画像処理装置と画像処理方法 |
| JP2012257198A (ja) * | 2011-05-17 | 2012-12-27 | Canon Inc | 立体画像符号化装置、その方法、および立体画像符号化装置を有する撮像装置 |
| JP2013131928A (ja) * | 2011-12-21 | 2013-07-04 | Toshiba Corp | 画像符号化装置および画像符号化方法 |
| JP2013183200A (ja) * | 2012-02-29 | 2013-09-12 | Oki Electric Ind Co Ltd | 動き補償制御装置、動き補償制御プログラム及び符号化装置 |
| US8885721B2 (en) | 2008-07-20 | 2014-11-11 | Dolby Laboratories Licensing Corporation | Encoder optimization of stereoscopic video delivery systems |
-
2000
- 2000-03-30 JP JP2000092646A patent/JP2001285895A/ja active Pending
Cited By (23)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7697609B2 (en) | 2003-05-13 | 2010-04-13 | Lg Electronics Inc. | Apparatus and method for encoding and decoding a moving picture using digital watermarking |
| CN1551639B (zh) * | 2003-05-13 | 2010-06-09 | Lg电子株式会社 | 应用数字水印编码和解码运动图像的装置及其方法 |
| US9154786B2 (en) | 2005-07-18 | 2015-10-06 | Electronics And Telecommunications Research Institute | Apparatus of predictive coding/decoding using view-temporal reference picture buffers and method using the same |
| JP2009502084A (ja) * | 2005-07-18 | 2009-01-22 | エレクトロニクス アンド テレコミュニケーションズ リサーチ インスチチュート | 時間及び視点間参照映像バッファを活用した予測符号化／復号化装置及びその方法 |
| US8369406B2 (en) | 2005-07-18 | 2013-02-05 | Electronics And Telecommunications Research Institute | Apparatus of predictive coding/decoding using view-temporal reference picture buffers and method using the same |
| JP2008167267A (ja) * | 2006-12-28 | 2008-07-17 | Mitsubishi Electric Corp | ステレオ画像符号化装置、ステレオ画像符号化方法及びステレオ画像符号化プログラム |
| JP4660463B2 (ja) * | 2006-12-28 | 2011-03-30 | 三菱電機株式会社 | ステレオ画像符号化装置 |
| KR101103723B1 (ko) * | 2007-06-25 | 2012-01-11 | 니폰덴신뎅와 가부시키가이샤 | 영상 부호화 방법 및 복호 방법, 그 장치, 그 프로그램 및 프로그램을 기록한 기록 매체 |
| JP5197591B2 (ja) * | 2007-06-25 | 2013-05-15 | 日本電信電話株式会社 | 映像符号化方法及び復号方法、それらの装置、それらのプログラム並びにプログラムを記録した記録媒体 |
| WO2009001791A1 (ja) * | 2007-06-25 | 2008-12-31 | Nippon Telegraph And Telephone Corporation | 映像符号化方法及び復号方法、それらの装置、それらのプログラム並びにプログラムを記録した記録媒体 |
| US8204118B2 (en) | 2007-06-25 | 2012-06-19 | Nippon Telegraph And Telephone Corporation | Video encoding method and decoding method, apparatuses therefor, programs therefor, and storage media which store the programs |
| RU2444856C2 (ru) * | 2007-06-25 | 2012-03-10 | Ниппон Телеграф Энд Телефон Корпорейшн | Способ кодирования видеосигнала и способ декодирования, устройства для этого и носители хранения информации, которые хранят программы для этого |
| US8885721B2 (en) | 2008-07-20 | 2014-11-11 | Dolby Laboratories Licensing Corporation | Encoder optimization of stereoscopic video delivery systems |
| WO2011129164A1 (ja) * | 2010-04-16 | 2011-10-20 | シャープ株式会社 | 多視点画像符号化装置 |
| WO2011139060A3 (en) * | 2010-05-05 | 2012-03-01 | Samsung Electronics Co., Ltd. | Method and system for communication of stereoscopic three dimensional video information |
| WO2011139060A2 (en) * | 2010-05-05 | 2011-11-10 | Samsung Electronics Co., Ltd. | Method and system for communication of stereoscopic three dimensional video information |
| US8963996B2 (en) | 2010-05-05 | 2015-02-24 | Samsung Electronics Co., Ltd. | Communication of stereoscopic three-dimensional (3D) video information including an uncompressed eye view video frames |
| WO2011158562A1 (ja) * | 2010-06-14 | 2011-12-22 | シャープ株式会社 | 多視点画像符号化装置 |
| JP2012004623A (ja) * | 2010-06-14 | 2012-01-05 | Sharp Corp | 多視点画像符号化装置 |
| JP2012023662A (ja) * | 2010-07-16 | 2012-02-02 | Sony Corp | 画像処理装置と画像処理方法 |
| JP2012257198A (ja) * | 2011-05-17 | 2012-12-27 | Canon Inc | 立体画像符号化装置、その方法、および立体画像符号化装置を有する撮像装置 |
| JP2013131928A (ja) * | 2011-12-21 | 2013-07-04 | Toshiba Corp | 画像符号化装置および画像符号化方法 |
| JP2013183200A (ja) * | 2012-02-29 | 2013-09-12 | Oki Electric Ind Co Ltd | 動き補償制御装置、動き補償制御プログラム及び符号化装置 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US8559515B2 (en) | Apparatus and method for encoding and decoding multi-view video | |
| JP5052134B2 (ja) | 画像符号化方法，画像復号方法，画像符号化装置，画像復号装置，画像符号化プログラムおよび画像復号プログラム | |
| JP4001400B2 (ja) | 動きベクトル検出方法及び動きベクトル検出装置 | |
| KR100751422B1 (ko) | 스테레오스코픽 비디오 부호화 및 복호화 방법, 부호화 및복호화 장치 | |
| US8644386B2 (en) | Method of estimating disparity vector, and method and apparatus for encoding and decoding multi-view moving picture using the disparity vector estimation method | |
| JP3050736B2 (ja) | 動画像符号化装置 | |
| JP4755095B2 (ja) | 映像符号化の符号化側／復号化側に使用される双方向予測方法 | |
| EP1927249B1 (en) | Apparatus and method for encoding and decoding multi-view video | |
| US20070297510A1 (en) | Method and Apparatus for Generating Coded Picture Data and for Decoding Coded Picture Data | |
| US8817871B2 (en) | Adaptive search range method for motion estimation and disparity estimation | |
| US20060274956A1 (en) | Intraprediction method and apparatus using video symmetry and video encoding and decoding method and apparatus | |
| EP1379000A1 (en) | Signal encoding method and apparatus and decoding method and apparatus | |
| KR100738867B1 (ko) | 다시점 동영상 부호화/복호화 시스템의 부호화 방법 및시점간 보정 변이 추정 방법 | |
| JPH10257527A (ja) | ステレオビデオ符号化のための最適ディスパリティ見積 | |
| US6339617B1 (en) | Moving picture compressing apparatus and moving picture compressing method | |
| JPH10191396A (ja) | 中間視点画像生成方法および視差推定方法および画像伝送方法 | |
| JPH10191394A (ja) | 多視点画像符号化装置 | |
| JP2003522432A (ja) | 映像コーディング | |
| JPH11112989A (ja) | 動きベクトル符号化方法及び符号化装置 | |
| JP2001285895A (ja) | 画像データ符号化装置及びその方法 | |
| US6724821B1 (en) | Picture coding apparatus with coding efficiency improved | |
| JPH10191393A (ja) | 多視点画像符号化装置 | |
| KR100254667B1 (ko) | 폐색을 검출하는 방법 및 장치 | |
| WO2006110007A1 (en) | Method for coding in multiview video coding/decoding system | |
| JPH07327242A (ja) | 立体動画像圧縮符号化装置及び立体動画像復号再生装置 |