JP5729825B2 - 画像符号化方法、画像復号方法、画像符号化装置、画像復号装置、画像符号化プログラム及び画像復号プログラム - Google Patents
画像符号化方法、画像復号方法、画像符号化装置、画像復号装置、画像符号化プログラム及び画像復号プログラム Download PDFInfo
- Publication number
- JP5729825B2 JP5729825B2 JP2011209416A JP2011209416A JP5729825B2 JP 5729825 B2 JP5729825 B2 JP 5729825B2 JP 2011209416 A JP2011209416 A JP 2011209416A JP 2011209416 A JP2011209416 A JP 2011209416A JP 5729825 B2 JP5729825 B2 JP 5729825B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- encoding
- region
- prediction
- decoding
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Description
<第1実施形態>
まず、第1実施形態における画像符号化装置について説明する。図1は、本発明の第1実施形態による画像符号化装置の構成を示すブロック図である。図1に示すように、画像符号化装置100は、符号化対象画像入力部101、符号化対象画像メモリ102、デプスマップ入力部103、デプスマップメモリ104、被写体数決定部105、被写体マップ生成部106、予測画像生成部107、予測情報符号化部108、画像信号符号化部109、画像信号復号部110、復号画像メモリ111、および多重化部112を備えている。
E(m)=−Σp|Org[p]−Predm[p]| ・・・(2)
E(m)=−Σp(Org[p]−Predm[p])2 ・・・(3)
E(m)=−‖A・(Org[blk]−Predm[blk])‖ ・・・(4)
E(m)=−D(m)−λR(m) ・・・(5)
次に、第2実施形態における画像符号化装置及び画像復号装置について説明する。第1実施形態では、デプスマップの各画素の値をそのまま用いて被写体マップを生成するため、デプスマップの取得誤差や符号化ノイズの影響を受けて、非常に小さな孤立した領域が1つの被写体と決定されることがある。また、ブロック端にほんの少しだけ被写体が残っている場合なども、同様に非常に小さな領域に対して1つの被写体識別子が対応付けられることになる。そのように生成される小さな領域に対して1つの予測画像生成方法を割り当てる場合、予測効率の改善による符号量削減よりも、予測画像生成方法を符号化するために必要になる符号量増加のほうが多くなるため効率的な符号化を実現することができない。そこで生成された被写体マップSにおいて、微小な被写体画素集合を隣接する被写体と統合してもよい。
次に、第3実施形態における画像符号化装置及び画像復号装置について説明する。第3実施形態においては、小さな領域が1つの被写体として生成されるのを防ぐために、被写体マップを生成する前に、入力されたデプスマップにフィルタをかける。
次に、第4実施形態における画像符号化装置及び画像復号装置について説明する。第1実施形態では、予測画像の生成法を指定する単位を、デプスマップの値の類似性から生成する任意形状の領域分割に従って決定しているが、画像信号の空間相関や時間相関は同じ被写体であっても異なることがあるため、被写体マップによって決定した領域をさらに分割し、得られた小領域ごとに異なる予測画像生成法を指定してもよい。
次に、第5実施形態における画像符号化装置及び画像復号装置について説明する。第1実施形態では、各ブロックに対して被写体数を決定し、それに基づいてブロック内の画素をクラスタリングすることで分割方法を決定しているが、被写体数の代わりに分割規則を与えて、その規則に従ってブロック分割を決定する方法もある。
Claims (20)
- 符号化対象の画像を予め定められた大きさの処理領域に分割し、前記画像における被写体の距離情報を表したデプスマップに基づき前記処理領域ごとに予測符号化を行う画像符号化方法であって、
前記処理領域内に存在する被写体の数を被写体数として設定する被写体数設定ステップと、
前記処理領域に対応するデプスマップを参照して、処理領域内の画素群を前記被写体数と同じ数の分割領域に分割する領域分割ステップと、
前記分割領域ごとに、当該分割領域に含まれる画素群に対する前記画像を予測する方法を設定する予測方法設定ステップと、
前記予測方法設定ステップにおいて設定された予測方法を示す情報を符号化する予測情報符号化ステップと、
前記予測方法設定ステップにおいて設定された予測方法に従って、前記処理領域に対する前記画像の予測画像を生成する予測画像生成ステップと、
前記予測画像を用いて前記処理領域の画像を予測符号化する画像符号化ステップと
を有することを特徴とする画像符号化方法。 - 前記被写体数設定ステップにおいて設定された前記被写体数を符号化する被写体数符号化ステップをさらに有することを特徴とする請求項1に記載の画像符号化方法。
- 符号化対象の画像を予め定められた大きさの処理領域に分割し、前記画像における被写体の距離情報を表したデプスマップに基づき前記処理領域ごとに予測符号化を行う画像符号化方法であって、
前記デプスマップの距離情報を基準に前記処理領域内の画素群の領域分割に使用する規則を設定する領域分割規則設定ステップと、
前記領域分割規則設定ステップにおいて設定された規則に従って、前記処理領域に対するデプスマップを用いて、前記処理領域内の画素群を分割領域に分割する領域分割ステップと、
前記分割領域ごとに、当該分割領域に含まれる画素群に対する前記画像を予測する方法を設定する予測方法設定ステップと、
前記予測方法設定ステップにおいて設定された予測方法を示す情報を符号化する予測情報符号化ステップと、
前記予測方法設定ステップにおいて設定された予測方法に従って、前記処理領域に対する前記画像の予測画像を生成する予測画像生成ステップと、
前記予測画像を用いて前記処理領域の画像を予測符号化する画像符号化ステップと
を有することを特徴とする画像符号化方法。 - 前記領域分割規則設定ステップにおいて設定された前記規則を示す情報を符号化する領域分割規則符号化ステップをさらに有することを特徴とする請求項3に記載の画像符号化方法。
- 前記分割領域の統合を行い、前記分割領域を更新する領域統合ステップをさらに有することを特徴とする請求項1から4のいずれか一項に記載の画像符号化方法。
- 前記分割領域と前記処理領域に隣接する既に符号化済み領域において設定された分割領域との統合判定を行い、統合対象と判定された前記分割領域に対して、統合先として判定された前記処理領域に隣接する既に符号化済み処理領域において設定された分割領域に含まれる画素群を符号化する際に使用した予測画像生成方法を、前記統合対象と判定された前記分割領域に含まれる画素群に対する前記画像を予測する方法として設定する予測情報複製ステップをさらに有し、
前記予測方法設定ステップは、前記予測情報複製ステップで統合対象と判断されなかった前記分割領域のみに、当該分割領域に含まれる画素群に対する前記画像を予測する方法を設定し、
前記予測画像生成ステップは、前記分割領域に含まれる画素群に対しては、前記予測方法設定ステップで設定された予測方法に従い、前記統合対象と判定された前記分割領域に含まれる画素群に対しては、前記予測情報複製ステップで設定された予測方法に従って予測画像を生成することを特徴とする請求項1から4のいずれか一項に記載の画像符号化方法。 - 前記予測方法設定ステップは、前記分割領域ごとに、当該分割領域に含まれる画素群を小領域に分割する方法を設定し、前記小領域ごとに、当該小領域に含まれる画素群に対する前記画像を予測する方法を設定し、
前記予測情報符号化ステップは、前記予測方法設定ステップで設定された小領域に分割する方法を示す情報と、前記小領域ごとに設定された予測方法を示す情報とを符号化する
ことを特徴とする請求項1から6のいずれか一項に記載の画像符号化方法。 - 符号化対象の画像を予め定められた大きさの処理領域に分割し、前記画像における被写体の距離情報を表したデプスマップに基づき前記処理領域ごとに予測しながら画像の符号データの復号を行う画像復号方法であって、
前記処理領域内に存在する被写体の数を被写体数として設定する被写体数設定ステップと、
前記処理領域に対応するデプスマップを参照して、処理領域内の画素群を前記被写体数と同じ数の分割領域に分割する領域分割ステップと、
前記符号データから、前記分割領域ごとに、当該分割に含まれる画素群に対する前記画像を予測する方法を復号する予測情報復号ステップと、
前記予測情報復号ステップにおいて復号された予測方法に従って、前記処理領域に対する前記画像の予測画像を生成する予測画像生成ステップと、
前記予測画像を用いて前記処理領域に対する画像を前記符号データから復号する画像復号ステップと
を有することを特徴とする画像復号方法。 - 前記被写体数設定ステップは、前記符号データから前記被写体数を復号して設定することを特徴とする請求項8に記載の画像復号方法。
- 符号化対象の画像を予め定められた大きさの処理領域に分割し、前記画像における被写体の距離情報を表したデプスマップに基づき前記処理領域ごとに予測しながら画像の符号データの復号を行う画像復号方法であって、
前記デプスマップの情報を基準に前記処理領域内の画素群の領域分割に使用する規則を設定する領域分割規則設定ステップと、
前記領域分割規則設定ステップにおいて設定された規則に従って、前記処理領域に対するデプスマップを用いて、前記処理領域内の画素群を分割領域に分割する領域分割ステップと、
前記符号データから、前記分割領域ごとに、当該分割領域に含まれる画素群に対する前記画像を予測する方法を復号する予測情報復号ステップと、
前記予測情報復号ステップで復号された予測方法に従って、前記処理領域に対する前記画像の予測画像を生成する予測画像生成ステップと、
前記予測画像を用いて前記処理領域に対する画像を前記符号データから復号する画像復号ステップと
を有することを特徴とする画像復号方法。 - 前記領域分割規則設定ステップは、前記符号データから前記領域分割規則設定ステップにおいて設定する前記規則を復号して設定することを特徴とする請求項10に記載の画像復号方法。
- 前記分割領域の統合を行い、前記分割領域を更新する領域統合ステップをさらに有することを特徴とする請求項8から11のいずれか一項に記載の画像復号方法。
- 前記分割領域と前記処理領域に隣接する既に復号済み領域において設定された予測ユニットとの統合判定を行い、統合対象と判定された前記分割領域に対して、統合先として判定された前記処理領域に隣接する既に復号済み領域において設定された分割領域に含まれる画素群を復号する際に使用した予測画像の生成方法を、統合対象と判定された前記分割領域に含まれる画素群に対する前記画像を予測する方法として設定する予測情報複製ステップをさらに有し、
前記予測情報復号ステップは、前記予測情報複製ステップで統合対象と判断されなかった前記分割領域のみについて、当該分割領域に含まれる画素群に対する前記画像を予測する方法を復号し、
前記予測画像生成ステップは、前記分割領域に含まれる画素群に対しては、前記予測情報復号ステップで復号された予測方法に従い、前記統合対象と判定された前記分割領域に含まれる画素群に対しては、前記予測情報複製ステップで設定された予測方法に従って予測画像を生成することを特徴とする請求項8から11のいずれか一項に記載の画像復号方法。 - 前記予測情報復号ステップは、前記分割領域ごとに、前記符号データから当該分割領域に含まれる画素群を小領域に分割する方法を復号し、前記小領域ごとに、当該小領域に含まれる画素群に対する前記画像を予測する方法を復号することを特徴とする請求項8から13のいずれか一項に記載の画像復号方法。
- 符号化対象の画像を予め定められた大きさの処理領域に分割し、前記画像における被写体の距離情報を表したデプスマップに基づき前記処理領域ごとに予測符号化を行う画像符号化装置であって、
前記処理領域内に存在する被写体の数を被写体数として設定する被写体数設定手段と、
前記処理領域に対応するデプスマップを参照して、処理領域内の画素群を前記被写体数と同じ数の分割領域に分割する領域分割手段と、
前記分割領域ごとに、当該分割領域に含まれる画素群に対する前記画像を予測する方法を設定する予測方法設定手段と、
前記予測方法設定手段において設定された予測方法を示す情報を符号化する予測情報符号化手段と、
前記予測方法設定手段において設定された予測方法に従って、前記処理領域に対する前記画像の予測画像を生成する予測画像生成手段と、
前記予測画像を用いて前記処理領域の画像を予測符号化する画像符号化手段と
を備えることを特徴とする画像符号化装置。 - 符号化対象の画像を予め定められた大きさの処理領域に分割し、前記画像における被写体の距離情報を表したデプスマップに基づき前記処理領域ごとに予測符号化を行う画像符号化装置であって、
前記デプスマップの距離情報を基準に前記処理領域内の画素群の領域分割に使用する規則を設定する領域分割規則設定手段と、
前記領域分割規則設定手段において設定された規則に従って、前記処理領域に対するデプスマップを用いて、前記処理領域内の画素群を分割領域に分割する領域分割手段と、
前記分割領域ごとに、当該分割領域に含まれる画素群に対する前記画像を予測する方法を設定する予測方法設定手段と、
前記予測方法設定手段において設定された予測方法を示す情報を符号化する予測情報符号化手段と、
前記予測方法設定手段において設定された予測方法に従って、前記処理領域に対する前記画像の予測画像を生成する予測画像生成手段と、
前記予測画像を用いて前記処理領域の画像を予測符号化する画像符号化手段と
を備えることを特徴とする画像符号化装置。 - 符号化対象の画像を予め定められた大きさの処理領域に分割し、前記画像における被写体の距離情報を表したデプスマップに基づき前記処理領域ごとに予測しながら画像の符号データの復号を行う画像復号装置であって、
前記処理領域内に存在する被写体の数を被写体数として設定する被写体数設定手段と、
前記処理領域に対応するデプスマップを参照して、処理領域内の画素群を前記被写体数と同じ数の分割領域に分割する領域分割手段と、
前記符号データから、前記分割領域ごとに、当該分割に含まれる画素群に対する前記画像を予測する方法を復号する予測情報復号手段と、
前記予測情報復号手段において復号された予測方法に従って、前記処理領域に対する前記画像の予測画像を生成する予測画像生成手段と、
前記予測画像を用いて前記処理領域に対する画像を前記符号データから復号する画像復号手段と
を備えることを特徴とする画像復号装置。 - 符号化対象の画像を予め定められた大きさの処理領域に分割し、前記画像における被写体の距離情報を表したデプスマップに基づき前記処理領域ごとに予測しながら画像の符号データの復号を行う画像復号装置であって、
前記デプスマップの情報を基準に前記処理領域内の画素群の領域分割に使用する規則を設定する領域分割規則設定手段と、
前記領域分割規則設定手段において設定された規則に従って、前記処理領域に対するデプスマップを用いて、前記処理領域内の画素群を分割領域に分割する領域分割手段と、
前記符号データから、前記分割領域ごとに、当該分割領域に含まれる画素群に対する前記画像を予測する方法を復号する予測情報復号手段と、
前記予測情報復号手段において復号された予測方法に従って、前記処理領域に対する前記画像の予測画像を生成する予測画像生成手段と、
前記予測画像を用いて前記処理領域に対する画像を前記符号データから復号する画像復号手段と
を備えることを特徴とする画像復号装置。 - 請求項1から7のいずれか一項に記載の画像符号化方法をコンピュータに実行させることを特徴とする画像符号化プログラム。
- 請求項8から14のいずれか一項に記載の画像復号方法をコンピュータに実行させることを特徴とする画像復号プログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011209416A JP5729825B2 (ja) | 2011-09-26 | 2011-09-26 | 画像符号化方法、画像復号方法、画像符号化装置、画像復号装置、画像符号化プログラム及び画像復号プログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011209416A JP5729825B2 (ja) | 2011-09-26 | 2011-09-26 | 画像符号化方法、画像復号方法、画像符号化装置、画像復号装置、画像符号化プログラム及び画像復号プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2013074303A JP2013074303A (ja) | 2013-04-22 |
JP5729825B2 true JP5729825B2 (ja) | 2015-06-03 |
Family
ID=48478487
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2011209416A Active JP5729825B2 (ja) | 2011-09-26 | 2011-09-26 | 画像符号化方法、画像復号方法、画像符号化装置、画像復号装置、画像符号化プログラム及び画像復号プログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5729825B2 (ja) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101750421B1 (ko) * | 2013-10-17 | 2017-06-23 | 니폰 덴신 덴와 가부시끼가이샤 | 동화상 부호화 방법, 동화상 복호 방법, 동화상 부호화 장치, 동화상 복호 장치, 동화상 부호화 프로그램, 및 동화상 복호 프로그램 |
KR101748637B1 (ko) | 2014-08-05 | 2017-06-20 | 한국전자통신연구원 | 깊이 맵 생성 장치 및 방법 |
JP6529374B2 (ja) * | 2014-10-07 | 2019-06-12 | キヤノン株式会社 | 符号化装置及びその制御方法 |
JP6651814B2 (ja) | 2015-11-30 | 2020-02-19 | 富士通株式会社 | 領域抽出装置、領域抽出プログラム、及び領域抽出方法 |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH08307877A (ja) * | 1995-05-12 | 1996-11-22 | Nippon Telegr & Teleph Corp <Ntt> | 動画像構造化の符号化および復号化方法 |
EP2352300A1 (en) * | 1997-02-13 | 2011-08-03 | Mitsubishi Denki Kabushiki Kaisha | Moving picture prediction system |
JP4025570B2 (ja) * | 2002-04-03 | 2007-12-19 | 日本電信電話株式会社 | 動画像符号化方法、動画像復号方法、動画像符号化装置、動画像復号装置、動画像符号化プログラム、動画像復号プログラム、動画像符号化プログラムを記録した記録媒体、動画像復号プログラムを記録した記録媒体 |
JP4015532B2 (ja) * | 2002-11-07 | 2007-11-28 | 日本電信電話株式会社 | 画像符号化方法,画像復号方法,画像符号化装置,画像復号装置,画像符号化プログラム,画像復号プログラムおよびそのプログラムを記録した記録媒体 |
ES2524973T3 (es) * | 2009-02-23 | 2014-12-16 | Nippon Telegraph And Telephone Corporation | Codificación y decodificación de imágenes multivista usando corrección de iluminación y de color localizada |
JP2012209911A (ja) * | 2010-12-20 | 2012-10-25 | Sony Corp | 画像処理装置および方法 |
JP2014150297A (ja) * | 2011-05-25 | 2014-08-21 | Sharp Corp | 画像符号化装置、画像復号装置、画像符号化方法、画像復号方法およびプログラム |
-
2011
- 2011-09-26 JP JP2011209416A patent/JP5729825B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
JP2013074303A (ja) | 2013-04-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
TWI498006B (zh) | 圖像編碼方法及裝置、圖像解碼方法及裝置以及其程式 | |
KR101592535B1 (ko) | 화상 부호화 방법, 화상 복호 방법, 화상 부호화 장치, 화상 복호 장치, 화상 부호화 프로그램 및 화상 복호 프로그램 | |
KR101552664B1 (ko) | 화상 부호화 방법 및 장치, 화상 복호 방법 및 장치, 및 그 프로그램 | |
JP6232076B2 (ja) | 映像符号化方法、映像復号方法、映像符号化装置、映像復号装置、映像符号化プログラム及び映像復号プログラム | |
JP5729825B2 (ja) | 画像符号化方法、画像復号方法、画像符号化装置、画像復号装置、画像符号化プログラム及び画像復号プログラム | |
KR101750421B1 (ko) | 동화상 부호화 방법, 동화상 복호 방법, 동화상 부호화 장치, 동화상 복호 장치, 동화상 부호화 프로그램, 및 동화상 복호 프로그램 | |
JP5706291B2 (ja) | 映像符号化方法,映像復号方法,映像符号化装置,映像復号装置およびそれらのプログラム | |
JP5711636B2 (ja) | 画像符号化方法、画像復号方法、画像符号化装置、画像復号装置、画像符号化プログラム、画像復号プログラム | |
JP5876933B2 (ja) | 動画像符号化方法、動画像復号方法、動画像符号化装置、動画像復号装置、動画像符号化プログラム、動画像復号プログラム及び記録媒体 | |
JP5759357B2 (ja) | 映像符号化方法、映像復号方法、映像符号化装置、映像復号装置、映像符号化プログラム及び映像復号プログラム | |
WO2015098827A1 (ja) | 映像符号化方法、映像復号方法、映像符号化装置、映像復号装置、映像符号化プログラム及び映像復号プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20130606 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20130801 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20140128 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20141014 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20141111 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20150109 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20150401 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20150403 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5729825 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |