JP2003099800A - 3次元画像情報生成方法および装置、ならびに3次元画像情報生成プログラムとこのプログラムを記録した記録媒体 - Google Patents
3次元画像情報生成方法および装置、ならびに3次元画像情報生成プログラムとこのプログラムを記録した記録媒体Info
- Publication number
- JP2003099800A JP2003099800A JP2001290578A JP2001290578A JP2003099800A JP 2003099800 A JP2003099800 A JP 2003099800A JP 2001290578 A JP2001290578 A JP 2001290578A JP 2001290578 A JP2001290578 A JP 2001290578A JP 2003099800 A JP2003099800 A JP 2003099800A
- Authority
- JP
- Japan
- Prior art keywords
- image
- hexagonal
- color
- information
- shape
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Processing Or Creating Images (AREA)
- Image Processing (AREA)
- Image Generation (AREA)
Abstract
(57)【要約】
【課題】 3次元画像情報生成において、多視点画像と
視点情報のみを入力し、概略形状を復元し、かつ視点方
向から見た色情報を再現、表示可能とする。 【解決手段】 概略形状生成部11は多視点画像を用い
たシルエット法を用いて高速、安定に概略形状の復元を
行う。六角形画像情報生成部12は仮想空間に配置した
バッキーボールと撮影画像の視線との交点を求め、それ
を平面展開、階層分割して六角形画像を作成し、それを
構成する六角形画素と撮影画像の対応付けを行なう。色
情報付加部13は復元形状表面を表わす全微少領域に六
角形画像情報生成部12の六角形画像を割当て、対応付
け結果を用いて各六角形画素に撮影画像の色付けを行な
う。無色画素色決定部14は色情報付加部部13で割当
てのなかった六角形画素に補間により色情報を割当て
る。二次元配列画像変換合成部15は六角形画像を通常
の二次元配列の画像データに変換しマージする。
視点情報のみを入力し、概略形状を復元し、かつ視点方
向から見た色情報を再現、表示可能とする。 【解決手段】 概略形状生成部11は多視点画像を用い
たシルエット法を用いて高速、安定に概略形状の復元を
行う。六角形画像情報生成部12は仮想空間に配置した
バッキーボールと撮影画像の視線との交点を求め、それ
を平面展開、階層分割して六角形画像を作成し、それを
構成する六角形画素と撮影画像の対応付けを行なう。色
情報付加部13は復元形状表面を表わす全微少領域に六
角形画像情報生成部12の六角形画像を割当て、対応付
け結果を用いて各六角形画素に撮影画像の色付けを行な
う。無色画素色決定部14は色情報付加部部13で割当
てのなかった六角形画素に補間により色情報を割当て
る。二次元配列画像変換合成部15は六角形画像を通常
の二次元配列の画像データに変換しマージする。
Description
【0001】
【発明の属する技術分野】本発明は、被写体を多視点方
向から撮影した画像情報をもとに、その被写体を3次元
仮想空間内で配置し、かつ撮影画像と同等の品質で表示
するための、3次元画像情報生成方法および装置に関す
るものである(図8)。
向から撮影した画像情報をもとに、その被写体を3次元
仮想空間内で配置し、かつ撮影画像と同等の品質で表示
するための、3次元画像情報生成方法および装置に関す
るものである(図8)。
【0002】
【従来の技術】被写体を多数の視点から撮影した画像を
基に、その被写体を任意視点方向から見た画像を保存、
合成し、表示する技術には、イメージベースレンダリン
グ(Image−Based Rendering)と
呼ばれる方法がある。
基に、その被写体を任意視点方向から見た画像を保存、
合成し、表示する技術には、イメージベースレンダリン
グ(Image−Based Rendering)と
呼ばれる方法がある。
【0003】代表的な手法には、苗村らの文献1「光線
情報による3次元実空間の効率的記述へ向けた光線空間
射影法」(信学技報、IE95−119,1996−0
2)による光線空間、Levoyらの文献2「Ligh
t Field Rendering」(SIGGRA
PH96,PP.31−42.1996)によるlig
ht field、がある。
情報による3次元実空間の効率的記述へ向けた光線空間
射影法」(信学技報、IE95−119,1996−0
2)による光線空間、Levoyらの文献2「Ligh
t Field Rendering」(SIGGRA
PH96,PP.31−42.1996)によるlig
ht field、がある。
【0004】原理的にはどちらも同じで、被写体の見え
方というのは、その被写体が存在する3次元空間を通過
する光線の分布により記述されるという考え方に基づい
ている。文献1では、1枚の平面上を通過するあらゆる
光線を空間中のある一点の座標と平面上の座標との4次
元で表わしており、文献2では、2枚の平面上を通過す
るあらゆる光線を2枚の平面上の座標による4次元で表
わしている。
方というのは、その被写体が存在する3次元空間を通過
する光線の分布により記述されるという考え方に基づい
ている。文献1では、1枚の平面上を通過するあらゆる
光線を空間中のある一点の座標と平面上の座標との4次
元で表わしており、文献2では、2枚の平面上を通過す
るあらゆる光線を2枚の平面上の座標による4次元で表
わしている。
【0005】これらにおいては、被写体の幾何形状を積
極的に利用せずに、入力画像をもとに、新しい視点位置
から見た画像を保存、合成していることになる。そのた
め、これらの手法では被写体の見え方の復元はできても
3次元形状データとして、従来の幾何形状モデルをべー
スに表現されている3次元仮想空間内に配置したり、陰
影の情報を生成したりすることができなかった。
極的に利用せずに、入力画像をもとに、新しい視点位置
から見た画像を保存、合成していることになる。そのた
め、これらの手法では被写体の見え方の復元はできても
3次元形状データとして、従来の幾何形状モデルをべー
スに表現されている3次元仮想空間内に配置したり、陰
影の情報を生成したりすることができなかった。
【0006】一方、被写体を多数の視点から撮影した画
像を基に、その被写体の3次元情報を復元し、保存する
技術は、シルエット法(shape from sil
houette、図9)により被写体の概略形状を復元
し、その表面をポリゴンの集合として表わし、入力画像
から各ポリゴンに貼り付けるべき1枚の画像をテクスチ
ャとしてある基準に従い切り出す方法が一般的である。
像を基に、その被写体の3次元情報を復元し、保存する
技術は、シルエット法(shape from sil
houette、図9)により被写体の概略形状を復元
し、その表面をポリゴンの集合として表わし、入力画像
から各ポリゴンに貼り付けるべき1枚の画像をテクスチ
ャとしてある基準に従い切り出す方法が一般的である。
【0007】例えば、Matsumotoらによる文献
3「A Portable Three−dimens
ional Digitizer」では、1)同じ1枚
の入力画像からできるだけ大きなテクスチャとなる領域
を切り出す、2)隣接ポリゴンの境界ができるだけ連続
性を保つようなテクスチャを選択する、というポリシー
のもと、以下のエネルギー関数、 E=Σi{Penalty(i)−k・Area
(i)} が最小となるような入力画像とポリゴンとの組み合わせ
を選択し、それをもとにテクスチャの割り当てを行なっ
ている。ここで、iはポリゴン番号で、Area(i)
はi番目のポリゴンをある入力画像上に投影した時の面
積、Penalty(i)はi番目のポリゴンの対応入
力画像と隣接ポリゴンの対応入力画像との撮影方向の角
度の差で、kが重み係数を表わしている。
3「A Portable Three−dimens
ional Digitizer」では、1)同じ1枚
の入力画像からできるだけ大きなテクスチャとなる領域
を切り出す、2)隣接ポリゴンの境界ができるだけ連続
性を保つようなテクスチャを選択する、というポリシー
のもと、以下のエネルギー関数、 E=Σi{Penalty(i)−k・Area
(i)} が最小となるような入力画像とポリゴンとの組み合わせ
を選択し、それをもとにテクスチャの割り当てを行なっ
ている。ここで、iはポリゴン番号で、Area(i)
はi番目のポリゴンをある入力画像上に投影した時の面
積、Penalty(i)はi番目のポリゴンの対応入
力画像と隣接ポリゴンの対応入力画像との撮影方向の角
度の差で、kが重み係数を表わしている。
【0008】しかし、この方法では、ひとつのポリゴン
に貼り付けるテクスチャは1枚であり、ポリゴン毎に異
なる入力画像からテクスチャを切り出すことになるの
で、どうしてもポリゴン境界での模様の不連続性に加
え、撮影位置の違いによる光学的不連続性を避けること
ができなかった。また、シルエット法では被写体のシル
エット領域を撮影の視点位置から仮想空間上へ投影した
領域が交差する領域を復元形状としているため、表面の
凹部が正確に復元できないという本質的な問題があり、
本来凹部であるはずの表面に対応するポリゴンについて
は、復元結果の誤差から適切なテクスチャをひとつだけ
選択することは本質的に不可能であった。
に貼り付けるテクスチャは1枚であり、ポリゴン毎に異
なる入力画像からテクスチャを切り出すことになるの
で、どうしてもポリゴン境界での模様の不連続性に加
え、撮影位置の違いによる光学的不連続性を避けること
ができなかった。また、シルエット法では被写体のシル
エット領域を撮影の視点位置から仮想空間上へ投影した
領域が交差する領域を復元形状としているため、表面の
凹部が正確に復元できないという本質的な問題があり、
本来凹部であるはずの表面に対応するポリゴンについて
は、復元結果の誤差から適切なテクスチャをひとつだけ
選択することは本質的に不可能であった。
【0009】また、上記の不連続性や復元形状誤差の問
題を解決する方法として、物体の3次元形状を測定する
装置であるレンジファインダにより復元した被写体の精
確な形状表面に、各撮影画像を視点方向に応じて貼り付
け、保存する表面光線空間(surface ligh
t field:SLF)と呼ばれる方法が提案されて
いる。
題を解決する方法として、物体の3次元形状を測定する
装置であるレンジファインダにより復元した被写体の精
確な形状表面に、各撮影画像を視点方向に応じて貼り付
け、保存する表面光線空間(surface ligh
t field:SLF)と呼ばれる方法が提案されて
いる。
【0010】このうち、西野らの文献4「Eigen−
Texture法:複合現実化のための3次元モデルに
基づく見えの圧縮と合成」(信学論(D−2)、Vo
l.J82−D−2,No.10,pp.1793−1
803,1999−10)では、一定形状の光パターン
を被写体に投影、撮影し測定する光線パターン投影型レ
ンジファインダにより復元した被写体の3次元形状モデ
ルの各三角形ポリゴン単位で、各視点からの撮影画像を
視線方向に従うテクスチャデータとして切出し、列挙し
て保持している。
Texture法:複合現実化のための3次元モデルに
基づく見えの圧縮と合成」(信学論(D−2)、Vo
l.J82−D−2,No.10,pp.1793−1
803,1999−10)では、一定形状の光パターン
を被写体に投影、撮影し測定する光線パターン投影型レ
ンジファインダにより復元した被写体の3次元形状モデ
ルの各三角形ポリゴン単位で、各視点からの撮影画像を
視線方向に従うテクスチャデータとして切出し、列挙し
て保持している。
【0011】また、Woodらの文献5「Surfac
e Light Fields for 3D Pho
tography」(SIGGRAPH2000,p
p.287−296,2000)では、レーザー光の照
射による三角測量に基づいて被写体形状を測定した被写
体の3次元形状モデルの各ポリゴン上の微小領域単位
で、各視点画像からの色を視点方向に応じてLumis
phereと呼ぶ単位半径球の表面にマッピングしてい
る。マッピングはLumisphereに内接する正八
面体を再帰的に分割することにより行なっている。
e Light Fields for 3D Pho
tography」(SIGGRAPH2000,p
p.287−296,2000)では、レーザー光の照
射による三角測量に基づいて被写体形状を測定した被写
体の3次元形状モデルの各ポリゴン上の微小領域単位
で、各視点画像からの色を視点方向に応じてLumis
phereと呼ぶ単位半径球の表面にマッピングしてい
る。マッピングはLumisphereに内接する正八
面体を再帰的に分割することにより行なっている。
【0012】これら文献4と5においては、全撮影画像
の色情報を保持するため視点方向によらずに高品質な表
示結果が得られるという利点があるが、そのデータ量も
文献3の方法と比べて膨大なものとなる。そこで文献4
では、各ポリゴン毎のテクスチャ列群に対し主成分分析
を行い、ポリゴン単位での圧縮を行なっている。ここで
は、視線方向が異なるテクスチャ画像間を視線方向に従
って滑らかに近似するような圧縮ではなく、全てのテク
スチャ画像がほぼ同じで照明による違いしかないと仮定
しており、主成分分析による圧縮で非常に高い圧縮率が
得られるものとしている。一方、文献5では、各微小領
域毎にLumisphereと呼ぶ球の表面に視点方向
に応じた輝度情報を付加しており、それを擬似的なベク
トル量子化や主成分分析を用いることにより圧縮してい
る。
の色情報を保持するため視点方向によらずに高品質な表
示結果が得られるという利点があるが、そのデータ量も
文献3の方法と比べて膨大なものとなる。そこで文献4
では、各ポリゴン毎のテクスチャ列群に対し主成分分析
を行い、ポリゴン単位での圧縮を行なっている。ここで
は、視線方向が異なるテクスチャ画像間を視線方向に従
って滑らかに近似するような圧縮ではなく、全てのテク
スチャ画像がほぼ同じで照明による違いしかないと仮定
しており、主成分分析による圧縮で非常に高い圧縮率が
得られるものとしている。一方、文献5では、各微小領
域毎にLumisphereと呼ぶ球の表面に視点方向
に応じた輝度情報を付加しており、それを擬似的なベク
トル量子化や主成分分析を用いることにより圧縮してい
る。
【0013】
【発明が解決しようとする課題】以上述べたように、従
来の方法では、文献1や2のように幾何形状を積極的に
利用せずに画像を保存し表示するため、仮想空間内での
配置や陰影付けが不可能であったり、文献3のように多
視点画像から復元した被写体形状を表わすポリゴンにテ
クスチャを固定の一枚のみマッピングするため表示の際
に違和感が生じるか、もしくは文献4や5のように撮影
方向に従いマッピング元の画像を変化させることにより
表示時にも撮影画像と同等に近い品質で表示可能となる
ものの、高圧縮を実現するためレンジファインダとの併
用により正確な形状復元を行なう必要があり、特に文献
5では復元形状と撮影画像との位置合わせを手で行なわ
なければならなかった。
来の方法では、文献1や2のように幾何形状を積極的に
利用せずに画像を保存し表示するため、仮想空間内での
配置や陰影付けが不可能であったり、文献3のように多
視点画像から復元した被写体形状を表わすポリゴンにテ
クスチャを固定の一枚のみマッピングするため表示の際
に違和感が生じるか、もしくは文献4や5のように撮影
方向に従いマッピング元の画像を変化させることにより
表示時にも撮影画像と同等に近い品質で表示可能となる
ものの、高圧縮を実現するためレンジファインダとの併
用により正確な形状復元を行なう必要があり、特に文献
5では復元形状と撮影画像との位置合わせを手で行なわ
なければならなかった。
【0014】本発明の目的は、多視点画像及びその視点
情報のみを入力とし、概略形状を復元し、かつ入力の画
像の視点方向から見た色情報をそのまま再現、表示でき
る画像データを復元形状表面に付加する3次元画像情報
生成方法と装置を提供することにある。
情報のみを入力とし、概略形状を復元し、かつ入力の画
像の視点方向から見た色情報をそのまま再現、表示でき
る画像データを復元形状表面に付加する3次元画像情報
生成方法と装置を提供することにある。
【0015】
【課題を解決するための手段】上記目的を達成するた
め、本発明は、同一被写体を多数の視点方向から撮影し
た複数枚の撮影画像及びそれらの視点情報を入力とし、
その被写体の概略形状を復元し、さらにその形状表面に
視点に応じた撮影画像の色情報を付加する3次元画像情
報生成方法であって、前記撮影画像のうちの被写体の全
形が撮影されている画像複数枚をシルエット画像として
選択し、そのシルエット情報を用いて、被写体の概略形
状を微少領域の集合として復元する段階と、前記復元さ
れた概略形状に撮影画像の色情報を付加するための六角
形画像の大きさ及び形状と六角形画像を構成する六角形
画素と撮影画像との対応付けを決定する段階と、前記対
応付けを決定する段階で求めた六角形画像を形状表面上
の全微少領域に割当て、その微少領域毎に、撮影画像の
視点と微少領域を結ぶ投影線と撮影画像との交点上の色
を、対応する六角形画素に割当てる段階と、前記割当て
る段階において色が割当てられなかった六角形画素につ
いて、隣接六角形画素の色を用いて色を決定する段階
と、前記六角形画素で構成される全ての六角形画像を二
次元配列の画像データに変換し、それら画像データを1
枚ないしは複数枚の画像データにマージする段階とを有
することを特徴とする3次元画像情報生成方法を手段と
する。
め、本発明は、同一被写体を多数の視点方向から撮影し
た複数枚の撮影画像及びそれらの視点情報を入力とし、
その被写体の概略形状を復元し、さらにその形状表面に
視点に応じた撮影画像の色情報を付加する3次元画像情
報生成方法であって、前記撮影画像のうちの被写体の全
形が撮影されている画像複数枚をシルエット画像として
選択し、そのシルエット情報を用いて、被写体の概略形
状を微少領域の集合として復元する段階と、前記復元さ
れた概略形状に撮影画像の色情報を付加するための六角
形画像の大きさ及び形状と六角形画像を構成する六角形
画素と撮影画像との対応付けを決定する段階と、前記対
応付けを決定する段階で求めた六角形画像を形状表面上
の全微少領域に割当て、その微少領域毎に、撮影画像の
視点と微少領域を結ぶ投影線と撮影画像との交点上の色
を、対応する六角形画素に割当てる段階と、前記割当て
る段階において色が割当てられなかった六角形画素につ
いて、隣接六角形画素の色を用いて色を決定する段階
と、前記六角形画素で構成される全ての六角形画像を二
次元配列の画像データに変換し、それら画像データを1
枚ないしは複数枚の画像データにマージする段階とを有
することを特徴とする3次元画像情報生成方法を手段と
する。
【0016】あるいは、前記マージする段階の後に、マ
ージ後の画像データを圧縮する段階を有することを特徴
とする3次元画像情報生成方法を手段とする。
ージ後の画像データを圧縮する段階を有することを特徴
とする3次元画像情報生成方法を手段とする。
【0017】また、本発明は、同一被写体を多数の視点
方向から撮影した複数枚の撮影画像及びそれらの視点情
報を入力とし、その被写体の概略形状を復元し、さらに
その形状表面に視点に応じた撮影画像の色情報を付加す
る3次元画像情報生成装置であって、前記撮影画像のう
ちの被写体の全形が撮影されている画像複数枚をシルエ
ット画像として選択し、そのシルエット情報を用いて、
被写体の概略形状を微少領域の集合として復元する概略
形状生成手段と、前記復元された形状情報に撮影画像の
色情報を付加するための六角形画像の大きさ及び形状と
六角形画像を構成する六角形画素と撮影画像との対応付
けを決定する六角形画像情報決定手段と、前記決定され
た六角形画像を形状表面上の全微少領域に割当て、その
微少領域毎に、撮影画像の視点と微少領域を結ぶ視線と
撮影画像との交点上の撮影画像の色を、対応する六角形
画素に割当てる色情報付加手段と、前記色情報付加手段
において色が割当てられなかった六角形画素について、
隣接六角形画素の色を用いて色を決定する無色画素色決
定手段と、前記六角形画素で構成される全ての六角形画
像を二次元配列の画像データに変換し、それら画像デー
タを1枚ないしは複数枚の画像データにマージする二次
元配列画像変換合成手段とを有することを特徴とする3
次元画像情報生成装置を手段とする。
方向から撮影した複数枚の撮影画像及びそれらの視点情
報を入力とし、その被写体の概略形状を復元し、さらに
その形状表面に視点に応じた撮影画像の色情報を付加す
る3次元画像情報生成装置であって、前記撮影画像のう
ちの被写体の全形が撮影されている画像複数枚をシルエ
ット画像として選択し、そのシルエット情報を用いて、
被写体の概略形状を微少領域の集合として復元する概略
形状生成手段と、前記復元された形状情報に撮影画像の
色情報を付加するための六角形画像の大きさ及び形状と
六角形画像を構成する六角形画素と撮影画像との対応付
けを決定する六角形画像情報決定手段と、前記決定され
た六角形画像を形状表面上の全微少領域に割当て、その
微少領域毎に、撮影画像の視点と微少領域を結ぶ視線と
撮影画像との交点上の撮影画像の色を、対応する六角形
画素に割当てる色情報付加手段と、前記色情報付加手段
において色が割当てられなかった六角形画素について、
隣接六角形画素の色を用いて色を決定する無色画素色決
定手段と、前記六角形画素で構成される全ての六角形画
像を二次元配列の画像データに変換し、それら画像デー
タを1枚ないしは複数枚の画像データにマージする二次
元配列画像変換合成手段とを有することを特徴とする3
次元画像情報生成装置を手段とする。
【0018】あるいは、前記二次元配列画像変換合成手
段でマージされた後の画像データを圧縮する圧縮手段を
有することを特徴とする3次元画像情報生成装置を手段
とする。
段でマージされた後の画像データを圧縮する圧縮手段を
有することを特徴とする3次元画像情報生成装置を手段
とする。
【0019】また、上記の3次元画像情報生成方法にお
ける段階を、コンピュータに実行させるためのプログラ
ムとしたことを特徴とする3次元画像情報生成プログラ
ムを手段とする。
ける段階を、コンピュータに実行させるためのプログラ
ムとしたことを特徴とする3次元画像情報生成プログラ
ムを手段とする。
【0020】さらには、上記の3次元画像情報生成方法
における段階を、コンピュータに実行させるためのプロ
グラムとし、前記プログラムを、前記コンピュータが読
み取りできる記録媒体に記録したことを特徴とする3次
元画像情報生成プログラムを記録した記録媒体を手段と
する。
における段階を、コンピュータに実行させるためのプロ
グラムとし、前記プログラムを、前記コンピュータが読
み取りできる記録媒体に記録したことを特徴とする3次
元画像情報生成プログラムを記録した記録媒体を手段と
する。
【0021】本発明では、同一の撮影画像から形状復元
と色情報抽出の両方を行なうので復元形状と画像の合わ
せ込みの必要がないという利点がある。さらに、全方位
からの色情報の保持に、互いに隣接する六角形画素から
成る六角形画像を利用する。六角形画素は六隣接性を持
ち、対称性にも優れているため、無駄な領域も少ないま
ま、通常の二次元配列の画像データに変換し、1枚ない
し数枚の画像データとしてマージし、保持することがで
きる。そのため、扱いが楽で、かつ変換後は通常の画像
圧縮法によりデータを圧縮することが可能である、とい
う利点を持つ。
と色情報抽出の両方を行なうので復元形状と画像の合わ
せ込みの必要がないという利点がある。さらに、全方位
からの色情報の保持に、互いに隣接する六角形画素から
成る六角形画像を利用する。六角形画素は六隣接性を持
ち、対称性にも優れているため、無駄な領域も少ないま
ま、通常の二次元配列の画像データに変換し、1枚ない
し数枚の画像データとしてマージし、保持することがで
きる。そのため、扱いが楽で、かつ変換後は通常の画像
圧縮法によりデータを圧縮することが可能である、とい
う利点を持つ。
【0022】
【発明の実施の形態】以下に、本発明の実施の形態を示
す。尚、これによりこの発明が限定されるものではな
い。
す。尚、これによりこの発明が限定されるものではな
い。
【0023】[本発明の原理]本発明では、概略形状復
元にシルエット法を用い、色情報の保持にはバッキーボ
ールの平面展開による手法を用いる。シルエット法は、
多視点画像から被写体の概略形状を復元する手法として
用いられている手法で、高速かつ安定に形状復元が行え
るという利点がある。また、バッキーボールとは、図1
1に示すように12個の正五角形と20個の正六角形か
ら成る32面の多面体である。図11ではわかりやすく
するため、正五角形は黒、正六角形は白及びハッチンン
グで示してある。これはまた、サッカーボールやフラー
レンC60の構造としても良く知られており、球面をよく
近似し、かつ内接している。このバッキーボールを二次
元平面上に展開した図が図12で、さらに全ての正五角
形を正六角形に置換したものが図13である。これは正
六角形を画素とする六角形画像(図10)とみなすこと
ができる。さらに六角形画素は六隣接性を持ち、かつ対
称性も良いため、再帰的に階層分割することにより画素
数を増やしたり、単純な変換で、無駄な領域も少ないま
ま通常の二次元配列をとる二次元画像に変換することが
できる(図14)。すなわち、被写体の復元形状表面に
バッキーボールを仮想的に置き、その多角形視線との交
点上に撮影画像からの色をマッピングすれば、それを通
常の二次元配列をとる画像に変換することができる。こ
の変換により、これまで多数開発されてきた通常の画像
圧縮アルゴリズムが適用できるという利点がある。
元にシルエット法を用い、色情報の保持にはバッキーボ
ールの平面展開による手法を用いる。シルエット法は、
多視点画像から被写体の概略形状を復元する手法として
用いられている手法で、高速かつ安定に形状復元が行え
るという利点がある。また、バッキーボールとは、図1
1に示すように12個の正五角形と20個の正六角形か
ら成る32面の多面体である。図11ではわかりやすく
するため、正五角形は黒、正六角形は白及びハッチンン
グで示してある。これはまた、サッカーボールやフラー
レンC60の構造としても良く知られており、球面をよく
近似し、かつ内接している。このバッキーボールを二次
元平面上に展開した図が図12で、さらに全ての正五角
形を正六角形に置換したものが図13である。これは正
六角形を画素とする六角形画像(図10)とみなすこと
ができる。さらに六角形画素は六隣接性を持ち、かつ対
称性も良いため、再帰的に階層分割することにより画素
数を増やしたり、単純な変換で、無駄な領域も少ないま
ま通常の二次元配列をとる二次元画像に変換することが
できる(図14)。すなわち、被写体の復元形状表面に
バッキーボールを仮想的に置き、その多角形視線との交
点上に撮影画像からの色をマッピングすれば、それを通
常の二次元配列をとる画像に変換することができる。こ
の変換により、これまで多数開発されてきた通常の画像
圧縮アルゴリズムが適用できるという利点がある。
【0024】上記をもとにした本発明の3次元画像情報
生成方法では、シルエット法による被写体の概略形状復
元段階と、仮想空間に配置したバッキーボールと撮影画
像の視線との交点を求め、それを平面展開、階層分割し
て六角形画像を作成し、それを構成する六角形画素と撮
影画像の対応付けを行なう六角形画像情報生成段階と、
復元形状表面を表わす全微少領域に前段階(六角形画像
情報生成段階)での六角形画像を割当て、対応付け結果
を用いて各六角形画素に撮影画像の色付けを行なう色情
報割当て段階と、前段階(色情報割当て段階)で割当て
のなかった六角形画素に補間により色情報を割当てる色
情報補間段階と、六角形画像を通常の二次元配列の画像
データに変換する配列変換段階と、前段階(配列変換段
階)で変換した二次元配列の画像をマージする画像マー
ジ段階と、を有する。
生成方法では、シルエット法による被写体の概略形状復
元段階と、仮想空間に配置したバッキーボールと撮影画
像の視線との交点を求め、それを平面展開、階層分割し
て六角形画像を作成し、それを構成する六角形画素と撮
影画像の対応付けを行なう六角形画像情報生成段階と、
復元形状表面を表わす全微少領域に前段階(六角形画像
情報生成段階)での六角形画像を割当て、対応付け結果
を用いて各六角形画素に撮影画像の色付けを行なう色情
報割当て段階と、前段階(色情報割当て段階)で割当て
のなかった六角形画素に補間により色情報を割当てる色
情報補間段階と、六角形画像を通常の二次元配列の画像
データに変換する配列変換段階と、前段階(配列変換段
階)で変換した二次元配列の画像をマージする画像マー
ジ段階と、を有する。
【0025】以下、各段階について説明する。
【0026】まず概略形状復元段階では、図9に示すよ
うに、撮影画像の被写体が写っている領域をシルエット
領域として、各画像のシルエット領域を視点から三次元
仮想空間内のボクセル空間に投影し、全投影領域が通過
するボクセル領域を求める。尚、ここで「ボクセル空
間」とは、単位三次元空間である「ボクセル」の集合と
して定義している。得られたボクセル領域が被写体の概
略形状を表わし、その表面を微少領域の集合として表わ
す。
うに、撮影画像の被写体が写っている領域をシルエット
領域として、各画像のシルエット領域を視点から三次元
仮想空間内のボクセル空間に投影し、全投影領域が通過
するボクセル領域を求める。尚、ここで「ボクセル空
間」とは、単位三次元空間である「ボクセル」の集合と
して定義している。得られたボクセル領域が被写体の概
略形状を表わし、その表面を微少領域の集合として表わ
す。
【0027】次に六角形画像情報生成段階について説明
する。シルエット法を実行した三次元仮想空間内の任意
の位置に、単位半径を持つ仮想的なバッキーボールを配
置する。次に全撮影画像について、中心座標と視点を結
ぶ投影線lsを求め、バッキーボール表面との交点座標
を三次元座標で計算する(図15)。次にバッキーボー
ルの中心を通るような平面を考え、バッキーボールの頂
点座標をその平面上に展開し、二次元座標を求める。交
点座標ksも二次元座標に変換する。最後にパラメータ
で指定されたレベルまたは、ひとつの六角形画素にたか
だかひとつの画像が割当てられるまで、二次元座標上で
の階層分割を繰り返す。ここでの階層的分割は、上位階
層と下位階層の六角形の対称性がずれないため、1)階
層のレベル0で定義する画素と球面との関係を下位階層
でもそのまま使える、2)六角形画像から四角形画像へ
の変換も上位と下位階層で同じ手順で行なえる、という
ことから、図16のように、正六角形を一旦八等分に分
割して台形を求め、その隣接台形同士がマージして得ら
れる正六角形を下位レベルの六角形とする。階層分割の
結果、ひとつの六角形に2つ以上の交点が存在する場合
には、何らかの方法でひとつのみ残すようにする。具体
的な方法としては、最も六角形の中心に近い座標にある
もののみ残したり、また全ての色の平均を持つ交点を六
角形の中心位置や元の交点の重心位置に与える、といっ
た方法が考えられる。最終的に六段階では、生成された
六角形画素に、それへの交点を持つ撮影画像がたかだか
1枚対応付けられる。
する。シルエット法を実行した三次元仮想空間内の任意
の位置に、単位半径を持つ仮想的なバッキーボールを配
置する。次に全撮影画像について、中心座標と視点を結
ぶ投影線lsを求め、バッキーボール表面との交点座標
を三次元座標で計算する(図15)。次にバッキーボー
ルの中心を通るような平面を考え、バッキーボールの頂
点座標をその平面上に展開し、二次元座標を求める。交
点座標ksも二次元座標に変換する。最後にパラメータ
で指定されたレベルまたは、ひとつの六角形画素にたか
だかひとつの画像が割当てられるまで、二次元座標上で
の階層分割を繰り返す。ここでの階層的分割は、上位階
層と下位階層の六角形の対称性がずれないため、1)階
層のレベル0で定義する画素と球面との関係を下位階層
でもそのまま使える、2)六角形画像から四角形画像へ
の変換も上位と下位階層で同じ手順で行なえる、という
ことから、図16のように、正六角形を一旦八等分に分
割して台形を求め、その隣接台形同士がマージして得ら
れる正六角形を下位レベルの六角形とする。階層分割の
結果、ひとつの六角形に2つ以上の交点が存在する場合
には、何らかの方法でひとつのみ残すようにする。具体
的な方法としては、最も六角形の中心に近い座標にある
もののみ残したり、また全ての色の平均を持つ交点を六
角形の中心位置や元の交点の重心位置に与える、といっ
た方法が考えられる。最終的に六段階では、生成された
六角形画素に、それへの交点を持つ撮影画像がたかだか
1枚対応付けられる。
【0028】色情報割当て段階ではまず、被写体復元形
状表面を表わす全微少領域に、前段階(六角形画像情報
生成段階)で求めた形状、大きさを持つ六角形画像を割
当てる。次に全微少領域から各撮影画像を可視判定し、
微少領域から直接見える撮影画像の色のみ、色付けを行
なう。色は撮影画像と視線との交点上の色とする。
状表面を表わす全微少領域に、前段階(六角形画像情報
生成段階)で求めた形状、大きさを持つ六角形画像を割
当てる。次に全微少領域から各撮影画像を可視判定し、
微少領域から直接見える撮影画像の色のみ、色付けを行
なう。色は撮影画像と視線との交点上の色とする。
【0029】次の色情報補間段階では色情報割当て段階
で色が付かなかった六角形画素の色付けを行なう。色の
ついている六角形画素の色を用いて補間を行なう。これ
により実際には微少領域から見えない、または撮影画像
が存在しない六角形画素にも見えている画像からの補間
により色付けする。
で色が付かなかった六角形画素の色付けを行なう。色の
ついている六角形画素の色を用いて補間を行なう。これ
により実際には微少領域から見えない、または撮影画像
が存在しない六角形画素にも見えている画像からの補間
により色付けする。
【0030】配列変換段階においては、六角形画像の対
称性を利用した、図14で表わす変換則に基づき六角形
画像を通常の二次元配列をとる画像に変換する。六段階
で生成される二次元配列画像は微少領域の数だけ存在す
ることになるので、マージ段階において、1枚ないしは
数枚の画像にマージすることにより表示の際に扱い易く
するとともに、従来の画像圧縮手法を適用し易くする。
称性を利用した、図14で表わす変換則に基づき六角形
画像を通常の二次元配列をとる画像に変換する。六段階
で生成される二次元配列画像は微少領域の数だけ存在す
ることになるので、マージ段階において、1枚ないしは
数枚の画像にマージすることにより表示の際に扱い易く
するとともに、従来の画像圧縮手法を適用し易くする。
【0031】[用語の説明]次に、以下の実施形態での
用語について説明する。 1.撮影画像 被写体を撮影した画像。 2.視点情報 被写体を撮影した際の、カメラの位置および向きのこ
と。ここでは、カメラパラメータと同じ意味に使ってい
る。 3.カメラパラメータ 被写体を撮影した際の、カメラ位置及び被写体に対する
向きのこと。ただし、本実施形態では撮影時のカメラの
レンズ歪が全くない物と仮定しており、そうでない場合
はそれもカメラパラメータとして考慮する必要がある。 4.投影線 撮影画像の視点位置と撮影画像または復元形状の目標位
置とを結んだ直線のこと。 5.有色画素 色付け済みの六角形画素。 6.無色画素 色付けされていない六角形画素。 7.Zバッフア法 3次元コンピュータグラフィックスにおける隠面消去
(視線の手前にある物体で隠される物体や面を検出して
描画しないようにする処理)の方法の一つ。画面を構成
するの各画素に色情報のほかに奥行きに関する情報を持
たせ、画面に描画する際には同じ座標の視点からの奥行
き情報(Z値)を比較して、最も手前にあるものだけを
画面に書き込む手法。この方法で用いる奥行き情報のた
めのメモリ領域をZバッファと呼ぶ。 8.OPenGL SGI(Silicn Graphics社)が開発し
た、3次元グラフィツクスハードウェアのために用意さ
れたソフトウェアインターフェイス。主にレンダリング
処理に用いられ、用意されたライブラリを用いることに
よりZバッファによる描画やZ値の取得を行なう事も出
来る。
用語について説明する。 1.撮影画像 被写体を撮影した画像。 2.視点情報 被写体を撮影した際の、カメラの位置および向きのこ
と。ここでは、カメラパラメータと同じ意味に使ってい
る。 3.カメラパラメータ 被写体を撮影した際の、カメラ位置及び被写体に対する
向きのこと。ただし、本実施形態では撮影時のカメラの
レンズ歪が全くない物と仮定しており、そうでない場合
はそれもカメラパラメータとして考慮する必要がある。 4.投影線 撮影画像の視点位置と撮影画像または復元形状の目標位
置とを結んだ直線のこと。 5.有色画素 色付け済みの六角形画素。 6.無色画素 色付けされていない六角形画素。 7.Zバッフア法 3次元コンピュータグラフィックスにおける隠面消去
(視線の手前にある物体で隠される物体や面を検出して
描画しないようにする処理)の方法の一つ。画面を構成
するの各画素に色情報のほかに奥行きに関する情報を持
たせ、画面に描画する際には同じ座標の視点からの奥行
き情報(Z値)を比較して、最も手前にあるものだけを
画面に書き込む手法。この方法で用いる奥行き情報のた
めのメモリ領域をZバッファと呼ぶ。 8.OPenGL SGI(Silicn Graphics社)が開発し
た、3次元グラフィツクスハードウェアのために用意さ
れたソフトウェアインターフェイス。主にレンダリング
処理に用いられ、用意されたライブラリを用いることに
よりZバッファによる描画やZ値の取得を行なう事も出
来る。
【0032】[第1の実施形態]図1は、本発明の第1
の実施形態による装置構成図である。本装置は、同一被
写体を多数の視点方向から撮影した複数枚の画像及びそ
れらの視点情報を入力情報とし、その被写体の概略形状
を復元し、さらにその形状表面に座標及び視点に応じた
入力画像の色情報を付加する3次元画像情報生成装置で
ある。
の実施形態による装置構成図である。本装置は、同一被
写体を多数の視点方向から撮影した複数枚の画像及びそ
れらの視点情報を入力情報とし、その被写体の概略形状
を復元し、さらにその形状表面に座標及び視点に応じた
入力画像の色情報を付加する3次元画像情報生成装置で
ある。
【0033】図1において、11は同一被写体を多数の
視点方向から撮影した複数枚の画像及びそれらの視点情
報を入力情報とし、上記撮影画像のうちの被写体の全形
が撮影されている画像複数枚をシルエット画像として選
択し、そのシルエット情報を用いて、被写体の概略形状
を微少領域の集合として復元する概略形状生成部であ
る。12は復元された形状情報に撮影画像の色情報を付
加するための六角形画像の大きさ及び形状と六角形画像
を構成する六角形画素と撮影画像との対応付けを決定す
る六角形画像決定部である。13は前記決定された六角
形画像を形状表面上の全微少領域に割当て、その微少領
域毎に、撮影画像の視点と微少領域を結ぶ視線と撮影画
像との交点上の撮影画像の色を、対応する六角形画素に
割当てる色情報付加部である。14は色情報付加部13
において色が割当てられなかった六角形画素について、
隣接六角形画素の色を用いて色を決定する無色画素色決
定部である。15は前記六角形画素で構成される全ての
六角形画像を二次元配列の画像データに変換し、それら
画像データを1枚ないしは複数枚の画像データにマージ
する二次元配列画像変換合成部である。16は後段の各
部で処理を行ったり最終結果を出力したりするために、
入力情報や各部での処理結果(概略形状生成部11の形
状情報、六角形画像決定部12の六角形画像情報、色情
報付加部13の六角形画像情報、無色画素色決定部14
の六角形画像情報、及び二次元配列画像変換合成部の二
次元配列画像情報)を記憶する情報記憶部である。本装
置は以上の各部で構成される。
視点方向から撮影した複数枚の画像及びそれらの視点情
報を入力情報とし、上記撮影画像のうちの被写体の全形
が撮影されている画像複数枚をシルエット画像として選
択し、そのシルエット情報を用いて、被写体の概略形状
を微少領域の集合として復元する概略形状生成部であ
る。12は復元された形状情報に撮影画像の色情報を付
加するための六角形画像の大きさ及び形状と六角形画像
を構成する六角形画素と撮影画像との対応付けを決定す
る六角形画像決定部である。13は前記決定された六角
形画像を形状表面上の全微少領域に割当て、その微少領
域毎に、撮影画像の視点と微少領域を結ぶ視線と撮影画
像との交点上の撮影画像の色を、対応する六角形画素に
割当てる色情報付加部である。14は色情報付加部13
において色が割当てられなかった六角形画素について、
隣接六角形画素の色を用いて色を決定する無色画素色決
定部である。15は前記六角形画素で構成される全ての
六角形画像を二次元配列の画像データに変換し、それら
画像データを1枚ないしは複数枚の画像データにマージ
する二次元配列画像変換合成部である。16は後段の各
部で処理を行ったり最終結果を出力したりするために、
入力情報や各部での処理結果(概略形状生成部11の形
状情報、六角形画像決定部12の六角形画像情報、色情
報付加部13の六角形画像情報、無色画素色決定部14
の六角形画像情報、及び二次元配列画像変換合成部の二
次元配列画像情報)を記憶する情報記憶部である。本装
置は以上の各部で構成される。
【0034】図2は上記の装置における処理の流れを示
すフローチャートである。図2では被写体形状をシルエ
ット法によって求めた微少なポリゴンの集合で表わし、
その頂点を微少領域とみなし、各撮影画像からの色づけ
を行なう実施形態を挙げる。また、本実施形態では、六
角形画像の分割の階層レベルは撮影画像の視点位置によ
り自動で決める。
すフローチャートである。図2では被写体形状をシルエ
ット法によって求めた微少なポリゴンの集合で表わし、
その頂点を微少領域とみなし、各撮影画像からの色づけ
を行なう実施形態を挙げる。また、本実施形態では、六
角形画像の分割の階層レベルは撮影画像の視点位置によ
り自動で決める。
【0035】まず、シルエット法により形状復元を行な
う(ステップ21)。ここでは、まず撮影画像の中から
被写体の全形が撮影されている画像複数枚をシルエット
画像として選択し、被写体の写っている領域をシルエッ
ト領域とする(図9)。次に、初期値として与えられて
いるボクセル空間を8つに等分割し、分割後のボクセル
が持つ8頂点と各シルエット画像の視点とを結ぶ投影線
を作成する。その後、投影線と各シルエット画像との交
点を求め、さらにそれら交点座標が各シルエット画像上
で作るバウンディングボックスを求める。全てのシルエ
ット画像において、このバウンディングボックスの内部
領域が、シルエット領域とそれ以外の領域を含む場合、
投影元となったボクセルが被写体の概略形状の境界上に
あると判定する。この、境界上にあると判定されたボク
セル(境界ボクセル)のみを8つに等分割し、頂点から
の投影により再判定する、ということを繰り返し行なう
と、徐々に境界ボクセルが小さくなり、被写体の実際の
大きさ、形状に近い概略形状を境界ボクセルの集合とし
て得ることができる(図17)。例えば、一辺1mmの
ボクセルが得られるまで判定、8分割を繰り返せば解像
度が1mmの概略形状を得ることが出来る。
う(ステップ21)。ここでは、まず撮影画像の中から
被写体の全形が撮影されている画像複数枚をシルエット
画像として選択し、被写体の写っている領域をシルエッ
ト領域とする(図9)。次に、初期値として与えられて
いるボクセル空間を8つに等分割し、分割後のボクセル
が持つ8頂点と各シルエット画像の視点とを結ぶ投影線
を作成する。その後、投影線と各シルエット画像との交
点を求め、さらにそれら交点座標が各シルエット画像上
で作るバウンディングボックスを求める。全てのシルエ
ット画像において、このバウンディングボックスの内部
領域が、シルエット領域とそれ以外の領域を含む場合、
投影元となったボクセルが被写体の概略形状の境界上に
あると判定する。この、境界上にあると判定されたボク
セル(境界ボクセル)のみを8つに等分割し、頂点から
の投影により再判定する、ということを繰り返し行なう
と、徐々に境界ボクセルが小さくなり、被写体の実際の
大きさ、形状に近い概略形状を境界ボクセルの集合とし
て得ることができる(図17)。例えば、一辺1mmの
ボクセルが得られるまで判定、8分割を繰り返せば解像
度が1mmの概略形状を得ることが出来る。
【0036】次のステップ22では、このようにして得
られたボクセルの中心点同士を結ぶことにより、被写体
の概略形状表面を微少なポリゴンの集合として表わす
(図18)。
られたボクセルの中心点同士を結ぶことにより、被写体
の概略形状表面を微少なポリゴンの集合として表わす
(図18)。
【0037】ステップ23では、各頂点に与える六角形
画像の形状、大きさ、を決定するとともに、撮影画像と
六角形画素を対応付ける。本ステップでは、まずバッキ
ーボールを、その中心が前ステップで復元した形状の中
心と一致するように仮想的に配置する。次に、撮影画像
の視点と座標原点を結ぶ線とバッキーボール表面との交
点の座標を算出し、その交点座標を平面展開した六角形
画像上の座標に変換する。次に、ひとつの六角形内に存
在する交点がひとつとなるまで、図16の規則に従い、
六角形画像を階層的に分割する。次に、生成された六角
形画素とそれへの交点を持つ撮影画像との対応関係を記
憶する。最後に、ステップ21において復元した概略形
状の頂点数分の六角形画像の配列を確保する。ここで、
各六角形画像は上で求めた形状、及び大きさを持つ。
画像の形状、大きさ、を決定するとともに、撮影画像と
六角形画素を対応付ける。本ステップでは、まずバッキ
ーボールを、その中心が前ステップで復元した形状の中
心と一致するように仮想的に配置する。次に、撮影画像
の視点と座標原点を結ぶ線とバッキーボール表面との交
点の座標を算出し、その交点座標を平面展開した六角形
画像上の座標に変換する。次に、ひとつの六角形内に存
在する交点がひとつとなるまで、図16の規則に従い、
六角形画像を階層的に分割する。次に、生成された六角
形画素とそれへの交点を持つ撮影画像との対応関係を記
憶する。最後に、ステップ21において復元した概略形
状の頂点数分の六角形画像の配列を確保する。ここで、
各六角形画像は上で求めた形状、及び大きさを持つ。
【0038】次のステップ24では、図3に示したアル
ゴリズムにより、全頂点に対し、直接見える撮影画像か
らの色を、ステップ23の最後に配列確保した各頂点用
の六角形画素に割当てていく。ここではステップ33に
おいて、各撮影画像を仮想的な画面とみなし、撮影画像
上にステップ21で復元した概略形状を、OpenGL
によるZバッファ法を適用して仮想的に描画することに
より撮影画像上の画素のZ値を求める。次に、得られた
Z値と復元概略形状上の各頂点と、その投影線と撮影画
像間の交点との距離を比較し、それが画像上のZ値と等
しければ、その頂点は撮影画像から可視であると判定す
る(ステップ36)、ある撮影画像から可視であると判
定された頂点には、その頂点からの投影線と撮影画像の
交差する画素の色を、ステップ24で求めた関係に基づ
いた六角形画素に割当てる(ステップ37)。ここで色
を割当てられた画素が有色画素となる。
ゴリズムにより、全頂点に対し、直接見える撮影画像か
らの色を、ステップ23の最後に配列確保した各頂点用
の六角形画素に割当てていく。ここではステップ33に
おいて、各撮影画像を仮想的な画面とみなし、撮影画像
上にステップ21で復元した概略形状を、OpenGL
によるZバッファ法を適用して仮想的に描画することに
より撮影画像上の画素のZ値を求める。次に、得られた
Z値と復元概略形状上の各頂点と、その投影線と撮影画
像間の交点との距離を比較し、それが画像上のZ値と等
しければ、その頂点は撮影画像から可視であると判定す
る(ステップ36)、ある撮影画像から可視であると判
定された頂点には、その頂点からの投影線と撮影画像の
交差する画素の色を、ステップ24で求めた関係に基づ
いた六角形画素に割当てる(ステップ37)。ここで色
を割当てられた画素が有色画素となる。
【0039】ステップ25では、各六角形画像に対し
て、以下を無色画素がひとつもなくなるまで行なう(図
4)。まず、画像内の全ての無色画素を抽出し、その無
色画素を有色画素との隣接数の降順にソートする(ステ
ップ42,43)。結果のキューのトップの画素をq
topとすると、qtopを隣接する有色画素の色平均とす
る。ただし、六角形画像の境界上の六角形画素について
は、もとのバッキーボール上で隣接する画素を考慮して
補間を行なう。qtopに隣接する無色画素があれば、無
色画素の隣接数を変更し、キューを再ソートし、トップ
の色を補間により決定する。ここで、ステップ44で
は、隣接有色画素の色の平均値を補間の色とする。
て、以下を無色画素がひとつもなくなるまで行なう(図
4)。まず、画像内の全ての無色画素を抽出し、その無
色画素を有色画素との隣接数の降順にソートする(ステ
ップ42,43)。結果のキューのトップの画素をq
topとすると、qtopを隣接する有色画素の色平均とす
る。ただし、六角形画像の境界上の六角形画素について
は、もとのバッキーボール上で隣接する画素を考慮して
補間を行なう。qtopに隣接する無色画素があれば、無
色画素の隣接数を変更し、キューを再ソートし、トップ
の色を補間により決定する。ここで、ステップ44で
は、隣接有色画素の色の平均値を補間の色とする。
【0040】次に、図14での変換規則に則り、全頂点
の六角形画像を通常の2次元配列の画像に変換した後
(ステップ26)、ステップ27でそれらの画像を1枚
ないしは複数枚の画像データとしてマージする。マージ
は頂点番号順に六角形画像を並べることにより行なう。
の六角形画像を通常の2次元配列の画像に変換した後
(ステップ26)、ステップ27でそれらの画像を1枚
ないしは複数枚の画像データとしてマージする。マージ
は頂点番号順に六角形画像を並べることにより行なう。
【0041】[第2の実施形態]図5は、本発明の第2
の実施形態による装置構成図である。本装置は、第1の
実施形態において、マージ後の画像データを圧縮する画
像圧縮部56を備えたものであり、概略形状生成部5
1、六角形画像決定部52、色情報付加部53、無色画
素色決定部54、二次元配列画像変換合成部55は、図
1における概略形状生成部11、六角形画像決定部1
2、色情報付加部13、無色画素色決定部14、二次元
配列画像変換合成部15と同様のものである。ただし、
情報記憶部57は、図1の情報記憶部17に加えて、画
像圧縮部56で圧縮された画像データをも記憶する。
の実施形態による装置構成図である。本装置は、第1の
実施形態において、マージ後の画像データを圧縮する画
像圧縮部56を備えたものであり、概略形状生成部5
1、六角形画像決定部52、色情報付加部53、無色画
素色決定部54、二次元配列画像変換合成部55は、図
1における概略形状生成部11、六角形画像決定部1
2、色情報付加部13、無色画素色決定部14、二次元
配列画像変換合成部15と同様のものである。ただし、
情報記憶部57は、図1の情報記憶部17に加えて、画
像圧縮部56で圧縮された画像データをも記憶する。
【0042】また、上記構成により実現される本実施形
態の処理の流れでは、第1の実施形態でのフローに加
え、生成画像データの圧縮を行なうステップを有する。
フローチャートを図6に示す。本実施形態におけるポリ
ゴンデータ化(ステップ62)、色情報付加(ステップ
64)及び二次元配列画像変換のアルゴリズム(ステッ
プ66)は第1の実施形態におけるステップ22,2
4,26とそれぞれ同じであるとする。
態の処理の流れでは、第1の実施形態でのフローに加
え、生成画像データの圧縮を行なうステップを有する。
フローチャートを図6に示す。本実施形態におけるポリ
ゴンデータ化(ステップ62)、色情報付加(ステップ
64)及び二次元配列画像変換のアルゴリズム(ステッ
プ66)は第1の実施形態におけるステップ22,2
4,26とそれぞれ同じであるとする。
【0043】ステップ61でもステップ21同様、シル
エット法により形状復元を行なう。ここでも、まず撮影
画像の中から被写体の全形が撮影されている画像複数枚
をシルエット画像として選択し、被写体の写っている領
域をシルエット領域とする(図9)。次に、初期値とし
て与えられているボクセル空間を8つに等分割し、分割
後のボクセルが持つ8頂点と各シルエット画像の視点と
を結ぶ投影線を作成する。その後、投影線と各シルエッ
ト画像との交点を求める。各シルエット画像に対する8
つの交点座標が、シルエット領域内と領域外の双方に分
散しているかどうかを調べる。全シルエット画像に対し
て分散している場合、投影元となったボクセルを第1の
実施形態における境界ボクセルと同じとみなす。この判
定法とボクセルの8分割の繰り返しにより、第1の実施
形態同様、被写体の概略形状を境界ボクセルの集合とし
て得る。ただし本実施形態の場合は、境界ボクセルの判
定法が、ボクセル頂点からの投影線との変点座標のシル
エット領域との内外判定のみであり、例えばボクセル領
域内に被写体の小さな凸部が入り込んでいたりすると、
投影線の交点はすべてシルエット領域外にあると判定さ
れてしまい、得られる概略形状の表面が穴が空いたよう
に欠損してしまう場合がある。その場合には、欠損部の
境界上にあるボクセルに隣接するように最小の大きさの
ボクセルを付加し、その付加したボクセルの境界ボクセ
ル判定を行ない、境界ボクセルのみを残していく、とい
うことを欠損部がなくなるまで繰り返すことにより、閉
じた概略形状表面を得る。
エット法により形状復元を行なう。ここでも、まず撮影
画像の中から被写体の全形が撮影されている画像複数枚
をシルエット画像として選択し、被写体の写っている領
域をシルエット領域とする(図9)。次に、初期値とし
て与えられているボクセル空間を8つに等分割し、分割
後のボクセルが持つ8頂点と各シルエット画像の視点と
を結ぶ投影線を作成する。その後、投影線と各シルエッ
ト画像との交点を求める。各シルエット画像に対する8
つの交点座標が、シルエット領域内と領域外の双方に分
散しているかどうかを調べる。全シルエット画像に対し
て分散している場合、投影元となったボクセルを第1の
実施形態における境界ボクセルと同じとみなす。この判
定法とボクセルの8分割の繰り返しにより、第1の実施
形態同様、被写体の概略形状を境界ボクセルの集合とし
て得る。ただし本実施形態の場合は、境界ボクセルの判
定法が、ボクセル頂点からの投影線との変点座標のシル
エット領域との内外判定のみであり、例えばボクセル領
域内に被写体の小さな凸部が入り込んでいたりすると、
投影線の交点はすべてシルエット領域外にあると判定さ
れてしまい、得られる概略形状の表面が穴が空いたよう
に欠損してしまう場合がある。その場合には、欠損部の
境界上にあるボクセルに隣接するように最小の大きさの
ボクセルを付加し、その付加したボクセルの境界ボクセ
ル判定を行ない、境界ボクセルのみを残していく、とい
うことを欠損部がなくなるまで繰り返すことにより、閉
じた概略形状表面を得る。
【0044】ステップ63では、ステップ23と同様
に、各頂点に与える六角形画像の形状、大きさ、を決定
するとともに、撮影画像と六角形画像を対応付ける。本
ステップにおいても、まずバッキーボールを、その中心
が前ステップで復元した形状の中心と一致するように仮
想的に配置する。次に、撮影画像の視点と座標原点を清
ぶ線とバッキーボール表面との交点の座標を算出し、そ
の交点座標を平面展開した六角形画像上の座標に変換す
る。次に、パラメータにより指定された階層まで、図1
6の規則に従い六角形画像を分割する。分割結果のひと
つの六角形画素上にふたつ以上の交点が存在している場
合は、最も六角形の中心座標に近いもののみ残す。次
に、生成された六角形画素とそれへの交点を持つ撮影画
像との対応関係を記憶する。最後に、ステップ21にお
いて復元した概略形状の頂点数分の六角形画像の配列を
確保する。ここで、各六角形画像は上で求めた形状、及
び大大きさを持つ。
に、各頂点に与える六角形画像の形状、大きさ、を決定
するとともに、撮影画像と六角形画像を対応付ける。本
ステップにおいても、まずバッキーボールを、その中心
が前ステップで復元した形状の中心と一致するように仮
想的に配置する。次に、撮影画像の視点と座標原点を清
ぶ線とバッキーボール表面との交点の座標を算出し、そ
の交点座標を平面展開した六角形画像上の座標に変換す
る。次に、パラメータにより指定された階層まで、図1
6の規則に従い六角形画像を分割する。分割結果のひと
つの六角形画素上にふたつ以上の交点が存在している場
合は、最も六角形の中心座標に近いもののみ残す。次
に、生成された六角形画素とそれへの交点を持つ撮影画
像との対応関係を記憶する。最後に、ステップ21にお
いて復元した概略形状の頂点数分の六角形画像の配列を
確保する。ここで、各六角形画像は上で求めた形状、及
び大大きさを持つ。
【0045】ステップ65での補間のアルゴリズムは図
4と同じだが、ステップ44において求める画素の色
は、該当無色画素の中心座標に最も近い交点座標を持つ
隣接有色画素の色、とする。また、ステップ67での画
像のマージ方法は、画像データを、頂点色の分散が閾値
以上のものと以下のものとの二種類に分類し、それぞれ
頂点番号順に並べる。閾値以上の画像については非圧縮
のままにし、閾値以下の画像についてはステップ68に
おいてjpegによる圧縮を行なう。
4と同じだが、ステップ44において求める画素の色
は、該当無色画素の中心座標に最も近い交点座標を持つ
隣接有色画素の色、とする。また、ステップ67での画
像のマージ方法は、画像データを、頂点色の分散が閾値
以上のものと以下のものとの二種類に分類し、それぞれ
頂点番号順に並べる。閾値以上の画像については非圧縮
のままにし、閾値以下の画像についてはステップ68に
おいてjpegによる圧縮を行なう。
【0046】尚、以上の実施形態において、それぞれ全
ての適用範囲はこれに限定されるものではない。例え
ば、第1の実施形態におけるステップ21でのシルエッ
ト法を第2の実施形態におけるステップ61でのシルエ
ット法にも適用することも考えられるし、その逆も有り
得る。また例えば、第1の実施形態におけるステップ4
4での補間方法を第2の実施形態における補間方法にも
適用することも考えられるし、その逆も有り得る。さら
に隣接有色画素の色の中からの任意の一色とすることも
考えられる。また、第1の実施形態における画像のマー
ジ方法を第2の実施形態において適用することも考えら
れるし、頂点色の平均値が近いものから順番にマージし
ていく手法も考えられる。一方、ステップ27や67に
おけるマージ後の画像データの形状についても、頂点毎
の六角形画像の大きさと頂点数から面積を推定し、正方
形に近い縦横比の形状を持つような画像データが得られ
るようにすることも考えられる。また、ステップ68に
おける圧縮もベクトル量子化を始めとする他の圧縮手法
を適用することも考えられる。
ての適用範囲はこれに限定されるものではない。例え
ば、第1の実施形態におけるステップ21でのシルエッ
ト法を第2の実施形態におけるステップ61でのシルエ
ット法にも適用することも考えられるし、その逆も有り
得る。また例えば、第1の実施形態におけるステップ4
4での補間方法を第2の実施形態における補間方法にも
適用することも考えられるし、その逆も有り得る。さら
に隣接有色画素の色の中からの任意の一色とすることも
考えられる。また、第1の実施形態における画像のマー
ジ方法を第2の実施形態において適用することも考えら
れるし、頂点色の平均値が近いものから順番にマージし
ていく手法も考えられる。一方、ステップ27や67に
おけるマージ後の画像データの形状についても、頂点毎
の六角形画像の大きさと頂点数から面積を推定し、正方
形に近い縦横比の形状を持つような画像データが得られ
るようにすることも考えられる。また、ステップ68に
おける圧縮もベクトル量子化を始めとする他の圧縮手法
を適用することも考えられる。
【0047】[他の実施形態]図7を参照すると、本発
明の他の実施形態の3次元画像情報生成装置は入力装置
71と記憶装置72,73と出力装置74と記録媒体7
5とデータ処理装置76で構成されている。
明の他の実施形態の3次元画像情報生成装置は入力装置
71と記憶装置72,73と出力装置74と記録媒体7
5とデータ処理装置76で構成されている。
【0048】入力装置71は撮影情報、視点情報を入力
するためのものである。記録装置72は図1中の情報記
憶部16に対応する。記憶装置73はハードディスクで
ある。出力装置74は生成された3次元画像情報を表示
したり、印刷したりする。記録媒体75は以上の各実施
形態で述べた処理からなる3次元画像情報生成プログラ
ムが記録されている、FD(フロッピィディスク(登録
商標))、CD−ROM等の記録媒体である。データ処
理装置76は記録媒体75から3次元画像情報生成プロ
グラムを読み込んで、これを実行するCPU(コンピュ
ータ)である。
するためのものである。記録装置72は図1中の情報記
憶部16に対応する。記憶装置73はハードディスクで
ある。出力装置74は生成された3次元画像情報を表示
したり、印刷したりする。記録媒体75は以上の各実施
形態で述べた処理からなる3次元画像情報生成プログラ
ムが記録されている、FD(フロッピィディスク(登録
商標))、CD−ROM等の記録媒体である。データ処
理装置76は記録媒体75から3次元画像情報生成プロ
グラムを読み込んで、これを実行するCPU(コンピュ
ータ)である。
【0049】尚、3次元画像情報生成プログラムは、図
1や図5で示した装置における各部の一部もしくは全部
の機能をコンピュータで実行するためのプログラムとし
て構成したもの、あるいは、図2〜4や図6で示した処
理のステップをコンピュータで実行するためのプログラ
ムとして構成したものである。この3次元画像情報生成
プログラムは、上記のようなコンピュータが読み取りで
きる記録媒体に記録することによって、保存したり、配
布したり、提供したりすることが可能であるとともに、
インターネットや電子メールなど、ネットワークを通し
て配布したり提供したりすることも可能である。
1や図5で示した装置における各部の一部もしくは全部
の機能をコンピュータで実行するためのプログラムとし
て構成したもの、あるいは、図2〜4や図6で示した処
理のステップをコンピュータで実行するためのプログラ
ムとして構成したものである。この3次元画像情報生成
プログラムは、上記のようなコンピュータが読み取りで
きる記録媒体に記録することによって、保存したり、配
布したり、提供したりすることが可能であるとともに、
インターネットや電子メールなど、ネットワークを通し
て配布したり提供したりすることも可能である。
【0050】
【発明の効果】以上説明したように、本発明では、
1.同一の撮影画像から形状復元と色情報抽出の両方を
行なうので復元形状と画像の合わせ込みの必要がなく、
短時間でデータが生成できる。 2.六角形画像を用いることにより、全方位からの色デ
ータを扱いが楽な少数枚の画像データとして得ることが
できる。 3.そのためデータの圧縮に従来の画像圧縮アルゴリズ
ムを適用できる。以上のような効果が得られる。
行なうので復元形状と画像の合わせ込みの必要がなく、
短時間でデータが生成できる。 2.六角形画像を用いることにより、全方位からの色デ
ータを扱いが楽な少数枚の画像データとして得ることが
できる。 3.そのためデータの圧縮に従来の画像圧縮アルゴリズ
ムを適用できる。以上のような効果が得られる。
【図面の簡単な説明】
【図1】本発明の第1の実施形態の3次元画像情報生成
装置の構成図である。
装置の構成図である。
【図2】本発明の第1の実施形態における全体の処理の
流れを示すフローチャートである。
流れを示すフローチャートである。
【図3】本発明の第1の実施形態における六角形画素の
色づけの流れを示すフローチャートである。
色づけの流れを示すフローチャートである。
【図4】本発明の第1の実施形態における補間の流れを
示すフローチャートである。
示すフローチャートである。
【図5】本発明の第2の実施形態の3次元画像情報生成
装置の構成図である。
装置の構成図である。
【図6】本発明の第2の実施形態における全体の処理の
流れを示すフローチャートである。
流れを示すフローチャートである。
【図7】本発明の他の実施形態の3次元画像情報生成装
置の構成図である。
置の構成図である。
【図8】本発明の位置付け、及び本発明において生成す
るデータの概念図である。
るデータの概念図である。
【図9】シルエット法の原理を示す概念図である。
【図10】六角形画像及び六角形画素の説明図である。
【図11】バッキーボールの概念を表わす説明図であ
る。
る。
【図12】バッキーボールを二次元平面展開した図であ
る。
る。
【図13】図12の正五角形を正六角形に置換した図で
ある。
ある。
【図14】六角形画像を二次元配列の画像データに変換
する図である。
する図である。
【図15】三次元仮想空間におけるバッキーボールと撮
影画像の中心座標と視点を結ぶ投影線との交点を求める
概念図である。
影画像の中心座標と視点を結ぶ投影線との交点を求める
概念図である。
【図16】六角形画像の階層分割の概念図である。
【図17】シルエット法(第1の実施形態でのステップ
21、第2の実施形態でのステップ61)における、ボ
クセル空間の8分割を表わす概念図である。
21、第2の実施形態でのステップ61)における、ボ
クセル空間の8分割を表わす概念図である。
【図18】第1の実施形態でのステップ22、ポリゴン
データ化における、ポリゴンデータ生成手法を表わす概
念図である。
データ化における、ポリゴンデータ生成手法を表わす概
念図である。
11…概略形状生成部
12…六角形画像決定部
13…色情報付加部
14…無色画素色決定部
15…二次元配列画像変換合成部
16…情報記憶部
21〜27,31〜37,41〜44…ステップ
51…概略形状生成部
52…六角形画像決定部
53…色情報付加部
54…無色画素色決定部
55…二次元配列画像変換合成部
56…画像圧縮部
57…情報記憶部
61〜68…ステップ
71…入力装置
72…記憶装置
73…記憶装置
74…出力装置
75…記録媒体
76…データ処理装置
フロントページの続き
(72)発明者 北沢 仁志
東京都千代田区大手町二丁目3番1号 日
本電信電話株式会社内
Fターム(参考) 5B050 BA09 DA04 DA07 EA09 EA10
EA27 EA28 EA30 FA05
5B057 BA11 CA01 CA12 CB01 CB13
CE16 CG01 DA17 DB03 DB06
5B080 BA01 BA02 BA04 BA05 FA02
FA15 GA22
Claims (6)
- 【請求項1】 同一被写体を多数の視点方向から撮影し
た複数枚の撮影画像及びそれらの視点情報を入力とし、
その被写体の概略形状を復元し、さらにその形状表面に
視点に応じた撮影画像の色情報を付加する3次元画像情
報生成方法であって、 前記撮影画像のうちの被写体の全形が撮影されている画
像複数枚をシルエット画像として選択し、そのシルエッ
ト情報を用いて、被写体の概略形状を微少領域の集合と
して復元する段階と、 前記復元された概略形状に撮影画像の色情報を付加する
ための六角形画像の大きさ及び形状と六角形画像を構成
する六角形画素と撮影画像との対応付けを決定する段階
と、 前記対応付けを決定する段階で求めた六角形画像を形状
表面上の全微少領域に割当て、その微少領域毎に、撮影
画像の視点と微少領域を結ぶ投影線と撮影画像との交点
上の色を、対応する六角形画素に割当てる段階と、 前記割当てる段階において色が割当てられなかった六角
形画素について、隣接六角形画素の色を用いて色を決定
する段階と、 前記六角形画素で構成される全ての六角形画像を二次元
配列の画像データに変換し、それら画像データを1枚な
いしは複数枚の画像データにマージする段階とを有する
ことを特徴とする3次元画像情報生成方法。 - 【請求項2】 前記マージする段階の後に、マージ後の
画像データを圧縮する段階を有することを特徴とする請
求項1記載の3次元画像情報生成方法。 - 【請求項3】 同一被写体を多数の視点方向から撮影し
た複数枚の撮影画像及びそれらの視点情報を入力とし、
その被写体の概略形状を復元し、さらにその形状表面に
視点に応じた撮影画像の色情報を付加する3次元画像情
報生成装置であって、 前記撮影画像のうちの被写体の全形が撮影されている画
像複数枚をシルエット画像として選択し、そのシルエッ
ト情報を用いて、被写体の概略形状を微少領域の集合と
して復元する概略形状生成手段と、 前記復元された形状情報に撮影画像の色情報を付加する
ための六角形画像の大きさ及び形状と六角形画像を構成
する六角形画素と撮影画像との対応付けを決定する六角
形画像情報決定手段と、 前記決定された六角形画像を形状表面上の全微少領域に
割当て、その微少領域毎に、撮影画像の視点と微少領域
を結ぶ視線と撮影画像との交点上の撮影画像の色を、対
応する六角形画素に割当てる色情報付加手段と、 前記色情報付加手段において色が割当てられなかった六
角形画素について、隣接六角形画素の色を用いて色を決
定する無色画素色決定手段と、 前記六角形画素で構成される全ての六角形画像を二次元
配列の画像データに変換し、それら画像データを1枚な
いしは複数枚の画像データにマージする二次元配列画像
変換合成手段とを有することを特徴とする3次元画像情
報生成装置。 - 【請求項4】 前記二次元配列画像変換合成手段でマー
ジされた後の画像データを圧縮する圧縮手段を有するこ
とを特徴とする請求項3記載の3次元画像情報生成装
置。 - 【請求項5】 請求項1または2記載の3次元画像情報
生成方法における段階を、コンピュータに実行させるた
めのプログラムとしたことを特徴とする3次元画像情報
生成プログラム。 - 【請求項6】 請求項1または2記載の3次元画像情報
生成方法における段階を、コンピュータに実行させるた
めのプログラムとし、 前記プログラムを、前記コンピュータが読み取りできる
記録媒体に記録したことを特徴とする3次元画像情報生
成プログラムを記録した記録媒体。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2001290578A JP2003099800A (ja) | 2001-09-25 | 2001-09-25 | 3次元画像情報生成方法および装置、ならびに3次元画像情報生成プログラムとこのプログラムを記録した記録媒体 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2001290578A JP2003099800A (ja) | 2001-09-25 | 2001-09-25 | 3次元画像情報生成方法および装置、ならびに3次元画像情報生成プログラムとこのプログラムを記録した記録媒体 |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2003099800A true JP2003099800A (ja) | 2003-04-04 |
Family
ID=19112870
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2001290578A Pending JP2003099800A (ja) | 2001-09-25 | 2001-09-25 | 3次元画像情報生成方法および装置、ならびに3次元画像情報生成プログラムとこのプログラムを記録した記録媒体 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2003099800A (ja) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR100721536B1 (ko) | 2005-12-09 | 2007-05-23 | 한국전자통신연구원 | 2차원 평면상에서 실루엣 정보를 이용한 3차원 구조 복원방법 |
JP2008191072A (ja) * | 2007-02-07 | 2008-08-21 | Nippon Telegr & Teleph Corp <Ntt> | 3次元形状復元方法,3次元形状復元装置,その方法を実装した3次元形状復元プログラム及びそのプログラムを記録した記録媒体 |
CN100417833C (zh) * | 2004-01-30 | 2008-09-10 | 莱因韦贝尔机械传动有限公司 | 制造摩擦片衬面的方法和设备 |
US7538774B2 (en) | 2003-06-20 | 2009-05-26 | Nippon Telegraph And Telephone Corporation | Virtual visual point image generating method and 3-d image display method and device |
WO2023106117A1 (ja) * | 2021-12-09 | 2023-06-15 | ソニーグループ株式会社 | 情報処理装置、情報処理方法、及び、プログラム |
-
2001
- 2001-09-25 JP JP2001290578A patent/JP2003099800A/ja active Pending
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7538774B2 (en) | 2003-06-20 | 2009-05-26 | Nippon Telegraph And Telephone Corporation | Virtual visual point image generating method and 3-d image display method and device |
CN100417833C (zh) * | 2004-01-30 | 2008-09-10 | 莱因韦贝尔机械传动有限公司 | 制造摩擦片衬面的方法和设备 |
KR100721536B1 (ko) | 2005-12-09 | 2007-05-23 | 한국전자통신연구원 | 2차원 평면상에서 실루엣 정보를 이용한 3차원 구조 복원방법 |
US7760932B2 (en) | 2005-12-09 | 2010-07-20 | Electronics And Telecommunications Research Institute | Method for reconstructing three-dimensional structure using silhouette information in two-dimensional image |
JP2008191072A (ja) * | 2007-02-07 | 2008-08-21 | Nippon Telegr & Teleph Corp <Ntt> | 3次元形状復元方法,3次元形状復元装置,その方法を実装した3次元形状復元プログラム及びそのプログラムを記録した記録媒体 |
WO2023106117A1 (ja) * | 2021-12-09 | 2023-06-15 | ソニーグループ株式会社 | 情報処理装置、情報処理方法、及び、プログラム |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4733454B2 (ja) | シェルテクスチャ関数 | |
CN1215443C (zh) | 三维物体的分层表示及利用其绘制物体的方法和装置 | |
US6081269A (en) | Image processing system and method for generating data representing a number of points in a three-dimensional space from a plurality of two-dimensional images of the space | |
US8432435B2 (en) | Ray image modeling for fast catadioptric light field rendering | |
US6518963B1 (en) | Method and apparatus for generating patches from a 3D mesh model | |
US6999073B1 (en) | Method and system for generating fully-textured 3D | |
Lu et al. | Illustrative interactive stipple rendering | |
CN108648269A (zh) | 三维建筑物模型的单体化方法和*** | |
JP5299173B2 (ja) | 画像処理装置および画像処理方法、並びにプログラム | |
US9508191B2 (en) | Optimal point density using camera proximity for point-based global illumination | |
KR100738500B1 (ko) | 영상 기반 돌출 변위 매핑 방법과, 이를 이용한 이중 변위매핑 방법 | |
US20070262988A1 (en) | Method and apparatus for using voxel mip maps and brick maps as geometric primitives in image rendering process | |
Zhang et al. | Visibility-guided simplification | |
CN113012293A (zh) | 石刻模型构建方法、装置、设备及存储介质 | |
CN103530907B (zh) | 基于图像的复杂三维模型绘制方法 | |
JP7038683B2 (ja) | 合成装置、方法及びプログラム | |
JP2001022936A (ja) | 3次元形状生成装置 | |
WO2022156451A1 (zh) | 一种渲染方法及装置 | |
JP3971714B2 (ja) | 仮想視点画像生成方法及び仮想視点画像生成装置、ならびに仮想視点画像生成プログラム及び記録媒体 | |
JP3629243B2 (ja) | モデリング時の距離成分を用いてレンダリング陰影処理を行う画像処理装置とその方法 | |
JP2003099800A (ja) | 3次元画像情報生成方法および装置、ならびに3次元画像情報生成プログラムとこのプログラムを記録した記録媒体 | |
Frommholz et al. | Inlining 3d reconstruction, multi-source texture mapping and semantic analysis using oblique aerial imagery | |
Soh et al. | Texture mapping of 3D human face for virtual reality environments | |
JP6814036B2 (ja) | 要素画像群生成装置及びそのプログラム | |
Chen et al. | A quality controllable multi-view object reconstruction method for 3D imaging systems |