JP3030485B2 - 3次元形状抽出方法及び装置 - Google Patents
3次元形状抽出方法及び装置Info
- Publication number
- JP3030485B2 JP3030485B2 JP6047491A JP4749194A JP3030485B2 JP 3030485 B2 JP3030485 B2 JP 3030485B2 JP 6047491 A JP6047491 A JP 6047491A JP 4749194 A JP4749194 A JP 4749194A JP 3030485 B2 JP3030485 B2 JP 3030485B2
- Authority
- JP
- Japan
- Prior art keywords
- area
- region
- extracted
- value
- pixels
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T15/00—3D [Three Dimensional] image rendering
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/50—Depth or shape recovery
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Graphics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Processing Or Creating Images (AREA)
- Image Analysis (AREA)
Description
クスと実写映像との合成を行う方法及びその装置に関す
る。
作でコンピュータグラフィックス(以下CGという) と実
写映像の合成が盛んに用いられるようになってきた。例
えば、CGで作った架空の建築物などに、予め撮影した人
間の実写映像を合成することで、あたかも人間がその建
築物の中を歩いている効果を創り出せる。このCGと実写
映像の合成によって作られた映像は、見る者にとってリ
アルでインパクトの強いものであり、特に景観シミュレ
ーションには欠かせないものとなっている。
平面、2次曲面などの簡単な幾何形状 (形状プリミティ
ブ) を使って定義し、その表面には任意の色付けをした
り、画像データを貼り付ける処理を行う。しかしこの方
法では、木や川などの自然物を描画すると常にその姿が
固定された状態に見えてしまう。そこで、予め風に揺れ
ている木あるいは水が流れている川を撮影しておき、CG
で作成したシーンにその実写映像を合成することで、よ
り自然なアニメーションを作ることができる。従来の方
法では、撮影した実写映像から画像を選択し、平板など
の簡単な形状プリミティブに貼り付けることでCGとの合
成処理を行っている。この合成処理を各フレームごとに
繰り返して行い、連続した合成画像のアニメーションを
製作するのである。
として「景観シミュレーションのための 2.5次元簡易情
景モデル構築の一手法」 (1992年7月:「画像の認識・
理解シンボジウム (MIRU '92) 」がある。また本発明の
一部である3次元図形抽出に関するものとして特開昭62
-162173号公報及び特開平3-244005号公報がある。
以下の如き解決すべき課題があった。 (1) 実写映像を3次元形状を持ったCGモデルに変換する
のを簡便に行わしめること (2) この変換の際にオペレータの介入を許容すること (3) 動画の実写映像とCGとの合成を可能にすること (4) 実写映像から所要の部分を抽出する場合の操作性、
能率を高めること (5) CGモデルの回転、拡大縮小及び移動の操作性を高め
ること (6) CGと実写映像との合成の同期を容易にとれるように
すること
装置(システム)では、画像処理の技法を用いて、計算
機がユーザとの対話処理を行って、 1) 映像情報の物体単位の切り分け、 2) 3次元幾何情報を付加した動画オブジェクトの生
成、 3) CGモデルと動画オブジェクトの同時表示、の3つの
処理を行う。1)によりスタジオでのブルーバック撮影
が、2)により映像撮影時のカメラの位置情報の測定や記
録が不要になり、また3)により表示の際に視点を変更す
ることが可能となる。
ムでは、特定物体領域の抽出部、3次元幾何情報の抽出
部、動画オブジェクトとCGの同時描画部の3つの処理部
から構成されている。特定物体領域の抽出部と3次元幾
何情報の抽出部により、CGと合成するための動画オブジ
ェクトと呼ぶデータが作られて、ハードディスクに格納
される。このデータを利用して、動画オブジェクト及び
CGの同時描画部では、非リアルタイムに合成画像を生成
する。
って入力された映像情報から、特定物体の領域を切り出
す処理を行う。この処理の流れを図2に示す。ここでは
入力データとして連続画像シーケンスを受け取り、出力
として特定物体を包含する矩形領域の画像シーケンス
と、それと同じサイズのアルファ値を格納したアルファ
マップシーケンスを作る。物体の領域を2値のマスクで
切り分けると境界部分に不自然なエリアシングが生じ
る。これを防ぐためにアルファ値を使って領域を定義す
る。あるn枚目の画像について、ユーザとの対話処理で
特定物体の領域を決定後、n+1〜n+m枚目の処理は
前フレームの処理結果を利用して計算機で半自動的に行
う。
部が作った特定物体を包含する矩形領域の画像シーケン
スとアルファマップシーケンスを利用して2次元の映像
情報から3次元幾何情報を抽出する。この3次元幾何情
報の抽出は、ユーザが2次元の画像上の物体に、複数の
簡単な形状プリミティブ(直方体など)を変形、回転、
移動なとの操作をして、フィッティングを行うことで実
現する。本システムでは視点情報だけでなく、物体の形
状情報及び各面に張り付いているテクスチャ画像を抽出
する。この抽出部では、動画オブジェクトと呼ぶデータ
構造を作るために、映像中の物体に3次元幾何情報を与
え、そのCGモデル化された物体の各面に張り付く映像情
報を抽出し、正面から見たものに正規化して格納する。
を経て生成されたデータは動画オブジェクトと呼ぶ構造
になる。図3に動画オブジェクトの構造の概略を示す。
動画オブジェクトはCGと映像を融合するために新たに作
ったデータ構造で、形状データの他に表面情報として、
各面に張り付く映像情報(静止画,或いは動画)へのポ
インタを格納している。
タとCGデータとを同時に描画する。このとき、メタ情報
として描画するCGシーンの時刻Ti と時間間隔Δtを指
定する。CGデータには各物体の形状データの他に、各時
刻に於ける位置情報が含まれる。また、時刻Ti によ
り、動画オブジェクトの中の映像データから各面に貼り
付けられる映像が選択される。時刻Ti に於ける物体の
表面属性が決定された後、時刻Ti における合成シーン
を生成する。
明は大きく3つに分けられる。 (1) 全体構成に関するもの (2) 特定物体の領域の抽出部及び3次元形状情報の付加
部に関するもの (3) 合成画像生成部に関するもの
の構成に関するもの 2-2 前記抽出部の構成に関するもの 2-3 3次元形状モデルの表示に関するもの の3つに分けられる。以下(1) を第1群の発明、2-1 、
2-2 、2-3 を夫々第2、3、4群の発明、(3) を第5群
の発明と言う。
ないが、他の群の発明に関連するので掲記しておく。 [第1群の発明] (概要) 第1群の発明はCGと実写映像との合成の全体構成に関す
るものである。
写映像の合成は、合成後の映像を想定した上で撮影し、
実写画像から合成すべき部分のみを切り出し、CGに重ね
合わせる手法をとっていた。このような手法における撮
影の場合、ブルーバックによるスタジオ撮影が必要であ
ったり、撮影時にカメラの位置を測定する必要があるな
ど、大掛かりな環境が必要である。
'92の文献に提案されている。これは視点情報を実写映
像から抽出し、その映像中の対象物を平面に近似して、
CGと合成する手法である。しかし、完全な3次元情報を
有するモデルではないため、合成時に視点を変更できな
いなど、合成処理に制限を受ける。特開平3-138784号公
報には静止画中の物体を3次元として扱うために、静止
画中の物体を3次元モデルに基づいて再構成し、その3
次元物体に相当する部分画像を、3次元物体モデルの表
面テクスチャとしてマッピングし表示する方式が提案さ
れている。この方式では、1つの3次元部に対し、複数
枚の入力画像から表面テクスチャを合成することも提案
している。しかし、映像 (動画像) の場合、表面テクス
チャが刻々と変化する場合も考えられ、複数テクスチャ
を合成した場合、時系列方向で平滑化したテクスチャが
得られてしまうこともあり不適当である。
術的背景の下になされたものであり、実写映像を3次元
形状を有するCGモデルに簡便に変換することができる画
像合成方法を提案することを第1の目的とする。また前
記CGモデルをフレームごとに生成して、その結果動画に
もできる映像合成方法を提供することを第2の目的とす
る。
法は、コンピュータグラフィックスと実写映像とを合成
する画像合成方法において、実写映像中の特定の領域を
抽出する過程と、抽出した領域に3次元形状の情報を付
加する過程と、抽出領域の情報及び3次元形状の情報に
基づき、抽出領域に係る情報をコンピュータグラフィッ
クスモデル化する過程とを備えることを主な特徴とす
る。
化した前記抽出領域に係る情報と他のコンピュータグラ
フィックスモデルとを混在表示させるべくこれらを合成
する過程を備える。そして動画作成のために複数フレー
ムに亘って同様の処理を実行する。
タグラフィックスと実写映像とを合成する画像合成装置
において、実写映像中の特定の領域を抽出する手段と、
抽出した領域に3次元形状の情報を付加する手段と、抽
出領域の情報及び3次元形状の情報に基づき、抽出領域
に係る情報をコンピュータグラフィックスモデル化する
手段とを備えることを主な特徴とする。
化した前記抽出領域に係る情報と他のコンピュータグラ
フィックスモデルとを混在表示させるべくこれらを合成
する手段を備える。
出し、これに3次元形状情報を付加する。これにより実
写映像の前記特定物体の表面属性を有するCGモデルが生
成される。これを単独で用いるか、又は他のCGモデルと
混合する。更に複数フレームに亘って同様の処理を行う
ことで動画での画像合成が行える。
具体的に説明する。図4は本発明方法を実施するための
装置のブロック図であり、図5はその処理の流れ図であ
る。図4において9はTVカメラ、ビデオテープ、ビデオ
ディスク等の映像供給装置であり、これらから得られた
実写映像情報はビデオメモリ等からなる画像記憶部5へ
フレーム毎に記憶される。この画像記憶部5に記憶され
ている実写映像情報は特定物体領域抽出部1へ与えら
れ、ここで実写映像中の特定の物体の領域が抽出され
る。抽出領域の指示はオペレータがマウス等のポインテ
ィング装置12を用いて行う。またその具体的な内容は第
2〜4群の発明の説明に詳しい。図6は実写映像として
4角柱及び3角錐が表示されている場合に4角柱を抽出
領域として指定した(太線で示す)場合の状態を示して
いる。このようにして指定された領域の映像情報は3次
元形状情報付加部2へ送られ、ここで3次元形状情報が
付加される一方、形状・表面属性情報記憶部6に記憶さ
れる。
出部1から与えられた情報に3次元形状情報を付加し
て、これを形状・表面属性情報記憶部6に蓄える。3次
元形状情報付加部2の具体的構成は第2群の発明に詳し
いが、ここでも1例を挙げて説明する。
8に示すように指定して抽出した領域、又は物体を画像
表示装置10の画面に表示させて、オペレータに画像の焦
点距離fを入力させる(S1)。この入力にはキーボード等
の文字・数値入力装置11が使用される。次にポインティ
ング装置12を用いて画面上に稜線を描画させ、その奥行
の値を入力させる(S2)。図8には描画した稜線を太線で
示し、指定した奥行の値をZで表示している。この描
画、奥行指定は取消、訂正が可能である。面の特定は基
本的に3角形(3本の稜線)によって行えるから、この
発明でも図9に示すように3角形に分割するように稜線
を描画し、また3角形への分割のための補助線(矩形の
対角線)の描画を行い、相異る2本の稜線(補助線を含
む)が交わることなく、抽出領域内の総ての点が3本の
稜線に囲まれた状態になっている状態にする(S3)。
これはS1、S2で入力した焦点距離f、奥行Z、及び端点
の画像上の座標(x,y)に基づき、 X=(x/f)×Z Y=(y/f)×Z により得る。なお、稜線上の点及び稜線で囲まれた領域
内の点の3次元座標は、次の式によって算出できる。
(xi ,yi ),(Xi,Yi ,Zi )(i=1,2)
とすると、稜線上の点(x,y)の3次元座標(X,
Y,Z)は、 X=(1−t)X1 +tX2 Y=(1−t)Y1 +tY2 Z=(1−t)Z1 +tZ2 により得る。ただし、tは、x1 ≠x2 の場合は(x−
x1 )/(x2 −x1 )、x1 =x2 の場合は(y−y
1 )/(y2 −y1 )である。
それらの交点は3本の稜線の端点であることが保証され
ている。従って3つの交点の座標がなす平面は、3つの
交点の座標(Xi ,Yi ,Zi )(i=1,2,3)に
より求めることができる(自明)。この平面の方程式を
aX+bY+cZ−1=0とおくと、領域内の点の画像
上の座標(x,y)の3次元座標(X,Y,Z)は、 X=x/(ax+by+cf) Y=y/(ax+by+cf) Z=f/(ax+by+cf) により得られる。
3次元座標及び接続関係は形状情報として、端点の特定
物体領域上の座標対応及び特定物体領域画像の画像デー
タは表面属性情報として、形状・表面属性情報記憶部6
へ格納する(S5)。表1は形状・表面属性情報記憶部6の
記憶内容を示している。以上のS1〜S5の処理を全フレー
ムにつき反復する(S6)。
映像CGモデル生成部3でCGモデル化する。形状情報のCG
モデル化については稜線の接続関係及び3次元座標よ
り、端点を頂点、稜線を辺、囲まれる部分を面とみなす
ことによりそのままCGモデルを生成できる。
た部分の表面属性情報として、その位置に対応する画像
情報を、生成するCGモデルのテクスチャとする。その
際、その画像情報を、3次元空間で法線方向から見た画
像として正規化する。正規化の際の回転行列Rは、次式
で与える。
域の平面の方程式をaX+bY+cZ−1=0と表した
際のa,b,cに基づき
元座標(Xi ,Yi ,Zi )(i=1,2,3)により
求めることができる。このようなCGモデル化処理をすべ
てのフレームに対して適用し、実写映像に対するCGモデ
ルを、各フレームに対するCGモデル列として獲得し、こ
れを映像CGモデル記憶部7bに記憶させる。CGモデル作成
部13は上述のような実写映像から作成するのではない通
常のCGモデルを作成するものであり、作成されたCGモデ
ルはCGモデル記憶部7aに記憶される。
像から作成した映像CGモデルとを合成画像生成部4で合
成するための情報 (CGモデル配置情報) を記憶するもの
であり、合成画像生成部4は、これに基づいて両CGモデ
ルの合成をし、これを画像表示装置10に表示させたり、
或いは図示しない記録媒体に記録させる。合成画像生成
部4及び合成情報記憶部8については第5群の発明に詳
しい。
を3次元形状を持つCGモデルへ変換するので、通常のCG
モデルと同様の取扱いができ、これらの合成等の処理が
容易に行える。そして実写映像のCGモデル化は領域の抽
出及びこれに対する3次元形状情報の付加という簡便な
操作で行える。またこの際オペレータの手動介入が可能
であるので、微妙な調整、或いはこの作為的変更が行
え、自由度が高まる。また複数フレームを同様に処理す
ることで動画への適用も可能である。
元形状情報付加部2の構成に係るものである。
の3次元物体に対し、その物体の形状を完全に抽出する
方式は、未だ確立されていない。従来技術として提案さ
れているのは、物体表面の反射特性を仮定し、観察され
る色値から物体表面の傾きを求める方式や、画像に観察
される物体のモデルを予め記憶しておき、そのモデルと
画像に観察される物体の見えかたを照合する方式、等々
である。これらは、画像理解研究の発展とともに、開発
されてきた。
ていないと適用できない。例えば、前者の方式に対して
は、反射特性を仮定できない物体の場合、後者の方式に
対しては、記憶していないモデルの物体の場合、適用す
ることができない。そこでこの発明では映像に含まれる
物体の3次元形状を得る際、その物体のおよその形状を
人間が指定し、その形状のモデルを画像に表示しなが
ら、その重ね合わせ方を、人間による指定と、画像処理
の手法を用いた計算機による自動調整を、交互に対話的
に行う3次元形状抽出方法及び装置を提供することを目
的とする。
実写映像に含まれる物体の3次元形状を抽出する方法に
おいて、複数の幾何学的形状のデータを予め用意してお
く過程と、実写映像から前記物体に相当する領域を抽出
する過程と、抽出した領域を表示している画面に予め用
意されている前記複数の幾何学的形状のデータを表示
し、前記抽出した領域の形状に応じて幾何学的形状のデ
ータを選択させる過程と、選択されたデータに係る幾何
学的形状と前記抽出した領域とを一致させるべく前記幾
何学的形状の位置、向き、大きさを調整する過程とを備
えることを特徴とする。
まれる物体の3次元形状を抽出する装置において、複数
の幾何学的形状のデータを予め用意しておく手段と、実
写映像から前記物体に相当する領域を抽出する手段と、
抽出した領域を表示している画面に予め用意されている
前記複数の幾何学的形状のデータを表示し、前記抽出し
た領域の形状に応じて幾何学的形状のデータを選択させ
る手段と、選択されたデータに係る幾何学的形状と前記
抽出した領域とを一致させるべく前記幾何学的形状の位
置、向き、大きさを調整する調整手段とを備えることを
特徴とする。
に基づく位置,向き,大きさの自動調整手段を備える。
更に調整済形状に実写映像から抽出した領域の画像情報
をマッピングする手段を備える。
ている形状の中から選択して表示させる。そうするとこ
の領域と形状とが一致するように調整されて目的とする
物体の3次元形状が抽出できたことになる。この結果は
前述の3次元形状情報付加部2で得られた結果と同様の
ものである。
基づいて詳述する。図10は3次元形状抽出装置のブロッ
ク図である。図において21は物体領域抽出部であり、実
写映像から所要の物体の領域を抽出して画像表示装置27
に表示させるものである。これについては第3群の発明
に詳しい。実写映像及び抽出映像は画像記憶部25に記憶
される。基本形状選択部22は図12に示すような基本形状
のパターンを多数記憶しており、これをオペレータが選
択して画像表示装置27に表示させるものである。基本形
状重ね合わせ部23はオペレータが選択した基本形状のパ
ターンと、抽出した物体の画像とを図13に示すように重
ね合わせて表示させ、後述するようなオペレータの操作
とコンピュータによる自動調整とにより両者を合致させ
るものである。合致するように重ね合わされた結果は重
ね合わせ情報記憶部26に記憶される。また重ね合わせ結
果表示部24は調整の済んだ基本形状に抽出物体の表面の
画像情報をマッピングするものである。
明する。画像記憶部25に記憶させてある実写映像を取出
し、これを画像表示装置27に表示させて物体領域抽出部
21で所要物体の抽出を行う(S21) 。図14はこの操作の説
明図である。オペレータは描画装置を用いて画面上に物
体領域及び背景領域を各例示する閉曲線を描く。物体領
域抽出部21は物体領域の閉曲線を拡張し、背景領域の閉
曲線は収縮させる。この拡張、収縮は色相が類似する部
分についてのみ認める。そうすると両閉曲線は境界で接
することになり、これにより境界を特定して所要の物体
の領域が抽出する。なお図14(b) のように拡張、収縮の
結果、影が存在する等のために境界が太く認定されるこ
とが生じ得るが、この場合は太い境界の内側線を物体の
境界とする。
リミティブ) のパターンを表示させ、抽出物体の形状に
類似するものを選択する(S22) 。これにより図13に示す
ように重ね合わせ表示させる(S23) 。一般的に抽出した
物体形状と選択した基本形状とは一致しない。そこで両
者が一致するまで(S24) 、物体形状と基本形状とにつ
き、位置調整(S27) 、向きの調整(S28) 、大きさの調整
(S29) 及び形状の部分的変形(S30) を行う。一致, 不一
致はオペレータの判断による。
ート、図16はその説明図である。この移動の原理は物体
領域と形状プリミティブのワイヤフレームの重心を一致
させる点にある。即ち物体領域の重心G RO の算出(S31)
、及び形状プリミティブのワイヤフレームの重心G RP
の算出(S33) を行う。そしてこれらを一致させるべく形
状プリミティブのワイヤフレームの表示位置を移動する
(S32) 。
のワイヤフレーム表示で囲まれる領域の重心R RP が一致
するように、形状プリミティブのワイヤフレーム表示位
置を移動する (図16) 。なお、領域Rの重心GR は、 GR =( m10/m00,m01/m00 )T により求めることができる。但し、 m00 m00=∫fdR 領域Rを構成する点の個数を示す。この値は面積を表
す。m10 m10=∫xdR 領域Rを構成する各点のx座標の総和値を示す。m01 m01=∫ydR 領域Rを構成する各点のy座標の総和値を示す。これに
従い、形状プリミティブのワイヤフレーム表示位置を
(GRO−GRP)移動する。
ティブの回転の処理を示すフローチャート、図18はその
説明図である。回転による向きの調整の原理は、物体領
域及び形状プリミティブのワイヤフレームの長軸の平行
化にある。領域Rの長軸方向θR は、領域の重心回りの
慣性主軸として求めることができる。すなわち、 tan2 θR +[{m20−m10/m00)−(m02−m01/
m00)}/(m11−m10m01/m00)] tanθR −1=
0 の解として求めればよい。但し、 m11 m11=∫xydR 領域Rを構成する各点のx座標とy座標の積の総和値を
示す。 m20 m20=∫x2 dR 領域Rを構成する各点のx座標の2乗の総和値を示す。 m02 m02=∫y2 dR 領域Rを構成する各点のy座標の2乗の総和値を示す。
これに従い、形状プリミティブのワイヤフレーム表示位
置を(θRO−θRP)回転する。
た物体領域及び形状プリミティブのワイヤフレームのモ
ーメント量を算出する(S41,S44) 。このモーメント量の
算出は mij=∫xi yj dR (ij)={(0,0),(1,0),(0,1),(1,1),(2,0),(0,2) } で求められる。
並びに形状プリミティブのワイヤフレームの長軸及び重
心GRPを前述のようにして求める(S42,S45,S46) 。そし
てG RPを中心としてθRO−RRPだけ形状プリミティブの
ワイヤフレーム表示位置を回転する(S43) 。
示面積が一致するように領域RP の重心GRPを中心とし
て形状プリミティブのワイヤフレームを拡大又は縮小す
ることで行う。即ち領域Rの面積SR は SR =m00 として求めることができる。これに従い、形状プリミテ
ィブのワイヤフレームをSRO/SRP倍すればよい。ここ
にSROは物体領域の面積 SRPは形状プリミティブのワイヤフレームの面積 である。
物体の領域のモーメント量、形状プリミティブのワイヤ
フレーム表示領域のモーメント量を算出する(S51,S54)
。そしてこれを用いて両者の面積SRO, SRPを算出す
る(S52,S55) 。また形状プリミティブのワイヤフレーム
の重心GRPを算出する(S56) 。そして形状プリミティブ
のワイヤフレームをSRO/SRP倍する(S53) 。面積はモ
ーメント量m00として求めることができる。
る。物体領域の形状が基本形状と部分的に異なる場合は
オペレータが入力する命令で基本形状を部分的に変形す
る。以上のようにして物体領域と基本形状が一致した場
合は、これを重ね合わせ情報記憶部26へ格納する(S25)
。そして図21に示すように形状プリミティブのワイヤ
フレームに抽出した物体領域の画像情報をマッピングす
る(S26) 。つまり実写映像の所要部が切り出されて形状
プリミティブのワイヤフレームに貼り付けられた如き状
態になる。
オペレータが対話方式で3次元形状の抽出ができるので
適用条件に制約されず、また物体に対する既知情報(反
射情報など)を必要とすることなく抽出が可能である。
また基本形状を物体領域に一致させる作業はコンピュー
タが自動的に行うのでオペレータの負担は軽微である。
またマッピングを行うので抽出した3次元形状情報の適
否が直感的に判断できる。
10の物体領域抽出部に係るものである。
すようにして行われていた。例えば人物像の画像をブル
ー背景として画像入力部Aで撮影し、また風景画像を画
像入力部Bで撮影する。そして画像入力部Aの画像から
ブルー成分を検出し、これを反転増幅して、適宜の混合
比制御をして、この反転増幅信号と、画像入力部A, B
からの信号とを混合増幅器で合成し、画像出力部へ出力
することとしていた。これにより画像入力部A11の背
景が消えて画像入力部Bを背景とする人物像が合成され
ることになる。
ではブルー背景を必要とし設備面での負担がある。また
当初から画像合成を意図したものしか利用できず、汎用
性に欠ける。更に混合増幅器における合成のためのパラ
メータ設定が難しく、また操作も煩雑である。本発明は
このような問題を解決するためになされたものであり、
特別な撮影設備を必要とせず、また汎用性が高く、更に
操作が簡便な画像合成装置、特に合成対象となるキー画
像の生成装置を提供することを目的とする。
法は、映像から特定の領域を抽出する方法において、抽
出対象とすべき領域内の複数の画素を指定する過程と、
指定した画素における所定の特徴量を求める過程と、求
めた特徴量の最大値及び最小値を求める過程と、抽出対
象とすべき領域の内外の画素につき特徴量を求めて、そ
の特徴量が前記最大値と最小値との間にある画素を選択
する過程とを備え、前記画素によって構成される領域を
抽出領域とすることを特徴とする。
する方法において、抽出対象とすべき領域内の複数の画
素を指定する過程と、指定した画素における所定の特徴
量を求める過程と、指定した画素の、求めた特徴量につ
き、隣接画素間の差分を計算する過程と、計算した差分
の最大値を求める過程と、指定した画素を開始点とし
て、隣接画素間の特徴量の差分が前記最大値より小さい
4近傍又は8近傍の画素を連結する過程とを備え、連結
した画素によって構成される領域を抽出領域とすること
を特徴とする。
抽出領域の画素に各別の値を付与する過程と、前記抽出
領域の境界の外縁に位置する画素に、前記値の中間の値
を付与する過程とを備え、これらの付与した値による画
像を生成することを特徴とする。
方向に隣接する複数の画素の各々に異なる中間の値を付
与する。
する方法において、抽出対象とすべき領域内の複数の画
素を指定する過程と、指定した画素における所定の特徴
量を求める過程と、求めた特徴量の最大値及び最小値を
求める過程と、抽出対象とすべき領域の内外の画素につ
き特徴量を求めて、特徴量が前記最大値と最小値との間
の範囲にあるか否かを判定する過程と、前記範囲内の画
素に定数Kを付与する過程と、前記範囲外の画素の特徴
量と前記最大値又は最小値との差分を算出する過程と、
前記範囲外の画素に、定数Kから前記差分に関連して定
まる値を減じた値を付与する過程とを備え、これらの付
与した値による画像を生成することを特徴とする。
する方法において、抽出対象とすべき領域内の複数の画
素を指定する過程と、指定した画素における所定の複数
の特徴量を求める過程と、求めた特徴量の最大値及び最
小値を特徴量の各々について求める過程と、抽出対象と
すべき領域の内外の画素につき特徴量を求めて、特徴量
が前記最大値と最小値との間の範囲にあるか否かを判定
する過程と、前記範囲内の画素に定数Kを付与する過程
と、前記範囲外の画素の特徴量と前記最大値又は最小値
との差分を算出する過程と、前記範囲外の画素に、定数
Kから各々の特徴量の前記差分に関連して定まる値を減
じた値を付与する過程とを備え、これらの付与した値に
よる画像を生成することを特徴とする。
する方法において、抽出対象とすべき領域内の複数の画
素を指定する過程と、指定した画素における所定の特徴
量を求める過程と、求めた特徴量の平均値及び分散を求
める過程と、抽出対象とすべき領域の内外の画素につき
特徴量を求めて、特徴量が前記平均値及び分散で定まる
範囲にあるか否かを判定する過程と、前記範囲内の画素
に定数Kを付与する過程と、前記範囲外の画素の特徴量
と前記平均値との偏差を算出する過程と、前記範囲外の
画素に、定数Kから前記偏差に関連して定まる値を減じ
た値を付与する過程とを備え、これらの付与した値によ
る画像を生成することを特徴とする。
する方法において、抽出対象とすべき領域内の複数の画
素を指定する過程と、指定した画素における所定の複数
の特徴量を求める過程と、求めた特徴量の平均値及び分
散を特徴量の各々について求める過程と、抽出対象とす
べき領域の内外の画素につき特徴量を求めて、特徴量が
前記平均値及び分散で定まる範囲にあるか否かを判定す
る過程と、前記範囲内の画素に定数Kを付与する過程
と、前記範囲外の画素の特徴量と前記平均値との偏差を
算出する過程と、前記範囲外の画素に、定数Kから各々
の特徴量の前記偏差に関連して定まる値を減じた値を付
与する過程とを備え、これらの付与した値による画像を
生成することを特徴とする。
域のうちのいずれかの領域に含まれる画素を指定する過
程と、指定した画素を開始点として4連結又は8連結の
ラベリングをする過程と、ラベリングされていない領域
を非抽出領域に変更する過程とを備えることを特徴とす
る。
定の領域を抽出する方法において、一のフレームで抽出
対象とすべき領域内の複数の画素を指定する過程と、指
定した画素を開始点として4連結又は8連結のラベリン
グをする過程と、ラベリングされていない領域を非抽出
領域に変更する過程と、抽出領域の幾何学的特徴量を算
出する過程とを備え、また次フレームでラベリングする
過程と、異なるラベルを付与された領域ごとに幾何学的
特徴量を算出する過程と、前フレームの抽出領域の幾何
学的特徴量に近い幾何学的特徴量を有する領域を抽出領
域として残存させ、他の領域を非抽出領域に変更する過
程とを備えることを特徴とする。
定の領域を抽出する方法において、一のフレームで抽出
対象とすべき領域内の複数の画素を指定する過程と、指
定した画素を開始点として4連結又は8連結のラベリン
グをする過程と、ラベリングされていない領域を非抽出
領域に変更する過程と、抽出領域の光学的特徴量を算出
する過程とを備え、また次フレームでラベリングする過
程と、異なるラベルを付与された領域ごとに光学的特徴
量を算出する過程と、前フレームの抽出領域の光学的特
徴量に近い光学的特徴量を有する領域を抽出領域として
残存させ、他の領域を非抽出領域に変更する過程とを備
えることを特徴とする。
する装置において、抽出対象とすべき領域内の複数の画
素を指定する手段と、指定した画素における所定の特徴
量を求める手段と、求めた特徴量の最大値及び最小値を
求める手段と、これらの最大値及び最小値を記憶する手
段と、抽出対象とすべき領域の内外の画素につき特徴量
を求めて、その特徴量が前記最大値と最小値との間にあ
る画素を選択する手段とを備え、前記画素によって構成
される領域を抽出領域とすべくなしてあることを特徴と
する。
する装置において、抽出対象とすべき領域内の複数の画
素を指定する手段と、指定した画素における所定の特徴
量を求める手段と、指定した画素の、求めた特徴量につ
き、隣接画素間の差分を計算する手段と、計算した差分
の最大値を求める手段と、該最大値を記憶する手段と、
指定した画素を開始点として、隣接画素間の特徴量の差
分が前記最大値より小さい4近傍又は8近傍の画素を連
結する手段とを備え、連結した画素によって構成される
領域を抽出領域とすべくなしてあることを特徴とする。
抽出領域の画素に各別の値を付与する手段と、前記抽出
領域の境界の外縁に位置する画素に、前記値の中間の値
を付与する手段とを備え、これらの付与した値による画
像を生成すべくなしてあることを特徴とする。
方向に隣接する複数の画素の各々に異なる中間の値を付
与すべくなしてある。
する装置において、抽出対象とすべき領域内の複数の画
素を指定する手段と、指定した画素における所定の特徴
量を求める手段と、求めた特徴量の最大値及び最小値を
求める手段と、これら最大値及び最小値を記憶する手段
と、抽出対象とすべき領域の内外の画素につき特徴量を
求めて、特徴量が前記最大値と最小値との間の範囲にあ
るか否かを判定する手段と、前記範囲内の画素に定数K
を付与する手段と、前記範囲外の画素の特徴量と前記最
大値又は最小値との差分を算出する手段と、前記範囲外
の画素に、定数Kから前記差分に関連して定まる値を減
じた値を付与する手段とを備え、これらの付与した値に
よる画像を生成すべくなしてあることを特徴とする。
する装置において、抽出対象とすべき領域内の複数の画
素を指定する手段と、指定した画素における所定の複数
の特徴量を求める手段と、求めた特徴量の最大値及び最
小値を特徴量の各々について求める手段と、これら最大
値及び最小値を記憶する手段と、抽出対象とすべき領域
の内外の画素につき特徴量を求めて、特徴量が前記最大
値と最小値との間の範囲にあるか否かを判定する手段
と、前記範囲内の画素に定数Kを付与する手段と、前記
範囲外の画素の特徴量と前記最大値又は最小値との差分
を算出する手段と、前記範囲外の画素に、定数Kから各
々の特徴量の前記差分に関連して定まる値を減じた値を
付与する手段とを備え、これらの付与した値による画像
を生成すべくなしてあることを特徴とする。
する装置において、抽出対象とすべき領域内の複数の画
素を指定する手段と、指定した画素における所定の特徴
量を求める手段と、求めた特徴量の平均値及び分散を求
める手段と、該平均値及び分散を記憶する手段と、抽出
対象とすべき領域の内外の画素につき特徴量を求めて、
特徴量が前記平均値及び分散で定まる範囲にあるか否か
を判定する手段と、前記範囲内の画素に定数Kを付与す
る手段と、前記範囲外の画素の特徴量と前記平均値との
偏差を算出する手段と、前記範囲外の画素に、定数Kか
ら前記偏差に関連して定まる値を減じた値を付与する手
段とを備え、これらの付与した値による画像を生成すべ
くなしてあることを特徴とする。
する装置において、抽出対象とすべき領域内の複数の画
素を指定する手段と、指定した画素における所定の複数
の特徴量を求める手段と、求めた特徴量の平均値及び分
散を特徴量の各々について求める手段と、該平均値及び
分散を記憶する手段と、抽出対象とすべき領域の内外の
画素につき特徴量を求めて、特徴量が前記平均値及び分
散で定まる範囲にあるか否かを判定する手段と、前記範
囲内の画素に定数Kを付与する手段と、前記範囲外の画
素の特徴量と前記平均値との偏差を算出する手段と、前
記範囲外の画素に、定数Kから各々の特徴量の前記偏差
に関連して定まる値を減じた値を付与する手段とを備
え、これらの付与した値による画像を生成すべくなして
あることを特徴とする。
域のうちのいずれかの領域に含まれる画素を指定する手
段と、指定した画素を開始点として4連結又は8連結の
ラベリングをする手段と、ラベリングされていない領域
を非抽出領域に変更する手段とを備えることを特徴とす
る。
定の領域を抽出する装置において、一のフレームで抽出
対象とすべき領域内の複数の画素を指定する手段と、指
定した画素を開始点として4連結又は8連結のラベリン
グをする手段と、ラベリングされていない領域を非抽出
領域に変更する手段と、抽出領域の幾何学的特徴量を算
出する手段とを備え、また次フレームでラベリングする
手段と、異なるラベルを付与された領域ごとに幾何学的
特徴量を算出する手段と、前フレームの抽出領域の幾何
学的特徴量に近い幾何学的特徴量を有する領域を抽出領
域として残存させ、他の領域を非抽出領域に変更する手
段とを備えることを特徴とする。
定の領域を抽出する装置において、一のフレームで抽出
対象とすべき領域内の複数の画素を指定する手段と、指
定した画素を開始点として4連結又は8連結のラベリン
グをする手段と、ラベリングされていない領域を非抽出
領域に変更する手段と、抽出領域の光学的特徴量を算出
する手段とを備え、また次フレームでラベリングする手
段と、異なるラベルを付与された領域ごとに光学的特徴
量を算出する手段と、前フレームの抽出領域の光学的特
徴量に近い光学的特徴量を有する領域を抽出領域として
残存させ、他の領域を非抽出領域に変更する手段とを備
えることを特徴とする。
の複数画素を指定する (ライトペン、又はマウス操作の
カーソルでなぞる) 。このなぞった画素群中の特徴量
(R, G, B,色相, 彩度, 明度, 輝度などの一又は複
数) を求め、更にその最大値, 最小値を選んで記憶す
る。
記最大値〜最小値の範囲内にあるか否かを調べる。範囲
内にある画素は抽出を望む画像部分と同様の特徴量を有
しているので、該画像部分は属すると判断し、0より大
きい値を付与し、範囲外のものは非抽出部分であるとし
て0を付与する。これにより非0の部分を抽出すること
で所望の画像部分が抽出できる。
量と隣接画素の特徴量との差分を求め、その最大値を記
憶しておく。そしてこの最大値以下の差分を有する4近
傍又は8近傍の画素はなぞって抽出を望む領域と同程度
の隣接閾値を有しているとして抽出領域として0より大
きい値を付与し、それ以外の部分は0を付与する。これ
により非0の部分を抽出することができる。
領域に0を付与した場合に両者の境界の画素に1と0と
の中間の値を与える。これにより境界がマイルド化し、
抽出画像を合成した場合に背景への溶け込みがよくな
る。
することで境界の一層のマイルド化が行われる。
応制御するものであり、1〜0の中間値の決定を、非抽
出領域の特徴量と、特徴量の最大値 (又は最小値) との
差分に応じて定める。これにより抽出画像の境界は背景
に良く溶け込む。
く、二種以上とし、上述の差分を複数の特徴量について
求め、例えばその加重平均等に依って中間値を決定す
る。複数の特徴量を用いるのでより自然な境界が得られ
る。
最大値, 最小値を用いているのに対し、分散を用いてい
る点が異なる。
抽出領域とする。即ちラベリングにより、同様に抽出さ
れた複数の領域に各別の符号を付与される。このうち、
なぞられた画素を含む領域のみを残して他を消すのであ
る。
ある。第9の方法、装置と同様にラベリングし、非抽出
領域を消去する。次のフレームで同様のラベリングをす
るが、フレーム間の領域の同定を幾何学的特徴量の類似
度に基づいて行う。このため抽出領域のみが残り、他は
消える。これを複数のフレームに亘って行うことで動画
での抽出処理が自動的に行えることになる。
に替えて光学的特徴量を用いるものであり、同効を奏す
る。
ブロック図である。3系統の画像入力部31,32,33はいず
れも同様の構成を有し、NTSC信号をアナログのRGB 信号
に変換するNTSC-RGB変換器31a,32a,33a 及びアナログの
RGB 信号をディジタルのRGB 信号に変換するA/D 変換器
31b,32b,33b を備える。これら画像入力部31,32,33から
の入力はデュアルポートRAM からなる画像メモリ37,38,
39,40 へ与えられ、またこれらから読出された画像デー
タは画像出力部34へ与えられ、ここから出力される。画
像出力部34は画像メモリ37等からのディジタルのRGB 信
号をアナログのRGB 信号に変換するD/A 変換器34b 及
び、この変換されたアナログのRGB 信号をNTSC信号に変
換するRGB-NTSC変換器34a の出力がモニタ (図示せず)
に表示されることになる。
座標認識手段、等によって構成されており、モニタに表
示された映像の一部をなぞるのに使用される。この座標
入力部35で入力された座標情報は処理部41へ入力され
る。400 は半導体メモリであり、演算に使用するメモリ
42、後述する特徴量上限レジスタ43、下限レジスタ44を
備える。36はハードディスク、光磁気ディスク等の大容
量記録部であり、複数フレームの画像を記録する。
部41は以下の如き領域抽出のための処理を行う。図24
は、この処理の手順を示すフローチャート、図25はその
説明図である。図25(a) に示すように抽出したい領域
(白抜きで示されている) を座標入力部35のペンでなぞ
る。この間ペン軌跡の複数画素につき、特徴量 (一又は
複数種)を計算する。そして特徴量の最大値又は最小値
を夫々特徴量上限レジスタ43、下限レジスタ44に格納す
る。これにはペンが移動していく都度、既格納のレジス
タ内容を更新していくことで行う。なぞりが終わると全
軌跡中での特徴量の最大値, 最小値が得られることにな
る。特徴量としてはR,G,B、色相、彩度、明度、輝
度等が挙げられる。
(一又は複数種) を求め、最大値〜最小値の範囲内にあ
る画素には0より大きい値 (例えば255)を、また範囲外
にある画素には0を付与する。これによりキー画像、つ
まり抽出領域を含む画像が得られることになる。図25
(b) はこれを示す。なお、所望どおりの抽出ができなか
った場合は特徴量の選択又は組合わせを種々変更するこ
とで再試行すればよい。なお以上の処理を複数フレーム
について反復することで動画の処理が可能となる。
ある。第1の領域抽出装置と相違するのは半導体メモリ
400 に特徴量上限レジスタ43、下限レジスタ44に替えて
特徴量閾値レジスタ45を備える点である。他の構成は同
様であるので、同符号を付して説明を省略する。
ト、図28はその説明図である。図28(a) のようにペンで
なぞった軌跡の画素の特徴量を求めるのは第1の装置と
同様であるが、第2の装置ではなぞられた画素のうちで
の隣接画素間の特徴量の差分を演算し、その最大値を閾
値レジスタ45に格納する。そしてなぞられた画素の夫々
について隣接画素 (4近傍又は8近傍) が閾値以下であ
るか否かを調べていき、以下である隣接画素を次々と連
結していく (図28(b))。このようにして連結された領域
に0より大きい値を付与する。
図である。第1の装置と相違するのは処理部41の演算内
容であり、以下に説明する混合比計算41a,総合混合比計
算41b を行う。図30は処理部41の処理手順を示すフロー
チャートである。図31(a) に示すようにペンでなぞった
軌跡の画素につき、第1の装置と同様に特徴量を計算
し、その最大値, 最小値を夫々特徴量上限レジスタ43,
下限レジスタ44に入れる。
し、これが特徴量上, 下限値レジスタ43,44 に各記憶さ
れている最大値, 最小値の範囲内にあるか否かを調べ、
範囲内にある場合は0でない値のKを付与する。範囲外
にある場合は、算出した特徴量と最大値(特徴量が大き
いとき)との差、又は算出した特徴量と最小値(特徴量
が小さいとき)との差の差分を演算し、差分に応じてK
〜0の範囲の値(混合比)を特徴量ごとに求める。そし
て各特徴量ごとの混合比を加重平均した総合混合比を求
める。そして総合混合比に応じた値を対応画素に付与す
る。そうすると図31(b) に示すように境界にグラデーシ
ョンが付与された抽出画像が得られることになる。そし
てこれを複数フレームにつき反復することによって動画
に対応できる。
ブロック図である。図29と異なるのは、特徴量上限レジ
スタ43, 下限レジスタ44に替えて特徴量平均値レジスタ
46、特徴量分散値レジスタ47を備える点である。図33は
この場合の処理手順を示すフローチャートであり、図34
(a) に示すようにペンでなぞった軌跡の画素の特徴量を
計算し、その平均値及び分散値を算出し、これらを特徴
量平均値レジスタ46, 特徴量分散値レジスタ47に格納し
ておく。
ての特徴量が所定偏差(例えば平均値±分散値)内にあ
るか否かを調べ、範囲内にある場合にKを付与する。範
囲外の場合は平均値からの偏差に従い、混合比を特徴量
ごとに計算し、この計算値の加重平均を総合混合比とし
て求め、これに従ってKを付与する。
デーションを有する抽出画像が得られる。図35は第3,
4の領域抽出装置の他の実施例のブロック図である。こ
の装置は処理部41の処理が他の装置と異なっている。こ
の処理内容を図37, 38につき説明する。この実施例は第
1の領域抽出装置等で得た抽出領域と非抽出領域 (値0
を付与) との輪郭 (画素と画素との間になる) の内側の
内周輪郭点 (画素) の値Xから定数Kを減じた値を、前
記輪郭の外側の外周輪郭点(画素)に付与する。この処
理は遠心方向の1画素についてだけ行ってもよいが図38
に示すように複数画素について行うことでよりなめらか
なエッジが得られる。
トであり、画面上の左上側から輪郭を追跡するようにし
て処理を反復する。そしてこの処理を複数フレームにつ
いて行うことで動画への対応が可能である。
ある。この装置は処理部41で後述するラベリング処理
(48) を行うことにより雑音、つまり本来抽出を望まな
いのに抽出領域として現れる部分を削除するためのもの
である。この処理は例えば第1の領域抽出装置等によっ
て得られたキー画像 (図41(a))に対して行うものであ
る。この画像は中央の抽出を望む部分以外に同様の特徴
量を有する雑音の領域 (非0領域) を含んでいる。
該処理はペンでなぞった軌跡の画素を開始点として4連
結又は8連結のラベリングを行う。雑音の非0領域が離
散しているのでラベリングはその領域には到らない。次
いでラベリングされていない領域を消去する。そうする
と図41(b) に示すように所望の抽出領域が得られるので
ある。
ある。この装置は第9の領域抽出装置と同様の処理を1
回行うだけで爾後のフレームは簡単な処理で雑音消去で
きる動画対応のものである。これを可能とするためにな
ぞった領域及びこれと対応づけられる他フレームの領域
の幾何学的特徴量 (例えば面積、中心位置) を計算する
処理(49)及び幾何学的特徴量が近い領域をフレーム内で
対応づける対応付け(50)を処理部41が行う。図43はこの
処理のフローチャート、図44はその説明図である。第9
の領域抽出装置と同処理を先頭フレームに施して図44の
(a) に示すように雑音を消去する。そして残った非0領
域、つまり抽出領域につき、その幾何学的特徴量を計算
する。
も含む)につき幾何学的特徴量を計算する。そして先頭
フレームの非0領域の特徴量に最も近い幾何学的特徴量
を有するものを選択し、他を消去(非抽出領域と)す
る。以下、前後する2フレームにつき同様の処理を反復
することで雑音領域は自動的に消えていく。
ある。この装置は第10の装置が幾何学的特徴量を利用し
てフレーム内の領域の同定を行っていたのに対し、光学
的 (テクスチャ) 特徴量を利用する。このため処理部41
内、光学的特徴量を計算するための画素値構成計算(5
1) を行う。図46は雑音消去のフローチャート、図47は
その説明図である。いずれも幾何学的特徴量が光学的特
徴量に替わっただけであるので説明を省略する。
の背景の撮影設備が不要である。また特に画像合成を意
識していない映像からでも抽出ができる。そして操作は
必要部分をなぞるだけでよく、簡便である。
図である。
る。
る。
である。
である。
る。
図である。
る。
Claims (27)
- 【請求項1】 実写映像に含まれる物体の3次元形状を
抽出する方法において、 複数の幾何学的形状のデータを予め用意しておく過程
と、実写映像から前記物体に相当する領域を抽出する過
程と、抽出した領域を表示している画面に予め用意され
ている前記複数の幾何学的形状のデータを表示し、前記
抽出した領域の形状に応じて幾何学的形状のデータを選
択させる過程と、選択されたデータに係る幾何学的形状
と前記抽出した領域とを一致させるべく前記幾何学的形
状の位置、向き、大きさを調整する過程とを備えること
を特徴とする3次元形状抽出方法。 - 【請求項2】 実写映像に含まれる物体の3次元形状を
抽出する装置において、 複数の幾何学的形状のデータを予め用意しておく手段(2
2)と、実写映像から前記物体に相当する領域を抽出する
手段(21)と、抽出した領域を表示している画面に予め用
意されている前記複数の幾何学的形状のデータを表示
し、前記抽出した領域の形状に応じて幾何学的形状のデ
ータを選択させる手段(22)と、選択されたデータに係る
幾何学的形状と前記抽出した領域とを一致させるべく前
記幾何学的形状の位置、向き、大きさを調整する調整手
段(23)とを備えることを特徴とする3次元形状抽出装
置。 - 【請求項3】 実写映像に含まれる物体の3次元形状を
抽出する装置において、 複数の幾何学的形状のデータを予め用意しておく手段(2
2)と、実写映像から前記物体に相当する領域を抽出する
手段(21)と、抽出した領域を表示している画面に予め用
意されている前記複数の幾何学的形状のデータを表示
し、前記抽出した領域の形状に応じて幾何学的形状のデ
ータを選択させる手段(22)と、前記抽出された領域およ
び選択された幾何学的形状を一致させるべく、前記抽出
した領域の位置、向き、面積に基づいて、前記選択され
た幾何学的形状の位置、向き、大きさを自動調整する調
整手段(23)とを備えることを特徴とする3次元形状抽出
装置。 - 【請求項4】 前記調整手段(23)は、前記抽出した領域
に基づいて、前記物体の重心となる座標および前記幾何
学的形状の重心となる座標とを算出し、算出された両重
心が一致するように、前記選択された幾何学的形状のデ
ータを移動して、前記抽出した領域と前記選択された幾
何学的形状のデータとを自動的に重ねて表示されるよう
表示位置を調整する自動調整手段を備える請求項2又は
3記載の3次元形状抽出装置。 - 【請求項5】 前記調整手段(23)は、前記抽出した領域
に基づいて、前記物体の重心となる座標および前記幾何
学的形状の重心となる座標とを算出しておき、さらに前
記抽出した領域から前記物体の長軸方向を算出し、前記
幾何学的形状の重心を中心に算出された前記物体の長軸
方向に合わせて前記幾何学的形状の向きを回転させ、前
記抽出した領域と前記選択された幾何学的形状のデータ
の向きが同一となるように表示位置を調整する自動調整
手段を備える請求項2又は3記載の3次元形状抽出装
置。 - 【請求項6】 前記調整手段(23)は、前記抽出した領域
に基づいて、前記物体の重心となる座標および前記幾何
学的形状の重心となる座標とを算出しておき、さらに前
記抽出した領域から前記物体の表示面積を算出し、前記
幾何学的形状の重心を中心に算出された前記物体の表示
面積に合わせて前記幾何学的形状を拡大又は縮小するこ
とにより、前記抽出した物体の領域と前記選択された幾
何学的形状のデータの大きさが同一となるように表示位
置を調整する自動調整手段を備える請求項2又は3記載
の3次元形状抽出装置。 - 【請求項7】 更に、前記調整手段(23)によって調整さ
れた形状の表面に前記領域の画像情報をマッピングし、
これを表示する手段(24)を備える請求項2又は3記載の
3次元形状抽出装置。 - 【請求項8】 映像から特定の領域を抽出する方法にお
いて、抽出対象とすべき領域内の複数の画素を指定する
過程と、指定した画素における所定の特徴量を求める過
程と、求めた特徴量の最大値及び最小値を求める過程
と、抽出対象とすべき領域の内外の画素につき特徴量を
求めて、その特徴量が前記最大値と最小値との間にある
画素を選択する過程とを備え、前記画素によって構成さ
れる領域を抽出領域とすることを特徴とする領域抽出方
法。 - 【請求項9】 映像から特定の領域を抽出する方法にお
いて、抽出対象とすべき領域内の複数の画素を指定する
過程と、指定した画素における所定の特徴量を求める過
程と、指定した画素の、求めた特徴量につき、隣接画素
間の差分を計算する過程と、計算した差分の最大値を求
める過程と、指定した画素を開始点として、隣接画素間
の特徴量の差分が前記最大値より小さい4近傍又は8近
傍の画素を連結する過程とを備え、連結した画素によっ
て構成される領域を抽出領域とすることを特徴とする領
域抽出方法。 - 【請求項10】 前記抽出領域の画素及び非抽出領域の
画素に各別の値を付与する過程と、前記抽出領域の境界
の外縁に位置する画素に、前記値の中間の値を付与する
過程とを備え、これらの付与した値による画像を生成す
ることを特徴とする請求項8又は9項記載の領域抽出方
法。 - 【請求項11】 前記抽出領域から遠ざかる方向に隣接
する複数の画素の各々に異なる中間の値を付与する請求
項10記載の領域抽出方法。 - 【請求項12】 映像から特定の領域を抽出する方法に
おいて、抽出対象とすべき領域内の複数の画素を指定す
る過程と、指定した画素における所定の特徴量を求める
過程と、求めた特徴量の最大値及び最小値を求める過程
と、抽出対象とすべき領域の内外の画素につき特徴量を
求めて、特徴量が前記最大値と最小値との間の範囲にあ
るか否かを判定する過程と、前記範囲内の画素に定数K
を付与する過程と、前記範囲外の画素の特徴量と前記最
大値又は最小値との差分を算出する過程と、前記範囲外
の画素に、定数Kから前記差分に関連して定まる値を減
じた値を付与する過程とを備え、これらの付与した値に
よる画像を生成することを特徴とする領域抽出方法。 - 【請求項13】 映像から特定の領域を抽出する方法に
おいて、抽出対象とすべき領域内の複数の画素を指定す
る過程と、指定した画素における所定の複数の特徴量を
求める過程と、求めた特徴量の最大値及び最小値を特徴
量の各々について求める過程と、抽出対象とすべき領域
の内外の画素につき特徴量を求めて、特徴量が前記最大
値と最小値との間の範囲にあるか否かを判定する過程
と、前記範囲内の画素に定数Kを付与する過程と、前記
範囲外の画素の特徴量と前記最大値又は最小値との差分
を算出する過程と、前記範囲外の画素に、定数Kから各
々の特徴量の前記差分に関連して定まる値を減じた値を
付与する過程とを備え、これらの付与した値による画像
を生成することを特徴とする領域抽出方法。 - 【請求項14】 映像から特定の領域を抽出する方法に
おいて、抽出対象とすべき領域内の複数の画素を指定す
る過程と、指定した画素における所定の特徴量を求める
過程と、求めた特徴量の平均値及び分散を求める過程
と、抽出対象とすべき領域の内外の画素につき特徴量を
求めて、特徴量が前記平均値及び分散で定まる範囲にあ
るか否かを判定する過程と、前記範囲内の画素に定数K
を付与する過程と、前記範囲外の画素の特徴量と前記平
均値との偏差を算出する過程と、前記範囲外の画素に、
定数Kから前記偏差に関連して定まる値を減じた値を付
与する過程とを備え、これらの付与した値による画像を
生成することを特徴とする領域抽出方法。 - 【請求項15】 映像から特定の領域を抽出する方法に
おいて、抽出対象とすべき領域内の複数の画素を指定す
る過程と、指定した画素における所定の複数の特徴量を
求める過程と、求めた特徴量の平均値及び分散を特徴量
の各々について求める過程と、抽出対象とすべき領域の
内外の画素につき特徴量を求めて、特徴量が前記平均値
及び分散で定まる範囲にあるか否かを判定する過程と、
前記範囲内の画素に定数Kを付与する過程と、前記範囲
外の画素の特徴量と前記平均値との偏差を算出する過程
と、前記範囲外の画素に、定数Kから各々の特徴量の前
記偏差に関連して定まる値を減じた値を付与する過程と
を備え、これらの付与した値による画像を生成すること
を特徴とする領域抽出方法。 - 【請求項16】 複数フレームの映像から特定の領域を
抽出する方法において、 一のフレームで抽出対象とすべき領域内の複数の画素を
指定する過程と、指定した画素を開始点として4連結又
は8連結のラベリングをする過程と、ラベリングされて
いない領域を非抽出領域に変更する過程と、抽出領域の
幾何学的特徴量を算出する過程とを備え、 また次フレームでラベリングする過程と、異なるラベル
を付与された領域ごとに幾何学的特徴量を算出する過程
と、前フレームの抽出領域の幾何学的特徴量に近い幾何
学的特徴量を有する領域を抽出領域として残存させ、他
の領域を非抽出領域に変更する過程とを備えることを特
徴とする領域抽出方法。 - 【請求項17】 複数フレームの映像から特定の領域を
抽出する方法において、 一のフレームで抽出対象とすべき領域内の複数の画素を
指定する過程と、指定した画素を開始点として4連結又
は8連結のラベリングをする過程と、ラベリングされて
いない領域を非抽出領域に変更する過程と、抽出領域の
光学的特徴量を算出する過程とを備え、 また次フレームでラベリングする過程と、異なるラベル
を付与された領域ごとに光学的特徴量を算出する過程
と、前フレームの抽出領域の光学的特徴量に近い光学的
特徴量を有する領域を抽出領域として残存させ、他の領
域を非抽出領域に変更する過程とを備えることを特徴と
する領域抽出方法。 - 【請求項18】 映像から特定の領域を抽出する装置に
おいて、抽出対象とすべき領域内の複数の画素を指定す
る手段(35)と、指定した画素における所定の特徴量を求
める手段(41)と、求めた特徴量の最大値及び最小値を求
める手段(41)と、これらの最大値及び最小値を記憶する
手段 (43、44) と、抽出対象とすべき領域の内外の画素
につき特徴量を求めて、その特徴量が前記最大値と最小
値との間にある画素を選択する手段(41)とを備え、前記
画素によって構成される領域を抽出領域とすべくなして
あることを特徴とする領域抽出装置。 - 【請求項19】 映像から特定の領域を抽出する装置に
おいて、抽出対象とすべき領域内の複数の画素を指定す
る手段(35)と、指定した画素における所定の特徴量を求
める手段(41)と、指定した画素の、求めた特徴量につ
き、隣接画素間の差分を計算する手段(41)と、計算した
差分の最大値を求める手段(41)と、該最大値を記憶する
手段(45)と、指定した画素を開始点として、隣接画素間
の特徴量の差分が前記最大値より小さい4近傍又は8近
傍の画素を連結する手段(41)とを備え、連結した画素に
よって構成される領域を抽出領域とすべくなしてあるこ
とを特徴とする領域抽出装置。 - 【請求項20】 前記抽出領域の画素及び非抽出領域の
画素に各別の値を付与する手段(41)と、前記抽出領域の
境界の外縁に位置する画素に、前記値の中間の値を付与
する手段(41)とを備え、これらの付与した値による画像
を生成すべくなしてあることを特徴とする請求項18又
は19項記載の領域抽出装置。 - 【請求項21】 前記抽出領域から遠ざかる方向に隣接
する複数の画素の各々に異なる中間の値を付与すべくな
してある請求項20記載の領域抽出装置。 - 【請求項22】 映像から特定の領域を抽出する装置に
おいて、抽出対象とすべき領域内の複数の画素を指定す
る手段(35)と、指定した画素における所定の特徴量を求
める手段(41)と、求めた特徴量の最大値及び最小値を求
める手段(41)と、これら最大値及び最小値を記憶する手
段 (43、44) と、抽出対象とすべき領域の内外の画素に
つき特徴量を求めて、特徴量が前記最大値と最小値との
間の範囲にあるか否かを判定する手段(41)と、前記範囲
内の画素に定数Kを付与する手段(41)と、前記範囲外の
画素の特徴量と前記最大値又は最小値との差分を算出す
る手段(41)と、前記範囲外の画素に、定数Kから前記差
分に関連して定まる値を減じた値を付与する手段(41)と
を備え、これらの付与した値による画像を生成すべくな
してあることを特徴とする領域抽出装置。 - 【請求項23】 映像から特定の領域を抽出する装置に
おいて、抽出対象とすべき領域内の複数の画素を指定す
る手段(35)と、指定した画素における所定の複数の特徴
量を求める手段(41)と、求めた特徴量の最大値及び最小
値を特徴量の各々について求める手段(41)と、これら最
大値及び最小値を記憶する手段 (43、44) と、抽出対象
とすべき領域の内外の画素につき特徴量を求めて、特徴
量が前記最大値と最小値との間の範囲にあるか否かを判
定する手段(41)と、前記範囲内の画素に定数Kを付与す
る手段(41)と、前記範囲外の画素の特徴量と前記最大値
又は最小値との差分を算出する手段(41)と、前記範囲外
の画素に、定数Kから各々の特徴量の前記差分に関連し
て定まる値を減じた値を付与する手段(41)とを備え、こ
れらの付与した値による画像を生成すべくなしてあるこ
とを特徴とする領域抽出装置。 - 【請求項24】 映像から特定の領域を抽出する装置に
おいて、抽出対象とすべき領域内の複数の画素を指定す
る手段(35)と、指定した画素における所定の特徴量を求
める手段(41)と、求めた特徴量の平均値及び分散を求め
る手段(41)と、該平均値及び分散を記憶する手段 (48、
47) と、抽出対象とすべき領域の内外の画素につき特徴
量を求めて、特徴量が前記平均値及び分散で定まる範囲
にあるか否かを判定する手段(41)と、前記範囲内の画素
に定数Kを付与する手段(41)と、前記範囲外の画素の特
徴量と前記平均値との偏差を算出する手段(41)と、前記
範囲外の画素に、定数Kから前記偏差に関連して定まる
値を減じた値を付与する手段(41)とを備え、これらの付
与した値による画像を生成すべくなしてあることを特徴
とする領域抽出装置。 - 【請求項25】 映像から特定の領域を抽出する装置に
おいて、抽出対象とすべき領域内の複数の画素を指定す
る手段(35)と、指定した画素における所定の複数の特徴
量を求める手段(41)と、求めた特徴量の平均値及び分散
を特徴量の各々について求める手段(41)と、該平均値及
び分散を記憶する手段 (46、47) と、抽出対象とすべき
領域の内外の画素につき特徴量を求めて、特徴量が前記
平均値及び分散で定まる範囲にあるか否かを判定する手
段(41)と、前記範囲内の画素に定数Kを付与する手段(4
1)と、前記範囲外の画素の特徴量と前記平均値との偏差
を算出する手段(41)と、前記範囲外の画素に、定数Kか
ら各々の特徴量の前記偏差に関連して定まる値を減じた
値を付与する手段(41)とを備え、これらの付与した値に
よる画像を生成すべくなしてあることを特徴とする領域
抽出装置。 - 【請求項26】 複数フレームの映像から特定の領域を
抽出する装置において、 一のフレームで抽出対象とすべき領域内の複数の画素を
指定する手段(35)と、指定した画素を開始点として4連
結又は8連結のラベリングをする手段(48)と、ラベリン
グされていない領域を非抽出領域に変更する手段(41)
と、抽出領域の幾何学的特徴量を算出する手段(41)とを
備え、 また次フレームでラベリングする手段(48)と、異なるラ
ベルを付与された領域ごとに幾何学的特徴量を算出する
手段(41)と、前フレームの抽出領域の幾何学的特徴量に
近い幾何学的特徴量を有する領域を抽出領域として残存
させ、他の領域を非抽出領域に変更する手段(41)とを備
えることを特徴とする領域抽出装置。 - 【請求項27】 複数フレームの映像から特定の領域を
抽出する装置において、 一のフレームで抽出対象とすべき領域内の複数の画素を
指定する手段と、指定した画素を開始点として4連結又
は8連結のラベリングをする手段(48)と、ラベリングさ
れていない領域を非抽出領域に変更する手段(41)と、抽
出領域の光学的特徴量を算出する手段(41)とを備え、 また次フレームでラベリングする手段(48)と、異なるラ
ベルを付与された領域ごとに光学的特徴量を算出する手
段(41)と、前フレームの抽出領域の光学的特徴量に近い
光学的特徴量を有する領域を抽出領域として残存させ、
他の領域を非抽出領域に変更する手段(41)とを備えるこ
とを特徴とする領域抽出装置。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP6047491A JP3030485B2 (ja) | 1994-03-17 | 1994-03-17 | 3次元形状抽出方法及び装置 |
US08/385,441 US5742294A (en) | 1994-03-17 | 1995-02-08 | Method and apparatus for synthesizing images |
US08/984,649 US6999069B1 (en) | 1994-03-17 | 1997-12-03 | Method and apparatus for synthesizing images |
JP31033999A JP3364682B2 (ja) | 1994-03-17 | 1999-10-29 | 画像列生成方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP6047491A JP3030485B2 (ja) | 1994-03-17 | 1994-03-17 | 3次元形状抽出方法及び装置 |
Related Child Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP31033999A Division JP3364682B2 (ja) | 1994-03-17 | 1999-10-29 | 画像列生成方法 |
JP31023699A Division JP3345808B2 (ja) | 1999-10-29 | 1999-10-29 | 3次元形状モデルの表示方法及び装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JPH07262410A JPH07262410A (ja) | 1995-10-13 |
JP3030485B2 true JP3030485B2 (ja) | 2000-04-10 |
Family
ID=12776595
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP6047491A Expired - Fee Related JP3030485B2 (ja) | 1994-03-17 | 1994-03-17 | 3次元形状抽出方法及び装置 |
Country Status (2)
Country | Link |
---|---|
US (2) | US5742294A (ja) |
JP (1) | JP3030485B2 (ja) |
Families Citing this family (69)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0981361A (ja) * | 1995-09-12 | 1997-03-28 | Toshiba Corp | 画像表示方法、データ収集方法及び対象物特定方法 |
US6714689B1 (en) * | 1995-09-29 | 2004-03-30 | Canon Kabushiki Kaisha | Image synthesizing method |
US5883678A (en) * | 1995-09-29 | 1999-03-16 | Kabushiki Kaisha Toshiba | Video coding and video decoding apparatus for reducing an alpha-map signal at a controlled reduction ratio |
JP3064928B2 (ja) * | 1996-09-20 | 2000-07-12 | 日本電気株式会社 | 被写体抽出方式 |
JPH10126687A (ja) * | 1996-10-16 | 1998-05-15 | Matsushita Electric Ind Co Ltd | すり替え編集システム |
JPH10198539A (ja) * | 1997-01-08 | 1998-07-31 | Fuji Xerox Co Ltd | 画像形成装置および画像形成方法 |
JPH11250250A (ja) | 1998-02-27 | 1999-09-17 | Fujitsu Ltd | 三次元形状抽出装置及び記録媒体 |
US6677944B1 (en) * | 1998-04-14 | 2004-01-13 | Shima Seiki Manufacturing Limited | Three-dimensional image generating apparatus that creates a three-dimensional model from a two-dimensional image by image processing |
DE19821611A1 (de) | 1998-05-14 | 1999-11-18 | Syrinx Med Tech Gmbh | Verfahren zur Erfassung der räumlichen Struktur einer dreidimensionalen Oberfläche |
JP3467725B2 (ja) | 1998-06-02 | 2003-11-17 | 富士通株式会社 | 画像の影除去方法、画像処理装置及び記録媒体 |
JP4025442B2 (ja) * | 1998-12-01 | 2007-12-19 | 富士通株式会社 | 三次元モデル変換装置及び方法 |
US6593936B1 (en) * | 1999-02-01 | 2003-07-15 | At&T Corp. | Synthetic audiovisual description scheme, method and system for MPEG-7 |
US6728423B1 (en) | 2000-04-28 | 2004-04-27 | Orametrix, Inc. | System and method for mapping a surface |
US7068836B1 (en) | 2000-04-28 | 2006-06-27 | Orametrix, Inc. | System and method for mapping a surface |
US6744932B1 (en) | 2000-04-28 | 2004-06-01 | Orametrix, Inc. | System and method for mapping a surface |
US6532299B1 (en) | 2000-04-28 | 2003-03-11 | Orametrix, Inc. | System and method for mapping a surface |
US6413084B1 (en) | 2000-04-28 | 2002-07-02 | Ora Metrix, Inc. | Method and system of scanning |
US7068825B2 (en) * | 1999-03-08 | 2006-06-27 | Orametrix, Inc. | Scanning system and calibration method for capturing precise three-dimensional information of objects |
US6744914B1 (en) | 2000-04-28 | 2004-06-01 | Orametrix, Inc. | Method and system for generating a three-dimensional object |
US6512994B1 (en) | 1999-11-30 | 2003-01-28 | Orametrix, Inc. | Method and apparatus for producing a three-dimensional digital model of an orthodontic patient |
US6771809B1 (en) | 2000-04-28 | 2004-08-03 | Orametrix, Inc. | Method and system for registering data |
JP4203779B2 (ja) * | 1999-03-15 | 2009-01-07 | ソニー株式会社 | 表示要素立体化装置及びその方法 |
JP3807583B2 (ja) * | 1999-04-19 | 2006-08-09 | 本田技研工業株式会社 | 道路領域判定装置 |
EP1102211A3 (en) * | 1999-11-19 | 2006-09-13 | Matsushita Electric Industrial Co., Ltd. | Image processor, method of providing image processing services and order processing method |
US6648640B2 (en) * | 1999-11-30 | 2003-11-18 | Ora Metrix, Inc. | Interactive orthodontic care system based on intra-oral scanning of teeth |
JP2001197366A (ja) | 2000-01-12 | 2001-07-19 | Hitachi Ltd | 画像合成方法及び画像合成プログラムを記録した記録媒体 |
US6792144B1 (en) * | 2000-03-03 | 2004-09-14 | Koninklijke Philips Electronics N.V. | System and method for locating an object in an image using models |
US7471821B2 (en) * | 2000-04-28 | 2008-12-30 | Orametrix, Inc. | Method and apparatus for registering a known digital object to scanned 3-D model |
US7027642B2 (en) * | 2000-04-28 | 2006-04-11 | Orametrix, Inc. | Methods for registration of three-dimensional frames to create three-dimensional virtual models of objects |
JP2001319246A (ja) * | 2000-05-02 | 2001-11-16 | Canon Inc | 情報処理方法及び装置 |
US7031522B2 (en) * | 2000-06-23 | 2006-04-18 | Sony Corporation | Image processing apparatus and method, and storage medium therefor |
JP3764364B2 (ja) * | 2000-10-31 | 2006-04-05 | 株式会社東芝 | 画像特徴点検出方法、画像処理方法、及びプログラム |
US7080979B2 (en) * | 2001-04-13 | 2006-07-25 | Orametrix, Inc. | Method and workstation for generating virtual tooth models from three-dimensional tooth data |
US6977659B2 (en) * | 2001-10-11 | 2005-12-20 | At & T Corp. | Texture replacement in video sequences and images |
US7606435B1 (en) | 2002-02-21 | 2009-10-20 | At&T Intellectual Property Ii, L.P. | System and method for encoding and decoding using texture replacement |
JP2004030122A (ja) * | 2002-06-25 | 2004-01-29 | Fujitsu Ltd | 図面検索支援装置および図面検索方法 |
JP4278434B2 (ja) * | 2003-05-19 | 2009-06-17 | パナソニック株式会社 | 通信装置、情報共有システムおよび情報共有方法 |
US9642685B2 (en) * | 2003-07-17 | 2017-05-09 | Pentron Clinical Technologies, Llc | Digital technologies for planning and carrying out dental restorative procedures |
US8751950B2 (en) | 2004-08-17 | 2014-06-10 | Ice Edge Business Solutions Ltd. | Capturing a user's intent in design software |
US7639839B2 (en) * | 2004-03-31 | 2009-12-29 | Fuji Xerox Co., Ltd. | Extracting video regions of interest |
US7573491B2 (en) * | 2004-04-02 | 2009-08-11 | David Hartkop | Method for formatting images for angle-specific viewing in a scanning aperture display device |
TWI236289B (en) * | 2004-08-11 | 2005-07-11 | Pixart Imaging Inc | Interactive device capable of improving image processing |
US9024880B2 (en) * | 2004-08-11 | 2015-05-05 | Pixart Imaging Inc. | Interactive system capable of improving image processing |
US7904455B2 (en) * | 2005-11-03 | 2011-03-08 | Fuji Xerox Co., Ltd. | Cascading cluster collages: visualization of image search results on small displays |
US7522164B2 (en) * | 2006-03-28 | 2009-04-21 | International Business Machines Corporation | Using self-adjustable three-dimensional matrix to simplify the construction of a complex 3D scene |
GB0611128D0 (en) * | 2006-06-06 | 2006-07-19 | Sony Uk Ltd | Encoding and detecting apparatus |
US20090021533A1 (en) * | 2007-07-17 | 2009-01-22 | Michael Guerzhoy | Method For Extracting An Inexact Rectangular Region Into An Axis-Aligned Rectangle Image |
JP4973447B2 (ja) * | 2007-10-25 | 2012-07-11 | 富士通株式会社 | 差異強調プログラム、差異強調処理方法及び差異強調処理装置 |
EP2252951B1 (en) * | 2008-03-11 | 2021-05-05 | Ice Edge Business Solutions, Ltd. | Automatically creating and modifying furniture layouts in design software |
US20090231327A1 (en) * | 2008-03-12 | 2009-09-17 | Harris Corporation | Method for visualization of point cloud data |
US20090232388A1 (en) * | 2008-03-12 | 2009-09-17 | Harris Corporation | Registration of 3d point cloud data by creation of filtered density images |
US20090232355A1 (en) * | 2008-03-12 | 2009-09-17 | Harris Corporation | Registration of 3d point cloud data using eigenanalysis |
JP5214730B2 (ja) * | 2008-06-23 | 2013-06-19 | パナソニック株式会社 | 合成装置および合成方法 |
US20100208981A1 (en) * | 2009-02-13 | 2010-08-19 | Harris Corporation | Method for visualization of point cloud data based on scene content |
US8290305B2 (en) * | 2009-02-13 | 2012-10-16 | Harris Corporation | Registration of 3D point cloud data to 2D electro-optical image data |
JP5171713B2 (ja) * | 2009-03-27 | 2013-03-27 | パナソニック株式会社 | 情報表示装置及び情報表示方法 |
CN102349304B (zh) * | 2009-03-30 | 2015-05-06 | 日本电气株式会社 | 图像显示装置、图像生成装置、图像显示方法、图像生成方法和存储程序的非暂时计算机可读介质 |
JP4935961B2 (ja) * | 2009-04-14 | 2012-05-23 | 日本電気株式会社 | 画像識別子抽出装置 |
JP2011022726A (ja) * | 2009-07-14 | 2011-02-03 | Sony Corp | 画像処理装置および画像処理方法 |
JP5299173B2 (ja) * | 2009-08-26 | 2013-09-25 | ソニー株式会社 | 画像処理装置および画像処理方法、並びにプログラム |
US20110115812A1 (en) * | 2009-11-13 | 2011-05-19 | Harris Corporation | Method for colorization of point cloud data based on radiometric imagery |
US20110200249A1 (en) * | 2010-02-17 | 2011-08-18 | Harris Corporation | Surface detection in images based on spatial data |
TWI508543B (zh) * | 2010-05-06 | 2015-11-11 | Pixart Imaging Inc | 可提高影像處理速度之互動式系統 |
US9053562B1 (en) | 2010-06-24 | 2015-06-09 | Gregory S. Rabin | Two dimensional to three dimensional moving image converter |
JP5058354B1 (ja) * | 2011-04-19 | 2012-10-24 | 株式会社東芝 | 電子機器、表示制御方法及びプログラム |
JP2014082541A (ja) * | 2012-10-12 | 2014-05-08 | National Institute Of Information & Communication Technology | 互いに類似した情報を含む複数画像のデータサイズを低減する方法、プログラムおよび装置 |
US9992021B1 (en) | 2013-03-14 | 2018-06-05 | GoTenna, Inc. | System and method for private and point-to-point communication between computing devices |
CN105264566B (zh) * | 2013-05-31 | 2018-06-12 | 松下知识产权经营株式会社 | 建模装置、三维模型生成装置、建模方法和布局模拟器 |
JP5878511B2 (ja) * | 2013-11-15 | 2016-03-08 | 萬里科技股▲ふん▼有限公司 | 3d空間中で3d幾何データを仮想現実画像の表現と制御に用いる方法 |
Family Cites Families (24)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4835532A (en) * | 1982-07-30 | 1989-05-30 | Honeywell Inc. | Nonaliasing real-time spatial transform image processing system |
JPS6219868A (ja) | 1985-07-18 | 1987-01-28 | Canon Inc | 電子写真感光体 |
JPH0812696B2 (ja) | 1986-03-24 | 1996-02-07 | シャープ株式会社 | 画像処理装置 |
JPS62162173A (ja) * | 1986-01-13 | 1987-07-18 | Hitachi Ltd | 図形表示方法 |
US4831445A (en) * | 1986-12-11 | 1989-05-16 | Nec Corporation | Special effect system for video signal |
US4935879A (en) * | 1987-08-05 | 1990-06-19 | Daikin Industries, Ltd. | Texture mapping apparatus and method |
JP2951663B2 (ja) | 1987-08-05 | 1999-09-20 | ダイキン工業株式会社 | テクスチャマッピング装置およびその方法 |
JP2832463B2 (ja) * | 1989-10-25 | 1998-12-09 | 株式会社日立製作所 | 3次元モデルの再構成方法および表示方法 |
JPH03244005A (ja) * | 1990-02-22 | 1991-10-30 | Mitsubishi Electric Corp | 形状表示方式 |
EP0449478A3 (en) * | 1990-03-29 | 1992-11-25 | Microtime Inc. | 3d video special effects system |
US5077608A (en) * | 1990-09-19 | 1991-12-31 | Dubner Computer Systems, Inc. | Video effects system able to intersect a 3-D image with a 2-D image |
JP2720920B2 (ja) | 1991-03-11 | 1998-03-04 | 工業技術院長 | 画像処理システムにおける実写画像とコンピュータグラフィックスの合成方法 |
JPH04289976A (ja) | 1991-03-19 | 1992-10-14 | Hitachi Ltd | 三次元形状モデル生成方法およびシステム |
JPH0561962A (ja) | 1991-08-30 | 1993-03-12 | Hitachi Ltd | 製品評価のための環境モデル作成装置 |
JPH05101160A (ja) | 1991-10-04 | 1993-04-23 | Toshiba Corp | アニメーシヨン構成装置 |
JP3206047B2 (ja) | 1991-11-14 | 2001-09-04 | 株式会社日立製作所 | グラフィックデータ処理システム |
JPH05233781A (ja) | 1992-02-25 | 1993-09-10 | N T T Data Tsushin Kk | 動画像利用の立体モデル作成システム |
JPH07111743B2 (ja) | 1992-03-04 | 1995-11-29 | インターナショナル・ビジネス・マシーンズ・コーポレイション | 三次元空間中の物体を回転させるグラフィック表示方法及び装置 |
JPH05274409A (ja) | 1992-03-27 | 1993-10-22 | Mitsubishi Electric Corp | 画像データ抽出装置 |
JPH0628449A (ja) | 1992-07-08 | 1994-02-04 | Matsushita Electric Ind Co Ltd | 画像合成装置 |
US5379370A (en) * | 1992-07-17 | 1995-01-03 | International Business Machines Corporation | Method and apparatus for drawing lines, curves, and points coincident with a surface |
JP2623416B2 (ja) | 1992-09-21 | 1997-06-25 | 松下電器産業株式会社 | 3次元図形処理装置 |
JP3229042B2 (ja) | 1992-11-24 | 2001-11-12 | 株式会社ソニー・コンピュータエンタテインメント | 画像処理装置および画像処理方法 |
JP2573785B2 (ja) | 1993-02-22 | 1997-01-22 | 日本電気株式会社 | 3次元分子情報の表示における視線/光線方向変更装置 |
-
1994
- 1994-03-17 JP JP6047491A patent/JP3030485B2/ja not_active Expired - Fee Related
-
1995
- 1995-02-08 US US08/385,441 patent/US5742294A/en not_active Expired - Lifetime
-
1997
- 1997-12-03 US US08/984,649 patent/US6999069B1/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
US6999069B1 (en) | 2006-02-14 |
JPH07262410A (ja) | 1995-10-13 |
US5742294A (en) | 1998-04-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP3030485B2 (ja) | 3次元形状抽出方法及び装置 | |
JP5299173B2 (ja) | 画像処理装置および画像処理方法、並びにプログラム | |
JP2000067267A (ja) | 三次元シーンにおける形状及び模様の復元方法及び装置 | |
JPH05174129A (ja) | 3次元モデルを映像化するためのモデリング装置 | |
US7277571B2 (en) | Effective image processing, apparatus and method in virtual three-dimensional space | |
WO2002013144A1 (en) | 3d facial modeling system and modeling method | |
JP3104638B2 (ja) | 3次元画像作成装置 | |
KR20200024105A (ko) | 컴퓨터 그래픽 합성 시스템 및 방법 | |
JPH10240908A (ja) | 映像合成方法 | |
JPH0997344A (ja) | テクスチャ生成方法およびテクスチャ生成システム | |
US12020363B2 (en) | Surface texturing from multiple cameras | |
JP3732158B2 (ja) | 3次元形状モデルの表示方法及び装置 | |
Leung et al. | Realistic video avatar | |
JP3345808B2 (ja) | 3次元形状モデルの表示方法及び装置 | |
JP3309841B2 (ja) | 合成動画像生成装置および合成動画像生成方法 | |
JP7394566B2 (ja) | 画像処理装置、画像処理方法、および画像処理プログラム | |
JP3116019B2 (ja) | 三次元画像データ作成方法および三次元カラー画像表示方法 | |
JP3364682B2 (ja) | 画像列生成方法 | |
JPH05298460A (ja) | 貝殻質感表現装置 | |
US6633291B1 (en) | Method and apparatus for displaying an image | |
JPH11175765A (ja) | 3次元モデル作成方法、3次元モデル作成装置及び記憶媒体 | |
JP3261832B2 (ja) | 画像生成装置 | |
JP3648099B2 (ja) | 画像合成表示方法および装置ならびに画像合成表示プログラムを記録した記録媒体 | |
JP2001222725A (ja) | 画像処理装置 | |
JPH0935082A (ja) | 画像処理方法および画像処理装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20000111 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20080210 Year of fee payment: 8 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090210 Year of fee payment: 9 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090210 Year of fee payment: 9 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100210 Year of fee payment: 10 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110210 Year of fee payment: 11 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110210 Year of fee payment: 11 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120210 Year of fee payment: 12 |
|
LAPS | Cancellation because of no payment of annual fees |