JP2005107967A - 画像合成装置及び方法 - Google Patents
画像合成装置及び方法 Download PDFInfo
- Publication number
- JP2005107967A JP2005107967A JP2003341624A JP2003341624A JP2005107967A JP 2005107967 A JP2005107967 A JP 2005107967A JP 2003341624 A JP2003341624 A JP 2003341624A JP 2003341624 A JP2003341624 A JP 2003341624A JP 2005107967 A JP2005107967 A JP 2005107967A
- Authority
- JP
- Japan
- Prior art keywords
- image
- subject
- color information
- area
- color
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Processing Or Creating Images (AREA)
- Studio Circuits (AREA)
- Image Analysis (AREA)
Abstract
【解決手段】画像合成装置は、ビデオカメラ101からの撮影画像に画像生成部108で生成されるCG画像を重畳して表示する画像合成部108を有する。被写体色情報登録部110には画像生成部106で生成されるCG画像よりも前景とすべき被写体画像の色情報が保持される。被写体領域抽出部103は、被写体色情報登録部110に保持された色情報に基づいて撮影画像より被写体画像の領域である被写体領域を抽出し、画像合成部108は、抽出された被写体領域に対してはCGの描画を禁止しながら、撮影画像上にCG画像を描画する。被写体色保持情報登録部110は、被写体画像を構成する被写体を含む第1撮影画像と、該被写体を含まない第2撮影画像をビデオカメラ101より得て、それぞれの撮影画像における色情報に基づいて被写体画像の色情報を決定し、保持する。
【選択図】 図1
Description
また、本発明の他の目的は、提示画像中に出現するノイズを除去することにある。
現実空間の撮影画像にコンピュータによる生成画像を重畳して表示する画像合成方法であって、
前記生成画像よりも前景とすべき被写体画像の色情報を保持手段に保持する保持工程と、
前記保持手段に保持された色情報に基づいて前記撮影画像より前記被写体画像の領域である被写体領域を抽出する抽出工程と、
前記抽出工程で抽出された被写体領域に対する前記生成画像の描画を用いて、前記撮影画像上に該生成画像を描画する描画工程とを備え、
前記保持工程は、前記被写体画像を構成する被写体を含む第1撮影画像と、該被写体を含まない第2撮影画像のそれぞれの色情報に基づいて前記被写体画像の色情報を決定し、保持する。
前記抽出工程では、
前記色情報に基づいて前記撮影画像より前記被写体領域を抽出することにより、該撮影画像を被写体領域とそれ以外の領域の2種類の属性の領域へ分類し、各領域の面積に基づいてノイズか否かを判定し、ノイズと判定された領域は、その属性を他方の属性へ変更する。
現実空間の撮影画像にコンピュータによる生成画像を合成して表示する画像合成方法であって、
マスク領域の色情報を保持する保持工程と、
前記色情報を用いて、前記撮影画像からマスク領域を抽出する抽出工程と、
前記マスク領域を用いて、前記生成画像と前記生成画像を合成する合成工程と、
前記マスク領域の対象となる物体を含む第1の撮影画像と、該マスク領域の対象となる物体を含まない第2の撮影画像のそれぞれの色情報に基づき前記マスク領域の色情報を決定し登録する登録工程とを有する。
また、上記の構成によれば、提示画像中に出現するノイズを除去できる。
TPx/(BPx+TPx)
を計算することにより、確率分布を求めることが挙げられる。但し、この式は、被写体を含むサンプル画像と含まないサンプル画像の枚数が等しい場合に適用できるものであり、両者の枚数が等しくない場合は、サンプル画像の枚数で重みを付ける必要がある。また、CG描画においては、確率分布の値に従い透過率を設定してアルファブレンドを行う。透過率を設定することにより、被写体領域であるけれども陰影の影響で背景色に近くなってしまった領域は半透明で表示することができる。これにより、被写体と背景の境界線をぼかすことができ、見た目をよくすることができる。
Claims (10)
- 現実空間の撮影画像にコンピュータによる生成画像を重畳して表示する画像合成方法であって、
前記生成画像よりも前景とすべき被写体画像の色情報を保持手段に保持する保持工程と、
前記保持手段に保持された色情報に基づいて前記撮影画像より前記被写体画像の領域である被写体領域を抽出する抽出工程と、
前記抽出工程で抽出された被写体領域に対する前記生成画像の描画を用いて、前記撮影画像上に該生成画像を描画する描画工程とを備え、
前記保持工程は、前記被写体画像を構成する被写体を含む第1撮影画像と、該被写体を含まない第2撮影画像のそれぞれの色情報に基づいて前記被写体画像の色情報を決定し、保持することを特徴とする画像合成方法。 - 前記保持工程は、
前記第2撮影画像に存在し、且つ前記第1撮影画像に存在しない色を抽出し、
所定の色空間において、前記抽出した色の全体が含まれるように範囲を決定し、
前記決定された範囲内の色を前記被写体画像の色情報とすることを特徴とする請求項1に記載の画像合成方法。 - 前記被写体画像の色情報は、輝度と色みから構成された色空間における色みのみを用いて表現されることを特徴とする請求項1又は2に記載の画像合成方法。
- 前記抽出工程では、
前記色情報に基づいて前記撮影画像より前記被写体領域を抽出することにより、該撮影画像を被写体領域とそれ以外の領域の2種類の属性の領域へ分類し、各領域の面積に基づいてノイズか否かを判定し、ノイズと判定された領域は、その属性を他方の属性へ変更することを特徴とする請求項1乃至3のいずれかに記載の画像合成方法。 - 領域の面積が所定値よりも小さい場合、当該領域をノイズと判定することを特徴とする請求項4に記載の画像合成方法。
- 属性別に領域を面積順に並べ、大きい方から所定番目以下の領域をノイズと判定することを特徴とする請求項4に記載の画像合成方法。
- 現実空間の撮影画像にコンピュータによる生成画像を合成して表示する画像合成方法であって、
マスク領域の色情報を保持する保持工程と、
前記色情報を用いて、前記撮影画像からマスク領域を抽出する抽出工程と、
前記マスク領域を用いて、前記生成画像と前記生成画像を合成する合成工程と、
前記マスク領域の対象となる物体を含む第1の撮影画像と、該マスク領域の対象となる物体を含まない第2の撮影画像のそれぞれの色情報に基づき前記マスク領域の色情報を決定し登録する登録工程とを有することを特徴とする画像合成方法。 - 現実空間の撮影画像にコンピュータによる生成画像を重畳して表示する画像合成装置であって、
前記生成画像よりも前景とすべき被写体画像の色情報を保持する保持手段と、
前記保持手段に保持された色情報に基づいて前記撮影画像より前記被写体画像の領域である被写体領域を抽出する抽出手段と、
前記抽出手段で抽出された被写体領域に対する前記生成画像の描画を禁止しながら前記撮影画像上に該生成画像を描画する描画手段とを備え、
前記保持手段は、前記被写体画像を構成する被写体を含む第1撮影画像と、該被写体を含まない第2撮影画像のそれぞれの色情報に基づいて前記被写体画像の色情報を決定し、保持することを特徴とする画像合成装置。 - 請求項1乃至7のいずれかに記載の画像合成方法をコンピュータに実行させるための制御プログラム。
- 請求項1乃至7のいずれかに記載の画像合成方法をコンピュータに実行させるための制御プログラムを格納した記憶媒体。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2003341624A JP4323910B2 (ja) | 2003-09-30 | 2003-09-30 | 画像合成装置及び方法 |
US10/948,143 US7574070B2 (en) | 2003-09-30 | 2004-09-24 | Correction of subject area detection information, and image combining apparatus and method using the correction |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2003341624A JP4323910B2 (ja) | 2003-09-30 | 2003-09-30 | 画像合成装置及び方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2005107967A true JP2005107967A (ja) | 2005-04-21 |
JP4323910B2 JP4323910B2 (ja) | 2009-09-02 |
Family
ID=34536179
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2003341624A Expired - Fee Related JP4323910B2 (ja) | 2003-09-30 | 2003-09-30 | 画像合成装置及び方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4323910B2 (ja) |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006343953A (ja) * | 2005-06-08 | 2006-12-21 | Canon Inc | 画像処理方法、画像処理装置 |
JP2008287410A (ja) * | 2007-05-16 | 2008-11-27 | Canon Inc | 画像処理方法及び画像処理装置 |
JP2009253953A (ja) * | 2008-04-11 | 2009-10-29 | Sony Corp | 情報処理装置および方法、並びにプログラム |
JP2010541053A (ja) * | 2007-09-25 | 2010-12-24 | メタイオ ゲゼルシャフト ミット ベシュレンクテル ハフツング | 現実環境内にバーチャルオブジェクトを描写する方法および装置 |
JP2014089697A (ja) * | 2012-10-05 | 2014-05-15 | Fine Co Ltd | 建築画像表示装置、建築画像表示方法及びコンピュータプログラム |
JP2020052466A (ja) * | 2018-09-21 | 2020-04-02 | キヤノン株式会社 | 画像処理装置、画像処理方法、及びプログラム |
WO2023210288A1 (ja) * | 2022-04-25 | 2023-11-02 | ソニーグループ株式会社 | 情報処理装置、情報処理方法および情報処理システム |
US11842519B2 (en) | 2021-01-19 | 2023-12-12 | Canon Kabushiki Kaisha | Image processing apparatus for processing captured image, method therefor, and storage medium |
-
2003
- 2003-09-30 JP JP2003341624A patent/JP4323910B2/ja not_active Expired - Fee Related
Cited By (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006343953A (ja) * | 2005-06-08 | 2006-12-21 | Canon Inc | 画像処理方法、画像処理装置 |
JP4745724B2 (ja) * | 2005-06-08 | 2011-08-10 | キヤノン株式会社 | 画像処理方法、画像処理装置 |
JP2008287410A (ja) * | 2007-05-16 | 2008-11-27 | Canon Inc | 画像処理方法及び画像処理装置 |
JP2010541053A (ja) * | 2007-09-25 | 2010-12-24 | メタイオ ゲゼルシャフト ミット ベシュレンクテル ハフツング | 現実環境内にバーチャルオブジェクトを描写する方法および装置 |
US8558846B2 (en) | 2008-04-11 | 2013-10-15 | Sony Corporation | Information processing device and method, and program |
JP4556146B2 (ja) * | 2008-04-11 | 2010-10-06 | ソニー株式会社 | 情報処理装置および方法、プログラム、並びに情報処理システム |
JP2009253953A (ja) * | 2008-04-11 | 2009-10-29 | Sony Corp | 情報処理装置および方法、並びにプログラム |
JP2014089697A (ja) * | 2012-10-05 | 2014-05-15 | Fine Co Ltd | 建築画像表示装置、建築画像表示方法及びコンピュータプログラム |
JP2020052466A (ja) * | 2018-09-21 | 2020-04-02 | キヤノン株式会社 | 画像処理装置、画像処理方法、及びプログラム |
US11200706B2 (en) | 2018-09-21 | 2021-12-14 | Canon Kabushiki Kaisha | Image processing apparatus, image processing method, and storage medium |
JP7204397B2 (ja) | 2018-09-21 | 2023-01-16 | キヤノン株式会社 | 画像処理装置、画像処理方法、及びプログラム |
US11842519B2 (en) | 2021-01-19 | 2023-12-12 | Canon Kabushiki Kaisha | Image processing apparatus for processing captured image, method therefor, and storage medium |
WO2023210288A1 (ja) * | 2022-04-25 | 2023-11-02 | ソニーグループ株式会社 | 情報処理装置、情報処理方法および情報処理システム |
Also Published As
Publication number | Publication date |
---|---|
JP4323910B2 (ja) | 2009-09-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4136420B2 (ja) | 情報処理方法および装置 | |
JP5463866B2 (ja) | 画像処理装置および画像処理方法、並びにプログラム | |
JP5818773B2 (ja) | 画像処理装置、画像処理方法及びプログラム | |
JP5474169B2 (ja) | 画像処理装置、画像処理方法 | |
US7574070B2 (en) | Correction of subject area detection information, and image combining apparatus and method using the correction | |
US9679415B2 (en) | Image synthesis method and image synthesis apparatus | |
JP4246516B2 (ja) | 人物動画像生成システム | |
CN108682050B (zh) | 基于三维模型的美颜方法和装置 | |
JP3810943B2 (ja) | 画像処理装置、画像処理方法および画像処理プログラムを記録した記録媒体 | |
CN109785228B (zh) | 图像处理方法、装置、存储介质和服务器 | |
JP2009211513A (ja) | 画像処理装置及びその方法 | |
CN107564085B (zh) | 图像扭曲处理方法、装置、计算设备及计算机存储介质 | |
JP4323910B2 (ja) | 画像合成装置及び方法 | |
JP2007140834A (ja) | プログラム、情報記憶媒体、写真印刷装置及び写真印刷方法 | |
JP2018163648A (ja) | 画像処理装置、画像処理方法、及びプログラム | |
JP2015153321A (ja) | 画像処理装置、画像処理方法及びプログラム | |
JP4328639B2 (ja) | 被写体検出情報の調整方法及び調整装置 | |
JP5272775B2 (ja) | 電子スチルカメラ | |
JP2009237927A (ja) | 画像合成方法及び装置 | |
US8971636B2 (en) | Image creating device, image creating method and recording medium | |
JP4745724B2 (ja) | 画像処理方法、画像処理装置 | |
JP2002083286A (ja) | アバタ生成方法、装置及びそのプログラムを記録した記録媒体 | |
JP6341540B2 (ja) | 情報端末装置、方法及びプログラム | |
JP2008299670A (ja) | 画像領域抽出装置およびその制御方法、複合現実感提示システム及びコンピュータプログラム | |
JP2002271691A (ja) | 画像処理方法、画像処理装置、記憶媒体及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20060921 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20090213 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20090223 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20090424 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20090525 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20090605 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 4323910 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120612 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120612 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130612 Year of fee payment: 4 |
|
LAPS | Cancellation because of no payment of annual fees |