JPH11213139A - 試着シミュレーションシステム - Google Patents

Abstract

(57)【要約】 【課題】画像入力手段により撮影した試着シミュレーシ
ョンを行う人物の画像から顔部分を切り抜き、所望する
衣服を着用したモデルの画像の顔部分と差し替える時
に、輪郭抽出を行わず、簡単な構成でより自然に違和感
なく画像の合成を行うことができる試着シミュレーショ
ンシステムを提供する。 【解決手段】第１画像の背景の色情報を採取して固定色
を決定し、決定した固定色で第２画像における背景を塗
りつぶす。第１画像における人物の顔とその周辺の背景
部を、固定色で背景を塗りつぶした第２画像に合成す
る。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、衣服の試着シミュ
レーションシステムに関するものである。

【０００２】

【従来の技術】試着のシミュレーションを行う人物の画
像をビデオカメラで撮影し、予め登録されている様々な
デザインの衣服を着用したモデルの画像の中から、所望
するデザインの衣服を着用したモデルの画像を選択して
モニタに表示し、ビデオカメラで撮影した人物の画像か
ら顔の部分を切り抜いて、所望するデザインの衣服を着
用したモデルの画像と合成することで、衣服を着用した
モデルの画像の顔部分を撮影した人物の顔の画像とを差
し替えるタイプの試着シミュレーションシステムは知ら
れている。

【０００３】従来、このような試着シミュレーションシ
ステムでは、ビデオカメラにより撮影された人物の画像
から顔の画像のみを輪郭抽出により切り抜くための画像
処理方法として、クロマキー処理が用いられている。こ
のクロマキー処理は、画像の色相成分からある特定の色
相部分だけを取り出してキー信号をつくり、このキー信
号と異なる色相の部分を切り抜くことができる。通常、
クロマキー処理により画像処理を行う場合、肌の色に及
ぼす影響が最も少ないブルー系の色を背景に人物の撮影
が行われる。

【０００４】

【発明が解決しようとする課題】ところが従来の試着シ
ミュレーションシステムにおいて、試着のシミュレーシ
ョンを行う人物の画像から顔の部分をクロマキーを用い
て切り抜く場合にはいくつかの問題がある。通常、試着
シミュレーションシステムはブティックなどの店内に設
置されることが多い。店内は撮影スタジオとは異なり照
明等の撮影環境は整っていない。またクロマキー処理を
行うために、背景にブルーのスクリーンを用意する必要
もある。さらにクロマキー処理において、頭髪等を含む
顔の画像を自然に切り抜くためには高度な画像処理技術
が必要となり、それだけ装置にかかるコストも高くなっ
てしまう。また、頭髪をブルー系の色で染めている場合
は、その部分に写り込みが発生する。

【０００５】この発明の課題は、ビデオカメラ等で撮影
した人物の画像の顔部分を切り抜き、所望の衣服を着用
したモデルの画像の顔部分と差し替える時に、技術的に
高度なクロマキー処理等の輪郭抽出は行わず、簡単な構
成でより自然に違和感なく画像の合成を行うことができ
る試着シミュレーションシステムを提供することであ
る。

【０００６】

【課題を解決するための手段】上記の問題点を解決する
ために本発明は、画像入力手段により無地のスクリーン
を背景に人物を撮影して第１画像として入力し、第１画
像を記憶手段に記憶された衣服を着用したモデルの画像
である第２画像と合成して第２画像のモデルの顔を前記
画像入力手段で撮影した第１画像の人物の顔に差し替え
る試着シミュレーションシステムにおいて、第１画像の
背景の色情報を採取して固定色を決定する固定色決定手
段と、固定色決定手段で決定した固定色で第２画像にお
ける背景を塗りつぶし、第１画像における人物の顔とそ
の周辺の背景部を、前記固定色で背景を塗りつぶした第
２画像に合成する画像合成手段、とを備えたことを特徴
とする。

【０００７】また好ましくは、固定色決定手段は、前記
画像入力手段により入力された第１画像の顔周辺の背景
部分に設定された複数のサンプリング箇所における色情
報を採取し、採取した色情報の平均値を算出して固定色
とする。

【０００８】

【発明の実施の形態】以下に、本発明の一実施例を図面
に基づいて説明する。図１は、本発明における試着シミ
ュレーションシステム１０の構成を示した図である。１
２はバスで、画像バスとそれ以外の命令バス等を区別せ
ずに１つのバスとして示す。１４は各種データ処理を行
うＣＰＵ、１６は各種プログラムを記憶したＲＯＭ、１
８は読み出し書き込み可能な作業用メモリを備えたＲＡ
Ｍ、そして２０はハードディスク、２２はフレームメモ
リ、２４はモニタである。２６はＩ／Ｏ装置で、キャプ
チャＩ／Ｆ２８と接続した後述する画像入力手段として
のビデオカメラ３０、数値入力やコマンド入力用のキー
ボードおよびマウス３２、フロッピーディスクや光磁気
ディスク等のドライブの外部記憶手段３４等を接続す
る。また、３６はビデオカメラ３０により人物３８を撮
影するときの無地のバックスクリーンであり、４０はビ
デオカメラ３０による撮影時に使用する照明である。

【０００９】試着シミュレーションシステム１０のＲＯ
Ｍ１６等を用いて、後述する固定色決定手段４２、画像
合成手段４４等を形成する。ＲＯＭ１６には同様に、こ
れらのプログラムの他、画像の編集処理等を行う編集プ
ログラム４６、ビデオカメラ３０および照明４０のコン
トロールを行うプログラム等が記憶され、これらのプロ
グラムはＣＰＵ１４の助けを借りてそれぞれのジョブを
行う。これらの手段はプログラムとして実現するだけで
なく、デジタルシグナルプロセッサ等の専用ＩＣ等でも
実現可能である。

【００１０】またＲＡＭ１８は、ＲＯＭ１６に設けた各
種手段やプログラムを用い、ＣＰＵ１４で処理して得ら
れたデータを記憶する。ここには、各エリア別の記憶領
域があり、ビデオカメラ３０により無地のスクリーン３
６を背景に撮影された人物３８の第１画像４８を格納す
る領域５０の他、衣服を着用したモデルの第２画像５２
の記憶領域５４，第２画像５２の背景を塗りつぶすため
に使用する第１マスクデータ５６の記憶領域５８，第２
画像５２を第１マスクデータ５６を用いて画像合成手段
４４により修正した修正第２画像６０の記憶領域６２，
第１画像４８と修正第２画像６０とを合成する時に使用
する第２マスクデータ６４の記憶領域６６等がある。

【００１１】第１画像４８は、ビデオカメラ３０による
撮影でキャプチャＩ／Ｆ２８に格納されている静止画像
であり、この第１画像４８はＲＡＭ１８の第１画像４８
の記憶領域５０に格納する。第２画像５２，第１マスク
データ５６，第２マスクデータ６４は、後述するデザイ
ン選択画面より試着シミュレーションを行う人物３８が
所望するデザインの衣服を選択することにより、選択さ
れた画像に対応する画像データおよびマスクデータが、
ハードディスク２０から読み出され、ＲＡＭ１８の第２
画像５２の記憶領域５４，第１マスクデータ５６の記憶
領域５８，第２マスクデータ６４の記憶領域６６にそれ
ぞれ格納される。

【００１２】次ぎに本発明の試着シミュレーションシス
テム１０の処理についての説明を図２および図３〜図９
を参照して行う。図２は、本発明の試着シミュレーショ
ンシステム１０の全体的なフローチャートである。図３
は試着シミュレーションを行う人物３８の撮影方法を示
した図で、図４は顔画像入力時の画面、図５は衣服を着
用したモデルの第２画像５２、図６は第１マスクデータ
５６、図７は第１マスクデータ５６を用いて第２画像５
２を修正した修正第２画像６０、図８は第２マスクデー
タ６４、図９は第１画像４８における顔画像を第２画像
５２に合成した画像６８、を示したものである。

【００１３】まずステップｓ１で処理を開始し、ステッ
プｓ２で試着シミュレーションを行う人物３８の撮影を
ビデオカメラ３０を使用して行う。人物３８の撮影は図
３に示したように、無地のバックスクリーン３６を背景
にして撮影を行う。本実施例においては、ビデオカメラ
３０による撮影に連動して照明４０が点灯するようにし
ている。図４は人物の顔画像入力時の画面で、ビデオカ
メラ３０により撮影された画像はモニタ２４に表示され
る。またモニタ２４には水平なガイドライン７０が上下
に２本表示され、それぞれのガイドライン７０の中心位
置には短い垂直なラインを有する。そして撮影する顔の
位置を上下２本のガイドライン７０に合わせるために、
カメラコントロールにより、ビデオカメラ３０を上下あ
るいは左右へ移動させたり、画像のズームイン，ズーム
アウトを行う。そしてビデオカメラ３０の位置調整が完
了すれば、画像の取り込みを行う。この画像を第１画像
４８とする。ビデオカメラ３０により撮影された第１画
像４８はキャプチャＩ／Ｆ２８にまず記憶される。

【００１４】ステップｓ３では、固定色決定手段４２に
より、キャプチャＩ／Ｆ２８に格納されている第１画像
４８の予め設定された複数のサンプリング箇所７２より
色情報を採取し、色情報の平均値を算出する。算出され
た色情報は固定色７４とする。ここでの色情報とは、Ｒ
ＧＢ，明度，彩度等である。

【００１５】本実施例では、第１画像４８におけるサン
プリング箇所７２は、図４に示したように顔の位置をガ
イドライン７０に合わせたときに、サンプリング箇所７
２が顔の周辺の背景部分７５となるように予め４箇所の
サンプリング位置が決められている。サンプリング箇所
７２の数については、多く設定されることが好ましい
が、撮影の環境が良ければサンプリング箇所７２は少な
くても構わない。また、サンプリング箇所７２における
スクリーン３６にむらが出ないように照明４０等を調整
しておくことが好ましい。なおサンプリング箇所７２
は、予め設定された位置のものを使用するのではなく、
マニュアルで指定するようにしても構わない。

【００１６】ステップｓ４では、試着のシミュレーショ
ンを行う人物３８が、所望するデザインの衣服を選択す
る。ハードディスク２０には、それぞれの体型（Ｙ，
Ａ，Ｂ等）毎に、様々なデザインの衣服を着用したモデ
ルの画像が格納されており、デザイン選択画面に表示さ
れた自分の体型にあった複数の衣服の中から、所望のデ
ザインの衣服を選択する。この選択された画像を第２画
像５２とする。そして第２画像５２と、第２画像５２に
対応した第１マスクデータ５６および第２マスクデータ
６４はハードディスク２０から読み出され、ＲＡＭ１８
のそれぞれの記憶領域に格納される。またビデオカメラ
３０により撮影された第１画像４８も、キャプチャＩ／
Ｆ２８よりＲＡＭ１８に格納される。

【００１７】ステップｓ５では、画像合成手段４４によ
り図６に示した第１マスクデータ５６を用いて、固定色
決定手段４２により決定した固定色７４により、所望の
衣服を着用したモデルの第２画像５２の背景および顔の
部分７６を塗りつぶす。固定色７４により第２画像５２
の背景部７６を塗りつぶした画像は、修正第２画像６０
としてＲＡＭ１８の修正第２画像６０の記憶領域６２に
格納される。（図７）

【００１８】ステップｓ６では、画像合成手段４４は図
８に示した第２マスクデータ６４を使用し、試着シミュ
レーションを行う人物３８の第１画像４８から顔の部分
を顔周辺の背景部分を含めた状態で切り抜く。切り抜い
た顔およびその周辺の背景部の画像を修正第２画像６０
と合成する。この時、第１画像４８から切り抜いた顔お
よびその周辺の背景部の画像の大きさ，位置を調整し、
修正第２画像６０におけるモデルの大きさとのバランス
をとる。

【００１９】修正第２画像６０の背景部７８の色は、第
１画像４８における顔周辺の背景部分７５に設定された
複数のサンプリング箇所７２における色情報の平均値で
あるため、第１画像４８から顔の画像と共に抜き取った
顔周辺の背景部７５の色と、修正第２画像６０の背景色
とは違和感が生じることがない。また第２マスクデータ
６４を使用し、第１画像４８から顔とその周辺の背景部
７５の画像を切り抜いた画像を修正第２画像６０と合成
する際に、その周辺部について半透明合成を行うことで
さらに違和感を生じることなく顔の画像を差し替えるこ
とができる。

【００２０】以上の処理により、第２画像５２における
モデルの顔を試着シミュレーションを行う人物３８の顔
に差し替えた画像をモニタ２４において確認できる他、
プリンタを接続することによりプリントアウトすること
も可能である。そしてステップｓ７に進み、試着シミュ
レーション処理は終了する。

【００２１】なお本実施例においては、試着シミュレー
ションを行う人物３８の第１画像４８を入力するための
画像入力手段としてビデオカメラ３０を使用している
が、これはデジタルカメラ等でも良い。またフロッピー
ディスクや光磁気ディスク等に記憶した、試着シミュレ
ーションを行う人物３８の画像を外部記憶手段３４を用
いて入力しても良い。

【００２２】なお、本発明の好適な実施例を示したが、
本発明は上記実施例に限定されるものではなく、本発明
の主旨に逸脱しない範囲において実施可能である。

【００２３】

【発明の効果】本発明の試着シミュレーションシステム
では、第１画像における人物の顔の部分を第２画像の所
望する衣服を着用したモデルの顔と差し替えるときに、
第１画像の背景の色情報を採取して固定色を決定し、決
定した固定色で第２画像の背景を塗りつぶし、第１画像
における人物の顔とその周辺の背景部を、固定色で背景
を塗りつぶした第２画像に合成する。第１画像および第
２画像における顔の差し替えには輪郭抽出による画像処
理を行わないため、自然で違和感のない画像の合成を、
高度な画像処理技術を使用せずに簡単な構成で行うこと
ができる。また試着シミュレーションを行う人物の撮影
時に使用するスクリーンは無地であれば良く、スクリー
ンの色あるいは照明等の設置場所の環境の制約を少なく
することができる。

【００２４】また、固定色を決定するサンプリング箇所
を、第１画像の背景部分に複数設定し、複数のサンプリ
ング箇所から採取した色情報の平均値を算出して固定色
を決定するため、第１画像および第２画像における顔の
差し替えを行ったとき、より自然で違和感のない画像の
合成ができる。

【図面の簡単な説明】

【図１】本発明の実施例での試着シミュレーションシス
テムの構成を示すブロック図である。

【図２】試着シミュレーションシステムの全体的なフロ
ーチャートを示した図である。

【図３】試着シミュレーションを行う人物の撮影方法を
示した図である。

【図４】顔画像入力時のモニタの画面を示した図であ
る。

【図５】衣服を着用したモデルの第２画像を示した図で
ある。

【図６】第１マスクデータを示した図である。

【図７】第１マスクデータを用いて第２画像を修正した
修正第２画像を示した図である。

【図８】第２マスクデータを示した図である。

【図９】第１画像における顔部分を第２画像に合成した
図である。

【符号の説明】

１０・・・試着シミュレーションシステム、 １２・・・バ
ス、 １４・・・ＣＰＵ、１６・・・ＲＯＭ、 １８・・・ＲＡ
Ｍ、 ２０・・・ハードディスク、 ２４・・・モニタ、 ２
６・・・Ｉ／Ｏ装置、 ２８・・・キャプチャＩ／Ｆ、 ３０
・・・ビデオカメラ、 ３４・・・外部記憶手段、 ３６・・・
バックスクリーン、 ３８・・・人物、 ４０・・・照明、
４２・・・固定色決定手段、 ４４・・・画像合成手段、 ４
８・・・第１画像、 ５２・・・第２画像、 ５６・・・第１マ
スクデータ、 ６０・・・修正第２画像、 ６４・・・第２マ
スクデータ、 ６８・・・顔画像を差し替えた画像、 ７
０・・・ガイドライン、 ７２・・・サンプリング箇所、 ７
４・・・固定色、 ７５・・・第１画像の顔周辺の背景部、
７６・・・第２画像の背景部

Claims (2)

【特許請求の範囲】
1. 【請求項１】画像入力手段により無地のスクリーンを背
   景に人物を撮影して第１画像として入力し、第１画像を
   記憶手段に記憶された衣服を着用したモデルの画像であ
   る第２画像と合成して第２画像のモデルの顔を前記画像
   入力手段で撮影した第１画像の人物の顔に差し替える試
   着シミュレーションシステムにおいて、 第１画像の背景の色情報を採取して固定色を決定する固
   定色決定手段と、 固定色決定手段で決定した固定色で第２画像における背
   景を塗りつぶし、第１画像における人物の顔とその周辺
   の背景部を、前記固定色で背景を塗りつぶした第２画像
   に合成する画像合成手段、とを備えたことを特徴とする
   試着シミュレーションシステム。
2. 【請求項２】固定色決定手段は、前記画像入力手段によ
   り入力された第１画像の顔周辺の背景部分に設定された
   複数のサンプリング箇所における色情報を採取し、採取
   した色情報の平均値を算出して固定色とすることを特徴
   とする、請求項１に記載の試着シミュレーションシステ
   ム。