WO2004032487A1

WO2004032487A1 - 携帯電話機

Info

Publication number: WO2004032487A1
Application number: PCT/JP2003/008376
Authority: WO
Inventors: Akihiro Miyashita; Kiyoshi Nakanishi; Toshiyuki Tsumura
Original assignee: Matsushita Electric Industrial Co., Ltd.
Priority date: 2002-09-30
Filing date: 2003-07-01
Publication date: 2004-04-15
Also published as: CN1695369A; AU2003246215A1; EP1549051A4; CN100385917C; JP2004128607A; JP3761169B2; EP1549051A1; US20050221857A1; KR100919221B1; US7652693B2; KR20050062573A

Abstract

本発明の課題は、ユーザにとって自由度の高い合成画像を生成することが可能な携帯電話機を提供することである。本発明の携帯電話機は、ベース画像を記録する画像メモリ(16)と、ベース画像に対応し、ベース画像に合成される合成対象画像の合成位置及び合成対象画像をカメラ部(11)により撮像する際の撮像領域を指定する為のマスク画像を表わすマスク画像データが複数種類記録されるマスク画像メモリ(17)と、ユーザにより選択されたマスク画像データをマスク画像メモリ(17)から読み出し、読み出したマスク画像データに基づくマスク画像を表示部(15)に表示し、表示したマスク画像に基づいて撮像された合成対象画像をRAM(14)に記録し、記録した合成対象画像を、選択されたマスク画像データによって指定されるベース画像の合成位置に合成し、合成後の合成画像を画像メモリ(16)に記録するCPU(12)を備える。

Description

<技術分野 >

本発明は、撮像手段とベース画像とを有し、撮像手段により撮像された撮像画像とベース画像とを合成して合成画像を生成する画像処理機能を備えた携帯電話機に関する。明

細

く背景技術〉

従来、文字及び線等のコード情報や画像データで構成される管理シート上に画像嵌め込み枠を設定し、設定した画像嵌め込み枠にカメラで撮影した画像データに基づく画像を嵌め込むことで、画像が合成された管理シートを生成する画像処理装置が存在する（例えば、特許文献 1参照）。

又、撮像素子により撮像した複数の画像にそれぞれ間引き処理等を行い、その複数の画像を合成し、 1枚の画像として再生することができるデジタルカメラが存在する（例えば、特許文献 2参照）。

又、近年、カメラ付きの携帯電話機が爆発的に普及してきており、カメラで撮像した画像を携帯電話機の待受画面や壁紙として利用することが可能となっている。これらの携帯電話機には、予め定められたフレーム画像をディスプレイ上に表示させた状態でカメラにより被写体を撮像できるものも存在し、カメラにより撮像した画像とフレーム画像とを合成した画像を待受画面や壁紙として利用することが可能である。

小さい子供やペット等を持つ人には、子供やペットを大切に思う為に、自分の子供やペットの写真を手帳等に入れて肌身離さず持ち歩く人が多く見られる。上記に説明したように、近年ではカメラ付きの携帯電話機が普及している為、カメラ付きの携帯電話機を持ち歩き、カメラで撮像した子供ゃぺットの画像を待受画面等にしておくことでも、上記写真を持ち歩くのと同様の状況を作り出すことができる。携帯電話機の待受画面は頻繁に見る可能性が高く、又手帳等に比べ、簡単に画像を見ることができる。こういった理由から、カメラ付きの携帯電話機を利用して子供ゃぺットの画像を持ち歩くということは利便性が高いと考えられる。

〔特許文献 1〕

特開平 0 1— 0 0 7 7 6 6号公報

〔特許文献 2〕

特開平 1 0— 1 0 8 1 2 8号公報

しかしながら、従来のように、フレーム画像をディスプレイに表示させた状態で家族の写真を撮像しょうとした場合、例えば、母親、父親、赤ちゃん、及ぴぺットの犬の 4つの被写体を同じ撮像領域（ディスプレイのフレーム画像を除いた部分）で撮影しなければならない。

携帯電話機の場合、上記例のように、大人である両親の顔と赤ちゃんや犬の顔とを同じ 1つの撮像領域内で撮像すると、撮像領域の大きさが限定されている（携帯電話機のディスプレイの大きさに制限がある）為、顔の大きさにばらつきが生じてしまう。この為、大切な家族の画像であっても、赤ちゃんや犬の顔が小さく写り、はっきりと見えないものとなり、満足のいかない画像となってしまう。一方で、赤ちゃんや犬の顔を大きく写そうとすると、家族全員が撮像領域に入らなくなることもある。

又、従来の携帯電話機では、カメラにより撮像した画像とフレーム画像とを合成した画像を待受画面や壁紙として利用することが可能だが、上記のように、子供やペットの画像を持ち歩く人にとっては、携帯電話機のディスプレイに表示される画像は少しでも変化を加えることができるものが望まれる。例えば、季節によってフレーム画像を変化させる等が考えられる。

このようにフレーム画像を違うフレーム画像に変更しょうとした場合、従来では、携帯電話機内に記録されている固定のフレーム画像やインターネット等からダウンロードしたフレーム画像にしかフレーム画像を変更できず、携帯電話機のユーザ毎にオリジナルティのあるフレーム画像を用いた待受画面や壁紙画像を作成することはできなかった。

本発明は、上記事情に鑑みて為されたものであり、自由度の高い合成画像を生成することが可能な画像処理機能を備えた携帯電話機を提供することを目的とする' く発明の開示〉

本発明の携帯電話機は、撮像手段とベース画像を記録するベース画像記録部とを有し、前記撮像手段により撮像された撮像画像と前記ベース画像とを合成して合成画像を生成する画像処理機能を有する携帯電話機であって、前記合成画像を記録する合成画像記録部と、前記ベース画像に対応し、前記ベース画像に合成する対象となる撮像画像である合成対象画像の前記ベース画像上の合成位置及び前記合成対象画像を前記撮像手段により撮像する際の撮像領域を指定する為のマスク画像を表わすマスク画像データを複数種類記録するマスク画像データ記録部と、前記複数種類のマスク画像データの中から選択されたマスク画像データを前記マスク画像データ記録部から読み出す読み出し手段と、前記読み出し手段によって読み出されたマスク画像データに基づくマスク画像をディスプレイに表示する表示手段と、前記ディスプレイに表示されるマスク画像に基づいて撮像された合成対象画像を保持する合成対象画像保持手段と、前記合成対象画像保持手段によつて保持された合成対象画像を、前記マスク画像データによつて指定される前記べース画像の合成位置に合成する画像合成手段と、前記画像合成手段により合成された合成画像を前記合成画像記録部に記録する記録手段とを備える。

この構成により、ベース画像とマスク画像データとを任意に組み合わせることで、ベース画像の内容を、マスク画像データによって指定される合成対象画像の合成位置や合成対象画像を撮像する際の撮像領域によって変更することができる。この為、ベース画像とマスク画像データとの組み合わせの数だけ合成画像を生成することができ、自由度の高い合成画像の生成が可能となる。

又、本発明の携帯電話機は、前記表示手段が、前記マスク画像を前記ディスプレイに表示する際、前記マスク画像と前記ベース画像^を合成したプレビュー画像を前記ディスプレイに表示する。

この構成により、ユーザは、ディスプレイに表示されるプレビュー画像を見ながら、合成対象画像の撮像を行うことで、合成対象画像がベース画像に合成された後の画像をイメージしながら合成対象画像の撮像を行うことができ、合成画像を生成する際の操作性が向上する。

又、本発明の携帯電話機は、前記マスク画像データ記録部に記録されている複数種類のマスク画像データには、前記べ一ス画像に対応する複数種類のマスク画像を表わすマスク画像データが含まれており、前記表示手段は、前記マスク画像データに基づく複数種類のマスク画像の各々を、当該マスク画像に基づいて撮像された合成対象画像が前記合成対象画像保持手段により保持されるまで 1つずつ前記ディスプレイに表示し、前記合成対象画像保持手段は、前記ディスプレイに表示される複数種類のマスク画像に基づいて撮像された複数の合成対象画像を保持し、前記画像合成手段は、前記合成対象画像保持手段により保持された複数の合成対象画像の各々を、当該合成対象画像の撮像領域を指定する為のマスク画像に基づく前記ベース画像の合成位置に合成する。

この構成により、マスク画像データ記録部に記録されるマスク画像データは、複数種類のマスク画像を表わすマスク画像データを含んでおり、このマスク画像データに基づく複数種類のマスク画像に基づいて撮像された複数の合成対象画像 I 1つのベース画像上の合成位置に合成される。

この為、ベース画像に合成される複数の合成対象画像の各々に異なる撮像条件を与えることが可能な為、それぞれ大きさの異なる被写体を撮像した撮像画像である複数の合成対象画像を同一のベース画像に合成する場合でも、全ての被写体を鮮明に認識することが可能な合成画像を生成することができる。

又、本発明の携帯電話機は、前記表示手段が、前記複数のマスク画像の各々を前記ディスプレイに表示する際、前記ベース画像と前記複数のマスク画像の各々とを合成したプレビュー画像を前記ディスプレイに表示する。

又、本発明の携帯電話機は、前記表示手段が、前記マスク画像データによって指定される複数種類の撮像領域の各々に基づいて撮像された合成対象画像が、既に前記合成对象画像保持手段によつて保持されている場合、当該保持された合成対象画像を撮像する際の撮像領域を指定する為のマスク画像に基づく前記ベース画像の合成位置に、当該保持された合成対象画像を合成して前記ディスプレイに表示する。

この構成により、撮像が終了し、合成対象画像保持手段により保持された合成対象画像は、次の合成対象画像を撮像する際に表示されるプレビュー画像と合成されて表示される。この為、ユーザは、既に撮像した合成対象画像とこれから撮像する撮像領域との両方を確認しながら、合成対象画像の撮像をすることができる。したがって、既に撮像された合成対象画像の内容に応じて、次に撮像する合成対象画像の撮像条件を変えること等ができ、より自由度の高い合成画像の生成が可能となる。

又、本発明の携帯電話機は、前記画像合成手段が、前記ディスプレイに表示されたマスク画像に基づいて前記撮像手段により撮像が行われ、前記撮像された合成対象画像が前記合成対象画像保持手段により保持される毎に、当該保持された合成対象画像を、順次前記ベース画像に合成し、前記記録手段は、前記画像合成手段により前記複数の合成対象画像の全てが前記ベース画像に合成された後、前記画像合成手段により合成された合成画像を前記合成画像記録部に記録する。この構成により、合成対象画像の撮像が行われ、撮像された合成対象画像が合成対象画像保持手段により保持される毎に、撮像された合成対象画像が順次べ一ス画像に合成されていく。この為、複数の合成対象画像を全て合成対象画像保持手段により保持してから、これら複数の合成対象画像をまとめてベース画像に合成する場合に比べ、合成画像を生成するまでの処理時間を短縮することができる。又、本発明の携帯電話機は、前記画像合成手段が、前記ベース画像に合成される合成対象画像の撮像が途中で中断された場合、前記中断されるまでに前記撮像手段により撮像され、前記合成対象画像保持手段により保持されている合成対象画像を前記べ一ス画像に合成する。

この構成により、 1つのベース画像に合成する合成対象画像の数を途中で減らすことが可能な為、より自由度の高い合成画像を生成することができる。く図面の簡単な説明 > 図 1は、本発明の実施形態に係る携帯電話機の構成を示すプロック図であり、図 2は、本発明の実施形態に係る携帯電話機のマスク画像メモリに記録されているマスク画像データに基づくマスク画像の一例を示した図であり、

図 3は、本発明の実施形態に係る携帯電話機の画像合成モード時に表示部に表示される表示画面例を説明する為の図であり、

図 4は、本発明の実施形態に係る携帯電話機の画像合成モード時に表示部に表示される表示画面例を説明する為の図であり、

図 5は、本発明の実施形態に係る携帯電話機の画像合成モード時における C P Uの画像合成処理の流れを説明する為のフローチャートである。

なお、図中の符号、 1は携帯電話機、 1 1はカメラ部、 12は CPU、 1 3は ROM、 14は1 八1^、 15は表示部、 16は画像メモリ、 17はマスク画像メモリ、 18は操作部、 1 9はパス、 a〜gはマスク画像である。

<発明を実施するための最良の形態 >

以下、本発明の実施形態について図面を参照して説明する。

本発明の実施形態に係る携帯電話機は、カメラを有しており、このカメラによつて撮像された撮像画像と、予め記録されている画像とを合成した合成画像を生成する機能を有しているものである。この携帯電話機においては、合成画像を生成する為の動作モードを画像合成モードと定義する。

図 1は、本発明の実施形態に係る携帯電話機の構成を示すプロック図である。同図に示したように、携帯電話機 1は、カメラ部 11 (撮像手段）、 C PU (中央演算処理装置） 12、 ROM (Read Only Memory) 13、 RAM (Random Access Memory) 14、表示部 15、画像メモリ 16 (ベース画像記録部及ぴ合成画像記録部）、マスク画像メモリ 17 (マスク画像データ記録部）、操作部 1 8、及びバス 19を備える。尚、 CPU1 2は、請求の範囲の読み出し手段、表示手段、合成対象画像保持手段、画像合成手段、及び記録手段に該当する。カメラ部 11は、 CCD等の撮像素子や撮像素子によって撮像された画像の画像処理を行う画像処理 I C等から構成され、画像処理後の画像を CPU 12の制御により RAMI 4に一時的に格納する。 CPU 1 2は、 ROM1 3に格納されている画像合成プログラムに基づいて、携帯電話機 1内の各部を制御して画像合成処理を行う。

ROM1 3には、 CPU 1 2が使用する画像合成プログラムや携帯電話機 1の動作に必要な様々なプログラムが格納されている。

RAMI 4は、 CPU12による画像合成処理に関する作業用メモリ及びカメラ部 1 1で撮像された画像を一時格納したり、合成画像を展開する領域として使用したりするメモリである。

表示部 1 5は、 LCD等の液晶表示器等から構成され、カメラ部 1 1で撮像した画像や携帯電話機 1の各種操作メニュー等の情報を C PU 1 2の制御により表示してユーザに提供するものである。

画像メモリ 16には、図示しない通信部を介してインタ一ネット等のネットヮークからダウンロードしたダウンロード画像、予めメモリ内に内蔵される固定画像、カメラ部 1 1で撮像された撮像画像、及ぴ CPU 1 2による画像合成処理後に生成された合成画像等が C PU 1 2の制御により記録される。

この画像メモリ 16に記録される画像が、合成画像を生成する際のベースの画像となる為、以下、画像メモリ 1 6に記録される画像をベース画像と定義して説明する。尚、 CPU 1 2による画像合成処理後に生成された合成画像は、画像メモリ 16ではなく、携帯電話機 1內に設けられた別の画像メモリに記録する構成としても良い。

マスク画像メモリ 1 7には、画像メモリ 1 6に記録されるベース画像に対応し、ベース画像に合成する対象となる撮像画像（以下、合成対象画像という）の合成位置及び該合成対象画像をカメラ部 1 1により撮像する際の撮像領域を指定する為のマスク画像を表わすマスク画像データが複数種類記録される。

図 2は、マスク画像メモリ 1 7に記録されているマスク画像データに基づくマスク画像の一例を示した図である。同図において、色を変えて表示してある領域 (灰色の領域）力上記で言う合成位置及び撮像領域となっている。尚、マスク画像記録部 1 7に記録されているマスク画像データに基づくマスク画像は、携帯電話機 1のユーザが、合成画像の生成を行うときに操作部 1 8の操作により選択することができるように構成されている。又、図 2に示した a〜dまでの 4つのマスク画像は、 4つのマスク画像を表わす 1つのマスク画像データとして画像メモリ 16に記録されており、全て同一のベース画像に対応するものである。即ち、 a〜 dの 4つのマスク画像を 1組とするマスク画像がユーザにより選択された場合は、 1つのベース画像上に、 a〜d の 4種類のマスク画像によつて指定される撮像領域に基づいて撮像された 4つの合成対象画像が、それぞれのマスク画像によって指定される合成位置に合成されることになる。もちろん、 a〜dを 1組としてではなく、それぞれ単体のマスク画像として選択することも可能である。

又、図 2に示したマスク画像 eは、 a〜dのマスク画像を合成したときに形成されるマスク画像の灰色の領域と白色の領域とを反転させたものとなっている。マスク画像 f と gも同様に灰色の領域と白色の領域とを反転させたものとなっている。

操作部 1 8は、キーやポタン等から構成され、カメラ部 1 1に対して撮像を指示したり、合成画像生成の際に使用するマスク画像を選択したりする為のユーザによる入力手段を提供するものである。操作部 18が操作されることで、その操作情報は CPU 12に伝達され、 CPU 1 2が指示された命令を実行する。

バス 1 9は、カメラ部： k l、 CPU1 2、 ROM1 3、 RAMI 4、表示部 1 5、画像メモリ 16、マスク画像メモリ 1 7、及び操作部 1 8を接続するものであり、アドレス信号を転送するアドレスバス、制御信号を転送するコントロールバス、及ぴ各種データを転送するデータバスを総称するものである。

次に、 CPU 1 2によって行われる画像合成処理の流れについて、表示部 1 5 に表示される表示画面例及びフローチャートを参照して説明する。図 3及び図 4 は、画像合成モード時に表示部に表示される表示画面例を説明する為の図である。図 5は、画像合成モード時における C PUの画像合成処理の流れを説明する為のフローチャートである。

まず、携帯電話機 1のユーザにより操作部 1 8が操作され、カメラ部 1 1起動の指示があると、 CPU 1 2はカメラ部 1 1を起動させる（S 50 1) 。続いてユーザの操作により画像合成モードが選択されると、 CPU 1 2は、画像メモリ 1 6に記録されているベース画像の一覧リストを表示部 1 5に表示する（S 50 2 ) 。

ユーザにより、表示部 1 5に表示されたー覽リストから 1つのベース画像（ここでは 2本の木と教会が写っている画像）が選択され "決定" の操作が行われると、 C P U 1 2は、ユーザにより選択されたベース画像を画像メモリ 1 6から読み出して R AM I 4に格納する（S 5 0 3 ) 。

その後、 C P U 1 2は、ベース画像に対応するマスク画像をユーザに選択して貰う為に、マスク画像メモリ 1 7に記録されているマスク画像データを読み出して R AM 1 4に格納し（S 5 0 4 ) 、読み出したマスク画像データに基づくマスク画像と先程格納したベース画像とを合成したプレビュー画像を生成し、生成したプレビュー画像を表示部 1 5に表示する（S 5 0 5、図 3の画面 1及び 2参照）。尚、図 3の画面 1及び 2に示したように、ユーザが操作部 1 8の左右キーを押下することにより、複数のプレビュー画像を確認することが可能である。又、 4 つのマスク画像 a〜 dに関しては、 4つのマスク画像を表わす 1種類のマスク画像データとして管理している為、プレビュー画面上では図 3の画面 2のように、 4つのマスク画像 a〜dをベース画像に合成した形でプレビュー表示する。

ユーザは、ディスプレイに表示されたプレビュー画像を参照して、ベース画像に合成する際に使用するマスク画像を選択するが、これは、マスク画像メモリ 1 7に記録されている複数種類のマスク画像データの中から 1つのマスク画像データを選択していることと同義となる。

画面 2においてユーザにより "決定" の操作が行われると、 C P U 1 2は、 4 つのマスク画像 a〜dのうち、画面 2における左の撮像領域を指定したマスク画像（図 2の a ) とベース画像とを合成したプレビュー画像を生成し、表示部 1 5 に表示する（S 5 0 6、図 3の画面 3参照）。

このとき、画面 2において灰色になっていた部分は、カメラ部 1 1によって撮像可能な撮像領域となっており、ユーザがカメラ部 1 1を移動させることで、円の中に写っている映像も移動するようになっている。つまり、この状態で、図 3 の画面 3における円の中には、カメラ部 1 1によって撮像されている映像がスル一画像として表示される状態となっている。

ユーザは、表示部 1 5に表示されたプレビュー画面を見ながら、自身の奥さんの顔に焦点を合わせ、奥さんの顔がはっきりと認識できるような大きさで奥さんの顔をカメラ部 1 1により撮像する為の操作を行う。撮像の指示が行われると、 C PU 1 2はカメラ部 1 1によって奥さんの顔を撮像し、撮像した画像（合成対象画像）を RAM 14に記録する（S 507) 。その後、 CPU 1 2は、撮像した画像がユーザにより確定されたかどうかを判定する（S 508) 。

図 3の画面 4において、ユーザにより、 "確定" の操作が行われず、 "戻る" 操作が行われた場合（S 508 : NO) 、 CPU 1 2は、 S 507で RAMI 4 に記録した奥さんの顔画像を削除し、 S 506へと動作を移行し、 "確定" 操作が行われるまで、若しくは画像合成モード終了指示が行われるまで一連の動作を繰り返す。

一方、 "確定" の操作が行われた場合（S 508 ： YES) 、 CPU1 2は、図 3の画面 2における上の撮像領域を指定したマスク画像（図 2の b) によって指定される撮像領域をベース画像に合成し、更に図 2のマスク画像 aによって指定されるベース画像の合成位置に RAMI 4に記録された奥さんの顔画像を合成したプレビュー画像を生成し、表示部 1 5に表示する（S 509、図 3の画面 5)。尚、図 3の画面 5においては、 RAMI 4に記録された奥さんの顔画像をプレビユー画像として合成して表示させなくとても良い。この場合は、ベース画像とマスク画像 bとが合成されたプレビュー画像が表示部 1 5に表示される。又、図 3 の画面 5における円の中には、図 3の画面 3における円（マスク画像 aによって指定される撮像領域）と同様に、スルー画像が表示される。他のマスク画像とベース画像とを合成したプレビュー画像についても、マスク画像によつて指定される撮像領域には同様にスルー画像が表示される。

次に、図 3の画面 5において "撮像" の操作が行われ、ユーザの顔画像が撮像され、撮像された顔画像が RAMI 4に記録される。そして、 CPU 1 2が、撮像した画像が確定かどうかを判定し、図 3の画面 6においてユーザによって "確定" の操作が行われることで、 C PU 1 2は次のプレビュー画像（マスク画像 c と、ユーザ及び奥さんの顔画像と、ベース画像とを合成したプレビュー画像）を表示部 1 5に表示する。その後、上記と同様にユーザの父親の顔画像が撮像され RAMI 4に記録される。ぺットの犬についても同様の動作で撮像が行われる。以上の動作により、 4つの合成対象画像（ユーザの奥さん、ユーザ、ユーザの父親、及びぺットの犬）が全て撮像され（S 5 10、図 3の画面 7参照）、 "確定" 操作がユーザにより行われると（S 5 1 1) 、画面は図 3の画面 8へと遷移する。画面 8においてユーザにより "保存" の操作が行われると（S 5 1 2) 、 CPU 1 2は、カメラ部 1 1によって撮像された 4つの合成対象画像を、それぞれの撮像領域を指定する為のマスク画像（図 2の a〜d) に基づくベース画像の' 合成位置に合成し（S 51 3) 、最後に、合成した画像を画像メモリ 1 6に記録する（S 5 14) 。

以上の動作により、ベース画像に 4つの顔画像が合成された合成画像が生成され、画像メモリ 16に記録される。画像メモリ 16に記録された合成画像は、所定の操作により、いつでも表示部 1 5に表示して閲覧することができる。又、この合成画像を待受画面や壁紙等に設定することも公知の技術により可能である。尚、本実施形態の携帯電話機では、画像合成モードの中断（途中で撮像を止めること）を操作部 1 8の操作によって行うことができるようにも構成されている。画像合成モードを中断する操作がユーザにより行われると、 CPU 1 2は、力メラ部 1 1の動作を停止し、現時点までに撮像されて確定された合成対象画像とベース画像とを合成した合成画像を保存するか否かを判定する。ユーザにより "保存" の操作が行われた場合は、この時点までにユーザにより撮像され確定された顔画像を、ベース画像に合成して画像メモリ 1 6に記録する。

これにより、ベース画像に合成したい合成対象画像の数を途中で変更することが可能となる。一方、ユーザにより "保存" の操作が行われず、 "終了" の操作が行われると、 CPU1 2は、その時点までに RAMI 4に記録した合成対象画像を削除し、画像合成モードを終了する。

又、本実施形態の携帯電話機では、図 5の S 5 1 3に示したように、 4つの合成対象画像がユーザによって撮像されて確定され、その後 "保存" の操作が行われた時点で、 4つの合成対象画像をベース画像の所定位置に合成する構成としているが、ユーザによって合成対象画像が撮像されて確定される毎に、 CPU 1 2 力確定された合成対象画像をベース画像に順次合成する構成としても良い。つまり、図 3の画面 4においてユーザにより "確定" の操作が行われると、 C P U 1 2は奥さんの顔画像をベース画像に合成し、画面 6においてユーザにより "確定" の操作が行われると、 C P U 1 2はユーザの顔画像をベース画像に合成するといつたように、合成対象画像が撮像されて確定される毎に、 C P U 1 2はベース画像に合成対象画像を上書きして合成していく。尚、合成後の画像は R A M l 4に格納しておく。そして、 4つの合成対象画像を全てベース画像に合成した時点で、合成画像を R AM I 4から読み出して画像メモリ 1 6に記録する。以上のようにすることで、 4つの合成対象画像を最後にまとめてベース画像に合成する場合に比べ、合成画像生成処理に要する時間を短縮することができる。以上が、合成画像を生成する際の携帯電話機 1の動作の説明であるが、本発明の実施形態に係る携帯電話機では、上記の動作に従って生成された合成画像をべース画像として、更に画像合成処理を繰り返していくことができる。以下、この場合について説明する。

例えば、図 3の画面 8にあるような合成画像を生成して保存し、携帯電話機 1 の待受画面に設定した後に、ユーザが画面 8の構成に飽きてしまい、画面 8の背景（ベースとなった画像）を変えたいという気持ちが生まれたとする。この場合でも、従来の携帯電話機では、画面 8に表示されている合成画像の背景画像を変更することはできなかった。

そこで、本実施形態に係る携帯電話機 1は、このような場合でも、簡単に画面 8に表示されている画像の背景画像（ベースとなった画像）を変更することが可能なように構成されている。

画面 8に表示されている合成画像の背景を変えたい場合、画像合成モードにおいてユーザは、図 5の S 5 1 4において画像メモリに記録された合成画像をべ一ス画像として選択し、更に、マスク画像メモリ 1 7に記録されているマスク画像データに基づくマスク画像 eを選択すれば良い。

つまり、ユーザは、図 4の画面 9に示したように、マスク画像 eとベース画像とが合成されてプレビュー表示されている画面を選択して "決定" 操作を行い、その後、画面 1 0にあるように、 4つの顔画像以外の領域である撮像領域に基づいて夜景を撮像し、 "確定" 及び "保存" 操作を行って、夜景の画像と 4つの顔画像とを合成し、画像メモリ 1 6に画面 1 1に表示されたような合成画像を記録するようにすれば良い。

このようにすることで、 4つの顔画像と、その背景となる画像との組み合わせを簡単に変更することが可能である。又、上記のように、マスク画像 a〜（！を合成したマスク画像と互いに反転したマスク画像 eを用いずとも、画面 8に表示されるような合成画像をベース画像とし、図 2の f や g等のマスク画像を選択して、全く異なる合成画像を生成することもできる。

つまり、本実施形態によれば、ベース画像とマスク画像との組み合わせによつて多数種類の合成画像を生成することができる為、ユーザは、オリジナルティの高い合成画像を得ることができるとともに、飽きのこない合成画像を得ることができる。

又、本実施形態によれば、複数のマスク画像が 1つのマスク画像データとして管理され、マスク画像メモリ 1 7に記録されている。このマスク画像データに基づく複数のマスク画像 a〜 dによつて指定される撮像領域は、それぞれ独立したものとなっている為、複数の撮像領域の各々に対して異なる撮像条件（撮像時における被写体との距離等）を設定することが可能となる。

したがって、本実施形態のように、 4つの顔画像を 1つのベース画像に合成して表示する場合、 4つの撮像領域に基づく撮像を行う際に、それぞれの撮像領域に基づく撮像を異なる撮像条件で行うことで、 4つの顔画像をほぼ均等の大きさに撮像することができ、合成後の画像において全ての顔画像を鮮明に認識することができる。

尚、請求の範囲の「合成対象画像保持手段が合成対象画像を保持する」という記載は、本実施形態でいう "確定"操作が行われたことを意味している。つまり、図 3の画面 4においてユーザにより "確定" の操作が行われた時点が、請求の範囲の合成対象画像保持手段が合成対象画像を保持した時点に相当する。本発明を詳細にまた特定の実施態様を参照して説明したが、本発明の精神と範囲を逸脱することなく様々な変更や修正を加えることができることは当業者にとつて明らかである。

本出願は、 2002年 9月 30日出願の日本特許出願 Να2002-286403に基づくものであり、その内容はここに参照として取り込まれる。

ぐ産業上の利用可能性 >

本発明によれば、自由度の高い合成画像を生成することが可能な画像処理機能を有する携帯電話機を提供することができる。

Claims

啬求の範囲

1 . 撮像手段とベース画像を記録するベース画像記録部とを有し、前記撮像手段により撮像された撮像画像と前記ベース画像とを合成して合成画像を生成する画像処理機能を有する携帯電話機であって、

前記合成画像を記録する合成画像記録部と、

前記ベース画像に対応し、前記ベース画像に合成する対象となる撮像画像である合成対象画像の前記ベース画像上の合成位置及び前記合成対象画像を前記撮像手段により撮像する際の撮像領域を指定する為のマスク画像を表わすマスク画像データを複数種類記録するマスク画像データ記録部と、

前記複数種類のマスク画像データの中から選択されたマスク画像データを前記マスク画像データ記録部から読み出す読み出し手段と、

前記読み出し手段によって読み出されたマスク画像データに基づくマスク画像をディスプレイに表示する表示手段と、

前記ディスプレイに表示されるマスク画像に基づいて撮像された合成対象画像を保持する合成対象画像保持手段と、

前記合成対象画像保持手段によつて保持された合成対象画像を、前記マスク画像データによつて指定される前記ベース画像の合成位置に合成する画像合成手段と、

前記画像合成手段により合成された合成画像を前記合成画像記録部に記録する記録手段とを備える携帯電話機。

2 . 請求の範囲第 1項記載の携帯電話機であって、

前記表示手段は、前記マスク画像を前記ディスプレイに表示する際、前記マスク画像と前記ベース画像とを合成したプレビュー画像を前記ディスプレイに表示する携帯電話機。

3 . 請求の範囲第 1項記載の携帯電話機であって、

前記マスク画像デ一タ記録部に記録されている複数種類のマスク画像データには、前記ベース画像に対応する複数種類のマスク画像を表わすマスク画像データが含まれており、

前記表示手段は、前記マスク画像データに基づく複数種類のマスク画像の各々を、当該マスク画像に基づいて撮像された合成対象画像が前記合成対象画像保持手段により保持されるまで 1つずつ前記デイスプレイに表示し、

前記合成対象画像保持手段は、前記デイスプレイに表示される複数種類のマスク画像に基づいて撮像された複数の合成対象画像を保持し、

前記画像合成手段は、前記合成対象画像保持手段により保持された複数の合成対象画像の各々を、当該合成対象画像の撮像領域を指定する為のマスク画像に基づく前記べ一ス画像の合成位置に合成する携帯電話機。

4 . 請求の範囲第 3項記載の携帯電話機であって、

前記表示手段は、前記複数のマスク画像の各々を前記ディスプレイに表示する際、前記ベース画像と前記複数のマスク画像の各々とを合成したプレビュー画像を前記ディスプレイに表示する携帯電話機。

5 . 請求の範囲第 4項記載の携帯電話機であって、

前記表示手段は、前記マスク画像データによつて指定される複数種類の撮像領域の各々に基づいて撮像された合成対象画像が、既に前記合成対象画像保持手段によって保持されている場合、当該保持された合成対象画像を撮像する際の撮像領域を指定する為のマスク画像に基づく前記ベース画像の合成位置に、当該保持された合成対象画像を合成して前記ディスプレイに表示する携帯電話機。

6 . 請求の範囲第 3項〜第 5項のいずれか記載の携帯電話機であって、前記画像合成手段は、前記ディスプレイに表示されたマスク画像に基づいて前記撮像手段により撮像が行われ、前記撮像された合成対象画像が前記合成対象画像保持手段により保持される毎に、当該保持された合成対象画像を、順次前記べース画像に合成し、

前記記録手段は、前記画像合成手段により前記複数の合成対象画像の全てが前記ベース画像に合成された後、前記画像合成手段により合成された合成画像を前記合成画像記録部に記録する携帯電話機。

7 . 請求の範囲第 3項〜第 5項のいずれか記載の携帯電話機であって、前記画像合成手段は、前記べ一ス画像に合成される合成対象画像の撮像が途中で中断された場合、前記中断されるまでに前記撮像手段により撮像され、前記合成対象画像保持手段により保持されている合成対象画像を前記ベース画像に合成する携帯電話機。