JP2007104359A - 画像レイアウト装置および方法並びにプログラム - Google Patents

Abstract

【課題】画像に含まれる人物の顔の傾きを考慮して、レイアウト後の画像を見やすくする。
【解決手段】ユーザが１枚の背景画像にレイアウトするための複数の画像を決定すると、傾き量決定部３２が、顔が含まれている画像について、各画像に含まれる代表顔の傾きが同一となるように各画像の傾き量を決定する。レイアウト画像生成部３４が、顔が含まれている画像については決定された傾き量にて画像を回転し、回転された画像を１枚の背景画像にレイアウトして複数の画像がレイアウトされたレイアウト画像を生成する。
【選択図】図１

Description

本発明は、複数の画像を１枚の背景画像にレイアウトする画像レイアウト装置および方法並びに画像レイアウト方法をコンピュータに実行させるためのプログラムに関するものである。

人物を含む画像においては、その人物が画像のどの位置に写っているかが非常に重要である。とくにパスポート等に用いられる証明写真においては、決められたサイズの画像の決められた位置に、決められたサイズを有する顔が写っている必要がある。このため、画像に含まれる顔が決められた位置に写され、かつ決められたサイズを有するものとなるように画像から顔を抽出し、抽出した顔のサイズを変更したり、トリミングを行う手法が提案されている（特許文献１〜３参照）。

また、卒業アルバムのように１枚の台紙に複数の人物の画像を貼り付ける場合に、各人物を撮影することにより取得した画像から抽出した顔領域を正規化し、正規化後の顔領域の画像を貼り付けることによりアルバムを作成する手法が提案されている（特許文献４参照）。特許文献４の手法によれば、アルバムに含まれる複数の人物の顔を同一サイズとすることができるため、見栄えのよいアルバムを作成することができる。
特開平１１−３４１２７２号公報 特開２０００−２７０１９８号公報 特開２０００−２７０１９９号公報 特開２０００−１６５６４８号公報

ところで、証明写真や卒業アルバムに含める画像を取得する場合、顔が直立するように人物にポーズをとらせ、直立した状態の顔が画像に含まれるように撮影を行う。このため、証明写真やアルバムに含まれる人物の顔は直立した状態となっている。また、顔が傾いていたとしても、適切にトリミングを行えば、顔が直立した画像を得ることができる。

しかしながら、旅行や運動会等の通常の撮影により取得される画像の場合、画像に含まれる人物の顔は必ずしも直立した状態とはなっていないため、このような画像を複数並べてレイアウトした場合、画像毎に顔の傾きが異なるものとなり、レイアウトにより得られるレイアウト画像が見にくいものとなってしまう。この場合、人物の顔が直立した状態となるように画像をトリミングすることが考えられる。しかしながら、通常の撮影により取得される画像は、人物以外にも背景が重要な場合が多いため、画像をトリミングしてしまうと、画像に含まれる撮影時の雰囲気が大きく損なわれてしまう。

本発明は上記事情に鑑みなされたものであり、画像に含まれる人物の顔の傾きを考慮して、レイアウト後の画像を見やすくすることを目的とする。

本発明による画像レイアウト装置は、１枚の背景画像にレイアウトするための複数の画像を決定する画像決定手段と、
前記複数の画像のうち顔が含まれている画像について、各画像に含まれる代表顔の傾きが同一となるように該各画像の傾き量を決定する傾き量決定手段と、
前記顔が含まれている画像については前記決定された傾き量にて画像を回転し、該回転された画像を前記１枚の背景画像にレイアウトして前記複数の画像がレイアウトされたレイアウト画像を生成するレイアウト画像生成手段とを備えたことを特徴とするものである。

「代表顔」とは、画像に顔が１つしか含まれない場合はその顔であり、複数の顔が含まれる場合は、最もサイズが大きい顔である。

なお、本発明による画像レイアウト装置においては、前記傾き量決定手段を、前記代表顔に含まれる両目の中心位置を結ぶ直線がほぼ水平となるように、前記各画像の傾き量を決定する手段としてもよい。

本発明による画像レイアウト方法は、１枚の背景画像にレイアウトするための複数の画像を決定し、
前記複数の画像のうち顔が含まれている画像について、各画像に含まれる代表顔の傾きが同一となるように該各画像の傾き量を決定し、
前記顔が含まれている画像については前記決定された傾き量にて画像を回転し、該回転された画像を前記１枚の背景画像にレイアウトして前記複数の画像がレイアウトされたレイアウト画像を生成することを特徴とするものである。

なお、本発明による画像レイアウト方法をコンピュータに実行させるためのプログラムとして提供してもよい。

本発明によれば、１枚の背景画像にレイアウトするための複数の画像が決定され、複数の画像のうち、顔が含まれている画像について、各画像に含まれる代表画像の傾きが同一となるように各画像の傾き量が決定される。そして、顔が含まれている画像については決定された傾き量にて画像が回転され、回転された画像が１枚の背景画像にレイアウトされてレイアウト画像が作成される。このため、レイアウト画像に含まれる画像に顔が含まれている場合には、すべての画像の顔の傾きを同一とすることができ、これにより顔が見やすいレイアウト画像を得ることができる。

また、トリミングを行っていないため、画像に含まれる撮影時の雰囲気が損なわれることもない。

また、代表顔に含まれる両目の中心を結ぶ直線がほぼ水平となるように傾き量を決定することにより、顔が含まれる画像については顔が直立した状態となるようにレイアウト画像に含めることができるため、より顔が見やすいレイアウト画像を得ることができる。

以下、図面を参照して本発明の実施形態について説明する。図１は本発明の実施形態による画像レイアウト装置の構成を示す概略ブロック図である。図１に示すように、本発明の実施形態による画像レイアウト装置１は、画像を表す画像データの記録制御および表示制御等の各種制御を行うとともに、装置１を構成する各部の制御を行うＣＰＵ１２と、装置１を動作させるための基本的なプログラムおよび各種定数が記録されているＲＯＭ並びにＣＰＵ１２が処理を実行する際の作業領域となるＲＡＭにより構成されるシステムメモリ１４と、種々の指示を装置１に対して行うためのキーボードおよびマウス等からなる入力部１６と、各種表示を行う液晶モニタ等からなる表示部１８とを備える。

また、画像レイアウト装置１は、画像データを記録したメモリカード２から画像データを読み出したり、メモリカード２に画像データを記録したりするためのカードスロット２０と、画像データをＪＰＥＧに代表される手法で圧縮したり、圧縮した画像データを解凍する圧縮解凍部２２と、メモリカード２から読み出した画像データ、複数の画像をレイアウトする際の背景となるテンプレートを表すテンプレートデータ、および画像を閲覧するためのビューアソフト等のＣＰＵ１２が実行する各種プログラム等を記録するハードディスク２４と、システムメモリ１４、カードスロット２０およびハードディスク２４を制御するメモリ制御部２６と、表示部１８の表示を制御する表示制御部２８と、プリンタ３を装置１に接続するためのプリンタインターフェース３０とを備える。

また、画像レイアウト装置１は、後述するようにユーザが決定した複数の画像に顔が含まれるか否かを判定し、顔が含まれる画像について、各画像に含まれる代表顔の傾きが同一となるように各画像の傾き量を決定する傾き量決定部３２と、顔が含まれている画像については決定された傾き量にて画像を回転し、回転された画像を１枚の背景画像にレイアウトしてレイアウト画像を生成するレイアウト画像生成部３４とを備える。

以下、傾き量決定部３２およびレイアウト画像生成部３４の機能について、本実施形態において行われる処理と併せて説明する。

図２は本実施形態において行われる処理を示すフローチャートである。ユーザが画像のレイアウトの指示を入力部１６から行うことによりＣＰＵ１２が処理を開始し、表示部１８にハードディスク２４に保存された画像のサムネイル画像の一覧を含む画像選択画面を表示する（ステップＳＴ１）。図３は画像選択画面の例を示す図である。図３に示すように画像選択画面４０には、ハードディスク２４に保存された画像のサムネイル画像の一覧を表示するサムネイル画像エリア４０Ａおよび各種入力を行うための入力エリア４０Ｂが表示されている。入力エリア４０Ｂにはレイアウトする画像を確定するための確定ボタン４０Ｃが表示されている。

ユーザは、画像選択画面４０において、入力部１６を用いてレイアウトする複数の画像を選択することができる。具体的には、サムネイル画像エリア４０Ａにおいてレイアウトを所望する画像をクリックすることによりレイアウトする複数の画像を選択することができる。なお、本実施形態においては、あらかじめレイアウト画像の背景画像となるテンプレートが用意されており、テンプレートの画像挿入領域に対応する数のレイアウトする画像を、ユーザが画像選択画面４０において選択するものとする。

続いて、ユーザが確定ボタン４０Ｃをクリックすることにより、レイアウトする画像の決定の指示がなされたか否かの監視を開始し（ステップＳＴ２）、ステップＳＴ２が肯定されると、傾き量決定部３２が、ユーザが決定した複数の画像について、例えばファイル名順にソートした場合の先頭の画像を処理対象の画像に設定し（ステップＳＴ３）、処理対象の画像から顔領域を抽出する（ステップＳＴ４）。なお、顔領域を抽出する手法としては、画像から肌色を有するとともに人物の顔の形状（例えば長円系）を有する領域を検出し、検出した領域を顔の領域と見なして抽出する手法を用いることができる。また、この手法の他、例えば特開平８−１５３１８７号公報、特開平９−５０５２８号公報、特開２００１−１４４７４号公報、特開２００１−１７５８６８号公報および特開２００１−２０９７９５号公報等に記載された手法等、既知の手法を用いることができる。

続いて、傾き量決定部３２は抽出した顔の数を判定し（ステップＳＴ５）、顔が含まれない場合、すなわち顔の数が０個の場合には、処理対象画像については代表顔をなしとし（ステップＳＴ６）、画像をレイアウトする際の画像の傾き量を０に決定する（ステップＳＴ７）。

一方、顔の数が１個の場合には抽出した顔領域の顔を代表顔とし（ステップＳＴ８）、顔の数が２個以上の場合には、最も大きい顔領域の顔を代表顔とする（ステップＳＴ９）。そして、代表顔の傾きを検出することにより、画像をレイアウトする際の画像の傾き量を決定する（ステップＳＴ１０）。

図４は傾き量の決定を説明するための図である。図４に示すように、傾き量決定部３２は、代表顔から両目の中心位置ＭＬ、ＭＲを検出し、両目の中心位置ＭＬ、ＭＲを結ぶ直線Ｌ０が破線で示す水平線となす角度を傾き量αに決定する。

続いて、処理をすべき次の画像があるか否かを判定し（ステップＳＴ１１）、ステップＳＴ１１が肯定されると、処理対象画像を次の画像に設定し（ステップＳＴ１２）、ステップＳＴ４に戻り、ステップＳＴ４以降の処理を繰り返す。

ステップＳＴ１１が否定されると、レイアウト画像生成部３４が、顔が含まれる画像については画像の対角線の交点の位置を中心として時計回りに傾き量α回転し、回転した画像を１枚の背景画像にレイアウトしてレイアウト画像を生成する（ステップＳＴ１３）。なお、顔が含まれない画像については何ら回転することなく背景画像にレイアウトする。そして、レイアウト画像を表示部１８に表示し（ステップＳＴ１４）、処理を終了する。なお、プリンタ３からレイアウト画像をプリント出力してもよい。

図５はレイアウト画像の例を示す図である。図５に示すように、このレイアウト画像には、１６の画像がレイアウトされており、背景画像の左上隅を原点とした場合の座標位置として、（４，１）、（２，２）、（４，２）、（１，３）、（３，３）、（４，４）の位置にレイアウトされた画像が回転されている。これによりレイアウト画像に含まれる顔が含まれる画像はすべて、顔が直立したものとなっている。なお、（４，４）の位置にレイアウトされた画像は９０度回転されている。なお、画像の配置順はファイル名順であってもよく、全くランダムであってもよい。

このように、本実施形態においては、１枚の背景画像にレイアウトするための複数の画像を決定し、複数の画像のうち、顔が含まれている画像について、各画像に含まれる代表画像の傾きが同一となるように各画像の傾き量を決定し、顔が含まれている画像については決定された傾き量にて画像を回転してレイアウト画像を作成するようにしたものである。このため、レイアウト画像に含まれる画像に顔が含まれている場合には、すべての画像の顔の傾きを同一とすることができ、これにより顔が見やすいレイアウト画像を得ることができる。

また、トリミングを行っていないため、画像に含まれる撮影時の雰囲気が損なわれることもない。

とくに、代表顔に含まれる両目の中心位置ＭＬ、ＭＲを結ぶ直線Ｌ０がほぼ水平となるように傾き量αを決定することにより、顔が含まれる画像については顔が直立した状態となるようにレイアウト画像に含めることができるため、より顔が見やすいレイアウト画像を得ることができる。

なお、上記実施形態においては、本発明による画像レイアウト装置１を単独で用いているが、例えば図６に示すように、写真店の店頭に設置される注文受付装置５０に本発明による画像レイアウト装置１を適用することも可能である。この場合、ユーザは写真店の店頭において、注文受付装置５０に設けられているメモリカードスロット５２に画像を記録したメモリカードを装填し、メモリカードに記録した画像の中からレイアウトするための複数の画像を決定する。なお、注文受付装置５０のモニタ５４はタッチパネル方式の入力部を備え、画像の選択等の各種指示はモニタ５４にタッチすることにより行うことができる。

そしてこれにより、注文受付装置５０は上記実施形態と同様の処理を行ってレイアウト画像を生成し、生成したレイアウト画像をモニタ５４に表示する。そしてユーザはプリントの指示を注文受付装置５０に行うことにより、注文受付装置５０に接続された写真店のプリンタ５６からレイアウト画像をプリント出力させることができる。

以上、本発明の実施形態に係る装置について説明したが、コンピュータを、上記の傾き量決定部３２およびレイアウト画像生成部３４に対応する手段として機能させ、図２に示すような処理を行わせるプログラムも、本発明の実施形態の１つである。また、そのようなプログラムを記録したコンピュータ読取り可能な記録媒体も、本発明の実施形態の１つである。

本発明の実施形態による画像レイアウト装置の構成を示す概略ブロック図 本実施形態において行われる処理を示すフローチャート 画像選択画面を示す図 傾き量の決定を説明するための図 レイアウト画像の例を示す図 本発明による画像レイアウト装置を適用した注文受付装置を示す図

符号の説明

１ 画像レイアウト装置
２ メモリカード
１２ ＣＰＵ
１４ システムメモリ
１６ 入力部
１８ 表示部
２０ カードスロット
２２ 圧縮解凍部
２４ ハードディスク
２６ メモリ制御部
２８ 表示制御部
３０ プリンタインターフェース
３２ 傾き量決定部
３４ レイアウト画像生成部
４０ 画像選択画面
５０ 注文受付装置

Claims (4)

1. １枚の背景画像にレイアウトするための複数の画像を決定する画像決定手段と、
   前記複数の画像のうち顔が含まれている画像について、各画像に含まれる代表顔の傾きが同一となるように該各画像の傾き量を決定する傾き量決定手段と、
   前記顔が含まれている画像については前記決定された傾き量にて画像を回転し、該回転された画像を前記１枚の背景画像にレイアウトして前記複数の画像がレイアウトされたレイアウト画像を生成するレイアウト画像生成手段とを備えたことを特徴とする画像レイアウト装置。
2. 前記傾き量決定手段は、前記代表顔に含まれる両目の中心位置を結ぶ直線がほぼ水平となるように、前記各画像の傾き量を決定する手段であることを特徴とする請求項１記載の画像レイアウト装置。
3. １枚の背景画像にレイアウトするための複数の画像を決定し、
   前記複数の画像のうち顔が含まれている画像について、各画像に含まれる代表顔の傾きが同一となるように該各画像の傾き量を決定し、
   前記顔が含まれている画像については前記決定された傾き量にて画像を回転し、該回転された画像を前記１枚の背景画像にレイアウトして前記複数の画像がレイアウトされたレイアウト画像を生成することを特徴とする画像レイアウト方法。
4. １枚の背景画像にレイアウトするための複数の画像を決定する手順と、
   前記複数の画像のうち顔が含まれている画像について、各画像に含まれる代表顔の傾きが同一となるように該各画像の傾き量を決定する手順と、
   前記顔が含まれている画像については前記決定された傾き量にて画像を回転し、該回転された画像を前記１枚の背景画像にレイアウトして前記複数の画像がレイアウトされたレイアウト画像を生成する手順とを有することを特徴とする画像レイアウト方法をコンピュータに実行させるためのプログラム。

Images