JP3907816B2

JP3907816B2 - 画像処理方法

Info

Publication number: JP3907816B2
Application number: JP06025998A
Authority: JP
Inventors: 金城　　直人
Original assignee: Fujifilm Corp
Current assignee: Fujifilm Corp
Priority date: 1998-03-12
Filing date: 1998-03-12
Publication date: 2007-04-18
Anticipated expiration: 2018-03-12
Also published as: JPH11261797A

Description

【０００１】
【発明の属する技術分野】
本発明は、多段フォーカス画像を利用した画像処理の技術分野に属する。
【０００２】
【従来の技術】
現在、ネガフィルム、リバーサルフィルム等の写真フィルム（以下、フィルムとする）に撮影された画像の感光材料（印画紙）への焼き付けは、フィルムの画像を感光材料に投影して感光材料を面露光する、いわゆる直接露光（アナログ露光）が主流である。
【０００３】
これに対し、近年では、デジタル露光を利用する焼付装置、すなわち、フィルムに記録された画像を光電的に読み取って、読み取った画像をデジタル信号とした後、種々の画像処理を施して記録用の画像データとし、この画像データに応じて変調した記録光によって感光材料を走査露光して画像（潜像）を記録し、（仕上り）プリントとするデジタルフォトプリンタが実用化された。
【０００４】
デジタルフォトプリンタでは、画像をデジタルの画像データとして、画像データ処理によって焼付時の露光条件を決定することができるので、逆光やストロボ撮影等に起因する画像の飛びやツブレの補正、シャープネス（鮮鋭化）処理等を好適に行って、従来の直接露光では得られなかった高品位なプリントを得ることができる。また、画像の合成や分割、文字の合成等も画像データ処理で行うことができ、用途に応じて自由に編集／処理したプリントも出力可能である。
しかも、デジタルフォトプリンタによれば、画像をプリント（写真）として出力するのみならず、画像データをコンピュータ等に供給したり、フロッピーディスク等の記録媒体に保存しておくこともできるので、画像データを、写真以外の様々な用途に利用することができる。
さらに、デジタルフォトプリンタによれば、フィルムに撮影された画像以外にも、デジタルカメラやデジタルビデオカメラ等の撮像デバイスで撮影された画像（画像データ）も、プリントとして出力することができる。
【０００５】
このようなデジタルフォトプリンタは、基本的に、フィルムに記録された画像を光電的に読み取るスキャナ（画像読取装置）、および読み取った画像を画像処理して出力用の画像データ（露光条件）とする画像処理装置を有する画像入力装置と、画像入力装置から出力された画像データに応じて感光材料を走査露光して潜像を記録するプリンタ（画像記録装置）、および露光済の感光材料に現像処理を施してプリントとするプロセサ（現像装置）を有する画像出力装置とを有して構成される。
【０００６】
スキャナでは、光源から射出された読取光をフィルムに入射して、フィルムに撮影された画像を担持する投影光を得て、この投影光を結像レンズによってＣＣＤセンサ等のイメージセンサに結像して光電変換することにより画像を読み取り、必要に応じて各種の画像処理を施した後に、フィルムの画像データ（画像データ信号）として画像処理装置に送る。
画像処理装置は、スキャナによって読み取られた画像データやデジタルカメラ等から供給された画像データに所定の画像処理を施し、画像記録のための出力画像データ（露光条件）としてプリンタに送る。
プリンタでは、例えば、光ビーム走査露光を利用する装置であれば、画像処理装置から送られた画像データに応じて光ビームを変調して、この光ビームを主走査方向に偏向すると共に、主走査方向と直交する副走査方向に感光材料を搬送することにより、画像を担持する光ビームによって感光材料を露光（焼付け）して潜像を形成し、次いで、プロセサにおいて感光材料に応じた現像処理等を施して、フィルムに撮影された画像が再生されたプリント（写真）とする。
【０００７】
【発明が解決しようとする課題】
ところで、あるシーンを光学的に撮影する際には、そのシーンの中に存在する全ての物（被写体）に焦点を合わせることは不可能であり、撮影者（カメラ）からの距離によって、例えば、人物には焦点が合っているが、その背景となっている建造物には焦点が合っていない、あるいは、背景には焦点が合っているが、その手前の人物には焦点が合っていない等が生じる。
【０００８】
本発明の目的は、同じシーンを異なる焦点距離で撮影した多段フォーカス画像およびデジタル画像処理を利用することにより、誤抽出を防止した画像の主要部抽出を行なうことができる画像処理方法を提供することにある。
【０００９】
【課題を解決するための手段】
前記目的を達成するために、本発明に係る画像処理方法は、同シーンを異なる焦点距離で撮影した複数の画像（多段フォーカス画像）の画像データを得て、各画像毎に合焦している被写体を抽出し、これらの各合焦被写体に注目して主要部の抽出を行い、前記シーンを撮影した画像（多段フォーカス画像）中の各画像における主要部の抽出結果の整合性から前記シーンの主要部を抽出することを特徴とする。
【００１０】
また、前記主要部が人物の顔であり、さらに人物の胴体抽出を行なって、その結果を前記主要部抽出に反映させるのが好ましく、さらに、画像中で指示された領域を用いて、前記異なる焦点距離で撮影した複数の画像の画像データを合成して、１つの画像の画像データを生成するのが好ましい。
【００１１】
【発明の実施の形態】
以下、本発明の画像処理方法について、添付の図面に示される好適実施例を基に詳細に説明する。
【００１２】
図１に、本発明の画像処理方法を利用するデジタルフォトプリンタの一例のブロック図が示される。
図１に示されるデジタルフォトプリンタ（以下、フォトプリンタ１０とする）は、基本的に、フィルムＦに撮影された画像を光電的に読み取るスキャナ（画像読取装置）１２と、読み取られた画像データ（画像情報）の画像処理やフォトプリンタ１０全体の操作および制御等を行う、本発明の画像処理方法を実施する画像処理装置１４と、画像処理装置１４から出力された画像データに応じて変調した光ビームで感光材料（印画紙）を画像露光し、現像処理して（仕上り）プリントとして出力するプリンタ１６とを有して構成される。
また、画像処理装置１４には、様々な条件の入力（設定）、処理の選択や指示、色／濃度補正などの指示等を入力するためのキーボード１８ａおよびマウス１８ｂを有する操作系１８と、スキャナ１２で読み取られた画像、各種の操作指示、条件の設定／登録画面等を表示するディスプレイ２０が接続される。
【００１３】
スキャナ１２は、フィルムＦ等に撮影された画像を１コマずつ光電的に読み取る装置で、光源２２と、可変絞り２４と、フィルムＦに入射する読取光をフィルムＦの面方向で均一にする拡散ボックス２８と、結像レンズユニット３２と、Ｒ（赤）、Ｇ（緑）およびＢ（青）の各画像読取に対応するラインＣＣＤセンサを有するイメージセンサ３４と、アンプ（増幅器）３６と、Ａ／Ｄ（アナログ／デジタル）変換器３８とを有して構成される。
【００１４】
また、フォトプリンタ１０においては、新写真システム(Advanced Photo System）や１３５サイズのネガ（あるいはリバーサル）フィルム等のフィルムの種類やサイズ、ストリップスやスライド等のフィルムの形態等に応じて、スキャナ１２の本体に装着自在な専用のキャリアが用意されており、キャリアを交換することにより、各種のフィルムや処理に対応することができる。フィルムに撮影され、プリント作成に供される画像（コマ）は、このキャリアによって所定の読取位置に搬送される。
このようなスキャナ１２において、フィルムＦに撮影された画像を読み取る際には、光源２２から射出され、可変絞り２４によって光量調整された読取光が、キャリアによって所定の読取位置に位置されたフィルムＦに入射して、透過することにより、フィルムＦに撮影された画像を担持する投影光を得る。
【００１５】
図示例のスキャナ１２は、スリット走査によってフィルムに撮影された画像を読み取るものであり、フィルムＦは、キャリア３０によって読取位置に位置されて長手方向（副走査方向）に搬送されつつ、読取光が入射される。フィルムＦを透過した投影光は、読取位置に配置された、前記副走査方向と直交する主走査方向に延在するスリットによって規制される。これにより、結果的にフィルムＦが主走査方向に延在するスリットによって２次元的にスリット走査され、フィルムＦに撮影された各コマの画像が読み取られる。
【００１６】
読取光はキャリア３０に保持されたフィルムＦを透過して画像を担持する投影光となり、この投影光は、結像レンズユニット３２によってイメージセンサ３４の受光面に結像される。
イメージセンサ３４は、Ｒ画像の読み取りを行うラインＣＣＤセンサ、Ｇ画像の読み取りを行うラインＣＣＤセンサ、Ｂ画像の読み取りを行うラインＣＣＤセンサを有する、いわゆる３ラインのカラーＣＣＤセンサで、各ラインＣＣＤセンサは、主走査方向に延在している。フィルムＦの投影光は、イメージセンサ３４によって、Ｒ、ＧおよびＢの３原色に分解されて光電的に読み取られる。
イメージセンサ３４の出力信号は、アンプ３６で増幅され、Ａ／Ｄ変換器３８でデジタル信号とされて、画像処理装置１４に送られる。
【００１７】
なお、本発明を利用するフォトプリンタ１０において、スキャナは、このようなスリット走査によるものに限定はされず、１コマの画像の全面を一度に読み取る、面露光を利用するものであってもよい。
この場合には、例えば、エリアＣＣＤセンサを用い、光源とフィルムＦとの間に、Ｒ、ＧおよびＢの各色フィルタの挿入手段を設け、色フィルタを挿入してエリアＣＣＤセンサで画像を読み取ることを、Ｒ、ＧおよびＢの各色フィルタで順次行い、フィルムに撮影された画像を３原色に分解して順次行う。
【００１８】
また、本発明を利用するフォトプリンタ１０においては、スキャナ１２によって読み取ったフィルムＦの画像以外にも、反射原稿の画像を読み取るスキャナ、デジタルカメラやデジタルビデオカメラ等の撮像デバイス、インターネット等のコンピュータ通信、フロッピーディスクやＭＯディスク（光磁気記録媒体）等の画像データ供給源Ｒから画像データを受け取って、これを再生したプリントを作成してもよい。
【００１９】
前述のように、スキャナ１２やデジタルカメラ等から出力されたデジタル信号は、画像処理装置１４（以下、処理装置１４とする）に出力される。
処理装置１４は、データ処理部４０、画像処理部４２、および画像合成部４２を有して構成される。
なお、処理装置１４には、これ以外にも、処理装置１４を含むフォトプリンタ１０全体の制御や管理を行うＣＰＵ、フォトプリンタ１０の作動等に必要な情報を記憶するメモリ等が配置され、また、操作系１８やディスプレイ２０は、このＣＰＵ等（ＣＰＵバス）を介して各部位に接続される。
【００２０】
スキャナ１２から出力されたＲ，ＧおよびＢの各デジタル信号は、データ処理部４０において、暗時補正、欠陥画素補正、シェーディング補正等の所定のデータ処理を施され、さらに、Ｌｏｇ変換されて、デジタルの画像データ（濃度データ）とされる。また、画像データがデジタルカメラ等の画像データ供給源Ｒから供給された場合には、その画像データは、データ処理部４０においてフォトプリンタ１０に対応する画像データに変換され、必要な処理を施される。
【００２１】
画像処理部４２は、データ処理部４０で処理されたデジタルの画像データに所定の画像処理を施し、さらに、画像処理済の画像データを３Ｄ（三次元）−ＬＵＴ等を用いて変換して、プリンタ１６による画像記録やディスプレイ２２への表示に対応する画像データとする。
画像処理部４２で施される画像処理には特に限定はなく、公知の各種の画像処理が例示されるが、例えば、ＬＵＴ（ルックアップテーブル）を用いたグレイバランス調整、階調補正、および濃度調整、マトリクス（ＭＴＸ）による撮影光源種補正や画像の彩度調整、その他、ローパスフィルタ、加算器、ＬＵＴ、ＭＴＸ等を用いた、また、これらを適宜組み合わせた平均化処理や補間演算等を用いた、電子変倍処理、覆い焼き処理（濃度ダイナミックレンジの圧縮／伸長）、シャープネス（鮮鋭化）処理等が例示される。
なお、画像処理部４２での各種の処理条件は、例えば、出力用の画像データを得るための本読み（本スキャン）に先立って行われる、画像を粗に読み取るプレスキャンの画像データや、プリンタ１６への出力用の画像データに対応する画像データを間引いた画像データを用いて設定すればよい。
【００２２】
画像処理部４２で処理された画像データは、画像合成を実施する場合には画像合成部４４に、それ以外の場合には、プリンタ１６やディスプレイ２０に出力される。
【００２３】
フォトプリンタ１０において、本発明の画像処理方法を実施する際には、処理装置１４には、フィルムＦに画像を撮影するカメラやデジタルカメラ等の撮像デバイスで撮影された、同じシーンを異なる焦点距離で撮影した複数の画像、いわゆる多段フォーカス画像の画像データが送られる。
なお、本発明においては、スキャナ１２での光電的な読み取りが不要であり、画像合成の際の位置合わせが容易である等の点で、デジタルカメラで撮影された多段フォーカス画像が好適である。
【００２４】
また、画像を撮影するカメラには、自動的に焦点距離の異なる画像を複数枚撮影する多段フォーカスモードを設けてもよく、特に、デジタルカメラである場合には、多段フォーカス画像の一枚を基準画像として、その他の画像の画像データは基準画像との差分データとして出力してもよく、あるいはこの差分データを符号化して出力してもよい。
【００２５】
本発明の画像処理方法を行う際には、処理装置１４には、多段フォーカス画像の画像データ、例えば、図２に模式的に示されるように、焦点距離が近距離の画像データＮ１、焦点距離が中距離の画像データＮ２、および焦点距離が遠距離の画像データＮ３の、同シーンで焦点距離が異なる３種の画像データが供給され、画像合成を行なう場合には、データ処理部４０および画像処理部４２で前述の所定の処理を施された後、画像合成部４４に供給される。
【００２６】
画像合成部４４は、供給された画像のそれぞれについて、空間周波数、微分フィルタ処理による鮮鋭度またはエッジ強度の定量化等を用いて、画像の鮮鋭度を画素単位で検出し、各画像ごとに、他の画像に比して最も鮮鋭度の高い（いわゆるエッジが立った）被写体、すなわち焦点距離の異なる各画像で焦点（ピント）のあっている被写体（あるいは領域）を抽出する。
図示例であれば、近距離焦点の画像データＮ１は花に、中距離焦点の画像データＮ２は人物に、遠距離焦点の画像データＮ３は背景の山に、それぞれ合焦しているので、各画像でこれらが抽出される。
【００２７】
次いで、画像合成部４４は、供給された着目すべき被写体（以下、着目被写体とする）の情報に応じて、少なくとも、着目被写体は合焦している画像の画像データを用いて、供給された多段フォーカス画像から、このシーンの１枚の画像を合成し、ディスプレイ２０やプリンタ１６に出力する。
図２に合成例を示すが、図２の画像ａでは人物と花が、画像ｂは人物と山が、それぞれ着目被写体として指示され、共に、着目被写体は合焦して鮮鋭に再生され、それ以外の被写体はボケている。
【００２８】
着目被写体は、顧客（プリント作成依頼者）の依頼等に応じて、オペレータがキーボード１８ａやマウス１８ｂ等を用いた公知の方法で入力すればよいが、好ましい方法として、着目被写体が合焦している画像の焦点距離で指示する方法が例示される。例えば、画像ａのように着目被写体が人物と花である場合には、オペレータは、人物に合焦している画像データＮ２に対応する中距離焦点、および花に合焦している画像データＮ１に対応する近距離焦点を、着目被写体の情報として指示・入力すればよい。
なお、多段フォーカス画像の各画像データと焦点距離との対応付けは、オペレータが画像ごとに焦点距離（近距離、中距離、遠距離等）を入力してもよく、画像データがデジタルカメラ等の撮像デバイスによるものである場合には、画像ファイルのヘッダに焦点距離の情報を記録しておいてもよく、新写真システムのフィルムＦによるものである場合には、フィルムに形成される磁気記録媒体に焦点距離の情報を記録して、これを読み取ってもよい。
【００２９】
着目被写体の情報を入力する別の好ましい方法として、マウス１８ｂ等を用いて画像のある領域を切り出して、これを着目被写体の情報として指示する方法も例示される。
これらの手段は、併用してもよい。
【００３０】
画像合成の方法には特に限定はなく、公知の複数画像（画像データ）の合成方法が各種利用可能ある。
例えば、着目被写体が合焦している１枚の画像を基準画像として、これに他の画像に撮影された合焦している着目被写体の画像（画像データ）を組み込む（置換する）方法が例示される。あるいは、前述のように、着目被写体が焦点距離で指示された場合には、同様の基準画像に、指示された焦点距離の画像で合焦している（最も鮮鋭な）被写体を、全て組み込めばよい。
【００３１】
また、シーンの中に無関係な人物やゴミ等の不要な被写体があり、これが、合成した画像中で合焦してしまう場合には、例えば、マウス１８ｂ等を用いて不要な被写体（それを含む領域）を指示し、その部分は、多段フォーカス画像中の合焦していない画像を使用して、画像を合成してもよい。
さらに、画像合成の際には、作成された画像を自然な画像とするために、例えば、各被写体のエッジ部（端部）で画像データの重み付けを行って画像を合成して、各被写体の継ぎ目を円滑かつ自然な状態に仕上げてもよい。
【００３２】
ここで、多段フォーカス画像は、同シーンであっても焦点距離が異なっているので、実際には、画像中の各被写体の大きさが若干に異なる。従って、画像を合成した際の画像ズレや、それに起因する画像の抜け等を防止するために、基準となる画像は、シーン中に合焦する着目被写体を有する、最も焦点距離の遠い画像を基準とするのが好ましい。
例えば、図２に示される例において、画像ａに示されるように、着目被写体として人物と花が指示された場合には、人物が合焦している中距離焦点の画像（画像データＮ２）を基準画像として、近距離焦点の画像（画像データＮ１）の花あるいは合焦被写体を組み込む。また、画像ｂに示されるように、着目被写体として人物と山が指示された場合には、山が合焦している遠距離焦点の画像（画像データＮ３）を基準として、中距離焦点の画像（画像データＮ２）の人物あるいは合焦被写体を組み込む。
【００３３】
また、多段フォーカス画像の各画像の最も鮮鋭な被写体から、シーン中の各被写体の撮影距離や被写体間の距離を画素単位で求め、この距離の情報を用いて、仮想的な両眼視画像を作成し、立体画像を作成してもよい。
【００３４】
ところで、前述の画像処理部４２では、必要に応じて画像の主要部（主要被写体）を抽出して、抽出した主要部に応じた画像処理を行うが、本発明においては、多段フォーカス画像が供給された際には、各画像ごとに抽出した合焦被写体（領域）の情報を画像の主要部抽出に利用する。
【００３５】
例えば、図３（Ａ）に示されるような画像において、主要部として人物の顔を抽出する際に、花が存在する領域の地面（背景）の色が肌色に近い場合には、従来の主要部抽出では、顔と共に、花を含む領域も顔として誤抽出してしまう場合がある。
【００３６】
ここで、多段フォーカス画像の各画像における合焦被写体は、いずれも撮影者からの距離は近似している。また、多段フォーカス画像において、撮影者は、最も重要な被写体に合焦している画像を一枚は撮影するのが通常である。
本方法においては、多段フォーカス画像の各画像において、合焦している被写体に注目して主要部抽出を行い、抽出結果の整合性を見る。
写真では、複数の主要部が存在しても、各主要部の撮影者からの距離は、近似しているのが通常である。例えば、図３（Ｂ）に示されるような多段フォーカス画像の、各画像の合焦被写体から主要部となる顔を抽出した際に、主要部は３つの画像中の１つのみに存在するのが適正であり、焦点距離の異なる複数の画像から主要部が抽出された場合には、いずれかは誤抽出と判断できる。
従って、図３（Ｂ）に示されるように、中距離焦点の画像（画像データＮ２）と近距離焦点の画像（画像データＮ１）の両者から顔が抽出され、最も顔として適正と考えられる抽出部が中距離焦点の画像のものである場合には、近距離焦点の画像から抽出された主要部は不適正であると判断でき、キャンセルすることができる。すなわち、主要部の誤抽出を防止できる。
【００３７】
他の顔抽出判定方法として、全画面に顔抽出処理を適用した後、各抽出エリア内での画素別合焦距離の分布を調べ、整合性をチェックすることで誤抽出を低減できる。例えば、図３（Ａ）における花と山を重ねて抽出したエリアについては、合焦距離が大きく異なるエリアに分割されるため、顔ではないと判定され、顔を抽出したエリアについては、合焦距離がほとんど等しく同一エリアとなるため、正しく顔と判定される。
または、所定の合焦距離範囲毎の画素集合により画面を分割し、その分割エリア毎に顔抽出処理を適用することで誤抽出を低減できる。例えば、図３（Ｂ）における多段フォーカス画像Ｎ１〜Ｎ３それぞれの合焦エリア毎に顔抽出処理を適用した場合、画像Ｎ２の合焦エリアのみで顔エリアが正しく抽出される。
【００３８】
また、ポートレート等では、顔のみならず人物の胴体も適正に仕上げるのが好ましいが、人物の胴体は、物理的に、撮影者からの距離が顔と近いので、顔が合焦している画像から胴体を抽出することにより、抽出の精度および効率を向上することができる。また、通常は、撮影されたシーン中の人物周辺において、撮影者からの距離が顔と近いのは胴体部のみであるので、合焦被写体である胴体が分かれば、顔候補として抽出した領域の周辺に占める背景部の比率を、顔抽出の整合性評価に用いることもできる。
あるいは、焦点距離の情報から撮影倍率を得、これと抽出した合焦している主要部や胴体等のサイズとを比較して、顔抽出の整合性評価に用いてもよい。
さらに、合焦している被写体の焦点距離や形状から、近接撮影、ポートレート、風景写真等の撮影シーンを分析して、シーンの種類に応じて、露光制御、被写体毎のシャープネス強調やぼかし等、画像処理部４２における画像処理内容を制御してもよい。
【００３９】
なお、以上の方法において、主要部抽出の方法には特に限定はなく、公知の方法が各種利用可能である。
例えば、画像（画素）の色・濃度と連続性から人物の肌と推測される領域を抽出する顔抽出や、特開平８−１８４９２５号公報に開示される、画像を閾値を用いて２値化して、例えば高濃度領域と低濃度領域に分別して領域抽出を行い、次いで、各領域の輪郭抽出を行い、これを利用して頭髪部抽出、胴体抽出、顔内部構造抽出（眼部抽出）、背景部抽出等を行う被写体抽出方法が例示される。
さらに、これ以外にも、例えば、特開平４−３４６３３２号、同４−３４６３３３号、同４−３４６３３４号、同５−１００３２８号、同５−１５８１６４号、同５−１６５１１９号、同５−１６５１２０号、同６−６７３２０号、同６−１６０９９２号、同６−１６０９９３号、同６−１６０９９４号、同６−１６０９９５号、同８−１２２９４４号、同９−８０６５２号、同９−１０１５７９号、同９−１３８４７０号、同９−１３８４７１号の各公報等に開示される、各種の被写体抽出方法が例示される。
【００４０】
前述のように、画像処理部４２、あるいはさらに画像合成部４４で処理された画像（画像データ）は、ディスプレイ２０やプリンタ１６に出力される。
プリンタ１６は、供給された画像データに応じて感光材料（印画紙）を露光して潜像を記録するプリンタ（焼付装置）と、露光済の感光材料に所定の処理を施してプリントとして出力するプロセサ（現像装置）とを有して構成される。
プリンタでは、例えば、感光材料をプリントに応じた所定長に切断した後に、バックプリントを記録し、次いで、感光材料の分光感度特性に応じたＲ露光、Ｇ露光およびＢ露光の３種の光ビームを処理装置１４から出力された画像データに応じて変調して主走査方向に偏向すると共に、主走査方向と直交する副走査方向に感光材料を搬送することにより、前記光ビームで感光材料を２次元的に走査露光して潜像を記録し、プロセサに供給する。感光材料を受け取ったプロセサは、発色現像、漂白定着、水洗等の所定の湿式現像処理を行い、乾燥してプリントとし、フィルム１本分等の所定単位に仕分して集積する。
【００４１】
以上、本発明の画像処理方法について詳細に説明したが、本発明は上記実施例に限定はされず、本発明の要旨を逸脱しない範囲において、各種の改良および変更を行ってもよいのはもちろんである。
【００４２】
【発明の効果】
以上、詳細に説明したように、本発明によれば、同シーンを異なる焦点距離で撮影した多段フォーカス画像を利用して、誤抽出を防止して正しく主要部の抽出を行なうことができる。
【図面の簡単な説明】
【図１】本発明の画像処理方法を利用するデジタルフォトプリンタのブロック図である。
【図２】多段フォーカス画像を利用する画像合成を説明するための概念図である。
【図３】（Ａ）および（Ｂ）は、多段フォーカス画像を用いた主要被写体抽出の方法を説明するための概念図である。
【符号の説明】
１０（デジタル）フォトプリンタ
１２スキャナ
１４（画像）処理装置
１６プリンタ
１８操作系
２０ディスプレイ
２２光源
２４可変絞り
２８拡散ボックス
３０キャリア
３２結像レンズユニット
３４イメージセンサ
３６アンプ
３８Ａ／Ｄ変換器
４０データ処理部
４２画像処理部
４４画像合成部

Claims

同シーンを異なる焦点距離で撮影した複数の画像（多段フォーカス画像）の画像データを得て、
各画像毎に合焦している被写体を抽出し、これらの各合焦被写体に注目して主要部の抽出を行い、前記シーンを撮影した画像（多段フォーカス画像）中の各画像における主要部の抽出結果の整合性から前記シーンの主要部を抽出することを特徴とする画像処理方法。
前記主要部が人物の顔であり、さらに人物の胴体抽出を行なって、その結果を前記主要部抽出に反映させる請求項１に記載の画像処理方法。
画像中で指示された領域に応じて、前記異なる焦点距離で撮影した複数の画像の画像データを合成して、１つの画像の画像データを生成する請求項１または２に記載の画像処理方法。