JP2004246456A - 画像編集装置および画像編集方法 - Google Patents
画像編集装置および画像編集方法 Download PDFInfo
- Publication number
- JP2004246456A JP2004246456A JP2003033485A JP2003033485A JP2004246456A JP 2004246456 A JP2004246456 A JP 2004246456A JP 2003033485 A JP2003033485 A JP 2003033485A JP 2003033485 A JP2003033485 A JP 2003033485A JP 2004246456 A JP2004246456 A JP 2004246456A
- Authority
- JP
- Japan
- Prior art keywords
- image
- face image
- correction
- face
- input
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/46—Colour picture communication systems
- H04N1/56—Processing of colour picture signals
- H04N1/60—Colour correction or control
- H04N1/62—Retouching, i.e. modification of isolated colours only or in isolated picture areas only
- H04N1/628—Memory colours, e.g. skin or sky
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/46—Colour picture communication systems
- H04N1/56—Processing of colour picture signals
- H04N1/60—Colour correction or control
- H04N1/62—Retouching, i.e. modification of isolated colours only or in isolated picture areas only
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- General Health & Medical Sciences (AREA)
- Theoretical Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Image Processing (AREA)
- Processing Or Creating Images (AREA)
- Image Analysis (AREA)
- Editing Of Facsimile Originals (AREA)
- Television Signal Processing For Recording (AREA)
Abstract
【解決手段】CPU4は、スキャナ2またはメモリカードリーダ3から処理対象の画像を取り込み、この画像中の顔画像を検出する。さらに、CPU4は。検出した顔画像の特徴量を用いて、被写体の人種、年代、性別などを推論し、その推論結果に適合する補正パラメータを設定して、顔画像の肌色調整や逆光補正処理を行う。補正処理後の画像は、プリンタ11に出力され、写真として印刷される。
【選択図】 図1
Description
【発明の属する技術分野】
この発明は、所定の撮影装置で生成された画像を取り込んで補正処理を行い、その補正処理後の画像を出力する画像編集装置に関する。特に、この発明は、人物を撮像して得られた画像を入力して、その被写体の顔画像を補正する技術に関する。
【0002】
【従来の技術】
近年、人物を被写体として撮影を行った際の画像から、被写体の顔に相当する画像領域を検出し、その領域内の特徴量に基づいて露光量などの撮影条件を調整したり、撮影後の画像を補正するようにした技術が開示されている。
たとえば、下記特許文献1〜3に開示されたような技術が存在する。
【0003】
【特許文献1】
特開平10−268447号公報
【特許文献2】
特開平8−62741号公報
【特許文献3】
特開平11−146405号公報
【0004】
特許文献1では、撮像素子から取り込んだ画像データを用いて写真焼き付け処理を行う際に、前記画像データから人物の顔の領域を検出し、この領域内の側光データに基づいて露光量を定めた上で補正を行うことにより、顔画像の特徴に合わせて画像を補正するようにしている。
【0005】
特許文献2では、カメラで撮像した画像をプリントアウトする処理において、処理対象の画像から顔画像に相当する肌色領域を検出するとともに、この画像の輝度情報に基づき、逆光の度合を判別し、人物の存在する度合や逆光の度合によって、異なる内容の階調補正を行うようにしている。
【0006】
特許文献3では、カラービデオカメラなどの映像信号処理装置において、映像信号を取り込む過程で肌色領域を検出し、肌色領域が検出されたときの映像信号に輝度補正や色補正などを施すことにより、肌色領域のみを補正できるようにしている。
【0007】
【発明が解決しようとする課題】
上記の先行技術をはじめとする従来の補正処理では、いずれも、顔画像の明るさや色彩などの特徴量をあらかじめ定められた基準と照合して、補正のパラメータを決定しているものと思われる。しかしながら、この補正の基準は、所定の人種の肌の色に合わせて定められるので、他の人種を被写体とした場合の補正処理に不具合が生じる虞がある。
【0008】
たとえば、補正の基準を黄色人に合わせていると、黒人が被写体になった場合には逆光時の補正パラメータが適用される可能性がある。しかしながら、実際の黒人の顔画像と逆光時の顔画像とは大きく異なるので、適正な補正を行うのは困難である。また、白人が被写体になった場合に、黄色人と同様の補正処理を行うと、肌の色に黄味がかかり、不自然な印象の画像になる虞がある。
【0009】
年代や性別の違いによっても、人種の場合と同様に、画一化された補正パラメータだけでは対応が困難な可能性がある。たとえば、20代の顔画像と40代の顔画像とでは、補正すべき箇所や基準にかなりの差異があると考えられる。また、被写体が男性である場合と女性である場合とでは、一般に、好ましいとされる顔色の基準が異なるものになると考えられる。
【0010】
さらに、顔の色や明るさについては、人によって好みがあり、またその時々の流行や季節などによっても好みが変動する可能性がある。このような種々の要素に応じて個々の被写体の顔画像を補正するには、従来の画一的な基準による補正だけで対応するのは困難である。
【0011】
加えて、従来の写真焼付けサービス(DPE)では、画像全体を補正することは可能であるが、各被写体を個別に補正するまでのサービスは行われていない。
【0012】
この発明は、上記問題に着目してなされたもので、被写体の人種、性別、年齢や個人の好みに応じて、各被写体に適した補正処理を行うことができるようにすることを、目的とする。
【0013】
【課題を解決するための手段】
この発明にかかる第1の画像編集装置は、人物を撮像して得られた画像を入力する画像入力手段と、前記入力画像に含まれる被写体の顔画像を検出する顔画像検出手段と、前記顔画像検出手段により検出された顔画像を含む画像領域内の特徴量に基づき、前記顔画像について、少なくとも人種、年齢、性別のいずれかに対する推論処理を実行する推論手段と、前記推論手段による推論結果に基づき、前記顔画像の補正処理内容を決定する決定手段と、前記顔画像に対し、前記決定手段が決定した内容による補正処理を実行する顔画像補正手段と、前記顔画像補正手段による補正処理後の画像を出力する画像出力手段とを具備する。
【0014】
上記の画像編集装置は、上記各手段の機能に対応するプログラムを組みこんだコンピュータを制御主体とするのが望ましい。また、画像入力手段には、外部から画像を取り込むためのインターフェース回路が含まれる。画像出力手段にも同様に、外部への画像出力に関わるハードウェアが含まれる。
【0015】
なお、画像入力手段には、ディジタル画像データを入力するのが望ましいが、これに限らず、たとえば、アナログビデオカメラからのアナログ画像信号を入力することもできる。この場合の画像入力手段は、インターフェース回路のほか、フレーム毎のアナログ画像信号をディジタル変換するA/D変換回路などを含むものとなる。
【0016】
顔画像検出手段は、たとえば、入力画像上に所定大きさの検索領域を走査し、顔を構成する器官の特徴を示す特徴点が含まれているかどうかを検索する方法により、顔画像の検出処理を行う。この検索では、下記の特許文献4に記載されたような特徴点検出処理を行うことにより、高確度で顔画像を検出することができる。ただし、これに限らず、従来の肌色領域を検出する方法や単純なパターンマッチング処理によって、顔画像を検出することも可能である。
【0017】
【特許文献4】
特開2001−16573号公報
(段落[0064]〜[0069]参照。)
【0018】
推論手段は、顔の器官を構成する特徴点を用いた演算処理により人種,年齢,性別などを高確度で判別することができる。人種の推定では、たとえば、下記の非特許文献1の手法を適用できるが、これに限らず、顔画像内の輝度分布を検出する方法を用いることができる。また、年齢や性別を推定するには、たとえば、下記の非特許文献2に開示された方法を使用することができる。
【0019】
【非特許文献1】
グレゴリー シャナロビッチ(Gregory Shakhnarovich),ポール A ヴィオラ(Paul A. Viola),ババック モハダム(Baback Moghaddam);「ア ユニファイド ラーニング フレームワーク フォア リアルタイム フェイス ディテクション アンド クラシフィケーション(A Unified Learning Framework for Real Time Face Detection and Classification)」;プロシーディングス オブ ザ フィフス IEEE インターナショナル コンファレンス オン オートマティック フェイス アンド ジェスチャー レコグニッション(Proceedings of the Fifth IEEE International Conference on Automatic Face and Gesture and Gesture Recognition); (米国) インスティチュート オブ エレクトリカル アンド エレクトロニクス エンジニアズ(Institute of Electrical and Electronics Engineers,略称 IEEE);2002年5月
【0020】
【非特許文献2】
細井聖,瀧川えりな,川出雅人;「ガボールウェーブレット変換とサポートベクタマシンによる性別・年代推定システム」; 第8回画像センシングシンポジウム講演論文集;画像センシング技術研究会;2002年7月
【0021】
上記の推論処理に使用される特徴量は、主として顔画像の検出領域から導き出されるが、これに限らず、顔画像の周辺領域や、画像全体または画像の一部の特徴量も含めてもよい。特徴量としては、顔画像の色彩や明度の平均や分散、強度分布、周囲画像との色彩差や明度差などを検出することができる。また、これらの特徴量を所定の演算式にあてはめて、推論に必要な二次的な特徴量を求めることもできる。
【0022】
この発明で実行するところの補正処理としては、たとえば、肌色調整のために各色成分(たとえば赤,緑,青の三原色)の強度や明度を補正する処理、顔面の欠陥を検出して消去する処理、肌のスムージング処理など、種々の内容の処理を設定することができる。前記推論結果に基づいて顔画像の補正処理内容を決定するには、あらかじめ、各種補正項目毎に、その補正を実行する上で必要なパラメータ(以下、これを「補正パラメータ」と呼ぶ。)の設定値を推論の対象となる各要素に対応づけた設定テーブルを作成しておき、前記推論処理の結果をこの設定テーブルと照合して、推論結果に応じた補正パラメータを導き出すようにするのが望ましい。
【0023】
たとえば、肌色調整を例にとると、補正パラメータとして、各色成分毎の増減の比率を設定することができる。この場合の設定テーブルでは、人種、年齢、性別をそれぞれ複数のカテゴリーに分類し(たとえば、人種について「白人」「黄色人」「黒人」、年齢について「10代」「20代」「30代」など)、これらカテゴリーの組み合わせ毎に、各色成分毎の補正パラメータの値の組み合わせが異なるものとなるようにするのが望ましい。
【0024】
上記の画像編集装置によれば、少なくとも、人種、年齢、性別のいずれかにかかる複数とおりの標準設定の補正処理の中から、被写体に適合する内容の補正が選択され、この内容に基づき顔画像の補正を行うことができる。すなわち、個々の被写体の人種、年齢、性別によって補正内容を自動選択し、被写体に適した補正を行うことができる。
【0025】
つぎに、この発明にかかる第2の画像編集装置は、前記第1の画像編集装置と同様の画像入力手段および顔画像検出手段と、所定数の被写体について、それぞれその被写体の顔画像の特徴量およびその顔画像の補正に必要な情報を前記被写体に固有の識別情報に対応づけた登録情報を保持する登録手段と、前記顔画像検出手段により検出された顔画像の特徴量を前記登録手段の登録情報と照合して、前記被写体を推定する推論手段と、前記推論手段により推定された被写体の登録情報を用いて前記検出された顔画像の補正処理を実行する顔画像補正手段と、前記顔画像補正手段による補正処理後の画像を出力する画像出力手段とを具備する。
【0026】
上記構成の画像編集装置も、第1の画像編集装置と同様に、コンピュータを制御主体とするのが望ましい。画像入力手段、顔画像検出手段、画像出力手段は、第1の画像編集装置と同様に構成することができる。
【0027】
登録手段は、前記コンピュータ内のメモリに設定されたデータベースとすることができる。「顔画像の補正に必要な情報」は、たとえば、顔画像の色彩を特定するパラメータ(顔色を構成するR,G,Bの階調、明度など)であって、登録対象の被写体の好みの色彩になるように調整されたものであるのが望ましい。また、被写体に固有の識別情報としては、被写体の名前(フルネームに限らず、ニックネームなどでもよい。)など、撮影者や被写体が容易に確認できる情報であるのが望ましい。
【0028】
登録対象の顔画像の好ましい特徴量としては、顔の器官の特徴点の位置関係を示すものがよい。たとえば、前記特許文献4の(1)式に示される特徴量を、顔画像を構成する各点毎に求めて登録することができる。
【0029】
推論手段は、検出された顔画像の特徴量を登録手段に登録された各被写体の顔画像の特徴量と照合する処理により、被写体が誰であるかを推定することができる。顔画像補正手段は、推定された被写体の登録情報に含まれる補正の内容に基づき、顔画像を補正することができる。
【0030】
上記第2の画像編集装置によれば、被写体となり得る人物について、あらかじめ、その人物の顔画像の特徴量と、その顔画像を最適に補正するのに必要な情報を登録しておくことにより、その人物の顔画像を処理する都度、その顔画像を被写体の好みの方法で補正することができる。
【0031】
つぎに、上記第1、第2の画像編集装置に共通に設定できる態様について説明する。まず一の態様では、前記顔画像検出手段は、前記顔画像の検出結果に対する修正操作を受け付けて、前記顔画像の検出結果を修正する手段を含むように構成される。
【0032】
顔画像の検出結果に対する修正操作については、前記入力画像における顔画像の検出結果を表示し、この表示画面上で、顔画像の検出位置、検出した範囲の変更、所定の顔画像の削除などの操作を実行できるようにするのが望ましい。顔画像の検出結果の表示は、たとえば、画像上の顔画像の検出位置にポインタを配置することによって行うことができる。より好ましい方法としては、顔画像の位置および大きさが明確になるようなマーキング表示(たとえば、顔画像を含むような枠画像を設定する。)を行うこともできる。
【0033】
上記の態様によれば、顔画像の検出結果の誤りにより、間違った推論処理が行われて、以後の処理に誤りが生じるのを回避することができる。また、顔画像を削除する操作によれば、たとえば、被写体とする人物以外の人物の顔画像が含まれている場合に、この被写体以外の人物にかかる顔画像の検出結果を削除するなど、以後の推論処理や補正内容の決定を行う必要のない顔画像を削除することができ、被写体に対してのみ詳細な処理を行うことができる。
【0034】
さらに、他の態様にかかる画像編集装置では、前記推論手段は、前記推論結果に対する修正操作を受け付けて、前記推論結果を修正する手段を含むように設定される。
【0035】
推論結果に対する修正操作については、推論結果を表示し、この表示画面上で、誤った推論情報を指定して修正したり、不要な推論情報を削除するものとするのが望ましい。さらに、推論されていない新規の情報を追加できるようにしてもよい。
【0036】
上記の態様によれば、推論結果の誤りを修正した上で補正内容の決定処理を行うことができるから、被写体に適した補正内容を精度良く選択することが可能となる。
【0037】
さらに、他の態様にかかる画像編集装置は、顔画像補正手段は、補正処理後にその補正内容の修正操作を受け付けて、修正された内容に基づき前記顔画像の再補正を実行する手段を含む。また、画像出力手段は、確定操作に応じて、その時点における最新の補正処理により得られた画像を出力する。
【0038】
補正内容の修正操作については、補正処理後の画像や、実行された補正内容を示す情報(前記した補正パラメータなど)を表示し、この表示画面上で所定の補正内容を指定して修正を行うことができるようにするのが望ましい。また確定操作についても、同じ補正処理後の画像の表示画面上で行うことができる。
【0039】
上記の態様によれば、ユーザーは、補正処理後の画像が好ましくない場合には、修正操作により画像の再補正処理を行わせることができる。そして、最終的に、好ましい補正画像を得ることができた時点で確定操作を行うことによって、最新の補正により得られた画像を出力することができる。
【0040】
つぎに、この発明にかかる第3の画像編集装置は、人物を撮像して得られた画像を入力する画像入力手段と、前記入力画像に含まれる被写体の顔画像を検出する顔画像検出手段と、前記被写体について、その顔画像の補正処理内容を示す情報を入力するための情報入力手段と、前記顔画像検出手段により検出された顔画像に対し、前記情報入力手段より入力された情報に基づく内容による補正処理を実行する顔画像補正手段と、前記顔画像補正手段による補正処理後の画像を出力する画像出力手段とを具備する。
【0041】
上記第3の画像編集装置も、コンピュータを制御主体とするのが望ましく、画像入力手段、顔画像検出手段、画像出力手段は、前記第1、第2の画像編集装置と同様のものとすることができる。情報入力手段は、検出された顔画像に対する具体的な補正内容を入力するための操作部(キーボード、マウスなど)、この入力処理を支援するために補正項目のメニューなどを提示するユーザーインターフェースが組みこまれたコンピュータ、および前記メニュー表示のための表示装置などにより構成することができる。
【0042】
上記の装置によれば、ユーザーは、処理対象の画像を装置に入力した後に、被写体について、補正内容を示す情報を入力すると、補正の対象である顔画像が自動検出され、入力情報に基づく補正処理が実行されるようになる。よって、ユーザーの意図する内容の補正を簡単かつ確実に実行することが可能となる。なお、複数人が被写体となる画像を処理する場合には、各被写体の顔画像の検出結果を表示してユーザーに確認させた上で、被写体毎に補正処理内容を示す情報の入力を受け付けるようにするのが望ましい。また、補正内容の入力は、画像編集用ソフト等の機能を用いて、表示された入力画像を直接修正する操作によって行うこともできる。
【0043】
さらに、この第3の画像編集装置でも、第1、第2の画像編集装置と同様に、顔画像の検出結果に対する修正操作を受け付けて、検出結果を修正できるようにするのが望ましい。また、画像補正手段による補正処理後の画像に対し、補正内容の修正操作に応じて再補正を行い、確定操作に応じて、その時点における最新の補正処理により得られた画像を出力することも可能である。
【0044】
さらに、上記第1、第3の画像編集装置には、前記顔画像検出手段により検出された顔画像の特徴量を前記画像補正手段が実行した補正内容に対応づけてメモリに登録する登録処理手段を具備させることができる。この場合の顔画像検出手段は、所定の登録情報を指定する操作に応じて、この指定された登録情報に含まれる特徴量を用いた検索処理により、前記入力画像より顔画像を検出することが可能に設定される。また、前記顔画像補正手段は、前記検索処理により顔画像が検出されたとき、この検出された顔画像に対し、前記指定された登録情報に含まれる補正処理内容による補正処理を実行するように設定される。なお、前記登録処理手段による情報の登録は、この画像編集装置を構成するコンピュータのメモリ内に対して行われるものである。
【0045】
この態様でも、登録対象の顔画像の好ましい特徴量は、顔の器官の特徴点の位置関係を示すものであるのが望ましい。なお、各登録情報は、第2の編集装置におけるのと同様に、各被写体に固有の識別情報(前記第2の画像編集装置と同様の名前情報など)により識別できるようにするのが望ましい。また登録情報の指定については、たとえば、所定の登録情報にかかる識別情報を入力することによって、その登録情報を指定することができる。
【0046】
上記構成によれば、過去に補正処理を行った被写体については、顔画像の特徴量とその補正内容とが対応づけて登録されるので、以後に同じ被写体が含まれる画像を入力した際には、その被写体にかかる登録情報を指定することにより、その被写体に対応する顔画像を検出した上で、前回と同じ内容の補正を行うことが可能となる。よって、処理を高速化することができ、また、過去の処理内容に沿って、ユーザーの意図する補正を確実に実行することができる。
【0047】
なお、前記メモリには、必ずしも、過去に処理したすべての被写体の情報を登録する必要はなく、たとえば、補正処理後に登録を行うかどうかの選択操作を受け付け、登録すべき旨の選択が行われたときに、登録処理を行うようにしてもよい。
【0048】
さらに、第1〜3の各画像編集装置において、前記画像検出手段は、前記画像入力手段より被写体の顔画像の位置を示す情報をリンクさせた画像が入力されたとき、そのリンク情報に基づき顔画像を検出するように構成することができる。
【0049】
前記顔画像の位置を示す情報をリンクさせた画像は、この発明の顔画像検出手段と同様の手段が設定された撮影装置により生成することができる。なお、リンク情報には、顔画像の位置を示す情報のほか、顔画像の大きさ、向きまでを含むことができる。このような構成によれば、入力された画像のリンク情報に基づき、顔画像を簡単に検出することができる。
【0050】
なお、前記した撮影装置に、この発明にかかる推論手段と同じ機能が付与されている場合には、顔画像の検出位置に加えて、被写体の人種、年齢、性別にかかる推論結果までがリンクした画像を生成することが可能である。このような画像を入力すれば、顔画像の検出処理を簡単に行うことができる上に、推論処理をスキップして、速やかに顔画像の補正処理を行うことができる。
【0051】
さらに、第1〜3の画像編集装置にかかる他の態様では、前記画像出力手段を、補正処理後の画像を印刷する手段とすることができる。この構成によれば、ユーザーが写真として焼き付けを行いたい画像を装置に入力すると、被写体に適した補正処理が行われた後、その補正処理後の画像が印刷されるようになり、被写体の顔の特徴を明瞭に捉えた写真を提供することができる。
【0052】
上記第1〜3の各画像編集装置(各種実施態様を含む。)は、ディジタルカメラ、スキャナ、またはメモリカードなどの記憶媒体から、ディジタル量の静止画像データを入力して補正し、補正処理後の画像を印刷したり、記憶媒体などに保存する装置として構成することができる。
【0053】
さらに、第1〜3の各画像編集装置は、前記画像入力手段を、コンピュータネットワークを介して処理対象の画像の送信を受ける手段として構成することができる。この場合、前記画像出力手段は、補正後の画像を印刷する手段、または、前記コンピュータネットワークを介して画像の送信元もしくはこの送信元から指定された配信先に補正後の画像を送信する手段として構成することができる。
【0054】
なお、このようにネットワーク対応型の装置とした場合、前記顔検出結果や推論結果に対する修正操作や、補正後の画像に対する修正操作、確定操作を受け付けるには、前記コンピュータネットワークを介してユーザの端末装置と通信を行う必要がある。また,第2の画像編集装置における情報入力手段も同様に、コンピュータネットワークを介した通信により、情報入力を受け付けるように構成する必要がある。
【0055】
上記構成によれば、コンピュータネットワークを介して、ユーザーから画像の補正依頼を受け付け、補正後の画像を、印刷してユーザーに送付する処理を行うことができる。また、前記コンピュータネットワークを介して、補正後の画像をユーザーまたはユーザーの指定した配信先に送信することもできる。この場合、前記コンピュータネットワークを、インターネットのような汎用のネットワークとすれば、不特定多数のユーザーからの画像送信を受け付けることができる。ただし、これに限らず、会員登録を行ったユーザーからの画像送信のみを受け付けるようにしてもよい。
【0056】
さらに、上記の第1〜3の画像編集装置において、画像入力手段を動画像データを取り込むように構成した場合、補正後の画像を出力する出力手段は、DVD(ディジタル・ビデオ・ディスク)のような画像記憶媒体に画像を格納する手段として構成することができる。または、所定の表示装置に、補正後の画像を順に出力する動画像表示手段として構成することもできる。
【0057】
上記構成の画像編集装置によれば、動画像を構成する各フレーム毎の画像に、それぞれ適正な顔画像の補正処理を行うことができる。なお、この場合の画像検出処理において、前のフレームで検出した顔画像の特徴量を用いて被写体の顔画像を追跡するようにすれば、同じ被写体には同様の内容による補正処理を行うことが可能となるから、被写体が動いても、顔画像の状態が変化するような不具合が生じず、高品質の動画像を得ることができる。
【0058】
この発明にかかる第1の画像編集方法は、人物を撮像して得られた画像を入力するステップ、前記入力画像に含まれる被写体の顔画像を検出するステップ、前記検出された顔画像を含む画像領域内の特徴量に基づき、前記顔画像について、少なくとも人種、年齢、性別のいずれかに対する推論処理を実行するステップ、前記推論処理における推論結果に基づき、前記顔画像の補正処理内容を決定するステップ、前記決定した内容による補正処理を前記顔画像に対して実行するステップ、前記補正処理後の顔画像を出力するステップ、の各ステップを実行することを特徴とする。
【0059】
また、この発明にかかる第2の画像編集方法は、人物を撮像して得られた画像を入力するステップ、前記入力画像に含まれる被写体の顔画像を検出するステップ、所定数の被写体について、それぞれその被写体の顔画像の特徴量および顔画像の補正に必要な情報が登録されたデータベースを、前記検出された顔画像の特徴量により照合して、前記入力画像に含まれる被写体を推定するステップ、前記推定された被写体について、前記データベースに登録された補正に必要な情報を用いて、前記顔画像を補正するステップ、前記補正処理後の顔画像を出力するステップ、の各ステップを実行することを特徴とする。
【0060】
さらに、この発明にかかる第3の画像編集方法は、人物を撮像して得られた画像を入力するステップ、前記入力画像に含まれる被写体の顔画像を検出するステップ、前記被写体について、その顔画像の補正処理内容を示す情報の入力を受け付けるステップ、前記検出された顔画像に対し、前記入力された情報に基づく内容による補正処理を実行するステップ、前記補正処理後の顔画像を出力するステップ、の各ステップを実行することを特徴とする。
【0061】
上記第1〜3の画像編集方法は、いずれも、各ステップを実行するためのプログラムをコンピュータに組みこむことにより実施することができる。いずれの方法も、画像編集を目的とする専用の装置のほか、パーソナルコンピュータのような汎用の装置において実行することができる。さらに、インターネットのようなコンピュータネットワークにおいて、各端末からの画像の送信を受け付けて編集処理を行うサーバシステムでも、各方法を実行することができる。
【0062】
【発明の実施の形態】
図1は、この発明が適用された画像編集装置の構成を示す。
この画像編集装置100は、写真印刷のサービスを行う業者の店内に設置されるもので、顧客のディジタルカメラにより得た画像、または印刷された写真から読み取った画像に補正処理を施し、その補正処理後の画像を印刷する処理を行うものである。なお、画像編集装置100は、業者の係員が操作する装置としても良いが、これに限らず、顧客自身が操作を行うセルフサービス式の機械として構成することもできる(以下の説明では、装置の操作を行う者のことを、「ユーザー」という。)。
【0063】
前記画像編集装置100は、コンピュータから成る本体部1に、イメージスキャナ2(以下、単に「スキャナ2」という。)、メモリカードリーダー3、入力部9、モニタ10、プリンタ11などの周辺機器を接続して成る。なお、前記スキャナ2は、印刷された写真を読み取るタイプのものに限らず、フィルムからの読み取りを専用に行うフィルム・スキャナとすることもできる。
【0064】
前記本体部1は、CPU4、メモリ5のほか、画像入力インターフェース6、USBインターフェース7、および、入出力インターフェース8を具備する。なお、図示のメモリ5は、ハードディスクのような大容量メモリであり、ROMやRAMはCPU4に含まれるものとする。メモリ5には、ウィンドウズ(登録商標)のようなオペレーティングシステムや、図2に示す各処理部に対応するプログラム、ユーザーデータベース47、補正内容を導き出すための設定テーブルなどが格納される。さらに、このメモリ5には、処理対象の画像を一時保存するための作業領域も設定される。
【0065】
画像入力インターフェース6は、前記スキャナ2をCPU4に接続するためのものである。USBインターフェース7は、ユニバーサル・シリアル・バス(Universal Serial Bus)の規格に準拠するインターフェースであって、前記メモリカードリーダー3をCPU4に接続するのに用いられる。なお、このUSBインターフェース7には、メモリカードリーダー3に代えて、ディジタルカメラを接続することもできる。
【0066】
入出力インターフェース8は、前記入力部9、モニタ10、プリンタ11の接続に使用される。モニタ10やプリンタ11は、カラー画像に対応する規格のものであり、また、入力部9は、キーボードやマウスにより構成される。
【0067】
CPU4は、前記スキャナ2またはメモリカードリーダー3のいずれかを入力先として選択し、この選択した装置からディジタル画像データを取り込んで、後記する補正処理を実行する。補正後の画像は、モニタ10に表示された後、入力部11による印刷指定操作に応じてプリンタ11に出力され、印刷処理が実行される。
【0068】
上記構成において、CPU4には、メモリ5に保存されたプログラムにより、図2に示すような機能が設定されている。これらの機能により、この実施例の画像編集装置100では、人物の顔画像を含む画像を取り込んだ場合には、この顔画像の位置や大きさなどを特定するとともに、被写体である人物の人種、年齢、性別を推定し、その推定結果に適合する補正パラメータを決定した上で、被写体の顔画像を補正するようにしている。
【0069】
図2において、画像取得部41は、前記スキャナ2またはメモリカードリーダー3からのディジタル画像を処理対象の画像として取り込んで、前記作業領域に格納するためのものである。顔検出処理部42は、処理対象の画像から被写体の顔画像を検出する。顔領域設定部43は、この検出結果に応じて、前記顔画像を含む所定大きさの領域を設定する。なお、この領域は、以後の推論処理や補正処理の対象領域となるもので、以下、「顔領域」と呼ぶ。
【0070】
推論処理部44は、設定された顔領域につき、その領域内の特徴量に基づき、被写体の人種、年代、性別などを推論する。画像補正処理部45は、前記推論処理の結果に適合する補正内容を決定し、その決定した内容に基づく補正処理を実行する。補正画像出力部46は、補正処理後の画像をモニタ10やプリンタ11に出力するためのものである。
【0071】
なお、この実施例では、標準的な補正として、肌色調整および逆光時の明るさ補正のためにR,G,Bの各階調を補正する処理を行うようにしている。この処理のために、この実施例では、あらかじめ、人種、年代をそれぞれ複数のカテゴリーに分類し、これらのカテゴリー、性別、および逆光の有無の組み合わせ毎に補正項目を設定する(たとえば、「20代の白人女性の逆光なし時の補正」、「30代の黄色人男性の逆光時の補正」など)。そして各項目毎に、補正パラメータとして、各階調の増減量または増減率を設定した設定テーブルを作成して、メモリ5内に保存している。画像補正処理部45は、前記推論処理部44の推論結果をこの設定テーブルと照合することにより、推論結果に応じた補正パラメータを読み出すことができる。
【0072】
ユーザーデータベース47は、この画像編集装置100が過去に処理した顔画像について、補正前の顔画像の特徴量と実行された補正内容とを対応づけて蓄積するためのものである。このユーザーデータベース47内の登録情報は、後記するように、顔検出処理や画像補正処理に用いられるもので、各登録情報には、それぞれインデックス情報として、顔画像に対応する個人の名前と識別コードとが付与されている。
【0073】
ユーザーインターフェース制御部48は、前記顔領域の設定結果、推論結果、画像補正結果を確認して、その誤りを修正したり、追加の情報を入力するほか、補正画像に対する確定操作を行う際に、前記入力部9およびモニタ10を用いて前記操作を支援する。さらに、このユーザーインターフェース制御部48は、処理を終了した顔画像にかかる情報をユーザーデータベース47に登録する操作や、新たな処理対象の画像を処理する際に、ユーザーデータベース47から使用可能な登録情報を呼び出す操作を支援する。さらに、この実施例では、前記した標準の補正以外のオプションの補正項目を指定し、その補正パラメータを設定する作業を、ユーザーインターフェース制御部48により支援するようにしている。
【0074】
図3は、顔検出処理の結果の表示例であって、画像20中の各人物の顔画像上に、それぞれ顔領域の境界線に応じた枠画像21,22が表示されている。
ユーザーインターフェース制御部48は、このような表示とともに、顔領域の設定を修正する操作や新規の顔領域を設定する操作を行うための操作画面を設定して、各種操作を受け付け、その操作の内容を顔領域設定部43に出力する。顔領域設定部43は、この操作の内容に応じて、設定した顔領域の場所や大きさを修正したり、不要な顔領域を削除したり、新規の顔領域を設定したりする。
【0075】
推論結果や補正パラメータの修正などについても、同様に、画像を表示した上で修正操作を行うようにしている。なお、この実施例では、推論結果とともに、この推論結果から導き出した補正パラメータについても、修正を受け付けるようにしている。
【0076】
以下、上記画像編集装置における画像編集処理の詳細な流れを説明する。
図4は、前記図2の各処理部の機能を用いて画像を印刷するまでの一連の手順を示す。なお、以下の説明では、各ステップを「ST」として示す。
【0077】
まず、ST1で、処理対象の画像を入力して前記メモリの作業領域に格納した後、つぎにST2に進んで、顔検出処理を実行する。
この顔検出処理では、入力画像に所定大きさの検索領域を走査して、顔画像の特徴点を検索する処理を行う。なお、画像上における顔画像の大きさは、撮影時の被写体までの距離やレンズ 倍率によって変わってくるので、前記検索処理では、検索領域の大きさを段階的に変更しながら、入力画像を繰り返し検索するのが望ましい。
【0078】
つぎのST3では、検出された顔画像について、以後の処理対象領域となる顔領域を設定する。
図5は、前記顔領域の設定例、およびこの設定に使用する各パラメータの具体例を示す。図示例では、顔画像中の各特徴点の中から、鼻の最も高い位置に対応する特徴点Pを検出し、この点Pの座標(xP,yP)を顔の検出位置としている。また、この点Pを起点にして、各種方向毎に額と髪との境界を検索し、この境界に相当する特徴点の中から点Pとの距離が最短になる点Qを求め、この点Qと前記点Pとの間の距離を、顔の大きさrとする。さらに、点Pから点Qの方向を向くベクトルCを設定し、画像の水平方向(x軸方向)に対する前記ベクトルCのなす角度を、顔の傾きθとして計測する。
【0079】
この実施例では、前記点Pの座標(xP,yP)、顔の大きさr、および顔の傾きθを、顔領域設定用のパラメータとしている。図5のUは、各パラメータにより設定された顔領域の一例である。この顔領域Uの大きさは、前記顔の大きさrに基づいて決められたものであり、その中心が点Pに対応し、また主軸がx軸に対して前記角度θだけ傾いた状態になるように、設定されている。
【0080】
図4に戻って、このようにして顔領域を設定すると、つぎのST4では、前記モニタ10に、顔領域の設定結果を、前記枠画像として表示する。この表示に対し、修正操作がなされると、その操作に応じて、顔領域設定用のパラメータの修正処理を行う(ST5,6)。
なお、ST5の修正操作は、設定された顔領域の位置や大きさを変更する操作のほか、顔領域を削除する操作、新たな顔領域を設定する操作も含む。これに対応して、ST6では、顔領域設定用のパラメータの値を変更する処理のほか、パラメータを削除する処理、新規のパラメータを設定する処理を実行する。
【0081】
顔領域の修正処理が行われた後に確定操作が行われると、ST7に進み、確定した顔領域について、種々の推論処理を実行する。なお、ST4での枠画像の表示に対し、修正操作が行われずにすぐに確定操作が行われた場合には、ST5が「NO」となってST7に進み、ST3で設定した顔領域に対する推論処理を実行する。
【0082】
ST7では、設定された顔領域につき、人種、年代、性別、および逆光の有無を推定するようにしている。人種の推定処理は、前記した非特許文献1に基づいて行うことも可能であるが、この実施例では、処理時間の短縮のために、顔領域内の輝度分布を用いて、人種および逆光の有無を同時に推定するようにしている。
【0083】
図6は、被写体や照明環境が異なる3つの事例について、顔領域内におけるR,G,Bの各色データおよび明度L(R,G,Bの総和平均)毎に検出したヒストグラムの例を示す。なお、ヒストグラムのスケールは、階調であって、図中、紙面の右方向にいくほど明るい状態を示す。
【0084】
図6(1)は、適正な照明環境で黄色人を撮影した場合のヒストグラムである。この場合のヒストグラムは、各色データとも、比較的に明るい方への分布が優勢となっており、とりわけ赤色成分の強度が強調された状態となる。
【0085】
図6(2)は、図6(1)と同じ黄色人を逆光状態で撮影した場合のヒストグラムである。この場合のヒストグラムでは、各色データの出現率は、図6(1)に比べて大幅に低下し、また暗い側に集中した分布状態となる。
【0086】
図6(3)は、適正な照明環境で黒人を撮影した場合のヒストグラムである。この場合のヒストグラムでは、暗い側と明るい側の両方にピークを持つ分布状態が得られる(暗い側は皮膚に対応し、明るい側は目や歯に対応すると考えられる。)
【0087】
この実施例では、あらかじめ、各人種毎に、それぞれ照明状態などが異なる複数種の撮影環境について輝度ヒストグラムのテンプレートを用意しており、処理対象の顔領域について検出したヒストグラムを各テンプレートと照合することにより、人種および逆光の有無を推定するようにしている。なお、前記ヒストグラムを、顔領域全体に限らず、目の部分や口の部分など、局所的な領域の輝度分布も検出して判別処理に利用するようにすれば、推定結果をより確かなものとすることができる。
【0088】
なお、年代,性別の推定は、非特許文献2に示すように、各器官にかかる特徴点の持つ特徴量を、サポートベクタマシンと称される推定システムに与える方法により実行するが、必ずしもこの方法に限定されるものではない。
【0089】
図4に戻って、一連の推論処理が終了すると、ST8では、この推論結果に基づきメモリ5内の設定テーブルを照合して、補正パラメータを決定する。
【0090】
つぎのST9では、前記推論結果および補正パラメータの内容を示す情報を、入力画像とともに表示する。この表示画面上で、所定の推論結果または補正パラメータを指定して修正する操作が行われると、ST10が「YES」となり、ST11において、前記修正に応じて、補正パラメータを修正する。
【0091】
ST11では、たとえば、表示画面上の顔画像にマウスカーソルを近づけると、その顔画像に対応する推論結果や補正パラメータを示す情報が表示され、修正を受け付けるようにすることができる。なお、ここで表示する補正パラメータは、具体的な数値ではなく、たとえば、「色白にする」「普通の肌色にする」「色黒にする」といった具体的な補正内容に置き換えて示すのが望ましい。
【0092】
さらに、オプションの補正を指定する操作が行われた場合は、ST12が「YES」となってST13に進み、ユーザーの操作に応じて、オプションの補正項目および補正パラメータを設定する処理を実行する。
なお、このST13でも、「シミ除去処理」「肌のスムージング補正」というように、具体的な補正内容をメニュー表示し、さらに選択操作に応じて細かい補正の内容を指定するメニューを提示すれば、ユーザーの要望に応じた補正項目と補正パラメータとを簡単に設定することができる。
【0093】
前記推論結果および補正パラメータに対する修正操作や、オプション補正の設定は、繰り返し実行することが可能である。所定の時点で、ユーザーが確定操作を行うと、ST14が「YES」となり、ST15において、その時点で設定されている補正項目および補正パラメータに基づき、画像補正処理を実行する。
【0094】
この後は、ST16において、補正処理後の画像(以下、「補正画像」という。)を表示する。なお、この実施例では、補正画像がユーザーの意図するものでない場合には、補正項目や補正パラメータを変更して再補正を実行できるように、印刷指定操作および再設定操作のいずれかを受け付けるようにしている。ここで、再設定操作があると、ST17が「NO」、ST18が「YES」となって、ST10に戻り、再度、推論結果や補正項目を修正したり、オプションの補正を追加することが可能となる。そして、再度の確定操作に応じてST15を実行することにより、前記入力画像の再補正処理が行われる。
【0095】
所定の時点での補正画像の表示に対して、印刷指定操作が行われると、ST17が「YES」となり、ST19に進む。ST19では、この時点で得ている補正画像をプリンタ11に出力し、印刷処理を行わせる。
【0096】
上記図4の手順によれば、標準設定された補正内容の中から被写体の人種、年代、性別に適合するものを自動的に選択して、写真として印刷することができる。また、推論結果に誤りがあったり、標準的な補正処理がユーザーの意図するものでない場合には、適宜、ユーザーインターフェースを用いて簡単に修正を行うことができるから、精度の高い補正処理を簡単に行うことができる。
【0097】
つぎに、前記したユーザーデータベース47内の登録情報を利用することにより、過去に処理対象とした顔画像に同じ内容の補正処理を実行する手順について説明する。
【0098】
図7の手順は、顔画像を検出した後に、この検出した顔画像に対応する登録情報を検索し、登録情報があれば、その情報に含まれる補正項目、補正パラメータを用いた補正を行うようにしたものである。
【0099】
まず、ST21〜23において、前記図4のST1〜3と同様の処理により、入力画像中の顔画像を検出して顔領域を設定する。つぎのST24では、検出した顔画像の特徴量を用いてユーザーデータベース47を検索する。この結果、前記顔画像の特徴量に類似する特徴量を含む登録情報が見つかると、ST25からST26に進み、この登録情報に含まれる補正項目および補正パラメータに基づき、前記顔領域内の画像を補正する。なお、この補正処理を行う前には、ヒットした登録情報のインデックス情報(前記した個人名など)を表示し、ユーザーに確認させるようにするのが望ましい。
【0100】
つぎのST27では、前記補正処理により得た補正画像を表示する。この実施例でも、この補正画像がユーザーの意図するものでなかった場合には、再補正ができるように、修正指定を受け付けるようにしている。修正指定操作があると、ST28が「NO」、ST30が「YES」となって、ST31に進み、前記補正処理に使用した補正項目および補正パラメータを表示する。この表示に対し、修正操作が行われると、ST32からST33に進み、前記修正操作に応じて補正項目や補正パラメータを修正する。そして、つぎのST34では、修正後の補正項目および補正パラメータに基づき、前記入力画像を再補正し、しかる後にST27に戻る。
【0101】
このようにして、所定の時点での補正画像の表示に対し、印刷指定操作が行われると、ST28が「YES」となってST29に進み、前記補正画像の印刷処理が実行される。
【0102】
なお、前記ST24の検索処理において、検出した顔画像に対応する登録情報が見つからなかった場合には、ST25が「NO」となるが、この場合には、前記図4のST4以降の処理が行われる。
【0103】
つぎに、図8の手順では、前記ユーザーデータベース47に補正処理の対象となる人物の情報が登録されていることを前提として、その人物を特定する識別データを入力することにより、補正処理対象の人物を指定するようにしている。さらに、この手順では、複数の画像を順に入力し、この中から前記指定した人物を含む画像を検出し、その画像に登録情報に沿った補正処理を行うようにしている。
【0104】
なお、識別データは、ユーザーデータベースのインデックス情報に対応するものであり、画像入力に先立ち、最初のST41で入力される。図8には示していないが、CPU4は、この識別データの入力があると、ユーザーデータベース47を検索し、該当する登録情報を特定する。
【0105】
この後、ST42において、処理対象の画像を入力すると、つぎのST43では、前記識別データに対応する登録情報に含まれる特徴量により前記入力画像を検索する。この検索処理により、登録情報に類似する特徴量を持つ画像領域が見つかると、この領域を前記顔画像として特定する。これによりST44が「YES」となってST45に進み、前記登録情報に含まれる補正項目および補正パラメータによる補正処理を実行する。
【0106】
この後は、ST46からST42に戻る。よって、以下、処理対象の画像を順に取り込みながら、顔検出処理および補正処理を実行することになる。なお、ST43の検索処理において前記登録情報に類似する特徴量を持つ画像領域が見つからなかった場合には、ST44が「NO」となり、ST45の補正処理はスキップされる。
【0107】
このようにしてすべての画像に対する処理が終了すると、ST46が「YES」となってST47に進み、補正画像を表示する。なお、この実施例でも、前記図7の実施例と同様に、修正指定操作があれば、使用した補正項目および補正パラメータを表示して修正操作を受け付け、修正操作に応じて補正項目、補正パラメータを修正し、画像の再補正処理を行う(ST50〜54)。そして、所定の時点で印刷指定操作があると、ST48が「YES」となってST49に進み、補正画像の印刷処理を実行する。
【0108】
なお、ST48以降の手順は、説明を簡単にするために、図7のST28以降と同様の流れにしてあるが、実際の処理においては、補正処理が行われた画像1枚1枚を順に表示して、印刷や再補正を個別に行うようにするのが望ましい。
【0109】
上記図7,8の実施例によれば、既に補正処理の対象となり、ユーザーデータベース47に登録された人物であれば、過去に実行した補正内容を呼び出して、同様の補正処理を実行することが可能となるので、一度、詳細に補正の内容を設定して登録しておけば、以後は、同じ内容の補正処理を速やかに実行することができる。また図8の実施例によれば、複数枚の画像の中から処理対象の人物が含まれる画像を自動的に選択して、補正処理を施すことができる。
【0110】
なお、図7,8において、登録された補正内容による補正処理を行った後に、補正項目や補正パラメータを修正した場合には、その修正された補正項目や補正パラメータにより登録情報を書き換えることができる。また、いずれの実施例では、最終的には印刷指定操作によって、必ず画像印刷処理を行わせるようにしているが、これに限らず、キャンセル操作によって、印刷処理を中止できるようにしてもよい。
【0111】
また、このように、各人の顔画像の特徴量と固有の補正内容とを登録する場合には、最初の登録時の画像に対しては、顔画像の検出処理のみを実行し、具体的な補正項目や補正パラメータは、ユーザーに入力させるようにしてもよい。この場合、前記したメニュー表示による設定に代えて、画像補正用ソフトの機能等を用いて、入力画像をユーザーに補正させ、その補正内容に該当する補正項目や補正パラメータを登録するようにしてもよい。
【0112】
ところで、ここまでに示した実施例は、図1に示した構成の画像編集装置100で実行されるものであるが、この種の画像処理は単体の装置に限らず、インターネットのようなコンピュータネットワーク上で展開することもできる。
【0113】
図9は、インターネットを利用した画像編集システムの例を示す。図中、ユーザーPC103,ユーザー携帯104は、任意のユーザーが使用する端末装置であり、インターネット102を介して画像編集サーバー101との通信が可能に設定される。なお、「PC」はパーソナルコンピュータを、「携帯」は携帯電話を、それぞれ意味する。
【0114】
画像編集サーバー101は、前記図2に示した各機能を具備するもので、各ユーザーの端末装置103,104から送信される画像を受け付け、前記図7,8,9の各実施例と同様の処理を実行することができる。なお、この装置における画像取得部41は、インターネット102からの画像送信を受け付けるように設定される。また、ユーザーインターフェース制御部48は、画像や各種操作用のメニュー画面等を提示したWebページを、インターネット102を介して端末装置103,104に配信するように設定される。
【0115】
また補正画像出力部46は、補正処理後の画像を端末装置103,104に送信するものとすることができる。また、このシステムの利用を会員登録制として、画像編集サーバー101、またはこのサーバーに接続される事務管理用サーバー(図示せず。)に、各会員の住所データベースを持たせたり、各ユーザーに住所等の情報を送信させるようにすれば、図1の画像編集装置100と同様に、補正画像出力部46により補正処理後の画像を印刷し、得られた写真をユーザーの元に送付することもできる。なお、画像の送信先、送付先は、ユーザーの元に限らず、ユーザーにより指定された第3者とすることもできる。
【0116】
上記画像編集システムによれば、パーソナルコンピュータを使用するユーザーは、このコンピュータにディジタルカメラやメモリカードを接続して画像データの読み込みを行い、画像編集サーバー101に送信して、編集サービスを受けることができる。また、カメラ機能が組みこまれた携帯電話を使用するユーザーであれば、撮影を行った後、その撮影によって得た画像をそのまま画像編集サーバー101に送信して、編集サービスを受けることができる。このように、ユーザーは、インターネット102を介した通信により、自身の撮影により得た画像の補正を簡単に依頼できる上、顔画像が適正に補正された補正画像を簡単に得ることができ、利便性を大いに高めることができる。
【0117】
なお、前記図1の画像編集装置100や図9の画像編集サーバー101には、あらかじめ顔画像の検出処理や推論処理を経て、これらの処理結果を示す情報がリンクした画像を入力することもできる。このような画像によれば、リンク情報を用いて、顔画像の検出処理を簡単に実行した後、推論情報に基づき補正内容を速やかに決定することができ、処理を高速化できる。
【0118】
【発明の効果】
この発明によれば、被写体の顔画像を検出し、この顔画像に適切な補正内容を決定した上で画像補正処理を行うことができるので、個々の被写体について、鮮明かつ実物のイメージに近くなるように、顔画像を補正することが可能となる。また、適宜、推論結果や補正内容を修正できるようにすることによって、各人の要望に応じた詳細な補正を簡単に行うことができる。
【図面の簡単な説明】
【図1】この発明が適用された画像編集装置の構成を示すブロック図である。
【図2】図1の画像編集装置のCPUに設定される機能を示す図である。
【図3】顔領域の検出結果の表示例を示す図である。
【図4】画像編集処理の一連の手順を示すフローチャートである。
【図5】顔領域設定用のパラメータの例を示す図である。
【図6】顔領域内の輝度分布を人種や照明状態の違い毎に示すヒストグラムである。
【図7】登録情報を用いて画像補正を行う場合の手順を示すフローチャートである。
【図8】登録情報を用いて画像補正を行う場合の手順を示すフローチャートである。
【図9】この発明が適用された画像編集システムの構成を示すブロック図である。
【符号の説明】
100 画像編集装置
101 画像編集サーバー
1 本体部
2 スキャナ
3 メモリカードリーダー
4 CPU
5 メモリ
9 入力部
11 プリンタ
41 画像取得部
42 顔検出処理部
43 顔領域設定部
44 推論処理部
45 画像補正処理部
46 補正画像出力部
47 ユーザーデータベース
48 ユーザーインターフェース制御部
Claims (13)
- 人物を撮像して得られた画像を入力する画像入力手段と、
前記入力画像に含まれる被写体の顔画像を検出する顔画像検出手段と、
前記顔画像検出手段により検出された顔画像を含む画像領域内の特徴量に基づき、前記顔画像について、少なくとも人種、年齢、性別のいずれかに対する推論処理を実行する推論手段と、
前記推論手段による推論結果に基づき、前記顔画像の補正処理内容を決定する決定手段と、
前記顔画像に対し、前記決定手段が決定した内容による補正処理を実行する顔画像補正手段と、
前記顔画像補正手段による補正処理後の画像を出力する画像出力手段とを具備して成る画像編集装置。 - 人物を撮像して得られた画像を入力する画像入力手段と、
前記入力画像に含まれる被写体の顔画像を検出する顔画像検出手段と、
所定数の被写体について、それぞれその被写体の顔画像の特徴量およびその顔画像の補正に必要な情報を前記被写体に固有の識別情報に対応づけた登録情報を保持する登録手段と、
前記顔画像検出手段により検出された顔画像の特徴量を前記登録手段の登録情報と照合して前記被写体を推定する推論手段と、
前記推論手段により推定された被写体の登録情報を用いて前記検出された顔画像の補正処理を実行する顔画像補正手段と、
前記顔画像補正手段による補正処理後の画像を出力する画像出力手段とを具備して成る画像編集装置。 - 請求項1または2に記載された画像編集装置において、
前記顔画像検出手段は、前記顔画像の検出結果に対する修正操作を受け付けて、前記顔画像の検出結果を修正する手段を含んで成る画像編集装置。 - 請求項1〜3のいずれかに記載された画像編集装置において、
前記推論手段は、前記推論結果に対する修正操作を受け付けて、前記推論結果を修正する手段を含んで成る画像編集装置。 - 請求項1〜4のいずれかに記載された画像編集装置において、前記顔画像補正手段は、補正処理後にその補正内容の修正操作を受け付けて、修正された内容に基づき前記顔画像の再補正を実行する手段を含み、
前記画像出力手段は、確定操作に応じて、その時点における最新の補正処理画像を出力する画像編集装置。 - 人物を撮像して得られた画像を入力する画像入力手段と、
前記入力画像に含まれる被写体の顔画像を検出する顔画像検出手段と、
前記被写体について、その顔画像の補正処理内容を示す情報を入力するための情報入力手段と、
前記顔画像検出手段により検出された顔画像に対し、前記情報入力手段より入力された情報に基づく内容による補正処理を実行する顔画像補正手段と、
前記顔画像補正手段による補正処理後の画像を出力する画像出力手段とを具備して成る画像編集装置。 - 請求項1または6に記載された画像編集装置において、
前記顔画像検出手段により検出された顔画像の特徴量と顔画像補正手段が実行した補正処理内容とを対応づけた登録情報をメモリに登録する登録処理手段を具備し、
前記顔画像検出手段は、所定の登録情報を指定する操作に応じて、この指定された登録情報に含まれる特徴量を用いた検索処理により、前記入力画像から顔画像を検出することが可能に設定され、
前記顔画像補正手段は、前記検索処理により顔画像が検出されたとき、この検出された顔画像に対し、前記指定された登録情報に含まれる補正処理内容による補正処理を実行する画像編集装置。 - 請求項1〜7のいずれかに記載された画像編集装置において、前記顔画像検出手段は、前記画像入力手段より、被写体の顔画像の位置を示す情報をリンクさせた画像が入力されたとき、そのリンク情報に基づき顔画像を検出する画像編集装置。
- 請求項1〜8のいずれかに記載された画像編集装置において、前記画像出力手段は、前記補正処理後の画像を印刷する手段である画像編集装置。
- 請求項1〜8のいずれかに記載された画像編集装置において、前記画像入力手段は、コンピュータネットワークを介して処理対象の画像の送信を受ける手段であり、
前記画像出力手段は、補正後の画像を印刷する手段、または、前記コンピュータネットワークを介して前記画像の送信元もしくはこの送信元から指定された配信先に前記補正後の画像を送信する手段である画像編集装置。 - 人物を撮像して得られた画像を入力するステップ、
前記入力画像に含まれる被写体の顔画像を検出するステップ、
前記検出された顔画像を含む画像領域内の特徴量に基づき、前記顔画像について、少なくとも人種、年齢、性別のいずれかに対する推論処理を実行するステップ、
前記推論処理における推論結果に基づき、前記顔画像の補正処理内容を決定するステップ、
前記決定した内容による補正処理を前記顔画像に対して実行するステップ、
前記補正処理後の顔画像を出力するステップ、
の各ステップを実行することを特徴とする画像編集方法。 - 人物を撮像して得られた画像を入力するステップ、
前記入力画像に含まれる被写体の顔画像を検出するステップ、
所定数の被写体について、顔画像の特徴量および顔画像の補正に必要な情報が登録されたデータベースを、前記検出された顔画像の特徴量により照合して、前記入力画像に含まれる被写体を推定するステップ、
前記推定された被写体について、前記データベースに登録された補正に必要な情報を用いて、前記顔画像を補正するステップ、
前記補正処理後の顔画像を出力するステップ、
の各ステップを実行することを特徴とする画像編集方法。 - 人物を撮像して得られた画像を入力するステップ、
前記入力画像に含まれる被写体の顔画像を検出するステップ、
前記被写体について、その顔画像の補正処理内容を示す情報の入力を受け付けるステップ、
前記検出された顔画像に対し、前記入力された情報に基づく内容による補正処理を実行するステップ、
前記補正処理後の顔画像を出力するステップ、
の各ステップを実行することを特徴とする画像編集方法。
Priority Applications (6)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2003033485A JP4277534B2 (ja) | 2003-02-12 | 2003-02-12 | 画像編集装置および画像編集方法 |
AT04100497T ATE366030T1 (de) | 2003-02-12 | 2004-02-10 | Vorrichtung, verfahren und programm zur bearbeitung von bilddaten |
EP04100497A EP1447973B1 (en) | 2003-02-12 | 2004-02-10 | Image editing apparatus, image editing method and program |
DE602004007172T DE602004007172T2 (de) | 2003-02-12 | 2004-02-10 | Vorrichtung, Verfahren und Programm zur Bearbeitung von Bilddaten |
US10/776,456 US20040228528A1 (en) | 2003-02-12 | 2004-02-11 | Image editing apparatus, image editing method and program |
CNA2004100039671A CN1522048A (zh) | 2003-02-12 | 2004-02-12 | 图像编辑装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2003033485A JP4277534B2 (ja) | 2003-02-12 | 2003-02-12 | 画像編集装置および画像編集方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2004246456A true JP2004246456A (ja) | 2004-09-02 |
JP4277534B2 JP4277534B2 (ja) | 2009-06-10 |
Family
ID=32677579
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2003033485A Expired - Fee Related JP4277534B2 (ja) | 2003-02-12 | 2003-02-12 | 画像編集装置および画像編集方法 |
Country Status (6)
Country | Link |
---|---|
US (1) | US20040228528A1 (ja) |
EP (1) | EP1447973B1 (ja) |
JP (1) | JP4277534B2 (ja) |
CN (1) | CN1522048A (ja) |
AT (1) | ATE366030T1 (ja) |
DE (1) | DE602004007172T2 (ja) |
Cited By (34)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006012062A (ja) * | 2004-06-29 | 2006-01-12 | Canon Inc | 画像処理装置及びその方法、プログラム、撮像装置 |
JP2006133873A (ja) * | 2004-11-02 | 2006-05-25 | Canon Inc | 画像処理方法及びその装置 |
JP2006277274A (ja) * | 2005-03-29 | 2006-10-12 | Seiko Epson Corp | 画像処理装置、印刷装置、画像処理方法、および、画像処理プログラム |
JP2007143047A (ja) * | 2005-11-22 | 2007-06-07 | Fujifilm Corp | 画像処理システム及び画像処理プログラム |
JP2007235572A (ja) * | 2006-03-01 | 2007-09-13 | Sony Corp | 画像処理装置および方法、プログラム記録媒体、並びにプログラム |
JP2007282119A (ja) * | 2006-04-11 | 2007-10-25 | Nikon Corp | 電子カメラおよび画像処理装置 |
JP2008245666A (ja) * | 2007-03-29 | 2008-10-16 | Tokiwa Yakuhin Kogyo Kk | 皮膚の色素沈着評価方法およびその提示方法 |
JP2009065290A (ja) * | 2007-09-04 | 2009-03-26 | Canon Inc | 画像処理装置及び方法、及び撮像装置 |
JP2009140066A (ja) * | 2007-12-04 | 2009-06-25 | Alpine Electronics Inc | 歪曲補正画像生成ユニットおよび歪曲補正画像生成方法 |
JP2010521719A (ja) * | 2007-03-14 | 2010-06-24 | オリンパス株式会社 | 画像処理システムおよび画像処理プログラム |
JP2010272109A (ja) * | 2009-04-20 | 2010-12-02 | Fujifilm Corp | 画像処理装置、画像処理方法およびプログラム |
JP2011061868A (ja) * | 2010-12-16 | 2011-03-24 | Seiko Epson Corp | 画像処理装置、印刷装置、画像処理方法、および、画像処理プログラム |
US8139854B2 (en) | 2005-08-05 | 2012-03-20 | Samsung Electronics Co., Ltd. | Method and apparatus for performing conversion of skin color into preference color by applying face detection and skin area detection |
JP2012074828A (ja) * | 2010-09-28 | 2012-04-12 | Casio Comput Co Ltd | 撮像装置及びプログラム |
JP2012099147A (ja) * | 2012-02-07 | 2012-05-24 | Canon Inc | 画像処理装置およびプログラム |
US8212894B2 (en) | 2006-04-11 | 2012-07-03 | Nikon Corporation | Electronic camera having a face detecting function of a subject |
JP2012128881A (ja) * | 2012-03-21 | 2012-07-05 | Olympus Corp | 画像処理方法 |
US8306280B2 (en) | 2006-04-11 | 2012-11-06 | Nikon Corporation | Electronic camera and image processing apparatus |
JP2013065119A (ja) * | 2011-09-15 | 2013-04-11 | Toshiba Corp | 顔認証装置及び顔認証方法 |
JP2013164796A (ja) * | 2012-02-13 | 2013-08-22 | Ricoh Co Ltd | 画像処理装置、画像処理方法およびプログラム |
US8570391B2 (en) | 2008-12-18 | 2013-10-29 | Olympus Imaging Corp. | Imaging apparatus and image processing method used in imaging device |
JP2014021902A (ja) * | 2012-07-23 | 2014-02-03 | Olympus Corp | サーバシステム、画像処理システム、プログラム及び画像処理方法 |
US9098760B2 (en) | 2011-09-15 | 2015-08-04 | Kabushiki Kaisha Toshiba | Face recognizing apparatus and face recognizing method |
US9154691B2 (en) | 2012-04-20 | 2015-10-06 | Fujifilm Corporation | Image capturing apparatus, image capturing method, and program |
JP2015179223A (ja) * | 2014-03-20 | 2015-10-08 | フリュー株式会社 | サーバ、写真撮影編集装置、情報処理端末、制御プログラム、および記録媒体 |
JP2016503546A (ja) * | 2013-08-15 | 2016-02-04 | シャオミ・インコーポレイテッド | 画像処理方法、画像処理装置、端末装置、プログラム及び記録媒体 |
KR20160021738A (ko) * | 2014-07-23 | 2016-02-26 | 시아오미 아이엔씨. | 피부색 조절방법, 장치, 프로그램 및 기록매체 |
JP2016057775A (ja) * | 2014-09-08 | 2016-04-21 | オムロン株式会社 | 似顔絵生成装置、似顔絵生成方法 |
JP2016148933A (ja) * | 2015-02-10 | 2016-08-18 | キヤノン株式会社 | 画像処理装置および画像処理方法 |
US9652662B2 (en) | 2012-12-27 | 2017-05-16 | Panasonic Intellectual Property Management Co., Ltd. | Image processing device and image processing method |
KR101743520B1 (ko) * | 2011-04-09 | 2017-06-08 | 에스프린팅솔루션 주식회사 | 색상 변환 장치 및 그 방법 |
US9779527B2 (en) | 2013-08-15 | 2017-10-03 | Xiaomi Inc. | Method, terminal device and storage medium for processing image |
JP2017199008A (ja) * | 2017-06-12 | 2017-11-02 | フリュー株式会社 | 写真撮影遊戯機、制御方法、並びにプログラム |
JP2017201734A (ja) * | 2016-05-02 | 2017-11-09 | 三菱電機株式会社 | プリントシステム |
Families Citing this family (42)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP1288859A1 (de) * | 2001-09-03 | 2003-03-05 | Agfa-Gevaert AG | Verfahren zum automatischen Erkennen von rote-Augen-Defekten in fotografischen Bilddaten |
JP4117207B2 (ja) * | 2003-03-31 | 2008-07-16 | 富士フイルム株式会社 | 画像処理サーバ |
JP2005303908A (ja) * | 2004-04-15 | 2005-10-27 | Fuji Photo Film Co Ltd | 画像編集装置,方法およびプログラム |
US7869630B2 (en) | 2005-03-29 | 2011-01-11 | Seiko Epson Corporation | Apparatus and method for processing image |
JP4750520B2 (ja) * | 2005-09-21 | 2011-08-17 | 富士フイルム株式会社 | 人物画像補正装置および方法 |
JP4718952B2 (ja) * | 2005-09-27 | 2011-07-06 | 富士フイルム株式会社 | 画像補正方法および画像補正システム |
US7751599B2 (en) * | 2006-08-09 | 2010-07-06 | Arcsoft, Inc. | Method for driving virtual facial expressions by automatically detecting facial expressions of a face image |
US7986867B2 (en) * | 2007-01-26 | 2011-07-26 | Myspace, Inc. | Video downloading and scrubbing system and method |
US8218830B2 (en) * | 2007-01-29 | 2012-07-10 | Myspace Llc | Image editing system and method |
WO2008094951A1 (en) * | 2007-01-29 | 2008-08-07 | Flektor, Inc. | Image editing system and method |
ES2334079B1 (es) * | 2007-03-09 | 2010-10-13 | Universidad De Las Palmas De Gran Canaria | Expositor virtual. |
WO2008137608A1 (en) * | 2007-05-01 | 2008-11-13 | Flektor, Inc. | System and method for flow control in web-based video editing system |
KR101488795B1 (ko) * | 2008-03-25 | 2015-02-04 | 엘지전자 주식회사 | 휴대 단말기 및 그 제어방법 |
CN102150180A (zh) * | 2008-10-14 | 2011-08-10 | 松下电器产业株式会社 | 人脸识别装置及人脸识别方法 |
JP5299912B2 (ja) * | 2009-04-20 | 2013-09-25 | 株式会社ザクティ | 撮像装置及び画像ファイルのデータ構造 |
US8339506B2 (en) * | 2009-04-24 | 2012-12-25 | Qualcomm Incorporated | Image capture parameter adjustment using face brightness information |
JP5683882B2 (ja) | 2009-10-15 | 2015-03-11 | オリンパス株式会社 | 画像処理装置、画像処理方法および画像処理プログラム |
US8558331B2 (en) * | 2009-12-08 | 2013-10-15 | Qualcomm Incorporated | Magnetic tunnel junction device |
US8644563B2 (en) * | 2009-12-14 | 2014-02-04 | Microsoft Corporation | Recognition of faces using prior behavior |
US8526684B2 (en) * | 2009-12-14 | 2013-09-03 | Microsoft Corporation | Flexible image comparison and face matching application |
CN108391052A (zh) * | 2013-01-21 | 2018-08-10 | 联想(北京)有限公司 | 信息处理方法及电子设备 |
US10558848B2 (en) | 2017-10-05 | 2020-02-11 | Duelight Llc | System, method, and computer program for capturing an image with correct skin tone exposure |
US9626597B2 (en) | 2013-05-09 | 2017-04-18 | Tencent Technology (Shenzhen) Company Limited | Systems and methods for facial age identification |
CN104143079B (zh) * | 2013-05-10 | 2016-08-17 | 腾讯科技(深圳)有限公司 | 人脸属性识别的方法和*** |
CN103489107B (zh) * | 2013-08-16 | 2015-11-25 | 北京京东尚科信息技术有限公司 | 一种制作虚拟试衣模特图像的方法和装置 |
CN103605975B (zh) * | 2013-11-28 | 2018-10-19 | 小米科技有限责任公司 | 一种图像处理的方法、装置及终端设备 |
CN104184942A (zh) * | 2014-07-28 | 2014-12-03 | 联想(北京)有限公司 | 一种信息处理的方法及电子设备 |
CN104574299A (zh) * | 2014-12-25 | 2015-04-29 | 小米科技有限责任公司 | 人脸图片处理方法及装置 |
CN104537630A (zh) * | 2015-01-22 | 2015-04-22 | 厦门美图之家科技有限公司 | 一种基于年龄估计的图像美颜方法和装置 |
CN104751419B (zh) * | 2015-03-05 | 2018-03-27 | 广东欧珀移动通信有限公司 | 一种照片显示调节方法及终端 |
CN104951770B (zh) * | 2015-07-02 | 2018-09-04 | 广东欧珀移动通信有限公司 | 人脸图像数据库的构建方法、应用方法及相应装置 |
CN105069007B (zh) * | 2015-07-02 | 2018-01-19 | 广东欧珀移动通信有限公司 | 一种建立美颜数据库的方法及装置 |
CN104966267B (zh) * | 2015-07-02 | 2018-01-19 | 广东欧珀移动通信有限公司 | 一种美颜用户图像的方法及装置 |
CN105516585B (zh) * | 2015-11-30 | 2019-08-16 | 努比亚技术有限公司 | 一种自动调整肤色的装置和方法 |
KR102488563B1 (ko) * | 2016-07-29 | 2023-01-17 | 삼성전자주식회사 | 차등적 뷰티효과 처리 장치 및 방법 |
US10621771B2 (en) * | 2017-03-21 | 2020-04-14 | The Procter & Gamble Company | Methods for age appearance simulation |
JP6839771B2 (ja) * | 2017-04-20 | 2021-03-10 | スノー コーポレーション | 補正パターン分析による映像補正方法およびシステム |
CN107194868A (zh) * | 2017-05-19 | 2017-09-22 | 成都通甲优博科技有限责任公司 | 一种人脸图像生成方法及装置 |
CN109167921B (zh) * | 2018-10-18 | 2020-10-20 | 北京小米移动软件有限公司 | 拍摄方法、装置、终端及存储介质 |
CN109377535A (zh) * | 2018-10-24 | 2019-02-22 | 电子科技大学 | 面部属性自动编辑***、方法、存储介质和终端 |
CN110443769B (zh) * | 2019-08-08 | 2022-02-08 | Oppo广东移动通信有限公司 | 图像处理方法、图像处理装置及终端设备 |
CN111093035B (zh) * | 2019-12-31 | 2022-12-27 | 维沃移动通信有限公司 | 图像处理方法、电子设备及存储介质 |
Citations (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0568262A (ja) * | 1991-03-13 | 1993-03-19 | Olympus Optical Co Ltd | ビデオidフオトプリント装置及び顔色変換装置 |
US5296945A (en) * | 1991-03-13 | 1994-03-22 | Olympus Optical Co., Ltd. | Video ID photo printing apparatus and complexion converting apparatus |
JPH08123940A (ja) * | 1994-10-21 | 1996-05-17 | Olympus Optical Co Ltd | 画像領域抽出装置及びその画像領域抽出方法 |
JPH1021377A (ja) * | 1996-07-01 | 1998-01-23 | Casio Comput Co Ltd | 画像処理装置 |
JPH11175724A (ja) * | 1997-12-11 | 1999-07-02 | Toshiba Tec Corp | 人物属性識別装置 |
JPH11328359A (ja) * | 1998-05-08 | 1999-11-30 | Fuji Photo Film Co Ltd | 画像処理方法および装置 |
JP2000114360A (ja) * | 1998-10-02 | 2000-04-21 | Wacker Siltronic G Fuer Halbleitermaterialien Ag | トレ―収容装置 |
EP1014172A1 (en) * | 1998-12-21 | 2000-06-28 | Eastman Kodak Company | Method and apparatus for modifying a portion of an image in accordance with colorimetric parameters |
JP2000188768A (ja) * | 1998-12-22 | 2000-07-04 | Victor Co Of Japan Ltd | 自動階調補正方法 |
JP2000261650A (ja) * | 1999-03-05 | 2000-09-22 | Toshiba Corp | 画像処理装置 |
US20010005222A1 (en) * | 1999-12-24 | 2001-06-28 | Yoshihiro Yamaguchi | Identification photo system and image processing method |
US20010035988A1 (en) * | 2000-04-14 | 2001-11-01 | Satoshi Semba | Color image processing apparatus and method, and computer- readable recording medium in which color image processing program is recorded |
US20020015514A1 (en) * | 2000-04-13 | 2002-02-07 | Naoto Kinjo | Image processing method |
JP2002077592A (ja) * | 2000-04-13 | 2002-03-15 | Fuji Photo Film Co Ltd | 画像処理方法 |
US20020113862A1 (en) * | 2000-11-10 | 2002-08-22 | Center Julian L. | Videoconferencing method with tracking of face and dynamic bandwidth allocation |
JP2002354185A (ja) * | 2001-05-23 | 2002-12-06 | Konica Corp | ネットワークフォトサービス提供方法、ネットワークフォトサービス装置およびネットワークフォトサービスプログラム |
JP2003092700A (ja) * | 2001-09-17 | 2003-03-28 | Ricoh Co Ltd | デジタルカメラ撮像装置 |
JP4218348B2 (ja) * | 2003-01-17 | 2009-02-04 | オムロン株式会社 | 撮影装置 |
Family Cites Families (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5638136A (en) * | 1992-01-13 | 1997-06-10 | Mitsubishi Denki Kabushiki Kaisha | Method and apparatus for detecting flesh tones in an image |
US5715377A (en) * | 1994-07-21 | 1998-02-03 | Matsushita Electric Industrial Co. Ltd. | Gray level correction apparatus |
JPH10268447A (ja) * | 1997-03-21 | 1998-10-09 | Fuji Photo Film Co Ltd | 画像処理装置及び写真焼付装置 |
US6373968B2 (en) * | 1997-06-06 | 2002-04-16 | Oki Electric Industry Co., Ltd. | System for identifying individuals |
EP0927952B1 (en) * | 1997-12-30 | 2003-05-07 | STMicroelectronics S.r.l. | Digital image color correction device employing fuzzy logic |
US7057636B1 (en) * | 1998-12-22 | 2006-06-06 | Koninklijke Philips Electronics N.V. | Conferencing system and method for the automatic determination of preset positions corresponding to participants in video-mediated communications |
US6806898B1 (en) * | 2000-03-20 | 2004-10-19 | Microsoft Corp. | System and method for automatically adjusting gaze and head orientation for video conferencing |
CA2359269A1 (en) * | 2001-10-17 | 2003-04-17 | Biodentity Systems Corporation | Face imaging system for recordal and automated identity confirmation |
US7082211B2 (en) * | 2002-05-31 | 2006-07-25 | Eastman Kodak Company | Method and system for enhancing portrait images |
US20040228505A1 (en) * | 2003-04-14 | 2004-11-18 | Fuji Photo Film Co., Ltd. | Image characteristic portion extraction method, computer readable medium, and data collection and processing device |
US7574016B2 (en) * | 2003-06-26 | 2009-08-11 | Fotonation Vision Limited | Digital image processing using face detection information |
JP4824411B2 (ja) * | 2005-01-20 | 2011-11-30 | パナソニック株式会社 | 顔抽出装置、半導体集積回路 |
-
2003
- 2003-02-12 JP JP2003033485A patent/JP4277534B2/ja not_active Expired - Fee Related
-
2004
- 2004-02-10 EP EP04100497A patent/EP1447973B1/en not_active Expired - Lifetime
- 2004-02-10 DE DE602004007172T patent/DE602004007172T2/de not_active Expired - Lifetime
- 2004-02-10 AT AT04100497T patent/ATE366030T1/de not_active IP Right Cessation
- 2004-02-11 US US10/776,456 patent/US20040228528A1/en not_active Abandoned
- 2004-02-12 CN CNA2004100039671A patent/CN1522048A/zh active Pending
Patent Citations (20)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0568262A (ja) * | 1991-03-13 | 1993-03-19 | Olympus Optical Co Ltd | ビデオidフオトプリント装置及び顔色変換装置 |
US5296945A (en) * | 1991-03-13 | 1994-03-22 | Olympus Optical Co., Ltd. | Video ID photo printing apparatus and complexion converting apparatus |
JPH08123940A (ja) * | 1994-10-21 | 1996-05-17 | Olympus Optical Co Ltd | 画像領域抽出装置及びその画像領域抽出方法 |
JPH1021377A (ja) * | 1996-07-01 | 1998-01-23 | Casio Comput Co Ltd | 画像処理装置 |
JPH11175724A (ja) * | 1997-12-11 | 1999-07-02 | Toshiba Tec Corp | 人物属性識別装置 |
JPH11328359A (ja) * | 1998-05-08 | 1999-11-30 | Fuji Photo Film Co Ltd | 画像処理方法および装置 |
JP2000114360A (ja) * | 1998-10-02 | 2000-04-21 | Wacker Siltronic G Fuer Halbleitermaterialien Ag | トレ―収容装置 |
EP1014172A1 (en) * | 1998-12-21 | 2000-06-28 | Eastman Kodak Company | Method and apparatus for modifying a portion of an image in accordance with colorimetric parameters |
JP2000196908A (ja) * | 1998-12-21 | 2000-07-14 | Eastman Kodak Co | 画像の修正方法及び装置 |
JP2000188768A (ja) * | 1998-12-22 | 2000-07-04 | Victor Co Of Japan Ltd | 自動階調補正方法 |
JP2000261650A (ja) * | 1999-03-05 | 2000-09-22 | Toshiba Corp | 画像処理装置 |
US20010005222A1 (en) * | 1999-12-24 | 2001-06-28 | Yoshihiro Yamaguchi | Identification photo system and image processing method |
JP2001186323A (ja) * | 1999-12-24 | 2001-07-06 | Fuji Photo Film Co Ltd | 証明写真システム及び画像処理方法 |
US20020015514A1 (en) * | 2000-04-13 | 2002-02-07 | Naoto Kinjo | Image processing method |
JP2002077592A (ja) * | 2000-04-13 | 2002-03-15 | Fuji Photo Film Co Ltd | 画像処理方法 |
US20010035988A1 (en) * | 2000-04-14 | 2001-11-01 | Satoshi Semba | Color image processing apparatus and method, and computer- readable recording medium in which color image processing program is recorded |
US20020113862A1 (en) * | 2000-11-10 | 2002-08-22 | Center Julian L. | Videoconferencing method with tracking of face and dynamic bandwidth allocation |
JP2002354185A (ja) * | 2001-05-23 | 2002-12-06 | Konica Corp | ネットワークフォトサービス提供方法、ネットワークフォトサービス装置およびネットワークフォトサービスプログラム |
JP2003092700A (ja) * | 2001-09-17 | 2003-03-28 | Ricoh Co Ltd | デジタルカメラ撮像装置 |
JP4218348B2 (ja) * | 2003-01-17 | 2009-02-04 | オムロン株式会社 | 撮影装置 |
Non-Patent Citations (1)
Title |
---|
GUTTA, S.; WECHSLER, H.; PHILLIPS, P.J.: "Gender and ethnic classification of face images", PROCEEDINGS OF THE THIRD IEEE INTERNATIONAL CONFERENCE ON AUTOMATIC FACE AND GESTURE RECOGNITION, JPN6008059365, 14 April 1998 (1998-04-14), US, pages 194 - 199, XP010277619, ISSN: 0001188434, DOI: 10.1109/AFGR.1998.670948 * |
Cited By (41)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006012062A (ja) * | 2004-06-29 | 2006-01-12 | Canon Inc | 画像処理装置及びその方法、プログラム、撮像装置 |
JP4574249B2 (ja) * | 2004-06-29 | 2010-11-04 | キヤノン株式会社 | 画像処理装置及びその方法、プログラム、撮像装置 |
JP4522229B2 (ja) * | 2004-11-02 | 2010-08-11 | キヤノン株式会社 | 画像処理方法及びその装置 |
JP2006133873A (ja) * | 2004-11-02 | 2006-05-25 | Canon Inc | 画像処理方法及びその装置 |
JP2006277274A (ja) * | 2005-03-29 | 2006-10-12 | Seiko Epson Corp | 画像処理装置、印刷装置、画像処理方法、および、画像処理プログラム |
KR101303877B1 (ko) * | 2005-08-05 | 2013-09-04 | 삼성전자주식회사 | 얼굴 검출과 피부 영역 검출을 적용하여 피부의 선호색변환을 수행하는 방법 및 장치 |
US8139854B2 (en) | 2005-08-05 | 2012-03-20 | Samsung Electronics Co., Ltd. | Method and apparatus for performing conversion of skin color into preference color by applying face detection and skin area detection |
JP2007143047A (ja) * | 2005-11-22 | 2007-06-07 | Fujifilm Corp | 画像処理システム及び画像処理プログラム |
JP2007235572A (ja) * | 2006-03-01 | 2007-09-13 | Sony Corp | 画像処理装置および方法、プログラム記録媒体、並びにプログラム |
JP4720544B2 (ja) * | 2006-03-01 | 2011-07-13 | ソニー株式会社 | 画像処理装置および方法、プログラム記録媒体、並びにプログラム |
US8306280B2 (en) | 2006-04-11 | 2012-11-06 | Nikon Corporation | Electronic camera and image processing apparatus |
US9485415B2 (en) | 2006-04-11 | 2016-11-01 | Nikon Corporation | Electronic camera and image processing apparatus |
JP2007282119A (ja) * | 2006-04-11 | 2007-10-25 | Nikon Corp | 電子カメラおよび画像処理装置 |
US8212894B2 (en) | 2006-04-11 | 2012-07-03 | Nikon Corporation | Electronic camera having a face detecting function of a subject |
JP2010521719A (ja) * | 2007-03-14 | 2010-06-24 | オリンパス株式会社 | 画像処理システムおよび画像処理プログラム |
US8463034B2 (en) | 2007-03-14 | 2013-06-11 | Olympus Corporation | Image processing system and computer-readable recording medium for recording image processing program |
JP2008245666A (ja) * | 2007-03-29 | 2008-10-16 | Tokiwa Yakuhin Kogyo Kk | 皮膚の色素沈着評価方法およびその提示方法 |
JP2009065290A (ja) * | 2007-09-04 | 2009-03-26 | Canon Inc | 画像処理装置及び方法、及び撮像装置 |
JP2009140066A (ja) * | 2007-12-04 | 2009-06-25 | Alpine Electronics Inc | 歪曲補正画像生成ユニットおよび歪曲補正画像生成方法 |
US8570391B2 (en) | 2008-12-18 | 2013-10-29 | Olympus Imaging Corp. | Imaging apparatus and image processing method used in imaging device |
JP2010272109A (ja) * | 2009-04-20 | 2010-12-02 | Fujifilm Corp | 画像処理装置、画像処理方法およびプログラム |
JP2012074828A (ja) * | 2010-09-28 | 2012-04-12 | Casio Comput Co Ltd | 撮像装置及びプログラム |
JP2011061868A (ja) * | 2010-12-16 | 2011-03-24 | Seiko Epson Corp | 画像処理装置、印刷装置、画像処理方法、および、画像処理プログラム |
KR101743520B1 (ko) * | 2011-04-09 | 2017-06-08 | 에스프린팅솔루션 주식회사 | 색상 변환 장치 및 그 방법 |
JP2013065119A (ja) * | 2011-09-15 | 2013-04-11 | Toshiba Corp | 顔認証装置及び顔認証方法 |
US9098760B2 (en) | 2011-09-15 | 2015-08-04 | Kabushiki Kaisha Toshiba | Face recognizing apparatus and face recognizing method |
JP2012099147A (ja) * | 2012-02-07 | 2012-05-24 | Canon Inc | 画像処理装置およびプログラム |
JP2013164796A (ja) * | 2012-02-13 | 2013-08-22 | Ricoh Co Ltd | 画像処理装置、画像処理方法およびプログラム |
JP2012128881A (ja) * | 2012-03-21 | 2012-07-05 | Olympus Corp | 画像処理方法 |
US9154691B2 (en) | 2012-04-20 | 2015-10-06 | Fujifilm Corporation | Image capturing apparatus, image capturing method, and program |
JP2014021902A (ja) * | 2012-07-23 | 2014-02-03 | Olympus Corp | サーバシステム、画像処理システム、プログラム及び画像処理方法 |
US9652662B2 (en) | 2012-12-27 | 2017-05-16 | Panasonic Intellectual Property Management Co., Ltd. | Image processing device and image processing method |
JP2016503546A (ja) * | 2013-08-15 | 2016-02-04 | シャオミ・インコーポレイテッド | 画像処理方法、画像処理装置、端末装置、プログラム及び記録媒体 |
US9779527B2 (en) | 2013-08-15 | 2017-10-03 | Xiaomi Inc. | Method, terminal device and storage medium for processing image |
JP2015179223A (ja) * | 2014-03-20 | 2015-10-08 | フリュー株式会社 | サーバ、写真撮影編集装置、情報処理端末、制御プログラム、および記録媒体 |
KR101649596B1 (ko) | 2014-07-23 | 2016-08-19 | 시아오미 아이엔씨. | 피부색 조절방법, 장치, 프로그램 및 기록매체 |
KR20160021738A (ko) * | 2014-07-23 | 2016-02-26 | 시아오미 아이엔씨. | 피부색 조절방법, 장치, 프로그램 및 기록매체 |
JP2016057775A (ja) * | 2014-09-08 | 2016-04-21 | オムロン株式会社 | 似顔絵生成装置、似顔絵生成方法 |
JP2016148933A (ja) * | 2015-02-10 | 2016-08-18 | キヤノン株式会社 | 画像処理装置および画像処理方法 |
JP2017201734A (ja) * | 2016-05-02 | 2017-11-09 | 三菱電機株式会社 | プリントシステム |
JP2017199008A (ja) * | 2017-06-12 | 2017-11-02 | フリュー株式会社 | 写真撮影遊戯機、制御方法、並びにプログラム |
Also Published As
Publication number | Publication date |
---|---|
CN1522048A (zh) | 2004-08-18 |
DE602004007172T2 (de) | 2008-02-28 |
EP1447973A1 (en) | 2004-08-18 |
JP4277534B2 (ja) | 2009-06-10 |
US20040228528A1 (en) | 2004-11-18 |
ATE366030T1 (de) | 2007-07-15 |
EP1447973B1 (en) | 2007-06-27 |
DE602004007172D1 (de) | 2007-08-09 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4277534B2 (ja) | 画像編集装置および画像編集方法 | |
JP4218348B2 (ja) | 撮影装置 | |
JP4574249B2 (ja) | 画像処理装置及びその方法、プログラム、撮像装置 | |
US7577310B2 (en) | Image processing method | |
JP4799101B2 (ja) | 画像処理方法および装置ならびにプログラム | |
US7885477B2 (en) | Image processing method, apparatus, and computer readable recording medium including program therefor | |
US8068645B2 (en) | Apparatus, method, and program for image processing | |
US7751640B2 (en) | Image processing method, image processing apparatus, and computer-readable recording medium storing image processing program | |
US20050220346A1 (en) | Red eye detection device, red eye detection method, and recording medium with red eye detection program | |
JP4344925B2 (ja) | 画像処理装置、画像処理方法およびプリントシステム | |
US7848588B2 (en) | Method and apparatus for judging direction of blur and computer-readable recording medium storing a program therefor | |
US20070071316A1 (en) | Image correcting method and image correcting system | |
US20040160517A1 (en) | Image processing system | |
US20090324069A1 (en) | Image processing device, image processing method, and computer readable medium | |
JP2005086516A (ja) | 撮像装置、印刷装置、画像処理装置およびプログラム | |
JP2006295303A (ja) | 画像処理方法および装置ならびにプログラム | |
US8213720B2 (en) | System and method for determining chin position in a digital image | |
JP2006350769A (ja) | 画像処理装置および方法並びにプログラム | |
US7170638B2 (en) | Method, system and recording medium for image processing | |
KR20210023017A (ko) | 술통형 왜곡 보정 및 배경교체 기능 기반 셀프 증명사진 촬영이 가능한 사진 촬영 서비스 제공 방법 | |
JP2011237911A (ja) | 画像処理装置、画像処理方法、及び画像処理プログラム | |
JP2002252783A (ja) | カラー診断処理装置、カラー診断処理方法、カラー診断プログラムが記録された記録媒体及びカラー診断プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20051209 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20081111 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20081125 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20090126 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20090217 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20090302 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120319 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 4277534 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120319 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130319 Year of fee payment: 4 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140319 Year of fee payment: 5 |
|
LAPS | Cancellation because of no payment of annual fees |