JP4182735B2 - 顔色補正方法及び顔色補正装置及び撮像機器 - Google Patents
顔色補正方法及び顔色補正装置及び撮像機器 Download PDFInfo
- Publication number
- JP4182735B2 JP4182735B2 JP2002345643A JP2002345643A JP4182735B2 JP 4182735 B2 JP4182735 B2 JP 4182735B2 JP 2002345643 A JP2002345643 A JP 2002345643A JP 2002345643 A JP2002345643 A JP 2002345643A JP 4182735 B2 JP4182735 B2 JP 4182735B2
- Authority
- JP
- Japan
- Prior art keywords
- color
- color information
- information signal
- hue
- signal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Color Television Image Signal Generators (AREA)
- Processing Of Color Television Signals (AREA)
Description
【０００１】
【発明の属する技術分野】
本発明は、人物の顔や肌の色などを自然な色合いに補正するための処理を簡単な処理で、且つ、効果的に行うことができる顔色補正方法及び顔色補正装置及び撮像機器に関するものである。
【０００２】
【従来の技術】
従来技術において、デジタルカメラやビデオカメラなどの撮像機器では、例えば、白熱灯の下で撮影すると全体が赤っぽくなり、蛍光灯の下で撮影すると全体に緑がかってしまったり、また、早朝や曇りのときに撮影すると青みが強くなる、というようなことを防止し、自然な色合いで撮影することができるように、撮影時の光源の状態による色温度の変化を補正するためのホワイトバランス調整機能を備えている。
【０００３】
ホワイトバランス調整機能は、すべての色の基準となる白色を様々な撮影環境の光源の下で正しく撮影できるように補正する機能であり、白色を正しく撮影できるように補正することで、様々な光源下で被写体を自然な色合いで撮影することができる。
【０００４】
このホワイトバランス調整機能によって白色を正しく撮影できるように調整した場合であっても、人物を撮影したときに顔や肌の色などが不自然な色合いで撮影されてしまうことが多くある。
【０００５】
そこで、人物を撮影する場合、被写体が人物か否かを判別し、人物である場合は、更に、その人物の顔面領域を判別し、判別した顔面領域の顔色に基づいて全体のホワイトバランスの補正をする方法や装置等も考案されている（例えば、特許文献１参照。）。
【０００６】
【特許文献１】
特開２００１−１４８８６３号公報（第４−７頁、図３、４）
【０００７】
【発明が解決しようとする課題】
しかしながら、被写体が人物か否かを判別し、更に、その人物の顔面領域を判別し、判別した顔面領域の顔色に基づいて全体のホワイトバランスの補正をするという処理は、複雑で、且つ、データ処理量が多く、ホワイトバランスの補正に時間がかかってしまうという問題がある。
【０００８】
従って、人物の顔や肌の色を自然な色合いに補正するため処理を、簡単な処理で、且つ、効果的に行えるようにすることに解決しなければならない課題を有する。
【０００９】
【課題を解決するための手段】
前記課題を解決するため、本発明に係る顔色補正方法及び顔色補正装置及び撮像機器は次のような構成にすることである。
【００１０】
（１）像機器で撮像する人物の顔色を補正する顔色補正方法であって、撮像したカラー画像信号を色の明度情報・彩度情報・色相情報によって定められた所定の均等色空間に基づいた色情報信号に変換するステップと、前記変換した所定の均等色空間に基づいた色情報信号から所定の肌色情報に相当する色情報信号のみを検出するステップと、前記検出した所定の肌色情報に相当する色情報信号から人物の顔面領域に相当する色情報信号を抽出するステップと、前記抽出した人物の顔面領域に相当する色情報信号と前記所定の均等色空間に基づいて定めた基準肌色情報とを比較し、該顔面領域に相当する色情報信号の色相を補正するための色相補正値を算出するステップと、前記算出した色相補正値に基づいて、前記所定の均等色空間に基づいて変換した色情報信号のうち前記人物の顔面領域に対応する色情報信号のみの色相を補正するステップと、からなる顔色補正方法。
（２）前記均等色空間は、ＣＩＥＬＡＢ色空間であることを特徴とする（１）に記載の顔色補正方法。
（３）前記基準肌色情報は、人種別及び／又は国や地域別で分類されている情報であることを特徴とする（１）に記載の顔色補正方法。
【００１１】
（４）カラー画像信号を色の明度情報・彩度情報・色相情報によって定められた所定の均等色空間に基づいた色情報信号に変換する色空間変換手段と、前記色空間変換手段で変換した所定の均等空間に基づいた色情報信号から所定の肌色情報に相当する色情報信号のみを検出する肌色情報検出手段と、前記肌色情報検出手段で検出した所定の肌色情報に相当する色情報信号から人物の顔面領域に相当する色情報信号を抽出する顔面領域抽出手段と、前記顔面領域抽出手段で抽出した人物の顔面領域に相当する色情報信号と前記所定の均等色空間に基づいて定めた基準肌色情報とを比較し、該顔面領域に相当する色情報信号の色相を補正するための色相補正値を算出する補正値算出手段と、前記補正値算出手段で算出した色相補正値に基づいて、前記色空間変換手段で変換した色情報信号のうち前記顔面領域抽出手段で抽出された人物の顔面領域に対応する色情報信号のみの色相を補正する色相補正手段と、を備えていることを特徴とする顔色補正装置。
（５）前記顔面領域抽出手段は、前記検出した肌色情報に相当する色情報信号のうち、前記色空間変換手段で変換した色情報信号全体に対して所定の割合を占めている色情報信号を人物の顔面領域に相当する色情報信号として抽出することを特徴とする（４）に記載の顔色補正装置。
（６）前記均等色空間は、ＣＩＥＬＡＢ色空間であることを特徴とする（４）に記載の顔色補正装置。
（７）前記基準肌色情報は、人種別及び／又は国や地域別で分類されている情報であることを特徴とする（４）に記載の顔色補正装置。
【００１２】
（８）ホワイトバランスの調整機能を備えた撮像機器であって、前記ホワイトバランスの調整を施したカラー画像信号を、色の明度情報・彩度情報・色相情報によって定められた所定の均等色空間に基づいた色情報信号に変換する色空間変換手段と、前記色空間変換手段で変換した所定の均等空間に基づいた色情報信号から所定の肌色情報に相当する色情報信号のみを検出する肌色情報検出手段と、前記肌色情報検出手段で検出した所定の肌色情報に相当する色情報信号から人物の顔面領域に相当する色情報信号を抽出する顔面領域抽出手段と、前記顔面領域抽出手段で抽出した人物の顔面領域に相当する色情報信号と前記所定の均等色空間に基づいて定めた基準肌色情報とを比較し、該顔面領域に相当する色情報信号の色相を補正するための色相補正値を算出する補正値算出手段と、前記補正値算出手段で算出した色相補正値に基づいて、前記色空間変換手段で変換した色情報信号のうち前記顔面領域抽出手段で抽出された人物の顔面領域に対応する色情報信号のみの色相を補正する色相補正手段と、を具備していることを特徴とする撮像機器。
（９）前記顔面領域抽出手段は、前記検出した肌色情報に相当する色情報信号のうち、前記色空間変換手段で変換した色情報信号全体に対して所定の割合を占めている色情報信号を人物の顔面領域に相当する色情報信号として抽出することを特徴とする（８）に記載の撮像機器。
（１０）前記均等色空間は、ＣＩＥＬＡＢ色空間であることを特徴とする（８）に記載の撮像機器。
（１１）前記基準肌色情報は、人種別及び／又は国や地域別で分類されている情報であることを特徴とする（８）に記載の撮像機器。
【００１３】
このような顔色補正方法及び顔色補正装置及び撮像機器により、ホワイトバランス調整した後のカラー画像信号を均等色空間（ＣＩＥＬＡＢ空間）に基づいた色情報信号に変換し、この色情報信号から均等色空間における肌色（顔色）に対応した色情報信号のみをフィルタリングし、画像（映像）データ全体に対して所定の範囲を占め、且つ、所定の比率を有する範囲を顔面領域として判別するので、人物の顔面領域を容易に検出することができる。
【００１４】
そして、顔面領域として検出した色情報信号と均等色空間（ＣＩＥＬＡＢ空間）において基準となる肌色（顔色）データとを比較して肌色（顔色）の色相を補正するための補正値を算出し、算出された補正値に基づいて人物の顔面領域の色相のみを補正することができる。
【００１５】
【発明の実施の形態】
次に、本発明に係る顔色補正方法及び顔色補正装置及び撮像機器の実施の形態について図面を参照して説明する。但し、図面は専ら解説のためのものであって、本発明の技術的範囲を限定するものではない。
【００１６】
図１は、顔色補正装置を備えた撮像機器において、顔色補正装置の主要となる部分の構成を略示的に示したブロック図であり、撮像部１０１、Ｓ／Ｈ（Ｓａｍｐｌｅ／Ｈｏｌｄ）回路１０２、ＡＧＣ（Ａｕｔｏｍａｔｉｃ Ｇａｉｎ Ｃｏｎｔｒｏｌ）回路１０３、Ａ／Ｄ（Ａｎａｌｏｇ／Ｄｉｇｉｔａｌ）変換回路１０４、カメラ信号処理部１０５、ホワイトバランス制御部１０６、色空間変換部１０７、ＬＰＦ（Ｌｏｗ Ｐａｓｓ Ｆｉｌｔｅｒ）１０８、顔面領域抽出部１０９、色相補正値算出部１１０、メモリ１１１、色相補正部１１２、ＲＧＢ変換部１１３を備えている。
【００１７】
撮像部１０１は、ＣＣＤ（Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ）などの撮像素子を備え、被写体からの光を電気信号に変換し、アナログ画像信号としてＳ／Ｈ回路１０２に送出する。
【００１８】
Ｓ／Ｈ回路１０２は、入力側を撮像部１０１、出力側をＡＧＣ回路１０３と接続し、撮像部１０１から送られてくるアナログ画像信号をサンプリングしてＡＧＣ回路１０３に送出し、サンプリングした値をＡ／Ｄ変換回路１０４の処理が終了するまで保持し、この処理が終了すると次のサンプリング値をＡＧＣ回路１０３に送出する。
【００１９】
ＡＧＣ回路１０３は、入力側をＳ／Ｈ回路１０２、出力側をＡ／Ｄ変換回路１０４と接続し、Ｓ／Ｈ回路１０２でサンプリングされたアナログ画像信号を増幅して、Ａ／Ｄ変換回路１０４へ送出する。
【００２０】
Ａ／Ｄ回路１０４は、入力側をＡＧＣ回路１０３、出力側をカメラ信号処理部１０５と接続し、ＡＧＣ回路１０３で増幅されたアナログ画像信号をデジタル画像信号に変換してカメラ信号処理部１０５へ送出する。
【００２１】
カメラ信号処理部１０５は、入力側をＡ／Ｄ変換回路１０４、出力側を色空間変換部１０７と接続し、更に、ホワイトバランス制御部１０６と接続され、Ａ／Ｄ変換回路１０４から送られてくるデジタル画像信号に対して所定の信号処理を施してホワイトバランス制御部１０６に入力し、ホワイトバランス制御部１０６で生成され、フィードバックされるホワイトバランス調整用の制御信号によって、デジタル画像信号のホワイトバランスを調整し、ホワイトバランス調整後のデジタル画像信号を輝度信号（Ｙ信号）、色差信号（Ｒ−Ｙ信号、Ｂ−Ｙ信号）に変換して出力する。
【００２２】
ホワイトバランス制御部１０６は、カメラ信号処理部１０５と接続して、カメラ信号処理部１０５で所定の信号処理が施こされたデジタル画像信号に基づいて白色を正しく撮影できるように光源の状態による色温度の変化を補正するための制御信号を生成してカメラ信号処理部１０５へフィードバック（出力）する。
【００２３】
色空間変換部１０７は、入力側をカメラ信号処理部１０５、出力側を色相補正部１１２及びＬＰＦ１０８と接続し、カメラ信号処理部１０５から出力された輝度信号（Ｙ信号）及び色差信号（Ｒ−Ｙ信号、Ｂ−Ｙ信号）をＣＩＥＬＡＢ色空間に基づいた色情報信号（Ｌ＊信号、ａ＊信号、ｂ＊信号）に変換して出力する。
【００２４】
ＣＩＥＬＡＢ色空間（ＣＩＥ １９７６ Ｌ＊ａ＊ｂ＊色空間）とは、Ｒ（Ｒｅｄ；赤）／Ｇ（Ｇｒｅｅｎ；緑）／Ｂ（Ｂｌｕｅ；青）の３刺激値（ｔｒｉｓｔｉｍｕｌｕｓ ｖａｌｕｅｓ）でカラー画像データを表現するＲＧＢ表示系の色空間を、国際照明学会（ＣＩＥ）によって定められたＸＹＺ表示色系（ＣＩＥ（１９３１）ＸＹＺ表示色）に変換し、更に、色を相対的に表現し、色差（見分けられる２つの色の差）の感覚に比例するように改良され、色の明度情報・彩度情報・色相情報によって定められた均等色空間と呼ばれる色空間に変換したものである。
【００２５】
色空間変換部１０７は、輝度信号（Ｙ信号）及び色差信号（Ｒ−Ｙ信号、Ｂ−Ｙ信号）を次に示す数式１に基づいてＣＩＥＬＡＢ色空間に対応する色情報信号（Ｌ＊信号、ａ＊信号、ｂ＊信号）への変換して出力するものである。
【００２６】
【数１】
Ｌ＊ ＝ １１６（Ｙ／Ｙｎ）１／３−１６
ａ＊ ＝ ５００｛（Ｘ／Ｘｎ）１／３−（Ｙ／Ｙｎ）１／３｝
ｂ＊ ＝ ２００｛（Ｙ／Ｙｎ）１／３−（Ｚ／Ｚｎ）１／３｝
Ｘｎ、Ｙｎ、Ｚｎは定数
【００２７】
Ｌ＊信号は、ＣＩＥＬＡＢ空間における輝度（明度）に関する指数Ｌ＊に応じて変換された信号であり、また、ａ＊信号及びｂ＊信号は、ＣＩＥＬＡＢ空間における色相と彩度に関するクロマティクネス指数（色質指数）ａ＊及びｂ＊に応じて変換された信号である。
【００２８】
ＬＰＦ１０８は、入力側を色空間変換部１０７、出力側を顔面領域抽出部１０９と接続し、色空間変換部１０７から出力されたそれぞれの色情報信号（Ｌ＊信号、ａ＊信号、ｂ＊信号）から所定の肌色（顔色）に対応した色情報信号のみをフィルタリングして顔面領域抽出部１０９へ送出する。
【００２９】
顔面領域抽出部１０９は、入力側をＬＰＦ１０８、出力側を色相補正値算出部１１０と接続し、まず、ＬＰＦ１０８でフィルタリングされた色情報信号全体、換言すると、画像（映像）データ全体において、所定の割合を占めている色情報信号に対して膨張収縮処理などの所定の信号処理を施す。
【００３０】
膨張収縮処理は、色情報信号に対応する画像データにおいて、所定の範囲を占め、且つ、その範囲内で欠落している（穴になっている）部分を周囲と同一の色情報信号とする処理であり、欠落している部分を埋めて、この所定の範囲を全て同じ色情報信号とすることで顔面領域の抽出を容易にするための処理である。
【００３１】
そして、この膨張収縮処理を施した色情報信号において、換言すると、画像（映像）データ全体において、所定の割合を占めている色情報信号を人物の顔面領域に相当する色情報信号であると判定し、判定した色情報信号のみを顔面領域の色情報信号として抽出して色相補正値算出部１１０へ出力する。
【００３２】
具体的な例としては、画像（映像）データ全体において所定の範囲の大きさを占めており、且つ、その範囲の縦横比が所定の比率、例えば、縦：横＝１：１、若しくは１：１と同程度の比率である範囲に対応した色情報信号のみを顔面領域の色情報信号として抽出して色相補正値算出部１１０へ出力する。
【００３３】
なお、顔面領域抽出部１０９自体で基準となる肌色（顔色）データを保持し、この肌色（顔色）データに基づいた所定の色情報信号のみを抽出対象とすることも可能である。また、メモリ１１１の基準肌色（顔色）データを参照するようにしてもよい。
【００３４】
色相補正値算出部１１０は、入力側を顔面領域抽出部１０９、出力側を色相補正部１１２と接続し、更に、メモリ１１１と接続され、メモリ１１１に記憶されているＣＩＥＬＡＢ空間に基づいて定めた肌色（顔色）の基準値となる基準肌色（顔色）データを参照し、顔面領域抽出部１０９から送られてくる顔面領域に対応した色情報信号と比較し、顔色領域の色相を補正するための補正値∠Ｒを算出し、色相補正部１１２に出力する。
【００３５】
なお、色相補正値算出部１１０自体で基準となる肌色（顔色）データを保持するようにしておいても良い。
【００３６】
肌色（顔色）の色相を補正するための補正値∠Ｒは、色情報信号（Ｌ＊信号、ａ＊信号、ｂ＊信号）のうち、色相と彩度に関係するａ＊信号及びｂ＊信号を用いて次に示す数式２及び数式３に基づいて算出する。
【００３７】
【数２】
【００３８】
【数３】
【００３９】
メモリ１１１は、色相補正値算出部１１０（及び顔面領域抽出部１０９）と接続され、ＣＩＥＬＡＢ空間における肌色（顔色）に対応し、肌色（顔色）の基準値として定めた基準肌色（顔色）データや、この基準肌色（顔色）データもとに人種別や国／地域別など、所定のカテゴリに分類した肌色（顔色）データなどが記憶してある。
【００４０】
色相補正部１１２は、入力側に色空間変換部１０７及び色相補正値算出部１１０が接続され、出力側をＲＧＢ変換部１１３と接続し、色相補正値算出部１１０で算出された補正値∠Ｒに基づき、色空間変換部１０７から出力された色情報信号（Ｌ＊信号、ａ＊信号、ｂ＊信号）のうち、顔面領域に対応した色情報信号の色相を補正し、補正処理した色情報信号を補正色情報信号（Ｌ＊'信号、ａ＊'信号、ｂ＊'信号）としてＲＧＢ変換部１１３に出力する。
【００４１】
ＲＧＢ変換部１１３は、入力側を色相補正部１１２と接続され、色相補正部１１２から出力された補正色情報信号（Ｌ'＊信号、ａ'＊信号、ｂ'＊信号）を輝度信号（Ｙ'信号）及び色差信号（[Ｒ−Ｙ]'信号、[Ｂ−Ｙ]'信号）に変換して出力する。
【００４２】
続いて、このような構成の顔色補正装置を備えた撮像機器によって、肌色（顔色）の色相を補正するときの処理過程を図２のフローチャートを参照しながら説明する。
【００４３】
まず、撮像部１０１はＣＣＤなどの撮像素子によって被写体からの光を電気信号、即ち、アナログ画像信号に変換し、このアナログ画像信号をＳ／Ｈ回路１０２によってサンプリングしてＡＧＣ回路１０３で増幅し、Ａ／Ｄ回路１０４がデジタル画像信号に変換してカメラ信号処理部１０５へ送出する。
【００４４】
カメラ信号処理部１０５は、Ａ／Ｄ変換回路１０４から送られてくるデジタル画像信号に所定の信号処理を施してホワイトバランス制御部１０６に入力し、ホワイトバランス制御部１０６で生成されてフィードバックされるホワイトバランス調整用の制御信号によって、デジタル画像信号のホワイトバランスを調整し、ホワイトバランスが調整されたデジタル画像信号を輝度信号（Ｙ信号）、色差信号（Ｒ−Ｙ信号、Ｂ−Ｙ信号）に変換して色空間変換部１０７へ出力する（ＳＴ１００）。
【００４５】
次に、色空間変換部１０７では、カメラ信号処理部１０５から出力された輝度信号（Ｙ信号）及び色差信号（Ｒ−Ｙ信号、Ｂ−Ｙ信号）をＣＩＥＬＡＢ空間に基づいた色情報信号（Ｌ＊信号、ａ＊信号、ｂ＊信号）に変換し、ＬＰＦ１０８及び色相補正部１０７へ出力する（ＳＴ１０１）。
【００４６】
次に、ＬＰＦ１０８は、色空間変換部１０７から送られてくる色情報信号（Ｌ＊信号、ａ＊信号、ｂ＊信号）から所定の肌色（顔色）に対応する色情報信号のみをフィルタリングして顔面領域抽出部１０９へ送出する（ＳＴ１０２）。
【００４７】
次に、顔面領域抽出部１０９は、メモリ１１１などを参照し、ＬＰＦ１０８でフィルタリングされた色情報信号全体に対して、所定の割合を占めている色情報信号を抽出し、この抽出した色情報信号に対して膨張収縮処理などの所定の信号処理を施す（ＳＴ１０３，ＳＴ０１４）。
【００４８】
続いて、顔面領域抽出部１０９では、膨張収縮処理を施した色情報信号全体において、換言すると、画像（映像）データ全体において、所定の範囲を占めており、且つ、その範囲が所定の大きさを有し、更に、所定の比率である範囲を顔面領域であると判定し、判定した範囲に対応する色情報信号のみを顔面領域の色情報信号として抽出して色相補正値算出部１１０へ送出する（ＳＴ１０５→ＳＴ１０６）。
【００４９】
次に、色相補正値算出部１１０では、顔面領域抽出部１０９から送られてくる顔面領域に相当する色情報信号のうち、色相と彩度に関する色情報信号（ａ＊信号、ｂ＊信号）から上述の数式２に基づいて肌色（顔色）の色相を補正するための補正値∠Ｒの算出を行い、算出した補正値∠Ｒを色相補正部１１２へ送出する（ＳＴ１０６）。
【００５０】
もし、顔面領域抽出部１０９において、顔面領域に相当する色情報信号がないと判定された場合は、色相補正値算出部１１０での補正値算出処理はスキップされ、色相補正部１１２に値をゼロとした補正値∠Ｒが色相補正部１１２へ送出される（ＳＴ１０５→ＳＴ１０８）。
【００５１】
次に、色相補正部１１２は、色相補正値算出部１１０で算出された補正値∠Ｒに基づいて、色空間変換部１０７で色空間変換された色情報信号（Ｌ＊信号、ａ＊信号、ｂ＊信号）のうち、顔面領域に対応する色情報信号に対して色相の補正処理を行い、色相補正された補正色情報信号（Ｌ＊'信号、ａ＊'信号、ｂ＊'信号）をＲＧＢ変換部１１３へ送出する（ＳＴ１０７）。
【００５２】
なお、顔面領域抽出部１０９で色情報信号に顔面領域がないと判別した場合は、補正値∠Ｒはゼロであり、色相補正部１１２からは、色相補正がなされていない色情報信号（Ｌ＊信号、ａ＊信号、ｂ＊信号）が補正色情報信号（Ｌ＊'信号、ａ＊'信号、ｂ＊'信号）として出力される。
【００５３】
そして、ＲＧＢ変換部１１３において、肌色（顔色）の色相補正処理が施された色情報信号である補正色情報信号（Ｌ＊'信号、ａ＊'信号、ｂ＊'信号）を輝度信号（Ｙ'信号）及び色差信号（[Ｒ−Ｙ]'信号、[Ｂ−Ｙ]'信号）に変換して出力する（ＳＴ１０８）。
【００５４】
ＲＧＢ変換部１１３で変換された輝度信号（Ｙ'信号）及び色差信号（[Ｒ−Ｙ]'信号、[Ｂ−Ｙ]'信号）は、ホワイトバランスが調整され、更に、その画像データに人物が写されているときは、人物の肌色（顔色）が適正に補正された画像データとなって出力され、後段の回路で処理されて表示部（図示せず）に画面表示されたり、データ保存部（図示せず）に記憶される（ＳＴ１０９）。
【００５５】
【発明の効果】
以上説明したように、ホワイトバランスが調整された画像（映像）信号を均等色空間（ＣＩＥＬＡＢ空間）に基づいた色情報信号に変換し、この色情報信号から均等色空間における肌色（顔色）に対応した色情報信号のみをフィルタリングし、画像（映像）データ全体に対して所定の範囲を占め、且つ、所定の比率を有する範囲を顔面領域として判別するので、複雑な処理を行うことなく、簡単に人物の顔面領域を検出できる。
【００５６】
そして、顔面領域として検出した色情報信号と均等色空間（ＣＩＥＬＡＢ空間）において基準となる肌色（顔色）データとを比較して肌色（顔色）の色相を補正するための補正値を算出し、算出された補正値に基づいて画像データの顔面領域の色相のみを補正するので、ホワイトバランス調整後の画像データに対して不要な補正を行わず、効果的に肌色（顔色）のみを補正し、人間の主観に合致した自然な色合いの画像（映像）を再現することができるという極めて優れた効果を奏するものである。
【図面の簡単な説明】
【図１】本発明に係る顔色補正装置を備えた撮像機器の主要部を略字的に示したブロック図である。
【図２】図１の撮像機器における顔色補正の処理過程を示したフローチャートである。
【符号の説明】
１００；撮像機器、１０１；撮像部、１０２；Ｓ／Ｈ（Ｓａｍｐｌｅ／Ｈｏｌｄ）回路、１０３；ＡＧＣ（Ａｕｔｏｍａｔｉｃ Ｇａｉｎ Ｃｏｎｔｒｏｌ）回路、１０４；Ａ／Ｄ（Ａｎａｌｏｇ／Ｄｉｇｉｔａｌ）変換回路、１０５；カメラ信号処理部、１０６；ホワイトバランス制御部、１０７；色空間変換部（Ｌ＊ａ＊ｂ＊変換）、１０８；ＬＰＦ（Ｌｏｗ Ｐａｓｓ Ｆｉｌｔｅｒ）、１０９；顔面領域抽出部、１１０；色相補正値算出部、１１１；メモリ、１１２；色相補正部、１１３；ＲＧＢ変換部
【発明の属する技術分野】
本発明は、人物の顔や肌の色などを自然な色合いに補正するための処理を簡単な処理で、且つ、効果的に行うことができる顔色補正方法及び顔色補正装置及び撮像機器に関するものである。
【０００２】
【従来の技術】
従来技術において、デジタルカメラやビデオカメラなどの撮像機器では、例えば、白熱灯の下で撮影すると全体が赤っぽくなり、蛍光灯の下で撮影すると全体に緑がかってしまったり、また、早朝や曇りのときに撮影すると青みが強くなる、というようなことを防止し、自然な色合いで撮影することができるように、撮影時の光源の状態による色温度の変化を補正するためのホワイトバランス調整機能を備えている。
【０００３】
ホワイトバランス調整機能は、すべての色の基準となる白色を様々な撮影環境の光源の下で正しく撮影できるように補正する機能であり、白色を正しく撮影できるように補正することで、様々な光源下で被写体を自然な色合いで撮影することができる。
【０００４】
このホワイトバランス調整機能によって白色を正しく撮影できるように調整した場合であっても、人物を撮影したときに顔や肌の色などが不自然な色合いで撮影されてしまうことが多くある。
【０００５】
そこで、人物を撮影する場合、被写体が人物か否かを判別し、人物である場合は、更に、その人物の顔面領域を判別し、判別した顔面領域の顔色に基づいて全体のホワイトバランスの補正をする方法や装置等も考案されている（例えば、特許文献１参照。）。
【０００６】
【特許文献１】
特開２００１−１４８８６３号公報（第４−７頁、図３、４）
【０００７】
【発明が解決しようとする課題】
しかしながら、被写体が人物か否かを判別し、更に、その人物の顔面領域を判別し、判別した顔面領域の顔色に基づいて全体のホワイトバランスの補正をするという処理は、複雑で、且つ、データ処理量が多く、ホワイトバランスの補正に時間がかかってしまうという問題がある。
【０００８】
従って、人物の顔や肌の色を自然な色合いに補正するため処理を、簡単な処理で、且つ、効果的に行えるようにすることに解決しなければならない課題を有する。
【０００９】
【課題を解決するための手段】
前記課題を解決するため、本発明に係る顔色補正方法及び顔色補正装置及び撮像機器は次のような構成にすることである。
【００１０】
（１）像機器で撮像する人物の顔色を補正する顔色補正方法であって、撮像したカラー画像信号を色の明度情報・彩度情報・色相情報によって定められた所定の均等色空間に基づいた色情報信号に変換するステップと、前記変換した所定の均等色空間に基づいた色情報信号から所定の肌色情報に相当する色情報信号のみを検出するステップと、前記検出した所定の肌色情報に相当する色情報信号から人物の顔面領域に相当する色情報信号を抽出するステップと、前記抽出した人物の顔面領域に相当する色情報信号と前記所定の均等色空間に基づいて定めた基準肌色情報とを比較し、該顔面領域に相当する色情報信号の色相を補正するための色相補正値を算出するステップと、前記算出した色相補正値に基づいて、前記所定の均等色空間に基づいて変換した色情報信号のうち前記人物の顔面領域に対応する色情報信号のみの色相を補正するステップと、からなる顔色補正方法。
（２）前記均等色空間は、ＣＩＥＬＡＢ色空間であることを特徴とする（１）に記載の顔色補正方法。
（３）前記基準肌色情報は、人種別及び／又は国や地域別で分類されている情報であることを特徴とする（１）に記載の顔色補正方法。
【００１１】
（４）カラー画像信号を色の明度情報・彩度情報・色相情報によって定められた所定の均等色空間に基づいた色情報信号に変換する色空間変換手段と、前記色空間変換手段で変換した所定の均等空間に基づいた色情報信号から所定の肌色情報に相当する色情報信号のみを検出する肌色情報検出手段と、前記肌色情報検出手段で検出した所定の肌色情報に相当する色情報信号から人物の顔面領域に相当する色情報信号を抽出する顔面領域抽出手段と、前記顔面領域抽出手段で抽出した人物の顔面領域に相当する色情報信号と前記所定の均等色空間に基づいて定めた基準肌色情報とを比較し、該顔面領域に相当する色情報信号の色相を補正するための色相補正値を算出する補正値算出手段と、前記補正値算出手段で算出した色相補正値に基づいて、前記色空間変換手段で変換した色情報信号のうち前記顔面領域抽出手段で抽出された人物の顔面領域に対応する色情報信号のみの色相を補正する色相補正手段と、を備えていることを特徴とする顔色補正装置。
（５）前記顔面領域抽出手段は、前記検出した肌色情報に相当する色情報信号のうち、前記色空間変換手段で変換した色情報信号全体に対して所定の割合を占めている色情報信号を人物の顔面領域に相当する色情報信号として抽出することを特徴とする（４）に記載の顔色補正装置。
（６）前記均等色空間は、ＣＩＥＬＡＢ色空間であることを特徴とする（４）に記載の顔色補正装置。
（７）前記基準肌色情報は、人種別及び／又は国や地域別で分類されている情報であることを特徴とする（４）に記載の顔色補正装置。
【００１２】
（８）ホワイトバランスの調整機能を備えた撮像機器であって、前記ホワイトバランスの調整を施したカラー画像信号を、色の明度情報・彩度情報・色相情報によって定められた所定の均等色空間に基づいた色情報信号に変換する色空間変換手段と、前記色空間変換手段で変換した所定の均等空間に基づいた色情報信号から所定の肌色情報に相当する色情報信号のみを検出する肌色情報検出手段と、前記肌色情報検出手段で検出した所定の肌色情報に相当する色情報信号から人物の顔面領域に相当する色情報信号を抽出する顔面領域抽出手段と、前記顔面領域抽出手段で抽出した人物の顔面領域に相当する色情報信号と前記所定の均等色空間に基づいて定めた基準肌色情報とを比較し、該顔面領域に相当する色情報信号の色相を補正するための色相補正値を算出する補正値算出手段と、前記補正値算出手段で算出した色相補正値に基づいて、前記色空間変換手段で変換した色情報信号のうち前記顔面領域抽出手段で抽出された人物の顔面領域に対応する色情報信号のみの色相を補正する色相補正手段と、を具備していることを特徴とする撮像機器。
（９）前記顔面領域抽出手段は、前記検出した肌色情報に相当する色情報信号のうち、前記色空間変換手段で変換した色情報信号全体に対して所定の割合を占めている色情報信号を人物の顔面領域に相当する色情報信号として抽出することを特徴とする（８）に記載の撮像機器。
（１０）前記均等色空間は、ＣＩＥＬＡＢ色空間であることを特徴とする（８）に記載の撮像機器。
（１１）前記基準肌色情報は、人種別及び／又は国や地域別で分類されている情報であることを特徴とする（８）に記載の撮像機器。
【００１３】
このような顔色補正方法及び顔色補正装置及び撮像機器により、ホワイトバランス調整した後のカラー画像信号を均等色空間（ＣＩＥＬＡＢ空間）に基づいた色情報信号に変換し、この色情報信号から均等色空間における肌色（顔色）に対応した色情報信号のみをフィルタリングし、画像（映像）データ全体に対して所定の範囲を占め、且つ、所定の比率を有する範囲を顔面領域として判別するので、人物の顔面領域を容易に検出することができる。
【００１４】
そして、顔面領域として検出した色情報信号と均等色空間（ＣＩＥＬＡＢ空間）において基準となる肌色（顔色）データとを比較して肌色（顔色）の色相を補正するための補正値を算出し、算出された補正値に基づいて人物の顔面領域の色相のみを補正することができる。
【００１５】
【発明の実施の形態】
次に、本発明に係る顔色補正方法及び顔色補正装置及び撮像機器の実施の形態について図面を参照して説明する。但し、図面は専ら解説のためのものであって、本発明の技術的範囲を限定するものではない。
【００１６】
図１は、顔色補正装置を備えた撮像機器において、顔色補正装置の主要となる部分の構成を略示的に示したブロック図であり、撮像部１０１、Ｓ／Ｈ（Ｓａｍｐｌｅ／Ｈｏｌｄ）回路１０２、ＡＧＣ（Ａｕｔｏｍａｔｉｃ Ｇａｉｎ Ｃｏｎｔｒｏｌ）回路１０３、Ａ／Ｄ（Ａｎａｌｏｇ／Ｄｉｇｉｔａｌ）変換回路１０４、カメラ信号処理部１０５、ホワイトバランス制御部１０６、色空間変換部１０７、ＬＰＦ（Ｌｏｗ Ｐａｓｓ Ｆｉｌｔｅｒ）１０８、顔面領域抽出部１０９、色相補正値算出部１１０、メモリ１１１、色相補正部１１２、ＲＧＢ変換部１１３を備えている。
【００１７】
撮像部１０１は、ＣＣＤ（Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ）などの撮像素子を備え、被写体からの光を電気信号に変換し、アナログ画像信号としてＳ／Ｈ回路１０２に送出する。
【００１８】
Ｓ／Ｈ回路１０２は、入力側を撮像部１０１、出力側をＡＧＣ回路１０３と接続し、撮像部１０１から送られてくるアナログ画像信号をサンプリングしてＡＧＣ回路１０３に送出し、サンプリングした値をＡ／Ｄ変換回路１０４の処理が終了するまで保持し、この処理が終了すると次のサンプリング値をＡＧＣ回路１０３に送出する。
【００１９】
ＡＧＣ回路１０３は、入力側をＳ／Ｈ回路１０２、出力側をＡ／Ｄ変換回路１０４と接続し、Ｓ／Ｈ回路１０２でサンプリングされたアナログ画像信号を増幅して、Ａ／Ｄ変換回路１０４へ送出する。
【００２０】
Ａ／Ｄ回路１０４は、入力側をＡＧＣ回路１０３、出力側をカメラ信号処理部１０５と接続し、ＡＧＣ回路１０３で増幅されたアナログ画像信号をデジタル画像信号に変換してカメラ信号処理部１０５へ送出する。
【００２１】
カメラ信号処理部１０５は、入力側をＡ／Ｄ変換回路１０４、出力側を色空間変換部１０７と接続し、更に、ホワイトバランス制御部１０６と接続され、Ａ／Ｄ変換回路１０４から送られてくるデジタル画像信号に対して所定の信号処理を施してホワイトバランス制御部１０６に入力し、ホワイトバランス制御部１０６で生成され、フィードバックされるホワイトバランス調整用の制御信号によって、デジタル画像信号のホワイトバランスを調整し、ホワイトバランス調整後のデジタル画像信号を輝度信号（Ｙ信号）、色差信号（Ｒ−Ｙ信号、Ｂ−Ｙ信号）に変換して出力する。
【００２２】
ホワイトバランス制御部１０６は、カメラ信号処理部１０５と接続して、カメラ信号処理部１０５で所定の信号処理が施こされたデジタル画像信号に基づいて白色を正しく撮影できるように光源の状態による色温度の変化を補正するための制御信号を生成してカメラ信号処理部１０５へフィードバック（出力）する。
【００２３】
色空間変換部１０７は、入力側をカメラ信号処理部１０５、出力側を色相補正部１１２及びＬＰＦ１０８と接続し、カメラ信号処理部１０５から出力された輝度信号（Ｙ信号）及び色差信号（Ｒ−Ｙ信号、Ｂ−Ｙ信号）をＣＩＥＬＡＢ色空間に基づいた色情報信号（Ｌ＊信号、ａ＊信号、ｂ＊信号）に変換して出力する。
【００２４】
ＣＩＥＬＡＢ色空間（ＣＩＥ １９７６ Ｌ＊ａ＊ｂ＊色空間）とは、Ｒ（Ｒｅｄ；赤）／Ｇ（Ｇｒｅｅｎ；緑）／Ｂ（Ｂｌｕｅ；青）の３刺激値（ｔｒｉｓｔｉｍｕｌｕｓ ｖａｌｕｅｓ）でカラー画像データを表現するＲＧＢ表示系の色空間を、国際照明学会（ＣＩＥ）によって定められたＸＹＺ表示色系（ＣＩＥ（１９３１）ＸＹＺ表示色）に変換し、更に、色を相対的に表現し、色差（見分けられる２つの色の差）の感覚に比例するように改良され、色の明度情報・彩度情報・色相情報によって定められた均等色空間と呼ばれる色空間に変換したものである。
【００２５】
色空間変換部１０７は、輝度信号（Ｙ信号）及び色差信号（Ｒ−Ｙ信号、Ｂ−Ｙ信号）を次に示す数式１に基づいてＣＩＥＬＡＢ色空間に対応する色情報信号（Ｌ＊信号、ａ＊信号、ｂ＊信号）への変換して出力するものである。
【００２６】
【数１】
Ｌ＊ ＝ １１６（Ｙ／Ｙｎ）１／３−１６
ａ＊ ＝ ５００｛（Ｘ／Ｘｎ）１／３−（Ｙ／Ｙｎ）１／３｝
ｂ＊ ＝ ２００｛（Ｙ／Ｙｎ）１／３−（Ｚ／Ｚｎ）１／３｝
Ｘｎ、Ｙｎ、Ｚｎは定数
【００２７】
Ｌ＊信号は、ＣＩＥＬＡＢ空間における輝度（明度）に関する指数Ｌ＊に応じて変換された信号であり、また、ａ＊信号及びｂ＊信号は、ＣＩＥＬＡＢ空間における色相と彩度に関するクロマティクネス指数（色質指数）ａ＊及びｂ＊に応じて変換された信号である。
【００２８】
ＬＰＦ１０８は、入力側を色空間変換部１０７、出力側を顔面領域抽出部１０９と接続し、色空間変換部１０７から出力されたそれぞれの色情報信号（Ｌ＊信号、ａ＊信号、ｂ＊信号）から所定の肌色（顔色）に対応した色情報信号のみをフィルタリングして顔面領域抽出部１０９へ送出する。
【００２９】
顔面領域抽出部１０９は、入力側をＬＰＦ１０８、出力側を色相補正値算出部１１０と接続し、まず、ＬＰＦ１０８でフィルタリングされた色情報信号全体、換言すると、画像（映像）データ全体において、所定の割合を占めている色情報信号に対して膨張収縮処理などの所定の信号処理を施す。
【００３０】
膨張収縮処理は、色情報信号に対応する画像データにおいて、所定の範囲を占め、且つ、その範囲内で欠落している（穴になっている）部分を周囲と同一の色情報信号とする処理であり、欠落している部分を埋めて、この所定の範囲を全て同じ色情報信号とすることで顔面領域の抽出を容易にするための処理である。
【００３１】
そして、この膨張収縮処理を施した色情報信号において、換言すると、画像（映像）データ全体において、所定の割合を占めている色情報信号を人物の顔面領域に相当する色情報信号であると判定し、判定した色情報信号のみを顔面領域の色情報信号として抽出して色相補正値算出部１１０へ出力する。
【００３２】
具体的な例としては、画像（映像）データ全体において所定の範囲の大きさを占めており、且つ、その範囲の縦横比が所定の比率、例えば、縦：横＝１：１、若しくは１：１と同程度の比率である範囲に対応した色情報信号のみを顔面領域の色情報信号として抽出して色相補正値算出部１１０へ出力する。
【００３３】
なお、顔面領域抽出部１０９自体で基準となる肌色（顔色）データを保持し、この肌色（顔色）データに基づいた所定の色情報信号のみを抽出対象とすることも可能である。また、メモリ１１１の基準肌色（顔色）データを参照するようにしてもよい。
【００３４】
色相補正値算出部１１０は、入力側を顔面領域抽出部１０９、出力側を色相補正部１１２と接続し、更に、メモリ１１１と接続され、メモリ１１１に記憶されているＣＩＥＬＡＢ空間に基づいて定めた肌色（顔色）の基準値となる基準肌色（顔色）データを参照し、顔面領域抽出部１０９から送られてくる顔面領域に対応した色情報信号と比較し、顔色領域の色相を補正するための補正値∠Ｒを算出し、色相補正部１１２に出力する。
【００３５】
なお、色相補正値算出部１１０自体で基準となる肌色（顔色）データを保持するようにしておいても良い。
【００３６】
肌色（顔色）の色相を補正するための補正値∠Ｒは、色情報信号（Ｌ＊信号、ａ＊信号、ｂ＊信号）のうち、色相と彩度に関係するａ＊信号及びｂ＊信号を用いて次に示す数式２及び数式３に基づいて算出する。
【００３７】
【数２】
【数３】
メモリ１１１は、色相補正値算出部１１０（及び顔面領域抽出部１０９）と接続され、ＣＩＥＬＡＢ空間における肌色（顔色）に対応し、肌色（顔色）の基準値として定めた基準肌色（顔色）データや、この基準肌色（顔色）データもとに人種別や国／地域別など、所定のカテゴリに分類した肌色（顔色）データなどが記憶してある。
【００４０】
色相補正部１１２は、入力側に色空間変換部１０７及び色相補正値算出部１１０が接続され、出力側をＲＧＢ変換部１１３と接続し、色相補正値算出部１１０で算出された補正値∠Ｒに基づき、色空間変換部１０７から出力された色情報信号（Ｌ＊信号、ａ＊信号、ｂ＊信号）のうち、顔面領域に対応した色情報信号の色相を補正し、補正処理した色情報信号を補正色情報信号（Ｌ＊'信号、ａ＊'信号、ｂ＊'信号）としてＲＧＢ変換部１１３に出力する。
【００４１】
ＲＧＢ変換部１１３は、入力側を色相補正部１１２と接続され、色相補正部１１２から出力された補正色情報信号（Ｌ'＊信号、ａ'＊信号、ｂ'＊信号）を輝度信号（Ｙ'信号）及び色差信号（[Ｒ−Ｙ]'信号、[Ｂ−Ｙ]'信号）に変換して出力する。
【００４２】
続いて、このような構成の顔色補正装置を備えた撮像機器によって、肌色（顔色）の色相を補正するときの処理過程を図２のフローチャートを参照しながら説明する。
【００４３】
まず、撮像部１０１はＣＣＤなどの撮像素子によって被写体からの光を電気信号、即ち、アナログ画像信号に変換し、このアナログ画像信号をＳ／Ｈ回路１０２によってサンプリングしてＡＧＣ回路１０３で増幅し、Ａ／Ｄ回路１０４がデジタル画像信号に変換してカメラ信号処理部１０５へ送出する。
【００４４】
カメラ信号処理部１０５は、Ａ／Ｄ変換回路１０４から送られてくるデジタル画像信号に所定の信号処理を施してホワイトバランス制御部１０６に入力し、ホワイトバランス制御部１０６で生成されてフィードバックされるホワイトバランス調整用の制御信号によって、デジタル画像信号のホワイトバランスを調整し、ホワイトバランスが調整されたデジタル画像信号を輝度信号（Ｙ信号）、色差信号（Ｒ−Ｙ信号、Ｂ−Ｙ信号）に変換して色空間変換部１０７へ出力する（ＳＴ１００）。
【００４５】
次に、色空間変換部１０７では、カメラ信号処理部１０５から出力された輝度信号（Ｙ信号）及び色差信号（Ｒ−Ｙ信号、Ｂ−Ｙ信号）をＣＩＥＬＡＢ空間に基づいた色情報信号（Ｌ＊信号、ａ＊信号、ｂ＊信号）に変換し、ＬＰＦ１０８及び色相補正部１０７へ出力する（ＳＴ１０１）。
【００４６】
次に、ＬＰＦ１０８は、色空間変換部１０７から送られてくる色情報信号（Ｌ＊信号、ａ＊信号、ｂ＊信号）から所定の肌色（顔色）に対応する色情報信号のみをフィルタリングして顔面領域抽出部１０９へ送出する（ＳＴ１０２）。
【００４７】
次に、顔面領域抽出部１０９は、メモリ１１１などを参照し、ＬＰＦ１０８でフィルタリングされた色情報信号全体に対して、所定の割合を占めている色情報信号を抽出し、この抽出した色情報信号に対して膨張収縮処理などの所定の信号処理を施す（ＳＴ１０３，ＳＴ０１４）。
【００４８】
続いて、顔面領域抽出部１０９では、膨張収縮処理を施した色情報信号全体において、換言すると、画像（映像）データ全体において、所定の範囲を占めており、且つ、その範囲が所定の大きさを有し、更に、所定の比率である範囲を顔面領域であると判定し、判定した範囲に対応する色情報信号のみを顔面領域の色情報信号として抽出して色相補正値算出部１１０へ送出する（ＳＴ１０５→ＳＴ１０６）。
【００４９】
次に、色相補正値算出部１１０では、顔面領域抽出部１０９から送られてくる顔面領域に相当する色情報信号のうち、色相と彩度に関する色情報信号（ａ＊信号、ｂ＊信号）から上述の数式２に基づいて肌色（顔色）の色相を補正するための補正値∠Ｒの算出を行い、算出した補正値∠Ｒを色相補正部１１２へ送出する（ＳＴ１０６）。
【００５０】
もし、顔面領域抽出部１０９において、顔面領域に相当する色情報信号がないと判定された場合は、色相補正値算出部１１０での補正値算出処理はスキップされ、色相補正部１１２に値をゼロとした補正値∠Ｒが色相補正部１１２へ送出される（ＳＴ１０５→ＳＴ１０８）。
【００５１】
次に、色相補正部１１２は、色相補正値算出部１１０で算出された補正値∠Ｒに基づいて、色空間変換部１０７で色空間変換された色情報信号（Ｌ＊信号、ａ＊信号、ｂ＊信号）のうち、顔面領域に対応する色情報信号に対して色相の補正処理を行い、色相補正された補正色情報信号（Ｌ＊'信号、ａ＊'信号、ｂ＊'信号）をＲＧＢ変換部１１３へ送出する（ＳＴ１０７）。
【００５２】
なお、顔面領域抽出部１０９で色情報信号に顔面領域がないと判別した場合は、補正値∠Ｒはゼロであり、色相補正部１１２からは、色相補正がなされていない色情報信号（Ｌ＊信号、ａ＊信号、ｂ＊信号）が補正色情報信号（Ｌ＊'信号、ａ＊'信号、ｂ＊'信号）として出力される。
【００５３】
そして、ＲＧＢ変換部１１３において、肌色（顔色）の色相補正処理が施された色情報信号である補正色情報信号（Ｌ＊'信号、ａ＊'信号、ｂ＊'信号）を輝度信号（Ｙ'信号）及び色差信号（[Ｒ−Ｙ]'信号、[Ｂ−Ｙ]'信号）に変換して出力する（ＳＴ１０８）。
【００５４】
ＲＧＢ変換部１１３で変換された輝度信号（Ｙ'信号）及び色差信号（[Ｒ−Ｙ]'信号、[Ｂ−Ｙ]'信号）は、ホワイトバランスが調整され、更に、その画像データに人物が写されているときは、人物の肌色（顔色）が適正に補正された画像データとなって出力され、後段の回路で処理されて表示部（図示せず）に画面表示されたり、データ保存部（図示せず）に記憶される（ＳＴ１０９）。
【００５５】
【発明の効果】
以上説明したように、ホワイトバランスが調整された画像（映像）信号を均等色空間（ＣＩＥＬＡＢ空間）に基づいた色情報信号に変換し、この色情報信号から均等色空間における肌色（顔色）に対応した色情報信号のみをフィルタリングし、画像（映像）データ全体に対して所定の範囲を占め、且つ、所定の比率を有する範囲を顔面領域として判別するので、複雑な処理を行うことなく、簡単に人物の顔面領域を検出できる。
【００５６】
そして、顔面領域として検出した色情報信号と均等色空間（ＣＩＥＬＡＢ空間）において基準となる肌色（顔色）データとを比較して肌色（顔色）の色相を補正するための補正値を算出し、算出された補正値に基づいて画像データの顔面領域の色相のみを補正するので、ホワイトバランス調整後の画像データに対して不要な補正を行わず、効果的に肌色（顔色）のみを補正し、人間の主観に合致した自然な色合いの画像（映像）を再現することができるという極めて優れた効果を奏するものである。
【図面の簡単な説明】
【図１】本発明に係る顔色補正装置を備えた撮像機器の主要部を略字的に示したブロック図である。
【図２】図１の撮像機器における顔色補正の処理過程を示したフローチャートである。
【符号の説明】
１００；撮像機器、１０１；撮像部、１０２；Ｓ／Ｈ（Ｓａｍｐｌｅ／Ｈｏｌｄ）回路、１０３；ＡＧＣ（Ａｕｔｏｍａｔｉｃ Ｇａｉｎ Ｃｏｎｔｒｏｌ）回路、１０４；Ａ／Ｄ（Ａｎａｌｏｇ／Ｄｉｇｉｔａｌ）変換回路、１０５；カメラ信号処理部、１０６；ホワイトバランス制御部、１０７；色空間変換部（Ｌ＊ａ＊ｂ＊変換）、１０８；ＬＰＦ（Ｌｏｗ Ｐａｓｓ Ｆｉｌｔｅｒ）、１０９；顔面領域抽出部、１１０；色相補正値算出部、１１１；メモリ、１１２；色相補正部、１１３；ＲＧＢ変換部
Claims (11)
- 撮像機器で撮像する人物の顔色を補正する顔色補正方法であって、
撮像したカラー画像信号を色の明度情報・彩度情報・色相情報によって定められた所定の均等色空間に基づいた色情報信号に変換するステップと、
前記変換した所定の均等色空間に基づいた色情報信号から所定の肌色情報に相当する色情報信号のみを検出するステップと、
前記検出した所定の肌色情報に相当する色情報信号から人物の顔面領域に相当する色情報信号を抽出するステップと、
前記抽出した人物の顔面領域に相当する色情報信号と前記所定の均等色空間に基づいて定めた基準肌色情報とを比較し、該顔面領域に相当する色情報信号の色相を補正するための色相補正値を算出するステップと、
前記算出した色相補正値に基づいて、前記所定の均等色空間に基づいて変換した色情報信号のうち前記人物の顔面領域に対応する色情報信号のみの色相を補正するステップと、
からなる顔色補正方法。 - 前記均等色空間は、ＣＩＥＬＡＢ色空間であることを特徴とする請求項１に記載の顔色補正方法。
- 前記基準肌色情報は、人種別及び／又は国や地域別で分類されている情報であることを特徴とする請求項１に記載の顔色補正方法。
- カラー画像信号を色の明度情報・彩度情報・色相情報によって定められた所定の均等色空間に基づいた色情報信号に変換する色空間変換手段と、
前記色空間変換手段で変換した所定の均等空間に基づいた色情報信号から所定の肌色情報に相当する色情報信号のみを検出する肌色情報検出手段と、
前記肌色情報検出手段で検出した所定の肌色情報に相当する色情報信号から人物の顔面領域に相当する色情報信号を抽出する顔面領域抽出手段と、
前記顔面領域抽出手段で抽出した人物の顔面領域に相当する色情報信号と前記所定の均等色空間に基づいて定めた基準肌色情報とを比較し、該顔面領域に相当する色情報信号の色相を補正するための色相補正値を算出する補正値算出手段と、
前記補正値算出手段で算出した色相補正値に基づいて、前記色空間変換手段で変換した色情報信号のうち前記顔面領域抽出手段で抽出された人物の顔面領域に対応する色情報信号のみの色相を補正する色相補正手段と、
を備えていることを特徴とする顔色補正装置。 - 前記顔面領域抽出手段は、前記検出した肌色情報に相当する色情報信号のうち、前記色空間変換手段で変換した色情報信号全体に対して所定の割合を占めている色情報信号を人物の顔面領域に相当する色情報信号として抽出すること
を特徴とする請求項４に記載の顔色補正装置。 - 前記均等色空間は、ＣＩＥＬＡＢ色空間であること
を特徴とする請求項４に記載の顔色補正装置。 - 前記基準肌色情報は、人種別及び／又は国や地域別で分類されている情報であること
を特徴とする請求項４に記載の顔色補正装置。 - ホワイトバランスの調整機能を備えた撮像機器であって、
前記ホワイトバランスの調整を施したカラー画像信号を、色の明度情報・彩度情報・色相情報によって定められた所定の均等色空間に基づいた色情報信号に変換する色空間変換手段と、
前記色空間変換手段で変換した所定の均等空間に基づいた色情報信号から所定の肌色情報に相当する色情報信号のみを検出する肌色情報検出手段と、
前記肌色情報検出手段で検出した所定の肌色情報に相当する色情報信号から人物の顔面領域に相当する色情報信号を抽出する顔面領域抽出手段と、
前記顔面領域抽出手段で抽出した人物の顔面領域に相当する色情報信号と前記所定の均等色空間に基づいて定めた基準肌色情報とを比較し、該顔面領域に相当する色情報信号の色相を補正するための色相補正値を算出する補正値算出手段と、
前記補正値算出手段で算出した色相補正値に基づいて、前記色空間変換手段で変換した色情報信号のうち前記顔面領域抽出手段で抽出された人物の顔面領域に対応する色情報信号のみの色相を補正する色相補正手段と、
を具備していることを特徴とする撮像機器。 - 前記顔面領域抽出手段は、前記検出した肌色情報に相当する色情報信号のうち、前記色空間変換手段で変換した色情報信号全体に対して所定の割合を占めている色情報信号を人物の顔面領域に相当する色情報信号として抽出すること
を特徴とする請求項８に記載の撮像機器。 - 前記均等色空間は、ＣＩＥＬＡＢ色空間であること
を特徴とする請求項８に記載の撮像機器。 - 前記基準肌色情報は、人種別及び／又は国や地域別で分類されている情報であること
を特徴とする請求項８に記載の撮像機器。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2002345643A JP4182735B2 (ja) | 2002-11-28 | 2002-11-28 | 顔色補正方法及び顔色補正装置及び撮像機器 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2002345643A JP4182735B2 (ja) | 2002-11-28 | 2002-11-28 | 顔色補正方法及び顔色補正装置及び撮像機器 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2004180114A JP2004180114A (ja) | 2004-06-24 |
| JP4182735B2 true JP4182735B2 (ja) | 2008-11-19 |
Family
ID=32706776
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2002345643A Expired - Fee Related JP4182735B2 (ja) | 2002-11-28 | 2002-11-28 | 顔色補正方法及び顔色補正装置及び撮像機器 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP4182735B2 (ja) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7676650B2 (en) | 2002-06-28 | 2010-03-09 | Fujitsu Limited | Apparatus for controlling instruction fetch reusing fetched instruction |
Families Citing this family (16)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP4742542B2 (ja) * | 2004-09-02 | 2011-08-10 | 株式会社ニコン | 撮像装置 |
| JP2006203841A (ja) | 2004-12-24 | 2006-08-03 | Sharp Corp | 画像処理装置、カメラ装置、画像出力装置、画像処理方法、色補正処理プログラムおよび可読記録媒体 |
| CN101263721B (zh) | 2005-07-13 | 2010-07-14 | 日本电气株式会社 | 颜色修正方法和颜色修正设备 |
| KR100791373B1 (ko) | 2005-12-12 | 2008-01-07 | 삼성전자주식회사 | 선호 색을 변환하는 장치 및 방법 |
| JP5067852B2 (ja) * | 2007-08-10 | 2012-11-07 | キヤノン株式会社 | 画像処理方法及び画像処理装置 |
| JP5064947B2 (ja) | 2007-09-11 | 2012-10-31 | キヤノン株式会社 | 画像処理装置及び方法、及び撮像装置 |
| JP2010147808A (ja) | 2008-12-18 | 2010-07-01 | Olympus Imaging Corp | 撮像装置および撮像装置における画像処理方法 |
| JP4983962B2 (ja) * | 2009-07-23 | 2012-07-25 | カシオ計算機株式会社 | 画像処理装置、画像処理方法及び画像処理プログラム |
| JP5449460B2 (ja) | 2011-06-28 | 2014-03-19 | 富士フイルム株式会社 | 画像処理装置、画像処理方法および画像処理プログラム |
| KR101301821B1 (ko) * | 2011-08-30 | 2013-08-29 | 한국 한의학 연구원 | 안색 정보 생성 장치 및 그 방법, 안색 정보를 이용한 건강 상태 판단 장치 및 그 방법, 건강 분류 함수 생성 장치 및 그 방법 |
| JP5744945B2 (ja) * | 2013-03-25 | 2015-07-08 | キヤノン株式会社 | 画像処理装置及び方法、及び撮像装置 |
| CN106033593A (zh) * | 2015-03-09 | 2016-10-19 | 夏普株式会社 | 图像处理设备和方法 |
| WO2017007218A1 (ko) * | 2015-07-08 | 2017-01-12 | 삼성전자 주식회사 | 대상체의 피부 타입에 관련된 정보를 제공하는 전자 장치 및 방법 |
| KR102585229B1 (ko) | 2015-07-08 | 2023-10-05 | 삼성전자주식회사 | 대상체의 피부 타입에 관련된 정보를 제공하는 전자 장치 및 방법 |
| KR20190017203A (ko) * | 2017-08-10 | 2019-02-20 | 주식회사 더코더 | 맞춤형 화장품 제조 방법 및 이를 실행하는 장치 |
| CN114143526A (zh) * | 2021-11-19 | 2022-03-04 | 昆山丘钛光电科技有限公司 | 图像处理方法、装置、终端设备及可读存储介质 |
Family Cites Families (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH0678320A (ja) * | 1992-08-25 | 1994-03-18 | Matsushita Electric Ind Co Ltd | 色調整装置 |
| JP3847965B2 (ja) * | 1998-07-30 | 2006-11-22 | キヤノン株式会社 | 撮像装置 |
| US6396599B1 (en) * | 1998-12-21 | 2002-05-28 | Eastman Kodak Company | Method and apparatus for modifying a portion of an image in accordance with colorimetric parameters |
| JP2000261650A (ja) * | 1999-03-05 | 2000-09-22 | Toshiba Corp | 画像処理装置 |
| JP2001209802A (ja) * | 1999-11-15 | 2001-08-03 | Fuji Photo Film Co Ltd | 顔抽出方法および装置並びに記録媒体 |
| JP4244105B2 (ja) * | 1999-11-15 | 2009-03-25 | 富士フイルム株式会社 | 画像処理方法および装置並びに記録媒体 |
| JP3959909B2 (ja) * | 1999-11-19 | 2007-08-15 | 日本ビクター株式会社 | ホワイトバランス調整方法及び調整装置 |
-
2002
- 2002-11-28 JP JP2002345643A patent/JP4182735B2/ja not_active Expired - Fee Related
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7676650B2 (en) | 2002-06-28 | 2010-03-09 | Fujitsu Limited | Apparatus for controlling instruction fetch reusing fetched instruction |
Also Published As
| Publication number | Publication date |
|---|---|
| JP2004180114A (ja) | 2004-06-24 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP4182735B2 (ja) | 顔色補正方法及び顔色補正装置及び撮像機器 | |
| KR100513342B1 (ko) | 디지털 자동 화이트 밸런스 장치 | |
| RU2504108C2 (ru) | Устройство для обработки изображения, способ обработки изображения и носитель записи | |
| JP3709566B2 (ja) | 映像信号処理装置、カラービデオカメラ及び映像信号の処理方法 | |
| JPH09322191A (ja) | 画像入力装置 | |
| TWI243610B (en) | Image pickup apparatus | |
| JP2001054013A (ja) | 撮像信号処理装置およびその処理方法 | |
| US20020071041A1 (en) | Enhanced resolution mode using color image capture device | |
| JP2007036462A (ja) | 画像処理装置 | |
| JP4544308B2 (ja) | 画像処理装置、撮像装置、方法およびプログラム | |
| JP5066463B2 (ja) | ホワイトバランス制御装置及び制御方法並びに制御処理プログラムを記録した記録媒体 | |
| JP3804067B2 (ja) | 撮像装置及び撮像方法 | |
| JP2614850B2 (ja) | 撮像信号処理回路 | |
| JP3845867B2 (ja) | 撮像装置及び撮像方法 | |
| JP3706708B2 (ja) | 画像形成システム及び画像形成方法 | |
| JP2003304556A (ja) | 映像信号処理装置及び映像信号処理方法 | |
| JP4069522B2 (ja) | 映像信号処理装置、カラービデオカメラ及び映像信号の処理方法 | |
| JP2006303559A (ja) | 電子式カメラ | |
| JP2001189945A (ja) | 撮像装置 | |
| KR100581526B1 (ko) | 광원변화에 따라 백색 보정을 하는 디지털 카메라 | |
| JP4335727B2 (ja) | 顔抽出を行うディジタルカメラ | |
| JP4240256B2 (ja) | 電子カメラ | |
| JP2008099196A (ja) | 信号処理方法、信号処理回路及び撮像装置 | |
| JP2014042138A (ja) | 画像処理装置、コンピュータプログラム、およびデジタルカメラ | |
| JPS61198989A (ja) | 撮像装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20051014 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20080516 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20080520 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20080711 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20080812 |
|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20080825 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110912 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110912 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110912 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120912 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120912 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130912 Year of fee payment: 5 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| LAPS | Cancellation because of no payment of annual fees |