CN105488782B - 光泽判定装置以及光泽判定方法 - Google Patents

光泽判定装置以及光泽判定方法 Download PDF

Info

Publication number
CN105488782B
CN105488782B CN201510507118.8A CN201510507118A CN105488782B CN 105488782 B CN105488782 B CN 105488782B CN 201510507118 A CN201510507118 A CN 201510507118A CN 105488782 B CN105488782 B CN 105488782B
Authority
CN
China
Prior art keywords
polarized light
image
gloss
polarization
orthogonal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201510507118.8A
Other languages
English (en)
Other versions
CN105488782A (zh
Inventor
山梨智史
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Intellectual Property Management Co Ltd
Original Assignee
Panasonic Intellectual Property Management Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Intellectual Property Management Co Ltd filed Critical Panasonic Intellectual Property Management Co Ltd
Publication of CN105488782A publication Critical patent/CN105488782A/zh
Application granted granted Critical
Publication of CN105488782B publication Critical patent/CN105488782B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0077Devices for viewing the surface of the body, e.g. camera, magnifying lens
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/44Detecting, measuring or recording for evaluating the integumentary system, e.g. skin, hair or nails
    • A61B5/441Skin evaluation, e.g. for skin disorder diagnosis
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/10Image acquisition
    • G06V10/12Details of acquisition arrangements; Constructional details thereof
    • G06V10/14Optical characteristics of the device performing the acquisition or on the illumination arrangements
    • G06V10/141Control of illumination
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/40Extraction of image or video features
    • G06V10/60Extraction of image or video features relating to illumination properties, e.g. using a reflectance or lighting model
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/56Cameras or camera modules comprising electronic image sensors; Control thereof provided with illuminating means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10052Images from lightfield camera
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30196Human being; Person
    • G06T2207/30201Face

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Medical Informatics (AREA)
  • Veterinary Medicine (AREA)
  • Pathology (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Biophysics (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Software Systems (AREA)
  • Signal Processing (AREA)
  • Dermatology (AREA)
  • Quality & Reliability (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Investigating Or Analysing Materials By Optical Means (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)

Abstract

本发明提供一种能够简单且高精度地判定对象物的光泽状态的光泽判定装置以及光泽判定方法。光泽判定装置(100)具有:图像取得部(330),其取得平行偏振光图像和正交偏振光图像,所述平行偏振光图像是将照射了偏振光的对象物经过使与偏振光的偏振方向相同的方向的偏振成分通过的偏振滤波器进行拍摄而得到的图像,所述正交偏振光图像是将照射了偏振光的对象物经过使与偏振光的偏振方向正交的方向的偏振成分通过的偏振滤波器进行拍摄而得到的图像;差分图像生成部(340),其生成表示平行偏振光图像与正交偏振光图像之间的辉度之差的差分图像;以及光泽判定部(350),其基于差分图像来判定对象物的光泽状态。

Description

光泽判定装置以及光泽判定方法
技术领域
本发明涉及判定面部等的光泽状态的光泽判定装置以及光泽判定方法。
背景技术
在物体的表面,有时会由于该表面的状态与照明情况的均衡而产生光泽。在面部的情况下,强光泽被称为“反光”等。
例如,在根据拍摄了面部的图像来判定有无皱纹等皮肤状态的情况下,若不考虑光泽的影响,则有时判定精度会降低。另外,反过来,也能够根据皮肤所产生的光泽来判定皮脂程度等皮肤状态。因此,判定光泽的强度、分布等光泽的状态(以下称为“光泽状态”),在进行皮肤状态判定等方面是有益的。
因此,例如在专利文献1~专利文献3中记载了判定对象物的光泽状态的技术。
在专利文献1所记载的技术中,对于拍摄了成为光泽状态判定的对象的物体(以下称为“对象物”)而得到的图像,算出各像素的辉度值。并且,在专利文献1所记载的技术中,将辉度值比周边主要成分的辉度值大很多的区域判定为光泽程度高的区域(以下称为“光泽区域”)。
另外,在专利文献2所记载的技术中,在拍摄了对象物的图像中存在辉度值为预定的阈值以上的像素的情况下,判定为在该图像中包含光泽区域。
另外,在专利文献3所记载的技术中,分别测定全反射率和1/4值漫反射率,所述全反射率是使自然光入射到对象物的表面时的光的反射率,所述漫反射率是使P偏振光入射到对象物的表面时的S偏振成分的光的反射率。并且,在专利文献3所记载的技术中,基于从全反射率减去1/4值漫反射率的4倍值而得到的值来判定光泽的强度。
现有技术文献
专利文献1:日本特开2005-327009号公报
专利文献2:日本特开2010-273737号公报
专利文献3:日本特开2004-215991号公报
发明内容
发明要解决的问题
然而,在专利文献1以及专利文献2所记载的技术中,在白色人种的皮肤等表面颜色亮的对象物的情况下,难以高精度地判定光泽区域。另外,在专利文献3所记载的技术中,必须按照对象物的表面的朝向来设定P偏振光的入射方向,很费工夫。特别是在专利文献3所记载的技术中,在如面部这样各个部分的表面的朝向不同的情况下,必须按各个部分切换P偏振光的入射方向来进行反射率的测定,需要大量的工夫和时间。因此,希望有一种能够简单且高精度地判定对象物的光泽状态的技术。
本发明的目的在于,提供一种能够简单且高精度地判定对象物的光泽状态的光泽判定装置以及光泽判定方法。
用于解决问题的手段
本发明的光泽判定装置具有:图像取得部,其取得平行偏振光图像和正交偏振光图像,所述平行偏振光图像是将照射了偏振光的对象物经过使与所述偏振光的偏振方向相同的方向的偏振成分通过的偏振滤波器进行拍摄而得到的图像,所述正交偏振光图像是将照射了偏振光的所述对象物经过使与所述偏振光的偏振方向正交的方向的偏振成分通过的偏振滤波器进行拍摄而得到的图像;差分图像生成部,其生成表示所述平行偏振光图像与所述正交偏振光图像之间的辉度之差的差分图像;以及光泽判定部,其基于所述差分图像来判定所述对象物的光泽状态。
本发明的光泽判定方法包括:图像取得步骤,取得平行偏振光图像和正交偏振光图像,所述平行偏振光图像是将照射了偏振光的对象物经过使与所述偏振光的偏振方向相同的方向的偏振成分通过的偏振滤波器进行拍摄而得到的图像,所述正交偏振光图像是将照射了偏振光的所述对象物经过使与所述偏振光的偏振方向正交的方向的偏振成分通过的偏振滤波器进行拍摄而得到的图像;差分图像生成步骤,生成表示所述平行偏振光图像与所述正交偏振光图像之间的辉度之差的差分图像;以及光泽判定步骤,基于所述差分图像来判定所述对象物的光泽状态。
发明的效果
根据本发明,能够简单且高精度地判定对象物的光泽状态。
附图说明
图1是表示本发明的一个实施方式的光泽判定装置的外观以及使用状态的一例的图。
图2是表示本实施方式的光泽判定装置的构成的一例的框图。
图3是表示本实施方式的光泽判定装置的工作的一例的流程图。
图4是表示本实施方式中的平行偏振光图像的一例的图。
图5是表示本实施方式中的正交偏振光图像的一例的图。
图6是表示本实施方式中的差分图像的一例的图。
图7是表示本实施方式中的二值化差分图像的一例的图。
图8是表示使平行偏振光图像二值化的结果的参考图。
附图标记说明
100 光泽判定装置
110 框体
120 带偏振滤波器的灯
130 带偏振滤波器的相机
140 带触摸面板的显示器
310 照明部
320 拍摄部
330 图像取得部
340 差分图像生成部
350 光泽判定部
351 二值化部
352 区域检测部
360 皮肤状态判定部
370 判定结果提示部
具体实施方式
以下,参照附图对本发明的一个实施方式进行详细说明。此外,本实施方式是将本发明的光泽判定装置适用于对用户面部的皮肤状态进行判定的装置时的具体技术方案的一例。
<外观以及使用状态>
图1是表示本发明的一个实施方式的光泽判定装置100的外观以及使用状态的一例的图。
如图1所示,光泽判定装置100例如是能够立在桌子上的平板型终端。光泽判定装置100在板状的框体110的主面上配置有带偏振滤波器的灯120、带偏振滤波器的相机130、带触摸面板的显示器140。用户200调整带触摸面板的显示器140的位置以及自身的位置,以使面部210位于与带触摸面板的显示器140相距数十厘米而对向的位置等预定位置,从而使用光泽判定装置100。
带偏振滤波器的灯120例如具有内置有多个LED(Light Emitting Diode:发光二极管)的发光部和使水平方向的偏振成分通过的偏振滤波器。带偏振滤波器的灯120在面部210位于上述预定位置的状态下向面部210照射偏振方向为水平的偏振光(以下,简称为“偏振光”)。此外,偏振滤波器也可以是能拆下的偏振滤波器。
带偏振滤波器的相机130例如具有数码相机和能够调整旋转角度的偏振滤波器。带偏振滤波器的相机130在面部210位于上述预定位置的状态下拍摄面部210。此外,偏振滤波器能够将要通过的偏振成分的方向在水平方向和垂直方向之间进行切换。即,带偏振滤波器的相机130能够经过使水平方向的偏振成分通过的偏振滤波器来拍摄对象物,并且也能够经过使垂直方向的偏振成分通过的偏振滤波器来拍摄对象物。此外,偏振滤波器也可以是能拆下的偏振滤波器。
带触摸面板的显示器140例如具有比人面部的大小大一圈的液晶显示器。带触摸面板的显示器140受理来自用户200的操作并且对用户200显示信息。
物体表面上的光的反射可分为镜面反射(表面反射)和漫反射(内部反射)。物体表面所产生的光泽主要由于该表面上的光的镜面反射而引起。
在偏振光入射到物体表面时,对镜面反射而言维持了其偏振光性,而对于漫反射而言其偏振光性未被维持。因此,根据是否维持了偏振光的偏振光性,能够判定来自物体表面的光主要是镜面反射的光还是主要是漫反射的光。
因此,光泽判定装置100使用带偏振滤波器的相机130,分别提取反射光的偏振方向与偏振光相同的成分的辉度和偏振方向与偏振光正交的成分的辉度。并且,光泽判定装置100将提取结果之差大的部分判定为镜面反射的程度高的部分即物体表面的光泽程度高的部分。
此外,在本实施方式中,偏振方向相同不仅是严格相同的情况,设为包括小于45度的偏振方向的角度差的概念。另外,偏振方向正交不仅是严格正交的情况,设为包括从正交的方向起小于45度的角度差的概念。
<装置的构成>
接着,对光泽判定装置100的构成进行说明。
图2是表示光泽判定装置100的构成的一例的框图。
在图2中,光泽判定装置100具有照明部310、拍摄部320、图像取得部330、差分图像生成部340、光泽判定部350、皮肤状态判定部360以及判定结果提示部370。
照明部310包括上述的带偏振滤波器的灯120(参照图1)。在进行面部210的光泽状态的判定时,照明部310对作为光泽状态判定的对象物的面部210照射偏振光,指示拍摄部330进行用于光泽状态判定的图像拍摄(以下称为“判定用拍摄”)。
拍摄部330包括上述的带偏振滤波器的相机130。拍摄部330在被指示了进行判定用拍摄时,首先使偏振滤波器让通过的偏振成分的偏振方向变为与照射面部210的偏振光的偏振方向相同的方向(在本实施方式中为水平方向)来进行拍摄。然后,拍摄部330使偏振滤波器让通过的偏振成分的偏振方向变为与照射面部210的偏振光的偏振方向正交的方向(在本实施方式中为垂直方向)来进行拍摄。此外,该拍摄顺序也可以反过来。然后,拍摄部330将所拍摄到的两个图像输出给图像取得部330。
此外,照明部310以及拍摄部320的工作可以由图像取得部330来控制。
图像取得部330取得被输入的两个图像作为平行偏振光图像和正交偏振光图像。然后,图像取得部330将所取得的两个图像输出给差分图像生成部340以及皮肤状态判定部360。另外,图像取得部330将所取得的平行偏振光图像输出给皮肤状态判定部360。
在此,平行偏振光图像是指将照射了偏振光的面部210经过使与该偏振光的偏振方向相同的方向(在本实施方式中为水平方向)的偏振成分通过的偏振滤波器进行拍摄而得到的图像。另外,正交偏振光图像是指将照射了偏振光的面部210经过使与该偏振光的偏振方向正交的方向(在本实施方式中为垂直方向)的偏振成分通过的偏振滤波器进行拍摄而得到的图像。
差分图像生成部340生成表示被输入的平行偏振光图与正交偏振光图像之间的辉度之差的差分图像。更具体而言,差分图像生成部340基于从平行偏振光图像的基准像素的辉度值减去正交偏振光图像的与基准像素对应的参照像素的辉度值而得到的值,决定差分图像的与基准像素对应的对应像素的像素值。然后,差分图像生成部340将所生成的差分图像输出给光泽判定部350。
光泽判定部350基于被输入的差分图像来判定面部210的光泽状态,将判定结果输出给皮肤状态判定部360。光泽判定部350具有二值化部351和区域检测部352。
二值化部351生成使差分图像二值化而得到的二值化差分图像。更具体而言,二值化部351将差分图像的各像素值与预定的阈值(以下称为“二值化阈值”)进行比较,将各像素值转换成表示平行偏振光图像与正交偏振光图像之间的辉度值之差的绝对值小的“0”和表示平行偏振光图像与正交偏振光图像之间的辉度值之差的绝对值大的“1”中的某一方。然后,二值化部351将所生成的二值化差分图像输出给区域检测部352。
区域检测部352将被输入的二值化差分图像中的平行偏振光图像与正交偏振光图像之间的辉度值之差大的区域(在本实施方式中是像素值为“1”的区域)检测为光泽区域。然后,将表示所检测出的光泽区域的信息(光泽状态的判定结果)输出给皮肤状态判定部360。
皮肤状态判定部360针对被输入的平行偏振光图像,通过将图像的阴影边缘的强度与阈值进行比较来检测皱纹。然后,皮肤状态判定部360将表示所检测出的皱纹区域的信息(皮肤状态的判定结果)和被输入的平行偏振光图像输出给判定结果提示部370。其中,对于被输入的光泽状态的判定结果所表示的光泽区域,皮肤状态判定部360使上述阈值比其他区域的阈值低。即,皮肤状态判定部360使得在光泽程度高的区域皱纹容易被检测。
判定结果提示部370包括带触摸面板的显示器140。判定结果提示部370将被输入的皮肤状态的判定结果(与皮肤的状态相关的信息)提示给用户200。例如,判定结果提示部370生成表示皱纹区域的皱纹区域图像,使其重叠于平行偏振光图像来显示。
此外,虽然未图示,但光泽判定装置100例如具有CPU(Central Processing Unit:中央处理单元)、存储有控制程序的ROM(Read Only Memory:只读存储器)等存储介质、RAM(Random Access Memory:随机读取存储器)等作业用存储器、以及通信电路。该情况下,上述的各部的功能通过CPU执行控制程序来实现。
具有如此构成的光泽判定装置100能够基于平行偏振光图像与所述正交偏振光图像之间的辉度之差来判定面部210的光泽状态,还能够基于光泽状态的判定结果来提示与皮肤状态相关的信息。
<装置的工作>
接着,对光泽判定装置100的工作进行说明。
图3是表示光泽判定装置100的工作的一例的流程图。以下说明的工作例如在每次由用户进行了指示开始皮肤状态判定的处理的预定操作时开始。
在步骤S1100中,图像取得部330使用照明部310以及拍摄部320取得平行偏振光图像和正交偏振光图像。
图4是表示平行偏振光图像的一例的图。另外,图5是表示正交偏振光图像的一例的图。
平行偏振光图像是使拍摄部320的偏振滤波器让通过的光的偏振方向与照明部310的偏振光的偏振方向一致而拍摄到的图像。因此,如图4所示,在平行偏振光图像410中,在镜面反射强的部分辉度高。
然而,在漫反射的反射光中也存在相同偏振方向的成分,而且,在肤色亮的情况下辉度也高。另外,在来自周围的环境光中也包含与偏振光相同的偏振成分。因此,平行偏振光图像410的各部分的辉度未必反映漫反射的程度。换言之,平行偏振光图像410的各部分成为与镜面反射的程度、漫反射的程度、肤色的亮度以及环境光相应的辉度。
另一方面,正交偏振光图像是使拍摄部320的偏振滤波器让通过的光的偏振方向与照明部310的偏振光的偏振方向正交而拍摄到的图像。因此,如图5所示,在正交偏振光图像420中,几乎不受镜面反射的影响,成为仅与漫反射的程度、肤色的亮度以及环境光相应的辉度。
图像取得部330优选控制照明部310以及拍摄部320,使得以尽可能短的时间间隔来拍摄平行偏振光图像和正交偏振光图像。这是因为:若面部的位置和/或朝向发生偏离,则面部各部分的位置在平行偏振光图像与正交偏振光图像之间会偏离,导致光泽状态的判定精度降低。此外,图像取得部330也可以通过模式匹配等从平行偏振光图像和正交偏振光图像中分别检测面部的眼角、嘴角等面部器官的位置,基于所检测出的面部器官的位置使平行偏振光图像或者正交偏振光图像移动、旋转、缩放或者变形,以使得面部各部分的位置的偏离减小。
在图3的步骤S1200中,差分图像生成部340生成表示平行偏振光图像与正交偏振光图像之间的辉度之差的差分图像。
图6是表示差分图像的一例的图。在此,示出从图4的平行偏振光图像410和图5的正交偏振光图像420生成的差分图像。
如上所述,平行偏振光图像410的各部分的辉度是基于镜面反射的程度、漫反射的程度、肤色的亮度以及环境光的,与此相对,正交偏振光图像420的各部分的辉度是仅基于漫反射的程度、肤色的亮度以及环境光的。因此,如图6所示,差分图像430成为主要从平行偏振光图像410的各部分的辉度中提取镜面反射的成分而表示的图像。
此外,差分图像生成部340在算出差分图像时,也可以对平行偏振光图像的辉度值和正交偏振光图像的辉度值赋予预定的权重。
在图3的步骤S1300中,二值化部351使用二值化阈值使差分图像二值化,生成二值化差分图像。
图7是表示二值化差分图像的一例的图。在此,示出从图5的差分图像430生成的二值化差分图像。
如图7所示,在二值化差分图像440中,在差分图像430的像素值(辉度值)为二值化阈值以上的区域、即平行偏振光图像与正交偏振光图像之间的辉度之差大的区域,成为值“1”(图中,由白区域表示)。另外,在除此以外的区域、即平行偏振光图像与正交偏振光图像之间的辉度之差小的区域,成为值“0”(图中,由黑区域表示)。
在图3的步骤S1400中,区域检测部352从二值化差分图像中检测光泽区域(在本实施方式中是像素值为“1”的区域)作为光泽区域。
在步骤S1500中,皮肤状态判定部360基于光泽区域来判定面部210的皮肤状态。
然后,在步骤S1600中,判定结果提示部370将皮肤状态的判定结果提示给用户200。例如,判定结果提示部370显示将上述的皱纹区域图像重叠于平行偏振光图像而得到的判定结果图像。
通过这样的工作,光泽判定装置100能够基于平行偏振光图像与所述正交偏振光图像之间的辉度之差来判定面部210的光泽状态,还能够基于光泽状态的判定结果来提示与皮肤状态相关的信息。
图8是为了比较而表示使图4所示的平行偏振光图像410二值化时的结果的图。如图8所示可知:使平行偏振光图像410二值化后的二值化平行偏振光图像460,与图7所示的二值化差分图像440相比,在更多的区域像素值高。这是因为未能除去漫反射以及肤色的亮度这样的镜面反射以外的辉度成分之故。
<本实施方式的效果>
如上所述,本实施方式的光泽判定装置100取得面部210的平行偏振光图像以及正交偏振光图像,生成表示平行偏振光图像与正交偏振光图像之间的辉度之差的差分图像,基于该差分图像来判定面部210的光泽状态。
由此,光泽判定装置100能够从拍摄了面部210的图像中高精度地提取镜面反射的成分,能够高精度地判定面部210的光泽状态。另外,光泽判定装置100能够仅通过一次照射中的两个图像的拍摄和图像数据处理来进行该判定。即,与以往技术相比,光泽判定装置100能够极其简单地实现上述的高精度的光泽状态判定。
<本实施方式的变形例>
此外,光泽判定装置100的构成的一部分可以配置于网络上的服务器等外部装置而与其他部分分离。该情况下,光泽判定装置100需要具备用于与该外部装置进行通信的通信部。
另外,在照明部310、拍摄部320、皮肤状态判定部360以及判定结果提示部370的一部分或全部由其他装置实现的情况下,光泽判定装置100也可以不必具有该部分。另外,光泽判定装置100在不判定光泽区域的情况下,可以不必具有二值化部351以及区域检测部352。
(其他的变形例)
此外,平行偏振光图像以及正交偏振光图像的取得方法不限于上述的例子。例如,光泽判定装置也可以构成为在照明部中切换照明光的偏振方向并在固定了偏振滤波器的角度的拍摄部中借助各偏振方向的照明光来进行拍摄。另外,在该情况下,在将面部的脸颊附近等表面朝向大致恒定的部分设为对象物时,照明部也可以构成为使P波偏振光以及S波偏振光入射到对象物。
另外,光泽判定装置也可以不提示皮肤状态而具有照明控制部,该照明控制部基于所判定出的光泽状态来控制照明以使该光泽状态达到所希望的状态。例如,光泽判定装置具备能够分别进行调光的多个光源,一边切换光源的亮灯模式,一边取得在各亮灯模式下的光泽区域的面积。然后,光泽判定装置在以光泽区域的面积最小的亮灯模式来进行照明的状态下不使用偏振滤波器而再次拍摄面部。
另外,光泽判定装置也可以在除基于边缘检测的皱纹检测处理之外的各种皮肤状态判定处理中活用所判定出的光泽状态。例如,光泽判定装置将光泽程度高的区域判定为皮脂分泌程度高的区域。
如此,光泽判定装置通过基于高精度地判定出的光泽状态来进行处理,能够提高受到光泽状态的影响的各种处理或者推定与光泽状态紧密关联的状态的各种处理的精度。
另外,成为判定对象的光泽状态不限定于上述的例子。例如,作为光泽状态,光泽判定装置也可以判定差分图像本身、差分图像中的各个区域的像素值的代表值。例如,光泽判定装置可以从拍摄图像中检测唇区域,将所检测出的唇区域中的平行偏振光图像与正交偏振光图像之间的辉度值的平均值检测为光泽状态。此外,在该例子的情况下,光泽判定装置例如能够判定唇膏的润泽效果的程度。
另外,光泽判定装置也可以输入其他的各种信息而根据被输入的信息来变更二值化阈值。例如,在室温、湿度的测定值表示容易干燥的环境时,光泽判定装置降低二值化阈值而使光泽区域容易被检测。
另外,偏振光的偏振方向、照明方法、拍摄方法以及皮肤状态判定结果的提示方法不限定于上述的例子。例如,光泽判定装置也可以具有相近的两个相机,该两个相机分别具备让通过的偏振方向成分相互正交的偏振滤波器,通过由这两个相机同时进行拍摄,从而同时取得平行偏振光图像和正交偏振光图像。另外,光泽判定装置也可以在拍摄平行偏振光图像以及正交偏振光图像的相机之外还具备拍摄用于其他用途的图像的相机。
另外,光泽状态判定的对象物不限定于人的面部。例如,光泽判定装置也可以用于工业产品的光泽状态判定。
<本发明的总结>
本发明的光泽判定装置具有:图像取得部,其取得平行偏振光图像和正交偏振光图像,所述平行偏振光图像是将照射了偏振光的对象物经过使与所述偏振光的偏振方向相同的方向的偏振成分通过的偏振滤波器进行拍摄而得到的图像,所述正交偏振光图像是将照射了偏振光的所述对象物经过使与所述偏振光的偏振方向正交的方向的偏振成分通过的偏振滤波器进行拍摄而得到的图像;差分图像生成部,其生成表示所述平行偏振光图像与所述正交偏振光图像之间的辉度之差的差分图像;以及光泽判定部,其基于所述差分图像来判定所述对象物的光泽状态。
此外,在上述光泽判定装置中,所述差分图像生成部可以基于从所述平行偏振光图像的基准像素的辉度值减去所述正交偏振光图像的与所述基准像素对应的参照像素的辉度值而得到的值,决定所述差分图像的与所述基准像素对应的对应像素的像素值,所述光泽判定部可以具有:二值化部,其生成使所述差分图像二值化而得到的二值化差分图像;和区域检测部,其基于所述二值化差分图像,检测所述对象物的光泽程度高的光泽区域。
另外,在上述光泽判定装置中,所述二值化部可以对用于生成所述二值化差分图像的阈值进行调整,以使所述光泽区域满足预定的条件。
另外,在上述光泽判定装置中,所述平行偏振光图像的拍摄所使用的所述偏振光和所述正交偏振光图像的拍摄所使用的所述偏振光,可以是从同一位置照射所述对象物的光,所述平行偏振光图像和所述正交偏振光图像可以是从同一位置拍摄所述对象物而得到的图像。
另外,在上述光泽判定装置中,所述对象物可以是人面部的皮肤,所述光泽判定装置可以具有:皮肤状态判定部,其基于所述光泽状态和从与拍摄了所述平行偏振光图像以及所述正交偏振光图像的所述位置相同的位置拍摄所述对象物而得到图像,判定所述皮肤的状态;和判定结果提示部,其提示与所判定出的所述皮肤的状态相关的信息。
另外,上述光泽判定装置可以具有照明控制部,该照明控制部基于所述光泽状态来控制从与拍摄了所述平行偏振光图像以及所述正交偏振光图像的所述位置相同的位置拍摄所述对象物时所使用的对所述对象物的照明。
本发明的光泽判定方法包括:图像取得步骤,取得平行偏振光图像和正交偏振光图像,所述平行偏振光图像是将照射了偏振光的对象物经过使与所述偏振光的偏振方向相同的方向的偏振成分通过的偏振滤波器进行拍摄而得到的图像,所述正交偏振光图像是将照射了偏振光的所述对象物经过使与所述偏振光的偏振方向正交的方向的偏振成分通过的偏振滤波器进行拍摄而得到的图像;差分图像生成步骤,生成表示所述平行偏振光图像与所述正交偏振光图像之间的辉度之差的差分图像;以及光泽判定步骤,基于所述差分图像来判定所述对象物的光泽状态。
产业上的可利用性
本发明作为能够简单且高精度地判定对象物的光泽状态的光泽判定装置以及光泽判定方法有用。

Claims (4)

1.一种光泽判定装置,具有:
图像取得部,其取得平行偏振光图像和正交偏振光图像,所述平行偏振光图像是将照射了偏振光的人面部的皮肤经过使与所述偏振光的偏振方向相同的方向的偏振成分通过的偏振滤波器进行拍摄而得到的图像,所述正交偏振光图像是将照射了所述偏振光的所述人面部的皮肤经过使与所述偏振光的偏振方向正交的方向的偏振成分通过的偏振滤波器进行拍摄而得到的图像;
差分图像生成部,其生成表示所述平行偏振光图像与所述正交偏振光图像之间的辉度之差的差分图像;
二值化部,其生成使所述差分图像二值化而得到的二值化差分图像;
区域检测部,其基于所述二值化差分图像,检测所述人面部的皮肤的光泽程度高的光泽区域;
皮肤状态判定部,其使用所述光泽区域比其他区域低的皱纹检测用的阈值,从所述平行偏振光图像中检测面部皱纹图像;以及
判定结果提示部,其使检测到的所述面部皱纹图像重叠于所述平行偏振光图像来显示。
2.根据权利要求1所述的光泽判定装置,
所述平行偏振光图像的拍摄所使用的所述偏振光和所述正交偏振光图像的拍摄所使用的所述偏振光,是从同一位置照射所述人面部的皮肤的光,
所述平行偏振光图像和所述正交偏振光图像是从同一位置拍摄所述人面部的皮肤而得到的图像。
3.根据权利要求2所述的光泽判定装置,
具有照明控制部,该照明控制部基于光泽状态来控制从与拍摄了所述平行偏振光图像以及所述正交偏振光图像的所述位置相同的位置拍摄所述人面部的皮肤时所使用的对所述人面部的皮肤的照明。
4.一种光泽判定方法,包括:
图像取得步骤,取得平行偏振光图像和正交偏振光图像,所述平行偏振光图像是将照射了偏振光的人面部的皮肤经过使与所述偏振光的偏振方向相同的方向的偏振成分通过的偏振滤波器进行拍摄而得到的图像,所述正交偏振光图像是将照射了所述偏振光的所述人面部的皮肤经过使与所述偏振光的偏振方向正交的方向的偏振成分通过的偏振滤波器进行拍摄而得到的图像;
差分图像生成步骤,生成表示所述平行偏振光图像与所述正交偏振光图像之间的辉度之差的差分图像;
二值化差分图像生成步骤,生成使所述差分图像二值化而得到的二值化差分图像;
区域检测步骤,基于所述二值化差分图像,检测所述人面部的皮肤的光泽程度高的光泽区域;
面部皱纹图像检测步骤,使用所述光泽区域比其他区域低的皱纹检测用的阈值,从所述平行偏振光图像中检测面部皱纹图像;以及
显示步骤,使检测到的所述面部皱纹图像重叠于所述平行偏振光图像来显示。
CN201510507118.8A 2014-10-06 2015-08-18 光泽判定装置以及光泽判定方法 Active CN105488782B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2014205645A JP6406606B2 (ja) 2014-10-06 2014-10-06 光沢判定装置および光沢判定方法
JP2014-205645 2014-10-06

Publications (2)

Publication Number Publication Date
CN105488782A CN105488782A (zh) 2016-04-13
CN105488782B true CN105488782B (zh) 2020-07-28

Family

ID=55633023

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510507118.8A Active CN105488782B (zh) 2014-10-06 2015-08-18 光泽判定装置以及光泽判定方法

Country Status (3)

Country Link
US (1) US9953237B2 (zh)
JP (1) JP6406606B2 (zh)
CN (1) CN105488782B (zh)

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101718517B1 (ko) * 2015-04-03 2017-04-05 재단법인대구경북과학기술원 피부 헬스케어를 위한 모바일 다중 분광 이미징 디바이스, 사용자 모바일 기기 연결, 이미지 분석 방법
JP6760298B2 (ja) * 2015-09-30 2020-09-23 ソニー株式会社 情報取得装置と情報取得方法
KR102370800B1 (ko) * 2016-05-16 2022-03-07 (주)아모레퍼시픽 피부 미백 지수의 생성 방법
US20200305784A1 (en) * 2016-06-27 2020-10-01 Koninklijke Philips N.V Device and method for skin gloss detection
RU2657377C2 (ru) * 2016-11-11 2018-06-13 Самсунг Электроникс Ко., Лтд. Интеллектуальная насадка на смартфон для определения чистоты, влажности и фотовозраста кожи
EP3384829A1 (en) * 2017-04-05 2018-10-10 Koninklijke Philips N.V. Skin gloss measurement for quantitative estimation of skin gloss
US10509940B2 (en) * 2017-09-28 2019-12-17 Apple Inc. Electronic device including sequential operation of light source subsets while acquiring biometric image data and related methods
JP2019082390A (ja) * 2017-10-30 2019-05-30 富士ゼロックス株式会社 表面特性取得装置
US11452455B2 (en) * 2018-05-02 2022-09-27 Canfield Scientific, Incorporated Skin reflectance and oiliness measurement
DE102018222122A1 (de) 2018-12-18 2020-06-18 Henkel Ag & Co. Kgaa Verfahren zum bestimmen von glanz eines abschnitts einer haut eines benutzers
US11558556B2 (en) * 2020-07-09 2023-01-17 Samsung Electronics Co., Ltd. Electronic device for acquiring image by using light-emitting module having polarizing filter and method for controlling same
CN113011303B (zh) * 2021-03-12 2023-04-18 支付宝(杭州)信息技术有限公司 一种基于偏振图像的面部特征确定方法及装置
CN113411507B (zh) * 2021-05-10 2023-01-06 深圳数联天下智能科技有限公司 测肤图像的获取方法、装置、设备及存储介质
WO2023089956A1 (ja) * 2021-11-22 2023-05-25 ソニーグループ株式会社 画像処理装置と画像処理方法およびプログラム

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0566381A (ja) * 1991-09-09 1993-03-19 Olympus Optical Co Ltd 光沢検出装置
WO2014119257A1 (ja) * 2013-01-29 2014-08-07 パナソニック株式会社 撮像システム

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0771945A (ja) * 1992-08-07 1995-03-17 Kao Corp 表面性状測定方法及びその装置
US5552890A (en) * 1994-04-19 1996-09-03 Tricor Systems, Inc. Gloss measurement system
JP2001174412A (ja) * 1999-12-22 2001-06-29 Hokkaido ご飯外観の数値評価方法
FR2810737B1 (fr) * 2000-06-23 2003-04-18 Oreal Appareil et procede d'examen d'une surface
JP4105554B2 (ja) 2003-01-16 2008-06-25 株式会社資生堂 皮膚の透明感評価方法
AU2003289004A1 (en) * 2003-06-11 2005-01-04 Kose Corporation Skin evaluation method and image simulation method
JP4056443B2 (ja) * 2003-08-21 2008-03-05 Necフィールディング株式会社 健康診断システムおよびプログラム
JP4396387B2 (ja) 2004-05-13 2010-01-13 オムロン株式会社 画像補正装置
JP4201197B2 (ja) * 2004-08-05 2008-12-24 ジヤトコ株式会社 無段変速機用ベルトの検査方法及び無段変速機用ベルトの検査装置
JP4797593B2 (ja) * 2005-03-10 2011-10-19 富士ゼロックス株式会社 光沢測定装置及びプログラム
WO2006095779A1 (ja) * 2005-03-10 2006-09-14 Fuji Photo Film Co., Ltd. 撮影システム
US20120321759A1 (en) * 2007-01-05 2012-12-20 Myskin, Inc. Characterization of food materials by optomagnetic fingerprinting
US20140233810A1 (en) * 2007-06-11 2014-08-21 Lumidigm, Inc. Dermatoglyphic hand sensor
EP2293541B1 (en) * 2008-06-26 2018-09-12 Panasonic Intellectual Property Management Co., Ltd. Image processing apparatus, image division program and image synthesising method
EP2223650A1 (en) * 2009-02-25 2010-09-01 The Provost, Fellows and Scholars of the College of the Holy and Undivided Trinity of Queen Elizabeth near Dublin Method and apparatus for imaging tissue topography
JP5398354B2 (ja) 2009-05-26 2014-01-29 株式会社マンダム 皮膚の表面状態の評価方法
JP2011122990A (ja) * 2009-12-14 2011-06-23 Hitachi High-Technologies Corp 欠陥検査装置及び欠陥検査方法
KR20140096262A (ko) * 2011-08-21 2014-08-05 데이비드 레비츠 스마트폰에 장착된 광 간섭 단층 촬영 시스템
US8971593B2 (en) * 2011-10-12 2015-03-03 Lumidigm, Inc. Methods and systems for performing biometric functions
AU2014212124A1 (en) * 2013-02-01 2015-09-10 Daniel FARKAS Method and system for characterizing tissue in three dimensions using multimode optical measurements
WO2014208067A1 (ja) * 2013-06-28 2014-12-31 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 肌の官能評価装置および肌の評価方法
US9307159B2 (en) * 2014-03-04 2016-04-05 Panasonic Intellectual Property Management Co., Ltd. Polarization image processing apparatus

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0566381A (ja) * 1991-09-09 1993-03-19 Olympus Optical Co Ltd 光沢検出装置
WO2014119257A1 (ja) * 2013-01-29 2014-08-07 パナソニック株式会社 撮像システム

Also Published As

Publication number Publication date
JP2016075561A (ja) 2016-05-12
CN105488782A (zh) 2016-04-13
US20160098614A1 (en) 2016-04-07
US9953237B2 (en) 2018-04-24
JP6406606B2 (ja) 2018-10-17

Similar Documents

Publication Publication Date Title
CN105488782B (zh) 光泽判定装置以及光泽判定方法
CN109583285B (zh) 对象识别方法
KR101247497B1 (ko) 환경 적응형 얼굴 인식장치 및 그 방법
JP4465719B2 (ja) 成り済まし検出装置、および成り済まし検出方法
US10129460B2 (en) System for producing compliant facial images for selected identification documents
JP6240609B2 (ja) 視覚ベースの対話式投影システム
JP6305941B2 (ja) オブジェクト向上のためのライティング・システムおよび方法
US20160371855A1 (en) Image based measurement system
WO2014125831A1 (ja) 電子ミラー装置
EP2324391A1 (en) In-camera based method of detecting defect eye with high accuracy
JP2012249917A (ja) 画像処理装置および方法、画像処理システム、プログラム、および、記録媒体
WO2016107638A1 (en) An image face processing method and apparatus
US20180181795A1 (en) Image processing apparatus which determines category to which object in image belongs, method therefor, and object discrimination apparatus
EP3360075A1 (en) Iris recognition
JP2014067193A (ja) 画像処理装置および画像処理方法
CN204241186U (zh) 用以检测发光组件的检测装置及检测***
KR101674099B1 (ko) 얼굴 인증을 위한 영상 생성 장치 및 그 방법
JP2019533269A (ja) 人間の強膜および瞳孔に基づいてデジタル画像の色を補正するシステムおよび方法
JP7477456B2 (ja) 制御されていない環境において歯のシェードを評価する方法及びシステム
JP2017023474A (ja) 皮膚毛穴解析装置,皮膚毛穴解析方法および該装置に用いるプログラム
WO2020230445A1 (ja) 画像処理装置、画像処理方法、及び、コンピュータプログラム
JP2001165655A (ja) 距離推定装置及び距離推定方法
JP2015126281A (ja) プロジェクタ、情報処理方法及びプログラム
Nau et al. Skinscan: Low-cost 3d-scanning for dermatologic diagnosis and documentation
JP7241293B2 (ja) 撮影方法および撮影装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant