WO2021106187A1 - 顔認証環境判定方法、顔認証環境判定システム、顔認証環境判定装置、及び非一時的なコンピュータ可読媒体 - Google Patents

顔認証環境判定方法、顔認証環境判定システム、顔認証環境判定装置、及び非一時的なコンピュータ可読媒体 Download PDF

Info

Publication number
WO2021106187A1
WO2021106187A1 PCT/JP2019/046762 JP2019046762W WO2021106187A1 WO 2021106187 A1 WO2021106187 A1 WO 2021106187A1 JP 2019046762 W JP2019046762 W JP 2019046762W WO 2021106187 A1 WO2021106187 A1 WO 2021106187A1
Authority
WO
WIPO (PCT)
Prior art keywords
skin color
display unit
color display
face recognition
brightness
Prior art date
Application number
PCT/JP2019/046762
Other languages
English (en)
French (fr)
Inventor
知里 舟山
Original Assignee
日本電気株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 日本電気株式会社 filed Critical 日本電気株式会社
Priority to JP2021561099A priority Critical patent/JP7315024B2/ja
Priority to US17/778,503 priority patent/US20220415014A1/en
Priority to PCT/JP2019/046762 priority patent/WO2021106187A1/ja
Priority to EP19954541.9A priority patent/EP4067844A4/en
Publication of WO2021106187A1 publication Critical patent/WO2021106187A1/ja
Priority to JP2023109709A priority patent/JP7477021B2/ja
Priority to US18/498,693 priority patent/US20240062509A1/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/40Extraction of image or video features
    • G06V10/56Extraction of image or video features relating to colour
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01JMEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J3/00Spectrometry; Spectrophotometry; Monochromators; Measuring colours
    • G01J3/46Measurement of colour; Colour measuring devices, e.g. colorimeters
    • G01J3/52Measurement of colour; Colour measuring devices, e.g. colorimeters using colour charts
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/10Image acquisition
    • G06V10/12Details of acquisition arrangements; Constructional details thereof
    • G06V10/14Optical characteristics of the device performing the acquisition or on the illumination arrangements
    • G06V10/147Details of sensors, e.g. sensor lenses
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/40Extraction of image or video features
    • G06V10/60Extraction of image or video features relating to illumination properties, e.g. using a reflectance or lighting model
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/98Detection or correction of errors, e.g. by rescanning the pattern or by human intervention; Evaluation of the quality of the acquired patterns
    • G06V10/993Evaluation of the quality of the acquired pattern
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • G06V40/166Detection; Localisation; Normalisation using acquisition arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172Classification, e.g. identification

Definitions

  • This disclosure relates to a face recognition environment judgment method, a face recognition environment judgment system, a face recognition environment judgment device, and a non-temporary computer-readable medium.
  • face recognition may not be performed accurately. Therefore, for example, when installing a camera for a face recognition system, it is necessary to determine whether or not the environment for performing face recognition (hereinafter referred to as a face recognition environment) is appropriate.
  • the face recognition environment changes depending on, for example, the installation position and orientation of the camera, the brightness of the place where the image is taken, and the like.
  • Patent Document 1 discloses a skin color chart for evaluating skin color reproduction in color photographs and the like.
  • black (Negroid) “white (Caucasian)”
  • white (Mongoloid) the terms “black (Negroid)”
  • white (Mongoloid) the terms “black (Negroid)”
  • white (Mongoloid) the terms “white (Caucasian)”
  • Patent Document 1 is for evaluation of skin color reproduction in color photographs and the like, and does not disclose or suggest any face recognition.
  • the present disclosure aims to provide a highly convenient face recognition environment determination method in view of such problems.
  • the face recognition environment determination method is An image of a skin color chart in which a first skin color display unit representing a Negroid skin color and a second skin color display unit representing a Caucasian skin color are formed on a substrate is imaged.
  • the brightness of the first and second skin color display units in the captured image of the skin color chart is analyzed. Based on the brightness of the first and second skin color display units, it is determined whether or not the imaging environment of the image is suitable for face recognition.
  • the face recognition environment judgment system related to this disclosure is A skin color chart in which a first skin color display unit representing the Negroid skin color and a second skin color display unit representing the Caucasian skin color are formed on a substrate, and An imaging means for imaging the skin color chart and An image analysis means for analyzing the brightness of the first and second skin color display units in the image of the skin color chart captured by the imaging means, and an image analysis means. It is provided with an environment determining means for determining whether or not the imaging environment of the image is suitable for face recognition based on the brightness of the first and second skin color display units.
  • the face recognition environment determination device is An analysis of the brightness of the first and second skin color display units in an image of a skin color chart in which a first skin color display unit representing a Negroid skin color and a second skin color display unit representing a Caucasian skin color are formed on a substrate.
  • Image analysis means and It is provided with an environment determining means for determining whether or not the imaging environment of the image is suitable for face recognition based on the brightness of the first and second skin color display units.
  • the non-transitory computer-readable medium is The brightness of the first and second skin color display units in the image of the skin color chart in which the first skin color display unit representing the Negroid skin color and the second skin color display unit representing the Caucasian skin color are formed on the substrate is analyzed. And Based on the brightness of the first and second skin color display units, it is determined whether or not the imaging environment of the image is suitable for face recognition. It stores a face recognition environment judgment program for causing a computer to execute processing.
  • Other face recognition environment determination methods related to this disclosure are The brightness of the first and second skin color display units in the image of the skin color chart in which the first skin color display unit representing the Negroid skin color and the second skin color display unit representing the Caucasian skin color are formed on the substrate is analyzed. And Based on the brightness of the first and second skin color display units, it is determined whether or not the imaging environment of the image is suitable for face recognition.
  • FIG. 1 is a block diagram showing a configuration of a face recognition environment determination system according to the first embodiment.
  • the system determines whether or not the environment is suitable for face recognition, in which overexposure does not occur even in the face image of a person with white skin color, and black crushing does not occur even in the face image of a person with dark skin color. ..
  • the face recognition environment determination system according to the first embodiment includes a skin color chart 10, a camera 20, and a face recognition environment determination device 100.
  • FIG. 2 is a plan view showing a skin color chart 10 in the face recognition environment determination system according to the first embodiment.
  • a first skin color display unit BK representing a black (Negroid) skin color
  • a second skin color display unit WT representing a white (Caucasian) skin color are formed on the substrate. ing.
  • the details of the skin color chart 10 will be described later.
  • the camera 20 is an imaging means for capturing the image of the skin color chart 10.
  • the face recognition environment determination device 100 includes an image analysis unit 110 and an environment determination unit 120.
  • the face recognition environment determination device 100 is realized by, for example, a computer device such as a personal computer or a server that executes a program, but it may be realized by one device or by a plurality of devices on a network. You may. Further, the camera 20 may be provided inside the face recognition environment determination device 100.
  • the image analysis unit 110 is communicably connected to the camera 20. It may be a wired connection or a wireless connection.
  • the image analysis unit 110 analyzes the brightness of the first skin color display unit BK and the second skin color display unit WT in the image of the skin color chart 10 captured by the camera 20. For example, the image analysis unit 110 quantifies the brightness of the first skin color display unit BK and the second skin color display unit WT in the image of the skin color chart 10 in 256 steps from 0 to 255.
  • the second skin color display unit WT showing a white skin color has a larger brightness than the first skin color display unit BK showing a black skin color, and the brightness value of 0 to 255 is also larger.
  • the environment determination unit 120 determines whether or not the imaging environment is suitable for face recognition based on the brightness of the first skin color display unit BK and the second skin color display unit WT. For example, the environment determination unit 120 determines that the brightness values of the first skin color display unit BK and the second skin color display unit WT are suitable for face recognition if they are within a predetermined reference range. On the contrary, the environment determination unit 120 determines that if at least one of the brightness values of the first skin color display unit BK and the second skin color display unit WT is out of the above reference range, it is not suitable for face recognition.
  • the above reference range is predetermined as a range of brightness values suitable for face recognition. Qualitatively, it is a range of luminance values in which blackout and whiteout do not occur.
  • the specific numerical range is appropriately determined based on the performance of the camera and face recognition engine used.
  • the reference range data is stored in, for example, a storage unit (not shown) in the face recognition environment determination device 100.
  • the storage unit may be provided inside the environment determination unit 120, or may be provided outside.
  • the first skin color display unit BK representing the black skin color and the second skin color representing the white skin color are used instead of using the actual images of white and black people.
  • the image of the skin color chart 10 on which the display unit WT is formed is used. Therefore, when determining the face recognition environment, it is not necessary to actually have white and black people present, which is excellent in convenience.
  • the substrate 11 is composed of, for example, cardboard, plastic, wood, metal, glass, and a combination thereof, without any limitation.
  • the substrate 11 is made of cardboard, plastic, or wood, it is lightweight and can be easily carried.
  • the substrate 11 has a rectangular planar shape, but the substrate 11 is not limited in any way.
  • the size of the substrate 11 is not particularly limited, but as an example, the width is about 200 mm and the length is about 300 mm.
  • the color of the substrate 11 is also not particularly limited, but from the viewpoint of preventing reflection, for example, black having a reflectance of 0 is preferable.
  • the color of the first skin color display unit BK is not particularly limited as long as it represents the skin color of black people. However, if the color of the first skin color display unit BK is, for example, a standard black skin color, face recognition may not be performed accurately. Specifically, even if the environment is determined to be suitable for face recognition, it is actually an environment that is too dark, and in the face image of a person who is darker than the first skin color display unit BK, the black is crushed. Can occur.
  • the first flesh color display unit BK may show the flesh color near the limit on the darkest side in the distribution of the flesh color of black people (Negroid).
  • colors can be defined using the CIE L * a * b * color space standardized by the International Commission on Illumination (CIE) in 1976.
  • the lightness L * of the skin color in the first skin color display unit BK represented in the CIE L * a * b * color space satisfies, for example, 20 ⁇ L * ⁇ 37.
  • Standard black flesh tones are lighter and have an L * value greater than 37. More preferably, 20 ⁇ L * ⁇ 29.
  • the chromaticities a * and b * of the first skin color display unit BK satisfy, for example, 8 ⁇ a * ⁇ 12, 7 ⁇ b * ⁇ 10. More preferably, 9 ⁇ a * ⁇ 11, 8 ⁇ b * ⁇ 9.
  • the first skin color display unit BK has a square planar shape, but is not limited in any way.
  • the color of the second skin color display unit WT is not particularly limited as long as it represents the skin color of Caucasians. However, if the color of the second skin color display unit WT is, for example, a standard white skin color, face recognition may not be performed accurately. Specifically, even if the environment is determined to be suitable for face recognition, it is actually an environment that is too bright, and overexposure occurs in the face image of a person who is fairer than the second skin color display unit WT. Can occur.
  • the second skin color display unit WT may show the skin color near the limit on the whitest side in the distribution of the white skin color (Caucasian).
  • the lightness L * of the skin color in the second skin color display unit WT represented in the CIE L * a * b * color space satisfies, for example, 74 ⁇ L * ⁇ 81.
  • Standard Caucasian flesh tones are darker and have an L * value of less than 74. More preferably, 78 ⁇ L * ⁇ 81.
  • the first skin color display unit BK has a square planar shape, but is not limited in any way.
  • FIG. 3 is a graph showing an example of the spectral reflectance of the skin colors of blacks, whites, and yellows.
  • the horizontal axis of FIG. 3 shows the wavelength (nm), and the vertical axis shows the spectral reflectance.
  • the spectral reflectance increases in the order of blacks, yellows, and whites.
  • the values of L * , a * , and b * in the corresponding CIE L * a * b * color space are obtained together with the spectral reflectance data as shown in FIG. can get.
  • skin color L * , a * , and b * data can be acquired and the above range can be determined.
  • the first skin color display portion BK in the skin color chart 10 shows the skin color near the limit on the darkest side in the distribution of black skin color
  • a person with a darker face than the first skin color display portion BK has a face. It is extremely unlikely that you will be subject to certification. Therefore, in an environment determined to be suitable for face recognition using such a skin color chart 10, it is extremely unlikely that the face image will be blackened and face recognition will not be possible.
  • the second skin color display unit WT in the skin color chart 10 shows a skin color near the limit on the whitest side in the distribution of white skin color
  • a person who is fairer than the second skin color display unit WT is face-recognized. It is extremely unlikely that you will be the target. Therefore, in an environment determined to be suitable for face recognition using such a skin color chart 10, it is extremely unlikely that overexposure will occur in the face image and face recognition will not be possible. From the above, if such a skin color chart 10 is used, the face recognition environment can be determined more appropriately.
  • a first skin color display unit BK is formed on the substrate 11, and a second skin color display unit WT is formed. Either the first skin color display unit BK or the second skin color display unit WT may be formed on the substrate 11 first, or both may be formed at the same time.
  • the first skin color display unit BK and the second skin color display unit WT prepared in advance are attached to a mount made of cardboard.
  • a first skin color display unit BK and a second skin color display unit WT can be prepared.
  • the paint is not particularly limited, but is, for example, a matte lacquer-based paint.
  • the substrate 11 is composed of a mount and a black cardboard.
  • FIG. 4 is a flowchart showing a face recognition environment determination method according to the first embodiment.
  • FIGS. 1 and 2 are referred to as appropriate.
  • a skin color chart 10 in which the first skin color display unit BK and the second skin color display unit WT are formed on the substrate 11 is imaged by the camera 20 (step ST1).
  • the image analysis unit 110 analyzes the brightness of the first skin color display unit BK and the second skin color display unit WT in the captured image of the skin color chart (step ST2).
  • the environment determination unit 120 determines whether or not the image imaging environment is suitable for face recognition based on the brightness of the first skin color display unit BK and the second skin color display unit WT. Specifically, as shown in FIG. 4, it is determined whether or not the brightness of the first skin color display unit BK and the second skin color display unit WT is within a predetermined reference range (step ST3).
  • step ST3YES If the brightness values of the first skin color display unit BK and the second skin color display unit WT are within the predetermined reference ranges (step ST3YES), it is determined that the imaging environment is suitable for face recognition (step ST4). .. If at least one of the brightness values of the first skin color display unit BK and the second skin color display unit WT is outside the above reference range (step ST3NO), it is determined that the imaging environment is not suitable for face recognition (step ST5). ).
  • the first skin color display unit BK representing the black skin color and the second skin color representing the white skin color are used instead of using the actual images of white and black people.
  • the image of the skin color chart 10 on which the display unit WT is formed is used. Therefore, when determining the face recognition environment, it is not necessary to actually have white and black people present, which is excellent in convenience.
  • FIG. 5 is a plan view showing a skin color chart 10 in the face recognition environment determination system according to the second embodiment.
  • the first skin color display unit BK and the second skin color display unit WT are formed flat (flat). Was there.
  • the first skin color display unit BK and the second skin color display unit WT imitate a human face. It is formed in a three-dimensional shape. That is, in the first skin color display unit BK and the second skin color display unit WT, unevenness imitating a human face is formed.
  • black crushing occurs, for example, in a concave portion of the face (for example, near the shadow of the nose) in a black face image. It may occur and face recognition may not be possible. Alternatively, for example, overexposure may occur in a convex portion of the face (for example, near the top of the nose) in a white face image, and face recognition may not be possible.
  • the skin color chart 10 shown in FIG. 5 black crushing occurs in the recesses and the like of the first skin color display unit BK having a three-dimensional shape imitating a human face when determining the face recognition environment. It can be judged that the environment to be used is inappropriate. Further, it can be determined that an environment in which overexposure occurs on the convex portion of the second skin color display portion WT having a three-dimensional shape imitating a human face is also inappropriate. Therefore, by using the skin color chart 10 according to the present embodiment, the face recognition environment can be determined more appropriately. Since other configurations are the same as those of the first embodiment, the description thereof will be omitted.
  • FIG. 6 is a block diagram showing the configuration of the face recognition environment determination system according to the third embodiment.
  • the face recognition environment determination system according to the present embodiment includes a face authentication environment determination device 200 instead of the face authentication environment determination device 100 shown in FIG. 1, and further includes a display unit 30. ..
  • the face recognition environment determination device 200 includes a dynamic range determination unit 130 and an image acquisition unit 140 in addition to the image analysis unit 110 and the environment determination unit 120 shown in FIG.
  • FIG. 7 is a plan view showing a skin color chart in the face recognition environment determination system according to the third embodiment.
  • the skin color chart 10 shown in FIG. 7 includes gray scale units GS1 and GS2 composed of a plurality of gray display units GR having different reflectances.
  • the two gray scale units GS1 and GS2 each include 10 gray display units GR having a reflectance of 2 to 90%.
  • the reflectance of each gray display unit GR is 2%, 10%, 20%, 30%, 40%, 50%, 60%, 70%, 80%, 90%.
  • gray display units GR are arranged in a row along the long side of the rectangular skin color chart 10. Further, the grayscale units GS1 and GS2 are arranged so as to face each other via the first skin color display unit BK and the second skin color display unit WT.
  • the image analysis unit 110 also analyzes the brightness of the first skin color display unit BK and the second skin color display unit WT in the image of the skin color chart 10. Further, the image analysis unit 110 also analyzes the brightness of the plurality of gray display units GR in the gray scale units GS1 and GS2. For example, the image analysis unit 110 digitizes the brightness of each of the 20 gray display units GR in the image of the skin color chart 10 in 256 steps from 0 to 255. Generally, as the reflectance of each gray display unit GR increases by 2% to 90%, the brightness value of each gray display unit GR also increases.
  • the dynamic range determination unit 130 determines whether or not the dynamic range is appropriate based on the brightness of the 20 gray display units GR in the image of the skin color chart 10. For example, the dynamic range determination unit 130 determines that the dynamic range is inappropriate when the brightness values of the adjacent gray display units GR are the same. Further, in the adjacent gray display unit GR, if the brightness value of the gray display unit GR having the higher reflectance is lower than the brightness value of the gray display unit GR having the lower reflectance, it is determined that the dynamic range is inappropriate. To do.
  • the dynamic range determination unit 130 determines that the dynamic range is inappropriate.
  • the display unit 30 displays the determination result of the environment determination unit 120 and the determination result of the dynamic range determination unit 130.
  • the image acquisition unit 140 is communicably connected to the camera 20. It may be a wired connection or a wireless connection.
  • the image acquisition unit 140 acquires the image of the skin color chart 10 captured by the camera 20.
  • the image analysis unit 110 analyzes the brightness of the first skin color display unit BK and the second skin color display unit WT in the image of the skin color chart 10 acquired by the image acquisition unit 140. In this way, the image analysis unit 110 may acquire and analyze the image of the skin color chart 10 via the image acquisition unit 140.
  • each gray display unit GR has a square planar shape, but is not limited in any way. Further, the number of gray display units GR included in the gray scale units GS1 and GS2 and the reflectance of each gray display unit GR may be appropriately determined. Further, the number of gray scale portions may be one. Since other configurations are the same as those of the first embodiment, the description thereof will be omitted. The second embodiment and the third embodiment may be combined.
  • FIG. 8 is a flowchart showing a face recognition environment determination method according to the third embodiment.
  • FIGS. 6 and 7 are referred to as appropriate.
  • the face recognition environment determination method according to the present embodiment includes step ST2a instead of step ST2 shown in FIG. 4, and further includes step ST11.
  • the skin color chart 10 formed on the substrate 11 by the first skin color display unit BK, the second skin color display unit WT, and the gray display unit GR is imaged by the camera 20 (step ST1). ).
  • the image analysis unit 110 analyzes the brightness of the gray display unit GR (step ST2a). ).
  • the dynamic range determination unit 130 determines whether or not the dynamic range of the camera 20 is appropriate based on the brightness of the gray display unit GR (step ST11). If the dynamic range of the camera 20 is inappropriate (step ST11NO), the determination ends. On the other hand, when the dynamic range of the camera 20 is appropriate (step ST11YES), the environment determination unit 120 determines the face recognition environment of the image based on the brightness of the first skin color display unit BK and the second skin color display unit WT. It is determined whether or not it is suitable for (step ST3). Since step ST3 and subsequent steps are the same as the face recognition environment determination method according to the first embodiment shown in FIG. 4, the description thereof will be omitted.
  • the dynamic range is determined before determining the face authentication environment. Then, the face recognition environment is determined only when the dynamic range is appropriate. Therefore, the face authentication environment can be determined more appropriately than the face authentication environment determination method according to the first embodiment.
  • FIG. 9 is a plan view showing a skin color chart in the face recognition environment determination system according to the fourth embodiment.
  • the skin color chart 10 shown in FIG. 9 includes a third skin color display unit YL in addition to the skin color chart 10 shown in FIG. 7.
  • the third skin color display unit YL is also formed on the substrate 11.
  • the arrangement position of the third skin color display unit YL is not particularly limited, but in the example shown in FIG. 9, the third skin color display unit YL is located between the first skin color display unit BK and the second skin color display unit WT. Is provided.
  • the third skin color display unit YL represents the skin color between the skin color in the first skin color display unit BK and the skin color in the second skin color display unit WT.
  • the third skin color display unit YL shows, for example, a standard yellow person (Mongoloid) skin color.
  • the lightness L * of the skin color in the third skin color display unit YL represented in the CIE L * a * b * color space satisfies, for example, 62 ⁇ L * ⁇ 68.
  • the environment when determining the face recognition environment, the environment can be evaluated in more detail as compared with the first to third embodiments. Specifically, the environment in which black crushing occurs in the third skin color display unit YL in addition to the first skin color display unit BK is darker than the environment in which black crushing occurs only in the first skin color display unit BK. You can see that. Further, it can be seen that the environment in which overexposure occurs in the third skin color display unit YL in addition to the second skin color display unit WT is brighter than the environment in which overexposure occurs only in the second skin color display unit WT. .. Based on such evaluation, for example, it becomes easy to adjust the installation position and orientation of the camera, the brightness of the place where the image is taken, and the like.
  • the third skin color display unit YL has a square planar shape, but is not limited in any way. Since other configurations are the same as those of the third embodiment, the description thereof will be omitted.
  • the second embodiment and the fourth embodiment may be combined. Further, in the fourth embodiment, the grayscale portions GS1 and GS2 may not be formed. That is, the skin color chart 10 shown in FIG. 2 may be configured by adding the third skin color display unit YL.
  • FIG. 10 is a plan view showing a skin color chart in the face recognition environment determination system according to the fifth embodiment.
  • the skin color chart 10 shown in FIG. 10 includes a fourth skin color display unit 14 and a fifth skin color display unit 15 in addition to the skin color chart 10 shown in FIG.
  • the fourth skin color display unit 14 and the fifth skin color display unit 15 are also formed on the substrate 11.
  • the arrangement positions of the fourth skin color display unit 14 and the fifth skin color display unit 15 are not particularly limited, but in the example shown in FIG. 10, the fourth skin color display unit 14 is the first skin color display unit BK and the first skin color display unit BK. It is provided between the skin color display unit YL of No. 3. Further, the fifth skin color display unit 15 is provided between the second skin color display unit WT and the third skin color display unit YL.
  • the fourth skin color display unit 14 represents the skin color between the skin color in the first skin color display unit BK and the skin color in the third skin color display unit YL.
  • the fifth skin color display unit 15 represents the skin color between the skin color in the second skin color display unit WT and the skin color in the third skin color display unit YL.
  • the fourth skin color display unit 14 when determining the face recognition environment, the environment can be evaluated in more detail as compared with the fourth embodiment. Specifically, it is possible to distinguish between an environment in which black crushing occurs in the first skin color display unit BK and the fourth skin color display unit 14, and an environment in which black crushing occurs only in the first skin color display unit BK. Further, an environment in which black crushing occurs in the first skin color display unit BK, the fourth skin color display unit 14, and the third skin color display unit YL, and the first skin color display unit BK and the fourth skin color display unit 14 It can be distinguished from the environment where black crushing occurs only.
  • the environment can be evaluated in more detail as compared with the fourth embodiment. Specifically, it is possible to distinguish between an environment in which whiteout occurs in the second skin color display unit WT and the fifth skin color display unit 15 and an environment in which whiteout occurs only in the second skin color display unit WT. Further, an environment in which overexposure occurs in the second skin color display unit WT, the fifth skin color display unit 15, and the third skin color display unit YL, and the second skin color display unit WT and the fifth skin color display unit 15 It can be distinguished from the environment where overexposure occurs only. Based on such evaluation, for example, it becomes easier to adjust the installation position and orientation of the camera, the brightness of the place where the image is taken, and the like.
  • the fourth skin color display unit 14 and the fifth skin color display unit 15 have a square planar shape, but are not limited in any way.
  • the skin color chart 10 may include only one of the fourth skin color display unit 14 and the fifth skin color display unit 15.
  • a plurality of fourth skin color display units 14 showing different skin colors may be provided on the skin color chart 10.
  • a plurality of fifth skin color display units 15 showing different skin colors may be provided on the skin color chart 10.
  • the skin colors in the third skin color display unit YL, the fourth skin color display unit 14, and the fifth skin color display unit 15 show, for example, the average skin color in a specific country or region. May be good.
  • the skin color chart 10 shown in FIG. 2 may be configured by adding a third skin color display unit YL, a fourth skin color display unit 14, and a fifth skin color display unit 15.
  • Each functional block in the above-described embodiment is composed of hardware and / or software, and may be composed of one hardware or software, or may be composed of a plurality of hardware or software.
  • the function (processing) of each device may be realized by a computer having a CPU (Central Processing Unit), a memory, or the like.
  • a computer program for performing the method in the embodiment may be stored in the storage device, and each function may be realized by executing the computer program stored in the storage device on the CPU.
  • Non-temporary computer-readable media include various types of tangible storage media. Examples of non-temporary computer-readable media include magnetic recording media (eg, flexible disks, magnetic tapes, hard disk drives), magneto-optical recording media (eg, magneto-optical disks), CD-ROMs (Read Only Memory), CD-Rs, Includes CD-R / W, semiconductor memory (for example, mask ROM, PROM (Programmable ROM), EPROM (Erasable PROM), flash ROM, RAM (random access memory)).
  • the computer program may also be supplied to the computer by various types of temporary computer readable media. Examples of temporary computer-readable media include electrical, optical, and electromagnetic waves.
  • the temporary computer-readable medium can supply a computer program to a computer via a wired communication path such as an electric wire and an optical fiber, or a wireless communication path.
  • (Appendix 1) An image of a skin color chart in which a first skin color display unit representing a Negroid skin color and a second skin color display unit representing a Caucasian skin color are formed on a substrate is imaged. The brightness of the first and second skin color display units in the captured image of the skin color chart is analyzed. Based on the brightness of the first and second skin color display units, it is determined whether or not the imaging environment of the image is suitable for face recognition. Face recognition environment judgment method. (Appendix 2) A plurality of gray display portions having different reflectances are formed on the substrate of the skin color chart.
  • the brightness of the plurality of gray display units is also analyzed. Based on the brightness of the plurality of grayed out units, it is determined whether or not the dynamic range of the imaging means that has captured the image is appropriate. When the dynamic range is appropriate, it is determined whether or not the imaging environment of the image is suitable for face recognition.
  • the face recognition environment determination method according to Appendix 1. (Appendix 3) The brightness L * of the first skin color display unit in the CIE L * a * b * color space satisfies 20 ⁇ L * ⁇ 37. The brightness L * of the second skin color display unit in the CIE L * a * b * color space satisfies 74 ⁇ L * ⁇ 81.
  • the face recognition environment determination method according to Appendix 1 or 2.
  • the first and second skin color display portions are formed in a three-dimensional shape imitating a human face.
  • the face recognition environment determination method according to any one of Appendix 1 to 3.
  • the skin color chart further includes a third skin color display unit that represents a skin color between the skin color in the first skin color display unit and the skin color in the second skin color display unit.
  • the brightness L * of the third skin color display unit in the CIE L * a * b * color space satisfies 62 ⁇ L * ⁇ 68.
  • the face recognition environment determination method according to any one of Appendix 1 to 4.
  • the face recognition environment determination method according to Appendix 5. The substrate is black, The face recognition environment determination method according to any one of Appendix 1 to 6.
  • a skin color chart in which a first skin color display unit representing the Negroid skin color and a second skin color display unit representing the Caucasian skin color are formed on a substrate, and An imaging means for imaging the skin color chart and An image analysis means for analyzing the brightness of the first and second skin color display units in the image of the skin color chart captured by the imaging means, and an image analysis means.
  • An environment determination means for determining whether or not the image imaging environment is suitable for face recognition based on the brightness of the first and second skin color display units is provided. Face recognition environment judgment system.
  • a plurality of gray display portions having different reflectances are formed on the substrate of the skin color chart.
  • the image analysis means analyzes the brightness of the plurality of grayed out units and analyzes the brightness of the plurality of gray display units.
  • the face recognition environment determination system further includes dynamic range determination means for determining whether or not the dynamic range of the imaging means is appropriate based on the brightness of the plurality of gray display units.
  • the face recognition environment determination system according to Appendix 8. (Appendix 10) The brightness L * of the first skin color display unit in the CIE L * a * b * color space satisfies 20 ⁇ L * ⁇ 37.
  • the brightness L * of the second skin color display unit in the CIE L * a * b * color space satisfies 74 ⁇ L * ⁇ 81.
  • the face recognition environment determination system according to Appendix 8 or 9.
  • the first and second skin color display portions are formed in a three-dimensional shape imitating a human face.
  • the face recognition environment determination system according to any one of Appendix 8 to 10.
  • the skin color chart further includes a third skin color display unit that represents a skin color between the skin color in the first skin color display unit and the skin color in the second skin color display unit.
  • the brightness L * of the third skin color display unit in the CIE L * a * b * color space satisfies 62 ⁇ L * ⁇ 68.
  • the face recognition environment determination system according to any one of Appendix 8 to 11.
  • the skin color chart further includes at least one of a fifth skin color display unit representing a skin color between the skin color in the second skin color display unit and the skin color in the third skin color display unit.
  • the face recognition environment determination system according to Appendix 12.
  • the substrate is black, The face recognition environment determination system according to any one of Appendix 8 to 13.
  • a dynamic range determining means for determining whether or not the dynamic range of the imaging means that has captured the image is appropriate based on the brightness of the plurality of grayed out units is further provided.
  • the face recognition environment determination device according to Appendix 15. (Appendix 17) The brightness of the first and second skin color display units in the image of the skin color chart in which the first skin color display unit representing the Negroid skin color and the second skin color display unit representing the Caucasian skin color are formed on the substrate is analyzed. And Based on the brightness of the first and second skin color display units, it is determined whether or not the imaging environment of the image is suitable for face recognition.
  • a face recognition environment judgment program for letting the computer execute the process is stored. Non-temporary computer-readable medium.
  • a plurality of gray display portions having different reflectances are formed on the substrate of the skin color chart.
  • the brightness of the plurality of gray display units is also analyzed. Based on the brightness of the plurality of grayed out units, it is determined whether or not the dynamic range of the imaging means that has captured the image is appropriate. When the dynamic range is appropriate, it is determined whether or not the imaging environment of the image is suitable for face recognition.
  • the non-transitory computer-readable medium according to Appendix 17.

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Quality & Reliability (AREA)
  • Software Systems (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Human Computer Interaction (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Vascular Medicine (AREA)
  • Image Analysis (AREA)
  • Image Processing (AREA)
  • Spectrometry And Color Measurement (AREA)

Abstract

本開示に係る顔認証環境判定方法は、ネグロイドの肌色を表す第1の肌色表示部(BK)とコーカソイドの肌色を表す第2の肌色表示部(WT)とが基板上に形成された肌色チャート(10)を撮像し、撮像された肌色チャート(10)の画像における第1の肌色表示部(BK)及び第2の肌色表示部(WT)の輝度を解析し、第1の肌色表示部(BK)及び第2の肌色表示部(WT)の輝度に基づいて、画像の撮像環境が顔認証に適しているか否かを判定する。

Description

顔認証環境判定方法、顔認証環境判定システム、顔認証環境判定装置、及び非一時的なコンピュータ可読媒体
 本開示は、顔認証環境判定方法、顔認証環境判定システム、顔認証環境判定装置、及び非一時的なコンピュータ可読媒体に関する。
 近年、カメラによって撮像された人物の顔画像を用いて当該人物を特定する顔認証システムが開発されている。ここで、白人(コーカソイド)のように肌の色が白い人の顔画像では、明るい環境において白飛びが発生し易く、黒人(ネグロイド)のように肌の色が黒い人の顔画像では、暗い環境において黒潰れが発生し易い。
 顔画像においてこのような白飛びや黒潰れが発生すると、顔認証を正確に行えない場合がある。そのため、例えば顔認証システム用のカメラを設置する際、顔認証を行うための環境(以下、顔認証環境という)が、適切か否かを判定する必要がある。顔認証環境は、例えばカメラの設置位置や向き、撮像される場所の明るさ等によって変化する。
 ところで、特許文献1には、カラー写真等における肌色再現評価用の肌色チャートが開示されている。
 なお、本明細書においては、肌の色の違いを表現するために、「黒人(ネグロイド)」、「白人(コーカソイド)」、「黄色人(モンゴロイド)」という用語を用いるが、何ら人種差別的な意図はない。
特開2001-074556号公報
 発明者は、顔認証環境の判定に関し、以下の課題を見出した。
 顔認証環境を判定する度に、実際に白人及び黒人の人達に立ち会って貰うのは、種々の観点から利便性に劣るという問題があった。
 なお、特許文献1に開示された肌色チャートは、カラー写真等における肌色再現評価用であって、顔認証については何ら開示・示唆されていない。
 本開示は、このような課題に鑑み、利便性に優れた顔認証環境判定方法を提供することを目的とする。
 本開示に係る顔認証環境判定方法は、
 ネグロイドの肌色を表す第1の肌色表示部とコーカソイドの肌色を表す第2の肌色表示部とが基板上に形成された肌色チャートを撮像し、
 撮像された前記肌色チャートの画像における前記第1及び第2の肌色表示部の輝度を解析し、
 前記第1及び第2の肌色表示部の輝度に基づいて、前記画像の撮像環境が顔認証に適しているか否かを判定するものである。
 本開示に係る顔認証環境判定システムは、
 ネグロイドの肌色を表す第1の肌色表示部とコーカソイドの肌色を表す第2の肌色表示部とが基板上に形成された肌色チャートと、
 前記肌色チャートを撮像する撮像手段と、
 前記撮像手段によって撮像された前記肌色チャートの画像における前記第1及び第2の肌色表示部の輝度を解析する画像解析手段と、
 前記第1及び第2の肌色表示部の輝度に基づいて、前記画像の撮像環境が顔認証に適しているか否かを判定する環境判定手段と、を備えるものである。
 本開示に係る顔認証環境判定装置は、
 ネグロイドの肌色を表す第1の肌色表示部とコーカソイドの肌色を表す第2の肌色表示部とが基板上に形成された肌色チャートの画像における前記第1及び第2の肌色表示部の輝度を解析する画像解析手段と、
 前記第1及び第2の肌色表示部の輝度に基づいて、前記画像の撮像環境が顔認証に適しているか否かを判定する環境判定手段と、を備えるものである。
 本開示に係る非一時的なコンピュータ可読媒体は、
 ネグロイドの肌色を表す第1の肌色表示部とコーカソイドの肌色を表す第2の肌色表示部とが基板上に形成された肌色チャートの画像における前記第1及び第2の肌色表示部の輝度を解析し、
 前記第1及び第2の肌色表示部の輝度に基づいて、前記画像の撮像環境が顔認証に適しているか否かを判定する、
 処理をコンピュータに実行させるための顔認証環境判定プログラムが格納されたものである。
 本開示に係る他の顔認証環境判定方法は、
 ネグロイドの肌色を表す第1の肌色表示部とコーカソイドの肌色を表す第2の肌色表示部とが基板上に形成された肌色チャートの画像における前記第1及び第2の肌色表示部の輝度を解析し、
 前記第1及び第2の肌色表示部の輝度に基づいて、前記画像の撮像環境が顔認証に適しているか否かを判定するものである。
 本開示によれば、利便性に優れた顔認証環境判定方法を提供できる。
第1の実施形態に係る顔認証環境判定システムの構成を示すブロック図である。 第1の実施形態に係る顔認証環境判定システムにおける肌色チャート10を示す平面図である。 黒人、白人、及び黄色人の肌色の分光反射率の一例を示すグラフである。 第1の実施形態に係る顔認証環境判定方法を示すフローチャートである。 第2の実施形態に係る顔認証環境判定システムにおける肌色チャート10を示す平面図である。 第3の実施形態に係る顔認証環境判定システムの構成を示すブロック図である。 第3の実施形態に係る顔認証環境判定システムにおける肌色チャート10を示す平面図である。 第3の実施形態に係る顔認証環境判定方法を示すフローチャートである。 第4の実施形態に係る顔認証環境判定システムにおける肌色チャートを示す平面図である。 第5の実施形態に係る顔認証環境判定システムにおける肌色チャートを示す平面図である。
 以下では、具体的な実施形態について、図面を参照しながら詳細に説明する。各図面において、同一又は対応する要素には同一の符号が付されており、説明の明確化のため、必要に応じて重複説明は省略される。
(第1の実施形態)
<顔認証環境判定システムの構成>
 まず、図1を参照して、第1の実施形態に係る顔認証環境判定システムについて説明する。図1は、第1の実施形態に係る顔認証環境判定システムの構成を示すブロック図である。当該システムは、肌の色が白い人の顔画像でも白飛びが発生せず、肌の色が黒い人の顔画像でも黒潰れが発生しない顔認証に適した環境であるか否かを判定する。
 図1に示すように、第1の実施形態に係る顔認証環境判定システムは、肌色チャート10、カメラ20、顔認証環境判定装置100を備えている。
 ここで、図2は、第1の実施形態に係る顔認証環境判定システムにおける肌色チャート10を示す平面図である。
 図2に示すように、肌色チャート10では、黒人(ネグロイド)の肌色を表す第1の肌色表示部BKと白人(コーカソイド)の肌色を表す第2の肌色表示部WTとが基板上に形成されている。肌色チャート10の詳細については後述する。
 カメラ20は、肌色チャート10の画像を撮像する撮像手段である。
 顔認証環境判定装置100は、画像解析部110及び環境判定部120を備えている。
 なお、顔認証環境判定装置100は、例えば、プログラムを実行するパーソナルコンピュータやサーバ等のコンピュータ装置で実現されるが、1つの装置で実現してもよいし、ネットワーク上の複数の装置で実現してもよい。また、カメラ20を顔認証環境判定装置100の内部に設けてもよい。
 画像解析部110は、カメラ20に通信可能に接続されている。有線接続でも無線接続でもよい。画像解析部110は、カメラ20によって撮像された肌色チャート10の画像における第1の肌色表示部BK及び第2の肌色表示部WTの輝度を解析する。例えば、画像解析部110は、肌色チャート10の画像における第1の肌色表示部BK及び第2の肌色表示部WTの輝度を0~255の256段階に数値化する。通常、黒い肌色を示す第1の肌色表示部BKよりも、白い肌色を示す第2の肌色表示部WTの方が、輝度が大きく、0~255の輝度値も大きくなる。
 環境判定部120は、第1の肌色表示部BK及び第2の肌色表示部WTの輝度に基づいて、撮像環境が顔認証に適しているか否かを判定する。例えば、環境判定部120は、第1の肌色表示部BK及び第2の肌色表示部WTの輝度値が、それぞれ所定の基準範囲内であれば、顔認証に適していると判定する。反対に、環境判定部120は、第1の肌色表示部BK及び第2の肌色表示部WTの輝度値の少なくとも一方が、上記基準範囲外であれば、顔認証に適していないと判定する。
 上記基準範囲は、顔認証に適した輝度値の範囲として予め定められている。定性的には、黒潰れ及び白飛びが発生しない輝度値の範囲である。具体的な数値範囲は、使用するカメラや顔認証エンジンの性能に基づいて適宜決定される。当該基準範囲データは、例えば、顔認証環境判定装置100において図示しない記憶部に格納されている。当該記憶部は、環境判定部120の内部に設けられていてもよく、外部に設けられていてもよい。
 第1の実施形態に係る顔認証環境判定システムでは、白人及び黒人の人達の実際の画像を用いる代わりに、黒人の肌色を表す第1の肌色表示部BK及び白人の肌色を表す第2の肌色表示部WTが形成された肌色チャート10の画像を用いる。そのため、顔認証環境を判定する際、実際に白人及び黒人の人達に立ち会って貰う必要がなく、利便性に優れている。
<肌色チャートの構成>
 次に、図2を参照して、肌色チャート10の詳細について説明する。
 基板11は、何ら限定されないが、例えばボール紙、プラスチック、木材、金属、ガラス及びそれらの組み合わせ等から構成される。ボール紙、プラスチック、木材から基板11を構成すると、軽量であるため、容易に持ち運びできる。図2に示した例では、基板11は矩形状の平面形状を有しているが、何ら限定されない。基板11のサイズも特に限定されないが、一例として、幅200mm程度、長さ300mm程度である。基板11の色も特に限定されないが、反射を防ぐ観点から、例えば、反射率が0の黒色であることが好ましい。
 第1の肌色表示部BKの色は、黒人の肌色を表せば、特に限定されない。しかしながら、第1の肌色表示部BKの色が、例えば標準的な黒人の肌色であると、顔認証が正確に行えない場合も生じ得る。具体的には、顔認証に適していると判定された環境であっても、実際には暗過ぎる環境であり、第1の肌色表示部BKよりも色黒の人の顔画像では、黒潰れが発生し得る。
 そのため、第1の肌色表示部BKは、黒人(ネグロイド)の肌色の分布において最も黒い側の限界付近の肌色を示してもよい。具体的には、1976年に国際照明委員会(CIE)によって規格化されたCIE L色空間を用い、色を定義できる。CIE L色空間において表現される第1の肌色表示部BKにおける肌色の明度Lは、例えば20≦L≦37を満たす。標準的な黒人の肌色はより明るく、L値が37より大きい。より好ましくは、20≦L≦29である。
 また、第1の肌色表示部BKの色度a、bは、例えば8≦a≦12、7≦b≦10を満たす。より好ましくは、9≦a≦11、8≦b≦9である。
 なお、図2に示した例では、第1の肌色表示部BKは正方形状の平面形状を有しているが、何ら限定されない。
 第2の肌色表示部WTの色は、白人の肌色を表せば、特に限定されない。しかしながら、第2の肌色表示部WTの色が、例えば標準的な白人の肌色であると、顔認証が正確に行えない場合も生じ得る。具体的には、顔認証に適していると判定された環境であっても、実際には明る過ぎる環境であり、第2の肌色表示部WTよりも色白の人の顔画像では、白飛びが発生し得る。
 そのため、第2の肌色表示部WTは、白人(コーカソイド)の肌色の分布において最も白い側の限界付近の肌色を示してもよい。具体的には、CIE L色空間において表現される第2の肌色表示部WTにおける肌色の明度Lは、例えば74≦L≦81を満たす。標準的な白人の肌色はより暗く、L値が74より小さい。より好ましくは、78≦L≦81である。
 また、第2の肌色表示部WTの色度a、bは、例えば10≦a≦12、23≦b≦25を満たす。より好ましくは、a=11、b=24である。
 なお、図2に示した例では、第1の肌色表示部BKは正方形状の平面形状を有しているが、何ら限定されない。
 ここで、図3は、黒人、白人、及び黄色人の肌色の分光反射率の一例を示すグラフである。図3の横軸は波長(nm)、縦軸は分光反射率を示す。図3に示すように、各波長において、黒人、黄色人、白人の順に分光反射率は高くなる。例えば、分光測色計を用いて測定すれば、図3に示したような分光反射率のデータと共に対応するCIE L色空間におけるL、a、及びbの値が得られる。多数の黒人及び白人について、肌色のL、a、bのデータを取得し、上記範囲を決定できる。
 上述の通り、肌色チャート10における第1の肌色表示部BKが、黒人の肌色の分布において最も黒い側の限界付近の肌色を示す場合、第1の肌色表示部BKよりも色黒の人が顔認証の対象者となる可能性は極めて低い。従って、そのような肌色チャート10を用いて顔認証に適していると判定された環境において、顔画像に黒潰れが発生し、顔認証ができない可能性も極めて低い。
 同様に、肌色チャート10における第2の肌色表示部WTは、白人の肌色の分布において最も白い側の限界付近の肌色を示す場合、第2の肌色表示部WTよりも色白の人が顔認証の対象者となる可能性は極めて低い。従って、このような肌色チャート10を用いて顔認証に適していると判定された環境において、顔画像に白飛びが発生し、顔認証ができない可能性も極めて低い。
 以上のことから、このような肌色チャート10を用いれば、顔認証環境をより適切に判定できる。
<肌色チャートの製造方法>
 次に、図2を参照して、第1の実施形態に係る肌色チャートの製造方法について説明する。基板11上に第1の肌色表示部BKを形成すると共に、第2の肌色表示部WTを形成する。第1の肌色表示部BK及び第2の肌色表示部WTのいずれを先に基板11上に形成してもよく、両者を同時に形成してもよい。
 以下に、第1の実施形態に係る肌色チャートの製造方法の具体例について説明するが、何ら当該具体例に限定されない。
 まず、ボール紙からなる台紙に、予め準備しておいた第1の肌色表示部BK及び第2の肌色表示部WTを貼り付ける。例えば紙にそれぞれの色に調整された塗料を塗布することによって、第1の肌色表示部BK及び第2の肌色表示部WTを準備できる。塗料は、特に限定されないが、例えば無光沢のラッカー系塗料である。
 次に、台紙と同サイズの黒色のボール紙を準備し、台紙に貼付された第1の肌色表示部BK及び第2の肌色表示部WTに対応する箇所を切り抜く。そして、この黒色のボール紙と第1の肌色表示部BK及び第2の肌色表示部WTが貼付された台紙とを貼り合わせる。ここで、黒色のボール紙は、表面の反射率が0(ゼロ)となるように加工されたものである。
 以上によって、肌色チャート10を製造できる。この具体例によって製造された肌色チャート10では、基板11が、台紙及び黒色のボール紙から構成される。
<顔認証環境判定方法>
 次に、図4を参照して、第1の実施形態に係る顔認証環境判定方法について説明する。図4は、第1の実施形態に係る顔認証環境判定方法を示すフローチャートである。図4の説明においては、図1、図2を適宜参照する。
 まず、図4に示すように、第1の肌色表示部BKと第2の肌色表示部WTとが基板11上に形成された肌色チャート10をカメラ20によって撮像する(ステップST1)。
 次に、撮像された前記肌色チャートの画像における第1の肌色表示部BK及び第2の肌色表示部WTの輝度を画像解析部110が解析する(ステップST2)。
 次に、環境判定部120が、第1の肌色表示部BK及び第2の肌色表示部WTの輝度に基づいて、画像の撮像環境が顔認証に適しているか否かを判定する。具体的には、図4に示すように、第1の肌色表示部BK及び第2の肌色表示部WTの輝度が、所定の基準範囲内か否かを判定する(ステップST3)。
 第1の肌色表示部BK及び第2の肌色表示部WTの輝度値が、それぞれ所定の基準範囲内であれば(ステップST3YES)、撮像環境が顔認証に適していると判定する(ステップST4)。第1の肌色表示部BK及び第2の肌色表示部WTの輝度値の少なくとも一方が、上記基準範囲外であれば(ステップST3NO)、撮像環境が顔認証に適していないと判定する(ステップST5)。
 第1の実施形態に係る顔認証環境判定方法では、白人及び黒人の人達の実際の画像を用いる代わりに、黒人の肌色を表す第1の肌色表示部BK及び白人の肌色を表す第2の肌色表示部WTが形成された肌色チャート10の画像を用いる。そのため、顔認証環境を判定する際、実際に白人及び黒人の人達に立ち会って貰う必要がなく、利便性に優れている。
(第2の実施形態)
 次に、図5を参照して、第2の実施形態に係る顔認証環境判定システムにおける肌色チャートについて説明する。図5は、第2の実施形態に係る顔認証環境判定システムにおける肌色チャート10を示す平面図である。
 図2に示した第1の実施形態に係る顔認証環境判定システムにおける肌色チャート10では、第1の肌色表示部BK、及び第2の肌色表示部WTが、平面状に(平坦に)形成されていた。これに対し、図5に示した第2の実施形態に係る顔認証環境判定システムにおける肌色チャート10では、第1の肌色表示部BK、及び第2の肌色表示部WTが、人の顔を模した立体形状に形成されている。すなわち、第1の肌色表示部BK、及び第2の肌色表示部WTにおいて、人の顔を模した凹凸が形成されている。
 図2に示した肌色チャート10を用いた場合、顔認証に適していると判定された環境においても、例えば黒人の顔画像における顔の凹部(例えば鼻の影となる付近)等に黒潰れが発生し、顔認証ができない虞がある。あるいは、例えば白人の顔画像における顔の凸部(例えば鼻の頂部付近)等に白飛びが発生し、顔認証ができない虞がある。
 これに対し、図5に示した肌色チャート10を用いた場合、顔認証環境を判定する際、人の顔に模した立体形状を有する第1の肌色表示部BKの凹部等に黒潰れが発生する環境を不適切であると判定できる。また、人の顔に模した立体形状を有する第2の肌色表示部WTの凸部等に白飛びが発生する環境も不適切であると判定できる。
 そのため、本実施形態に係る肌色チャート10を用いることによって、顔認証環境をさらに適切に判定できる。
 その他構成は、第1の実施形態と同様であるため、説明を省略する。
(第3の実施形態)
 次に、図6を参照して、第3の実施形態に係る顔認証環境判定システムについて説明する。図6は、第3の実施形態に係る顔認証環境判定システムの構成を示すブロック図である。図6に示すように、本実施形態に係る顔認証環境判定システムは、図1に示した顔認証環境判定装置100に代えて、顔認証環境判定装置200を備えると共に、表示部30をさらに備える。
 顔認証環境判定装置200は、図1に示した画像解析部110及び環境判定部120に加え、ダイナミックレンジ判定部130、画像取得部140を備えている。
 ここで、図7を参照して、第3の実施形態に係る顔認証環境判定システムにおける肌色チャートについて説明する。図7は、第3の実施形態に係る顔認証環境判定システムにおける肌色チャートを示す平面図である。
 図7に示した肌色チャート10は、図2に示した肌色チャート10に加え、反射率の異なる複数のグレー表示部GRから構成されたグレースケール部GS1、GS2を備えている。
 図7に示した例では、2つのグレースケール部GS1、GS2は、それぞれ反射率2~90%の10個のグレー表示部GRを備えている。具体的には、各グレー表示部GRの反射率は、2%、10%、20%、30%、40%、50%、60%、70%、80%、90%である。
 図7に示した例では、グレースケール部GS1、GS2において、10個のグレー表示部GRが、矩形状の肌色チャート10の長辺に沿って一列に並んでいる。また、グレースケール部GS1、GS2は、第1の肌色表示部BK、及び第2の肌色表示部WTを介して、対向配置されている。
 図6に戻って説明を続ける。
 本実施形態に係る顔認証環境判定装置200でも、画像解析部110は、肌色チャート10の画像における第1の肌色表示部BK及び第2の肌色表示部WTの輝度を解析する。さらに、画像解析部110は、グレースケール部GS1、GS2における複数のグレー表示部GRの輝度も解析する。例えば、画像解析部110は、肌色チャート10の画像における20個のグレー表示部GRのそれぞれの輝度を0~255の256段階に数値化する。通常、各グレー表示部GRの2%~90%の反射率が大きくなる程、各グレー表示部GRの輝度値も大きくなる。
 ダイナミックレンジ判定部130は、肌色チャート10の画像における20個のグレー表示部GRの輝度に基づいて、ダイナミックレンジが適切か否かを判定する。例えば、ダイナミックレンジ判定部130は、隣接するグレー表示部GRの輝度値が同じである場合、ダイナミックレンジが不適切と判定する。また、隣接するグレー表示部GRにおいて、反射率が高い方のグレー表示部GRの輝度値が、反射率が低い方のグレー表示部GRの輝度値よりも低い場合、ダイナミックレンジが不適切と判定する。
 具体例としては、隣接する反射率90%、80%のグレー表示部GRの輝度値がいずれも最大値255である場合、ダイナミックレンジ判定部130は、ダイナミックレンジが不適切と判定する。あるいは、隣接する反射率2%、10%のグレー表示部GRの輝度値がいずれも最低値0である場合、ダイナミックレンジ判定部130は、ダイナミックレンジが不適切と判定する。
 表示部30は、環境判定部120の判定結果及びダイナミックレンジ判定部130の判定結果を表示する。
 画像取得部140は、カメラ20に通信可能に接続されている。有線接続でも無線接続でもよい。画像取得部140は、カメラ20が撮像した肌色チャート10の画像を取得する。そして、画像解析部110は、画像取得部140が取得した肌色チャート10の画像における第1の肌色表示部BK及び第2の肌色表示部WTの輝度を解析する。このように、画像解析部110は、画像取得部140を介して、肌色チャート10の画像を取得し、解析してもよい。
 なお、図7に示した例では、各グレー表示部GRは正方形状の平面形状を有しているが、何ら限定されない。また、グレースケール部GS1、GS2が含むグレー表示部GRの個数、各グレー表示部GRの反射率は適宜決定すればよい。さらに、グレースケール部は1つでもよい。
 その他構成は、第1の実施形態と同様であるため、説明を省略する。第2の実施形態と第3の実施形態とを組み合わせてもよい。
<顔認証環境判定方法>
 次に、図8を参照して、第3の実施形態に係る顔認証環境判定方法について説明する。図8は、第3の実施形態に係る顔認証環境判定方法を示すフローチャートである。図8の説明においては、図6、図7を適宜参照する。
 本実施形態に係る顔認証環境判定方法は、図4に示したステップST2に代えて、ステップST2aを備えると共に、ステップST11をさらに備える。
 まず、図8に示すように、第1の肌色表示部BK、第2の肌色表示部WT、及びグレー表示部GRが基板11上に形成された肌色チャート10をカメラ20によって撮像する(ステップST1)。
 次に、撮像された前記肌色チャートの画像における第1の肌色表示部BK及び第2の肌色表示部WTの輝度に加え、及びグレー表示部GRの輝度を画像解析部110が解析する(ステップST2a)。
 次に、ダイナミックレンジ判定部130が、グレー表示部GRの輝度に基づいて、カメラ20のダイナミックレンジが適切か否かを判定する(ステップST11)。カメラ20のダイナミックレンジが不適切な場合(ステップST11NO)、判定を終了する。他方、カメラ20のダイナミックレンジが適切な場合(ステップST11YES)、環境判定部120が、第1の肌色表示部BK及び第2の肌色表示部WTの輝度に基づいて、画像の撮像環境が顔認証に適しているか否かを判定する(ステップST3)。ステップST3以降は、図4に示した第1の実施形態に係る顔認証環境判定方法と同様であるため、説明を省略する。
 以上の通り、第3の実施形態に係る顔認証環境判定方法では、顔認証環境を判定する前に、ダイナミックレンジを判定する。そして、ダイナミックレンジが適切な場合のみ、顔認証環境を判定する。そのため、第1の実施形態に係る顔認証環境判定方法に比べ、顔認証環境をより適切に判定できる。
(第4の実施形態)
 次に、図9を参照して、第4の実施形態に係る顔認証環境判定システムにおける肌色チャートについて説明する。図9は、第4の実施形態に係る顔認証環境判定システムにおける肌色チャートを示す平面図である。
 図9に示した肌色チャート10は、図7に示した肌色チャート10に加え、第3の肌色表示部YLを備えている。
 図9に示すように、第1の肌色表示部BK、及び第2の肌色表示部WTと同様に、第3の肌色表示部YLも、基板11上に形成されている。第3の肌色表示部YLの配置位置は特に限定されないが、図9に示した例では、第1の肌色表示部BKと第2の肌色表示部WTとの間に第3の肌色表示部YLが設けられている。
 第3の肌色表示部YLは、第1の肌色表示部BKにおける肌色と第2の肌色表示部WTにおける肌色との間の肌色を表す。第3の肌色表示部YLは、例えば標準的な黄色人(モンゴロイド)の肌色を示す。具体的には、CIE L色空間において表現される第3の肌色表示部YLにおける肌色の明度Lは、例えば62≦L≦68を満たす。また、第3の肌色表示部YLの色度a、bは、例えばa=11、18≦b≦19を満たす。
 第3の肌色表示部YLを設けることによって、顔認証環境を判定する際、第1~第3の実施形態に比べて、環境をより詳細に評価できる。具体的には、第1の肌色表示部BKに加え、第3の肌色表示部YLにも黒潰れが発生する環境は、第1の肌色表示部BKのみに黒潰れが発生する環境よりも暗いことが分かる。また、第2の肌色表示部WTに加え、第3の肌色表示部YLにも白飛びが発生する環境は、第2の肌色表示部WTのみに白飛びが発生する環境よりも明るいことが分かる。このような評価に基づいて、例えばカメラの設置位置や向き、撮像される場所の明るさ等の調節が容易になる。
 なお、図9に示した例では、第3の肌色表示部YLは正方形状の平面形状を有しているが、何ら限定されない。
 その他構成は、第3の実施形態と同様であるため、説明を省略する。第2の実施形態と第4の実施形態とを組み合わせてもよい。また、第4の実施形態において、グレースケール部GS1、GS2は形成されていなくてもよい。つまり、図2に示す肌色チャート10に第3の肌色表示部YLを加えた構成でもよい。
(第5の実施形態)
 次に、図10を参照して、第5の実施形態に係る顔認証環境判定システムにおける肌色チャートについて説明する。図10は、第5の実施形態に係る顔認証環境判定システムにおける肌色チャートを示す平面図である。
 図10に示した肌色チャート10は、図9に示した肌色チャート10に加え、第4の肌色表示部14及び第5の肌色表示部15を備えている。
 図10に示すように、第4の肌色表示部14及び第5の肌色表示部15も基板11上に形成されている。第4の肌色表示部14及び第5の肌色表示部15の配置位置は特に限定されないが、図10に示した例では、第4の肌色表示部14は、第1の肌色表示部BKと第3の肌色表示部YLとの間に設けられている。また、第5の肌色表示部15は、第2の肌色表示部WTと第3の肌色表示部YLとの間に設けられている。
 第4の肌色表示部14は、第1の肌色表示部BKにおける肌色と第3の肌色表示部YLにおける肌色との間の肌色を表す。
 第5の肌色表示部15は、第2の肌色表示部WTにおける肌色と第3の肌色表示部YLにおける肌色との間の肌色を表す。
 第4の肌色表示部14を設けることによって、顔認証環境を判定する際、第4の実施形態に比べて、環境をさらに詳細に評価できる。具体的には、第1の肌色表示部BK及び第4の肌色表示部14に黒潰れが発生する環境と、第1の肌色表示部BKのみに黒潰れが発生する環境とを区別できる。さらに、第1の肌色表示部BK、第4の肌色表示部14、及び第3の肌色表示部YLに黒潰れが発生する環境と、第1の肌色表示部BK及び第4の肌色表示部14のみに黒潰れが発生する環境とを区別できる。
 同様に、第5の肌色表示部15を設けることによって、顔認証環境を判定する際、第4の実施形態に比べて、環境をさらに詳細に評価できる。具体的には、第2の肌色表示部WT及び第5の肌色表示部15に白飛びが発生する環境と、第2の肌色表示部WTのみに白飛びが発生する環境とを区別できる。さらに、第2の肌色表示部WT、第5の肌色表示部15、及び第3の肌色表示部YLに白飛びが発生する環境と、第2の肌色表示部WT及び第5の肌色表示部15のみに白飛びが発生する環境とを区別できる。
 このような評価に基づいて、例えばカメラの設置位置や向き、撮像される場所の明るさ等の調節がさらに容易になる。
 なお、図10に示した例では、第4の肌色表示部14及び第5の肌色表示部15は正方形状の平面形状を有しているが、何ら限定されない。また、肌色チャート10が、第4の肌色表示部14及び第5の肌色表示部15のいずれか一方のみを備えていてもよい。
 さらに、互いに異なる肌色を示す複数の第4の肌色表示部14を肌色チャート10に設けてもよい。同様に、互いに異なる肌色を示す複数の第5の肌色表示部15を肌色チャート10に設けてもよい。
 また、本実施形態では、第3の肌色表示部YL、第4の肌色表示部14、及び第5の肌色表示部15における肌色が、例えば特定の国や地域における平均的な肌色を示していてもよい。
 その他構成は、第4の実施形態と同様であるため、説明を省略する。第2の実施形態と第5の実施形態とを組み合わせてもよい。また、第5の実施形態において、グレースケール部GS1、GS2は形成されていなくてもよい。つまり、図2に示した肌色チャート10に、第3の肌色表示部YL、第4の肌色表示部14、及び第5の肌色表示部15を加えた構成でもよい。
 上述の実施形態における各機能ブロックは、ハードウェア又はソフトウェア、もしくはその両方によって構成され、1つのハードウェア又はソフトウェアから構成してもよいし、複数のハードウェア又はソフトウェアから構成してもよい。各装置の機能(処理)を、CPU(Central Processing Unit)やメモリ等を有するコンピュータにより実現してもよい。例えば、記憶装置に実施形態における方法を行うためのコンピュータプログラムを格納し、各機能を、記憶装置に格納されたコンピュータプログラムをCPUで実行することにより実現してもよい。
 これらのコンピュータプログラムは、様々なタイプの非一時的なコンピュータ可読媒体(non-transitory computer readable medium)を用いて格納され、コンピュータに供給することができる。非一時的なコンピュータ可読媒体は、様々なタイプの実体のある記録媒体(tangible storage medium)を含む。非一時的なコンピュータ可読媒体の例は、磁気記録媒体(例えばフレキシブルディスク、磁気テープ、ハードディスクドライブ)、光磁気記録媒体(例えば光磁気ディスク)、CD-ROM(Read Only Memory)、CD-R、CD-R/W、半導体メモリ(例えば、マスクROM、PROM(Programmable ROM)、EPROM(Erasable PROM)、フラッシュROM、RAM(random access memory))を含む。また、コンピュータプログラムは、様々なタイプの一時的なコンピュータ可読媒体(transitory computer readable medium)によってコンピュータに供給されてもよい。一時的なコンピュータ可読媒体の例は、電気信号、光信号、及び電磁波を含む。一時的なコンピュータ可読媒体は、電線及び光ファイバ等の有線通信路、又は無線通信路を介して、コンピュータプログラムをコンピュータに供給できる。
 以上、実施の形態を参照して本開示を説明したが、本開示は上記実施の形態に限定されるものではない。本開示の構成や詳細には、本開示のスコープ内で当業者が理解し得る様々な変更をすることができる。
 上記の実施形態の一部又は全部は、以下の付記のようにも記載されうるが、以下には限られない。
(付記1)
 ネグロイドの肌色を表す第1の肌色表示部とコーカソイドの肌色を表す第2の肌色表示部とが基板上に形成された肌色チャートを撮像し、
 撮像された前記肌色チャートの画像における前記第1及び第2の肌色表示部の輝度を解析し、
 前記第1及び第2の肌色表示部の輝度に基づいて、前記画像の撮像環境が顔認証に適しているか否かを判定する、
顔認証環境判定方法。
(付記2)
 前記肌色チャートの前記基板上に、反射率の異なる複数のグレー表示部が形成されており、
 前記第1及び第2の肌色表示部の輝度を解析する際に、前記複数のグレー表示部の輝度も解析し、
 前記複数のグレー表示部の輝度に基づいて、前記画像を撮像した撮像手段のダイナミックレンジが適切か否かを判定し、
 前記ダイナミックレンジが適切な場合に、前記画像の撮像環境が顔認証に適しているか否かを判定する、
付記1に記載の顔認証環境判定方法。
(付記3)
 CIE L色空間における前記第1の肌色表示部の明度Lは、20≦L≦37を満たし、
 CIE L色空間における前記第2の肌色表示部の明度Lは、74≦L≦81を満たす、
付記1又は2に記載の顔認証環境判定方法。
(付記4)
 前記第1及び第2の肌色表示部は、人の顔を模した立体形状に形成されている、
付記1~3のいずれか一項に記載の顔認証環境判定方法。
(付記5)
 前記肌色チャートが、前記第1の肌色表示部における肌色と前記第2の肌色表示部における肌色との間の肌色を表す第3の肌色表示部をさらに備え、
 CIE L色空間における前記第3の肌色表示部の明度Lは、62≦L≦68を満たす、
付記1~4のいずれか一項に記載の顔認証環境判定方法。
(付記6)
 前記第1の肌色表示部における肌色と前記第3の肌色表示部における肌色との間の肌色を表す第4の肌色表示部と、
 前記第2の肌色表示部における肌色と前記第3の肌色表示部における肌色との間の肌色を表す第5の肌色表示部と、の少なくともいずれか一方を前記肌色チャートがさらに備える、
付記5に記載の顔認証環境判定方法。
(付記7)
 前記基板が黒色である、
付記1~6のいずれか一項に記載の顔認証環境判定方法。
(付記8)
 ネグロイドの肌色を表す第1の肌色表示部とコーカソイドの肌色を表す第2の肌色表示部とが基板上に形成された肌色チャートと、
 前記肌色チャートを撮像する撮像手段と、
 前記撮像手段によって撮像された前記肌色チャートの画像における前記第1及び第2の肌色表示部の輝度を解析する画像解析手段と、
 前記第1及び第2の肌色表示部の輝度に基づいて、前記画像の撮像環境が顔認証に適しているか否かを判定する環境判定手段と、を備える、
顔認証環境判定システム。
(付記9)
 前記肌色チャートの前記基板上に、反射率の異なる複数のグレー表示部が形成されており、
 前記画像解析手段は、前記複数のグレー表示部の輝度を解析し、
 当該顔認証環境判定システムが、前記複数のグレー表示部の輝度に基づいて、前記撮像手段のダイナミックレンジが適切か否かを判定するダイナミックレンジ判定手段をさらに備える、
付記8に記載の顔認証環境判定システム。
(付記10)
 CIE L色空間における前記第1の肌色表示部の明度Lは、20≦L≦37を満たし、
 CIE L色空間における前記第2の肌色表示部の明度Lは、74≦L≦81を満たす、
付記8又は9に記載の顔認証環境判定システム。
(付記11)
 前記第1及び第2の肌色表示部は、人の顔を模した立体形状に形成されている、
付記8~10のいずれか一項に記載の顔認証環境判定システム。
(付記12)
 前記肌色チャートが、前記第1の肌色表示部における肌色と前記第2の肌色表示部における肌色との間の肌色を表す第3の肌色表示部をさらに備え、
 CIE L色空間における前記第3の肌色表示部の明度Lは、62≦L≦68を満たす、
付記8~11のいずれか一項に記載の顔認証環境判定システム。
(付記13)
 前記第1の肌色表示部における肌色と前記第3の肌色表示部における肌色との間の肌色を表す第4の肌色表示部と、
 前記第2の肌色表示部における肌色と前記第3の肌色表示部における肌色との間の肌色を表す第5の肌色表示部と、の少なくともいずれか一方を前記肌色チャートがさらに備える、
付記12に記載の顔認証環境判定システム。
(付記14)
 前記基板が黒色である、
付記8~13のいずれか一項に記載の顔認証環境判定システム。
(付記15)
 ネグロイドの肌色を表す第1の肌色表示部とコーカソイドの肌色を表す第2の肌色表示部とが基板上に形成された肌色チャートの画像における前記第1及び第2の肌色表示部の輝度を解析する画像解析手段と、
 前記第1及び第2の肌色表示部の輝度に基づいて、前記画像の撮像環境が顔認証に適しているか否かを判定する環境判定手段と、を備える、
顔認証環境判定装置。
(付記16)
 前記肌色チャートの前記基板上に、反射率の異なる複数のグレー表示部が形成されており、
 前記画像解析手段は、前記複数のグレー表示部の輝度も解析し、
 前記複数のグレー表示部の輝度に基づいて、前記画像を撮像した撮像手段のダイナミックレンジが適切か否かを判定するダイナミックレンジ判定手段をさらに備える、
付記15に記載の顔認証環境判定装置。
(付記17)
 ネグロイドの肌色を表す第1の肌色表示部とコーカソイドの肌色を表す第2の肌色表示部とが基板上に形成された肌色チャートの画像における前記第1及び第2の肌色表示部の輝度を解析し、
 前記第1及び第2の肌色表示部の輝度に基づいて、前記画像の撮像環境が顔認証に適しているか否かを判定する、
 処理をコンピュータに実行させるための顔認証環境判定プログラムが格納された、
非一時的なコンピュータ可読媒体。
(付記18)
 前記肌色チャートの前記基板上に、反射率の異なる複数のグレー表示部が形成されており、
 前記第1及び第2の肌色表示部の輝度を解析する際に、前記複数のグレー表示部の輝度も解析し、
 前記複数のグレー表示部の輝度に基づいて、前記画像を撮像した撮像手段のダイナミックレンジが適切か否かを判定し、
 前記ダイナミックレンジが適切な場合に、前記画像の撮像環境が顔認証に適しているか否かを判定する、
付記17に記載の非一時的なコンピュータ可読媒体。
(付記19)
 ネグロイドの肌色を表す第1の肌色表示部とコーカソイドの肌色を表す第2の肌色表示部とが基板上に形成された肌色チャートの画像における前記第1及び第2の肌色表示部の輝度を解析し、
 前記第1及び第2の肌色表示部の輝度に基づいて、前記画像の撮像環境が顔認証に適しているか否かを判定する、
顔認証環境判定方法。
(付記20)
 前記肌色チャートの前記基板上に、反射率の異なる複数のグレー表示部が形成されており、
 前記第1及び第2の肌色表示部の輝度を解析する際に、前記複数のグレー表示部の輝度も解析し、
 前記複数のグレー表示部の輝度に基づいて、前記画像を撮像した撮像手段のダイナミックレンジが適切か否かを判定し、
 前記ダイナミックレンジが適切な場合に、前記画像の撮像環境が顔認証に適しているか否かを判定する、
付記19に記載の顔認証環境判定方法。
10 肌色チャート
11 基板
BK 第1の肌色表示部
WT 第2の肌色表示部
YL 第3の肌色表示部
14 第4の肌色表示部
15 第5の肌色表示部
GR グレー表示部
GS1、GS2 グレースケール部
20 カメラ
30 表示部
100、200 顔認証環境判定装置
110 画像解析部
120 環境判定部
130 ダイナミックレンジ判定部
140 画像取得部

Claims (20)

  1.  ネグロイドの肌色を表す第1の肌色表示部とコーカソイドの肌色を表す第2の肌色表示部とが基板上に形成された肌色チャートを撮像し、
     撮像された前記肌色チャートの画像における前記第1及び第2の肌色表示部の輝度を解析し、
     前記第1及び第2の肌色表示部の輝度に基づいて、前記画像の撮像環境が顔認証に適しているか否かを判定する、
    顔認証環境判定方法。
  2.  前記肌色チャートの前記基板上に、反射率の異なる複数のグレー表示部が形成されており、
     前記第1及び第2の肌色表示部の輝度を解析する際に、前記複数のグレー表示部の輝度も解析し、
     前記複数のグレー表示部の輝度に基づいて、前記画像を撮像した撮像手段のダイナミックレンジが適切か否かを判定し、
     前記ダイナミックレンジが適切な場合に、前記画像の撮像環境が顔認証に適しているか否かを判定する、
    請求項1に記載の顔認証環境判定方法。
  3.  CIE L色空間における前記第1の肌色表示部の明度Lは、20≦L≦37を満たし、
     CIE L色空間における前記第2の肌色表示部の明度Lは、74≦L≦81を満たす、
    請求項1又は2に記載の顔認証環境判定方法。
  4.  前記第1及び第2の肌色表示部は、人の顔を模した立体形状に形成されている、
    請求項1~3のいずれか一項に記載の顔認証環境判定方法。
  5.  前記肌色チャートが、前記第1の肌色表示部における肌色と前記第2の肌色表示部における肌色との間の肌色を表す第3の肌色表示部をさらに備え、
     CIE L色空間における前記第3の肌色表示部の明度Lは、62≦L≦68を満たす、
    請求項1~4のいずれか一項に記載の顔認証環境判定方法。
  6.  前記第1の肌色表示部における肌色と前記第3の肌色表示部における肌色との間の肌色を表す第4の肌色表示部と、
     前記第2の肌色表示部における肌色と前記第3の肌色表示部における肌色との間の肌色を表す第5の肌色表示部と、の少なくともいずれか一方を前記肌色チャートがさらに備える、
    請求項5に記載の顔認証環境判定方法。
  7.  前記基板が黒色である、
    請求項1~6のいずれか一項に記載の顔認証環境判定方法。
  8.  ネグロイドの肌色を表す第1の肌色表示部とコーカソイドの肌色を表す第2の肌色表示部とが基板上に形成された肌色チャートと、
     前記肌色チャートを撮像する撮像手段と、
     前記撮像手段によって撮像された前記肌色チャートの画像における前記第1及び第2の肌色表示部の輝度を解析する画像解析手段と、
     前記第1及び第2の肌色表示部の輝度に基づいて、前記画像の撮像環境が顔認証に適しているか否かを判定する環境判定手段と、を備える、
    顔認証環境判定システム。
  9.  前記肌色チャートの前記基板上に、反射率の異なる複数のグレー表示部が形成されており、
     前記画像解析手段は、前記複数のグレー表示部の輝度を解析し、
     当該顔認証環境判定システムが、前記複数のグレー表示部の輝度に基づいて、前記撮像手段のダイナミックレンジが適切か否かを判定するダイナミックレンジ判定手段をさらに備える、
    請求項8に記載の顔認証環境判定システム。
  10.  CIE L色空間における前記第1の肌色表示部の明度Lは、20≦L≦37を満たし、
     CIE L色空間における前記第2の肌色表示部の明度Lは、74≦L≦81を満たす、
    請求項8又は9に記載の顔認証環境判定システム。
  11.  前記第1及び第2の肌色表示部は、人の顔を模した立体形状に形成されている、
    請求項8~10のいずれか一項に記載の顔認証環境判定システム。
  12.  前記肌色チャートが、前記第1の肌色表示部における肌色と前記第2の肌色表示部における肌色との間の肌色を表す第3の肌色表示部をさらに備え、
     CIE L色空間における前記第3の肌色表示部の明度Lは、62≦L≦68を満たす、
    請求項8~11のいずれか一項に記載の顔認証環境判定システム。
  13.  前記第1の肌色表示部における肌色と前記第3の肌色表示部における肌色との間の肌色を表す第4の肌色表示部と、
     前記第2の肌色表示部における肌色と前記第3の肌色表示部における肌色との間の肌色を表す第5の肌色表示部と、の少なくともいずれか一方を前記肌色チャートがさらに備える、
    請求項12に記載の顔認証環境判定システム。
  14.  前記基板が黒色である、
    請求項8~13のいずれか一項に記載の顔認証環境判定システム。
  15.  ネグロイドの肌色を表す第1の肌色表示部とコーカソイドの肌色を表す第2の肌色表示部とが基板上に形成された肌色チャートの画像における前記第1及び第2の肌色表示部の輝度を解析する画像解析手段と、
     前記第1及び第2の肌色表示部の輝度に基づいて、前記画像の撮像環境が顔認証に適しているか否かを判定する環境判定手段と、を備える、
    顔認証環境判定装置。
  16.  前記肌色チャートの前記基板上に、反射率の異なる複数のグレー表示部が形成されており、
     前記画像解析手段は、前記複数のグレー表示部の輝度も解析し、
     前記複数のグレー表示部の輝度に基づいて、前記画像を撮像した撮像手段のダイナミックレンジが適切か否かを判定するダイナミックレンジ判定手段をさらに備える、
    請求項15に記載の顔認証環境判定装置。
  17.  ネグロイドの肌色を表す第1の肌色表示部とコーカソイドの肌色を表す第2の肌色表示部とが基板上に形成された肌色チャートの画像における前記第1及び第2の肌色表示部の輝度を解析し、
     前記第1及び第2の肌色表示部の輝度に基づいて、前記画像の撮像環境が顔認証に適しているか否かを判定する、
     処理をコンピュータに実行させるための顔認証環境判定プログラムが格納された、
    非一時的なコンピュータ可読媒体。
  18.  前記肌色チャートの前記基板上に、反射率の異なる複数のグレー表示部が形成されており、
     前記第1及び第2の肌色表示部の輝度を解析する際に、前記複数のグレー表示部の輝度も解析し、
     前記複数のグレー表示部の輝度に基づいて、前記画像を撮像した撮像手段のダイナミックレンジが適切か否かを判定し、
     前記ダイナミックレンジが適切な場合に、前記画像の撮像環境が顔認証に適しているか否かを判定する、
    請求項17に記載の非一時的なコンピュータ可読媒体。
  19.  ネグロイドの肌色を表す第1の肌色表示部とコーカソイドの肌色を表す第2の肌色表示部とが基板上に形成された肌色チャートの画像における前記第1及び第2の肌色表示部の輝度を解析し、
     前記第1及び第2の肌色表示部の輝度に基づいて、前記画像の撮像環境が顔認証に適しているか否かを判定する、
    顔認証環境判定方法。
  20.  前記肌色チャートの前記基板上に、反射率の異なる複数のグレー表示部が形成されており、
     前記第1及び第2の肌色表示部の輝度を解析する際に、前記複数のグレー表示部の輝度も解析し、
     前記複数のグレー表示部の輝度に基づいて、前記画像を撮像した撮像手段のダイナミックレンジが適切か否かを判定し、
     前記ダイナミックレンジが適切な場合に、前記画像の撮像環境が顔認証に適しているか否かを判定する、
    請求項19に記載の顔認証環境判定方法。
PCT/JP2019/046762 2019-11-29 2019-11-29 顔認証環境判定方法、顔認証環境判定システム、顔認証環境判定装置、及び非一時的なコンピュータ可読媒体 WO2021106187A1 (ja)

Priority Applications (6)

Application Number Priority Date Filing Date Title
JP2021561099A JP7315024B2 (ja) 2019-11-29 2019-11-29 顔認証環境判定方法、顔認証環境判定システム、顔認証環境判定装置、及び顔認証環境判定プログラム
US17/778,503 US20220415014A1 (en) 2019-11-29 2019-11-29 Face authentication environment determination method, face authentication environment determination system, face authentication environment determination apparatus, and non-transitory computer readable medium
PCT/JP2019/046762 WO2021106187A1 (ja) 2019-11-29 2019-11-29 顔認証環境判定方法、顔認証環境判定システム、顔認証環境判定装置、及び非一時的なコンピュータ可読媒体
EP19954541.9A EP4067844A4 (en) 2019-11-29 2019-11-29 FACIAL RECOGNITION ENVIRONMENT DETERMINATION METHOD, FACIAL RECOGNITION ENVIRONMENT DETERMINATION SYSTEM, FACIAL RECOGNITION ENVIRONMENT DETERMINATION DEVICE AND COMPUTER READABLE NON-TRANSITORY MEDIUM
JP2023109709A JP7477021B2 (ja) 2019-11-29 2023-07-04 顔認証環境判定方法、顔認証環境判定システム、顔認証環境判定装置、顔認証環境判定プログラム、肌色チャート、及び肌色チャートの製造方法
US18/498,693 US20240062509A1 (en) 2019-11-29 2023-10-31 Face authentication environment determination method, face authentication environment determination system, face authentication environment determination apparatus, and non-transitory computer readable medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2019/046762 WO2021106187A1 (ja) 2019-11-29 2019-11-29 顔認証環境判定方法、顔認証環境判定システム、顔認証環境判定装置、及び非一時的なコンピュータ可読媒体

Related Child Applications (2)

Application Number Title Priority Date Filing Date
US17/778,503 A-371-Of-International US20220415014A1 (en) 2019-11-29 2019-11-29 Face authentication environment determination method, face authentication environment determination system, face authentication environment determination apparatus, and non-transitory computer readable medium
US18/498,693 Continuation US20240062509A1 (en) 2019-11-29 2023-10-31 Face authentication environment determination method, face authentication environment determination system, face authentication environment determination apparatus, and non-transitory computer readable medium

Publications (1)

Publication Number Publication Date
WO2021106187A1 true WO2021106187A1 (ja) 2021-06-03

Family

ID=76129436

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2019/046762 WO2021106187A1 (ja) 2019-11-29 2019-11-29 顔認証環境判定方法、顔認証環境判定システム、顔認証環境判定装置、及び非一時的なコンピュータ可読媒体

Country Status (4)

Country Link
US (2) US20220415014A1 (ja)
EP (1) EP4067844A4 (ja)
JP (2) JP7315024B2 (ja)
WO (1) WO2021106187A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2024023932A1 (ja) * 2022-07-26 2024-02-01 日本電気株式会社 テストチャート、画像解析装置、画像解析システム、画像解析方法及び記録媒体

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP4067844A4 (en) 2019-11-29 2022-11-09 NEC Corporation FACIAL RECOGNITION ENVIRONMENT DETERMINATION METHOD, FACIAL RECOGNITION ENVIRONMENT DETERMINATION SYSTEM, FACIAL RECOGNITION ENVIRONMENT DETERMINATION DEVICE AND COMPUTER READABLE NON-TRANSITORY MEDIUM

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001074556A (ja) 1999-09-03 2001-03-23 Fuji Photo Film Co Ltd 肌色カラーチャート
JP2003536303A (ja) * 2000-06-08 2003-12-02 ハネウェル・インターナショナル・インコーポレーテッド 近赤外線偽装検出
JP2004112649A (ja) * 2002-09-20 2004-04-08 Sony Corp 色票チャートセット、画像解析方法、ホワイトバランス性能測定評価方法および画像処理装置
JP2006081846A (ja) * 2004-09-17 2006-03-30 Inforward Inc 顔面溝の評価方法及び装置
US20090080004A1 (en) * 2007-09-26 2009-03-26 Sony Corporation System and method for determining an optimal reference color chart
CN108052926A (zh) * 2017-12-29 2018-05-18 努比亚技术有限公司 指纹识别方法、移动终端及计算机可读存储介质
CN109034052A (zh) * 2018-07-24 2018-12-18 深圳市科脉技术股份有限公司 人脸检测方法及装置

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20190205617A1 (en) * 2017-12-29 2019-07-04 Idemia Identity & Security USA LLC System and method for combining identity information to facilitate image acquisition
EP4067844A4 (en) 2019-11-29 2022-11-09 NEC Corporation FACIAL RECOGNITION ENVIRONMENT DETERMINATION METHOD, FACIAL RECOGNITION ENVIRONMENT DETERMINATION SYSTEM, FACIAL RECOGNITION ENVIRONMENT DETERMINATION DEVICE AND COMPUTER READABLE NON-TRANSITORY MEDIUM

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001074556A (ja) 1999-09-03 2001-03-23 Fuji Photo Film Co Ltd 肌色カラーチャート
JP2003536303A (ja) * 2000-06-08 2003-12-02 ハネウェル・インターナショナル・インコーポレーテッド 近赤外線偽装検出
JP2004112649A (ja) * 2002-09-20 2004-04-08 Sony Corp 色票チャートセット、画像解析方法、ホワイトバランス性能測定評価方法および画像処理装置
JP2006081846A (ja) * 2004-09-17 2006-03-30 Inforward Inc 顔面溝の評価方法及び装置
US20090080004A1 (en) * 2007-09-26 2009-03-26 Sony Corporation System and method for determining an optimal reference color chart
CN108052926A (zh) * 2017-12-29 2018-05-18 努比亚技术有限公司 指纹识别方法、移动终端及计算机可读存储介质
CN109034052A (zh) * 2018-07-24 2018-12-18 深圳市科脉技术股份有限公司 人脸检测方法及装置

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2024023932A1 (ja) * 2022-07-26 2024-02-01 日本電気株式会社 テストチャート、画像解析装置、画像解析システム、画像解析方法及び記録媒体

Also Published As

Publication number Publication date
US20220415014A1 (en) 2022-12-29
JP7315024B2 (ja) 2023-07-26
JPWO2021106187A1 (ja) 2021-06-03
JP2023134554A (ja) 2023-09-27
US20240062509A1 (en) 2024-02-22
JP7477021B2 (ja) 2024-05-01
EP4067844A1 (en) 2022-10-05
EP4067844A4 (en) 2022-11-09

Similar Documents

Publication Publication Date Title
JP7477021B2 (ja) 顔認証環境判定方法、顔認証環境判定システム、顔認証環境判定装置、顔認証環境判定プログラム、肌色チャート、及び肌色チャートの製造方法
JP5648483B2 (ja) カラー画像処理方法、カラー画像処理装置およびカラー画像処理プログラム
JP6004481B2 (ja) カラー画像処理方法、カラー画像処理装置およびカラー画像処理プログラム
JP6907766B2 (ja) 計測装置および計測システム
JP7401013B2 (ja) 情報処理装置、制御装置、情報処理方法及びプログラム
JPWO2018021048A1 (ja) 色校正装置、色校正システム、色校正用ホログラム、色校正方法及びプログラム
EP3410101B1 (en) Evaluation device and recording medium storing evaluation program
Ikeda et al. Reflection measurement and visual evaluation of the luminosity of skin coated with powder foundation
WO2021106192A1 (ja) 肌色チャート及びその製造方法
El Khoury et al. Haze and convergence models: Experimental comparison
Hsu et al. A novel automatic white balance method for color constancy under different color temperatures
CN113252585B (zh) 一种基于高光谱图像判断黄金表面覆膜的方法和装置
WO2021020482A1 (en) Surface characteristics evaluation method, surface characteristics evaluation apparatus, and surface characteristics evaluation program
Mario et al. Cromaticity improvement in images with poor lighting using the multiscale-Retinex MSR algorithm
JP2014180284A (ja) 分析用肌画像生成システムおよび分析用肌画像生成方法
CN109819150B (zh) 一种多通道图像采集装置以及采集多通道图像的方法
CN217932369U (zh) 光谱照明环境及图像采集装置
WO2023119983A1 (ja) カラーレンズ決定方法、カラーレンズ決定装置及びプログラム
CN117710344A (zh) 一种印品色相稳定性检测方法、装置及电子设备
JP2016018262A (ja) 解析用画像撮像処理システムおよび携帯型装置

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 19954541

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2021561099

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

ENP Entry into the national phase

Ref document number: 2019954541

Country of ref document: EP

Effective date: 20220629