JP2019037741A - 身体情報分析装置およびそのアイシャドウの分析方法 - Google Patents

身体情報分析装置およびそのアイシャドウの分析方法 Download PDF

Info

Publication number
JP2019037741A
JP2019037741A JP2018006997A JP2018006997A JP2019037741A JP 2019037741 A JP2019037741 A JP 2019037741A JP 2018006997 A JP2018006997 A JP 2018006997A JP 2018006997 A JP2018006997 A JP 2018006997A JP 2019037741 A JP2019037741 A JP 2019037741A
Authority
JP
Japan
Prior art keywords
auxiliary line
eye shadow
face
right eye
eyebrow
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2018006997A
Other languages
English (en)
Other versions
JP6568606B2 (ja
Inventor
沈軾榮
Shyh-Yong Shen
季敏▲ちょう▼
Min-Chang Chi
呉孝宗
xiao zong Wu
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Cal Comp Big Data Inc
Original Assignee
Cal Comp Big Data Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Cal Comp Big Data Inc filed Critical Cal Comp Big Data Inc
Publication of JP2019037741A publication Critical patent/JP2019037741A/ja
Application granted granted Critical
Publication of JP6568606B2 publication Critical patent/JP6568606B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0077Devices for viewing the surface of the body, e.g. camera, magnifying lens
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/60Analysis of geometric attributes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • G06V40/165Detection; Localisation; Normalisation using facial parts and geometric relationships
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/72Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7271Specific aspects of physiological measurement analysis
    • A61B5/7275Determining trends in physiological measurement data; Predicting development of a medical condition based on physiological measurements, e.g. determining a risk factor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/11Region-based segmentation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/90Determination of colour characteristics
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/40Extraction of image or video features
    • G06V10/56Extraction of image or video features relating to colour
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168Feature extraction; Face representation
    • G06V40/171Local features and components; Facial parts ; Occluding parts, e.g. glasses; Geometrical relationships
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30196Human being; Person
    • G06T2207/30201Face

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Geometry (AREA)
  • Biomedical Technology (AREA)
  • Animal Behavior & Ethology (AREA)
  • Biophysics (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Pathology (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Artificial Intelligence (AREA)
  • Physiology (AREA)
  • Psychiatry (AREA)
  • Signal Processing (AREA)
  • Image Processing (AREA)
  • Image Analysis (AREA)

Abstract

【課題】アイシャドウ部位のイメージ分析して完璧に化粧動作を行うよう補助する身体情報分析装置の提供。【解決手段】身体情報分析装置およびそのアイシャドウの分析方法であって、アイシャドウの分析方法は、身体情報分析装置のイメージ取得モジュールが人の顔を認識したとき、人の顔の各部位を位置決めすることS16と、左眉、左目、右眉、および右目の位置をそれぞれ取得することS18と、左眉および左目に基づき左側アイシャドウの位置を判断し、かつ右眉および右目に基づき右側アイシャドウの位置を判断することS20と、アイシャドウの平均色数値を分析することS24と、アイシャドウ平均色数値をプリセット色数値と対比しS26、または左側アイシャドウおよび右側アイシャドウの平均色数値を互いに対比することと、身体情報分析装置の表示モジュールに対比結果を表示することS28とを含む。【選択図】図6B

Description

本発明は分析装置および分析方法に関し、特に身体情報分析装置およびそのアイシャドウの分析方法に関する。
女性にとって化粧は、ほとんど毎日必須の動作の1つといってよい。
通常、使用者は鏡の前に座って化粧を行い、またはスマートフォン、タブレットなどのデバイスのカメラレンズまたはスクリーンにより化粧を行う。
ただ、使用者の化粧が均一であるか否か、色が適切であるか否かなどの問題は、往々にして使用者が肉眼で自ら観察、確認するしかない。従って、経験不足の一部の使用者には、化粧の速度が遅く、またはうまく化粧できないといった悩みがある。
これに鑑み、本技術分野においては、使用者が迅速に化粧動作を完了できるよう効果的に補助し、かつ経験不足の使用者の化粧を最適化するよう補助できる補助装置が非常に必要とされる。
本発明は、使用者が化粧を行うときに、アイシャドウ部位のイメージ分析を提供してガイドすることで使用者が迅速に、かつさらに完璧に化粧動作を行うよう補助する身体情報分析装置、およびそのアイシャドウの分析方法を提供する。
本発明の実施例において、アイシャドウの分析方法は、身体情報分析装置のイメージ取得モジュールが人の顔を認識したとき、人の顔の各部位を位置決めするステップと、左眉、左目、右眉、および右目の位置をそれぞれ取得するステップと、左眉および左目に基づき左側アイシャドウの位置を判断し、かつ右眉および右目に基づき右側アイシャドウの位置を判断するステップと、アイシャドウの平均色数値を分析するステップと、アイシャドウの平均色数値をプリセット色数値と対比し、または左側アイシャドウおよび右側アイシャドウの平均色数値を互いに対比するステップと、身体情報分析装置の表示モジュールに対比結果を表示するステップと、補助動作完了まで上述ステップを繰り返して実行するステップと、を含む。
本発明の実施例において、身体情報分析装置は少なくとも、イメージ取得モジュール、表示モジュール、および処理ユニットを含み、ここで、イメージ取得モジュールは外部イメージを取得することに用いられ、処理ユニットは外部イメージを認識する。処理ユニットが外部イメージにおいて人の顔を認識したとき、人の顔の各部位を位置決めすることで左眉、左目、右眉、および右目の位置を少なくとも取得する。かつ、処理ユニットは左眉および左目の位置に基づき左側アイシャドウの位置を判断し、かつ右眉および右目の位置に基づき右側アイシャドウの位置を判断する。続いて、処理ユニットはさらに、左側アイシャドウおよび右側アイシャドウの平均色数値を分析し、かつ平均色数値をプリセット色数値と対比し、または左側アイシャドウおよび右側アイシャドウの平均色数値を互いに対比して対比結果を生成する。ここで、表示モジュールは対比結果を表示することに用いられる。
関連技術と比較して到達可能な本発明の技術効果は、使用者が身体情報分析装置により化粧動作を行うとき、自身の顔部の容貌を見ることができる他、アイシャドウ部位のイメージ分析を直接得て、これによりさらに迅速に、かつさらに完璧に化粧動作を行えることである。
本発明の第1の具体的実施例におけるシステム構造図である。 本発明の第1の具体的実施例における分析装置の概略図である。 本発明の第2の具体的実施例における分析装置の概略図である。 本発明の第1の具体的実施例における分析装置のブロック図である。 本発明の第1の具体的実施例における処理ユニットの概略図である。 本発明の第1の具体的実施例における第1アイシャドウ分析フロー図である。 本発明の第1の具体的実施例における第2アイシャドウ分析フロー図である。 顔部位置決め概略図である。 本発明の第2の具体的実施例におけるアイシャドウ分析フロー図である。 本発明の第1の具体的実施例における第1分析動作図である。 本発明の第1の具体的実施例における第2分析動作図である。 本発明の第1の具体的実施例における第3分析動作図である。 本発明の第1の具体的実施例における第4分析動作図である。 本発明の第3の具体的実施例における分析装置の概略図である。
本発明の好適な実施例につき、図面を踏まえて以下に詳細に説明する。
先ず、図1を参照されたい。本発明の第1の具体的実施例におけるシステム構造図である。本発明は、身体情報分析装置(以下、分析装置という)を開示し、分析装置は主に、アイシャドウの分析方法(以下、分析方法という)を実行することに用いられることで、使用者が迅速に、かつ完璧にアイシャドウ部分の化粧動作を行うよう補助する。
実施例において、使用者は、モバイル装置2への操作により分析装置1へ設定を行うことができる。図1に示すように、モバイル装置2内にはアプリケーションプログラム21がインストールされる。具体的には、アプリケーションプログラム21は、分析装置1と相互接続可能なアプリケーションプログラム21である(例えば、分析装置1のメーカーにより開発され、かつ提供されたアプリケーションプログラムであってよい)。本発明において、使用者はアプリケーションプログラム21への操作により分析装置1での各種設定動作(例えば、顔部情報の登録の設定、各種プリセット値の設定など)を完了させることができる。
実施例において、分析装置1は、所在領域内の無線ルータ3に接続することで、無線ルータ3を介してインターネット4へ接続してもよい。これにより、分析装置1は、インターネット4を介してファームウェアの更新、データのアップロードとダウンロードなどの動作を行うことができる。かつ、分析装置1はさらに、インターネット4により使用者の身体情報をリモート端末のコンピュータデバイス(図示せず)へ伝送することで、使用者にリモート端末で検索させ、またはこれにより他の場所でのバックアップという目的を実現するようにできる。
同時に図2および3を参照されたい。それぞれ本発明の第1の具体的実施例および第2の具体的実施例における分析装置の概略図である。本発明の分析装置1は主に使用者5の寝室またはメイクルームに設けられることで、使用者5が身体情報(例えば、顔部、頸部、手部の皮膚状況)の検出と分析を行いやすくする。
分析装置1はミラースクリーン11を有する。分析装置1が起動するとき、ミラースクリーン11を介してグラフィカルユーザーインターフェース(Graphical User Interface,GUI)を表示し、かつグラフィカルユーザーインターフェースにより使用者5とインタラクションを行うことができる。また、分析装置1がオフになったとき、ミラースクリーン11を単純なミラーとして使用することで使用者5の容貌を反射することもきる。本発明は主に分析装置1を介して使用者5の化粧動作を補助し、従って、ミラースクリーン11はグラフィカルユーザーインターフェースを表示するとともに、使用者5の容貌を反射可能であることで、使用者5が化粧時に使用者5の容貌を分析することに有利であり、かつ同時に補助(後述)を提供する。実施例において、ミラースクリーン11はタッチ式スクリーンであってよく、使用者5はミラースクリーン11を介して分析装置1にデータの入力動作を行うことができる。
分析装置1はさらに、分析装置1に設けられ、かつ角度の調整を受け入れ可能であるイメージ取得モジュール12を有する。実施例において、イメージ取得モジュール12は使用者5に対して高解像度イメージ(例えば、顔部イメージ、頸部イメージ、手部イメージなど)を撮影でき、分析装置1はイメージにより使用者5の身体情報および化粧の進捗を分析できる。他の実施例において、イメージ取得モジュール12は外部情報(例えば、一次元コード、二次元コードなど)を取得することで、情報の内容から対応するデータを取得できる。
分析装置1はさらに、複数のボタン13を備えてもよい。本実施例において、複数のボタン13は実体ボタン(button)またはタッチキー(touch key)でもよいが、限定しない。使用者5は、ボタン13を触発することで上述のグラフィカルユーザーインターフェースを操作制御し(例えば、グラフィカルユーザーインターフェースがトップページへ戻る、前のページへ移動、または、次のページへ移動などを制御する)、または分析装置1が対応する機能(例えば、ミラースクリーン11をオンにする、ミラースクリーン11をオフにする、イメージ取得モジュール12を起動するなど)を迅速に実行するようにできる。
分析装置1はさらに、1つまたは複数のセンサ14(例えば、温度センサ、湿度センサなど)を有してもよく、分析装置1の所在環境の環境データを検知し、これにより使用者5の身体情報に対する分析装置1の検出と分析の正確率を高める。例えば、センサ14が焦電式赤外線センサ(Pyroelectric Infrared Radial sensor,PIR sensor)の場合、使用者5が分析装置1の使用領域へ入ることを随時検出でき、対応してスタンバイモードから離脱し、かつイメージ取得モジュール12を起動して使用者5に対して顔部イメージなどの撮影を試み、分析プロセスを開始する。
他の実施例において、センサ14はさらにモーションセンサ(motion sensor)であってもよく、分析装置1はモーションセンサにより使用者5の移動やジェスチャー(例えば、左フリック、右フリック、上フリック、下フリック、前に押す、または後ろへ引っ張るなど)を検知できる。このように、使用者5はジェスチャーにより分析装置1へデータ入力動作を行うことができ、上述ミラースクリーン11またはボタン13に触れる必要がないことで指紋が残ることを防ぐ。
引き続き、図4を参照されたい。本発明の第1の具体的実施例における分析装置のブロック図である。図4に示すように、分析装置1は主に処理ユニット10と、処理ユニット10に電気的に接続された表示モジュール111と、イメージ取得モジュール12と、入力インターフェース15と、無線伝送モジュール16とを含む。
実施例において、イメージ取得モジュール12はカメラであり、外部イメージおよび外部情報を取得することに用いられる。分析装置1は外部イメージを介して使用者を認識(例えば、顔部認識、頸部認識、手部認識など)することで使用者の顔部、頸部、手部などの部位を分析し、または外部情報の内容を介して対応する動作を行うことができる。
表示モジュール111は、上述のグラフィカルユーザーインターフェースを表示することに用いられる。実施例において、表示モジュール111はミラースクリーン11の中に装着されている。表示モジュール111がイネーブルにされると、表示モジュール111の光源はミラースクリーン11を透過し、かつグラフィカルユーザーインターフェースをミラースクリーン11に表示できる。表示モジュール111がディゼーブルにされると、使用者はミラースクリーンを通常のミラーとして使用できる。
分析装置1は、入力インターフェース15を介して使用者5の外部入力を受け入れ、これにより使用者はグラフィカルユーザーインターフェースとインタラクションを行うことができ、または必要な設定動作を行うことができる。実施例において、入力インターフェース15は上述のセンサ14であってよく、使用者のジェスチャー入力を検知することに用いられる。他の実施例において、入力インターフェース15は上述のイメージ取得モジュール12であってよく、外部イメージまたは外部情報を取得することができる。さらに他の実施例において、入力インターフェース15はタッチスクリーンまたはボタン13であってよく、使用者の入力動作を受け入れることに用いられる。さらに別の実施例において、入力インターフェース15はマイクであってよく、外部音声情報を受け入れることに用いられる。
無線伝送モジュール16はインターネット4へ接続することに用いられる。具体的には、使用者はインターネット4によりリモート端末から分析装置1へ接続することで分析装置1に記録された各種データ(例えば、身体情報)を随時検索できる。
処理ユニット10は表示モジュール111、イメージ取得モジュール12、入力インターフェース15、および無線伝送モジュール16に接続され、かつ処理ユニット10はコンピュータで実行可能なソースプログラム(図示せず)を含む。コンピュータで実行可能なソースプログラムの実行を介して、処理ユニット10は本発明の分析方法をさらに実現できる。
同時に図5を参照されたい。本発明の第1の具体的実施例における処理ユニットの概略図である。具体的には、処理ユニット10は主に上述コンピュータで実行可能なソースプログラムを介して本発明の分析方法における各機能を実行し、かつ異なる機能に基づき、上述コンピュータで実行可能なソースプログラムを以下のいくつかの機能モジュールに分けることができる。
1.イメージ取得モジュール12により取得された外部イメージを認識することで外部イメージに人の顔が存在するか否かを分析するための顔部認識モジュール101。
2.アルゴリズムにより外部イメージにおける人の顔を位置決めすることで人の顔の各部位(例えば、眉毛、目、鼻、口など)の位置を取得する位置決めモジュール102。
3.位置決めモジュール102により取得された各部位に基づき、使用者がアイシャドウを描くのに適した位置を判断する判断モジュール103。
4.アイシャドウの位置をイメージ分析することで使用者の現在のアイシャドウ状況(例えば、色の明るさ、色の分布率など)を取得する分析モジュール104。
5.使用者の現在のアイシャドウ状況をプリセット値と対比し、かつ使用者に対比結果(例えば、色が明るすぎる、色が暗すぎる、色が均一でないなど)を通知することで使用者に対して化粧の補助を行う対比モジュール105。
他の実施例において、対比モジュール105はまた、使用者の現在の左目アイシャドウのイメージを右目アイシャドウのイメージと対比し、かつ使用者に対比結果(例えば、左目アイシャドウの方が、色が明るい、右目アイシャドウのほうが色が暗いなど)を報告するが、プリセット値との対比に限らない。言い換えれば、この実施例において、対比モジュール105が左目アイシャドウ状況を対比したいときは、リアルタイムに右目アイシャドウ状況を取得することで上述のプリセット値とし、一方、対比モジュール105が右目アイシャドウ状況を対比したいときは、リアルタイムに左目アイシャドウ状況を取得することで上述のプリセット値とする。
引き続き、図6Aおよび6Bを参照されたい。それぞれ本発明の第1の具体的実施例における第1アイシャドウ分析フロー図および第2アイシャドウ分析フロー図である。図6Aおよび図6Bは、本発明の分析方法の各ステップを説明することに用いられ、かつ主に図1から図5までに示される分析装置1に応用される。
図6Aに示すように、本発明の分析装置1により上述分析方法を実行することで使用者が化粧動作を行うことを補助するには、先ず、使用者は分析装置1をオンにする必要がある(ステップS10)。実施例において、使用者はタッチスクリーンまたはボタン13を触発することで分析装置1をオンにできる。他の実施例において、分析装置1は通電後に自動でスタンバイモードに入り、かつ使用者はイメージ取得モジュール12、またはセンサ14によりジェスチャーを入力することで分析装置1を起動できるが、限定しない。
具体的には、本発明の分析装置1は異なる機能を提供するための異なるモードを有し、本実施例は、オンになった後に使用者の化粧動作を補助する補助モードに分析装置1を自動で入らせる。その他の実施例において、分析装置1がオンになった後にスタンバイモードに入り、かつ使用者の指令を受け取った後に補助モードに入ってもよい。
分析装置1がオンになると、イメージ取得モジュール12を介して外部イメージを取得し続け(ステップS12)、かつ、処理ユニット10は取得された外部イメージに人の顔が存在するか否かを判断し続ける(ステップS14)。実施例において、処理ユニット10はイメージ取得モジュール12から外部イメージを取得し、かつ上述の顔部認識モジュール101により外部イメージに対して顔部認識を行うことで外部イメージに人の顔が存在するか否かを判断する。
外部イメージに人の顔が存在しない場合、分析装置1は再度ステップS12とステップS14を実行することで外部イメージの取得と分析を行い続ける。例を挙げると、外部イメージに床、ドア、椅子などの物品のみしか存在しない(寝室に人が存在しないことを表す)可能性がある場合、または使用者の身体または背部のみしか存在しない(使用者は化粧動作を行おうとしていないことを表す)場合、この状況では分析装置1は本発明の分析方法を主体的に実行しない。
引き続き図6Bに示すように、処理ユニット10が認識した後に、外部イメージに人の顔が存在すると判断した場合、さらに人の顔の各部位(主に使用者の五官)を位置決めする(ステップS16)。実施例において、処理ユニット10は外部イメージに人の顔が存在すると判断した後に、さらに人の顔のサイズが特定の比率より大きいか否か(例えば、外部イメージの40%以上を占める)を判断する。かつ、処理ユニット10は、人の顔のサイズが特定の比率よりも大きいときにのみ、人の顔の各部位を位置決めする。
実施例において、処理ユニット10が外部イメージに人の顔が存在すると判断した後、人の顔のイメージを上述の位置決めモジュール102へ引き渡し、位置決めモジュール102により人の顔のイメージを位置決めすることで人の顔から使用者の左眉、左目、右眉、および右目の位置を少なくとも取得する(ステップS18)。
言及に値するのは、本実施例において、位置決めモジュール102は主に、Dlib Face Landmarkシステムを介して該人の顔の各部位を位置決めするが、これに限定しないということである。
同時に図7を参照されたい。顔部の位置決め概略図である。処理ユニット10が外部イメージに人の顔が存在すると認識した後、さらに上述Dlib Face Landmarkシステムにより顔部51のイメージを分析する。Dlib Face Landmarkシステムは本分野における常用される技術的手段であり、それは分析完了後に顔部51のイメージに複数の位置決めポイント6を生成できる(例えば198個の位置決めポイントでよい)。これにより、Dlib Face Landmarkシステムは複数の位置決めポイント6の番号、形状、順序などの情報に基づき、顔部51のイメージにおいて各部位の位置を確定することで位置決め動作を完了できる。
図6Bに戻る。ステップS18の後、処理ユニット10は使用者の左眉、左目、右眉、および右目の位置を少なくとも取得する。続いて、処理ユニット10は、左眉および左目の位置に基づき人の顔の左側アイシャドウの位置を判断し、かつ右眉および右目の位置に基づき人の顔の右側アイシャドウの位置を判断する(ステップS20)。本実施例において、処理ユニット10は、Dlib Face Landmarkシステムの位置決め結果を前述の判断モジュール103へ引き渡し、判断モジュール103により左眉、左目、右眉、および右目の位置から左側アイシャドウの位置および右側アイシャドウの位置をそれぞれ算出する。
言及に値するのは、本発明のうちの1つの目的は、使用者によるアイシャドウ部分の化粧動作を補助することであり、従って、分析装置1は、前述左側アイシャドウおよび右側アイシャドウの位置を表示モジュール111により選択的に表示できる。具体的には、表示モジュール111は、左側アイシャドウおよび右側アイシャドウの位置をミラースクリーン11に直接表示し、かつ位置を使用者の顔部51とともにミラースクリーン11の反射イメージと重ね合わせる。このようにして、使用者は、直接、ミラースクリーン11でアイシャドウをどの位置に行うべきかを正確に理解できる。
ステップS20の後、分析装置1はさらに選択可能として、使用者の左側アイシャドウおよび右側アイシャドウのイメージを表示モジュール111により表示できる(ステップS22)。具体的には、分析装置1は、左側アイシャドウの位置および右側アイシャドウの位置を取得した後、イメージ取得モジュール12により左側アイシャドウのイメージおよび右側アイシャドウのイメージをそれぞれ取得し、かつ拡大処理後にミラースクリーン11に表示する。このようにして、使用者は、ミラースクリーン11から現在のアイシャドウの状況をさらに正確に取得でき、ひいては使用者の化粧動作に有利となる。
続いて、処理ユニット10は左側アイシャドウおよび右側アイシャドウのイメージに基づき左側アイシャドウの平均色数値および右側アイシャドウ平均色数値を分析する(ステップS24)。実施例において、処理ユニット10は左側アイシャドウおよび右側アイシャドウのイメージを前述分析モジュール104へ引き渡し、分析モジュール104により左側アイシャドウおよび右側アイシャドウの平均色数値を分析する。本実施例において、分析モジュール104は関連する技術における複数種のイメージ分析アルゴリズムを採用することで左側アイシャドウのイメージから左側アイシャドウの平均色数値を分析し、かつ右側アイシャドウのイメージから右側アイシャドウの平均色数値を分析できる。
具体的には、上述の平均色数値の算出は、処理ユニット10により、取得された左側アイシャドウのイメージおよび右側アイシャドウのイメージに対して異なるカラースペース形式で表示および分析することでもよい。例を挙げると、カラースペースは、RGBカラースペース、HSVカラースペース、HSLカラースペースなどであってもよいが、制限しない。ひいては、処理ユニット10により採用された分析方法の必要に基づき、同時に2種類のカラースペース形式を採用して表示および分析してもよく、その中から成分を抜き取って分析することも可能である。
例を挙げると、カラーイメージのカラースペース形式がHSVカラースペースであると仮定すると、イメージにおける各画素の色は「色相成分(Hue)」、「彩度成分(Saturation)」、「明度成分(Value)」により表示されることができる。カラーイメージのカラースペース形式がRGBカラースペースの場合、イメージにおける各画素の色は「赤色成分(Red)」、「緑色成分(Green)」、「青色成分(Blue)」により表示されることができる。
ステップS24の後、処理ユニット10はプリセット色数値を取得し、かつ平均色数値をプリセット色数値と対比して対比結果を生成する(ステップS26)。実施例において、処理ユニット10は、対比モジュール105によりプリセット色数値を記憶し、かつステップS24の後に平均色数値を対比モジュール105に引き渡す。これにより、対比モジュール105により左側アイシャドウの平均色数値およびプリセット色数値を対比して対比結果を生成し、かつ右側アイシャドウの平均色数値およびプリセット色数値を対比してもう1つの対比結果を生成する。
言及に値するのは、プリセット色数値は分析装置1により予め記憶された標準色または明るさを記録し、または、使用者が予め設定した理想の色もしくは明るさを記録できることである。また、分析装置1はインターネット4を介して使用者が必要とする化粧をダウンロードし、かつダウンロードされた化粧をイメージ分析することでプリセット色数値を生成して記憶してもよい。
他の実施例において、処理ユニット10はステップS24において左側アイシャドウの平均色数値を右側アイシャドウの平均色数値と対比して上述の対比結果を生成できる。この実施例において、処理ユニット10は左側アイシャドウが右側アイシャドウに近いか否か(色、明るさが近いか否か)を判断し、上述のプリセット色数値を記憶する必要はない。
言い換えれば、他の実施例において、対比モジュール105はステップS24において右側アイシャドウの平均色数値をリアルタイムに取得することで上述プリセット色数値とでき(例えば、第1プリセット色数値)、左側アイシャドウの平均色数値を第1プリセット色数値と対比する。かつ、対比モジュール105はまた、左側アイシャドウの平均色数値をリアルタイムに取得することで上述のプリセット色数値とでき(例えば、第2プリセット色数値)、右側アイシャドウの平均色数値を第2プリセット色数値と対比する。最後に、対比モジュール105が対比結果を生成する。ただ、上述は本発明の具体的な実施範例に過ぎず、これにより本案の特許請求の範囲を制限しない。
ステップS26の後、分析装置1は表示モジュール111を介して上述対比結果をミラースクリーン11へ表示する(ステップS28)ことで、使用者がミラースクリーン11から現在のアイシャドウの状況(例えば、色が標準明るさよりも明るい、または標準明るさよりも暗い)を取得するようにし、これにより分析装置1から化粧補助を得る。
実施例において、前述平均色数値とプリセット色数値は0〜255の画素値であり、対比結果はパーセンテージ比であり、かつ対比モジュール105は、次式(数1)の計算式に基づき対比結果を生成する。ただ、上述は、本発明のうちの1つの実施例に過ぎず、上述により制限されるわけではない。
Figure 2019037741
実施例において、処理ユニット10はさらに、左側アイシャドウのイメージおよび右側アイシャドウのイメージに基づき左側アイシャドウの標準偏差(Standard Deviation,SD)および右側アイシャドウの標準偏差を分析する(ステップS30)。実施例において、処理ユニット10は左側アイシャドウおよび右側アイシャドウのイメージを分析モジュール104へ引き渡すことで分析モジュール104により左側アイシャドウおよび右側アイシャドウの標準偏差を分析する。同様に、分析モジュール104は関連技術における複数種のイメージ分析アルゴリズムを採用することで左側アイシャドウおよび右側アイシャドウのイメージにより左側アイシャドウおよび右側アイシャドウの標準偏差を分析する。
ステップS30の後、処理ユニット10は予め記憶されたプリセット標準偏差を取得し、かつ標準偏差をプリセット標準偏差と対比して第2対比結果を生成する(ステップS32)。実施例において、処理ユニット10は、対比モジュール105によりプリセット標準偏差を記憶し、かつステップ30の後に標準偏差を対比モジュール105へ引き渡す。これにより、対比モジュール105により左側アイシャドウの標準偏差をプリセット標準偏差と対比し、かつ右側アイシャドウの標準偏差をプリセット標準偏差と対比することで上述の第2対比結果を生成する。
ステップS32の後、分析装置1は表示モジュール111を介して上述の第2対比結果をミラースクリーン11に表示することで(ステップS34)、使用者がアイシャドウに色の不均一な現象(例えば、色分布状況が標準分布状況よりも低い)があるか否かを直接確認し、ひいてはさらに補正を行うようにする。
実施例において、前述標準偏差は前述平均色数値に相似し、0〜255の画素値でよく、かつ第2対比結果は前述対比結果に相似し、パーセンテージ比であってよい。実施例において、対比モジュール105は、次式(数2)の計算式に基づき第2対比結果を算出する。ただ、上述は、本発明のうちの1つの実施例に過ぎず、上述により制限されるわけではない。
Figure 2019037741
続いて、分析装置1は今回の補助動作が完了するか否かを判断し(ステップS36)、かつ補助動作完了までステップS16からステップS34までを繰り返して実行することで、使用者の顔部51を認識し続け、五官を位置決めし続け、左側アイシャドウおよび右側アイシャドウの位置およびイメージを取得し続け、アイシャドウの平均色数値および標準偏差を分析し続け、かつ対比結果および第2対比結果を生成して表示し続ける。分析装置1が今回の補助動作を完了したと判断した場合、今回の分析方法を終了する。上述ステップS16からS34までを繰り返して実行することで、本発明の分析装置1および分析方法はリアルタイム(real time)の化粧補助機能を実現できる。
例を挙げると、分析装置1は使用者の顔部51を分析し、かつ表示された対比結果において使用者の左側アイシャドウの色が標準色よりも5%暗いことを指摘する。対比結果に基づき、使用者は左側アイシャドウを補強できる。使用者が補強するとともに、分析装置1は使用者の顔部51を分析し続け、かつ対比結果を補正し、使用者の左側シャドウの色が標準色よりも3%暗いことを表示する。
上述の対比結果に基づき、使用者は引き続き左側アイシャドウを補強でき、かつ分析装置1は使用者の顔部51を分析し続ける。続いて、分析装置1は再度、対比結果を補正し、使用者の左側アイシャドウの色が標準色よりも1.5%暗いことを表示し、その後もこれに類推する。これにより、使用者は、アイシャドウの色/明るさが標準色/明るさに等しくなる、または近似するまでアイシャドウを補強し続けることができる。
実施例において、分析装置1はステップS36において、分析装置1をオフにするか否かを判断する。本実施例において、分析装置1をオフにするまでステップS16からステップS34までを繰り返して実行し、かつオフにした後に今回の分析方法を終了する。これにより、分析装置1はオンにした後に上述の化粧補助機能にとどまることができる。
他の実施例において、分析装置1はステップS36において、対比結果(および第2対比結果)が化粧完了基準に適合するか否かを判断する。例を挙げると、分析装置1は前述の対比結果および第2対比結果に基づき、平均色数値がプリセット色数値に等しいまたは近似するか否かを判断し、および標準偏差がプリセット標準偏差に等しいまたは近似するか否かを判断する。かつ、分析装置1は、平均色数値がプリセット色数値に等しく、または近似し、かつ標準偏差がプリセット標準偏差に等しく、または近似しているとき、対比結果(および第2対比結果)が化粧完了基準に適合していると判断する。
同様に、本実施例において、分析装置1は対比結果(および第2対比結果)が化粧完了基準に適合するまでステップS16からステップS34までを繰り返して実行し、かつ適合した後に今回の分析方法を終了する。
引き続き図8を参照されたい。本発明の第2の具体的実施例におけるアイシャドウ分析フロー図である。図8は、図6Bのフロー図におけるステップS20についてさらに説明することで、処理ユニット10の判断モジュール103が如何にしてイメージにおける左眉、左目、右眉、および右目の位置から左側アイシャドウの位置および右側アイシャドウの位置を判断するかについて解釈を行うためのものである。
具体的には、図6Bのフロー図のステップS18の後、判断モジュール103は使用者の左眉、左目、右眉、および右目の位置を既に取得している。続いて、判断モジュール103は下述のステップS40からステップS50までを実行することで左側アイシャドウの位置を判断し、かつ下述のステップS52からS62までを実行することで右側アイシャドウの位置を判断する。
実施例において、判断モジュール103は、選択可能として、先ず左側アイシャドウの位置を判断し、または先ず右側アイシャドウの位置を判断できる。他の実施例において、判断モジュール103は左側アイシャドウおよび右側アイシャドウの位置を同時に判断でき、つまりステップS40からS50、およびステップS52からステップS62までは実行上で前後の順序を固定しているわけではない。以下の説明において、判断モジュール103は先ず、左側アイシャドウの位置を判断した後、右側アイシャドウの位置を判断することを例として説明するが、本案の特許請求の範囲を限定するわけではない。
先ず、判断モジュール103は人の顔のイメージから左目の眼尻位置を取得し(ステップS40)、かつ同一イメージから左眉の眉尻位置を取得する(ステップS42)。続いて、判断モジュール103は眼尻位置および眉尻位置を繋げることで第1補助線を生成する(ステップS44)。判断モジュール103はさらに、人の顔のイメージから左目の上瞼輪郭を取得し、かつ上瞼輪郭を直接、第2補助線とする(ステップS46)。続いて、判断モジュール103は第2補助線を上方向に移動させることで第3補助線を生成する(ステップ48)。最後に、判断モジュール103は第1補助線、第2補助線、および第3補助線から左側アイシャドウの位置を構成する(ステップS50)。
実施例において、分析装置1は選択可能として、使用者が検索しやすいよう、表示モジュール111が第1補助線、第2補助線、および第3補助線をミラースクリーン11に表示するよう制御できる。
続いて、判断モジュール103は、人の顔のイメージから右目の眼尻位置を取得し(ステップS52)、かつ右眉の眉尻位置を取得する(ステップS54)。続いて、判断モジュール103は眼尻位置および眉尻位置を繋げることで第4補助線を生成する(ステップS56)。判断モジュール103はさらに、人の顔のイメージから右目の上瞼輪郭を取得し、かつ上瞼輪郭を直接、第5補助線とする(ステップS58)。続いて、判断モジュール103は第5補助線を上方向に移動させることで第6補助線を生成する(ステップ60)。最後に、判断モジュール103は第4補助線、第5補助線、および第6補助線から右側アイシャドウの位置を構成する(ステップS62)。
同様に、分析装置1は選択可能として、使用者が検索しやすいよう、表示モジュール111が第4補助線、第5補助線、および第6補助線をミラースクリーン11に表示するよう制御できる。
同時に図9Aから9Dまでを参照されたい。それぞれ本発明の第1の具体的実施例における第1分析動作図から第4分析動作図までである。図9Aから図9Dの実施例は、判断モジュール103が左側アイシャドウおよび右側アイシャドウの位置を同時に判断することを例として説明するが、本案の特許請求の範囲を限定するわけではない。
先ず図9Aに示すように、図6Bのフロー図のステップ18の後、判断モジュール103は人の顔のイメージから左眉52、左目53、右眉54、および右目55の位置を判断できる。続いて、判断モジュール103は左眉52の眉尻521および左目53の眼尻531を繋げることで第1補助線71を取得し、かつ右眉54の眉尻541および右目55の眼尻551を繋げることで第4補助線74を取得する。
本実施例において、判断モジュール103は主に眉尻521の位置決めポイントの位置および眼尻531の位置決めポイントの位置(図7に示す位置決めポイント6)を取得し、かつ2つの位置決めポイントを繋げることで第1補助線71を取得する。かつ、判断モジュール103は眉尻541の位置決めポイントの位置および眼尻551の位置決めポイントの位置を取得し、かつ2つの位置決めポイントの位置を繋げることで第4補助線74を取得する。
続いて、図9Bに示すように、判断モジュール103は左目53の上瞼輪郭を取得することで直接、第2補助線72とし、かつ右目55の上瞼輪郭を取得することで直接、第5補助線75とする。図9Bから、第2補助線72の一端は第1補助線71に繋がり、かつ第5補助線75の一端は第4補助線74に繋がることがわかる。言い換えれば、第1補助線71および第2補助線72はいずれも左目53の眼尻531を通過し、第4補助線74および第5補助線75はいずれも右目55の眼尻551を通過する。
本実施例において、判断モジュール103は主に左目53の上瞼輪郭のすべての位置決めポイント(図7に示す位置決めポイント6)を取得し、かつすべての位置決めポイントを繋げることで第2補助線72を形成する。かつ、判断モジュール103は右目55の上瞼輪郭のすべての位置決めポイントを取得し、かつすべての位置決めポイントを繋げることで第4補助線75を形成する。
続いて、図9Cに示すように、判断モジュール103は第2補助線72を上方向に移動させることで第3補助線73を生成し、かつ第5補助線75を上方向に移動させることで第6補助線76を生成する。ここで、第3補助線73の両端は第1補助線71および第2補助線72にそれぞれ繋がり、第6補助線76の両端は第4補助線74および第5補助線75にそれぞれ繋がる。
実施例において、判断モジュール103は第2補助線72を上方向に第1補助線71の中間点位置まで移動させることで第3補助線73を生成でき、かつ第5補助線75を上方向に第4補助線74の中間位置まで移動させることで第6補助線76を生成できる。他の実施例において、使用者は上述の入力インターフェース15を介してアイシャドウ高さを設定し、これにより判断モジュール103は第2補助線72を上方向に第1補助線71のアイシャドウ高さまで移動させることで第3補助線73を生成でき、かつ第5補助線75を上方向に第4補助線74のアイシャドウ高さまで移動させることで第6補助線76を生成できる。
続いて、図9Dに示すように、第1補助線71から第6補助線76をいずれも生成完了後、判断モジュール103は第1補助線71、第2補助線72、および第3補助線73に基づき左側アイシャドウ81の位置をマークし、かつ第4補助線74、第5補助線75、および第6補助線76に基づき右側アイシャドウ82の位置をマークできる。これにより、上述分析モジュール104はイメージ分析を行うとき、左側アイシャドウ81および右側アイシャドウ82の位置を分析するだけでよく、処理ユニット10の作業量を低減させるだけでなく、分析結果の正確率を大幅に向上できる。
引き続き図10を参照にされたい。本発明の第3の具体的実施例における分析装置の概略図である。上に説明したように、本発明において、分析装置1は、使用者の顔部イメージをリアルタイムに取得し、かつ現在のアイシャドウ状況を分析し、かつ分析装置1はミラースクリーン11にイメージ表示領域1111、1112を提供することで使用者の左側アイシャドウ81のイメージおよび右側アイシャドウ82のイメージをそれぞれ表示できる。
具体的には、分析装置1は先ず、左側アイシャドウ81のイメージおよび右側アイシャドウ82のイメージを拡大処理し、表示モジュール111が左側アイシャドウ81のイメージおよび右側アイシャドウ82のイメージをミラースクリーン11のイメージ表示領域1111、1112に表示するよう制御する。
図10に示すように、ミラースクリーン11はさらに、情報表示領域1113を有し、分析装置1は表示モジュール111が前述対比結果(および第2対比結果)をミラースクリーン11の情報表示領域1113に表示するよう制御できる。
本実施例において、使用者はイメージ表示領域1111、1112から左側アイシャドウ81のイメージおよび右側アイシャドウ82のイメージをはっきりと見ることができ、かつ情報表示領域1113から左側アイシャドウ81および右側アイシャドウ82の色と分布状況が標準と異なるか否か(例えば、図10の実施例において、対比結果は左側アイシャドウ81の明るさが標準明るさよりも1.6%明るく、右側アイシャドウ82の色分布率が標準分布率よりも1.8%低いことを表す)を理解できる。これにより、分析装置1は、使用者がアイシャドウ部分の化粧動作を行うことに効果的に補助し、ひいては使用者の化粧速度を速め、かつ化粧効果を最適化できる。
以上は本発明の好適な実施例に過ぎず、これにより本発明の特許請求項の範囲を制限するわけではなく、本発明の内容を運用してなされたすべての等価の変更は、いずれも同じ理由から本発明の範囲内に含まれることを説明する。
1 身体情報分析装置
10 処理ユニット
101 顔部認識モジュール
102 位置決めモジュール
103 判断モジュール
104 分析モジュール
105 対比モジュール
11 ミラースクリーン
111 表示モジュール
1111、1112 イメージ表示領域
1113 情報表示領域
12 イメージ取得モジュール
13 ボタン
14 センサ
15 入力インターフェース
16 無線伝送モジュール
2 モバイル装置
21 アプリケーションプログラム
3 無線ルータ
4 インターネット
5 使用者
51 顔部
52 左眉
521 眉尻
53 左目
531 眼尻
54 右眉
541 眉尻
55 右目
551 眼尻
6 位置決めポイント
71 第1補助線
72 第2補助線
73 第3補助線
74 第4補助線
75 第5補助線
76 第6補助線
81 左側アイシャドウ
82 右側アイシャドウ
S10〜S36 分析ステップ
S40〜S62 分析ステップ

Claims (15)

  1. 身体情報分析装置に応用されるアイシャドウの分析方法であって、
    a)前記身体情報分析装置のイメージ取得モジュールが外部イメージを取得することと、
    b)前記身体情報分析装置の処理ユニットが、外部イメージにおいて人の顔を認識したとき、前記人の顔の各部位を位置決めすることと、
    c)ステップb)の後、前記人の顔から左眉、左目、右眉、および右目の位置を取得することと、
    d)前記処理ユニットが前記左眉および前記左目の位置から前記人の顔の左側アイシャドウの位置を判断することと、
    e)前記処理ユニットが前記右眉および前記右目の位置から前記人の顔の右側アイシャドウの位置を判断することと、
    f)前記処理ユニットにより前記左側アイシャドウおよび前記右側アイシャドウの平均色数値を分析することと、
    g)前記平均色数値をプリセット色数値と対比し、または前記左側アイシャドウおよび前記右側アイシャドウの前記平均色数値を互いに対比して対比結果を生成することと、
    h)前記身体情報分析装置の表示モジュールにより前記対比結果を表示することと、を含む方法。
  2. ステップd)は、
    d1)前記人の顔から前記左目の眼尻位置を取得するステップと、
    d2)前記人の顔から前記左眉の眉尻位置を取得するステップと、
    d3)前記眼尻位置および前記眉尻位置を繋げることで第1補助線を生成するステップと、
    d4)前記人の顔から前記左目の上瞼輪郭を取得することで、一端が第1補助線に繋がる第2補助線とするステップと、
    d5)前記第2補助線を上方向に移動させることで、両端が前記第1補助線および前記第2補助線にそれぞれ繋がる第3補助線を生成するステップと、
    d6)前記第1補助線、前記第2補助線、および前記第3補助線により前記左側アイシャドウの位置を構成するステップと、を含む請求項1に記載のアイシャドウの分析方法。
  3. ステップd5)は前記第2補助線を上方向に第1補助線の中間点位置まで移動させる請求項2に記載のアイシャドウの分析方法。
  4. ステップe)は、
    e1)前記人の顔から前記右目の眼尻位置を取得するステップと、
    e2)前記人の顔から前記右眉の眉尻位置を取得するステップと、
    e3)前記眼尻位置および前記眉尻位置を繋げることで第4補助線を生成するステップと、
    e4)前記人の顔から前記右目の上瞼輪郭を取得することで、一端が第4補助線に繋がる第5補助線とするステップと、
    e5)前記第5補助線を上方向に移動させることで、両端が前記第4補助線および前記第5補助線にそれぞれ繋がる第6補助線を生成するステップと、
    e6)前記第4補助線、前記第5補助線、および前記第6補助線により前記右側アイシャドウの位置を構成するステップと、を含む請求項2に記載のアイシャドウの分析方法。
  5. ステップe5)は前記第5補助線を上方向に第4補助線の中間点位置まで移動させる請求項4に記載のアイシャドウの分析方法。
  6. i1)前記身体情報分析装置をオフにするか否かを判断するステップと、
    i2)身体情報分析装置をオフにするまでステップb)からステップh)までを繰り返して実行するステップと、をさらに含む請求項4に記載のアイシャドウの分析方法。
  7. j1)前記対比結果が化粧完了基準に適合しているか否かを判断するステップと、
    j2)前記対比結果が前記化粧完了基準に適合するまでステップb)からステップh)までを繰り返して実行するステップと、をさらに含む請求項4に記載のアイシャドウの分析方法。
  8. k)前記処理ユニットにより前記左側アイシャドウおよび前記右側アイシャドウの標準偏差(Standard Deviation,SD)を分析するステップと、
    l)前記標準偏差を前記プリセット標準偏差と対比し、または前記左側アイシャドウおよび前記右側アイシャドウの前記標準偏差を互いに対比して第2対比結果を生成するステップと、
    m)前記表示モジュールに前記第2対比結果を表示するステップと、をさらに含む請求項4に記載のアイシャドウの分析方法。
  9. ステップb)は、Dlib Face Landmarkシステムを介して前記人の顔の各部位を位置決めする請求項4に記載のアイシャドウの分析方法。
  10. 身体情報分析装置であって、 外部イメージを取得するためのイメージ取得モジュールと、
    表示モジュールと、
    前記イメージ取得モジュールおよび前記表示モジュールに電気的に接続され、前記外部イメージを認識し、外部イメージにおいて人の顔を認識したとき、前記人の顔の各部位を位置決めすることで前記人の顔から左眉、左目、右眉、および右目の位置を取得する処理ユニットと、を含み、
    前記処理ユニットは前記左眉および前記左目の位置に基づき前記人の顔の左側アイシャドウの位置を判断し、前記右眉および前記右目の位置に基づき前記人の顔の右側アイシャドウの位置を判断し、かつ前記左側アイシャドウおよび前記右側アイシャドウの平均色数値を分析し、前記平均色数値をプリセット色数値と対比し、または前記左側アイシャドウおよび前記右側アイシャドウの前記平均色数値を互いに対比して対比結果を生成し、
    前記表示モジュールは前記対比結果を表示する、装置。
  11. 前記処理ユニットは、
    前記外部イメージを認識することで前記外部イメージに前記人の顔が存在するか否かを判断する顔部認識モジュールと、
    前記人の顔を位置決めすることで前記左眉、前記左目、前記右眉、および前記右目の位置を取得する位置決めモジュールと、
    前記左側アイシャドウの位置および前記右側アイシャドウの位置を判断するための判断モジュールと、
    アルゴリズムにより前記左側アイシャドウの前記平均色数値および前記右側アイシャドウの前記平均色数値を分析する分析モジュールと、
    前記平均色数値を前記プリセット色数値と対比し、または前記左側アイシャドウおよび前記右側アイシャドウの前記平均数値を互いに対比して前記対比結果を生成する対比モジュールと、を含む請求項10に記載の身体情報分析装置。
  12. 前記処理ユニットは、前記判断モジュールが、
    前記左目の眼尻位置および前記左眉の眉尻位置を取得し、かつ前記眼尻位置および前記眉尻位置を繋げることで第1補助線を生成する動作と、
    前記左目の上瞼輪郭を取得して、一端が前記第1補助線に繋がる第2補助線とする動作と、
    前記第2補助線を上方向に移動させることで、両端が前記第1補助線および前記第2補助線にそれぞれ繋がる第3補助線を生成する動作と、
    前記第1補助線、前記第2補助線、および前記第3補助線により前記左側アイシャドウの位置を構成する動作と、を実行するよう制御する請求項11に記載の身体情報分析装置。
  13. 前記処理ユニットは、前記判断モジュールが、
    前記右目の眼尻位置および前記右眉の眉尻位置を取得し、かつ前記眼尻位置および前記眉尻位置を繋げることで第4補助線を生成する動作と、
    前記右目の上瞼輪郭を取得して、一端が前記第4補助線に繋がる第5補助線とする動作と、
    前記第5補助線を上方向に移動させることで、両端が前記第4補助線および前記第5補助線にそれぞれ繋がる第6補助線を生成する動作と、
    前記第4補助線、前記第5補助線、および前記第6補助線により前記右側アイシャドウの位置を構成する動作と、を実行するよう制御する請求項11に記載の身体情報分析装置。
  14. 前記処理ユニットはさらに、前記分析モジュールが前記左側アイシャドウおよび前記右側アイシャドウの標準偏差(Standard Deviation,SD)を分析するよう制御し、かつ前記標準偏差をプリセット標準偏差と対比し、または前記左側アイシャドウおよび前記右側アイシャドウの前記標準偏差を互いに対比して第2対比結果を生成し、かつ前記表示モジュールが前記第2対比結果を表示するよう制御する請求項11に記載の身体情報分析装置。
  15. 前記位置決めモジュールはDlib Face Landmarkシステムを介して前記人の顔の各部位を位置決めする請求項11に記載の身体情報分析装置。
JP2018006997A 2017-08-24 2018-01-19 身体情報分析装置およびそのアイシャドウの分析方法 Expired - Fee Related JP6568606B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN201710735801.6 2017-08-24
CN201710735801.6A CN109427075A (zh) 2017-08-24 2017-08-24 身体信息分析装置及其眼影分析方法

Publications (2)

Publication Number Publication Date
JP2019037741A true JP2019037741A (ja) 2019-03-14
JP6568606B2 JP6568606B2 (ja) 2019-08-28

Family

ID=61054169

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018006997A Expired - Fee Related JP6568606B2 (ja) 2017-08-24 2018-01-19 身体情報分析装置およびそのアイシャドウの分析方法

Country Status (5)

Country Link
US (1) US10528798B2 (ja)
EP (1) EP3447680A1 (ja)
JP (1) JP6568606B2 (ja)
KR (1) KR102045214B1 (ja)
CN (1) CN109427075A (ja)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10846838B2 (en) * 2016-11-25 2020-11-24 Nec Corporation Image generation device, image generation method, and storage medium storing program
CN109583263A (zh) * 2017-09-28 2019-04-05 丽宝大数据股份有限公司 结合扩增实境的身体信息分析装置及其眉型预览方法
CN109165571B (zh) * 2018-08-03 2020-04-24 北京字节跳动网络技术有限公司 用于***图像的方法和装置
US20210307492A1 (en) * 2020-04-01 2021-10-07 Magicom Inc. Smart-mirror display system
CN111583102B (zh) * 2020-05-14 2023-05-16 抖音视界有限公司 人脸图像处理方法、装置、电子设备及计算机存储介质
US11138734B1 (en) * 2021-02-19 2021-10-05 Vr Media Technology, Inc. Hyperspectral facial analysis system and method for personalized health scoring
CN113837018B (zh) * 2021-08-31 2024-06-14 北京新氧科技有限公司 一种化妆进度检测方法、装置、设备及存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07506504A (ja) * 1992-05-06 1995-07-20 パルフュム クリスチャン ディオール 顔,特に,目もとのメークアップ方法と,それを行う装置
JP2005216131A (ja) * 2004-01-30 2005-08-11 Digital Fashion Ltd 化粧シミュレーション装置、化粧シミュレーション方法、化粧シミュレーションプログラム
JP2010211308A (ja) * 2009-03-06 2010-09-24 Fujifilm Corp メイクアップアドバイス装置、メイクアップアドバイス方法及びプログラム
JP2012000300A (ja) * 2010-06-18 2012-01-05 Shiseido Co Ltd 目元スケール
JP2013101633A (ja) * 2006-01-17 2013-05-23 Shiseido Co Ltd メイクアップシミュレーションシステム
JP2016129027A (ja) * 2016-01-22 2016-07-14 パナソニックIpマネジメント株式会社 メイクアップ支援装置およびメイクアップ支援方法

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5680481A (en) * 1992-05-26 1997-10-21 Ricoh Corporation Facial feature extraction method and apparatus for a neural network acoustic and visual speech recognition system
JP3459350B2 (ja) 1998-02-27 2003-10-20 カネボウ株式会社 販売促進用ツール
JP4188487B2 (ja) * 1999-03-29 2008-11-26 株式会社資生堂 目元メーキャップシミュレーションシステム
JP2001216386A (ja) * 2000-02-02 2001-08-10 Nippon Telegr & Teleph Corp <Ntt> 化粧支援装置
US20070186946A1 (en) * 2006-02-16 2007-08-16 Castleberry Aric C System and method for cosmetic application
JP4309926B2 (ja) * 2007-03-13 2009-08-05 アイシン精機株式会社 顔特徴点検出装置、顔特徴点検出方法及びプログラム
JP2009064423A (ja) 2007-08-10 2009-03-26 Shiseido Co Ltd メイクアップシミュレーションシステム、メイクアップシミュレーション装置、メイクアップシミュレーション方法およびメイクアップシミュレーションプログラム
JP4760999B1 (ja) 2010-10-29 2011-08-31 オムロン株式会社 画像処理装置、画像処理方法、および制御プログラム
US8908904B2 (en) * 2011-12-28 2014-12-09 Samsung Electrônica da Amazônia Ltda. Method and system for make-up simulation on portable devices having digital cameras
JP6396890B2 (ja) * 2013-04-08 2018-09-26 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America メイクアップ塗材が塗布された状態を仮想的に再現することができる画像処理装置、画像処理方法、プログラム
EP3039990B1 (en) * 2013-08-30 2019-07-24 Panasonic Intellectual Property Management Co., Ltd. Makeup assistance device, makeup assistance system, makeup assistance method, and makeup assistance program
WO2016054164A1 (en) * 2014-09-30 2016-04-07 Tcms Transparent Beauty, Llc Precise application of cosmetic looks from over a network environment
TWI573100B (zh) * 2016-06-02 2017-03-01 Zong Jing Investment Inc 自動臉部化妝方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07506504A (ja) * 1992-05-06 1995-07-20 パルフュム クリスチャン ディオール 顔,特に,目もとのメークアップ方法と,それを行う装置
JP2005216131A (ja) * 2004-01-30 2005-08-11 Digital Fashion Ltd 化粧シミュレーション装置、化粧シミュレーション方法、化粧シミュレーションプログラム
JP2013101633A (ja) * 2006-01-17 2013-05-23 Shiseido Co Ltd メイクアップシミュレーションシステム
JP2010211308A (ja) * 2009-03-06 2010-09-24 Fujifilm Corp メイクアップアドバイス装置、メイクアップアドバイス方法及びプログラム
JP2012000300A (ja) * 2010-06-18 2012-01-05 Shiseido Co Ltd 目元スケール
JP2016129027A (ja) * 2016-01-22 2016-07-14 パナソニックIpマネジメント株式会社 メイクアップ支援装置およびメイクアップ支援方法

Also Published As

Publication number Publication date
KR102045214B1 (ko) 2019-11-15
CN109427075A (zh) 2019-03-05
JP6568606B2 (ja) 2019-08-28
US10528798B2 (en) 2020-01-07
KR20190022275A (ko) 2019-03-06
EP3447680A1 (en) 2019-02-27
US20190065830A1 (en) 2019-02-28

Similar Documents

Publication Publication Date Title
JP6568606B2 (ja) 身体情報分析装置およびそのアイシャドウの分析方法
JP6547013B2 (ja) 生体情報解析装置及びその頬紅解析方法
KR102065480B1 (ko) 신체 정보 분석 장치 및 입술 화장 분석 방법
JP6761824B2 (ja) 身体情報分析装置およびその眉型比較補助方法
US10528796B2 (en) Body information analysis apparatus with augmented reality and eyebrow shape preview method thereof
JP6799525B2 (ja) 生体情報解析装置及び手肌解析方法
JP6498802B1 (ja) 生体情報解析装置及びその顔型のシミュレーション方法
KR102045217B1 (ko) 인체 정보 분석장치 및 메이크업 파운데이션 분석 방법
KR102101337B1 (ko) 볼터치 구역의 표시가 가능한 신체 정보 분석 장치
US10824850B2 (en) Body information analysis apparatus capable of indicating shading-areas

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20180119

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20181218

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190313

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190611

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190613

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20190716

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20190802

R150 Certificate of patent or registration of utility model

Ref document number: 6568606

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees