JP6750504B2 - 情報処理装置、情報処理方法、およびプログラム - Google Patents
情報処理装置、情報処理方法、およびプログラム Download PDFInfo
- Publication number
- JP6750504B2 JP6750504B2 JP2016558980A JP2016558980A JP6750504B2 JP 6750504 B2 JP6750504 B2 JP 6750504B2 JP 2016558980 A JP2016558980 A JP 2016558980A JP 2016558980 A JP2016558980 A JP 2016558980A JP 6750504 B2 JP6750504 B2 JP 6750504B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- skin
- face
- user
- information processing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 230000010365 information processing Effects 0.000 title claims description 133
- 238000003672 processing method Methods 0.000 title claims description 5
- 238000005259 measurement Methods 0.000 claims description 102
- 238000004458 analytical method Methods 0.000 claims description 54
- 238000000034 method Methods 0.000 claims description 54
- 230000008569 process Effects 0.000 claims description 42
- 238000012545 processing Methods 0.000 claims description 32
- 230000008859 change Effects 0.000 claims description 20
- 230000001815 facial effect Effects 0.000 claims description 11
- 238000001514 detection method Methods 0.000 claims description 6
- 238000003384 imaging method Methods 0.000 claims description 4
- 230000004044 response Effects 0.000 claims description 2
- 238000010586 diagram Methods 0.000 description 34
- 230000006870 function Effects 0.000 description 21
- 239000011148 porous material Substances 0.000 description 16
- 238000004891 communication Methods 0.000 description 15
- 210000001061 forehead Anatomy 0.000 description 13
- 238000005516 engineering process Methods 0.000 description 11
- 238000011156 evaluation Methods 0.000 description 5
- 230000005057 finger movement Effects 0.000 description 4
- 230000017531 blood circulation Effects 0.000 description 3
- 239000000470 constituent Substances 0.000 description 3
- 230000007423 decrease Effects 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 230000006872 improvement Effects 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- XUMBMVFBXHLACL-UHFFFAOYSA-N Melanin Chemical compound O=C1C(=O)C(C2=CNC3=C(C(C(=O)C4=C32)=O)C)=C2C4=CNC2=C1C XUMBMVFBXHLACL-UHFFFAOYSA-N 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 2
- 230000008921 facial expression Effects 0.000 description 2
- 210000004209 hair Anatomy 0.000 description 2
- 230000036564 melanin content Effects 0.000 description 2
- 239000000203 mixture Substances 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 238000004088 simulation Methods 0.000 description 2
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 2
- 230000003796 beauty Effects 0.000 description 1
- FFBHFFJDDLITSX-UHFFFAOYSA-N benzyl N-[2-hydroxy-4-(3-oxomorpholin-4-yl)phenyl]carbamate Chemical compound OC1=C(NC(=O)OCC2=CC=CC=C2)C=CC(=C1)N1CCOCC1=O FFBHFFJDDLITSX-UHFFFAOYSA-N 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 230000036760 body temperature Effects 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 239000012141 concentrate Substances 0.000 description 1
- 230000002354 daily effect Effects 0.000 description 1
- 230000003203 everyday effect Effects 0.000 description 1
- 210000004709 eyebrow Anatomy 0.000 description 1
- 210000000887 face Anatomy 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000001151 other effect Effects 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
- 230000002194 synthesizing effect Effects 0.000 description 1
- 230000037303 wrinkles Effects 0.000 description 1
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0033—Features or image-related aspects of imaging apparatus classified in A61B5/00, e.g. for MRI, optical tomography or impedance tomography apparatus; arrangements of imaging apparatus in a room
- A61B5/004—Features or image-related aspects of imaging apparatus classified in A61B5/00, e.g. for MRI, optical tomography or impedance tomography apparatus; arrangements of imaging apparatus in a room adapted for image acquisition of a particular organ or body part
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/44—Detecting, measuring or recording for evaluating the integumentary system, e.g. skin, hair or nails
- A61B5/441—Skin evaluation, e.g. for skin disorder diagnosis
-
- A—HUMAN NECESSITIES
- A45—HAND OR TRAVELLING ARTICLES
- A45D—HAIRDRESSING OR SHAVING EQUIPMENT; EQUIPMENT FOR COSMETICS OR COSMETIC TREATMENTS, e.g. FOR MANICURING OR PEDICURING
- A45D44/00—Other cosmetic or toiletry articles, e.g. for hairdressers' rooms
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
- A61B5/0077—Devices for viewing the surface of the body, e.g. camera, magnifying lens
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
- A61B5/107—Measuring physical dimensions, e.g. size of the entire body or parts thereof
- A61B5/1071—Measuring physical dimensions, e.g. size of the entire body or parts thereof measuring angles, e.g. using goniometers
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
- A61B5/107—Measuring physical dimensions, e.g. size of the entire body or parts thereof
- A61B5/1072—Measuring physical dimensions, e.g. size of the entire body or parts thereof measuring distances on the body, e.g. measuring length, height or thickness
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
- A61B5/107—Measuring physical dimensions, e.g. size of the entire body or parts thereof
- A61B5/1079—Measuring physical dimensions, e.g. size of the entire body or parts thereof using optical or photographic means
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/68—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
- A61B5/6801—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient specially adapted to be attached to or worn on the body surface
- A61B5/684—Indicating the position of the sensor on the body
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/74—Details of notification to user or communication with user or patient ; user input means
- A61B5/742—Details of notification to user or communication with user or patient ; user input means using visual displays
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/74—Details of notification to user or communication with user or patient ; user input means
- A61B5/742—Details of notification to user or communication with user or patient ; user input means using visual displays
- A61B5/7425—Displaying combinations of multiple images regardless of image source, e.g. displaying a reference anatomical image with a live image
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/74—Details of notification to user or communication with user or patient ; user input means
- A61B5/7475—User input or interface means, e.g. keyboard, pointing device, joystick
- A61B5/748—Selection of a region of interest, e.g. using a graphics tablet
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/60—Type of objects
- G06V20/64—Three-dimensional objects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/161—Detection; Localisation; Normalisation
- G06V40/162—Detection; Localisation; Normalisation using pixel segmentation or colour matching
-
- A—HUMAN NECESSITIES
- A45—HAND OR TRAVELLING ARTICLES
- A45D—HAIRDRESSING OR SHAVING EQUIPMENT; EQUIPMENT FOR COSMETICS OR COSMETIC TREATMENTS, e.g. FOR MANICURING OR PEDICURING
- A45D44/00—Other cosmetic or toiletry articles, e.g. for hairdressers' rooms
- A45D2044/007—Devices for determining the condition of hair or skin or for selecting the appropriate cosmetic or hair treatment
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B2576/00—Medical imaging apparatus involving image processing or analysis
- A61B2576/02—Medical imaging apparatus involving image processing or analysis specially adapted for a particular organ or body part
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/68—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
- A61B5/6887—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient mounted on external non-worn devices, e.g. non-medical devices
- A61B5/6898—Portable consumer electronic devices, e.g. music players, telephones, tablet computers
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/168—Feature extraction; Face representation
- G06V40/171—Local features and components; Facial parts ; Occluding parts, e.g. glasses; Geometrical relationships
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H30/00—ICT specially adapted for the handling or processing of medical images
- G16H30/40—ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Health & Medical Sciences (AREA)
- Surgery (AREA)
- Veterinary Medicine (AREA)
- Biophysics (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Medical Informatics (AREA)
- Molecular Biology (AREA)
- Pathology (AREA)
- Animal Behavior & Ethology (AREA)
- Public Health (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Radiology & Medical Imaging (AREA)
- Oral & Maxillofacial Surgery (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Dentistry (AREA)
- Dermatology (AREA)
- Human Computer Interaction (AREA)
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
- Measuring And Recording Apparatus For Diagnosis (AREA)
Description
前記表示制御部には、前記定点観測ポイントの位置を表す画像を含む、前記定点観測ポイントの案内画面を、前記定点観測ポイント毎に表示させることができる。
1.肌状態測定システムの構成
2.各機器の構成
3.情報処理装置の動作
4.肌状態情報を用いた分類の例
5.変形例
図1は、本技術を適用した肌状態測定システムの構成例を示す図である。
・肌測定器の構成
図4は、肌測定器2の構成例を示すブロック図である。
図5は、情報処理装置1のハードウェア構成例を示すブロック図である。上述した構成と同じ構成には同じ符号を付してある。重複する説明については適宜省略する。
ここで、以上のような構成を有する情報処理装置1の処理について説明する。
はじめに、図7のフローチャートを参照して、初期設定処理について説明する。
次に、図11のフローチャートを参照して、他の初期設定処理について説明する。
次に、図15のフローチャートを参照して、測定処理について説明する。
次に、図26のフローチャートを参照して、定点観測結果表示処理について説明する。
定点観測ポイント毎の肌状態情報などを用いることにより、情報処理装置1は、各種の機能を実現することができる。
顔画像の比較機能は、ユーザにより指定された条件に合う肌の状態が測定されたときの顔画像を比較可能な形で表示する機能である。
顔画像の検索機能は、ユーザにより指定された条件に合う肌の状態が測定されたときの顔画像を検索する機能である。
改善方法の提示機能は、肌の状態を改善させるエクササイズのやり方をユーザに提示する機能である。提示したエクササイズをユーザが行っている場合、情報処理装置1は、ユーザが行っているエクササイズが正しいかどうかの評価を行う。
図36のフローチャートを参照して、検索処理について説明する。
人物の検索機能は、ユーザと顔の特徴点の位置が似ている人物を検索する機能である。情報処理装置1が美容室などに置かれている場合、複数のユーザが情報処理装置1を使って肌の状態の定点観測を行うことになる。情報処理装置1には、複数の人物の顔の特徴点の位置の情報を含む設定情報が蓄積される。人物の検索は、情報処理装置1に蓄積されている設定情報を用いて行われる。
髪型のシミュレーション機能は、カメラ12によって撮影した顔画像の髪の部分に、あらかじめ用意された様々な髪型の画像を合成して表示する機能である。
顔画像を撮影するカメラが情報処理装置1に設けられるものとしたが、情報処理装置1とは別体のカメラにより顔画像が撮影されるようにしてもよい。
上述した一連の処理は、ハードウェアにより実行することもできるし、ソフトウェアにより実行することもできる。一連の処理をソフトウェアにより実行する場合には、そのソフトウェアを構成するプログラムが、専用のハードウェアに組み込まれているコンピュータ、または汎用のパーソナルコンピュータなどに、プログラム記録媒体からインストールされる。
本技術は、以下のような構成をとることもできる。
肌の状態の測定者であるユーザの所定の特徴点と、肌の状態の測定部分とが写る画像を取得する取得部と、
前記画像を解析し、前記特徴点の位置を認識する認識部と、
前記認識部により認識された前記特徴点の位置を基準として、前記画像上の所定の位置に前記測定部分を表す情報を表示させる表示制御部と
を備える情報処理装置。
前記画像を撮影する撮影部をさらに備え、
前記取得部は、前記撮影部により撮影された前記画像を取得する
前記(1)に記載の情報処理装置。
前記画像と前記測定部分を表す情報を表示する表示部をさらに備える
前記(1)または(2)に記載の情報処理装置。
前記測定部分の設定時に撮影された前記画像を解析することによって前記認識部により認識された前記特徴点の位置を基準として、前記所定の位置に前記測定部分を設定する設定部をさらに備える
前記(1)乃至(3)のいずれかに記載の情報処理装置。
前記測定部分の設定時に撮影された前記画像上で前記ユーザにより指定された位置に前記測定部分を設定する設定部をさらに備える
前記(1)乃至(3)のいずれかに記載の情報処理装置。
前記測定部分の設定時の前記情報処理装置の角度を検出する検出部をさらに備える
前記(4)または(5)に記載の情報処理装置。
前記表示制御部は、前記情報処理装置の角度を、前記検出部により検出された角度と同じ角度に調整することを案内する情報を表示する
前記(6)に記載の情報処理装置。
前記表示制御部は、前記画像上の、前記測定部分の設定時に撮影された前記画像を解析することによって前記認識部により認識された前記特徴点の位置と同じ位置に、前記特徴点を表す情報を表示させる
前記(1)乃至(7)のいずれかに記載の情報処理装置。
前記表示制御部は、前記特徴点の位置が変化することに応じて、前記測定部分を表す情報の表示位置を変化させる
前記(1)乃至(8)のいずれかに記載の情報処理装置。
前記取得部は、前記測定部分の肌を撮影して得られた肌画像を取得し、
前記表示制御部は、前記肌画像と、前記ユーザが写る前記画像とを同時に表示させる
前記(1)乃至(9)のいずれかに記載の情報処理装置。
前記肌画像を解析し、前記測定部分の肌の状態を測定する解析部と、
前記解析部による測定の結果を表す情報を記録する記録部と
をさらに備える前記(10)に記載の情報処理装置。
前記表示制御部は、前記記録部に記録された複数回の測定の結果を表す情報に基づいて、前記測定部分の肌の状態の変化を表す情報を表示させる
前記(11)に記載の情報処理装置。
肌の状態の測定者であるユーザの所定の特徴点と、肌の状態の測定部分とが写る画像を取得し、
前記画像を解析し、前記特徴点の位置を認識し、
認識した前記特徴点の位置を基準として、前記画像上の所定の位置に前記測定部分を表す情報を表示させる
ステップを含む情報処理方法。
肌の状態の測定者であるユーザの所定の特徴点と、肌の状態の測定部分とが写る画像を取得し、
前記画像を解析し、前記特徴点の位置を認識し、
認識した前記特徴点の位置を基準として、前記画像上の所定の位置に前記測定部分を表す情報を表示させる
ステップを含む処理をコンピュータに実行させるプログラム。
Claims (13)
- 肌の状態の測定者であるユーザの顔が写る画像を取得する取得部と、
前記画像を解析し、顔の特徴点の位置を認識する認識部と、
前記特徴点の位置を基準として、顔の所定の位置に定点観測ポイントを設定する設定部と、
肌の状態の測定時、肌の状態の測定を行う前記ユーザの顔が写る前記画像を解析することによって認識された前記特徴点の位置を基準として前記定点観測ポイントの位置を特定し、前記定点観測ポイントの位置を表す画像を前記ユーザの顔に重ねて表示させる表示制御部と
を備え、
前記取得部は、前記定点観測ポイントの肌を撮影して得られた肌画像を取得し、
前記表示制御部は、前記肌画像と、肌の状態の測定を行っている前記ユーザの顔が写る前記画像とを同時に表示させる
情報処理装置。 - 前記表示制御部は、前記定点観測ポイントの位置を表す画像を含む、前記定点観測ポイントの案内画面を、前記定点観測ポイント毎に表示させる
請求項1に記載の情報処理装置。 - 前記画像を撮影する撮影部をさらに備え、
前記取得部は、前記撮影部により撮影された前記画像を取得する
請求項1に記載の情報処理装置。 - 前記案内画面を表示する表示部をさらに備える
請求項2に記載の情報処理装置。 - 前記設定部は、前記定点観測ポイントの設定時に撮影された前記画像上で前記ユーザにより指定された位置に前記定点観測ポイントを設定する
請求項1に記載の情報処理装置。 - 前記定点観測ポイントの設定時の前記情報処理装置の角度を検出する検出部をさらに備える
請求項1に記載の情報処理装置。 - 前記表示制御部は、肌の状態の測定時、前記情報処理装置の角度を、前記検出部により検出された角度と同じ角度に調整することを案内する情報を表示する
請求項6に記載の情報処理装置。 - 前記表示制御部は、肌の状態の測定時、前記定点観測ポイントの設定時に認識された前記特徴点の位置に基づいて、前記特徴点の位置を表す情報を含む、顔の位置の調整画面を表示させる
請求項1に記載の情報処理装置。 - 前記表示制御部は、前記特徴点の位置が変化することに応じて、前記定点観測ポイントの位置を表す画像の表示位置を変化させる
請求項1に記載の情報処理装置。 - 前記肌画像を解析し、前記定点観測ポイントの肌の状態を測定する解析部と、
前記解析部による測定の結果を表す情報を記録する記録部と
をさらに備える請求項1に記載の情報処理装置。 - 前記表示制御部は、前記記録部に記録された複数回の測定の結果を表す情報に基づいて、前記定点観測ポイントの肌の状態の変化を表す情報を表示させる
請求項10に記載の情報処理装置。 - 肌の状態の測定者であるユーザの顔が写る画像を取得し、
前記画像を解析し、顔の特徴点の位置を認識し、
前記特徴点の位置を基準として、顔の所定の位置に定点観測ポイントを設定し、
肌の状態の測定時、肌の状態の測定を行う前記ユーザの顔が写る前記画像を解析することによって認識された前記特徴点の位置を基準として前記定点観測ポイントの位置を特定し、
前記定点観測ポイントの位置を表す画像を前記ユーザの顔に重ねて表示させ、
前記定点観測ポイントの肌を撮影して得られた肌画像を取得し、
前記肌画像と、肌の状態の測定を行っている前記ユーザの顔が写る前記画像とを同時に表示させる
ステップを含む情報処理方法。 - 肌の状態の測定者であるユーザの顔が写る画像を取得し、
前記画像を解析し、顔の特徴点の位置を認識し、
前記特徴点の位置を基準として、顔の所定の位置に定点観測ポイントを設定し、
肌の状態の測定時、肌の状態の測定を行う前記ユーザの顔が写る前記画像を解析することによって認識された前記特徴点の位置を基準として前記定点観測ポイントの位置を特定し、
前記定点観測ポイントの位置を表す画像を前記ユーザの顔に重ねて表示させ、
前記定点観測ポイントの肌を撮影して得られた肌画像を取得し、
前記肌画像と、肌の状態の測定を行っている前記ユーザの顔が写る前記画像とを同時に表示させる
ステップを含む処理をコンピュータに実行させるプログラム。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014231798 | 2014-11-14 | ||
JP2014231798 | 2014-11-14 | ||
PCT/JP2015/080666 WO2016076140A1 (ja) | 2014-11-14 | 2015-10-30 | 情報処理装置、情報処理方法、およびプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2016076140A1 JPWO2016076140A1 (ja) | 2017-08-24 |
JP6750504B2 true JP6750504B2 (ja) | 2020-09-02 |
Family
ID=55954232
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016558980A Expired - Fee Related JP6750504B2 (ja) | 2014-11-14 | 2015-10-30 | 情報処理装置、情報処理方法、およびプログラム |
Country Status (7)
Country | Link |
---|---|
US (1) | US10617301B2 (ja) |
EP (1) | EP3219250A4 (ja) |
JP (1) | JP6750504B2 (ja) |
KR (1) | KR20170086024A (ja) |
CN (1) | CN107106018B (ja) |
TW (1) | TWI669103B (ja) |
WO (1) | WO2016076140A1 (ja) |
Families Citing this family (20)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
TWI701018B (zh) * | 2015-01-29 | 2020-08-11 | 日商新力股份有限公司 | 資訊處理裝置、資訊處理方法、及程式 |
CN106302330B (zh) * | 2015-05-21 | 2021-01-05 | 腾讯科技(深圳)有限公司 | 身份验证方法、装置和*** |
JP7040889B2 (ja) * | 2016-06-02 | 2022-03-23 | ポーラ化成工業株式会社 | 肌状態の鑑別のための画像解析方法 |
CN107692965A (zh) * | 2016-08-09 | 2018-02-16 | 上海图檬信息科技有限公司 | 基于手机相机的引导和定位皮肤检测设备到指定位置的方法 |
JP6993087B2 (ja) * | 2017-01-17 | 2022-02-04 | 花王株式会社 | 皮膚の歪み測定方法 |
CN109255280A (zh) | 2017-07-14 | 2019-01-22 | 丽宝大数据股份有限公司 | 皮肤状态检测方法与电子装置 |
JP7139638B2 (ja) * | 2018-03-22 | 2022-09-21 | カシオ計算機株式会社 | 報知装置、報知方法及び報知プログラム |
CN110522409A (zh) * | 2018-05-24 | 2019-12-03 | 浙江清华柔性电子技术研究院 | 可穿戴设备的固定位置的确定方法及固定装置 |
JP7081371B2 (ja) * | 2018-07-26 | 2022-06-07 | オムロンヘルスケア株式会社 | 生体データ測定システム及び情報処理装置 |
CN112912925A (zh) * | 2018-10-24 | 2021-06-04 | 株式会社资生堂 | 程序、信息处理装置、定量化方法以及信息处理*** |
JP7361264B2 (ja) * | 2018-11-05 | 2023-10-16 | パナソニックIpマネジメント株式会社 | 肌分析装置、肌分析方法、及び、コンピュータプログラム |
US11042726B2 (en) * | 2018-11-05 | 2021-06-22 | Panasonic Intellectual Property Management Co., Ltd. | Skin analyzer, skin analysis method, and non-transitory computer-readable recording medium |
JP2020081323A (ja) * | 2018-11-22 | 2020-06-04 | パナソニックIpマネジメント株式会社 | 肌分析装置、肌分析方法、及び、コンピュータプログラム |
WO2020116069A1 (ja) * | 2018-12-07 | 2020-06-11 | 株式会社 資生堂 | 情報処理装置、及び、プログラム |
CN110378304B (zh) * | 2019-07-24 | 2021-11-02 | 厦门美图之家科技有限公司 | 皮肤状态检测方法、装置、设备及存储介质 |
JP2022084299A (ja) * | 2020-11-26 | 2022-06-07 | マクセル株式会社 | 肌状態測定システム |
JP7522014B2 (ja) * | 2020-11-26 | 2024-07-24 | マクセル株式会社 | 肌状態測定システム |
JP2024077461A (ja) * | 2022-11-28 | 2024-06-07 | パナソニックIpマネジメント株式会社 | 歯周病検出システム、歯周病検出方法、及び歯周病検出プログラム |
WO2024116769A1 (ja) * | 2022-11-28 | 2024-06-06 | パナソニックIpマネジメント株式会社 | 歯周病検出システム、歯周病検出方法、及び歯周病検出プログラム |
WO2024135313A1 (ja) * | 2022-12-19 | 2024-06-27 | 株式会社資生堂 | 位置特定方法及び位置特定装置 |
Family Cites Families (22)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6571003B1 (en) | 1999-06-14 | 2003-05-27 | The Procter & Gamble Company | Skin imaging and analysis systems and methods |
JP4616318B2 (ja) | 2004-01-23 | 2011-01-19 | オリンパス株式会社 | カメラ |
JP2006081847A (ja) * | 2004-09-17 | 2006-03-30 | Inforward Inc | 肌解析ネットワークシステム |
WO2006043702A1 (ja) | 2004-10-22 | 2006-04-27 | Shiseido Company, Ltd. | 肌状態診断システムおよび美容のためのカウンセリングシステム |
JP4579046B2 (ja) * | 2005-04-28 | 2010-11-10 | 株式会社資生堂 | 肌状態解析方法、肌状態解析装置、肌状態解析プログラム、及び該プログラムが記録された記録媒体 |
JP5080060B2 (ja) * | 2005-11-08 | 2012-11-21 | 株式会社 資生堂 | 肌状態解析方法、肌状態解析装置、肌状態解析プログラム、及び該プログラムが記録された記録媒体 |
JP5116965B2 (ja) | 2005-11-08 | 2013-01-09 | 株式会社 資生堂 | 美容医療診断方法、美容医療診断システム、美容医療診断プログラム、及び該プログラムが記録された記録媒体 |
CN1961820B (zh) * | 2005-11-08 | 2011-03-16 | 株式会社资生堂 | 肌肤状态分析方法以及肌肤状态分析装置 |
JP5044237B2 (ja) | 2006-03-27 | 2012-10-10 | 富士フイルム株式会社 | 画像記録装置、画像記録方法、および画像記録プログラム |
WO2010082942A1 (en) * | 2008-02-01 | 2010-07-22 | Canfield Scientific, Incorporated | Automatic mask design and registration and feature detection for computer-aided skin analysis |
JP5227212B2 (ja) * | 2009-02-09 | 2013-07-03 | 株式会社 資生堂 | 肌色測定装置、肌色測定プログラム、メイクアップシミュレーション装置及びメイクアップシミュレーションプログラム |
US8373859B2 (en) * | 2009-03-27 | 2013-02-12 | Brightex Bio-Photonics Llc | Methods and systems for imaging skin using polarized lighting |
JP2011053587A (ja) | 2009-09-04 | 2011-03-17 | Sharp Corp | 画像処理装置 |
CN102479322A (zh) * | 2010-11-30 | 2012-05-30 | 财团法人资讯工业策进会 | 以具有角度的脸部影像分析脸部缺陷的***、装置及方法 |
JP5733570B2 (ja) | 2011-05-23 | 2015-06-10 | ソニー株式会社 | 画像処理装置、画像処理方法、プログラム、および、記録媒体 |
JP5733032B2 (ja) * | 2011-06-06 | 2015-06-10 | ソニー株式会社 | 画像処理装置および方法、画像処理システム、プログラム、および、記録媒体 |
JP2014061057A (ja) | 2012-09-20 | 2014-04-10 | Sony Corp | 情報処理装置、情報処理方法、プログラム、及び測定システム |
CN103885694A (zh) * | 2012-12-24 | 2014-06-25 | 鸿富锦精密工业(武汉)有限公司 | 显示屏幕自动调节***及方法 |
US9992409B2 (en) * | 2013-02-14 | 2018-06-05 | Panasonic Intellectual Property Management Co., Ltd. | Digital mirror apparatus |
JP2014180305A (ja) * | 2013-03-18 | 2014-09-29 | Funai Electric Co Ltd | 情報端末装置 |
JP5731724B1 (ja) * | 2013-10-23 | 2015-06-10 | 日立マクセル株式会社 | 表面状態測定分析情報管理システムおよび表面状態測定分析情報管理方法 |
FR3015741B1 (fr) * | 2013-12-23 | 2015-12-25 | Galderma Res & Dev | Procede d'analyse d'images du visage pour la detection d'un effet flush. |
-
2015
- 2015-09-11 TW TW104130189A patent/TWI669103B/zh not_active IP Right Cessation
- 2015-10-30 US US15/524,765 patent/US10617301B2/en not_active Expired - Fee Related
- 2015-10-30 JP JP2016558980A patent/JP6750504B2/ja not_active Expired - Fee Related
- 2015-10-30 CN CN201580058929.2A patent/CN107106018B/zh active Active
- 2015-10-30 KR KR1020177011026A patent/KR20170086024A/ko not_active Application Discontinuation
- 2015-10-30 EP EP15858339.3A patent/EP3219250A4/en active Pending
- 2015-10-30 WO PCT/JP2015/080666 patent/WO2016076140A1/ja active Application Filing
Also Published As
Publication number | Publication date |
---|---|
EP3219250A4 (en) | 2018-07-11 |
CN107106018B (zh) | 2021-10-22 |
JPWO2016076140A1 (ja) | 2017-08-24 |
EP3219250A1 (en) | 2017-09-20 |
US20170319065A1 (en) | 2017-11-09 |
WO2016076140A1 (ja) | 2016-05-19 |
TWI669103B (zh) | 2019-08-21 |
TW201617029A (zh) | 2016-05-16 |
KR20170086024A (ko) | 2017-07-25 |
CN107106018A (zh) | 2017-08-29 |
US10617301B2 (en) | 2020-04-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6750504B2 (ja) | 情報処理装置、情報処理方法、およびプログラム | |
US10979624B2 (en) | Methods and devices for establishing photographing template database and providing photographing recommendation information | |
CN114502061A (zh) | 使用深度学习的基于图像的自动皮肤诊断 | |
EP3047361B1 (en) | A method and device for displaying a graphical user interface | |
US11029830B2 (en) | Display control apparatus, display controlling method and display control program for providing guidance using a generated image | |
JP6011165B2 (ja) | ジェスチャ認識装置、その制御方法、表示機器、および制御プログラム | |
EP3026886B1 (en) | Information processing device and method for controlling information processing device | |
EP2945372A1 (en) | Electronic mirror device | |
EP2894851B1 (en) | Image processing device, image processing method, program, and computer-readable storage medium | |
US9268408B2 (en) | Operating area determination method and system | |
JP2013182062A (ja) | 表示装置および投影装置 | |
CN112749634A (zh) | 基于美容设备的控制方法、装置以及电子设备 | |
CN110297720B (zh) | 通知装置、通知方法及存储通知程序的介质 | |
WO2023053783A1 (ja) | 撮像誘導装置、撮像誘導方法及びプログラム | |
JP2007249366A (ja) | 髪型選択支援装置および方法 | |
WO2021245823A1 (ja) | 情報取得装置、情報取得方法及び記憶媒体 | |
Kwiatkowska et al. | Eye Tracking as a Method of Controlling Applications on Mobile Devices. | |
JP2021096537A (ja) | 生体情報取得装置、端末装置、生体情報取得方法、生体情報取得プログラム、及びコンピュータ読み取り可能な記録媒体 | |
JP2020057153A (ja) | 表示制御装置、表示制御方法及び表示制御プログラム | |
JP2019053706A (ja) | 身体情報分析装置および顔形診断方法 | |
Nishiyama et al. | Design of a cognitive user-support system for skin progress analysis using a smart phone | |
EP4002380A1 (en) | Assessing a region of interest of a subject | |
EP4300447A1 (en) | User representation using depths relative to multiple surface points | |
JP2017074398A (ja) | 情報処理装置、情報処理方法、プログラム、及び測定システム | |
CN117355875A (zh) | 基于计算机的身体部位分析方法和*** |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20181012 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20191107 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20191225 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200227 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200420 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200714 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200727 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6750504 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
LAPS | Cancellation because of no payment of annual fees |