CN111528807A - 基于多光谱和3d模型重建的人脸图像分析***及其方法 - Google Patents
基于多光谱和3d模型重建的人脸图像分析***及其方法 Download PDFInfo
- Publication number
- CN111528807A CN111528807A CN202010454151.XA CN202010454151A CN111528807A CN 111528807 A CN111528807 A CN 111528807A CN 202010454151 A CN202010454151 A CN 202010454151A CN 111528807 A CN111528807 A CN 111528807A
- Authority
- CN
- China
- Prior art keywords
- skin
- image information
- spectrum
- module
- definition camera
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000010191 image analysis Methods 0.000 title claims abstract description 14
- 238000000034 method Methods 0.000 title abstract description 8
- 238000001228 spectrum Methods 0.000 claims abstract description 69
- 238000004458 analytical method Methods 0.000 claims abstract description 41
- 238000001514 detection method Methods 0.000 claims abstract description 36
- 238000011156 evaluation Methods 0.000 claims abstract description 16
- 238000012545 processing Methods 0.000 claims description 22
- 230000001815 facial effect Effects 0.000 claims description 17
- 230000037303 wrinkles Effects 0.000 claims description 14
- 206010000496 acne Diseases 0.000 claims description 10
- 230000005540 biological transmission Effects 0.000 claims description 8
- 239000008280 blood Substances 0.000 claims description 7
- 210000004369 blood Anatomy 0.000 claims description 7
- 239000011148 porous material Substances 0.000 claims description 7
- 230000035945 sensitivity Effects 0.000 claims description 7
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 claims description 6
- 230000004888 barrier function Effects 0.000 claims description 5
- 238000003703 image analysis method Methods 0.000 claims description 4
- 230000010287 polarization Effects 0.000 claims description 4
- 208000002874 Acne Vulgaris Diseases 0.000 claims description 3
- 206010061218 Inflammation Diseases 0.000 claims description 2
- 230000004054 inflammatory process Effects 0.000 claims description 2
- 210000001508 eye Anatomy 0.000 claims 6
- 210000004709 eyebrow Anatomy 0.000 claims 3
- 230000003595 spectral effect Effects 0.000 claims 2
- 241000083547 Columella Species 0.000 claims 1
- 206010027145 Melanocytic naevus Diseases 0.000 claims 1
- 208000007256 Nevus Diseases 0.000 claims 1
- 208000009077 Pigmented Nevus Diseases 0.000 claims 1
- 210000000720 eyelash Anatomy 0.000 claims 1
- 210000000744 eyelid Anatomy 0.000 claims 1
- 210000000088 lip Anatomy 0.000 claims 1
- 210000000697 sensory organ Anatomy 0.000 claims 1
- -1 skin color Substances 0.000 claims 1
- 230000003796 beauty Effects 0.000 abstract description 3
- 210000003491 skin Anatomy 0.000 description 95
- 230000006870 function Effects 0.000 description 4
- 238000003384 imaging method Methods 0.000 description 3
- 230000001575 pathological effect Effects 0.000 description 3
- 230000036555 skin type Effects 0.000 description 3
- 235000002673 Dioscorea communis Nutrition 0.000 description 2
- 241000544230 Dioscorea communis Species 0.000 description 2
- 208000035753 Periorbital contusion Diseases 0.000 description 2
- 239000003086 colorant Substances 0.000 description 2
- 210000004207 dermis Anatomy 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 210000002615 epidermis Anatomy 0.000 description 2
- 206010024217 lentigo Diseases 0.000 description 2
- 239000011159 matrix material Substances 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 208000020154 Acnes Diseases 0.000 description 1
- PXHVJJICTQNCMI-UHFFFAOYSA-N Nickel Chemical compound [Ni] PXHVJJICTQNCMI-UHFFFAOYSA-N 0.000 description 1
- 241000186429 Propionibacterium Species 0.000 description 1
- 230000002776 aggregation Effects 0.000 description 1
- 238000004220 aggregation Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 230000008878 coupling Effects 0.000 description 1
- 238000010168 coupling process Methods 0.000 description 1
- 238000005859 coupling reaction Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 230000002500 effect on skin Effects 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 229910000652 nickel hydride Inorganic materials 0.000 description 1
- 230000007170 pathology Effects 0.000 description 1
- 238000000554 physical therapy Methods 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 230000036548 skin texture Effects 0.000 description 1
- 238000007920 subcutaneous administration Methods 0.000 description 1
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0033—Features or image-related aspects of imaging apparatus classified in A61B5/00, e.g. for MRI, optical tomography or impedance tomography apparatus; arrangements of imaging apparatus in a room
- A61B5/004—Features or image-related aspects of imaging apparatus classified in A61B5/00, e.g. for MRI, optical tomography or impedance tomography apparatus; arrangements of imaging apparatus in a room adapted for image acquisition of a particular organ or body part
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
- A61B5/0062—Arrangements for scanning
- A61B5/0064—Body surface scanning
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
- A61B5/0075—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence by spectroscopy, i.e. measuring spectra, e.g. Raman spectroscopy, infrared absorption spectroscopy
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
- A61B5/0077—Devices for viewing the surface of the body, e.g. camera, magnifying lens
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/44—Detecting, measuring or recording for evaluating the integumentary system, e.g. skin, hair or nails
- A61B5/441—Skin evaluation, e.g. for skin disorder diagnosis
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/44—Detecting, measuring or recording for evaluating the integumentary system, e.g. skin, hair or nails
- A61B5/441—Skin evaluation, e.g. for skin disorder diagnosis
- A61B5/442—Evaluating skin mechanical properties, e.g. elasticity, hardness, texture, wrinkle assessment
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/44—Detecting, measuring or recording for evaluating the integumentary system, e.g. skin, hair or nails
- A61B5/441—Skin evaluation, e.g. for skin disorder diagnosis
- A61B5/443—Evaluating skin constituents, e.g. elastin, melanin, water
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/44—Detecting, measuring or recording for evaluating the integumentary system, e.g. skin, hair or nails
- A61B5/441—Skin evaluation, e.g. for skin disorder diagnosis
- A61B5/444—Evaluating skin marks, e.g. mole, nevi, tumour, scar
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0012—Biomedical image inspection
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B2576/00—Medical imaging apparatus involving image processing or analysis
- A61B2576/02—Medical imaging apparatus involving image processing or analysis specially adapted for a particular organ or body part
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2200/00—Indexing scheme for image data processing or generation, in general
- G06T2200/08—Indexing scheme for image data processing or generation, in general involving all processing steps from image acquisition to 3D model generation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30088—Skin; Dermal
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2210/00—Indexing scheme for image generation or computer graphics
- G06T2210/41—Medical
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Animal Behavior & Ethology (AREA)
- Veterinary Medicine (AREA)
- Heart & Thoracic Surgery (AREA)
- Pathology (AREA)
- Molecular Biology (AREA)
- Surgery (AREA)
- Biophysics (AREA)
- Biomedical Technology (AREA)
- Public Health (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Dermatology (AREA)
- Radiology & Medical Imaging (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Spectroscopy & Molecular Physics (AREA)
- Computer Graphics (AREA)
- Geometry (AREA)
- Software Systems (AREA)
- Quality & Reliability (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Measuring And Recording Apparatus For Diagnosis (AREA)
Abstract
本发明公开了一种基于多光谱和3D模型重建的人脸图像分析***及其方法,该***包括五光谱皮肤检测仪、云端服务器和显示控制模块,通过所述五光谱皮肤检测仪获取五种光谱下的图像信息,并将所述图像信息发送给云端服务器,云端服务器对其进行三维图像重建、肤质检测以及评估分析,得到分析报告和三维图像信息;最后通过显示控制模块进行显示。本发明不仅能满足日常客户需求,还能为人脸面部皮肤的美容或者治疗提供可靠的数据支撑。
Description
技术领域
本发明涉肤质检测技术领域,具体涉及一种基于多光谱和3D模型重建的人脸图像分析***及其方法。
背景技术
目前,整个泛美行业在定位人群的实际需求中需要进行多种成像设备、光学设备来辅助医师进行病学判断。现有常见的设备大多为1个高清摄像头和3种特定波长的光谱信号,借助于光谱和摄像头获取人脸图像,然后运用图像处理的方式进行皮肤病学分析,并根据分析生成评估报告,该设备只能进行基础的皮肤分析无法实现深度的皮肤病学分析,也不能满足消费者对3D信息以及皮肤信息的要求。
发明内容
本发明的目的在于提供一种基于多光谱和3D模型重建的人脸图像分析***及其方法,该***采用五光谱皮肤检测获取五种光谱下的高清图像信息和深度图像信息,运用图像处理技术和3D图像重建技术皮肤病学分析和三维图像重建,以解决上述技术问题。
为实现上述目的,本发明提供了如下技术方案:
本发明提供了一种具有3D模型重建功能的五光谱皮肤检测仪,包括支架,所述支架上安装有C形架,C形架的中部安装有高清摄像头,以及以高清摄像头为中线左右对称安装有五光谱光源和深度摄像头,五光谱光源位于高清摄像头和深度摄像头中间;
所述支架上还安装有与高清摄像头、五光谱光源和深度摄像头连接的处理模块,用于控制五光谱光源发出不同的光、控制高清摄像头和深度摄像头获取的图像信息并将图像信息上传;它包括处理器、以及与处理器连接的存储模块和数据传输模块;
所述支架上还安装为高清摄像头、五光谱光源、深度摄像头和处理模块提供电源的电源模块。
进一步地,所述五光谱光源发出的光包括白光、正偏振光、负偏振光、伍氏光和UV光。
进一步地,所述支架上位于五光谱光源的背光面设有挡光板。
本发明提供的五光谱皮肤检测仪通过C形支架上矩阵布局1个高清摄像头、2个五光谱光源和2个深度摄像头,解决皮肤数据拍照不能与人脸3D模型获取同时进行的问题以及三维成像精度不足的问题。
本发明提供了一种基于多光谱和3D模型重建的人脸图像分析***包括:上述的五光谱皮肤检测仪,用于采集人脸皮肤图像信息,所述图像信息包括高清摄像头采集的图像信息以及深度摄像头采集的图像信息;
云端服务器,用于接收所述五光谱皮肤检测仪采集的人脸皮肤图像信息,并对其进行三维图像重建、肤质检测以及评估分析,得到分析报告和三维图像信息;所述云端服务器内包含用于对肤质进行检测的肤质检测模块、用于对肤质进行分析并能生成分析报告的分析报告生成模块和用于对采集的图像信息进行三维图像重建的3D图像重建模块;
控制显示模块,用于控制所述五光谱皮肤检测仪、以及用于显示所述五光谱皮肤检测采集的人脸皮肤图像信息和所述云端服务器得到的分析报告和三维图像信息。
进一步地,所述肤质检测模块主要用于检测肤质的毛孔、肤质、肤色、含水量、黑眼圈、皱纹、表皮斑痣、紧致度、敏感度、痘痘、痘印、黑头、红血丝、纹理、皱纹和棕色斑。
进一步地,毛孔、肤质、肤色、含水量、黑眼圈、皱纹、表皮斑痣、紧致度通过白光状态下高清摄像头获取的图像信息分析得到;敏感度、痘痘、痘印、黑头、红血丝通过正偏振光状态下高清摄像头获取的图像信息分析得到;纹理、皱纹通过负偏振光状态下高清摄像头获取的图像信息分析得到;棕色斑通过伍氏光状态下高清摄像头获取的图像信息得到。
进一步地,所述3D图像重建模块是用于根据深度摄像头获取的图像信息进行三维图像重建获得三维图像信息,并通过三维图像信息对人脸肤质进行检测。
进一步地,所述分析报告生成模块根据肤质检测模块和3D图像重建模块对皮肤检测结果进行分析并形成评估报告。
本发明通过所述五光谱分析仪采集的图像信息通过云端服务器对图像信息进行三维图像重建、肤质分析以及评估分析,为人脸面部皮肤的美容或者治疗提供可靠的数据支撑。
本发明还提供了基于多光谱和3D模型重建的人脸面部图像分析方法包括如下步骤:
(1)控制显示模块控制所述五光谱皮肤检测仪的五光谱光源发光并控制高清摄像头和深度摄像头拍照获取人脸皮肤图像信息,并将获取的人脸皮肤图像信息发送给云端服务器;
(2)云端服务器接收采集到的人脸皮肤图像信息,并利用多种图像处理算法对其进行三维图像重建、肤质检测及评估分析,并将三维图像和分析结果发送给控制显示模块显示;其中,多种图像处理算法包括肤质检测算法、肤质评估分析算法和三维图像重建算法。
本发明通过控制显示模块、五光谱检测仪和云端服务器之间相同协作,不仅实现对肤质检测和三维图像重建,还提高了处理速度,操作简单,方便,快捷。
附图说明
图1为本发明所述的五光谱皮肤检测仪结构示意图。
图2为本发明所述的人脸图像分析***示意图。
图中标记:11、支架;12、C形架;13、高清摄像头;14、五光谱光源;15、深度摄像头;16、挡光板;17、扬声器;18、底座;19、万向轮。
具体实施方式
实施例1
如图1所示,本实施例提供了一种具有3D模型重建功能的五光谱皮肤检测仪,该皮肤检测仪搭载了高清摄像头13、深度摄像头15以及五光谱光源14,比传统的皮肤检测仪的检测项目更多,可进行深度检测,还可通过获取的图像信息进行三维图像重建,满足客户需求。
所述五光谱皮肤检测仪包括支架11、底座18和挡光板16,所述支架11上安装有C形架12,C形架12的中部安装有高清摄像头13,以及以高清摄像头13为中线左右对称安装有五光谱光源14和深度摄像头15,五光谱光源14位于高清摄像头13和深度摄像头15中间;所述五光谱光源14可发射出5种光,分别是白光、正偏振光、负偏振光、伍氏光和UV光。(1)白光是三色LED混合光源,波长范围约为380~780nm;白光模式下通过图像信息检测毛孔、肤质、肤色、含水量、黑眼圈、皱纹、表皮斑痣、紧致度等效果最佳。(2)正偏振光和负偏振光通过偏振镜片改变光的透振方向与反射光的透振方向垂直,就可以减弱反射光,可减少皮肤角质层对光线的折射,便于清楚地看到皮表、表皮、表皮与真皮交界处及真皮***层的结构;正偏振光模式下获取的图像信息利于检测敏感度、痘痘、痘印、黑头、红血丝,主要用于检测皮表下层,了解客户的真皮肌肤情况;负偏振光模块下课提高皮肤的显影清晰度,对皮肤的纹理、皱纹进行检测。(3)伍氏光是通过含氢化镍之滤片而获得320~400nm长波紫外线,用于痤疮检测时,可准确判断丙酸杆菌的聚集程度;伍氏光模式下可以检测出皮肤的油性、干性等问题,主要用于检测棕色斑。(4)UV光的波长范围在380~400nm,UV光模式图像更清晰、反差更强、细节更明显,可以用于检测皮肤毛囊炎症和皮肤水分等项目的分析。
光源的再无遮挡时向四面八方发散,为保证摄像头获取的图像更加清晰,在所述五光谱光源14的背光面的支架11上安装有挡光板16,将反向光遮挡。具体地,本实施例所述高清摄像头13爱用800万高清摄像头13,主要用于在不同光谱下清晰获取不同皮肤病理的图像新型,所述深度摄像头15采用亚毫米级的光栅结构光摄像头,通过两个深度摄像头15相对位置设置,标定出参数,通过三维图像重建算法获取高精度完整人脸三维图像,满足需求。
所述支架11内部中间安装有与高清摄像头13、五光谱光源14和深度摄像头15连接的处理模块,所述处理模块为现有技术具有数据处理以及设备控制的处理模块,所述处理模块包括处理器、以及与处理器连接的存储模块和数据传输模块;处理器内写入控制程序软件,通过接收信息生成相应的控制只是发送给高清摄像头13、五光谱光源14和深度摄像头15或者进行其他处理,存储模块用于存储摄像头采集的图像信息,所述数据传输模块用于连接操作终端和云端服务器,操作终端用于发送控制程序指令,如控制五光谱关光源只发一种或几种光,然后控制高清摄像头13和深度摄像头15拍照,可实现单一功能的皮肤检测,也可控制实现全面功能的检测。所述云端服务器用于接收发送的与图像信息,对图像信息进行三维图像重建、肤质检测以及评估分析,得到分析报告和三维图像信息。所述处理器还连接有扬声器17,同于发送给提示音给客户,如拍照中请勿眨眼。
所述支架11上还安装为高清摄像头13、五光谱光源14、深度摄像头15和处理模块提供电源的电源模块,电源模块采用常规的220V电压供电。
所述支架11的底部安装有底座18,底座18底部安装有万向轮19,便于移动本实施例所述五光谱皮肤检测仪。
本实施例提供的五光谱皮肤检测仪通过C形支架11上矩阵布局1个高清摄像头13、2度个五光谱光源14和2个深摄像头,解决皮肤数据拍照不能与人脸3D模型获取同时进行的问题以及三维成像精度不足的问题。
实施例2
本发明提供了一种基于多光谱和3D模型重建的人脸图像分析***利用高清摄像头13在五光谱光源14下获取图像信息分析出皮肤病理情况,通过深度摄像头15获取的图像信息对人脸信息进行三维重建获取人脸三维图像信息。
所述人脸图像分析***包括实施例1提供的五光谱皮肤监测仪、云端服务器和控制显示模块。
所述五光谱皮肤检测仪用于采集不同光谱下的人脸皮肤图像信息,所述图像信息包括高清摄像头13采集的图像信息以及深度摄像头15采集的图像信息。
所述云端服务器用于接收所述五光谱皮肤检测仪采集的人脸皮肤图像信息,并对其进行三维图像重建、肤质检测以及评估分析,得到分析报告和三维图像信息;所述云端服务器内包含用于对肤质进行检测的肤质检测模块、用于对肤质进行分析并能生成分析报告的分析报告生成模块和用于对采集的图像信息进行三维图像重建的3D图像重建模块。
(1)3D图像重建模块采用现有的图像处理对深度摄像头15获取的图片进行处理生成三维图像信息,具体可采用:3D图像处理模型:3D点云图像获取,深度摄像机坐标标定,3D环境特征提取,点云模型立体匹配,曲面计算3D模型重建,Open GL彩色纹理曲面耦合等实现。
(2)肤质检测模块用于对高清摄像头13获取的不同光谱下的图像分析检测出皮肤病理情况,主要用于检测肤质的毛孔、肤质、肤色、含水量、黑眼圈、皱纹、表皮斑痣、紧致度、敏感度、痘痘、痘印、黑头、红血丝、纹理、皱纹和棕色斑。毛孔、肤质、肤色、含水量、黑眼圈、皱纹、表皮斑痣、紧致度通过白光状态下高清摄像头13获取的图像信息分析得到;敏感度、痘痘、痘印、黑头、红血丝通过正偏振光状态下高清摄像头13获取的图像信息分析得到;纹理、皱纹通过负偏振光状态下高清摄像头13获取的图像信息分析得到;棕色斑通过伍氏光状态下高清摄像头13获取的图像信息得到。
(3)分析报告生成模块用于根据肤质检测模块的检测结果生成分析报告,分析报告还有其他的信息可控制显示模块输入,如身份信息;所述分析报告不仅包括该次检测结果,还包括与历史数据对比结果,通过两次对比结果可得最近皮肤理疗有没有效果或者用于检测某品牌的护肤品是否有效。
控制显示模块,用于控制所述五光谱皮肤检测仪、以及用于显示所述五光谱皮肤检测采集的人脸皮肤图像信息和所述云端服务器得到的分析报告和三维图像信息。控制显示模块可用pc机或手持终端等电子设备实现,通过与五光谱皮肤检测仪无线连接或有线连接,发送控制指令给五光谱皮皮肤检测仪使其工作,获取人脸皮肤图像信息,不管有线还是无线连接,所述五光谱皮肤检测仪的上均设置有对应的数据传输模块,控制显示模块将接收的图像信息和分析报告显示出来,已供客户观看,结果简单直接。
本实施例通过所述五光谱分析仪采集的图像信息通过云端服务器对图像信息进行三维图像重建、肤质分析以及评估分析,为人脸面部皮肤的美容或者治疗提供可靠的数据支撑。
实施例3
本发明还提供了基于多光谱和3D模型重建的人脸面部图像分析方法包括如下步骤:
(1)控制显示模块控制所述五光谱皮肤检测仪的五光谱光源14发光并控制高清摄像头13和深度摄像头15拍照获取人脸皮肤图像信息,并将获取的人脸皮肤图像信息发送给云端服务器;
(2)云端服务器接收采集到的人脸皮肤图像信息,并利用多种图像处理算法对其进行三维图像重建、肤质检测及评估分析,并将三维图像和分析结果发送给控制显示模块显示;其中,多种图像处理算法包括肤质检测算法、肤质评估分析算法和三维图像重建算法。
本实施例通过控制显示模块、五光谱检测仪和云端服务器之间相同协作,不仅实现对肤质检测和三维图像重建,还提高了处理速度,操作简单,方便,快捷。
至此,已经结合附图对本实施例进行了详细描述。依据以上描述,本领域技术人员应当对本发明一种人脸面部图像定量分析***及方法有了清楚的认识。
在此提供的***、模块和显示不与任何特定计算机、虚拟***或者其它设备固有相关。各种通用***也可以与基于在此的示教一起使用。根据上面的描述,构造这类***所要求的结构是显而易见的。此外,本发明也不针对任何特定编程语言。应当明白,可以利用各种编程语言实现在此描述的本发明的内容,并且上面对特定语言所做的描述是为了披露本发明的最佳实施方式。
以上所述仅是本发明优选的实施方式,但本发明的保护范围并不局限于此,任何基于本发明所提供的技术方案和发明构思进行的改造和替换都应涵盖在本发明的保护范围内。
Claims (9)
1.一种具有3D模型重建功能的五光谱皮肤检测仪,其特征在于:包括支架,所述支架上安装有C形架,C形架的中部安装有高清摄像头,以及以高清摄像头为中线左右对称安装有五光谱光源和深度摄像头,五光谱光源位于高清摄像头和深度摄像头中间;
所述支架上还安装有与高清摄像头、五光谱光源和深度摄像头连接的处理模块,用于控制五光谱光源发出不同的光、控制高清摄像头和深度摄像头获取的图像信息并将图像信息上传;它包括处理器、以及与处理器连接的存储模块和数据传输模块;
所述支架上还安装为高清摄像头、五光谱光源、深度摄像头和处理模块提供电源的电源模块。
2.根据权利要求1所述的具有3D模型重建功能的五光谱皮肤检测仪,其特征在于:所述五光谱光源发出的光包括白光、正偏振光、负偏振光、伍氏光和UV光。
3.根据权利要求1所述的具有3D模型重建功能的五光谱皮肤检测仪,其特征在于:所述支架上位于五光谱光源背光面设有挡光板。
4.基于多光谱和3D模型重建的人脸图像分析***,其特征在于包括:
权利要求2所述的五光谱皮肤检测仪,用于采集人脸皮肤图像信息,所述图像信息包括高清摄像头采集的图像信息以及深度摄像头采集的图像信息;
云端服务器,用于接收所述五光谱皮肤检测仪采集的人脸皮肤图像信息,并对其进行三维图像重建、肤质检测以及评估分析,得到分析报告和三维图像信息;所述云端服务器内包含用于对肤质进行检测的肤质检测模块、用于对肤质进行分析并能生成分析报告的分析报告生成模块和用于对采集的图像信息进行三维图像重建的3D图像重建模块;
控制显示模块,用于控制所述五光谱皮肤检测仪、以及用于显示所述五光谱皮肤检测采集的人脸皮肤图像信息和所述云端服务器得到的分析报告和三维图像信息。
5.根据权利要求4所述的基于多光谱和3D模型重建的人脸图像分析***,其特征在于:所述肤质检测模块主要用于检测肤质的毛孔、肤质、肤色、含水量、黑眼圈、皱纹、表皮斑痣、紧致度、敏感度、痘痘、痘印、黑头、红血丝、纹理、皱纹和棕色斑等皮肤项目,以及面部比例数据,例如五官大小、比例、角度、类型,眉毛、嘴唇、面部轮廓、侧面部的比例、角度、类型等数据,三庭五眼、四高三低等面部美学数据等项目。
6.根据权利要求5所述的基于多光谱和3D模型重建的人脸图像分析***,其特征在于:毛孔、肤质、肤色、含水量、黑眼圈、皱纹、表皮斑痣、紧致度通过白光状态下高清摄像头获取的图像信息分析得到;敏感度、痘痘、痘印、黑头、红血丝通过正偏振光状态下高清摄像头获取的图像信息分析得到;纹理、皱纹通过负偏振光状态下高清摄像头获取的图像信息分析得到;棕色斑通过伍氏光状态下高清摄像头获取的图像信息得到,皮肤毛囊炎症和皮肤水分通过UV光状态下高清摄像头获取的图像信息分析得到。
7.根据权利要求4所述的基于多光谱和3D模型重建的人脸图像分析***,其特征在于:所述3D图像重建模块是用于根据深度摄像头获取的图像信息进行三维图像重建获得三维图像信息,并通过三维图像信息对人脸肤质进行检测。
3D面部检测项目主要包括,面部三庭数据、比例,黄金三角比例、脸型轮廓、眉型、眉间距、眉眼距、五眼比例、眼睛类型、眼睛长宽大小、内外眦夹角、内眦赘皮、眼睑类型、睫毛类型、鼻型、鼻梁高度宽度长度、鼻头类型、鼻小柱类型、唇型、下巴类型、四高三低点等项目。
8.根据权利要求4所述的基于多光谱和3D模型重建的人脸图像分析***,其特征在于:所述分析报告生成模块根据肤质检测模块和3D图像重建模块对皮肤检测结果进行分析并形成评估报告。
9.基于多光谱和3D模型重建的人脸面部图像分析方法,其特征在于包括如下步骤:
(1)控制显示模块控制所述五光谱皮肤检测仪的五光谱光源发光并控制高清摄像头和深度摄像头拍照获取人脸皮肤图像信息,并将获取的人脸皮肤图像信息发送给云端服务器;
(2)云端服务器接收采集到的人脸皮肤图像信息,并利用多种图像处理算法对其进行三维图像重建、肤质检测及评估分析,并将三维图像和分析结果发送给控制显示模块显示;其中,多种图像处理算法包括肤质检测算法、肤质评估分析算法和三维图像重建算法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010454151.XA CN111528807A (zh) | 2020-05-26 | 2020-05-26 | 基于多光谱和3d模型重建的人脸图像分析***及其方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010454151.XA CN111528807A (zh) | 2020-05-26 | 2020-05-26 | 基于多光谱和3d模型重建的人脸图像分析***及其方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN111528807A true CN111528807A (zh) | 2020-08-14 |
Family
ID=71969938
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010454151.XA Pending CN111528807A (zh) | 2020-05-26 | 2020-05-26 | 基于多光谱和3d模型重建的人脸图像分析***及其方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111528807A (zh) |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112333439A (zh) * | 2020-10-30 | 2021-02-05 | 南京维沃软件技术有限公司 | 面部清洁设备控制方法、装置及电子设备 |
CN113240652A (zh) * | 2021-05-19 | 2021-08-10 | 上海肤焕科技有限公司 | 一种在线皮肤分析*** |
CN113435251A (zh) * | 2021-05-26 | 2021-09-24 | 安徽省腾运医药科技有限公司 | 一种基于ai智能面膜自助售卖机的运作方法 |
CN113729626A (zh) * | 2021-08-03 | 2021-12-03 | 蒋登文 | 一种基于图像识别的便携式皮肤质量检测装置及*** |
CN113812927A (zh) * | 2021-11-18 | 2021-12-21 | 深圳市普兴医疗设备有限公司 | 一种基于互联网的医疗美容诊断装置及使用方法 |
WO2023152007A1 (en) * | 2022-02-14 | 2023-08-17 | Mvm Enterprises Gmbh | System and method for monitoring human skin |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010264276A (ja) * | 2010-07-16 | 2010-11-25 | Tokyo Institute Of Technology | マルチスペクトル皮膚画像による診断方法 |
CN205163033U (zh) * | 2015-09-09 | 2016-04-20 | 上海媚测信息科技有限公司 | 高清多光谱皮肤检测仪 |
CN109381165A (zh) * | 2018-09-12 | 2019-02-26 | 维沃移动通信有限公司 | 一种皮肤检测方法及移动终端 |
CN109730637A (zh) * | 2018-12-29 | 2019-05-10 | 中国科学院半导体研究所 | 一种人脸面部图像定量分析***及方法 |
CN209391912U (zh) * | 2018-11-29 | 2019-09-17 | 武汉爱恩医疗美容有限公司 | 一种多光谱皮肤检测仪 |
CN110960219A (zh) * | 2019-11-08 | 2020-04-07 | 上海市第七人民医院 | 一种皮肤溃疡创面智能辅助诊断*** |
CN212346505U (zh) * | 2020-05-26 | 2021-01-15 | 成都端丽医学科技有限公司 | 一种具有3d模型重建功能的五光谱皮肤检测仪 |
-
2020
- 2020-05-26 CN CN202010454151.XA patent/CN111528807A/zh active Pending
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010264276A (ja) * | 2010-07-16 | 2010-11-25 | Tokyo Institute Of Technology | マルチスペクトル皮膚画像による診断方法 |
CN205163033U (zh) * | 2015-09-09 | 2016-04-20 | 上海媚测信息科技有限公司 | 高清多光谱皮肤检测仪 |
CN109381165A (zh) * | 2018-09-12 | 2019-02-26 | 维沃移动通信有限公司 | 一种皮肤检测方法及移动终端 |
CN209391912U (zh) * | 2018-11-29 | 2019-09-17 | 武汉爱恩医疗美容有限公司 | 一种多光谱皮肤检测仪 |
CN109730637A (zh) * | 2018-12-29 | 2019-05-10 | 中国科学院半导体研究所 | 一种人脸面部图像定量分析***及方法 |
CN110960219A (zh) * | 2019-11-08 | 2020-04-07 | 上海市第七人民医院 | 一种皮肤溃疡创面智能辅助诊断*** |
CN212346505U (zh) * | 2020-05-26 | 2021-01-15 | 成都端丽医学科技有限公司 | 一种具有3d模型重建功能的五光谱皮肤检测仪 |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112333439A (zh) * | 2020-10-30 | 2021-02-05 | 南京维沃软件技术有限公司 | 面部清洁设备控制方法、装置及电子设备 |
CN113240652A (zh) * | 2021-05-19 | 2021-08-10 | 上海肤焕科技有限公司 | 一种在线皮肤分析*** |
CN113435251A (zh) * | 2021-05-26 | 2021-09-24 | 安徽省腾运医药科技有限公司 | 一种基于ai智能面膜自助售卖机的运作方法 |
CN113729626A (zh) * | 2021-08-03 | 2021-12-03 | 蒋登文 | 一种基于图像识别的便携式皮肤质量检测装置及*** |
CN113812927A (zh) * | 2021-11-18 | 2021-12-21 | 深圳市普兴医疗设备有限公司 | 一种基于互联网的医疗美容诊断装置及使用方法 |
WO2023152007A1 (en) * | 2022-02-14 | 2023-08-17 | Mvm Enterprises Gmbh | System and method for monitoring human skin |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111528807A (zh) | 基于多光谱和3d模型重建的人脸图像分析***及其方法 | |
US8823934B2 (en) | Methods and systems for imaging and modeling skin using polarized lighting | |
US5836872A (en) | Digital optical visualization, enhancement, quantification, and classification of surface and subsurface features of body surfaces | |
USRE47921E1 (en) | Reflectance imaging and analysis for evaluating tissue pigmentation | |
KR101930851B1 (ko) | 3d 얼굴 모델링을 통한 피부 분석 진단 시스템 | |
US8804122B2 (en) | Systems and methods for determining a surface profile using a plurality of light sources | |
RU2385669C2 (ru) | Система и способ для медицинского мониторинга и обработки посредством косметического мониторинга и обработки | |
CA2678551C (en) | Method and apparatus for simulation of facial skin aging and de-aging | |
JP4485837B2 (ja) | 皮膚画像のコンピュータ解析のための方法およびシステム | |
KR101920734B1 (ko) | 휴대용 단말기를 이용한 증강현실 기반의 셀프 피부 미용관리 방법 | |
US20120016231A1 (en) | System and method for three dimensional cosmetology imaging with structured light | |
CA2714562A1 (en) | Practical modeling and acquisition of layered facial reflectance | |
US20060227137A1 (en) | Skin reflectance model for representing and rendering faces | |
WO2010111463A1 (en) | Methods and systems for imaging skin using polarized lighting | |
CN212346505U (zh) | 一种具有3d模型重建功能的五光谱皮肤检测仪 | |
KR102036040B1 (ko) | 광학식 피부질환 진단장치 | |
CN116829057A (zh) | 用于组织的多光谱3d成像和诊断的***和装置及其方法 | |
KR102680512B1 (ko) | 3차원 피부 스캔 방법 | |
KR102036043B1 (ko) | 스마트기기 기반의 피부질환 진단이 가능한 광학식 피부질환 진단장치 | |
KR20130141285A (ko) | 피부상태 진단 방법 및 장치와 이를 이용한 피부상태 적합 화장정보 제공 방법 | |
AU2014363329A1 (en) | Medical imaging | |
Huang et al. | A cloud-based intelligent skin and scalp analysis system | |
KR102242098B1 (ko) | 3차원 피부 스캔 장치 | |
US20180192937A1 (en) | Apparatus and method for detection, quantification and classification of epidermal lesions | |
CN113508438A (zh) | 投影和测量*** |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |