JP7289308B2 - 画像解析装置、画像解析方法およびプログラム - Google Patents
画像解析装置、画像解析方法およびプログラム Download PDFInfo
- Publication number
- JP7289308B2 JP7289308B2 JP2020541255A JP2020541255A JP7289308B2 JP 7289308 B2 JP7289308 B2 JP 7289308B2 JP 2020541255 A JP2020541255 A JP 2020541255A JP 2020541255 A JP2020541255 A JP 2020541255A JP 7289308 B2 JP7289308 B2 JP 7289308B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- subject
- unit
- light emitting
- imaging
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000010191 image analysis Methods 0.000 title claims description 84
- 238000003703 image analysis method Methods 0.000 title claims description 5
- 238000003384 imaging method Methods 0.000 claims description 99
- 238000005259 measurement Methods 0.000 claims description 88
- 230000008859 change Effects 0.000 claims description 23
- 238000000034 method Methods 0.000 description 19
- 238000012545 processing Methods 0.000 description 19
- 230000008569 process Effects 0.000 description 16
- 238000005286 illumination Methods 0.000 description 15
- 238000010586 diagram Methods 0.000 description 13
- 230000006870 function Effects 0.000 description 13
- 238000004891 communication Methods 0.000 description 9
- 230000003287 optical effect Effects 0.000 description 9
- 238000012937 correction Methods 0.000 description 8
- 238000001514 detection method Methods 0.000 description 5
- 238000006243 chemical reaction Methods 0.000 description 4
- 239000000284 extract Substances 0.000 description 3
- 230000008901 benefit Effects 0.000 description 2
- 230000002457 bidirectional effect Effects 0.000 description 2
- 238000005315 distribution function Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000005401 electroluminescence Methods 0.000 description 2
- 230000005484 gravity Effects 0.000 description 2
- 230000009467 reduction Effects 0.000 description 2
- 238000010079 rubber tapping Methods 0.000 description 2
- 238000012951 Remeasurement Methods 0.000 description 1
- 230000001133 acceleration Effects 0.000 description 1
- 238000009825 accumulation Methods 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 230000001678 irradiating effect Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 238000004020 luminiscence type Methods 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 238000000691 measurement method Methods 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 210000004761 scalp Anatomy 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000035945 sensitivity Effects 0.000 description 1
- 230000005236 sound signal Effects 0.000 description 1
- 238000001228 spectrum Methods 0.000 description 1
- 239000010409 thin film Substances 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
- 239000013598 vector Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/90—Determination of colour characteristics
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J3/00—Spectrometry; Spectrophotometry; Monochromators; Measuring colours
- G01J3/46—Measurement of colour; Colour measuring devices, e.g. colorimeters
- G01J3/50—Measurement of colour; Colour measuring devices, e.g. colorimeters using electric radiation detectors
- G01J3/51—Measurement of colour; Colour measuring devices, e.g. colorimeters using electric radiation detectors using colour filters
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/46—Colour picture communication systems
- H04N1/56—Processing of colour picture signals
- H04N1/60—Colour correction or control
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/10—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/10—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
- H04N23/12—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths with one sensor only
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/56—Cameras or camera modules comprising electronic image sensors; Control thereof provided with illuminating means
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/62—Control of parameters via user interfaces
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/67—Focus control based on electronic image sensor signals
- H04N23/673—Focus control based on electronic image sensor signals based on contrast or high frequency components of image signals, e.g. hill climbing method
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/74—Circuitry for compensating brightness variation in the scene by influencing the scene brightness using illuminating means
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10024—Color image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10141—Special mode during image acquisition
- G06T2207/10152—Varying illumination
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30088—Skin; Dermal
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30196—Human being; Person
- G06T2207/30201—Face
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- General Physics & Mathematics (AREA)
- Spectroscopy & Molecular Physics (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Heart & Thoracic Surgery (AREA)
- General Health & Medical Sciences (AREA)
- Pathology (AREA)
- Medical Informatics (AREA)
- Molecular Biology (AREA)
- Surgery (AREA)
- Animal Behavior & Ethology (AREA)
- Biomedical Technology (AREA)
- Public Health (AREA)
- Veterinary Medicine (AREA)
- Biophysics (AREA)
- Human Computer Interaction (AREA)
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
- Measuring And Recording Apparatus For Diagnosis (AREA)
- Color Television Image Signal Generators (AREA)
- Studio Devices (AREA)
Description
図1は、本実施形態に係る画像解析装置100の測定時の状態を示す図である。図2は、画像解析装置100の正面図であり、図3は、画像解析装置100の背面図である。画像解析装置100は、例えばスマートフォンやタブレットコンピュータなどの携帯情報端末であり得る。以下、画像解析装置100の一例としてスマートフォンを例に挙げて説明する。
そして、肌色推定部304は、算出された差分値に基づいて、被写体の色を推定する(ステップS109)と、推定値を測定結果としてタッチパネル101(ディスプレイ)に表示する。
まず、制御部301は、1フレームの画像データの撮像を行い、フレームメモリ213から読み出す(ステップS201)。制御部301は、読み出した画像データを所定のサイズ(例えば640×480画素)にトリミングしてもよい。
次に、制御部301は、画像データをフーリエ変換し、高周波数成分のエネルギーを抽出する(ステップS202)。
以下、第2実施形態に係る画像解析装置400について説明する。なお、第1実施形態の図中において付与した符号と共通する符号は同一の対象を示す。このため、第1実施形態と共通する箇所の説明は省略し、異なる箇所について詳細に説明する。
そして、肌色推定部304は、算出された差分値に基づいて、被写体の色を推定する(ステップS311)と、推定値を測定結果としてタッチパネル101(ディスプレイ)に表示する。
上述の実施形態は、本発明を実施するにあたっての具体化の例を示したものに過ぎず、これらによって本発明の技術的範囲が限定的に解釈されるものではない。すなわち、本発明は、上述の実施形態に限定されることなく、本発明の趣旨を逸脱しない範囲で変更実施可能である。
101 タッチパネル(ディスプレイ)
102、104 撮像部
103、105 LED(発光部)
213 フレームメモリ
214 CPU
215 RAM
217 ストレージ
218 ジャイロスコープ
301 制御部
302 画像取得部
303 測定領域特定部(特定部)
304 肌色推定部(推定部)
Claims (12)
- 被写体を撮像する撮像部と、
前記被写体に向けて発光する発光部と、
前記発光部を発光させながら前記撮像部に前記被写体の第1画像を撮像させるとともに、前記発光部を発光させずに前記撮像部に前記被写体の第2画像を撮像させる制御部と、
前記第1画像の色情報と前記第2画像の前記色情報との差分値に基づいて前記被写体の色を推定する推定部と、
前記撮像部と前記発光部の位置関係に基づいて、前記第1画像および前記第2画像の中で前記発光部の光が前記被写体において正反射する位置に対応する反射領域から所定の距離で離間した測定領域を特定する特定部と、
を備え、
前記推定部は、前記第1画像および前記第2画像を構成する画素群のうち、前記測定領域に含まれる参照画素の前記色情報について前記差分値を算出する、
ことを特徴とする画像解析装置。 - 前記被写体に対する前記撮像部の傾きを検出するセンサ部をさらに備え、
前記特定部は、前記撮像部と前記発光部の位置関係および前記傾きの変化量に基づいて、前記反射領域と前記測定領域の位置関係を維持しながら前記測定領域の位置を補正する
ことを特徴とする請求項1に記載の画像解析装置。 - 前記センサ部は、ジャイロスコープであって、
前記特定部は、前記被写体が前記ジャイロスコープのヨー軸の軸方向に位置するときに、前記ジャイロスコープのロール軸およびピッチ軸を中心とした回転角度に基づいて前記傾きの前記変化量を算出する
ことを特徴とする請求項2に記載の画像解析装置。 - 前記制御部は、前記被写体が前記撮像部の合焦距離に位置するときに、前記発光部の発光を切換制御しながら前記撮像部に前記第1画像および前記第2画像を連続して撮像させる
ことを特徴とする請求項1乃至3のいずれか一項に記載の画像解析装置。 - 前記撮像部および前記発光部は、操作画面を表示するディスプレイと反対の面にそれぞれ設けられる
ことを特徴とする請求項1乃至4のいずれか一項に記載の画像解析装置。 - 前記撮像部および前記発光部は、操作画面を表示するディスプレイと同一の面にそれぞれ設けられる
ことを特徴とする請求項1乃至4のいずれか一項に記載の画像解析装置。 - 前記ディスプレイは、前記発光部を兼ねる
ことを特徴とする請求項6に記載の画像解析装置。 - 前記制御部は、ホワイトバランス機能を無効化した状態で前記撮像部に前記第1画像および前記第2画像を撮像させる
ことを特徴とする請求項1乃至7のいずれか一項に記載の画像解析装置。 - 前記第1画像および前記第2画像は、RGB表色系の前記色情報を含み、
前記推定部は、前記RGB表色系から変換したXYZ表色系の前記色情報に基づいて前記色を推定する
ことを特徴とする請求項1乃至8のいずれか一項に記載の画像解析装置。 - 前記被写体は、人体表面であることを特徴とする請求項1乃至9のいずれか一項に記載の画像解析装置。
- 被写体に向けて発光装置を発光させながら撮像装置に前記被写体の第1画像を撮像させるステップと、
前記発光装置を発光させずに前記撮像装置に前記被写体の第2画像を撮像させるステップと、
前記第1画像の色情報と前記第2画像の前記色情報との差分値に基づいて前記被写体の色を推定するステップと、
前記撮像装置と前記発光装置の位置関係に基づいて、前記第1画像および前記第2画像の中で前記発光装置の光が前記被写体において正反射する位置に対応する反射領域から所定の距離で離間した測定領域を特定するステップと、
を備え、
前記推定するステップでは、前記第1画像および前記第2画像を構成する画素群のうち、前記測定領域に含まれる参照画素の前記色情報について前記差分値を算出する、
ことを特徴とする画像解析方法。 - コンピュータに、
被写体に向けて発光装置を発光させながら撮像装置に前記被写体の第1画像を撮像させるステップと、
前記発光装置を発光させずに前記撮像装置に前記被写体の第2画像を撮像させるステップと、
前記第1画像の色情報と前記第2画像の前記色情報との差分値に基づいて前記被写体の色を推定するステップと、
前記撮像装置と前記発光装置の位置関係に基づいて、前記第1画像および前記第2画像の中で前記発光装置の光が前記被写体において正反射する位置に対応する反射領域から所定の距離で離間した測定領域を特定するステップと、
を実行させ、
前記推定するステップでは、前記第1画像および前記第2画像を構成する画素群のうち、前記測定領域に含まれる参照画素の前記色情報について前記差分値を算出する、
ことを特徴とするプログラム。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201862727997P | 2018-09-06 | 2018-09-06 | |
US62/727,997 | 2018-09-06 | ||
PCT/JP2019/034706 WO2020050295A1 (ja) | 2018-09-06 | 2019-09-04 | 画像解析装置、画像解析方法およびプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2020050295A1 JPWO2020050295A1 (ja) | 2021-09-02 |
JP7289308B2 true JP7289308B2 (ja) | 2023-06-09 |
Family
ID=69721877
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020541255A Active JP7289308B2 (ja) | 2018-09-06 | 2019-09-04 | 画像解析装置、画像解析方法およびプログラム |
Country Status (3)
Country | Link |
---|---|
US (1) | US11494945B2 (ja) |
JP (1) | JP7289308B2 (ja) |
WO (1) | WO2020050295A1 (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP3922202A1 (en) * | 2020-06-12 | 2021-12-15 | Koninklijke Philips N.V. | System and method for determining skin contact for a personal care device |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001078202A (ja) | 1999-09-01 | 2001-03-23 | Minolta Co Ltd | デジタル撮影装置、画像データ処理装置、デジタル撮影方法および記録媒体 |
JP2008259676A (ja) | 2007-04-12 | 2008-10-30 | Matsushita Electric Ind Co Ltd | 情報処理装置および色判定方法 |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2014041115A (ja) | 2012-07-27 | 2014-03-06 | Pola Chem Ind Inc | 測色装置、並びに該測色装置により得られた色情報を有する肌色マップ |
KR20140028415A (ko) * | 2012-08-29 | 2014-03-10 | 한국전자통신연구원 | 피부분석을 위한 3차원 얼굴 모델 생성 장치 및 그 방법 |
EP2919185A4 (en) | 2012-11-09 | 2016-07-13 | Fujifilm Corp | CAMERA SYSTEM, COLOR TRANSFORMATION DEVICE AND METHOD THEREFOR, AND COLOR TRANSFORMATION PROGRAM |
KR102581945B1 (ko) * | 2017-02-07 | 2023-09-25 | 삼성전자주식회사 | 스킨 정보 제공 방법 및 이를 지원하는 전자 장치 |
KR102055881B1 (ko) * | 2018-01-09 | 2019-12-13 | 주식회사 룰루랩 | 피부 상태 측정용 모듈 |
-
2019
- 2019-09-04 WO PCT/JP2019/034706 patent/WO2020050295A1/ja active Application Filing
- 2019-09-04 US US17/273,975 patent/US11494945B2/en active Active
- 2019-09-04 JP JP2020541255A patent/JP7289308B2/ja active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001078202A (ja) | 1999-09-01 | 2001-03-23 | Minolta Co Ltd | デジタル撮影装置、画像データ処理装置、デジタル撮影方法および記録媒体 |
JP2008259676A (ja) | 2007-04-12 | 2008-10-30 | Matsushita Electric Ind Co Ltd | 情報処理装置および色判定方法 |
Also Published As
Publication number | Publication date |
---|---|
US20210350577A1 (en) | 2021-11-11 |
JPWO2020050295A1 (ja) | 2021-09-02 |
WO2020050295A1 (ja) | 2020-03-12 |
US11494945B2 (en) | 2022-11-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5136669B2 (ja) | 画像処理装置、画像処理方法及びプログラム | |
US8947553B2 (en) | Image processing device and image processing method | |
JP3888996B2 (ja) | 小型デジタルカメラのズーム(zoom)方法 | |
KR101780138B1 (ko) | 입력 장치 및 기억 매체 | |
EP1914982A1 (en) | Imaging device | |
US20130010170A1 (en) | Imaging apparatus, imaging method, and computer-readable storage medium | |
US20140184854A1 (en) | Front camera face detection for rear camera zoom function | |
US20140160019A1 (en) | Methods for enhancing user interaction with mobile devices | |
KR101455018B1 (ko) | 촬상 장치, 촬상 방법, 및 컴퓨터 판독 가능한 기록 매체 | |
US9854151B2 (en) | Imaging device and focusing control method | |
KR20150115455A (ko) | 휴대단말기의 프로젝터 초점 제어 방법 및 장치 | |
KR20120007948A (ko) | 전자 카메라, 화상 처리 장치 및 화상 처리 방법 | |
US10812705B2 (en) | Imaging apparatus, imaging method, and imaging program | |
WO2018228466A1 (zh) | 对焦区域显示方法、装置及终端设备 | |
EP3718296B1 (en) | Electronic device and method for controlling autofocus of camera | |
CN105915807B (zh) | 计算光量变化特性的方法和电子设备 | |
US9900494B2 (en) | Imaging device and focus control method | |
JP7289308B2 (ja) | 画像解析装置、画像解析方法およびプログラム | |
JP2013017218A (ja) | 画像処理装置、画像処理方法及びプログラム | |
JP6172973B2 (ja) | 画像処理装置 | |
JP7289309B2 (ja) | 画像解析装置、画像解析方法およびプログラム | |
US9843715B2 (en) | Photographic apparatus, stroboscopic image prediction method, and a non-transitory computer readable storage medium storing stroboscopic image prediction program | |
JP2016052096A (ja) | 画像処理プログラム、情報処理システム、画像処理方法 | |
KR20140106310A (ko) | 요철형 패턴 영상 획득 장치 및 방법 | |
JPWO2020170945A1 (ja) | 表示制御装置、撮像装置、表示制御方法、及び表示制御プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220704 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230307 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230502 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230516 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230530 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7289308 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |