JP6691529B2 - Eyebrow shape guide device and method thereof - Google Patents
Eyebrow shape guide device and method thereof Download PDFInfo
- Publication number
- JP6691529B2 JP6691529B2 JP2017222477A JP2017222477A JP6691529B2 JP 6691529 B2 JP6691529 B2 JP 6691529B2 JP 2017222477 A JP2017222477 A JP 2017222477A JP 2017222477 A JP2017222477 A JP 2017222477A JP 6691529 B2 JP6691529 B2 JP 6691529B2
- Authority
- JP
- Japan
- Prior art keywords
- eyebrow
- feature point
- point
- reference point
- face image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 210000004709 eyebrow Anatomy 0.000 title claims description 221
- 238000000034 method Methods 0.000 title claims description 22
- 238000004364 calculation method Methods 0.000 claims description 11
- 230000001815 facial effect Effects 0.000 description 12
- 238000003384 imaging method Methods 0.000 description 10
- 238000010586 diagram Methods 0.000 description 7
- 230000002452 interceptive effect Effects 0.000 description 3
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 1
- 241000646858 Salix arbusculoides Species 0.000 description 1
- 230000003796 beauty Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 239000000843 powder Substances 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/168—Feature extraction; Face representation
- G06V40/171—Local features and components; Facial parts ; Occluding parts, e.g. glasses; Geometrical relationships
-
- A—HUMAN NECESSITIES
- A45—HAND OR TRAVELLING ARTICLES
- A45D—HAIRDRESSING OR SHAVING EQUIPMENT; EQUIPMENT FOR COSMETICS OR COSMETIC TREATMENTS, e.g. FOR MANICURING OR PEDICURING
- A45D44/00—Other cosmetic or toiletry articles, e.g. for hairdressers' rooms
- A45D44/22—Face shaping devices, e.g. chin straps; Wrinkle removers, e.g. stretching the skin
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
- G06T11/60—Editing figures and text; Combining figures or text
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/20—Scenes; Scene-specific elements in augmented reality scenes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/161—Detection; Localisation; Normalisation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/172—Classification, e.g. identification
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Oral & Maxillofacial Surgery (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- General Health & Medical Sciences (AREA)
- Physics & Mathematics (AREA)
- Multimedia (AREA)
- Human Computer Interaction (AREA)
- Business, Economics & Management (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Tourism & Hospitality (AREA)
- Economics (AREA)
- Human Resources & Organizations (AREA)
- Marketing (AREA)
- Primary Health Care (AREA)
- Strategic Management (AREA)
- General Business, Economics & Management (AREA)
- Image Processing (AREA)
- Image Analysis (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Description
本発明は、顔特徴認識技術に関するものであり、特に、顔の様々な部分の認識に基づく眉形状ガイド装置およびその方法に関するものである。 The present invention relates to a facial feature recognition technique, and more particularly, to an eyebrow shape guide device and method based on recognition of various parts of a face.
美しさへの愛は、女性の本能である。多くの女性は、唇、目、眉などをメイクアップ(makeup)することによって顔特徴を追加し、見た目を整える。しかしながら、メイクアップ技術は、生まれつき備わっているものではなく、何度も練習してからメイクアップ効果を向上させることができる。 Love for beauty is a woman's instinct. Many women add facial features and make them look better by making up the lips, eyes, eyebrows, etc. However, the makeup technique is not a natural technique and can be practiced many times to improve the makeup effect.
メイクアップ技術を学びたければ、インターネット上の画像から学ぶことができる。しかしながら、画像および/または動画から学ぶメイクアップ技術は、実際には差がある。そのため、最新機器を用いていかにしてメイクアップ技術を学ぶかが、製造業者にとって関心のある技術課題である。 If you want to learn makeup technology, you can learn from images on the Internet. However, the makeup techniques learned from images and / or videos are actually different. Therefore, whether or not to learn makeup technology by using the latest equipment is a technical issue of interest to manufacturers.
本発明は、使用者の顔画像に基づいてより美しい眉形状ガイドブロックを表示する眉形状ガイド装置および眉形状ガイド方法に関するものであり、使用者は、眉形状ガイド装置によって提供されたプロンプト(prompt)に基づいて、眉の形を整える、あるいは眉にメイクアップをすることができるため、便利な双方向メイクアップ指導を提供することができる。 The present invention relates to an eyebrow shape guide device and a eyebrow shape guide method for displaying a more beautiful eyebrow shape guide block based on a face image of a user, and a user is prompted by the eyebrow shape guide device. ), The shape of the eyebrows can be adjusted or makeup can be applied to the eyebrows, so that a convenient interactive makeup instruction can be provided.
本発明は、撮像ユニットと、プロセッサと、表示ユニットとを含む眉形状ガイド装置を提供する。撮像ユニットは、使用者の顔画像を取り込み、顔画像は、少なくとも使用者の鼻部分、目部分、および眉部分を含む。プロセッサは、顔画像を受信し、その顔画像に基づいて、少なくとも1つの鼻特徴点、少なくとも1つの目特徴点、および少なくとも1つの眉特徴点を取得するとともに、プロセッサは、少なくとも1つの鼻特徴点、少なくとも1つの目特徴点、および少なくとも1つの眉特徴点に基づいて計算を行い、眉ガイドブロックを取得する。表示ユニットは、顔画像および対応する眉ガイドブロックを表示し、眉ガイドブロックに基づいてメイクアップをするよう使用者に案内する。 The present invention provides an eyebrow shape guide device including an image pickup unit, a processor, and a display unit. The imaging unit captures a face image of the user, and the face image includes at least the nose portion, the eye portion, and the eyebrow portion of the user. A processor receives the face image and obtains at least one nose feature point, at least one eye feature point, and at least one eyebrow feature point based on the face image, and the processor is configured to provide the at least one nose feature point. A calculation is performed based on the points, at least one eye feature point, and at least one eyebrow feature point to obtain an eyebrow guide block. The display unit displays the face image and the corresponding eyebrow guide block, and guides the user to make up based on the eyebrow guide block.
本発明は、以下のステップを含む眉形状ガイド方法を提供する。使用者の顔画像を取り込み、顔画像は、少なくとも使用者の鼻部分、目部分、および眉部分を含む。顔画像に基づいて、少なくとも1つの鼻特徴点、少なくとも1つの目特徴点、および少なくとも1つの眉特徴点を取得するとともに、少なくとも1つの鼻特徴点、少なくとも1つの目特徴点、および少なくとも1つの眉特徴点に基づいて計算を行い、眉ガイドブロックを取得する。顔画像および対応する眉ガイドブロックを表示し、眉ガイドブロックに基づいてメイクアップをするよう使用者に案内する。 The present invention provides an eyebrow shape guide method including the following steps. A face image of the user is captured, and the face image includes at least the nose portion, the eye portion, and the eyebrow portion of the user. At least one nose feature point, at least one eye feature point, and at least one eyebrow feature point are acquired based on the face image, and at least one nose feature point, at least one eye feature point, and at least one An eyebrow guide block is obtained by performing calculation based on eyebrow feature points. The face image and the corresponding eyebrow guide block are displayed, and the user is guided to make up based on the eyebrow guide block.
以上のように、本発明の眉形状ガイド装置および眉形状ガイド方法は、使用者の顔画像における鼻、目、および眉の位置に基づいて、眉ガイドブロックを計算および表示することができるため、使用者は、形を整える、または強調する必要のある眉の領域を知ることができ、眉形状を正確に調整することができる。このように、使用者がメイクアップに慣れていなくても、使用者は、眉形状ガイド装置によって提供されたプロンプトに基づいて、眉の形を整える、または眉にメイクアップをすることができるため、便利な双方向メイクアップ指導を提供することができる。 As described above, since the eyebrow shape guide device and the eyebrow shape guide method of the present invention can calculate and display the eyebrow guide block based on the positions of the nose, eyes, and eyebrows in the face image of the user, The user can know the area of the eyebrow that needs to be shaped or emphasized, and can accurately adjust the shape of the eyebrow. In this way, even if the user is not familiar with makeup, the user can shape the eyebrow or apply makeup to the eyebrow based on the prompt provided by the eyebrow shape guide device. Can provide convenient interactive makeup instruction.
本発明の上記および他の目的、特徴、および利点をより分かり易くするため、図面と併せた幾つかの実施形態を以下に説明する。 In order to make the above and other objects, features, and advantages of the present invention more comprehensible, several embodiments in combination with the drawings are described below.
添付図面は、本発明の原理がさらに理解されるために含まれており、本明細書に組み込まれかつその一部を構成するものである。図面は、本発明の実施形態を例示しており、説明とともに、本発明の原理を説明する役割を果たしている。 The accompanying drawings are included to provide a further understanding of the principles of the invention and are incorporated into and constitute a part of this specification. The drawings illustrate embodiments of the invention and, together with the description, serve to explain the principles of the invention.
図1は、本発明の1つの実施形態に係る眉形状ガイド装置の表示インターフェースの概略図であり、図2は、本発明の1つの実施形態に係る眉形状のシステムブロック図である。図1および図2を参照すると、本実施形態において、眉形状ガイド装置100は、撮像ユニット110、マルチメディア表示ユニット120、およびプロセッサ130を含む。 FIG. 1 is a schematic diagram of a display interface of an eyebrow shape guide device according to one embodiment of the present invention, and FIG. 2 is a system block diagram of an eyebrow shape according to one embodiment of the present invention. Referring to FIGS. 1 and 2, in the present embodiment, the eyebrow shape guide device 100 includes an imaging unit 110, a multimedia display unit 120, and a processor 130.
撮像ユニット110は、使用者の顔画像を取り込むために使用される。本実施形態は、使用者の顔画像における鼻部分、目部分、および眉部分の位置に基づいて、眉形状の理想の位置を計算するため、使用者の顔画像は、顔の左半分か右半分の鼻部分、目部分、および眉部分を含む必要があり、それにより、左側眉または右側眉の好ましい相対位置を計算する。撮像ユニット110は、例えば、内蔵ビデオカメラやカメラ、あるいは外付けの携帯電話やカメラ等であるが、本発明はこれに限定されない。 The imaging unit 110 is used to capture a face image of the user. In the present embodiment, the ideal position of the eyebrow shape is calculated based on the positions of the nose part, the eye part, and the eyebrow part in the face image of the user. It should include half the nose, eye, and eyebrow portions to calculate the preferred relative position of the left or right eyebrow. The imaging unit 110 is, for example, a built-in video camera or camera, or an external mobile phone or camera, but the present invention is not limited to this.
表示ユニット120は、マルチメディア情報および使用者の顔画像をリアルタイムで表示することができる。例えば、表示ユニット120は、使用者の顔画像を表示して、使用者が選択できるよう、複数の眉形状および眉カラーの選択肢を提供する。本実施形態において、表示ユニット120は、高反射率の材料(例えば、鏡)の後方に配置され、有機発光ダイオード(organic light-emitting diodes, OLED)と結合したディスプレイであってもよい。このようにして、使用者は、鏡を通して自分の顔を見ることができ、表示ユニット120は、使用者が見てタッチ選択できるよう、鏡に関連情報を表示することができるが、本発明はこれに限定されない。本実施形態の眉形状ガイド装置100は、メイク台の上に配置された装置であってもよく、眉形状ガイド装置100の画面は、鏡の後方に配置されてもよい。その上に表示されるテキストや画像は、使用者が見られるよう、鏡を通過することができる。別の実施形態において、眉形状ガイド装置100は、スマートフォンやタブレットPC等の消費型電子製品、または携帯型の鏡と結合した携帯型のミラーボックスであってもよい。 The display unit 120 can display the multimedia information and the face image of the user in real time. For example, the display unit 120 displays a face image of the user and provides a plurality of eyebrow shape and eyebrow color options for the user to select. In the present embodiment, the display unit 120 may be a display disposed behind a high-reflectance material (for example, a mirror) and combined with organic light-emitting diodes (OLED). In this way, the user can see his / her face through the mirror and the display unit 120 can display relevant information on the mirror for the user to see and touch select. It is not limited to this. The eyebrow shape guide device 100 of the present embodiment may be a device arranged on the makeup table, and the screen of the eyebrow shape guide device 100 may be arranged behind the mirror. The text and images displayed on it can pass through a mirror for viewing by the user. In another embodiment, the eyebrow shape guide device 100 may be a consumable electronic product such as a smartphone or a tablet PC, or a portable mirror box combined with a portable mirror.
プロセッサ130は、撮像ユニット110によって取り込まれた使用者の顔画像に基づいて計算を行い、使用者の顔に関連する使用者の複数の顔特徴点、例えば、少なくとも1つの鼻特徴点、少なくとも1つの目特徴点、および少なくとも1つの眉特徴点を取得する。また、プロセッサ130は、上述した特徴点に基づいて計算を行い、眉ガイドブロックを取得するとともに、使用者の顔画像および眉ガイドブロックを表示ユニット120で表示し、眉ガイドブロックに基づいてメイクアップをするよう使用者に案内する。例えば、本実施形態の実施において、プロセッサ130は、中央処理装置(central processing unit, CPU)、マイクロプロセッサ(microprocessor)、特定用途向け集積回路(application specific integrated circuits, ASIC)、プログラマブルロジックデバイス(programmable logic device, PLD)、または他の類似する装置であってもよい。プロセッサ130は、眉ガイドブロックを提供するために必要な様々なソフトウェアプログラムおよび/または命令セットを実行するよう構成される。本実施形態において、プロセッサ130は、Dlibの顔ランドマーク(Dlibface landmark)を使用する顔検出システムを実行し、使用者の顔の194個の顔特徴点を検出および分析する。これらの顔特徴点は、それぞれ使用者の顔の各部分、例えば、目、眉、鼻、唇、頬、顎輪郭等を示す。別の場合において、使用者の顔特徴点は、使用者の顔の119個のみの顔特徴を分析することによって取得してもよく、または別の顔特徴点アルゴリズムを使用して使用者の顔特徴点を検出することによって取得してもよい。 The processor 130 performs a calculation based on the facial image of the user captured by the imaging unit 110, and the plurality of facial feature points of the user, such as at least one nose feature point and at least one, associated with the user's face. One eye feature point and at least one eyebrow feature point are acquired. In addition, the processor 130 performs calculation based on the above-mentioned feature points to acquire the eyebrow guide block, displays the face image of the user and the eyebrow guide block on the display unit 120, and makes up makeup based on the eyebrow guide block. Instruct the user to do For example, in the implementation of the present embodiment, the processor 130 includes a central processing unit (CPU), a microprocessor, an application specific integrated circuit (ASIC), and a programmable logic device (programmable logic device). device, PLD), or other similar device. Processor 130 is configured to execute various software programs and / or instruction sets required to provide the eyebrow guide block. In this embodiment, the processor 130 executes a face detection system that uses Dlib face landmarks to detect and analyze 194 facial feature points on the user's face. These facial feature points indicate respective parts of the user's face, such as eyes, eyebrows, nose, lips, cheeks, and chin contour. In other cases, the user's facial feature points may be obtained by analyzing only 119 facial features of the user's face, or using another facial feature point algorithm. You may acquire by detecting a feature point.
本実施形態において、使用者が鏡に向かってメイクアップをする時、表示ユニット120は、使用者の顔画像を表示して、顔画像における顔特徴点をリアルタイムで分析することができる。眉形状ガイド装置との相互作用を便利にするため、本発明は、さらに、使用者の鼻の両側にある鼻翼、目、および眉等の位置に基づいて、メイクアップをガイドするための眉ガイドブロックを計算し、使用者の顔画像に対応して表示ユニット120に眉ガイドブロックを表示することにより、形を整える、またはメイクアップをする必要のある眉の位置を使用者に指示する。また、使用者は、図1に示した表示インターフェースを介して眉ガイドブロックの厚さ、位置、形状を調整することにより、使用者の要求を満たすことができる。このようにして、使用者は、表示ユニット120によって表示された眉ガイドブロックのガイダンスに基づいて、使用者の眉の実際の位置にアイブロウペンシルやアイブロウパウダーを用いて眉の形を整える、またはメイクアップをすることができる。言及すべきこととして、眉ガイドブロックは、鼻、目、および眉の位置に基づいて計算された理想の眉の位置に、点線で形成される。しかしながら、眉ガイドブロックを表示する方法は、これに限定されない。別の実施形態において、眉ガイドブロックを表示する方法は、使用者の実際の眉を直接基準として使用して眉表示ブロックを調整し、調整した眉表示ブロックを眉ガイドブロックとして使用する。 In the present embodiment, when the user makes a make-up in the mirror, the display unit 120 may display the face image of the user and analyze the facial feature points in the face image in real time. To facilitate the interaction with the eyebrow shape guide device, the present invention further provides an eyebrow guide for guiding makeup based on the positions of the nose wings, eyes, eyebrows, etc. on both sides of the user's nose. By calculating a block and displaying an eyebrow guide block on the display unit 120 corresponding to the user's face image, the user is instructed on the position of the eyebrow that needs to be trimmed or made up. Further, the user can meet the user's request by adjusting the thickness, position and shape of the eyebrow guide block via the display interface shown in FIG. In this way, the user uses the eyebrow pencil or the eyebrow powder to adjust the shape of the eyebrow or make-up at the actual position of the eyebrow of the user based on the guidance of the eyebrow guide block displayed by the display unit 120. You can up. It should be noted that the eyebrow guide block is formed by a dotted line at the ideal eyebrow position calculated based on the positions of the nose, eyes, and eyebrows. However, the method of displaying the eyebrow guide block is not limited to this. In another embodiment, the method of displaying the eyebrow guide block adjusts the eyebrow display block using the user's actual eyebrow as a direct reference, and uses the adjusted eyebrow display block as the eyebrow guide block.
図3は、本発明の1つの実施形態に係る眉形状ガイド方法を示すフローチャートである。図4は、本発明の眉ガイドブロックの眉頭表示点および眉尻表示点を計算する概略図である。図5は、本発明の眉ガイドブロックの眉頭表示点、眉尻表示点、および眉山表示点を計算する概略図である。 FIG. 3 is a flowchart illustrating an eyebrow shape guide method according to an exemplary embodiment of the present invention. FIG. 4 is a schematic diagram for calculating eyebrow display points and eyebrow display points of the eyebrow guide block of the present invention. FIG. 5 is a schematic diagram of calculating eyebrow display points, eyebrow display points, and eyebrow display points of the eyebrow guide block of the present invention.
図1および図3を参照すると、ステップS310において、撮像ユニット110は、まず、使用者の顔画像を取り込み、顔画像は、少なくとも使用者の鼻部分、目部分、および眉部分を含む。ステップS320において、プロセッサ130は、撮像ユニット110から顔画像を受信し、顔画像に基づいて、少なくとも1つの鼻特徴点、少なくとも1つの目特徴点、および少なくとも1つの眉特徴点を取得する。本実施形態において、顔画像は、第1側顔画像(例えば、右側顔画像)および第2側顔画像(左側顔画像)を含み、プロセッサ130は、撮像ユニット110を介して2つの側のうちの1つの顔画像を取得して、対応する眉ガイドブロックを計算することができる。 Referring to FIGS. 1 and 3, in step S310, the imaging unit 110 first captures a face image of the user, and the face image includes at least the nose portion, the eye portion, and the eyebrow portion of the user. In step S320, the processor 130 receives a face image from the imaging unit 110 and acquires at least one nose feature point, at least one eye feature point, and at least one eyebrow feature point based on the face image. In the present embodiment, the face image includes a first side face image (for example, a right side face image) and a second side face image (a left side face image), and the processor 130 selects one of the two sides via the imaging unit 110. Can be obtained and the corresponding eyebrow guide block can be calculated.
ステップS330において、プロセッサ130は、ステップS320で取得した少なくとも1つの鼻特徴点、少なくとも1つの目特徴点、および少なくとも1つの眉特徴点に基づいて計算を行い、眉ガイドブロックを取得する。図4は、図5のステップS330に対応する概略図である。図4を参照し、使用者の右側顔画像(第1側顔画像)を例に挙げて説明すると、言及すべきこととして、図4および図5は、使用者の右側顔画像のみを示し、右側顔画像の眉ガイドブロックの計算方法について説明しているが、当業者であれば、同様の方法に基づいて、左側顔画像の眉ガイドブロックの計算方法も推測することができる。 In step S330, the processor 130 performs calculation based on the at least one nose feature point, at least one eye feature point, and at least one eyebrow feature point acquired in step S320 to obtain an eyebrow guide block. FIG. 4 is a schematic diagram corresponding to step S330 of FIG. Referring to FIG. 4, the right side face image (first side face image) of the user will be described as an example. It should be noted that FIGS. 4 and 5 show only the right side face image of the user, Although the calculation method of the eyebrow guide block of the right side face image has been described, those skilled in the art can also estimate the calculation method of the eyebrow guide block of the left side face image based on the similar method.
図4において、右側顔画像400は、右目(第1目)E1、右眉(第1眉)ER1、および鼻NE1を含む。ステップS320において、プロセッサ130は、第1目E1に近い鼻翼に対応する第1特徴点NF1を少なくとも1つの鼻特徴点(例えば、「Dlibの顔ランドマーク」における第45顔特徴点)のうちの1つとして使用し;鼻NE1の一側から最も遠い第1目E1に対応する第2特徴点NF2を少なくとも1つの目特徴点(例えば、「Dlibの顔ランドマーク」における第144顔特徴点)として使用し;鼻NE1の一側に最も近い第1目E1に対応する第4特徴点NF4を少なくとも1つの目特徴点(例えば、「Dlibの顔ランドマーク」における第134顔特徴点)として使用し;第1眉ER1の眉頭に対応する第3特徴点NF3を少なくとも1つの眉特徴点(例えば、「Dlibの顔ランドマーク」における第174顔特徴点)として使用する。 In FIG. 4, the right face image 400 includes a right eye (first eye) E1, a right eyebrow (first eyebrow) ER1, and a nose NE1. In step S320, the processor 130 sets the first feature point NF1 corresponding to the nasal wing near the first eye E1 among at least one nose feature point (for example, the 45th face feature point in the “Dlib face landmark”). The second feature point NF2 corresponding to the first eye E1 that is farthest from one side of the nose NE1 is used as at least one eye feature point (for example, the 144th face feature point in the “face landmark of Dlib”). The fourth feature point NF4 corresponding to the first eye E1 closest to one side of the nose NE1 is used as at least one eye feature point (for example, the 134th face feature point in the “Dlib face landmark”). The third feature point NF3 corresponding to the eyebrow of the first eyebrow ER1 is set to at least one eyebrow feature point (for example, the 174th face feature in “Dlib face landmark”). ) Is used as.
プロセッサ130は、第1特徴点NF1(鼻NE1の鼻翼終点)および第2特徴点NF2(鼻NE1の一側から最も遠い第1目E1の終点)を通過する第1延伸線L1と第3特徴点NF3(第1眉ER1の眉頭終点)の第2水平線L2の交差点に基づいて、第1基準点NR1を取得する。第1基準点NR1は、眉ガイドブロックの眉尻表示点として使用される。 The processor 130 passes the first characteristic point NF1 (end point of the nose NE1 of the nose NE1) and the second characteristic point NF2 (end point of the first eye E1 farthest from one side of the nose NE1) and the third stretch line L1. The first reference point NR1 is acquired based on the intersection of the second horizontal line L2 at the point NF3 (end point of the eyebrow ER1). The first reference point NR1 is used as an eyebrow tail display point of the eyebrow guide block.
プロセッサ130は、第1特徴点NF1(鼻NE1の鼻翼終点)の第3垂直線L3と第3特徴点NF3(第1眉ER1の眉頭終点)の第2水平線L2の交差点に基づいて、第2基準点NR2を取得する。第2基準点NR2は、眉ガイドブロックの眉頭表示点として使用される。 The processor 130 determines the second based on the intersection of the third vertical line L3 of the first feature point NF1 (end of the nose blade of the nose NE1) and the second horizontal line L2 of the third feature point NF3 (end point of the eyebrow of the first eyebrow ER1). The reference point NR2 is acquired. The second reference point NR2 is used as the eyebrow display point of the eyebrow guide block.
上記の計算方法に基づいて眉ガイドブロックの眉頭表示点および眉尻表示点を取得した後、眉ガイドブロックのピーク表示点を見つける必要がある。図5を参照すると、プロセッサ130は、所定の比率に基づいて、第1基準点NR1(眉尻表示点)と第2基準点NR2(眉頭表示点)の間の線分(line segment)から第3基準点NR3を取得する。本実施形態の所定の比率は、第1基準点NR1(眉尻表示点)と第3基準点NR3の間の距離と、第2基準点NR2(眉頭表示点)と第3基準点NR3の間の距離との間の比率であり、その比率は、1:2である。当業者であれば、実際の要求に応じて所定の比率を調整し、眉ピークの相対位置を調整することができる。プロセッサ130は、さらに、第2特徴点NF2(鼻NE1の一側から一番遠い第1目E1の終点)および第4特徴点NF4(鼻NE1の一側から一番近い第1目E1の終点)に基づいて、第4基準点NR4(第1目E1の中間に位置する)を取得する。つまり、第2特徴点NF2と第4基準点NR4の間の距離と、第4特徴点NF4と第4基準点NR4の間の距離との間の比率は、1:1である。そして、プロセッサ130は、第1特徴点NF1(鼻NE1の鼻翼終点)および第4基準点NR4(第1目E1の中間に位置する)を通過する第4延伸線L4と第3基準点NR3の第5垂直線L5の交差点に基づいて、第5基準点NR5を取得する。第5基準点NR5は、眉ガイドブロックの眉ピーク表示点として使用される。このようにして、プロセッサ130は、眉頭表示点(第2基準点NR2)、眉尻表示点(第1基準点NR1)、およびピーク表示点(第5基準点NR5)に基づいて、眉ガイドブロックを取得することができる。 After obtaining the eyebrow head display point and the eyebrow tail display point of the eyebrow guide block based on the above calculation method, it is necessary to find the peak display point of the eyebrow guide block. Referring to FIG. 5, the processor 130 determines, based on a predetermined ratio, a line segment between a first reference point NR1 (eyebrow display point) and a second reference point NR2 (eyebrow display point). 3 Obtain the reference point NR3. The predetermined ratio of this embodiment is that the distance between the first reference point NR1 (eyebrow display point) and the third reference point NR3 and the distance between the second reference point NR2 (eyebrow display point) and the third reference point NR3. And the ratio is 1: 2. Those skilled in the art can adjust the predetermined ratio to adjust the relative position of the eyebrow peak according to actual requirements. The processor 130 further includes a second feature point NF2 (end point of the first eye E1 farthest from one side of the nose NE1) and a fourth feature point NF4 (end point of the first eye E1 closest to one side of the nose NE1). ), The fourth reference point NR4 (located in the middle of the first eye E1) is acquired. That is, the ratio between the distance between the second feature point NF2 and the fourth reference point NR4 and the distance between the fourth feature point NF4 and the fourth reference point NR4 is 1: 1. Then, the processor 130 passes the first characteristic point NF1 (end of the nose blade of the nose NE1) and the fourth reference point NR4 (located in the middle of the first eye E1) to the fourth extension line L4 and the third reference point NR3. The fifth reference point NR5 is acquired based on the intersection of the fifth vertical line L5. The fifth reference point NR5 is used as the eyebrow peak display point of the eyebrow guide block. In this way, the processor 130, based on the eyebrow display point (second reference point NR2), the eyebrow tail display point (first reference point NR1), and the peak display point (fifth reference point NR5), the eyebrow guide block. Can be obtained.
図6は、本発明の1つの実施形態に係る眉ガイドブロックの概略図である。図6は、本実施形態を説明しやすいよう、使用者の右側顔画像の目と眉を拡大してある。図3および図6を参照すると、ステップS340において、プロセッサ130は、顔画像(例えば、右側顔画像400)および対応する眉ガイドブロック600を表示するよう表示ユニット120を制御し、眉ガイドブロック600に基づいてメイクアップをするよう使用者に案内する。本実施形態を説明するため、図6の眉ガイドブロック600と実際の第1眉ER1には大きな差があり、眉ガイドブロック600は、破線で示してある。本実施形態において、図1のプロセッサ130は、さらに、眉ガイドブロック600と顔画像400の実際の眉領域ER1(実線のブロックで示す)を比較することができ、実際の眉領域ER1によって覆われていない眉ガイドブロック600の保留ブロック(例えば、ブロック610)を強調する。このようにして、使用者は、保留ブロック(ブロック610)をアイブロウペンシル(eyebrow pencil)で描く必要があること、そして、おそらく眉ガイドブロック600の外側にある実際の眉領域ER1を剃って形を整える必要があることを知ることができる。また、当業者であれば、図3〜図6の説明に基づいて、使用者の別の半分(左側)の眉ガイドブロックを計算および表示する方法、例えば、左側の鼻翼、目、および眉頭の位置に基づいて、左側の眉ガイドブロックを計算する方法を知ることができるため、ここでは繰り返し説明しない。本実施形態において、顔画像の左側と右側の眉ガイドブロックは、表示ユニット120に同時に表示することができ、図2の撮像ユニット110は、使用者の顔画像をリアルタイムで取り込んで、左側と右側の眉ガイドブロックをすぐに計算することができ、表示ユニット120は、顔画像および対応する眉ガイドブロックをリアルタイムで表示することができる。 FIG. 6 is a schematic view of an eyebrow guide block according to one embodiment of the present invention. FIG. 6 is an enlarged view of the eyes and eyebrows of the right side face image of the user so that the present embodiment can be easily described. Referring to FIGS. 3 and 6, in step S340, the processor 130 controls the display unit 120 to display the facial image (eg, right facial image 400) and the corresponding eyebrow guide block 600, and the eyebrow guide block 600 is displayed. Instruct the user to apply make-up based on this. In order to describe the present embodiment, there is a large difference between the eyebrow guide block 600 in FIG. 6 and the actual first eyebrow ER1, and the eyebrow guide block 600 is shown by a broken line. In the present embodiment, the processor 130 of FIG. 1 can further compare the eyebrow guide block 600 and the actual eyebrow area ER1 (shown by a solid line block) of the face image 400, and the eyebrow area ER1 is covered by the actual eyebrow area ER1. The reserved block (eg, block 610) of the eyebrow guide block 600 that has not been highlighted is highlighted. In this way, the user has to draw the reserve block (block 610) with an eyebrow pencil, and perhaps shave the actual eyebrow region ER1 outside the eyebrow guide block 600 to shape it. You can know that you need to arrange. One of ordinary skill in the art will also calculate and display the other half (left) eyebrow guide block of the user based on the description of FIGS. Since it is possible to know how to calculate the left eyebrow guide block based on the position, it will not be repeated here. In the present embodiment, the left and right eyebrow guide blocks of the face image can be simultaneously displayed on the display unit 120, and the imaging unit 110 of FIG. 2 captures the user's face image in real time to obtain the left and right sides. The eyebrow guide block can be calculated immediately, and the display unit 120 can display the face image and the corresponding eyebrow guide block in real time.
本発明の眉形状ガイド方法は、使用者の選択、例えば、一文字眉、三角眉、柳葉眉、秋波眉等の眉の形状に基づいて、眉ガイドブロックのパターンを調整することができる。あるいは、使用者は、図1に示した表示ユニット120で眉の色と形を選択し、それを表示ユニット120でプレビューしてもよい。別の実施形態において、プロセッサ130は、使用者が選択した色と形に基づいて、眉ガイドブロック600を微調整して、それを表示ユニット120で表示してもよい。 The eyebrow shape guide method of the present invention can adjust the pattern of the eyebrow guide block based on the user's selection, for example, the shape of an eyebrow such as a single-character eyebrow, a triangular eyebrow, a willow leaf eyebrow, an autumn wave eyebrow. Alternatively, the user may select the eyebrow color and shape on the display unit 120 shown in FIG. 1 and preview it on the display unit 120. In another embodiment, the processor 130 may fine-tune the eyebrow guide block 600 based on the color and shape selected by the user and display it on the display unit 120.
以上のように、本発明の眉形状ガイド装置および眉形状ガイド方法は、使用者の顔画像における鼻、目、および眉の位置に基づいて、眉ガイドブロックを計算および表示することができるため、使用者は、形を整える、または強調する必要のある眉の領域を知ることができ、眉形状を正確に調整することができる。このように、使用者がメイクアップに慣れていなくても、使用者は、眉形状ガイド装置によって提供されたプロンプトに基づいて、眉の形を整える、または眉にメイクアップをすることができるため、便利な双方向メイクアップ指導を提供することができる。 As described above, since the eyebrow shape guide device and the eyebrow shape guide method of the present invention can calculate and display the eyebrow guide block based on the positions of the nose, eyes, and eyebrows in the face image of the user, The user can know the area of the eyebrow that needs to be shaped or emphasized, and can accurately adjust the shape of the eyebrow. In this way, even if the user is not familiar with makeup, the user can shape the eyebrow or apply makeup to the eyebrow based on the prompt provided by the eyebrow shape guide device. Can provide convenient interactive makeup instruction.
以上のごとく、この発明を実施形態により開示したが、もとより、この発明を限定するためのものではなく、当業者であれば容易に理解できるように、この発明の技術思想の範囲内において、適当な変更ならびに修正が当然なされうるものであるから、その特許権保護の範囲は、特許請求の範囲および、それと均等な領域を基準として定めなければならない。 As described above, the present invention has been disclosed by the embodiments, but it should be understood that the present invention is not intended to limit the present invention, and is suitable within the scope of the technical idea of the present invention, as can be easily understood by those skilled in the art. Since such changes and modifications can be made as a matter of course, the scope of protection of the patent right must be determined based on the scope of claims and the equivalent area thereof.
本発明の眉形状ガイド装置および眉形状ガイド方法は、携帯機器、消費型電子機器、またはソフトウェアに適用して、眉形状ガイド方法を実行することができる。 The eyebrow shape guide device and the eyebrow shape guide method of the present invention can be applied to a mobile device, a consumer electronic device, or software to execute the eyebrow shape guide method.
100 眉形状ガイド装置
110 撮像ユニット
120 表示ユニット
130 プロセッサ
S310〜S340 眉形状ガイド方法のステップ
400 右側顔画像/第1側顔画像
600 眉ガイドブロック
610 実際の眉領域で覆われていない眉ガイドブロック内の保留ブロック
E1 右目/第1目
ER1 右眉/第1眉
NE1 鼻
NF1〜NF4 特徴点
NR1〜NR5 基準点
L1 第1特徴点と第2特徴点を通過する第1延伸線
L2 第3特徴点の第2水平線
L3 第1特徴点の第3垂直線
L4 第1特徴点と第4基準点を通過する第4延伸線
L5 第3基準点の第5垂直線
100 eyebrow shape guide device 110 imaging unit 120 display unit 130 processor S310 to S340 step of eyebrow shape guide method 400 right side face image / first side face image 600 eyebrow guide block 610 inside eyebrow guide block not covered by actual eyebrow region Reserved block E1 right eye / first eye ER1 right eyebrow / first eyebrow NE1 nose NF1 to NF4 feature point NR1 to NR5 reference point L1 first stretched line passing through first and second feature points L2 third feature point Second horizontal line L3 Third vertical line of first characteristic point L4 Fourth stretched line passing through first characteristic point and fourth reference point L5 Fifth vertical line of third reference point
Claims (7)
前記顔画像を受信し、前記顔画像に基づいて、少なくとも1つの鼻特徴点、少なくとも1つの目特徴点、および少なくとも1つの眉特徴点を取得するとともに、前記少なくとも1つの鼻特徴点、前記少なくとも1つの目特徴点、および前記少なくとも1つの眉特徴点に基づいて計算を行い、眉ガイドブロックを取得するプロセッサと、
前記顔画像および前記対応する眉ガイドブロックを表示し、前記眉ガイドブロックに基づいてメイクアップをするよう前記使用者に案内する表示ユニットと、
を含み、
前記顔画像が、第1側顔画像および第2側顔画像を含み、前記第1側顔画像が、第1目および第1眉を含み、
前記少なくとも1つの鼻特徴点が、前記第1目に近い鼻翼に対応する第1特徴点を含み、前記少なくとも1つの目特徴点が、前記鼻の一側から最も遠い前記第1目に対応する第2特徴点を含み、前記少なくとも1つの眉特徴点が、前記第1眉の眉頭に対応する第3特徴点を含み、
前記プロセッサが、前記第1特徴点および前記第2特徴点を通過する第1延伸線と前記第3特徴点の第2水平線の交差点に基づいて、第1基準点を取得し、前記第1基準点が、前記眉ガイドブロックの眉尻表示点として使用され、
前記プロセッサが、前記第1特徴点の第3垂直線と前記第2水平線の交差点に基づいて、第2基準点を取得し、前記第2基準点が、前記眉ガイドブロックの眉頭表示点として使用され、
前記少なくとも1つの目特徴点が、さらに、前記鼻の一側に最も近い前記第1目に対応する第4特徴点を含み、
前記プロセッサが、所定の比率に基づいて、前記第1基準点と前記第2基準点の間の線分から第3基準点を取得し、
前記第2特徴点および前記第4特徴点に基づいて、前記第1目の中間に位置する第4基準点を取得し、
前記第1特徴点および前記第4基準点を通過する第4延伸線と前記第3基準点の垂直線の間の交差点に基づいて、第5基準点を取得し、前記第5基準点が、前記眉ガイドブロックのピーク表示点として使用される眉形状ガイド装置。 An image pickup unit that captures a user's face image, wherein the face image includes at least the nose portion, the eye portion, and the eyebrow portion of the user;
The face image is received, at least one nose feature point, at least one eye feature point, and at least one eyebrow feature point are acquired based on the face image, and the at least one nose feature point and the at least one nose feature point are acquired. A processor that performs calculation based on one eye feature point and the at least one eyebrow feature point to obtain an eyebrow guide block;
A display unit that displays the face image and the corresponding eyebrow guide block, and guides the user to make up on the basis of the eyebrow guide block;
Only including,
The face image includes a first side face image and a second side face image, the first side face image includes a first eye and a first eyebrow,
The at least one nose feature point includes a first feature point corresponding to a nasal wing near the first eye, and the at least one eye feature point corresponds to the first eye farthest from one side of the nose. Including a second feature point, the at least one eyebrow feature point includes a third feature point corresponding to the eyebrow of the first eyebrow,
The processor obtains a first reference point based on an intersection of a second horizontal line of the third feature point and a first extension line passing through the first feature point and the second feature point, and obtains the first reference point. Points are used as the eyebrow tail display points of the eyebrow guide block,
The processor obtains a second reference point based on an intersection of the third vertical line of the first feature point and the second horizontal line, and the second reference point is used as an eyebrow display point of the eyebrow guide block. Is
The at least one eye feature point further includes a fourth feature point corresponding to the first eye closest to one side of the nose;
The processor obtains a third reference point from a line segment between the first reference point and the second reference point based on a predetermined ratio,
Acquiring a fourth reference point located in the middle of the first eye based on the second feature point and the fourth feature point,
A fifth reference point is acquired based on an intersection between a fourth extension line passing through the first feature point and the fourth reference point and a vertical line of the third reference point, and the fifth reference point is An eyebrow shape guide device used as a peak display point of the eyebrow guide block .
前記第2特徴点と前記第4基準点の間の距離と、前記第4特徴点と前記第4基準点の間の距離との間の比率が、1:1である請求項1に記載の眉形状ガイド装置。 The predetermined ratio is a ratio of 1: 2 between a distance between the first reference point and the third reference point and a distance between the second reference point and the third reference point,
The distance between said fourth reference point and the second feature points, the ratio between the distance between the fourth reference point and the fourth characteristic points, 1: according to claim 1 which is 1 Eyebrow shape guide device.
前記顔画像に基づいて、少なくとも1つの鼻特徴点、少なくとも1つの目特徴点、および少なくとも1つの眉特徴点を取得するステップと、
前記少なくとも1つの鼻特徴点、前記少なくとも1つの目特徴点、および前記少なくとも1つの眉特徴点に基づいて計算を行い、眉ガイドブロックを取得するステップと、
前記顔画像および前記対応する眉ガイドブロックを表示し、前記眉ガイドブロックに基づいてメイクアップをするよう前記使用者に案内するステップと、
を含み、
前記顔画像が、第1側顔画像および第2側顔画像を含み、前記第1側顔画像が、第1目および第1眉を含み、前記少なくとも1つの鼻特徴点が、前記第1目に近い鼻翼に対応する第1特徴点を含み、前記少なくとも1つの目特徴点が、前記鼻の一側から最も遠い前記第1目に対応する第2特徴点を含み、前記少なくとも1つの眉特徴点が、前記第1眉の眉頭に対応する第3特徴点を含み、
前記少なくとも1つの鼻特徴点、前記少なくとも1つの目特徴点、および前記少なくとも1つの眉特徴点に基づいて計算を行い、前記眉ガイドブロックを取得する前記ステップが、
前記第1特徴点および前記第2特徴点を通過する第1延伸線と前記第3特徴点の第2水平線の交差点に基づいて、第1基準点を取得し、前記第1基準点が、前記眉ガイドブロックの眉尻表示点として使用されるステップと、
前記第1特徴点の第3垂直線と前記第2水平線の交差点に基づいて、第2基準点を取得し、前記第2基準点が、前記眉ガイドブロックの眉頭表示点として使用されるステップと、
を含み、
前記少なくとも1つの目特徴点が、さらに、前記鼻の一側に最も近い前記第1目に対応する第4特徴点を含み、
前記少なくとも1つの鼻特徴点、前記少なくとも1つの目特徴点、および前記少なくとも1つの眉特徴点に基づいて計算を行い、前記眉ガイドブロックを取得する前記ステップが、
所定の比率に基づいて、前記第1基準点と前記第2基準点の間の線分から第3基準点を取得するステップと、
前記第2特徴点および前記第4特徴点に基づいて、前記第1目の中間に位置する第4基準点を取得するステップと、
前記第1特徴点および前記第4基準点を通過する第4延伸線と前記第3基準点の垂直線の間の交差点に基づいて、第5基準点を取得し、前記第5基準点が、前記眉ガイドブロックのピーク表示点として使用されるステップと、
を含む眉形状ガイド方法。 Capturing a face image of the user, the face image including at least the nose portion, the eye portion, and the eyebrow portion of the user;
Acquiring at least one nose feature point, at least one eye feature point, and at least one eyebrow feature point based on the face image;
Calculating eyebrow guide blocks based on the at least one nose feature point, the at least one eye feature point, and the at least one eyebrow feature point;
Displaying the face image and the corresponding eyebrow guide block, and guiding the user to make up based on the eyebrow guide block,
Including,
The face image includes a first side face image and a second side face image, the first side face image includes a first eye and a first eyebrow, and the at least one nose feature point is the first eye. The at least one eye feature point includes a second feature point corresponding to the first eye farthest from one side of the nose, and the at least one eyebrow feature. The point includes a third feature point corresponding to the eyebrow of the first eyebrow,
The step of performing a calculation based on the at least one nose feature point, the at least one eye feature point, and the at least one eyebrow feature point to obtain the eyebrow guide block,
A first reference point is acquired based on an intersection of a second horizontal line of the third feature point and a first extension line passing through the first feature point and the second feature point, and the first reference point is the The step used as the eyebrow display point of the eyebrow guide block,
Obtaining a second reference point based on an intersection of the third vertical line of the first feature point and the second horizontal line, and using the second reference point as an eyebrow display point of the eyebrow guide block; ,
Including,
The at least one eye feature point further includes a fourth feature point corresponding to the first eye closest to one side of the nose;
The step of performing a calculation based on the at least one nose feature point, the at least one eye feature point, and the at least one eyebrow feature point to obtain the eyebrow guide block,
Acquiring a third reference point from a line segment between the first reference point and the second reference point based on a predetermined ratio;
Acquiring a fourth reference point located in the middle of the first eye based on the second feature point and the fourth feature point;
A fifth reference point is acquired based on an intersection between a fourth extension line passing through the first feature point and the fourth reference point and a vertical line of the third reference point, and the fifth reference point is A step used as a peak display point of the eyebrow guide block,
Eyebrow shape guide method including .
前記第2特徴点と前記第4基準点の間の距離と、前記第4特徴点と前記第4基準点の間の距離との間の比率が、1:1である請求項5に記載の眉形状ガイド方法。 The predetermined ratio is a ratio of 1: 2 between a distance between the first reference point and the third reference point and a distance between the second reference point and the third reference point,
The distance between said fourth reference point and the second feature points, the ratio between the distance between the fourth reference point and the fourth characteristic points, 1: according to claim 5 which is 1 Eyebrow shape guide method.
The eyebrow shape guide method according to claim 5 , wherein the eyebrow guide block is compared with the eyebrow region of the user of the face image to emphasize the reserved block of the eyebrow guide block that is not covered by the eyebrow region of the user. .
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710342816.6A CN108875462A (en) | 2017-05-16 | 2017-05-16 | Eyebrow moulding guidance device and its method |
CN201710342816.6 | 2017-05-16 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2018192230A JP2018192230A (en) | 2018-12-06 |
JP6691529B2 true JP6691529B2 (en) | 2020-04-28 |
Family
ID=59676947
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017222477A Expired - Fee Related JP6691529B2 (en) | 2017-05-16 | 2017-11-20 | Eyebrow shape guide device and method thereof |
Country Status (5)
Country | Link |
---|---|
US (1) | US10342317B2 (en) |
EP (1) | EP3404577A1 (en) |
JP (1) | JP6691529B2 (en) |
KR (1) | KR102132367B1 (en) |
CN (1) | CN108875462A (en) |
Families Citing this family (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109288233A (en) * | 2017-07-25 | 2019-02-01 | 丽宝大数据股份有限公司 | It is signable to repair the biological information analytical equipment for holding region |
CN109426767A (en) * | 2017-08-24 | 2019-03-05 | 丽宝大数据股份有限公司 | Informer describes guidance device and its method |
TWI702538B (en) * | 2019-03-29 | 2020-08-21 | 麗寶大數據股份有限公司 | Make-up assisting method implemented by make-up assisting device |
KR102273273B1 (en) | 2019-06-20 | 2021-07-06 | (주)케이뷰티솔루션 | Eyebrow makeup practice and eyebrow makeup method using it |
KR102225390B1 (en) | 2019-06-20 | 2021-03-09 | (주)케이뷰티솔루션 | Eyebrow makeup method using eyebrow makeup practice |
CN110378847A (en) * | 2019-06-28 | 2019-10-25 | 北京字节跳动网络技术有限公司 | Face image processing process, device, medium and electronic equipment |
CN110378839A (en) * | 2019-06-28 | 2019-10-25 | 北京字节跳动网络技术有限公司 | Face image processing process, device, medium and electronic equipment |
CN112037271A (en) * | 2020-07-16 | 2020-12-04 | 北京旷视科技有限公司 | Image processing method, apparatus, device and medium |
KR102531236B1 (en) * | 2021-05-03 | 2023-05-11 | 곽다은 | Danee boutique d.l eyebrow technique - technique for drawing more natural eyebrow shape and analyzing shape of eyebrow by approaching from dessin |
JPWO2023026891A1 (en) * | 2021-08-27 | 2023-03-02 | ||
KR20240070958A (en) | 2022-11-15 | 2024-05-22 | 최지현 | Eyebrow drawing guide and method for drawing eyebrow using the same |
Family Cites Families (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3444148B2 (en) * | 1997-07-07 | 2003-09-08 | 株式会社ナビタイムジャパン | Eyebrow drawing method |
EP1975870B1 (en) * | 2006-01-17 | 2020-08-26 | Shiseido Co., Ltd. | Makeup simulation system, makeup simulation device, makeup simulation method, and makeup simulation program |
JP5191665B2 (en) * | 2006-01-17 | 2013-05-08 | 株式会社 資生堂 | Makeup simulation system, makeup simulation apparatus, makeup simulation method, and makeup simulation program |
JP4793823B2 (en) * | 2006-04-26 | 2011-10-12 | 株式会社メガチップス | Makeup assist device and eyebrow drawing assist device |
JP2009064423A (en) * | 2007-08-10 | 2009-03-26 | Shiseido Co Ltd | Makeup simulation system, makeup simulation device, makeup simulation method, and makeup simulation program |
JP2010184008A (en) * | 2009-02-12 | 2010-08-26 | Shiseido Co Ltd | Auxiliary implement for drawing eyebrow |
US8538089B2 (en) * | 2011-12-28 | 2013-09-17 | Arcsoft (Hangzhou) Multimedia Technology Co., Ltd. | Method of performing eyebrow shaping on an image and related computing device |
WO2015029371A1 (en) * | 2013-08-30 | 2015-03-05 | パナソニックIpマネジメント株式会社 | Makeup assistance device, makeup assistance method, and makeup assistance program |
JP6368919B2 (en) * | 2013-08-30 | 2018-08-08 | パナソニックIpマネジメント株式会社 | Makeup support device, makeup support method, and makeup support program |
US8997757B1 (en) * | 2013-10-15 | 2015-04-07 | Anastasia Soare | Golden ratio eyebrow shaping method |
JP6331515B2 (en) | 2014-03-13 | 2018-05-30 | パナソニックIpマネジメント株式会社 | Makeup support device and makeup support method |
CN204889070U (en) * | 2015-08-26 | 2015-12-23 | 北京思湃科技有限公司 | Thrush appurtenance that plucks eyebrows |
US9984282B2 (en) * | 2015-12-10 | 2018-05-29 | Perfect Corp. | Systems and methods for distinguishing facial features for cosmetic application |
CN105760834A (en) * | 2016-02-14 | 2016-07-13 | 北京飞搜科技有限公司 | Face feature point locating method |
-
2017
- 2017-05-16 CN CN201710342816.6A patent/CN108875462A/en active Pending
- 2017-06-30 US US15/638,396 patent/US10342317B2/en not_active Expired - Fee Related
- 2017-07-25 EP EP17183029.2A patent/EP3404577A1/en not_active Withdrawn
- 2017-08-02 KR KR1020170098103A patent/KR102132367B1/en active IP Right Grant
- 2017-11-20 JP JP2017222477A patent/JP6691529B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
US20180332950A1 (en) | 2018-11-22 |
KR102132367B1 (en) | 2020-07-10 |
EP3404577A1 (en) | 2018-11-21 |
US10342317B2 (en) | 2019-07-09 |
JP2018192230A (en) | 2018-12-06 |
KR20180125859A (en) | 2018-11-26 |
CN108875462A (en) | 2018-11-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6691529B2 (en) | Eyebrow shape guide device and method thereof | |
US9563975B2 (en) | Makeup support apparatus and method for supporting makeup | |
KR102172988B1 (en) | Device and method for eyeliner-wearing guide | |
US20130086531A1 (en) | Command issuing device, method and computer program product | |
US11137824B2 (en) | Physical input device in virtual reality | |
JP5798183B2 (en) | Pointing control device, integrated circuit thereof, and pointing control method | |
WO2022110591A1 (en) | Live streaming picture processing method and apparatus based on video chat live streaming, and electronic device | |
JP4733600B2 (en) | Operation detection device and its program | |
CN110531853B (en) | Electronic book reader control method and system based on human eye fixation point detection | |
KR102127351B1 (en) | User terminal device and the control method thereof | |
JP6753829B2 (en) | Lip gloss guidance device and its method | |
US10987198B2 (en) | Image simulation method for orthodontics and image simulation device thereof | |
US10162997B2 (en) | Electronic device, computer readable storage medium and face image display method | |
US10444831B2 (en) | User-input apparatus, method and program for user-input | |
KR102228663B1 (en) | Method of providing photographing guide and system therefor | |
CN105242888A (en) | System control method and electronic device | |
JP6731896B2 (en) | Lip gloss guide device and method | |
JP6632298B2 (en) | Information processing apparatus, information processing method and program | |
KR102152296B1 (en) | Blush guide device and method thereof | |
JP7261261B2 (en) | Information processing device, switching system, program and method | |
KR101861096B1 (en) | Method and apparatus for controlling information displayed on screen by recognizing hand gesture of user | |
CN113486695A (en) | Dressing auxiliary method of cosmetic mirror and cosmetic mirror | |
TW202345097A (en) | Recommendations for image capture | |
JP2014016761A (en) | Image processing apparatus, image processing method, and image generation method and program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190118 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20191217 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20191218 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200316 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200331 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200410 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6691529 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
LAPS | Cancellation because of no payment of annual fees |