JP6691529B2 - Eyebrow shape guide device and method thereof - Google Patents
Eyebrow shape guide device and method thereof Download PDFInfo
- Publication number
- JP6691529B2 JP6691529B2 JP2017222477A JP2017222477A JP6691529B2 JP 6691529 B2 JP6691529 B2 JP 6691529B2 JP 2017222477 A JP2017222477 A JP 2017222477A JP 2017222477 A JP2017222477 A JP 2017222477A JP 6691529 B2 JP6691529 B2 JP 6691529B2
- Authority
- JP
- Japan
- Prior art keywords
- eyebrow
- feature point
- point
- reference point
- face image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 210000004709 eyebrow Anatomy 0.000 title claims description 221
- 238000000034 method Methods 0.000 title claims description 22
- 238000004364 calculation method Methods 0.000 claims description 11
- 230000001815 facial effect Effects 0.000 description 12
- 238000003384 imaging method Methods 0.000 description 10
- 238000010586 diagram Methods 0.000 description 7
- 230000002452 interceptive effect Effects 0.000 description 3
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 1
- 241000646858 Salix arbusculoides Species 0.000 description 1
- 230000003796 beauty Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 239000000843 powder Substances 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/168—Feature extraction; Face representation
- G06V40/171—Local features and components; Facial parts ; Occluding parts, e.g. glasses; Geometrical relationships
-
- A—HUMAN NECESSITIES
- A45—HAND OR TRAVELLING ARTICLES
- A45D—HAIRDRESSING OR SHAVING EQUIPMENT; EQUIPMENT FOR COSMETICS OR COSMETIC TREATMENTS, e.g. FOR MANICURING OR PEDICURING
- A45D44/00—Other cosmetic or toiletry articles, e.g. for hairdressers' rooms
- A45D44/22—Face shaping devices, e.g. chin straps; Wrinkle removers, e.g. stretching the skin
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
- G06T11/60—Editing figures and text; Combining figures or text
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/20—Scenes; Scene-specific elements in augmented reality scenes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/161—Detection; Localisation; Normalisation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/172—Classification, e.g. identification
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Oral & Maxillofacial Surgery (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- General Health & Medical Sciences (AREA)
- Physics & Mathematics (AREA)
- Multimedia (AREA)
- Human Computer Interaction (AREA)
- Business, Economics & Management (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Tourism & Hospitality (AREA)
- Economics (AREA)
- Human Resources & Organizations (AREA)
- Marketing (AREA)
- Primary Health Care (AREA)
- Strategic Management (AREA)
- General Business, Economics & Management (AREA)
- Image Processing (AREA)
- Image Analysis (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Description
本発明は、顔特徴認識技術に関するものであり、特に、顔の様々な部分の認識に基づく眉形状ガイド装置およびその方法に関するものである。 The present invention relates to a facial feature recognition technique, and more particularly, to an eyebrow shape guide device and method based on recognition of various parts of a face.
美しさへの愛は、女性の本能である。多くの女性は、唇、目、眉などをメイクアップ（makeup）することによって顔特徴を追加し、見た目を整える。しかしながら、メイクアップ技術は、生まれつき備わっているものではなく、何度も練習してからメイクアップ効果を向上させることができる。 Love for beauty is a woman's instinct. Many women add facial features and make them look better by making up the lips, eyes, eyebrows, etc. However, the makeup technique is not a natural technique and can be practiced many times to improve the makeup effect.
メイクアップ技術を学びたければ、インターネット上の画像から学ぶことができる。しかしながら、画像および／または動画から学ぶメイクアップ技術は、実際には差がある。そのため、最新機器を用いていかにしてメイクアップ技術を学ぶかが、製造業者にとって関心のある技術課題である。 If you want to learn makeup technology, you can learn from images on the Internet. However, the makeup techniques learned from images and / or videos are actually different. Therefore, whether or not to learn makeup technology by using the latest equipment is a technical issue of interest to manufacturers.
本発明は、使用者の顔画像に基づいてより美しい眉形状ガイドブロックを表示する眉形状ガイド装置および眉形状ガイド方法に関するものであり、使用者は、眉形状ガイド装置によって提供されたプロンプト（prompt）に基づいて、眉の形を整える、あるいは眉にメイクアップをすることができるため、便利な双方向メイクアップ指導を提供することができる。 The present invention relates to an eyebrow shape guide device and a eyebrow shape guide method for displaying a more beautiful eyebrow shape guide block based on a face image of a user, and a user is prompted by the eyebrow shape guide device. ), The shape of the eyebrows can be adjusted or makeup can be applied to the eyebrows, so that a convenient interactive makeup instruction can be provided.
本発明は、撮像ユニットと、プロセッサと、表示ユニットとを含む眉形状ガイド装置を提供する。撮像ユニットは、使用者の顔画像を取り込み、顔画像は、少なくとも使用者の鼻部分、目部分、および眉部分を含む。プロセッサは、顔画像を受信し、その顔画像に基づいて、少なくとも１つの鼻特徴点、少なくとも１つの目特徴点、および少なくとも１つの眉特徴点を取得するとともに、プロセッサは、少なくとも１つの鼻特徴点、少なくとも１つの目特徴点、および少なくとも１つの眉特徴点に基づいて計算を行い、眉ガイドブロックを取得する。表示ユニットは、顔画像および対応する眉ガイドブロックを表示し、眉ガイドブロックに基づいてメイクアップをするよう使用者に案内する。 The present invention provides an eyebrow shape guide device including an image pickup unit, a processor, and a display unit. The imaging unit captures a face image of the user, and the face image includes at least the nose portion, the eye portion, and the eyebrow portion of the user. A processor receives the face image and obtains at least one nose feature point, at least one eye feature point, and at least one eyebrow feature point based on the face image, and the processor is configured to provide the at least one nose feature point. A calculation is performed based on the points, at least one eye feature point, and at least one eyebrow feature point to obtain an eyebrow guide block. The display unit displays the face image and the corresponding eyebrow guide block, and guides the user to make up based on the eyebrow guide block.
本発明は、以下のステップを含む眉形状ガイド方法を提供する。使用者の顔画像を取り込み、顔画像は、少なくとも使用者の鼻部分、目部分、および眉部分を含む。顔画像に基づいて、少なくとも１つの鼻特徴点、少なくとも１つの目特徴点、および少なくとも１つの眉特徴点を取得するとともに、少なくとも１つの鼻特徴点、少なくとも１つの目特徴点、および少なくとも１つの眉特徴点に基づいて計算を行い、眉ガイドブロックを取得する。顔画像および対応する眉ガイドブロックを表示し、眉ガイドブロックに基づいてメイクアップをするよう使用者に案内する。 The present invention provides an eyebrow shape guide method including the following steps. A face image of the user is captured, and the face image includes at least the nose portion, the eye portion, and the eyebrow portion of the user. At least one nose feature point, at least one eye feature point, and at least one eyebrow feature point are acquired based on the face image, and at least one nose feature point, at least one eye feature point, and at least one An eyebrow guide block is obtained by performing calculation based on eyebrow feature points. The face image and the corresponding eyebrow guide block are displayed, and the user is guided to make up based on the eyebrow guide block.
以上のように、本発明の眉形状ガイド装置および眉形状ガイド方法は、使用者の顔画像における鼻、目、および眉の位置に基づいて、眉ガイドブロックを計算および表示することができるため、使用者は、形を整える、または強調する必要のある眉の領域を知ることができ、眉形状を正確に調整することができる。このように、使用者がメイクアップに慣れていなくても、使用者は、眉形状ガイド装置によって提供されたプロンプトに基づいて、眉の形を整える、または眉にメイクアップをすることができるため、便利な双方向メイクアップ指導を提供することができる。 As described above, since the eyebrow shape guide device and the eyebrow shape guide method of the present invention can calculate and display the eyebrow guide block based on the positions of the nose, eyes, and eyebrows in the face image of the user, The user can know the area of the eyebrow that needs to be shaped or emphasized, and can accurately adjust the shape of the eyebrow. In this way, even if the user is not familiar with makeup, the user can shape the eyebrow or apply makeup to the eyebrow based on the prompt provided by the eyebrow shape guide device. Can provide convenient interactive makeup instruction.
本発明の上記および他の目的、特徴、および利点をより分かり易くするため、図面と併せた幾つかの実施形態を以下に説明する。 In order to make the above and other objects, features, and advantages of the present invention more comprehensible, several embodiments in combination with the drawings are described below.
添付図面は、本発明の原理がさらに理解されるために含まれており、本明細書に組み込まれかつその一部を構成するものである。図面は、本発明の実施形態を例示しており、説明とともに、本発明の原理を説明する役割を果たしている。 The accompanying drawings are included to provide a further understanding of the principles of the invention and are incorporated into and constitute a part of this specification. The drawings illustrate embodiments of the invention and, together with the description, serve to explain the principles of the invention.
図１は、本発明の１つの実施形態に係る眉形状ガイド装置の表示インターフェースの概略図であり、図２は、本発明の１つの実施形態に係る眉形状のシステムブロック図である。図１および図２を参照すると、本実施形態において、眉形状ガイド装置１００は、撮像ユニット１１０、マルチメディア表示ユニット１２０、およびプロセッサ１３０を含む。 FIG. 1 is a schematic diagram of a display interface of an eyebrow shape guide device according to one embodiment of the present invention, and FIG. 2 is a system block diagram of an eyebrow shape according to one embodiment of the present invention. Referring to FIGS. 1 and 2, in the present embodiment, the eyebrow shape guide device 100 includes an imaging unit 110, a multimedia display unit 120, and a processor 130.
撮像ユニット１１０は、使用者の顔画像を取り込むために使用される。本実施形態は、使用者の顔画像における鼻部分、目部分、および眉部分の位置に基づいて、眉形状の理想の位置を計算するため、使用者の顔画像は、顔の左半分か右半分の鼻部分、目部分、および眉部分を含む必要があり、それにより、左側眉または右側眉の好ましい相対位置を計算する。撮像ユニット１１０は、例えば、内蔵ビデオカメラやカメラ、あるいは外付けの携帯電話やカメラ等であるが、本発明はこれに限定されない。 The imaging unit 110 is used to capture a face image of the user. In the present embodiment, the ideal position of the eyebrow shape is calculated based on the positions of the nose part, the eye part, and the eyebrow part in the face image of the user. It should include half the nose, eye, and eyebrow portions to calculate the preferred relative position of the left or right eyebrow. The imaging unit 110 is, for example, a built-in video camera or camera, or an external mobile phone or camera, but the present invention is not limited to this.
表示ユニット１２０は、マルチメディア情報および使用者の顔画像をリアルタイムで表示することができる。例えば、表示ユニット１２０は、使用者の顔画像を表示して、使用者が選択できるよう、複数の眉形状および眉カラーの選択肢を提供する。本実施形態において、表示ユニット１２０は、高反射率の材料（例えば、鏡）の後方に配置され、有機発光ダイオード（organic light-emitting diodes, OLED）と結合したディスプレイであってもよい。このようにして、使用者は、鏡を通して自分の顔を見ることができ、表示ユニット１２０は、使用者が見てタッチ選択できるよう、鏡に関連情報を表示することができるが、本発明はこれに限定されない。本実施形態の眉形状ガイド装置１００は、メイク台の上に配置された装置であってもよく、眉形状ガイド装置１００の画面は、鏡の後方に配置されてもよい。その上に表示されるテキストや画像は、使用者が見られるよう、鏡を通過することができる。別の実施形態において、眉形状ガイド装置１００は、スマートフォンやタブレットＰＣ等の消費型電子製品、または携帯型の鏡と結合した携帯型のミラーボックスであってもよい。 The display unit 120 can display the multimedia information and the face image of the user in real time. For example, the display unit 120 displays a face image of the user and provides a plurality of eyebrow shape and eyebrow color options for the user to select. In the present embodiment, the display unit 120 may be a display disposed behind a high-reflectance material (for example, a mirror) and combined with organic light-emitting diodes (OLED). In this way, the user can see his / her face through the mirror and the display unit 120 can display relevant information on the mirror for the user to see and touch select. It is not limited to this. The eyebrow shape guide device 100 of the present embodiment may be a device arranged on the makeup table, and the screen of the eyebrow shape guide device 100 may be arranged behind the mirror. The text and images displayed on it can pass through a mirror for viewing by the user. In another embodiment, the eyebrow shape guide device 100 may be a consumable electronic product such as a smartphone or a tablet PC, or a portable mirror box combined with a portable mirror.
プロセッサ１３０は、撮像ユニット１１０によって取り込まれた使用者の顔画像に基づいて計算を行い、使用者の顔に関連する使用者の複数の顔特徴点、例えば、少なくとも１つの鼻特徴点、少なくとも１つの目特徴点、および少なくとも１つの眉特徴点を取得する。また、プロセッサ１３０は、上述した特徴点に基づいて計算を行い、眉ガイドブロックを取得するとともに、使用者の顔画像および眉ガイドブロックを表示ユニット１２０で表示し、眉ガイドブロックに基づいてメイクアップをするよう使用者に案内する。例えば、本実施形態の実施において、プロセッサ１３０は、中央処理装置（central processing unit, CPU）、マイクロプロセッサ（microprocessor）、特定用途向け集積回路（application specific integrated circuits, ASIC）、プログラマブルロジックデバイス（programmable logic device, PLD）、または他の類似する装置であってもよい。プロセッサ１３０は、眉ガイドブロックを提供するために必要な様々なソフトウェアプログラムおよび／または命令セットを実行するよう構成される。本実施形態において、プロセッサ１３０は、Ｄｌｉｂの顔ランドマーク（Dlibface landmark）を使用する顔検出システムを実行し、使用者の顔の１９４個の顔特徴点を検出および分析する。これらの顔特徴点は、それぞれ使用者の顔の各部分、例えば、目、眉、鼻、唇、頬、顎輪郭等を示す。別の場合において、使用者の顔特徴点は、使用者の顔の１１９個のみの顔特徴を分析することによって取得してもよく、または別の顔特徴点アルゴリズムを使用して使用者の顔特徴点を検出することによって取得してもよい。 The processor 130 performs a calculation based on the facial image of the user captured by the imaging unit 110, and the plurality of facial feature points of the user, such as at least one nose feature point and at least one, associated with the user's face. One eye feature point and at least one eyebrow feature point are acquired. In addition, the processor 130 performs calculation based on the above-mentioned feature points to acquire the eyebrow guide block, displays the face image of the user and the eyebrow guide block on the display unit 120, and makes up makeup based on the eyebrow guide block. Instruct the user to do For example, in the implementation of the present embodiment, the processor 130 includes a central processing unit (CPU), a microprocessor, an application specific integrated circuit (ASIC), and a programmable logic device (programmable logic device). device, PLD), or other similar device. Processor 130 is configured to execute various software programs and / or instruction sets required to provide the eyebrow guide block. In this embodiment, the processor 130 executes a face detection system that uses Dlib face landmarks to detect and analyze 194 facial feature points on the user's face. These facial feature points indicate respective parts of the user's face, such as eyes, eyebrows, nose, lips, cheeks, and chin contour. In other cases, the user's facial feature points may be obtained by analyzing only 119 facial features of the user's face, or using another facial feature point algorithm. You may acquire by detecting a feature point.
本実施形態において、使用者が鏡に向かってメイクアップをする時、表示ユニット１２０は、使用者の顔画像を表示して、顔画像における顔特徴点をリアルタイムで分析することができる。眉形状ガイド装置との相互作用を便利にするため、本発明は、さらに、使用者の鼻の両側にある鼻翼、目、および眉等の位置に基づいて、メイクアップをガイドするための眉ガイドブロックを計算し、使用者の顔画像に対応して表示ユニット１２０に眉ガイドブロックを表示することにより、形を整える、またはメイクアップをする必要のある眉の位置を使用者に指示する。また、使用者は、図１に示した表示インターフェースを介して眉ガイドブロックの厚さ、位置、形状を調整することにより、使用者の要求を満たすことができる。このようにして、使用者は、表示ユニット１２０によって表示された眉ガイドブロックのガイダンスに基づいて、使用者の眉の実際の位置にアイブロウペンシルやアイブロウパウダーを用いて眉の形を整える、またはメイクアップをすることができる。言及すべきこととして、眉ガイドブロックは、鼻、目、および眉の位置に基づいて計算された理想の眉の位置に、点線で形成される。しかしながら、眉ガイドブロックを表示する方法は、これに限定されない。別の実施形態において、眉ガイドブロックを表示する方法は、使用者の実際の眉を直接基準として使用して眉表示ブロックを調整し、調整した眉表示ブロックを眉ガイドブロックとして使用する。 In the present embodiment, when the user makes a make-up in the mirror, the display unit 120 may display the face image of the user and analyze the facial feature points in the face image in real time. To facilitate the interaction with the eyebrow shape guide device, the present invention further provides an eyebrow guide for guiding makeup based on the positions of the nose wings, eyes, eyebrows, etc. on both sides of the user's nose. By calculating a block and displaying an eyebrow guide block on the display unit 120 corresponding to the user's face image, the user is instructed on the position of the eyebrow that needs to be trimmed or made up. Further, the user can meet the user's request by adjusting the thickness, position and shape of the eyebrow guide block via the display interface shown in FIG. In this way, the user uses the eyebrow pencil or the eyebrow powder to adjust the shape of the eyebrow or make-up at the actual position of the eyebrow of the user based on the guidance of the eyebrow guide block displayed by the display unit 120. You can up. It should be noted that the eyebrow guide block is formed by a dotted line at the ideal eyebrow position calculated based on the positions of the nose, eyes, and eyebrows. However, the method of displaying the eyebrow guide block is not limited to this. In another embodiment, the method of displaying the eyebrow guide block adjusts the eyebrow display block using the user's actual eyebrow as a direct reference, and uses the adjusted eyebrow display block as the eyebrow guide block.
図３は、本発明の１つの実施形態に係る眉形状ガイド方法を示すフローチャートである。図４は、本発明の眉ガイドブロックの眉頭表示点および眉尻表示点を計算する概略図である。図５は、本発明の眉ガイドブロックの眉頭表示点、眉尻表示点、および眉山表示点を計算する概略図である。 FIG. 3 is a flowchart illustrating an eyebrow shape guide method according to an exemplary embodiment of the present invention. FIG. 4 is a schematic diagram for calculating eyebrow display points and eyebrow display points of the eyebrow guide block of the present invention. FIG. 5 is a schematic diagram of calculating eyebrow display points, eyebrow display points, and eyebrow display points of the eyebrow guide block of the present invention.
図１および図３を参照すると、ステップＳ３１０において、撮像ユニット１１０は、まず、使用者の顔画像を取り込み、顔画像は、少なくとも使用者の鼻部分、目部分、および眉部分を含む。ステップＳ３２０において、プロセッサ１３０は、撮像ユニット１１０から顔画像を受信し、顔画像に基づいて、少なくとも１つの鼻特徴点、少なくとも１つの目特徴点、および少なくとも１つの眉特徴点を取得する。本実施形態において、顔画像は、第１側顔画像（例えば、右側顔画像）および第２側顔画像（左側顔画像）を含み、プロセッサ１３０は、撮像ユニット１１０を介して２つの側のうちの１つの顔画像を取得して、対応する眉ガイドブロックを計算することができる。 Referring to FIGS. 1 and 3, in step S310, the imaging unit 110 first captures a face image of the user, and the face image includes at least the nose portion, the eye portion, and the eyebrow portion of the user. In step S320, the processor 130 receives a face image from the imaging unit 110 and acquires at least one nose feature point, at least one eye feature point, and at least one eyebrow feature point based on the face image. In the present embodiment, the face image includes a first side face image (for example, a right side face image) and a second side face image (a left side face image), and the processor 130 selects one of the two sides via the imaging unit 110. Can be obtained and the corresponding eyebrow guide block can be calculated.
ステップＳ３３０において、プロセッサ１３０は、ステップＳ３２０で取得した少なくとも１つの鼻特徴点、少なくとも１つの目特徴点、および少なくとも１つの眉特徴点に基づいて計算を行い、眉ガイドブロックを取得する。図４は、図５のステップＳ３３０に対応する概略図である。図４を参照し、使用者の右側顔画像（第１側顔画像）を例に挙げて説明すると、言及すべきこととして、図４および図５は、使用者の右側顔画像のみを示し、右側顔画像の眉ガイドブロックの計算方法について説明しているが、当業者であれば、同様の方法に基づいて、左側顔画像の眉ガイドブロックの計算方法も推測することができる。 In step S330, the processor 130 performs calculation based on the at least one nose feature point, at least one eye feature point, and at least one eyebrow feature point acquired in step S320 to obtain an eyebrow guide block. FIG. 4 is a schematic diagram corresponding to step S330 of FIG. Referring to FIG. 4, the right side face image (first side face image) of the user will be described as an example. It should be noted that FIGS. 4 and 5 show only the right side face image of the user, Although the calculation method of the eyebrow guide block of the right side face image has been described, those skilled in the art can also estimate the calculation method of the eyebrow guide block of the left side face image based on the similar method.
図４において、右側顔画像４００は、右目（第１目）Ｅ１、右眉（第１眉）ＥＲ１、および鼻ＮＥ１を含む。ステップＳ３２０において、プロセッサ１３０は、第１目Ｅ１に近い鼻翼に対応する第１特徴点ＮＦ１を少なくとも１つの鼻特徴点（例えば、「Ｄｌｉｂの顔ランドマーク」における第４５顔特徴点）のうちの１つとして使用し；鼻ＮＥ１の一側から最も遠い第１目Ｅ１に対応する第２特徴点ＮＦ２を少なくとも１つの目特徴点（例えば、「Ｄｌｉｂの顔ランドマーク」における第１４４顔特徴点）として使用し；鼻ＮＥ１の一側に最も近い第１目Ｅ１に対応する第４特徴点ＮＦ４を少なくとも１つの目特徴点（例えば、「Ｄｌｉｂの顔ランドマーク」における第１３４顔特徴点）として使用し；第１眉ＥＲ１の眉頭に対応する第３特徴点ＮＦ３を少なくとも１つの眉特徴点（例えば、「Ｄｌｉｂの顔ランドマーク」における第１７４顔特徴点）として使用する。 In FIG. 4, the right face image 400 includes a right eye (first eye) E1, a right eyebrow (first eyebrow) ER1, and a nose NE1. In step S320, the processor 130 sets the first feature point NF1 corresponding to the nasal wing near the first eye E1 among at least one nose feature point (for example, the 45th face feature point in the “Dlib face landmark”). The second feature point NF2 corresponding to the first eye E1 that is farthest from one side of the nose NE1 is used as at least one eye feature point (for example, the 144th face feature point in the “face landmark of Dlib”). The fourth feature point NF4 corresponding to the first eye E1 closest to one side of the nose NE1 is used as at least one eye feature point (for example, the 134th face feature point in the “Dlib face landmark”). The third feature point NF3 corresponding to the eyebrow of the first eyebrow ER1 is set to at least one eyebrow feature point (for example, the 174th face feature in “Dlib face landmark”). ) Is used as.
プロセッサ１３０は、第１特徴点ＮＦ１（鼻ＮＥ１の鼻翼終点）および第２特徴点ＮＦ２（鼻ＮＥ１の一側から最も遠い第１目Ｅ１の終点）を通過する第１延伸線Ｌ１と第３特徴点ＮＦ３（第１眉ＥＲ１の眉頭終点）の第２水平線Ｌ２の交差点に基づいて、第１基準点ＮＲ１を取得する。第１基準点ＮＲ１は、眉ガイドブロックの眉尻表示点として使用される。 The processor 130 passes the first characteristic point NF1 (end point of the nose NE1 of the nose NE1) and the second characteristic point NF2 (end point of the first eye E1 farthest from one side of the nose NE1) and the third stretch line L1. The first reference point NR1 is acquired based on the intersection of the second horizontal line L2 at the point NF3 (end point of the eyebrow ER1). The first reference point NR1 is used as an eyebrow tail display point of the eyebrow guide block.
プロセッサ１３０は、第１特徴点ＮＦ１（鼻ＮＥ１の鼻翼終点）の第３垂直線Ｌ３と第３特徴点ＮＦ３（第１眉ＥＲ１の眉頭終点）の第２水平線Ｌ２の交差点に基づいて、第２基準点ＮＲ２を取得する。第２基準点ＮＲ２は、眉ガイドブロックの眉頭表示点として使用される。 The processor 130 determines the second based on the intersection of the third vertical line L3 of the first feature point NF1 (end of the nose blade of the nose NE1) and the second horizontal line L2 of the third feature point NF3 (end point of the eyebrow of the first eyebrow ER1). The reference point NR2 is acquired. The second reference point NR2 is used as the eyebrow display point of the eyebrow guide block.
上記の計算方法に基づいて眉ガイドブロックの眉頭表示点および眉尻表示点を取得した後、眉ガイドブロックのピーク表示点を見つける必要がある。図５を参照すると、プロセッサ１３０は、所定の比率に基づいて、第１基準点ＮＲ１（眉尻表示点）と第２基準点ＮＲ２（眉頭表示点）の間の線分（line segment）から第３基準点ＮＲ３を取得する。本実施形態の所定の比率は、第１基準点ＮＲ１（眉尻表示点）と第３基準点ＮＲ３の間の距離と、第２基準点ＮＲ２（眉頭表示点）と第３基準点ＮＲ３の間の距離との間の比率であり、その比率は、１：２である。当業者であれば、実際の要求に応じて所定の比率を調整し、眉ピークの相対位置を調整することができる。プロセッサ１３０は、さらに、第２特徴点ＮＦ２（鼻ＮＥ１の一側から一番遠い第１目Ｅ１の終点）および第４特徴点ＮＦ４（鼻ＮＥ１の一側から一番近い第１目Ｅ１の終点）に基づいて、第４基準点ＮＲ４（第１目Ｅ１の中間に位置する）を取得する。つまり、第２特徴点ＮＦ２と第４基準点ＮＲ４の間の距離と、第４特徴点ＮＦ４と第４基準点ＮＲ４の間の距離との間の比率は、１：１である。そして、プロセッサ１３０は、第１特徴点ＮＦ１（鼻ＮＥ１の鼻翼終点）および第４基準点ＮＲ４（第１目Ｅ１の中間に位置する）を通過する第４延伸線Ｌ４と第３基準点ＮＲ３の第５垂直線Ｌ５の交差点に基づいて、第５基準点ＮＲ５を取得する。第５基準点ＮＲ５は、眉ガイドブロックの眉ピーク表示点として使用される。このようにして、プロセッサ１３０は、眉頭表示点（第２基準点ＮＲ２）、眉尻表示点（第１基準点ＮＲ１）、およびピーク表示点（第５基準点ＮＲ５）に基づいて、眉ガイドブロックを取得することができる。 After obtaining the eyebrow head display point and the eyebrow tail display point of the eyebrow guide block based on the above calculation method, it is necessary to find the peak display point of the eyebrow guide block. Referring to FIG. 5, the processor 130 determines, based on a predetermined ratio, a line segment between a first reference point NR1 (eyebrow display point) and a second reference point NR2 (eyebrow display point). 3 Obtain the reference point NR3. The predetermined ratio of this embodiment is that the distance between the first reference point NR1 (eyebrow display point) and the third reference point NR3 and the distance between the second reference point NR2 (eyebrow display point) and the third reference point NR3. And the ratio is 1: 2. Those skilled in the art can adjust the predetermined ratio to adjust the relative position of the eyebrow peak according to actual requirements. The processor 130 further includes a second feature point NF2 (end point of the first eye E1 farthest from one side of the nose NE1) and a fourth feature point NF4 (end point of the first eye E1 closest to one side of the nose NE1). ), The fourth reference point NR4 (located in the middle of the first eye E1) is acquired. That is, the ratio between the distance between the second feature point NF2 and the fourth reference point NR4 and the distance between the fourth feature point NF4 and the fourth reference point NR4 is 1: 1. Then, the processor 130 passes the first characteristic point NF1 (end of the nose blade of the nose NE1) and the fourth reference point NR4 (located in the middle of the first eye E1) to the fourth extension line L4 and the third reference point NR3. The fifth reference point NR5 is acquired based on the intersection of the fifth vertical line L5. The fifth reference point NR5 is used as the eyebrow peak display point of the eyebrow guide block. In this way, the processor 130, based on the eyebrow display point (second reference point NR2), the eyebrow tail display point (first reference point NR1), and the peak display point (fifth reference point NR5), the eyebrow guide block. Can be obtained.
図６は、本発明の１つの実施形態に係る眉ガイドブロックの概略図である。図６は、本実施形態を説明しやすいよう、使用者の右側顔画像の目と眉を拡大してある。図３および図６を参照すると、ステップＳ３４０において、プロセッサ１３０は、顔画像（例えば、右側顔画像４００）および対応する眉ガイドブロック６００を表示するよう表示ユニット１２０を制御し、眉ガイドブロック６００に基づいてメイクアップをするよう使用者に案内する。本実施形態を説明するため、図６の眉ガイドブロック６００と実際の第１眉ＥＲ１には大きな差があり、眉ガイドブロック６００は、破線で示してある。本実施形態において、図１のプロセッサ１３０は、さらに、眉ガイドブロック６００と顔画像４００の実際の眉領域ＥＲ１（実線のブロックで示す）を比較することができ、実際の眉領域ＥＲ１によって覆われていない眉ガイドブロック６００の保留ブロック（例えば、ブロック６１０）を強調する。このようにして、使用者は、保留ブロック（ブロック６１０）をアイブロウペンシル（eyebrow pencil）で描く必要があること、そして、おそらく眉ガイドブロック６００の外側にある実際の眉領域ＥＲ１を剃って形を整える必要があることを知ることができる。また、当業者であれば、図３〜図６の説明に基づいて、使用者の別の半分（左側）の眉ガイドブロックを計算および表示する方法、例えば、左側の鼻翼、目、および眉頭の位置に基づいて、左側の眉ガイドブロックを計算する方法を知ることができるため、ここでは繰り返し説明しない。本実施形態において、顔画像の左側と右側の眉ガイドブロックは、表示ユニット１２０に同時に表示することができ、図２の撮像ユニット１１０は、使用者の顔画像をリアルタイムで取り込んで、左側と右側の眉ガイドブロックをすぐに計算することができ、表示ユニット１２０は、顔画像および対応する眉ガイドブロックをリアルタイムで表示することができる。 FIG. 6 is a schematic view of an eyebrow guide block according to one embodiment of the present invention. FIG. 6 is an enlarged view of the eyes and eyebrows of the right side face image of the user so that the present embodiment can be easily described. Referring to FIGS. 3 and 6, in step S340, the processor 130 controls the display unit 120 to display the facial image (eg, right facial image 400) and the corresponding eyebrow guide block 600, and the eyebrow guide block 600 is displayed. Instruct the user to apply make-up based on this. In order to describe the present embodiment, there is a large difference between the eyebrow guide block 600 in FIG. 6 and the actual first eyebrow ER1, and the eyebrow guide block 600 is shown by a broken line. In the present embodiment, the processor 130 of FIG. 1 can further compare the eyebrow guide block 600 and the actual eyebrow area ER1 (shown by a solid line block) of the face image 400, and the eyebrow area ER1 is covered by the actual eyebrow area ER1. The reserved block (eg, block 610) of the eyebrow guide block 600 that has not been highlighted is highlighted. In this way, the user has to draw the reserve block (block 610) with an eyebrow pencil, and perhaps shave the actual eyebrow region ER1 outside the eyebrow guide block 600 to shape it. You can know that you need to arrange. One of ordinary skill in the art will also calculate and display the other half (left) eyebrow guide block of the user based on the description of FIGS. Since it is possible to know how to calculate the left eyebrow guide block based on the position, it will not be repeated here. In the present embodiment, the left and right eyebrow guide blocks of the face image can be simultaneously displayed on the display unit 120, and the imaging unit 110 of FIG. 2 captures the user's face image in real time to obtain the left and right sides. The eyebrow guide block can be calculated immediately, and the display unit 120 can display the face image and the corresponding eyebrow guide block in real time.
本発明の眉形状ガイド方法は、使用者の選択、例えば、一文字眉、三角眉、柳葉眉、秋波眉等の眉の形状に基づいて、眉ガイドブロックのパターンを調整することができる。あるいは、使用者は、図１に示した表示ユニット１２０で眉の色と形を選択し、それを表示ユニット１２０でプレビューしてもよい。別の実施形態において、プロセッサ１３０は、使用者が選択した色と形に基づいて、眉ガイドブロック６００を微調整して、それを表示ユニット１２０で表示してもよい。 The eyebrow shape guide method of the present invention can adjust the pattern of the eyebrow guide block based on the user's selection, for example, the shape of an eyebrow such as a single-character eyebrow, a triangular eyebrow, a willow leaf eyebrow, an autumn wave eyebrow. Alternatively, the user may select the eyebrow color and shape on the display unit 120 shown in FIG. 1 and preview it on the display unit 120. In another embodiment, the processor 130 may fine-tune the eyebrow guide block 600 based on the color and shape selected by the user and display it on the display unit 120.
以上のように、本発明の眉形状ガイド装置および眉形状ガイド方法は、使用者の顔画像における鼻、目、および眉の位置に基づいて、眉ガイドブロックを計算および表示することができるため、使用者は、形を整える、または強調する必要のある眉の領域を知ることができ、眉形状を正確に調整することができる。このように、使用者がメイクアップに慣れていなくても、使用者は、眉形状ガイド装置によって提供されたプロンプトに基づいて、眉の形を整える、または眉にメイクアップをすることができるため、便利な双方向メイクアップ指導を提供することができる。 As described above, since the eyebrow shape guide device and the eyebrow shape guide method of the present invention can calculate and display the eyebrow guide block based on the positions of the nose, eyes, and eyebrows in the face image of the user, The user can know the area of the eyebrow that needs to be shaped or emphasized, and can accurately adjust the shape of the eyebrow. In this way, even if the user is not familiar with makeup, the user can shape the eyebrow or apply makeup to the eyebrow based on the prompt provided by the eyebrow shape guide device. Can provide convenient interactive makeup instruction.
以上のごとく、この発明を実施形態により開示したが、もとより、この発明を限定するためのものではなく、当業者であれば容易に理解できるように、この発明の技術思想の範囲内において、適当な変更ならびに修正が当然なされうるものであるから、その特許権保護の範囲は、特許請求の範囲および、それと均等な領域を基準として定めなければならない。 As described above, the present invention has been disclosed by the embodiments, but it should be understood that the present invention is not intended to limit the present invention, and is suitable within the scope of the technical idea of the present invention, as can be easily understood by those skilled in the art. Since such changes and modifications can be made as a matter of course, the scope of protection of the patent right must be determined based on the scope of claims and the equivalent area thereof.
本発明の眉形状ガイド装置および眉形状ガイド方法は、携帯機器、消費型電子機器、またはソフトウェアに適用して、眉形状ガイド方法を実行することができる。 The eyebrow shape guide device and the eyebrow shape guide method of the present invention can be applied to a mobile device, a consumer electronic device, or software to execute the eyebrow shape guide method.
１００ 眉形状ガイド装置
１１０ 撮像ユニット
１２０ 表示ユニット
１３０ プロセッサ
Ｓ３１０〜Ｓ３４０ 眉形状ガイド方法のステップ
４００ 右側顔画像／第１側顔画像
６００ 眉ガイドブロック
６１０ 実際の眉領域で覆われていない眉ガイドブロック内の保留ブロック
Ｅ１ 右目／第１目
ＥＲ１ 右眉／第１眉
ＮＥ１ 鼻
ＮＦ１〜ＮＦ４ 特徴点
ＮＲ１〜ＮＲ５ 基準点
Ｌ１ 第１特徴点と第２特徴点を通過する第１延伸線
Ｌ２ 第３特徴点の第２水平線
Ｌ３ 第１特徴点の第３垂直線
Ｌ４ 第１特徴点と第４基準点を通過する第４延伸線
Ｌ５ 第３基準点の第５垂直線
100 eyebrow shape guide device 110 imaging unit 120 display unit 130 processor S310 to S340 step of eyebrow shape guide method 400 right side face image / first side face image 600 eyebrow guide block 610 inside eyebrow guide block not covered by actual eyebrow region Reserved block E1 right eye / first eye ER1 right eyebrow / first eyebrow NE1 nose NF1 to NF4 feature point NR1 to NR5 reference point L1 first stretched line passing through first and second feature points L2 third feature point Second horizontal line L3 Third vertical line of first characteristic point L4 Fourth stretched line passing through first characteristic point and fourth reference point L5 Fifth vertical line of third reference point
Claims (7)
前記顔画像を受信し、前記顔画像に基づいて、少なくとも１つの鼻特徴点、少なくとも１つの目特徴点、および少なくとも１つの眉特徴点を取得するとともに、前記少なくとも１つの鼻特徴点、前記少なくとも１つの目特徴点、および前記少なくとも１つの眉特徴点に基づいて計算を行い、眉ガイドブロックを取得するプロセッサと、
前記顔画像および前記対応する眉ガイドブロックを表示し、前記眉ガイドブロックに基づいてメイクアップをするよう前記使用者に案内する表示ユニットと、
を含み、
前記顔画像が、第１側顔画像および第２側顔画像を含み、前記第１側顔画像が、第１目および第１眉を含み、
前記少なくとも１つの鼻特徴点が、前記第１目に近い鼻翼に対応する第１特徴点を含み、前記少なくとも１つの目特徴点が、前記鼻の一側から最も遠い前記第１目に対応する第２特徴点を含み、前記少なくとも１つの眉特徴点が、前記第１眉の眉頭に対応する第３特徴点を含み、
前記プロセッサが、前記第１特徴点および前記第２特徴点を通過する第１延伸線と前記第３特徴点の第２水平線の交差点に基づいて、第１基準点を取得し、前記第１基準点が、前記眉ガイドブロックの眉尻表示点として使用され、
前記プロセッサが、前記第１特徴点の第３垂直線と前記第２水平線の交差点に基づいて、第２基準点を取得し、前記第２基準点が、前記眉ガイドブロックの眉頭表示点として使用され、
前記少なくとも１つの目特徴点が、さらに、前記鼻の一側に最も近い前記第１目に対応する第４特徴点を含み、
前記プロセッサが、所定の比率に基づいて、前記第１基準点と前記第２基準点の間の線分から第３基準点を取得し、
前記第２特徴点および前記第４特徴点に基づいて、前記第１目の中間に位置する第４基準点を取得し、
前記第１特徴点および前記第４基準点を通過する第４延伸線と前記第３基準点の垂直線の間の交差点に基づいて、第５基準点を取得し、前記第５基準点が、前記眉ガイドブロックのピーク表示点として使用される眉形状ガイド装置。 An image pickup unit that captures a user's face image, wherein the face image includes at least the nose portion, the eye portion, and the eyebrow portion of the user;
The face image is received, at least one nose feature point, at least one eye feature point, and at least one eyebrow feature point are acquired based on the face image, and the at least one nose feature point and the at least one nose feature point are acquired. A processor that performs calculation based on one eye feature point and the at least one eyebrow feature point to obtain an eyebrow guide block;
A display unit that displays the face image and the corresponding eyebrow guide block, and guides the user to make up on the basis of the eyebrow guide block;
Only including,
The face image includes a first side face image and a second side face image, the first side face image includes a first eye and a first eyebrow,
The at least one nose feature point includes a first feature point corresponding to a nasal wing near the first eye, and the at least one eye feature point corresponds to the first eye farthest from one side of the nose. Including a second feature point, the at least one eyebrow feature point includes a third feature point corresponding to the eyebrow of the first eyebrow,
The processor obtains a first reference point based on an intersection of a second horizontal line of the third feature point and a first extension line passing through the first feature point and the second feature point, and obtains the first reference point. Points are used as the eyebrow tail display points of the eyebrow guide block,
The processor obtains a second reference point based on an intersection of the third vertical line of the first feature point and the second horizontal line, and the second reference point is used as an eyebrow display point of the eyebrow guide block. Is
The at least one eye feature point further includes a fourth feature point corresponding to the first eye closest to one side of the nose;
The processor obtains a third reference point from a line segment between the first reference point and the second reference point based on a predetermined ratio,
Acquiring a fourth reference point located in the middle of the first eye based on the second feature point and the fourth feature point,
A fifth reference point is acquired based on an intersection between a fourth extension line passing through the first feature point and the fourth reference point and a vertical line of the third reference point, and the fifth reference point is An eyebrow shape guide device used as a peak display point of the eyebrow guide block .
前記第２特徴点と前記第４基準点の間の距離と、前記第４特徴点と前記第４基準点の間の距離との間の比率が、１：１である請求項１に記載の眉形状ガイド装置。 The predetermined ratio is a ratio of 1: 2 between a distance between the first reference point and the third reference point and a distance between the second reference point and the third reference point,
The distance between said fourth reference point and the second feature points, the ratio between the distance between the fourth reference point and the fourth characteristic points, 1: according to claim 1 which is 1 Eyebrow shape guide device.
前記顔画像に基づいて、少なくとも１つの鼻特徴点、少なくとも１つの目特徴点、および少なくとも１つの眉特徴点を取得するステップと、
前記少なくとも１つの鼻特徴点、前記少なくとも１つの目特徴点、および前記少なくとも１つの眉特徴点に基づいて計算を行い、眉ガイドブロックを取得するステップと、
前記顔画像および前記対応する眉ガイドブロックを表示し、前記眉ガイドブロックに基づいてメイクアップをするよう前記使用者に案内するステップと、
を含み、
前記顔画像が、第１側顔画像および第２側顔画像を含み、前記第１側顔画像が、第１目および第１眉を含み、前記少なくとも１つの鼻特徴点が、前記第１目に近い鼻翼に対応する第１特徴点を含み、前記少なくとも１つの目特徴点が、前記鼻の一側から最も遠い前記第１目に対応する第２特徴点を含み、前記少なくとも１つの眉特徴点が、前記第１眉の眉頭に対応する第３特徴点を含み、
前記少なくとも１つの鼻特徴点、前記少なくとも１つの目特徴点、および前記少なくとも１つの眉特徴点に基づいて計算を行い、前記眉ガイドブロックを取得する前記ステップが、
前記第１特徴点および前記第２特徴点を通過する第１延伸線と前記第３特徴点の第２水平線の交差点に基づいて、第１基準点を取得し、前記第１基準点が、前記眉ガイドブロックの眉尻表示点として使用されるステップと、
前記第１特徴点の第３垂直線と前記第２水平線の交差点に基づいて、第２基準点を取得し、前記第２基準点が、前記眉ガイドブロックの眉頭表示点として使用されるステップと、
を含み、
前記少なくとも１つの目特徴点が、さらに、前記鼻の一側に最も近い前記第１目に対応する第４特徴点を含み、
前記少なくとも１つの鼻特徴点、前記少なくとも１つの目特徴点、および前記少なくとも１つの眉特徴点に基づいて計算を行い、前記眉ガイドブロックを取得する前記ステップが、
所定の比率に基づいて、前記第１基準点と前記第２基準点の間の線分から第３基準点を取得するステップと、
前記第２特徴点および前記第４特徴点に基づいて、前記第１目の中間に位置する第４基準点を取得するステップと、
前記第１特徴点および前記第４基準点を通過する第４延伸線と前記第３基準点の垂直線の間の交差点に基づいて、第５基準点を取得し、前記第５基準点が、前記眉ガイドブロックのピーク表示点として使用されるステップと、
を含む眉形状ガイド方法。 Capturing a face image of the user, the face image including at least the nose portion, the eye portion, and the eyebrow portion of the user;
Acquiring at least one nose feature point, at least one eye feature point, and at least one eyebrow feature point based on the face image;
Calculating eyebrow guide blocks based on the at least one nose feature point, the at least one eye feature point, and the at least one eyebrow feature point;
Displaying the face image and the corresponding eyebrow guide block, and guiding the user to make up based on the eyebrow guide block,
Including,
The face image includes a first side face image and a second side face image, the first side face image includes a first eye and a first eyebrow, and the at least one nose feature point is the first eye. The at least one eye feature point includes a second feature point corresponding to the first eye farthest from one side of the nose, and the at least one eyebrow feature. The point includes a third feature point corresponding to the eyebrow of the first eyebrow,
The step of performing a calculation based on the at least one nose feature point, the at least one eye feature point, and the at least one eyebrow feature point to obtain the eyebrow guide block,
A first reference point is acquired based on an intersection of a second horizontal line of the third feature point and a first extension line passing through the first feature point and the second feature point, and the first reference point is the The step used as the eyebrow display point of the eyebrow guide block,
Obtaining a second reference point based on an intersection of the third vertical line of the first feature point and the second horizontal line, and using the second reference point as an eyebrow display point of the eyebrow guide block; ,
Including,
The at least one eye feature point further includes a fourth feature point corresponding to the first eye closest to one side of the nose;
The step of performing a calculation based on the at least one nose feature point, the at least one eye feature point, and the at least one eyebrow feature point to obtain the eyebrow guide block,
Acquiring a third reference point from a line segment between the first reference point and the second reference point based on a predetermined ratio;
Acquiring a fourth reference point located in the middle of the first eye based on the second feature point and the fourth feature point;
A fifth reference point is acquired based on an intersection between a fourth extension line passing through the first feature point and the fourth reference point and a vertical line of the third reference point, and the fifth reference point is A step used as a peak display point of the eyebrow guide block,
Eyebrow shape guide method including .
前記第２特徴点と前記第４基準点の間の距離と、前記第４特徴点と前記第４基準点の間の距離との間の比率が、１：１である請求項５に記載の眉形状ガイド方法。 The predetermined ratio is a ratio of 1: 2 between a distance between the first reference point and the third reference point and a distance between the second reference point and the third reference point,
The distance between said fourth reference point and the second feature points, the ratio between the distance between the fourth reference point and the fourth characteristic points, 1: according to claim 5 which is 1 Eyebrow shape guide method.
The eyebrow shape guide method according to claim 5 , wherein the eyebrow guide block is compared with the eyebrow region of the user of the face image to emphasize the reserved block of the eyebrow guide block that is not covered by the eyebrow region of the user. .
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201710342816.6A CN108875462A (en) | 2017-05-16 | 2017-05-16 | Eyebrow moulding guidance device and its method |
| CN201710342816.6 | 2017-05-16 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2018192230A JP2018192230A (en) | 2018-12-06 |
| JP6691529B2 true JP6691529B2 (en) | 2020-04-28 |
Family
ID=59676947
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2017222477A Expired - Fee Related JP6691529B2 (en) | 2017-05-16 | 2017-11-20 | Eyebrow shape guide device and method thereof |
Country Status (5)
| Country | Link |
|---|---|
| US (1) | US10342317B2 (en) |
| EP (1) | EP3404577A1 (en) |
| JP (1) | JP6691529B2 (en) |
| KR (1) | KR102132367B1 (en) |
| CN (1) | CN108875462A (en) |
Families Citing this family (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109288233A (en) * | 2017-07-25 | 2019-02-01 | 丽宝大数据股份有限公司 | It is signable to repair the biological information analytical equipment for holding region |
| CN109426767A (en) * | 2017-08-24 | 2019-03-05 | 丽宝大数据股份有限公司 | Informer describes guidance device and its method |
| TWI702538B (en) * | 2019-03-29 | 2020-08-21 | 麗寶大數據股份有限公司 | Make-up assisting method implemented by make-up assisting device |
| KR102273273B1 (en) | 2019-06-20 | 2021-07-06 | (주)케이뷰티솔루션 | Eyebrow makeup practice and eyebrow makeup method using it |
| KR102225390B1 (en) | 2019-06-20 | 2021-03-09 | (주)케이뷰티솔루션 | Eyebrow makeup method using eyebrow makeup practice |
| CN110378847A (en) * | 2019-06-28 | 2019-10-25 | 北京字节跳动网络技术有限公司 | Face image processing process, device, medium and electronic equipment |
| CN110378839A (en) * | 2019-06-28 | 2019-10-25 | 北京字节跳动网络技术有限公司 | Face image processing process, device, medium and electronic equipment |
| CN112037271A (en) * | 2020-07-16 | 2020-12-04 | 北京旷视科技有限公司 | Image processing method, apparatus, device and medium |
| KR102531236B1 (en) * | 2021-05-03 | 2023-05-11 | 곽다은 | Danee boutique d.l eyebrow technique - technique for drawing more natural eyebrow shape and analyzing shape of eyebrow by approaching from dessin |
| JPWO2023026891A1 (en) * | 2021-08-27 | 2023-03-02 | ||
| KR20240070958A (en) | 2022-11-15 | 2024-05-22 | 최지현 | Eyebrow drawing guide and method for drawing eyebrow using the same |
Family Cites Families (14)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP3444148B2 (en) * | 1997-07-07 | 2003-09-08 | 株式会社ナビタイムジャパン | Eyebrow drawing method |
| EP1975870B1 (en) * | 2006-01-17 | 2020-08-26 | Shiseido Co., Ltd. | Makeup simulation system, makeup simulation device, makeup simulation method, and makeup simulation program |
| JP5191665B2 (en) * | 2006-01-17 | 2013-05-08 | 株式会社 資生堂 | Makeup simulation system, makeup simulation apparatus, makeup simulation method, and makeup simulation program |
| JP4793823B2 (en) * | 2006-04-26 | 2011-10-12 | 株式会社メガチップス | Makeup assist device and eyebrow drawing assist device |
| JP2009064423A (en) * | 2007-08-10 | 2009-03-26 | Shiseido Co Ltd | Makeup simulation system, makeup simulation device, makeup simulation method, and makeup simulation program |
| JP2010184008A (en) * | 2009-02-12 | 2010-08-26 | Shiseido Co Ltd | Auxiliary implement for drawing eyebrow |
| US8538089B2 (en) * | 2011-12-28 | 2013-09-17 | Arcsoft (Hangzhou) Multimedia Technology Co., Ltd. | Method of performing eyebrow shaping on an image and related computing device |
| WO2015029371A1 (en) * | 2013-08-30 | 2015-03-05 | パナソニックＩｐマネジメント株式会社 | Makeup assistance device, makeup assistance method, and makeup assistance program |
| JP6368919B2 (en) * | 2013-08-30 | 2018-08-08 | パナソニックＩｐマネジメント株式会社 | Makeup support device, makeup support method, and makeup support program |
| US8997757B1 (en) * | 2013-10-15 | 2015-04-07 | Anastasia Soare | Golden ratio eyebrow shaping method |
| JP6331515B2 (en) | 2014-03-13 | 2018-05-30 | パナソニックＩｐマネジメント株式会社 | Makeup support device and makeup support method |
| CN204889070U (en) * | 2015-08-26 | 2015-12-23 | 北京思湃科技有限公司 | Thrush appurtenance that plucks eyebrows |
| US9984282B2 (en) * | 2015-12-10 | 2018-05-29 | Perfect Corp. | Systems and methods for distinguishing facial features for cosmetic application |
| CN105760834A (en) * | 2016-02-14 | 2016-07-13 | 北京飞搜科技有限公司 | Face feature point locating method |
-
2017
- 2017-05-16 CN CN201710342816.6A patent/CN108875462A/en active Pending
- 2017-06-30 US US15/638,396 patent/US10342317B2/en not_active Expired - Fee Related
- 2017-07-25 EP EP17183029.2A patent/EP3404577A1/en not_active Withdrawn
- 2017-08-02 KR KR1020170098103A patent/KR102132367B1/en active IP Right Grant
- 2017-11-20 JP JP2017222477A patent/JP6691529B2/en not_active Expired - Fee Related
Also Published As
| Publication number | Publication date |
|---|---|
| US20180332950A1 (en) | 2018-11-22 |
| KR102132367B1 (en) | 2020-07-10 |
| EP3404577A1 (en) | 2018-11-21 |
| US10342317B2 (en) | 2019-07-09 |
| JP2018192230A (en) | 2018-12-06 |
| KR20180125859A (en) | 2018-11-26 |
| CN108875462A (en) | 2018-11-23 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6691529B2 (en) | Eyebrow shape guide device and method thereof | |
| US9563975B2 (en) | Makeup support apparatus and method for supporting makeup | |
| KR102172988B1 (en) | Device and method for eyeliner-wearing guide | |
| US20130086531A1 (en) | Command issuing device, method and computer program product | |
| US11137824B2 (en) | Physical input device in virtual reality | |
| JP5798183B2 (en) | Pointing control device, integrated circuit thereof, and pointing control method | |
| WO2022110591A1 (en) | Live streaming picture processing method and apparatus based on video chat live streaming, and electronic device | |
| JP4733600B2 (en) | Operation detection device and its program | |
| CN110531853B (en) | Electronic book reader control method and system based on human eye fixation point detection | |
| KR102127351B1 (en) | User terminal device and the control method thereof | |
| JP6753829B2 (en) | Lip gloss guidance device and its method | |
| US10987198B2 (en) | Image simulation method for orthodontics and image simulation device thereof | |
| US10162997B2 (en) | Electronic device, computer readable storage medium and face image display method | |
| US10444831B2 (en) | User-input apparatus, method and program for user-input | |
| KR102228663B1 (en) | Method of providing photographing guide and system therefor | |
| CN105242888A (en) | System control method and electronic device | |
| JP6731896B2 (en) | Lip gloss guide device and method | |
| JP6632298B2 (en) | Information processing apparatus, information processing method and program | |
| KR102152296B1 (en) | Blush guide device and method thereof | |
| JP7261261B2 (en) | Information processing device, switching system, program and method | |
| KR101861096B1 (en) | Method and apparatus for controlling information displayed on screen by recognizing hand gesture of user | |
| CN113486695A (en) | Dressing auxiliary method of cosmetic mirror and cosmetic mirror | |
| TW202345097A (en) | Recommendations for image capture | |
| JP2014016761A (en) | Image processing apparatus, image processing method, and image generation method and program |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190118 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20191217 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20191218 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200316 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200331 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200410 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 6691529 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| LAPS | Cancellation because of no payment of annual fees |