JP7405562B2 - Evaluation equipment, methods, and programs - Google Patents

Evaluation equipment, methods, and programs Download PDF

Info

Publication number
JP7405562B2
JP7405562B2 JP2019197775A JP2019197775A JP7405562B2 JP 7405562 B2 JP7405562 B2 JP 7405562B2 JP 2019197775 A JP2019197775 A JP 2019197775A JP 2019197775 A JP2019197775 A JP 2019197775A JP 7405562 B2 JP7405562 B2 JP 7405562B2
Authority
JP
Japan
Prior art keywords
face
subject
image
age group
age
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2019197775A
Other languages
Japanese (ja)
Other versions
JP2021071888A (en
Inventor
春奈 関根
貴司 丸山
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shiseido Co Ltd
Original Assignee
Shiseido Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shiseido Co Ltd filed Critical Shiseido Co Ltd
Priority to JP2019197775A priority Critical patent/JP7405562B2/en
Publication of JP2021071888A publication Critical patent/JP2021071888A/en
Application granted granted Critical
Publication of JP7405562B2 publication Critical patent/JP7405562B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Image Analysis (AREA)

Description

本発明は、評価装置、方法、およびプログラムに関する。 The present invention relates to an evaluation device, method, and program.

従来、"見た目年齢"とも呼ばれる、人間の顔つきや動作等の外見から推定した年齢が知られている。例えば、特許文献1には、顔の見た目印象(例えば、年齢印象)を鑑別する方法が開示されている。具体的には、評価者(評価対象の顔を目視する者)の視線データを解析して、顔の見た目印象への影響が強い部位および顔の見た目印象と相関関係が強い因子を抽出し、その因子に基づいて顔の見た目印象を鑑別する方法が開示されている。 Conventionally, age estimated from a person's physical appearance, such as facial features and movements, is known as "apparent age." For example, Patent Document 1 discloses a method for identifying facial appearance impressions (eg, age impressions). Specifically, we analyze the gaze data of the evaluator (the person who visually observes the face to be evaluated), extract areas that have a strong influence on the appearance impression of the face, and factors that have a strong correlation with the appearance impression of the face. A method of distinguishing facial appearance impression based on the factors is disclosed.

特開2016-194901号公報Japanese Patent Application Publication No. 2016-194901

しかしながら、見た目年齢の評価は直観的なものであり、個々の評価者によって評価が異なる。例えば、特許文献1では、評価対象の顔の画像を評価者へと提示し、推定年齢の回答を求めている(特許文献1の段落[0058])。しかし、評価者が想定する基準となる顔(つまり、どのような顔を○○歳の顔と想定し、どのような顔を××歳の顔と想定するか)は、個々の評価者によって異なる。そのため、見た目年齢を正確に評価することが困難であった。 However, the evaluation of apparent age is intuitive, and the evaluation varies depending on the individual evaluator. For example, in Patent Document 1, an image of the face to be evaluated is presented to the evaluator, and an answer regarding the estimated age is requested (paragraph [0058] of Patent Document 1). However, the standard face assumed by the evaluator (in other words, what kind of face is assumed to be a face of XX years old, and what kind of face is assumed to be a face of XX years old) depends on each evaluator. different. For this reason, it has been difficult to accurately evaluate the apparent age.

そこで、本発明の一実施形態では、見た目年齢を正確に評価することを目的とする。 Therefore, an embodiment of the present invention aims to accurately evaluate the apparent age.

本発明の一態様は、対象者の顔の画像と、前記対象者の顔と比較するための顔の画像とを表示し、前記対象者の顔と比較するための顔の画像は、各年齢層のたるみを含む形態とシミとシワとを有する前記各年齢層の代表的な顔の画像である、表示部と、前記対象者の顔と、前記対象者の顔と比較するための顔との見た目を比較した結果を取得する比較結果取得部と、前記見た目を比較した結果に基づいて、前記対象者の見た目の年齢層を算出する評価部と、を備える。 One aspect of the present invention is to display an image of a target person's face and a face image for comparison with the target person's face, and display the face image for comparison with the target person's face for each age group. A display unit, a display unit, a face of the subject, and a face for comparison with the face of the subject, which are representative images of faces of each age group having a form including sagging layers, and spots and wrinkles. and an evaluation section that calculates the age group of the appearance of the subject based on the result of comparing the appearance.

本発明の一実施形態によれば、見た目年齢を正確に評価することができる。 According to one embodiment of the present invention, appearance age can be accurately evaluated.

本発明の一実施形態に係る全体の構成図である。FIG. 1 is an overall configuration diagram according to an embodiment of the present invention. 本発明の一実施形態に係る評価装置の機能ブロック図である。FIG. 1 is a functional block diagram of an evaluation device according to an embodiment of the present invention. 本発明の一実施形態に係る顔画像格納部に格納されている、対象者の顔と比較するための顔の画像の一例である。1 is an example of a face image for comparison with a target person's face, which is stored in a face image storage unit according to an embodiment of the present invention. 本発明の一実施形態に係る顔画像格納部に格納されている、対象者の顔の画像の一例である。It is an example of the image of a target person's face stored in the face image storage part based on one embodiment of this invention. 本発明の一実施形態に係るユーザ端末に表示される画面の一例である。3 is an example of a screen displayed on a user terminal according to an embodiment of the present invention. 本発明の一実施形態に係る比較パターン例(1)である。1 is a comparison pattern example (1) according to an embodiment of the present invention. 本発明の一実施形態に係る比較パターン例(2)である。It is a comparative pattern example (2) according to one embodiment of the present invention. 本発明の一実施形態に係る比較パターン例(3)である。This is a comparison pattern example (3) according to an embodiment of the present invention. 本発明の一実施形態に係る対象者の顔と比較するための顔の差し替えを説明するための図である。FIG. 3 is a diagram for explaining replacement of a face for comparison with a target person's face according to an embodiment of the present invention. 本発明の一実施形態に係る見た目年齢の評価処理のフローチャートである。It is a flowchart of the evaluation process of an appearance age based on one embodiment of this invention. 本発明の一実施形態に係る評価装置、ユーザ端末のハードウェア構成の一例を示すブロック図である。FIG. 1 is a block diagram showing an example of the hardware configuration of an evaluation device and a user terminal according to an embodiment of the present invention.

以下、図面に基づいて本発明の実施の形態を説明する。 Embodiments of the present invention will be described below based on the drawings.

<全体の構成>
図1は、本発明の一実施形態に係る全体の構成図である。図1に示されるように、評価装置10は、任意のネットワーク30を介して、1つまたは複数のユーザ端末20と通信可能に接続されている。以下、それぞれについて説明する。
<Overall configuration>
FIG. 1 is an overall configuration diagram according to an embodiment of the present invention. As shown in FIG. 1, the evaluation device 10 is communicably connected to one or more user terminals 20 via an arbitrary network 30. Each will be explained below.

評価装置10は、見た目年齢を評価するための装置である。具体的には、評価装置10は、見た目年齢を評価される者(以下、対象者ともいう)の顔の画像と、対象者の顔と比較するための顔の画像と、をユーザ端末20上に表示する。また、評価装置10は、対象者の顔と、対象者の顔と比較するための顔と、の見た目を比較した結果に基づいて、対象者の見た目年齢を評価する。評価装置10は、1つまたは複数のコンピュータからなる。また、評価装置10は、任意のネットワーク30を介して、ユーザ端末20とデータを送受信することができる。後段で、図2を参照しながら、評価装置10について詳細に説明する。 The evaluation device 10 is a device for evaluating appearance age. Specifically, the evaluation device 10 displays on the user terminal 20 an image of the face of the person whose appearance age is being evaluated (hereinafter also referred to as the target person) and a face image for comparison with the face of the target person. to be displayed. The evaluation device 10 also evaluates the apparent age of the subject based on the result of comparing the appearance of the subject's face and a face for comparison with the subject's face. Evaluation device 10 consists of one or more computers. Furthermore, the evaluation device 10 can transmit and receive data to and from the user terminal 20 via any network 30. The evaluation device 10 will be described in detail later with reference to FIG.

ユーザ端末20は、対象者の顔と、対象者の顔と比較するための顔と、の見た目を比較する者(以下、評価者ともいう)が利用する端末である。なお、評価者は、対象者と同一の者であってもよいし、対象者とは別の者であってもよい。具体的には、ユーザ端末20は、対象者の顔の画像と、対象者の顔と比較するための顔の画像とを、評価装置10から受信してディスプレイ上に表示する。また、ユーザ端末20は、対象者の顔と、対象者の顔と比較するための顔と、の見た目を評価者が比較した結果を、評価装置10へ送信する。ユーザ端末20は、パーソナルコンピュータ、タブレット端末、スマートフォン等の任意の端末であってよい。 The user terminal 20 is a terminal used by a person (hereinafter also referred to as an evaluator) who compares the appearance of a target person's face and a face for comparison with the target person's face. Note that the evaluator may be the same person as the subject, or may be a person different from the subject. Specifically, the user terminal 20 receives an image of the subject's face and a face image for comparison with the subject's face from the evaluation device 10 and displays them on the display. Further, the user terminal 20 transmits to the evaluation device 10 the result of the evaluator's comparison of the appearance of the target person's face and a face for comparison with the target person's face. The user terminal 20 may be any terminal such as a personal computer, a tablet terminal, or a smartphone.

なお、図1では、評価装置10とユーザ端末20とを別々の装置として説明したが、評価装置10とユーザ端末20とを1つの装置として実装するようにしてもよい。また、評価装置10がユーザ端末20の一部の機能を有するようにしてもよいし、ユーザ端末20が評価装置10の一部の機能を有するようにしてもよい。 Although the evaluation device 10 and the user terminal 20 are described as separate devices in FIG. 1, the evaluation device 10 and the user terminal 20 may be implemented as one device. Furthermore, the evaluation device 10 may have some of the functions of the user terminal 20, or the user terminal 20 may have some of the functions of the evaluation device 10.

<機能ブロック>
図2は、本発明の一実施形態に係る評価装置10の機能ブロック図である。図2に示されるように、評価装置10は、表示部101と、比較結果取得部102と、評価部103と、顔画像格納部104と、を備える。なお、評価装置10は、機械学習部105(教師データ格納部151、生成部152、学習済みモデル格納部153、推論部154)を備える構成とすることもできる。また、評価装置10は、プログラムを実行することで、表示部101と、比較結果取得部102と、評価部103として機能する。なお、評価装置10は、プログラムを実行することで、機械学習部105(生成部152、推論部154)として機能する構成とすることもできる。以下、それぞれについて説明する。
<Functional block>
FIG. 2 is a functional block diagram of the evaluation device 10 according to an embodiment of the present invention. As shown in FIG. 2, the evaluation device 10 includes a display section 101, a comparison result acquisition section 102, an evaluation section 103, and a face image storage section 104. Note that the evaluation device 10 can also be configured to include the machine learning section 105 (teacher data storage section 151, generation section 152, learned model storage section 153, and inference section 154). Furthermore, the evaluation device 10 functions as a display section 101, a comparison result acquisition section 102, and an evaluation section 103 by executing a program. Note that the evaluation device 10 can also be configured to function as the machine learning section 105 (generation section 152, inference section 154) by executing a program. Each will be explained below.

顔画像格納部104には、対象者(つまり、見た目年齢を評価される者)の実年齢の情報と、対象者の顔の画像と、対象者の顔と比較するための顔の画像と、が格納されている。以下、<対象者の顔と比較するための顔の画像>および<対象者の顔の画像>について説明する。 The face image storage unit 104 stores information on the actual age of the subject (that is, the person whose appearance age is being evaluated), an image of the subject's face, and a face image for comparison with the subject's face. is stored. Hereinafter, <image of face for comparison with target person's face> and <image of target person's face> will be explained.

<対象者の顔と比較するための顔の画像>
例えば、対象者の顔と比較するための顔の画像は、各年齢層のたるみを含む形態とシミとシワとを有する、各年齢層の代表的な顔の画像である。また、例えば、対象者の顔と比較するための顔の画像は、各年齢層の顔のたるみを含む形態を表わす画像と、各年齢層の顔のシミを表わす画像と、各年齢層の顔のシワを表わす画像と、のうちの少なくとも1つである。なお、性別、人種別等の種々のカテゴリー別の顔を用いて、対象者の顔と比較するようにしてもよい。
<Face image for comparison with target person's face>
For example, the face image to be compared with the target person's face is a representative face image of each age group, which has a form including sagging, spots, and wrinkles of each age group. For example, the facial images to be compared with the subject's face include images representing the form of the face including sagging in each age group, images representing spots on the face of each age group, and images representing the face of each age group. and at least one of an image representing wrinkles. Note that faces classified by various categories such as gender and race may be used for comparison with the target person's face.

なお、各年齢層は、任意の区間で分けられていてよい。例えば、年齢層は、20代、30代、40代、50代、60代といった10歳ごとの連続した区間で分けられていてもよいし、40歳、41歳、42歳、43歳、44歳といった1歳ごとの連続した区間で分けられて(つまり、年齢で区分けされて)いてもよい。また、例えば、各年齢層は、40歳、42歳、44歳といった連続しない区間で分けられていてもよい。 Note that each age group may be divided into arbitrary sections. For example, age groups may be divided into consecutive 10-year intervals such as 20s, 30s, 40s, 50s, and 60s, or 40s, 41s, 42s, 43s, and 44s. It may be divided into continuous intervals of one year, such as age (that is, divided by age). Further, for example, each age group may be divided into discontinuous intervals such as 40 years old, 42 years old, and 44 years old.

なお、対象者の顔と比較するための顔は、各年齢層内での加齢の程度により区分けされていてもよい。そのため、対象者の見た目が各年齢層内で加齢が大きい方であるか小さい方であるかを評価することができる。各年齢層内においては、加齢の程度が小さい顔ほど年齢が下である顔として取り扱われ、加齢の程度が大きい顔ほど年齢が上である顔として取り扱われる。 Note that the faces to be compared with the subject's face may be classified according to the degree of aging within each age group. Therefore, it is possible to evaluate whether the subject's appearance is on the older or younger side within each age group. Within each age group, the face with a smaller degree of aging is treated as a younger face, and the face with a greater degree of aging is treated as a face with an older age.

図3は、本発明の一実施形態に係る顔画像格納部104に格納されている、対象者の顔と比較するための顔の画像の一例である。図3に示されるように、顔画像格納部104には、各年齢層(図3の例では、30歳、・・・、40歳、42歳、44歳、・・・、50歳)の代表的な顔(つまり、各年齢層のたるみを含む形態とシミとシワとを有する顔)の画像と、各年齢層(図3の例では、30歳、・・・、40歳、42歳、44歳、・・・、50歳)の顔のたるみを含む形態を表わす画像と、各年齢層(図3の例では、30歳、・・・、40歳、42歳、44歳、・・・、50歳)の顔のシミを表わす画像と、各年齢層(図3の例では、30歳、・・・、40歳、42歳、44歳、・・・、50歳)の顔のシワを表わす画像と、が格納されうる。 FIG. 3 is an example of a face image for comparison with the subject's face, which is stored in the face image storage unit 104 according to an embodiment of the present invention. As shown in FIG. 3, the face image storage unit 104 stores images of each age group (in the example of FIG. 3, 30 years old, 40 years old, 42 years old, 44 years old, 50 years old). An image of a representative face (that is, a face with a sagging shape, spots, and wrinkles for each age group) and images of each age group (in the example of Fig. 3, 30 years old, ..., 40 years old, 42 years old) , 44 years old, . . . , 50 years old), and images representing facial sagging in each age group (in the example of Fig. 3, 30 years old, . . . , 40 years old, 42 years old, 44 years old, . ..., 50 years old) and the faces of each age group (30 years old, ..., 40 years old, 42 years old, 44 years old, ..., 50 years old in the example of Figure 3). An image representing wrinkles may be stored.

ここで、各年齢層の代表的な顔(つまり、各年齢層のたるみを含む形態とシミとシワとを有する顔)の画像と、各年齢層の顔のたるみを含む形態を表わす画像と、各年齢層の顔のシミを表わす画像と、各年齢層の顔のシワを表わす画像と、を生成する方法の一例を説明する。 Here, an image of a representative face of each age group (that is, a face including sagging in each age group and a face with spots and wrinkles), an image representing a form including sagging of the face of each age group, An example of a method for generating an image representing facial spots of each age group and an image representing facial wrinkles of each age group will be described.

<<たるみを含む形態を表わす画像>>
例えば、3Dカメラ等で撮影された各年齢層の者の顔の画像を平均化した画像を、その年齢層の顔のたるみを含む形態を表わす画像とすることができる。
<<Image showing form including sagging>>
For example, an image obtained by averaging facial images of people in each age group photographed with a 3D camera or the like can be used as an image representing the shape of the face of that age group, including sagging.

<<シミを表わす画像>>
例えば、カメラ等で撮影された各年齢層の者の顔の画像に適応型閾値処理を施すことによってシミに相当する成分を得て、シミに相当する成分の総面積が各年齢層の中で中央値となる者のシミを表わす画像を、その年齢層の顔のシミを表わす画像とすることができる。
<<Image showing stains>>
For example, by applying adaptive threshold processing to facial images of people in each age group taken with a camera, etc., we can obtain components corresponding to age spots, and calculate the total area of the components corresponding to age spots in each age group. The image representing the blemishes of the person with the median value can be used as the image representing the blemishes on the face of that age group.

<<シワを表わす画像>>
例えば、カメラ等で撮影された各年齢層の者の顔の画像に適応型閾値処理を施すことによってシワに相当する成分を得て、大半の者に存在するシワを濃くして限られた者にだけ存在するシワを薄くした画像を、その年齢層の顔のシワを表わす画像とすることができる。
<<Image showing wrinkles>>
For example, by applying adaptive threshold processing to facial images of people of various age groups taken with a camera, etc., we can obtain components corresponding to wrinkles and darken the wrinkles present in most people. An image in which wrinkles that only exist in a person's age group are reduced can be used as an image that represents wrinkles on the face of that age group.

<<代表的な顔の画像>>
例えば、各年齢層の顔のたるみを含む形態に各年齢層の顔のシミおよびシワを付加した画像を、各年齢層の代表的な顔(つまり、各年齢層のたるみを含む形態とシミとシワとを有する顔)の画像とすることができる。
<<Representative face image>>
For example, an image in which spots and wrinkles of each age group's face are added to the form of the face including sagging of each age group is displayed as an image of a representative face of each age group (in other words, the form of the face including sagging of each age group and the blemishes). The image can be an image of a face (with wrinkles).

<対象者の顔の画像>
例えば、対象者の顔の画像は、カメラ等で撮影された対象者の顔の画像である。また、例えば、対象者の顔の画像は、対象者の顔のたるみを含む形態を表わす画像と、対象者の顔のシミを表わす画像と、対象者の顔のシワを表わす画像と、のうちの少なくとも1つである。
<Image of target person's face>
For example, the image of the target person's face is an image of the target person's face photographed with a camera or the like. Furthermore, for example, the image of the target person's face can be divided into an image representing the shape of the target person's face including sagging, an image representing spots on the target person's face, and an image representing wrinkles on the target person's face. At least one of the following.

図4は、本発明の一実施形態に係る顔画像格納部104に格納されている、対象者の顔の画像の一例である。図4に示されるように、顔画像格納部104には、対象者の実年齢と、カメラ等で撮影された対象者の顔の画像と、対象者の顔のたるみを含む形態を表わす画像と、対象者の顔のシミを表わす画像と、対象者の顔のシワを表わす画像と、が格納されうる。 FIG. 4 is an example of a target person's face image stored in the face image storage unit 104 according to an embodiment of the present invention. As shown in FIG. 4, the face image storage unit 104 stores the subject's actual age, an image of the subject's face taken with a camera, etc., and an image representing the shape of the subject's face, including sagging. , an image representing spots on the subject's face, and an image representing wrinkles on the subject's face may be stored.

ここで、対象者の顔のたるみを含む形態を表わす画像と、対象者の顔のシミを表わす画像と、対象者の顔のシワを表わす画像と、を生成する方法の一例を説明する。 Here, an example of a method for generating an image representing the form of the subject's face including sagging, an image representing spots on the subject's face, and an image representing wrinkles on the subject's face will be described.

<<たるみを含む形態を表わす画像>>
例えば、3Dカメラ等で撮影された対象者の顔の画像に基づいて、対象者の顔のたるみを含む形態を表わす画像を生成することができる。
<<Image showing form including sagging>>
For example, it is possible to generate an image representing the form of the subject's face including sagging based on an image of the subject's face photographed with a 3D camera or the like.

<<シミを表わす画像>>
例えば、カメラ等で撮影された対象者の顔の画像に適応型閾値処理を施すことによってシミに相当する成分を得て、対象者の顔のシミを表わす画像を生成することができる。
<<Image showing stains>>
For example, by performing adaptive threshold processing on an image of the subject's face photographed with a camera or the like, components corresponding to spots can be obtained, and an image representing the spots on the subject's face can be generated.

<<シワを表わす画像>>
例えば、カメラ等で撮影された対象者の顔の画像に適応型閾値処理を施すことによってシワに相当する成分を得て、対象者の顔のシワを表わす画像を生成することができる。
<<Image showing wrinkles>>
For example, by performing adaptive threshold processing on an image of the subject's face photographed with a camera or the like, components corresponding to wrinkles can be obtained, and an image representing the wrinkles on the subject's face can be generated.

なお、対象者の顔の画像は、素顔の画像であってもよいし、化粧が施された顔の画像であってもよいし、化粧がシミュレーションされた顔の画像であってもよい。そのため、素顔での見た目年齢と、化粧後の顔での見た目年齢とを評価して比べることができる。 Note that the image of the target person's face may be an image of a real face, an image of a face with makeup applied, or an image of a face with simulated makeup. Therefore, it is possible to evaluate and compare the apparent age of a person with a bare face and the apparent age of a face with makeup applied.

図2に戻る。表示部101は、顔画像格納部104に格納されている、対象者(つまり、見た目年齢を評価される者)の顔の画像と、その対象者の顔と比較するための顔の画像と、をユーザ端末20上に表示する。例えば、表示部101は、対象者の顔の画像と、その対象者の顔と比較するための顔の画像と、を評価者が比較しやすいように並べて表示する。 Return to Figure 2. The display unit 101 displays an image of the face of the subject (that is, a person whose appearance age is being evaluated) stored in the face image storage unit 104, and an image of the face for comparison with the face of the subject. is displayed on the user terminal 20. For example, the display unit 101 displays an image of a subject's face and a face image for comparison with the subject's face side by side so that the evaluator can easily compare them.

なお、後述するように、表示部101は、評価者の評価結果に基づいて、対象者の顔と比較するための顔の画像を、別の画像に差し替える。 Note that, as described later, the display unit 101 replaces the image of the face for comparison with the face of the subject with another image based on the evaluation result of the evaluator.

図5は、本発明の一実施形態に係るユーザ端末20に表示される画面の一例である。図5に示されるように、対象者の顔の画像と、対象者の顔と比較するための顔の画像と、が表示される。 FIG. 5 is an example of a screen displayed on the user terminal 20 according to an embodiment of the present invention. As shown in FIG. 5, an image of the subject's face and a face image for comparison with the subject's face are displayed.

以下、図6~8を参照しながら、対象者の顔と、対象者の顔と比較するための顔と、の比較パターン例を説明する。 Examples of comparison patterns between a target person's face and a face for comparison with the target person's face will be described below with reference to FIGS. 6 to 8.

図6は、本発明の一実施形態に係る比較パターン例(1)である。図6に示されるように、カメラ等で撮影された対象者の顔の画像と、各年齢層の代表的な顔(つまり、各年齢層のたるみを含む形態とシミとシワとを有する顔)の画像と、を比較する構成とすることができる。 FIG. 6 is a comparison pattern example (1) according to an embodiment of the present invention. As shown in FIG. 6, an image of the subject's face taken with a camera etc. and a representative face of each age group (that is, a face with a form including sagging, spots and wrinkles of each age group) The configuration can be configured to compare the image of .

図7は、本発明の一実施形態に係る比較パターン例(2)である。図7に示されるように、カメラ等で撮影された対象者の顔の画像と、各年齢層の顔のたるみを含む形態を表わす画像と、を比較する構成とすることができる。あるいは、カメラ等で撮影された対象者の顔の画像と、各年齢層の顔のシミを表わす画像と、を比較する構成とすることができる。あるいは、カメラ等で撮影された対象者の顔の画像と、各年齢層の顔のシワを表わす画像と、を比較する構成とすることができる。 FIG. 7 is a comparison pattern example (2) according to an embodiment of the present invention. As shown in FIG. 7, an image of the subject's face taken with a camera or the like may be compared with an image representing the shape of the face including sagging in each age group. Alternatively, an image of the subject's face taken with a camera or the like may be compared with an image representing facial spots of each age group. Alternatively, a configuration may be adopted in which an image of the subject's face photographed with a camera or the like is compared with an image showing wrinkles on the face of each age group.

図8は、本発明の一実施形態に係る比較パターン例(3)である。図8に示されるように、対象者の顔のたるみを含む形態を表わす画像と、各年齢層の顔のたるみを含む形態を表わす画像と、を比較する構成とすることができる。あるいは、対象者の顔のシミを表わす画像と、各年齢層の顔のシミを表わす画像と、を比較する構成とすることができる。あるいは、対象者の顔のシワを表わす画像と、各年齢層の顔のシワを表わす画像と、を比較する構成とすることができる。 FIG. 8 is a comparison pattern example (3) according to an embodiment of the present invention. As shown in FIG. 8, an image representing a form including sagging of the face of the subject can be compared with an image representing a form including sagging of the face of each age group. Alternatively, an image representing age spots on the subject's face may be compared with images representing age spots on the face of each age group. Alternatively, an image representing the facial wrinkles of the subject and an image representing the facial wrinkles of each age group may be compared.

図2に戻る。比較結果取得部102は、対象者の顔と、対象者の顔と比較するための顔との見た目を比較した結果を取得する。具体的には、比較結果取得部102は、ユーザ端末20から、評価者によってユーザ端末20に入力された、見た目を比較した結果を受信する。 Return to Figure 2. The comparison result acquisition unit 102 acquires the result of comparing the appearance of the target person's face and a face to be compared with the target person's face. Specifically, the comparison result acquisition unit 102 receives, from the user terminal 20, the result of comparing the appearances, which is input into the user terminal 20 by the evaluator.

例えば、見た目を比較した結果は、対象者の顔と、対象者の顔と比較するための顔と、のどちらが年下に見えるか(あるいは年上に見えるか)の情報である。また、例えば、見た目を比較した結果は、対象者の顔と、対象者の顔と比較するための顔と、のどちらのたるみを含む形態が目立つか(あるいは目立たないか)の情報である。また、例えば、見た目を比較した結果は、対象者の顔と、対象者の顔と比較するための顔と、のどちらのシミが目立つか(あるいは目立たないか)の情報である。また、例えば、見た目を比較した結果は、対象者の顔と、対象者の顔と比較するための顔と、のどちらのシワが目立つか(あるいは目立たないか)の情報である。 For example, the result of comparing appearances is information as to which of the subject's face and the face to be compared with the subject's face looks younger (or older). Further, for example, the result of comparing appearances is information as to which form including sagging is more noticeable (or less noticeable) between the subject's face and the face to be compared with the subject's face. Further, for example, the result of comparing appearances is information as to whether the stains are more conspicuous (or less conspicuous) on the subject's face or on the face to be compared with the subject's face. Further, for example, the result of comparing appearances is information about which wrinkles are more noticeable (or less noticeable) on the subject's face and on the face to be compared with the subject's face.

評価部103は、比較結果取得部102が取得した見た目を比較した結果に基づいて、対象者の見た目年齢を評価する。具体的には、評価部103は、比較結果取得部102が取得した見た目を比較した結果に基づいて、表示部101に対して、対象者の顔と比較するための顔の画像を別の画像に差し替えさせる(<差し替え処理>)。また、評価部103は、所定の回数の折り返しがあったか否かを判断する(<折り返し回数カウント処理>)。また、評価部103は、所定の回数の折り返しがあった場合には、対象者の見た目年齢を評価する(<評価処理>)。以下、それぞれの処理について説明する。 The evaluation unit 103 evaluates the apparent age of the subject based on the results of comparing the appearances acquired by the comparison result acquisition unit 102. Specifically, the evaluation unit 103 displays, on the display unit 101, a face image for comparison with the subject's face and another image based on the result of comparing the appearance acquired by the comparison result acquisition unit 102. (<Replacement process>). The evaluation unit 103 also determines whether or not there has been a predetermined number of calls back (<call back count process>). Furthermore, when there is a predetermined number of calls back, the evaluation unit 103 evaluates the apparent age of the subject (<evaluation process>). Each process will be explained below.

<差し替え処理>
評価部103は、比較結果取得部102が取得した見た目を比較した結果に基づいて、表示部101に対して、対象者の顔と比較するための顔の画像を別の画像に差し替えさせる。例えば、評価部103は、対象者の方が年下に見えるという比較結果の場合、対象者の顔と比較するための顔の年齢層を下げる(つまり、現状よりも低い年齢層の画像に差し替える)。また、例えば、評価部103は、対象者の方が年上に見えるという比較結果の場合、対象者の顔と比較するための顔の年齢層を上げる(つまり、現状よりも高い年齢層の画像に差し替える)。また、例えば、評価部103は、対象者のたるみを含む形態(またはシミまたはシワ)の方が目立つという評価結果の場合、対象者の顔と比較するための顔の年齢層を上げる(つまり、現状よりも高い年齢層の画像に差し替える)。また、例えば、評価部103は、対象者のたるみを含む形態(またはシミまたはシワ)の方が目立たないという評価結果の場合、対象者の顔と比較するための顔の年齢層を下げる(つまり、現状よりも低い年齢層の画像に差し替える)。
<Replacement process>
The evaluation unit 103 causes the display unit 101 to replace the image of the face for comparison with the face of the subject with another image, based on the result of comparing the appearances acquired by the comparison result acquisition unit 102. For example, if the comparison result is that the target person looks younger, the evaluation unit 103 lowers the age group of the face for comparison with the target person's face (that is, replaces it with an image of a lower age group than the current one). ). For example, if the comparison result is that the target person looks older, the evaluation unit 103 increases the age group of the face for comparison with the target person's face (that is, images of a higher age group than the current ). For example, if the evaluation result is that the subject's form including sagging (or spots or wrinkles) is more conspicuous, the evaluation unit 103 increases the age group of the face for comparison with the subject's face (that is, (Replace with an image of an older age group than the current one). For example, if the evaluation result is that the subject's form including sagging (or spots or wrinkles) is less conspicuous, the evaluation unit 103 lowers the age group of the face for comparison with the subject's face (i.e. (replaced with an image of a younger age group than the current one).

図9は、本発明の一実施形態に係る対象者の顔と比較するための顔の差し替えを説明するための図である。 FIG. 9 is a diagram for explaining face replacement for comparison with a target person's face according to an embodiment of the present invention.

図9の左側の例では、最初に、対象者の顔と比較するための顔として30歳の顔が選択されている。そして、その30歳の顔よりも対象者の方が年上に見えるという比較結果に基づいて、対象者の顔と比較するための顔の年齢層が32歳に上げられている(つまり、30歳の顔から32歳の顔に差し替えられている)。その後も同様に、34歳、36歳、38歳、40歳、42歳、44歳、46歳に上げられている。そして、その46歳の顔よりも対象者の方が年下に見えるという比較結果に基づいて、対象者の顔と比較するための顔の年齢層が44歳に下げられている。そのため、図9の折れ線グラフが、折り返し点1で折り返されている。その後も同様に、42歳に下げられている。そして、その42歳の顔よりも対象者の方が年上に見えるという比較結果に基づいて、対象者の顔と比較するための顔の年齢層が44歳に上げられている。そのため、図9の折れ線グラフが、折り返し点2で折り返されている。以下、同様に繰り返される。図9の右側の例も同様である。 In the example on the left side of FIG. 9, a 30-year-old face is first selected as the face to be compared with the subject's face. Based on the comparison result that the target person looks older than the 30-year-old face, the age range of the face for comparison with the target person's face is raised to 32 years old (that is, 30 years old). (The old face has been replaced with a 32 year old face.) Subsequently, the age was raised to 34, 36, 38, 40, 42, 44, and 46. Based on the comparison result that the target person looks younger than the 46-year-old face, the age range of the face for comparison with the target person's face is lowered to 44 years. Therefore, the line graph in FIG. 9 is folded back at the folding point 1. After that, the age was lowered to 42. Based on the comparison result that the target person looks older than the 42-year-old face, the age range of the face for comparison with the target person's face is raised to 44 years old. Therefore, the line graph in FIG. 9 is folded back at the folding point 2. The same process is repeated thereafter. The same applies to the example on the right side of FIG.

<折り返し回数カウント処理>
評価部103は、所定の回数(例えば、8回)の折り返しがあったか否かを判断する。具体的には、評価部103は、図9の折れ線グラフの折り返しの点(つまり、対象者の顔と比較するための顔の年齢層が上昇から下降へ切り替わる地点および下降から上昇へ切り替わる地点)が所定の個数以上あるか否かを判断する。
<Return count process>
The evaluation unit 103 determines whether or not there has been a call back a predetermined number of times (for example, eight times). Specifically, the evaluation unit 103 determines the point at which the line graph in FIG. It is determined whether there are a predetermined number or more.

<評価処理>
評価部103は、所定の回数の折り返しがあった場合には、対象者の見た目年齢を評価する。具体的には、評価部103は、全ての折り返し点(例えば、8つの折り返し点)での年齢層の平均値を算出して、この平均値を対象者の見た目の年齢層とする。例えば、年齢層が1歳ごとの区間で分けられている(例えば、40歳、41歳、42歳、43歳、44歳といった1歳ごとの連続した区間、40歳、42歳、44歳といった1歳ごとの連続しない区間)場合には、評価部103が、それらの年齢の平均値を算出する。なお、年齢層が20代、30代、40代、50代、60代といった2歳以上の区間で分けられている場合には、評価部103が、各年齢層の所定の値(例えば、20代であれば25歳等)の平均値を算出するようにしてもよい。
<Evaluation processing>
The evaluation unit 103 evaluates the apparent age of the subject when there is a predetermined number of calls back. Specifically, the evaluation unit 103 calculates the average value of the age groups at all turning points (for example, eight turning points), and sets this average value as the apparent age group of the subject. For example, age groups are divided into intervals of 1 year (for example, consecutive intervals of 1 year such as 40 years old, 41 years old, 42 years old, 43 years old, 44 years old, 40 years old, 42 years old, 44 years old) (discontinuous intervals for each age), the evaluation unit 103 calculates the average value of those ages. Note that when the age groups are divided into intervals of 2 years or older, such as 20s, 30s, 40s, 50s, and 60s, the evaluation unit 103 sets a predetermined value (for example, 20 If the age is 25 years old, etc.), the average value may be calculated.

このように、本発明の一実施形態では、対象者の顔と、対象者の顔と比較するための各年齢層の顔と、の比較を繰り返すことによって、対象者の見た目年齢を数値化することができる。 In this way, in one embodiment of the present invention, the apparent age of the subject is quantified by repeatedly comparing the subject's face and the faces of each age group for comparison with the subject's face. be able to.

なお、評価部103は、比較結果取得部102が取得した見た目を比較した結果に基づいて、対象者の見た目の年齢層を算出する、たるみを含む形態の見た目の年齢層を算出する、シミの見た目の年齢層を算出する、シワの見た目の年齢層を算出することができる。以下、<見た目の年齢層を算出する場合>と、<たるみを含む形態の見た目の年齢層を算出する場合>と、<シミの見た目の年齢層を算出する場合>と、<シワの見た目の年齢層を算出する場合>とに分けて説明する。 The evaluation unit 103 calculates the age range of the subject's appearance, calculates the age range of the appearance of the form including sagging, and calculates the age range of the appearance of the subject based on the result of comparing the appearance acquired by the comparison result acquisition unit 102. It is possible to calculate the age range of appearance and the age range of appearance of wrinkles. Below, ``When calculating the age group of appearance'', ``When calculating the age group of appearance of forms including sagging'', ``Calculating the age group of appearance of age spots'', and ``When calculating the age group of appearance of wrinkles''. The case of calculating the age group will be explained separately.

<見た目の年齢層を算出する場合>
評価部103は、対象者の顔の画像(カメラ等で撮影された対象者の顔の画像)と、各年齢層の代表的な顔(つまり、各年齢層のたるみを含む形態とシミとシワとを有する顔)の画像と、の見た目を比較した結果に基づいて、対象者の見た目の年齢層を算出することができる。
<When calculating the apparent age group>
The evaluation unit 103 analyzes an image of the subject's face (an image of the subject's face taken with a camera, etc.) and a representative face of each age group (that is, the form including sagging, spots, and wrinkles of each age group). The age group of the subject's appearance can be calculated based on the result of comparing the image of the face with and the appearance of the subject.

評価部103は、下記のように、たるみを含む形態の見た目の年齢層と、シミの見た目の年齢層と、シワの見た目の年齢層と、のうちの少なくとも1つを算出することができる。
<たるみを含む形態の見た目の年齢層を算出する場合>
評価部103は、対象者の顔の画像(カメラ等で撮影された対象者の顔の画像)または対象者の顔のたるみを含む形態を表わす画像と、各年齢層の顔のたるみを含む形態を表わす画像と、の見た目を比較した結果に基づいて、対象者のたるみを含む形態の見た目の年齢層を算出することができる。
<シミの見た目の年齢層を算出する場合>
評価部103は、対象者の顔の画像(カメラ等で撮影された対象者の顔の画像)または対象者の顔のシミを表わす画像と、各年齢層の顔のシミを表わす画像と、の見た目を比較した結果に基づいて、対象者のシミの見た目の年齢層を算出することができる。
<シワの見た目の年齢層を算出する場合>
評価部103は、対象者の顔の画像(カメラ等で撮影された対象者の顔の画像)または対象者の顔のシワを表わす画像と、各年齢層の顔のシワを表わす画像と、の見た目を比較した結果に基づいて、対象者のシワの見た目の年齢層を算出することができる。
The evaluation unit 103 can calculate at least one of the age group of appearance including sagging, the age group of appearance of age spots, and the age group of appearance of wrinkles, as described below.
<When calculating the apparent age group of a shape that includes sagging>
The evaluation unit 103 generates an image of the subject's face (an image of the subject's face photographed with a camera, etc.) or an image representing the form of the subject's face including sagging, and a form including sagging of the face of each age group. Based on the results of comparing the appearance of the image with the image representing the image, it is possible to calculate the age group of the subject's appearance including sagging.
<When calculating the age group of the appearance of stains>
The evaluation unit 103 compares an image of the subject's face (an image of the subject's face photographed with a camera, etc.) or an image representing spots on the subject's face, and an image showing spots on the face of each age group. Based on the results of comparing the appearances, it is possible to calculate the age range of the appearance of the age spots on the subject.
<When calculating the age group of wrinkle appearance>
The evaluation unit 103 compares an image of the subject's face (an image of the subject's face photographed with a camera or the like) or an image representing wrinkles on the subject's face, and an image representing wrinkles on the face of each age group. Based on the results of comparing the appearance, it is possible to calculate the age group of the subject's wrinkle appearance.

<加齢の原因である割合を算出する場合>
評価部103は、たるみを含む形態、シミ、シワが、対象者の加齢の原因である割合を算出することができる。具体的には、評価部103は、対象者のたるみを含む形態の見た目の年齢層と、対象者の実年齢との差分を算出する。また、評価部103は、対象者のシミの見た目の年齢層と、対象者の実年齢との差分を算出する。また、評価部103は、対象者のシワの見た目の年齢層と、対象者の実年齢との差分を算出する。評価部103は、たるみを含む形態の差分とシミの差分とシワの差分との総数に対する、たるみを含む形態の差分の割合を、たるみを含む形態が対象者の加齢の原因である割合とする。また、評価部103は、たるみを含む形態の差分とシミの差分とシワの差分との総数に対する、シミの差分の割合を、シミが対象者の加齢の原因である割合とする。また、評価部103は、たるみを含む形態の差分とシミの差分とシワの差分との総数に対する、シワの差分の割合を、シワが対象者の加齢の原因である割合とする。
<When calculating the proportion that is the cause of aging>
The evaluation unit 103 can calculate the proportion of forms including sagging, spots, and wrinkles that are the cause of aging of the subject. Specifically, the evaluation unit 103 calculates the difference between the target person's apparent age group including sagging and the target person's actual age. Furthermore, the evaluation unit 103 calculates the difference between the age group of the subject's appearance of the stain and the subject's actual age. Furthermore, the evaluation unit 103 calculates the difference between the age group of the appearance of wrinkles of the subject and the actual age of the subject. The evaluation unit 103 determines the ratio of the difference in the form including sagging to the total number of differences in the form including sagging, the difference in stains, and the difference in wrinkles as the proportion of the form including sagging as the cause of aging of the subject. do. Furthermore, the evaluation unit 103 sets the ratio of the difference in age spots to the total number of differences in form including sagging, differences in age spots, and differences in wrinkles as the rate at which age spots are the cause of aging of the subject. Furthermore, the evaluation unit 103 determines the ratio of the difference in wrinkles to the total number of differences in form including sagging, differences in spots, and differences in wrinkles as the ratio of wrinkles as a cause of aging of the subject.

機械学習部105は、評価部103が算出した各見た目の年齢層を教師データとして機械学習して、顔の画像からその顔を有する者の見た目の年齢層を推論する。機械学習部105は、教師データ格納部151、生成部152、学習済みモデル格納部153、推論部154を含む。以下、それぞれについて説明する。 The machine learning unit 105 performs machine learning using each appearance age group calculated by the evaluation unit 103 as training data, and infers the appearance age group of the person having the face from the face image. The machine learning section 105 includes a teacher data storage section 151, a generation section 152, a learned model storage section 153, and an inference section 154. Each will be explained below.

教師データ格納部151には、入力データが対象者の顔の画像であり、出力データが評価部103が算出した各見た目の年齢層である教師データが格納されている。 The teacher data storage unit 151 stores teacher data in which the input data is an image of the subject's face and the output data is the age group of each appearance calculated by the evaluation unit 103.

生成部152は、教師データ格納部151内の教師データを用いて機械学習を行うことによって学習済みモデルを生成する。生成部152は、生成した学習済みモデルを学習済みモデル格納部153に格納する。 The generation unit 152 generates a learned model by performing machine learning using the teacher data in the teacher data storage unit 151. The generation unit 152 stores the generated trained model in the trained model storage unit 153.

学習済みモデル格納部153には、生成部152が生成した学習済みモデルが格納されている。 The trained model storage unit 153 stores the trained model generated by the generation unit 152.

推論部154は、任意の顔の画像を学習済みモデル格納部153内の学習済みモデルに入力して、その顔を有する者の見た目の年齢層を推論する。 The inference unit 154 inputs an image of an arbitrary face to the trained model in the trained model storage unit 153, and infers the apparent age group of the person having the face.

<方法>
図10は、本発明の一実施形態に係る見た目年齢の評価処理のフローチャートである。
<Method>
FIG. 10 is a flowchart of appearance age evaluation processing according to an embodiment of the present invention.

ステップ11(S11)において、表示部101は、顔画像格納部104に格納されている、対象者(つまり、見た目年齢を評価される者)の顔の画像と、その対象者の顔と比較するための顔の画像と、をユーザ端末20上に表示する。 In step 11 (S11), the display unit 101 compares the image of the face of the subject (that is, the person whose appearance age is being evaluated) stored in the face image storage unit 104 with the face of the subject. A face image for the user is displayed on the user terminal 20.

例えば、最初に表示する、対象者の顔と比較するための顔は、対象者の実年齢に基づいて選択される顔(例えば、対象者の実年齢から離れた年齢層の顔)であってもよいし、どの対象者に対しても一律に選択される顔(例えば、一律に30歳、40歳等)であってもよい。 For example, the first face to be displayed for comparison with the subject's face is a face selected based on the subject's chronological age (for example, a face in an age group far from the subject's chronological age). Alternatively, it may be a face that is uniformly selected for all subjects (for example, a face that is uniformly 30 years old, 40 years old, etc.).

ステップ12(S12)において、比較結果取得部102は、ユーザ端末20から、評価者によってユーザ端末20に入力された、S11で表示された2つの顔の見た目を比較した結果を取得する。 In step 12 (S12), the comparison result acquisition unit 102 acquires, from the user terminal 20, the result of comparing the appearance of the two faces displayed in S11, which was input into the user terminal 20 by the evaluator.

ステップ13(S13)において、表示部101は、S12で取得された比較結果に基づいて、S11の対象者の顔と比較するための顔の画像を、別の画像に差し替える。 In step 13 (S13), the display unit 101 replaces the face image for comparison with the target person's face in S11 with another image based on the comparison result obtained in S12.

ステップ14(S14)において、比較結果取得部102は、ユーザ端末20から、評価者によってユーザ端末20に入力された、S13で表示された2つの顔の見た目を比較した結果を取得する。 In step 14 (S14), the comparison result acquisition unit 102 acquires from the user terminal 20 the result of comparing the appearance of the two faces displayed in S13, which was input into the user terminal 20 by the evaluator.

ステップ15(S15)において、評価部103は、所定の回数の折り返しがあったか否かを判断する。所定の回数の折り返しが既にあった場合にはステップ16へ進み、所定の回数の折り返しが未だない場合にはステップ13へ戻る。 In step 15 (S15), the evaluation unit 103 determines whether or not there has been a predetermined number of loopbacks. If the predetermined number of loopbacks has already occurred, the process advances to step 16, and if the predetermined number of loopbacks has not yet been completed, the process returns to step 13.

ステップ16(S16)において、評価部103は、S12~S14で実施された比較の結果に基づいて、対象者の見た目年齢を評価する。 In step 16 (S16), the evaluation unit 103 evaluates the apparent age of the subject based on the results of the comparisons performed in S12 to S14.

<効果>
このように、本発明の一実施形態では、対象者の顔が、各年齢層の代表的な顔(つまり、各年齢層のたるみを含む形態とシミとシワとを有する顔)よりも年下に見えるかまたは年上に見えるかの比較を繰り返すことによって、対象者の見た目年齢を定量的に評価することができる。つまり、見た目年齢という感覚的な年齢を実証的に算出することができる。そのため、どの評価者も、対象者の見た目年齢を正確に評価することができる。
<Effect>
Thus, in one embodiment of the present invention, the subject's face is younger than the representative face of each age group (i.e., a face with a sagging form and spots and wrinkles of each age group). By repeatedly comparing whether the subject looks younger or older, the apparent age of the subject can be quantitatively evaluated. In other words, it is possible to empirically calculate a person's perceived age. Therefore, any evaluator can accurately evaluate the apparent age of the subject.

<ハードウェア構成>
図11は、本発明の一実施形態に係る評価装置10、ユーザ端末20のハードウェア構成の一例を示すブロック図である。評価装置10、ユーザ端末20は、CPU(Central Processing Unit)1、ROM(Read Only Memory)2、RAM(Random Access Memory)3を有する。CPU1、ROM2、RAM3は、いわゆるコンピュータを形成する。
<Hardware configuration>
FIG. 11 is a block diagram showing an example of the hardware configuration of the evaluation device 10 and the user terminal 20 according to an embodiment of the present invention. The evaluation device 10 and the user terminal 20 have a CPU (Central Processing Unit) 1, a ROM (Read Only Memory) 2, and a RAM (Random Access Memory) 3. CPU1, ROM2, and RAM3 form what is called a computer.

また、評価装置10、ユーザ端末20は、補助記憶装置4、表示装置5、操作装置6、I/F(Interface)装置7、ドライブ装置8を有することができる。なお、評価装置10、ユーザ端末20の各ハードウェアは、バスBを介して相互に接続されている。 Furthermore, the evaluation device 10 and the user terminal 20 can include an auxiliary storage device 4, a display device 5, an operating device 6, an I/F (Interface) device 7, and a drive device 8. Note that the hardware of the evaluation device 10 and the user terminal 20 are interconnected via a bus B.

CPU1は、補助記憶装置4にインストールされている各種プログラムを実行する演算デバイスである。 The CPU 1 is a calculation device that executes various programs installed in the auxiliary storage device 4.

ROM2は、不揮発性メモリである。ROM2は、補助記憶装置4にインストールされている各種プログラムをCPU1が実行するために必要な各種プログラム、データ等を格納する主記憶デバイスとして機能する。具体的には、ROM2はBIOS(Basic Input/Output System)やEFI(Extensible Firmware Interface)等のブートプログラム等を格納する、主記憶デバイスとして機能する。 ROM2 is a nonvolatile memory. The ROM 2 functions as a main storage device that stores various programs, data, etc. necessary for the CPU 1 to execute various programs installed in the auxiliary storage device 4 . Specifically, the ROM 2 functions as a main storage device that stores boot programs such as BIOS (Basic Input/Output System) and EFI (Extensible Firmware Interface).

RAM3は、DRAM(Dynamic Random Access Memory)やSRAM(Static Random Access Memory)等の揮発性メモリである。RAM3は、補助記憶装置4にインストールされている各種プログラムがCPU1によって実行される際に展開される作業領域を提供する、主記憶デバイスとして機能する。 The RAM 3 is a volatile memory such as DRAM (Dynamic Random Access Memory) or SRAM (Static Random Access Memory). The RAM 3 functions as a main storage device that provides a work area in which various programs installed in the auxiliary storage device 4 are expanded when executed by the CPU 1.

補助記憶装置4は、各種プログラムや、各種プログラムが実行される際に用いられる情報を格納する補助記憶デバイスである。 The auxiliary storage device 4 is an auxiliary storage device that stores various programs and information used when the various programs are executed.

表示装置5は、評価装置10、ユーザ端末20の内部状態等を表示する表示デバイスである。 The display device 5 is a display device that displays the internal status of the evaluation device 10, the user terminal 20, and the like.

操作装置6は、評価装置10、ユーザ端末20を用いる者が評価装置10、ユーザ端末20に対して各種指示を入力する入力デバイスである。 The operating device 6 is an input device through which a person using the evaluation device 10 and the user terminal 20 inputs various instructions to the evaluation device 10 and the user terminal 20.

I/F装置7は、ネットワークに接続し、ユーザ端末20、評価装置10と通信を行うための通信デバイスである。 The I/F device 7 is a communication device that connects to a network and communicates with the user terminal 20 and the evaluation device 10.

ドライブ装置8は記憶媒体9をセットするためのデバイスである。ここでいう記憶媒体9には、CD-ROM、フレキシブルディスク、光磁気ディスク等のように情報を光学的、電気的あるいは磁気的に記録する媒体が含まれる。また、記憶媒体9には、EPROM (Erasable Programmable Read Only Memory)、フラッシュメモリ等のように情報を電気的に記録する半導体メモリ等が含まれていてもよい。 The drive device 8 is a device for setting the storage medium 9. The storage medium 9 here includes a medium for recording information optically, electrically, or magnetically, such as a CD-ROM, a flexible disk, or a magneto-optical disk. Further, the storage medium 9 may include a semiconductor memory that records information electrically, such as an EPROM (Erasable Programmable Read Only Memory) or a flash memory.

なお、補助記憶装置4にインストールされる各種プログラムは、例えば、配布された記憶媒体9がドライブ装置8にセットされ、該記憶媒体9に記録された各種プログラムがドライブ装置8により読み出されることでインストールされる。あるいは、補助記憶装置4にインストールされる各種プログラムは、I/F装置7を介して、ネットワークよりダウンロードされることでインストールされてもよい。 The various programs to be installed in the auxiliary storage device 4 can be installed by, for example, setting the distributed storage medium 9 in the drive device 8 and reading out the various programs recorded on the storage medium 9 by the drive device 8. be done. Alternatively, various programs to be installed in the auxiliary storage device 4 may be installed by being downloaded from a network via the I/F device 7.

以上、本発明の実施例について詳述したが、本発明は上述した特定の実施形態に限定されるものではなく、特許請求の範囲に記載された本発明の要旨の範囲内において、種々の変形・変更が可能である。 Although the embodiments of the present invention have been described in detail above, the present invention is not limited to the specific embodiments described above, and various modifications can be made within the scope of the gist of the present invention described in the claims. - Can be changed.

10 評価装置
20 ユーザ端末
30 ネットワーク
101 表示部
102 比較結果取得部
103 評価部
104 顔画像格納部
105 機械学習部
151 教師データ格納部
152 生成部
153 学習済みモデル格納部
154 推論部
10 Evaluation device 20 User terminal 30 Network 101 Display unit 102 Comparison result acquisition unit 103 Evaluation unit 104 Face image storage unit 105 Machine learning unit 151 Teacher data storage unit 152 Generation unit 153 Learned model storage unit 154 Inference unit

Claims (9)

対象者の顔の画像と、前記対象者の顔と比較するための顔の画像とを表示し、前記対象者の顔と比較するための顔の画像は、各年齢層のたるみを含む形態とシミとシワとを有する前記各年齢層の代表的な顔の画像である、表示部と、
評価者によって入力された、前記対象者の顔と、前記対象者の顔と比較するための顔との見た目を比較した結果を取得する比較結果取得部と、
前記結果が、前記対象者の方が年下に見えるという結果、または、前記対象者のたるみを含む形態またはシミまたはシワの方が目立たないという結果の場合、前記対象者の顔と比較するための顔の画像を、現状よりも低い年齢層の画像に差し替え、
前記結果が、前記対象者の方が年上に見えるという結果、または、前記対象者のたるみを含む形態またはシミまたはシワの方が目立つという結果の場合、前記対象者の顔と比較するための顔の画像を、現状よりも高い年齢層の画像に差し替え、
前記結果の取得および前記画像の差し替えを繰り返し、前記対象者の顔と比較するための顔の年齢層が上昇から下降へ切り替わる地点および下降から上昇へ切り替わる地点が所定の個数以上あると、全ての前記地点での年齢層の平均値を前記対象者の見た目の年齢層とする、評価部と
を備えた評価装置。
A face image of a subject and a face image for comparison with the subject's face are displayed, and the face image for comparison with the subject's face has a shape including sagging for each age group. a display section that is an image of a representative face of each age group having spots and wrinkles;
a comparison result acquisition unit that acquires a result of comparing the appearance of the target person's face input by an evaluator and a face for comparison with the target person's face;
If the result is that the subject looks younger, or that the subject's sagging form, spots, or wrinkles are less noticeable, to compare with the subject's face. Replace the image of the face with an image of a younger age group than the current one,
If the result is that the subject looks older, or that the subject's sagging form or spots or wrinkles are more noticeable, then Replace the face image with an image of an older age group than the current one,
By repeating the acquisition of the results and the replacement of the images, if there are a predetermined number of points or more where the age group of the face to be compared with the subject's face switches from rising to falling and from falling to rising, then all An evaluation device comprising: an evaluation unit that takes the average value of the age groups at the point as the apparent age group of the subject .
対象者の顔の画像と、前記対象者の顔と比較するための顔の画像とを表示し、前記対象者の顔と比較するための顔の画像は、各年齢層の顔のたるみを含む形態を表わす画像と、各年齢層の顔のシミを表わす画像と、各年齢層の顔のシワを表わす画像とのうちの少なくとも1つである、表示部と、
評価者によって入力された、前記対象者の顔と、前記対象者の顔と比較するための顔との見た目を比較した結果を取得する比較結果取得部と、
前記結果が、前記対象者の方が年下に見えるという結果、または、前記対象者のたるみを含む形態またはシミまたはシワの方が目立たないという結果の場合、前記対象者の顔と比較するための顔の画像を、現状よりも低い年齢層の画像に差し替え、
前記結果が、前記対象者の方が年上に見えるという結果、または、前記対象者のたるみを含む形態またはシミまたはシワの方が目立つという結果の場合、前記対象者の顔と比較するための顔の画像を、現状よりも高い年齢層の画像に差し替え、
前記結果の取得および前記画像の差し替えを繰り返し、前記対象者の顔と比較するための顔の年齢層が上昇から下降へ切り替わる地点および下降から上昇へ切り替わる地点が所定の個数以上あると、全ての前記地点での年齢層の平均値を前記対象者の見た目の年齢層とする、評価部と
を備えた評価装置。
Displaying an image of a face of a subject and a face image for comparison with the face of the subject, wherein the face image for comparison with the face of the subject includes facial sagging of each age group. a display unit that is at least one of an image representing the morphology, an image representing facial spots of each age group, and an image representing facial wrinkles of each age group;
a comparison result acquisition unit that acquires a result of comparing the appearance of the target person's face input by an evaluator and a face for comparison with the target person's face;
If the result is that the subject looks younger, or that the subject's sagging form, spots, or wrinkles are less noticeable, to compare with the subject's face. Replace the image of the face with an image of a younger age group than the current one,
If the result is that the subject looks older, or that the subject's sagging form or spots or wrinkles are more noticeable, then Replace the face image with an image of an older age group than the current one,
By repeating the acquisition of the results and the replacement of the images, if there are a predetermined number of points or more where the age group of the face to be compared with the subject's face switches from rising to falling and from falling to rising, then all An evaluation device comprising: an evaluation unit that takes the average value of the age groups at the point as the apparent age group of the subject .
前記対象者の顔と比較するための顔の画像は、各年齢層の顔のたるみを含む形態を表わす画像と、各年齢層の顔のシミを表わす画像と、各年齢層の顔のシワを表わす画像であり、
前記評価部は、前記各見た目の年齢層と、前記対象者の実年齢との差分に基づいて、前記たるみを含む形態が前記対象者の加齢の原因である割合と、前記シミが前記対象者の加齢の原因である割合と、前記シワが前記対象者の加齢の原因である割合を算出する、請求項2に記載の評価装置。
The facial images to be compared with the target person's face include images representing the shape of the face including sagging in each age group, images representing spots on the face of each age group, and images representing wrinkles on the face of each age group. It is an image that represents
The evaluation unit determines, based on the difference between the age group of each appearance and the actual age of the subject, the rate at which the form including sagging is the cause of aging of the subject, and the rate at which the age spots are the cause of aging of the subject. The evaluation device according to claim 2, wherein the evaluation device calculates a percentage of aging of the subject and a percentage of the wrinkles being a cause of aging of the subject.
前記対象者の顔の画像は、前記対象者の顔が撮影された画像、または、前記対象者の顔のたるみを含む形態を表わす画像と前記対象者の顔のシミを表わす画像と前記対象者の顔のシワを表わす画像とのうちの少なくとも1つである、請求項2または3に記載の評価装置。 The image of the target person's face is an image in which the target person's face is photographed, or an image representing the form of the target person's face including sagging, an image representing the stain on the target person's face, and the target person. The evaluation device according to claim 2 or 3, wherein the evaluation device is at least one of an image representing facial wrinkles. 前記対象者の顔と比較するための顔は、各年齢層内での加齢の程度により区分けされている、請求項1からのいずれか一項に記載の評価装置。 The evaluation device according to any one of claims 1 to 4 , wherein the faces to be compared with the subject's face are classified according to the degree of aging within each age group. 前記各年齢層は、年齢で区分けされている、請求項1からのいずれか一項に記載の評価装置。 The evaluation device according to any one of claims 1 to 5 , wherein each of the age groups is divided by age. 入力データが前記対象者の顔の画像であり、出力データが前記見た目の年齢層である教師データを用いて機械学習を行うことによって学習済みモデルを生成する生成部をさらに備え、
顔の画像を前記学習済みモデルに入力して、前記顔を有する者の見た目の年齢層を推論
する推論部をさらに備えた、請求項1からのいずれか一項に記載の評価装置。
further comprising a generation unit that generates a learned model by performing machine learning using teacher data in which input data is an image of the face of the subject and output data is the age group of appearance;
The evaluation device according to any one of claims 1 to 6 , further comprising an inference unit that inputs a face image to the learned model and infers the apparent age group of the person having the face.
対象者の顔の画像と、前記対象者の顔と比較するための顔の画像とを表示し、前記対象者の顔と比較するための顔の画像は、各年齢層のたるみを含む形態とシミとシワとを有する前記各年齢層の代表的な顔の画像である、ステップと、
評価者によって入力された、前記対象者の顔と、前記対象者の顔と比較するための顔との見た目を比較した結果を取得するステップと、
前記結果が、前記対象者の方が年下に見えるという結果、または、前記対象者のたるみを含む形態またはシミまたはシワの方が目立たないという結果の場合、前記対象者の顔と比較するための顔の画像を、現状よりも低い年齢層の画像に差し替え、
前記結果が、前記対象者の方が年上に見えるという結果、または、前記対象者のたるみを含む形態またはシミまたはシワの方が目立つという結果の場合、前記対象者の顔と比較するための顔の画像を、現状よりも高い年齢層の画像に差し替え、
前記結果の取得および前記画像の差し替えを繰り返し、前記対象者の顔と比較するための顔の年齢層が上昇から下降へ切り替わる地点および下降から上昇へ切り替わる地点が所定の個数以上あると、全ての前記地点での年齢層の平均値を前記対象者の見た目の年齢層とする、ステップと
を含む方法。
A face image of a subject and a face image for comparison with the subject's face are displayed, and the face image for comparison with the subject's face has a shape including sagging for each age group. a step that is a representative face image of each age group having spots and wrinkles;
obtaining a result of comparing the appearance of the target person's face input by an evaluator and a face for comparison with the target person's face;
If the result is that the subject looks younger, or that the subject's sagging form, spots, or wrinkles are less noticeable, to compare with the subject's face. Replace the image of the face with an image of a younger age group than the current one,
If the result is that the subject looks older, or that the subject's sagging form or spots or wrinkles are more noticeable, then Replace the face image with an image of an older age group than the current one,
By repeating the acquisition of the results and the replacement of the images, if there are a predetermined number of points or more where the age group of the face to be compared with the subject's face switches from rising to falling and from falling to rising, then all A method comprising the steps of: setting the average value of the age group at the point as the apparent age group of the subject .
コンピュータを
対象者の顔の画像と、前記対象者の顔と比較するための顔の画像とを表示し、前記対象者の顔と比較するための顔の画像は、各年齢層のたるみを含む形態とシミとシワとを有する前記各年齢層の代表的な顔の画像である、表示部、
評価者によって入力された、前記対象者の顔と、前記対象者の顔と比較するための顔との見た目を比較した結果を取得する比較結果取得部、
前記結果が、前記対象者の方が年下に見えるという結果、または、前記対象者のたるみを含む形態またはシミまたはシワの方が目立たないという結果の場合、前記対象者の顔と比較するための顔の画像を、現状よりも低い年齢層の画像に差し替え、
前記結果が、前記対象者の方が年上に見えるという結果、または、前記対象者のたるみを含む形態またはシミまたはシワの方が目立つという結果の場合、前記対象者の顔と比較するための顔の画像を、現状よりも高い年齢層の画像に差し替え、
前記結果の取得および前記画像の差し替えを繰り返し、前記対象者の顔と比較するための顔の年齢層が上昇から下降へ切り替わる地点および下降から上昇へ切り替わる地点が所定の個数以上あると、全ての前記地点での年齢層の平均値を前記対象者の見た目の年齢層とする、評価部
として機能させるためのプログラム。
displaying an image of a face of a subject and a face image for comparison with the face of the subject; the face image for comparison with the face of the subject includes sagging for each age group; a display section that is a representative image of a face of each age group having a shape, spots, and wrinkles;
a comparison result acquisition unit that acquires a result of comparing the appearance of the target person's face input by an evaluator and a face for comparison with the target person's face;
If the result is that the subject looks younger, or that the subject's sagging form, spots, or wrinkles are less noticeable, to compare with the subject's face. Replace the image of the face with an image of a younger age group than the current one,
If the result is that the subject looks older, or that the subject's sagging form or spots or wrinkles are more noticeable, then Replace the face image with an image of an older age group than the current one,
By repeating the acquisition of the results and the replacement of the images, if there are a predetermined number of points or more where the age group of the face to be compared with the subject's face switches from rising to falling and from falling to rising, then all A program for functioning as an evaluation section that takes the average value of the age groups at the point as the apparent age group of the subject .
JP2019197775A 2019-10-30 2019-10-30 Evaluation equipment, methods, and programs Active JP7405562B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2019197775A JP7405562B2 (en) 2019-10-30 2019-10-30 Evaluation equipment, methods, and programs

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019197775A JP7405562B2 (en) 2019-10-30 2019-10-30 Evaluation equipment, methods, and programs

Publications (2)

Publication Number Publication Date
JP2021071888A JP2021071888A (en) 2021-05-06
JP7405562B2 true JP7405562B2 (en) 2023-12-26

Family

ID=75713200

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019197775A Active JP7405562B2 (en) 2019-10-30 2019-10-30 Evaluation equipment, methods, and programs

Country Status (1)

Country Link
JP (1) JP7405562B2 (en)

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019054638A1 (en) 2017-09-13 2019-03-21 이재준 Image analysis method and apparatus and computer program

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019054638A1 (en) 2017-09-13 2019-03-21 이재준 Image analysis method and apparatus and computer program

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
マンダム、"見た目の印象"についての研究 ~"標準顔"の作成と応用~,株式会社マンダム,2009年08月18日,https://www.mandom.co.jp/release/pdf/2009081802.pdf

Also Published As

Publication number Publication date
JP2021071888A (en) 2021-05-06

Similar Documents

Publication Publication Date Title
Wyatte et al. The limits of feedforward vision: Recurrent processing promotes robust object recognition when objects are degraded
TWI731297B (en) Risk prediction method and apparatus, storage medium, and server
Liu et al. DeepFaceLIFT: interpretable personalized models for automatic estimation of self-reported pain
CN109829894A (en) Parted pattern training method, OCT image dividing method, device, equipment and medium
CN104298753B (en) Personal assessment methods based on face image processing
JP2024501986A (en) 3D face reconstruction method, 3D face reconstruction apparatus, device, and storage medium
JP6744905B2 (en) Improved age modeling method
CN113661520A (en) Modifying the appearance of hair
CN112990540A (en) Skin care product efficacy evaluation and prediction system and method
CN114842522A (en) Artificial intelligence auxiliary evaluation method applied to beauty treatment
Kim et al. A Bayesian mixture approach to modeling spatial activation patterns in multisite fMRI data
Naveed et al. Eye tracking system with blink detection
CN109410138A (en) Modify jowled methods, devices and systems
CN113298800B (en) CT angiography CTA source image processing method, device and equipment
McDonnell et al. Model for predicting perception of facial action unit activation using virtual humans
JP7405562B2 (en) Evaluation equipment, methods, and programs
Trotta et al. A neural network-based software to recognise blepharospasm symptoms and to measure eye closure time
JP2019032591A (en) Computer system
CN115686199B (en) Group eye movement track generation method and device, computing equipment and storage medium
KR102585919B1 (en) Performance evaluation method and system for multiple classification models
CN112070662B (en) Evaluation method and device of face changing model, electronic equipment and storage medium
KR20230054286A (en) System and method for diagnosing skin based on analysis of image using deep learning
JP2024521106A (en) Artificial intelligence based system and method for analyzing user-specific skin or hair data to predict user-specific skin or hair conditions
CN111222374A (en) Lie detection data processing method and device, computer equipment and storage medium
Redi et al. How to apply spatial saliency into objective metrics for JPEG compressed images?

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220830

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230606

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230731

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20231114

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20231214

R150 Certificate of patent or registration of utility model

Ref document number: 7405562

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150