JP7068215B2 - Integration degree estimation device and integration degree estimation method - Google Patents

Description

本発明は、統合度推定装置及び統合度推定方法に関する。 The present invention relates to an integration degree estimation device and an integration degree estimation method.

従来、インタラクションにおける被験者の身体動作に基づいて、被験者の状態を推定することが行われている。例えば、特許文献１では、議論に参加している対象者の身体動作に基づいて、対象者の興味度、混乱度、退屈度、苛立ち度等の状態を推定し、対象者にフィードバックすることにより、議論の進行を支援する技術が開示されている。 Conventionally, the state of a subject is estimated based on the physical movement of the subject in the interaction. For example, in Patent Document 1, based on the physical movements of the subject participating in the discussion, the state of interest, confusion, boredom, irritation, etc. of the subject is estimated and fed back to the subject. , Techniques to support the progress of the discussion are disclosed.

米国特許第８６７００１８号明細書US Pat. No. 8,670,0018

ところで、議論を行う場合、複数の対象者がまとまって議論を行っているのか、分散して議論を行っているのかといった対象者の統合度に基づいて、議論を評価することができる。議論を評価することにより、次回開催される議論の進行管理等に役立てることができる。しかしながら、特許文献１において開示されている技術は、複数の対象者の統合度を推定することができず、議論の状態を評価することができないという問題がある。 By the way, when a discussion is held, the discussion can be evaluated based on the degree of integration of the subjects, such as whether a plurality of subjects are discussing together or in a distributed manner. By evaluating the discussion, it can be useful for managing the progress of the next discussion. However, the technique disclosed in Patent Document 1 has a problem that the degree of integration of a plurality of subjects cannot be estimated and the state of discussion cannot be evaluated.

そこで、本発明はこれらの点に鑑みてなされたものであり、複数の対象者の統合度を推定することができる統合度推定装置及び統合度推定方法を提供することを目的とする。 Therefore, the present invention has been made in view of these points, and an object of the present invention is to provide an integration degree estimation device and an integration degree estimation method capable of estimating the integration degree of a plurality of subjects.

本発明の第１の態様に係る統合度推定装置は、所定期間に含まれる複数の期間のそれぞれにおける、所定エリアに存在する複数の対象者により構成されるグループの状態を推定するグループ状態推定部と、前記グループ状態推定部が推定した前記複数の期間のそれぞれの前記グループの状態に基づいて、前記所定期間における前記複数の対象者のまとまり度合いを示す統合度を推定する統合度推定部と、前記統合度推定部が推定した前記統合度を示す情報を出力する出力部と、を備える。 The integration degree estimation device according to the first aspect of the present invention is a group state estimation unit that estimates the state of a group composed of a plurality of subjects existing in a predetermined area in each of a plurality of periods included in a predetermined period. An integration degree estimation unit that estimates the degree of integration indicating the degree of cohesion of the plurality of subjects in the predetermined period based on the state of the group in each of the plurality of periods estimated by the group state estimation unit. It includes an output unit that outputs information indicating the degree of integration estimated by the degree of integration estimation unit.

前記グループ状態推定部は、前記グループの状態として、前記複数の対象者により１つのグループが構成されている第１状態、複数のグループが構成されるとともに、前記複数の対象者のうち、一部の対象者が前記複数のグループに属している第２状態、及び複数のグループが構成されるとともに、複数のグループ間において対象者が重複していない第３状態のいずれであるかを推定してもよい。 In the group state estimation unit, as the state of the group, a first state in which one group is composed of the plurality of subjects, a plurality of groups are configured, and a part of the plurality of subjects is included. It is estimated whether the target person is in the second state in which the target person belongs to the plurality of groups, or in the third state in which the plurality of groups are configured and the target person does not overlap among the plurality of groups. May be good.

前記統合度推定部は、前記所定期間における、前記第１状態、前記第２状態、及び前記第３状態のそれぞれの出現割合に基づいて、前記所定期間における前記複数の対象者の統合度を推定してもよい。 The integration degree estimation unit estimates the integration degree of the plurality of subjects in the predetermined period based on the appearance ratios of the first state, the second state, and the third state in the predetermined period. You may.

前記グループ状態推定部は、前記対象者の他の対象者への注視量、前記対象者の発話量、及び前記対象者の他の対象者との共感度合いの少なくともいずれかに基づいて、前記グループにおける活性度を推定し、前記統合度推定部は、前記グループ状態推定部が推定した前記グループの活性度にさらに基づいて、前記所定期間における前記複数の対象者の統合度を推定してもよい。 The group state estimation unit is based on at least one of the amount of attention of the subject to another subject, the amount of speech of the subject, and the sympathy of the subject with other subjects. The degree of integration may be estimated, and the degree of integration estimation unit may estimate the degree of integration of the plurality of subjects in the predetermined period based on the degree of activity of the group estimated by the group state estimation unit. ..

前記グループ状態推定部は、前記対象者の他の対象者への注視量、前記対象者の発話量、及び前記対象者の他の対象者との共感度合いの少なくともいずれかに基づいて、前記第２状態における前記複数のグループの関連度を特定し、前記統合度推定部は、前記第２状態における前記複数のグループの関連度にさらに基づいて、前記所定期間における前記複数の対象者の統合度を推定してもよい。 The group state estimation unit is based on at least one of the amount of gaze of the subject to another subject, the amount of utterance of the subject, and the sympathy of the subject with the other subject. The degree of relevance of the plurality of groups in the two states is specified, and the degree of integration estimation unit further bases on the degree of relevance of the plurality of groups in the second state, and the degree of integration of the plurality of subjects in the predetermined period. May be estimated.

前記統合度推定部は、前記グループ状態推定部が推定した前記複数の期間のそれぞれの前記グループの状態の時間的な変化に基づいて、前記所定期間における前記複数の対象者の統合度を推定してもよい。 The integration degree estimation unit estimates the integration degree of the plurality of subjects in the predetermined period based on the temporal change of the state of the group in each of the plurality of periods estimated by the group state estimation unit. You may.

前記統合度推定部は、前記グループ状態推定部が推定した前記グループの状態の変遷頻度に基づいて、前記所定期間における前記複数の対象者の統合度を推定してもよい。
前記統合度推定部は、前記グループ状態推定部が推定した複数の前記グループの状態のそれぞれの発生時期に基づいて、前記所定期間における前記複数の対象者の統合度を推定してもよい。 The degree of integration estimation unit may estimate the degree of integration of the plurality of subjects in the predetermined period based on the transition frequency of the state of the group estimated by the group state estimation unit.
The degree of integration estimation unit may estimate the degree of integration of the plurality of subjects in the predetermined period based on the occurrence time of each of the plurality of states of the group estimated by the group state estimation unit.

前記統合度推定装置は、過去に推定された、所定期間に含まれる複数の期間における前記グループの状態を示す期間内状態情報と、当該期間内状態情報に対応する複数の対象者の間で行われた対話の良否を示す情報とを含むデータセットを教師データとし、前記期間内状態情報の入力に対して、当該期間内状態情報に対応する複数の対象者の間で行われた対話の良否を示す情報を出力する分類モデルを生成するモデル生成部と、前記グループ状態推定部が推定したグループの状態を示す期間内状態情報を前記分類モデルに入力し、前記分類モデルから、当該期間内状態情報に対応する複数の対象者の間で行われた対話の良否を示す情報を取得することにより、前記複数の対象者の間で行われた対話の良否を判定する判定部と、をさらに備え、前記出力部は、前記判定部による判定結果を出力してもよい。 The degree of integration estimation device is performed between a plurality of target persons corresponding to the in-period state information indicating the state of the group in a plurality of periods included in a predetermined period and the in-period state information estimated in the past. The data set including the information indicating the quality of the dialogue is used as the teacher data, and the quality of the dialogue performed between a plurality of subjects corresponding to the status information within the period is received in response to the input of the status information within the period. A model generation unit that generates a classification model that outputs information indicating Further provided with a determination unit for determining the quality of the dialogue conducted between the plurality of subjects by acquiring the information indicating the quality of the dialogue conducted between the plurality of subjects corresponding to the information. , The output unit may output the determination result by the determination unit.

本発明の第２の態様に係る統合度推定方法は、コンピュータが実行する、所定期間に含まれる複数の期間のそれぞれにおける、所定エリアに存在する複数の対象者により構成されるグループの状態を推定するステップと、推定された前記複数の期間のそれぞれの前記グループの状態に基づいて、前記所定期間における前記複数の対象者の統合度を推定するステップと、推定された統合度を示す情報を出力するステップと、を備える。 The integration degree estimation method according to the second aspect of the present invention estimates the state of a group composed of a plurality of subjects existing in a predetermined area in each of a plurality of periods included in a predetermined period executed by a computer. Steps to estimate, a step to estimate the degree of integration of the plurality of subjects in the predetermined period based on the state of the group in each of the estimated plurality of periods, and output information indicating the estimated degree of integration. With steps to do.

本発明によれば、複数の対象者の統合度を推定することができるという効果を奏する。 According to the present invention, there is an effect that the degree of integration of a plurality of subjects can be estimated.

第１実施形態に係る統合度推定装置の概要を示す図である。It is a figure which shows the outline of the integration degree estimation apparatus which concerns on 1st Embodiment. 第１実施形態に係る統合度推定装置の構成を示す図である。It is a figure which shows the structure of the integration degree estimation apparatus which concerns on 1st Embodiment. 複数の期間のそれぞれに対して推定されたグループの状態の例を示す図である。It is a figure which shows the example of the state of the group estimated for each of a plurality of periods. 複数の期間のそれぞれに対して推定されたグループの状態の別の例を示す図である。It is a figure which shows another example of the state of the group estimated for each of a plurality of periods. 第１実施形態に係る統合度推定装置の処理の流れを示すフローチャートである。It is a flowchart which shows the process flow of the integration degree estimation apparatus which concerns on 1st Embodiment. 第２実施形態に係る統合度推定装置の構成を示す図である。It is a figure which shows the structure of the integration degree estimation apparatus which concerns on 2nd Embodiment.

＜第１実施形態＞
［統合度推定装置１の概要］
図１は、第１実施形態に係る統合度推定装置１の概要を示す図である。統合度推定装置１は、所定エリアにおける複数の対象者の所定期間におけるまとまり度合いを示す統合度を推定するコンピュータである。ここで、所定エリアは、例えば会議室やホール等のフロアである。複数の対象者は、所定の議題に対して議論等の対話を行うものとする。統合度は、例えば、複数の対象者における対話のまとまり度合いを示す状態である。図１に示す例では、所定エリアには、複数の対象者として、複数の対象者Ｐが存在している。 <First Embodiment>
[Overview of integration degree estimation device 1]
FIG. 1 is a diagram showing an outline of the degree of integration estimation device 1 according to the first embodiment. The degree of integration estimation device 1 is a computer that estimates the degree of integration indicating the degree of unity of a plurality of subjects in a predetermined area in a predetermined period. Here, the predetermined area is, for example, a floor such as a conference room or a hall. Multiple subjects shall engage in dialogue such as discussions on the prescribed agenda. The degree of integration is, for example, a state indicating the degree of cohesiveness of dialogue among a plurality of subjects. In the example shown in FIG. 1, a plurality of target persons P exist as a plurality of target persons in a predetermined area.

統合度推定装置１は、所定期間に含まれる複数の期間のそれぞれにおける、複数の対象者により構成されるグループＧの状態を推定する。図１に示す例では、統合度推定装置１は、グループＧの状態として、統合状態（第１状態）、準統合状態（第２状態）、並列状態（第３状態）のいずれであるかを推定する。統合状態は、複数の対象者により１つのグループが構成されている状態である。準統合状態は、複数のグループが構成されるとともに、複数の対象者のうち、一部の対象者が複数のグループに属している状態である。並列状態は、複数のグループが構成されるとともに、複数のグループ間において対象者が重複していない状態である。 The integration degree estimation device 1 estimates the state of the group G composed of a plurality of subjects in each of the plurality of periods included in the predetermined period. In the example shown in FIG. 1, the degree of integration estimation device 1 determines whether the state of the group G is an integrated state (first state), a quasi-integrated state (second state), or a parallel state (third state). presume. The integrated state is a state in which one group is composed of a plurality of subjects. The quasi-integrated state is a state in which a plurality of groups are configured and some of the target persons belong to a plurality of groups among the plurality of target persons. The parallel state is a state in which a plurality of groups are configured and the target person is not duplicated among the plurality of groups.

統合度推定装置１は、複数の期間のそれぞれに対して推定したグループの状態に基づいて、所定期間における複数の対象者の統合度を推定する。統合度推定装置１は、推定した統合度を示す情報を出力する。このようにすることで、統合度推定装置１は、複数の対象者の統合度を推定することができる。これにより、議題の設定者等は、対話の状態を評価することができる。 The integration degree estimation device 1 estimates the integration degree of a plurality of subjects in a predetermined period based on the state of the group estimated for each of the plurality of periods. The integration degree estimation device 1 outputs information indicating the estimated integration degree. By doing so, the integration degree estimation device 1 can estimate the integration degree of a plurality of subjects. This allows the agenda setter and the like to evaluate the state of the dialogue.

［統合度推定装置１の構成］
続いて、統合度推定装置１の構成を説明する。図２は、第１実施形態に係る統合度推定装置１の構成を示す図である。図２に示すように、統合度推定装置１は、記憶部１１と、制御部１２とを備える。 [Configuration of integration degree estimation device 1]
Subsequently, the configuration of the integration degree estimation device 1 will be described. FIG. 2 is a diagram showing a configuration of the degree of integration estimation device 1 according to the first embodiment. As shown in FIG. 2, the integration degree estimation device 1 includes a storage unit 11 and a control unit 12.

記憶部１１は、ＲＯＭ（Read Only Memory）及びＲＡＭ（Random Access Memory）等を含む記憶媒体である。記憶部１１は、制御部１２が実行するプログラムを記憶している。例えば、記憶部１１は、制御部１２を、グループ状態推定部１２１、統合度推定部１２２、及び出力部１２３として機能させる統合度推定プログラムを記憶している。 The storage unit 11 is a storage medium including a ROM (Read Only Memory), a RAM (Random Access Memory), and the like. The storage unit 11 stores a program executed by the control unit 12. For example, the storage unit 11 stores an integration degree estimation program that causes the control unit 12 to function as a group state estimation unit 121, an integration degree estimation unit 122, and an output unit 123.

制御部１２は、例えばＣＰＵ（Central Processing Unit）である。制御部１２は、記憶部１１に記憶された統合度推定プログラムを実行することにより、グループ状態推定部１２１、統合度推定部１２２、及び出力部１２３として機能する。 The control unit 12 is, for example, a CPU (Central Processing Unit). The control unit 12 functions as a group state estimation unit 121, an integration degree estimation unit 122, and an output unit 123 by executing the integration degree estimation program stored in the storage unit 11.

［グループ状態の推定］
グループ状態推定部１２１は、所定期間に含まれる複数の期間のそれぞれにおける、所定エリアに存在する複数の対象者により構成されるグループの状態を推定する。例えば、まず、グループ状態推定部１２１は、複数の期間のそれぞれに対応する、対象者の位置と、対象者の視線方向とを関連付けた視線情報を取得する。グループ状態推定部１２１は、取得した視線情報に基づいて、複数の対象者のそれぞれが注視する領域を示す注視領域を特定する。また、グループ状態推定部１２１は、複数の期間のそれぞれに対応する対象者の発話の内容を示す発話情報と、対象者のうなずき動作等の各種動作を示す動作情報とを取得する。 [Estimation of group state]
The group state estimation unit 121 estimates the state of a group composed of a plurality of subjects existing in a predetermined area in each of the plurality of periods included in the predetermined period. For example, first, the group state estimation unit 121 acquires line-of-sight information in which the position of the target person and the line-of-sight direction of the target person are associated with each of the plurality of periods. Based on the acquired gaze information, the group state estimation unit 121 identifies a gaze area indicating an area to be gazed by each of the plurality of subjects. Further, the group state estimation unit 121 acquires utterance information indicating the content of the utterance of the target person corresponding to each of the plurality of periods, and operation information indicating various movements such as the nodding movement of the target person.

グループ状態推定部１２１は、複数の期間のそれぞれに対応する注視領域、発話情報、及び動作情報に基づいて、複数の期間のそれぞれにおいて形成されているグループを特定する。例えば、グループ状態推定部１２１は、複数の対象者の間で注視領域が共通する時間、発話情報が示す対象者同士の発話の頻度、及び動作情報が示す対象者同士の共感動作の頻度のそれぞれに対して閾値を設定する。グループ状態推定部１２１は、複数の対象者の注視領域が共通する時間、対象者同士の発話の頻度、対象者同士の共感動作の頻度の少なくともいずれかが、設定した閾値を超えている複数の対象者について、同一のグループに属すると特定する。ここで、グループ状態推定部１２１は、閾値を段階的に設定し、複数の閾値のそれぞれに対応して、階層別にグループの状態を特定してもよい。 The group state estimation unit 121 identifies a group formed in each of the plurality of periods based on the gaze area, the utterance information, and the motion information corresponding to each of the plurality of periods. For example, the group state estimation unit 121 has a time in which the gaze area is common among a plurality of subjects, a frequency of utterances between the subjects indicated by the utterance information, and a frequency of empathy between the subjects indicated by the motion information. Set a threshold for. The group state estimation unit 121 has a plurality of times in which at least one of the time in which the gaze areas of the plurality of subjects are common, the frequency of utterances between the subjects, and the frequency of empathy between the subjects exceeds a set threshold value. Identify the subject as belonging to the same group. Here, the group state estimation unit 121 may set the threshold value step by step and specify the group state for each layer corresponding to each of the plurality of threshold values.

グループ状態推定部１２１は、複数の期間のそれぞれにおいて形成されているグループに基づいて、複数の期間のそれぞれにおけるグループの状態を推定する。グループ状態推定部１２１は、所定期間に含まれる複数の期間のそれぞれにおけるグループの状態として、統合状態、準統合状態、及び並列状態のいずれであるかを推定する。 The group state estimation unit 121 estimates the state of the group in each of the plurality of periods based on the groups formed in each of the plurality of periods. The group state estimation unit 121 estimates whether the group state is an integrated state, a quasi-integrated state, or a parallel state in each of the plurality of periods included in the predetermined period.

［統合度の推定］
統合度推定部１２２は、グループ状態推定部１２１が推定した複数の期間のそれぞれのグループの状態に基づいて、所定期間における複数の対象者の統合度を推定する。 [Estimation of degree of integration]
The integration degree estimation unit 122 estimates the integration degree of a plurality of subjects in a predetermined period based on the state of each group in the plurality of periods estimated by the group state estimation unit 121.

具体的には、統合度推定部１２２は、所定期間における、統合状態、準統合状態、及び並列状態のそれぞれの出現割合に基づいて、所定期間における複数の対象者の統合度を推定する。より具体的には、統合度推定部１２２は、所定期間における、統合状態、準統合状態、及び並列状態のそれぞれが出現した時間の割合に基づいて、所定期間における複数の対象者の統合度を推定する。 Specifically, the integration degree estimation unit 122 estimates the integration degree of a plurality of subjects in a predetermined period based on the appearance ratios of the integrated state, the quasi-integrated state, and the parallel state in the predetermined period. More specifically, the integration degree estimation unit 122 determines the integration degree of a plurality of subjects in a predetermined period based on the ratio of the time when each of the integrated state, the semi-integrated state, and the parallel state appears in the predetermined period. presume.

例えば、統合度推定部１２２は、所定割合（例えば１％）あたりの統合状態のスコアをスコアＳ１、所定割合あたりの準統合状態のスコアをスコアＳ１よりも低いＳ２、所定割合あたりの並列状態のスコアをスコアＳ２よりも低いＳ３とする。そして、統合度推定部１２２は、所定期間における統合状態、準統合状態、及び並列状態が占める割合をそれぞれＲ１、Ｒ２、Ｒ３とした場合、以下の式（１）に基づいて統合度Ｓｉを算出する。ここで、統合度Ｓｉが大きければ大きいほど、所定期間において複数の対象者がまとまって議論をしていることを示している。
Ｓｉ＝Ｒ１＊Ｓ１＋Ｒ２＊Ｓ２＋Ｒ３＊Ｓ３・・・（１） For example, the integration degree estimation unit 122 sets the score of the integrated state per predetermined ratio (for example, 1%) as the score S1, the score of the semi-integrated state per predetermined ratio as S2 lower than the score S1, and the parallel state per predetermined ratio. The score is S3, which is lower than the score S2. Then, the integration degree estimation unit 122 calculates the integration degree Si based on the following equation (1), assuming that the ratios occupied by the integrated state, the quasi-integrated state, and the parallel state in a predetermined period are R1, R2, and R3, respectively. do. Here, it is shown that the larger the degree of integration Si is, the more the subjects are collectively discussing in a predetermined period.
Si = R1 * S1 + R2 * S2 + R3 * S3 ... (1)

［グループにおける活性度を考慮した統合度の推定］
複数の対象者間で同じようにグループが形成された場合であっても、グループ内における対象者間の対話によって、まとまり度合いが異なる。例えば、グループに属する複数の対象者において発話量や発話に対応する共感度合いが少なければ、まとまり度合いが低いと考えられる。 [Estimation of integration considering activity in the group]
Even when a group is formed in the same way among a plurality of subjects, the degree of cohesion differs depending on the dialogue between the subjects in the group. For example, if the amount of utterances and the empathy corresponding to the utterances are small in a plurality of subjects belonging to the group, it is considered that the degree of cohesion is low.

そこで、グループ状態推定部１２１は、対象者の他の対象者への注視量、対象者の発話量、及び動作情報に基づく対象者の他の対象者との共感度合いの少なくともいずれかに基づいて、グループにおける活性度を推定してもよい。そして、統合度推定部１２２は、グループ状態推定部１２１が推定したグループの活性度にさらに基づいて、所定期間における複数の対象者の統合度を推定してもよい。 Therefore, the group state estimation unit 121 is based on at least one of the amount of gaze of the subject to another subject, the amount of speech of the subject, and the sympathy of the subject with the other subject based on the motion information. , The activity in the group may be estimated. Then, the integration degree estimation unit 122 may estimate the integration degree of a plurality of subjects in a predetermined period based on the activity degree of the group estimated by the group state estimation unit 121.

統合度推定部１２２は、グループ状態推定部１２１が各グループの状態のそれぞれで推定したグループの活性度に基づいて、グループの状態に対応するスコアを補正する。例えば、統合度推定部１２２は、グループ状態推定部１２１が推定した、統合状態におけるグループの活性度が相対的に高い場合、所定割合あたりの統合状態のスコアＳ１を増加させる補正を行う。また、統合度推定部１２２は、グループ状態推定部１２１が推定した、統合状態におけるグループの活性度が相対的に低い場合、所定割合あたりの統合状態のスコアＳ１を減少させる補正を行う。そして、統合度推定部１２２は、補正後のスコアに基づいて、式（１）に基づく統合度Ｓｉを算出する。このようにすることで、統合度推定装置１は、グループにおける対象者同士の反応を考慮して統合度を推定することができる。 The degree of integration estimation unit 122 corrects the score corresponding to the state of the group based on the activity of the group estimated by the group state estimation unit 121 for each of the states of each group. For example, the integration degree estimation unit 122 makes a correction that increases the integration state score S1 per predetermined ratio when the activity of the group in the integration state is relatively high, which is estimated by the group state estimation unit 121. Further, the integration degree estimation unit 122 corrects the integration state score S1 per predetermined ratio when the activity of the group in the integration state is relatively low, which is estimated by the group state estimation unit 121. Then, the integration degree estimation unit 122 calculates the integration degree Si based on the equation (1) based on the corrected score. By doing so, the integration degree estimation device 1 can estimate the integration degree in consideration of the reaction between the subjects in the group.

［準統合状態におけるグループ間の関連度を考慮した統合状態の推定］
グループの状態として、準統合状態が特定された場合、準統合状態に対応する複数のグループ間での対象者間のやりとりにより、グループ間のまとまり度合いが異なる。例えば、複数のグループにおいて重複する対象者が積極的に発話を行っていたり当該対象者への注視量が相対的に多かったりする場合、複数のグループ間の結びつきが強いと考えられる。 [Estimation of integrated state considering the degree of relevance between groups in semi-integrated state]
When the quasi-integrated state is specified as the state of the group, the degree of cohesion between the groups differs depending on the interaction between the target persons among the plurality of groups corresponding to the quasi-integrated state. For example, when overlapping subjects are actively speaking in a plurality of groups or the amount of gaze on the subject is relatively large, it is considered that the ties between the plurality of groups are strong.

そこで、グループ状態推定部１２１は、複数の期間のうち、グループの状態が準統合状態であると推定した期間について、複数のグループにおいて重複している対象者の他の対象者への注視量、当該対象者の発話量、及び当該対象者の他の対象者との共感度合いの少なくともいずれかに基づいて、準統合状態における複数のグループの関連度を特定してもよい。そして、統合度推定部１２２は、準統合状態における複数のグループの関連度にさらに基づいて、所定期間における複数の対象者の統合度を推定してもよい。 Therefore, the group state estimation unit 121 determines the amount of gaze of the subject who overlaps in the plurality of groups to other subjects for the period in which the state of the group is estimated to be the quasi-integrated state among the plurality of periods. The degree of relevance of the plurality of groups in the quasi-integrated state may be specified based on at least one of the speech volume of the subject and the empathy of the subject with other subjects. Then, the degree of integration estimation unit 122 may estimate the degree of integration of a plurality of subjects in a predetermined period based on the degree of relevance of the plurality of groups in the quasi-integrated state.

統合度推定部１２２は、グループ状態推定部１２１が推定した準統合状態におけるグループの関連度に基づいて、準統合状態に対応するスコアＳ２を補正する。例えば、統合度推定部１２２は、グループ状態推定部１２１が推定した準統合状態におけるグループの関連度が相対的に高い場合、準統合状態のスコアＳ２を増加させる補正を行う。また、統合度推定部１２２は、グループ状態推定部１２１が推定した準統合状態におけるグループの関連度が相対的に低い場合、準統合状態のスコアＳ２を減少させる補正を行う。そして、統合度推定部１２２は、補正後のスコアに基づいて、式（１）に基づく統合度Ｓｉを算出する。このようにすることで、統合度推定装置１は、準統合状態におけるグループの関連度を考慮して統合度を推定することができる。 The degree of integration estimation unit 122 corrects the score S2 corresponding to the quasi-integrated state based on the degree of association of the group in the quasi-integrated state estimated by the group state estimation unit 121. For example, the integration degree estimation unit 122 makes a correction to increase the score S2 of the quasi-integrated state when the group relevance in the quasi-integrated state estimated by the group state estimation unit 121 is relatively high. Further, the integration degree estimation unit 122 makes a correction to reduce the score S2 in the semi-integrated state when the degree of association of the groups in the semi-integrated state estimated by the group state estimation unit 121 is relatively low. Then, the integration degree estimation unit 122 calculates the integration degree Si based on the equation (1) based on the corrected score. By doing so, the integration degree estimation device 1 can estimate the integration degree in consideration of the relevance degree of the group in the quasi-integration state.

［階層別にグループの状態を推定した場合における統合度の推定］
統合度推定部１２２は、グループ状態推定部１２１が、グループの状態を階層的に特定した場合、複数の階層のそれぞれにおけるグループの状態に基づいて、複数の対象者の統合度を推定してもよい。 [Estimation of degree of integration when estimating the state of a group by hierarchy]
When the group state estimation unit 121 hierarchically specifies the state of the group, the integration degree estimation unit 122 may estimate the integration degree of a plurality of subjects based on the group state in each of the plurality of layers. good.

例えば、閾値が最も低く設定された場合に推定されたグループの状態を最高階層のグループの状態、閾値が最も高く設定された場合に推定されたグループの状態を最低階層のグループの状態とする。統合度推定部１２２は、最高階層のグループの状態に基づいて、式（１）を用いて統合度を算出するが、最高階層よりも下位の階層において推定されたグループの数、グループ間における重複している対象者の数に基づいて、統合度を調整してもよい。 For example, the state of the group estimated when the threshold value is set to the lowest value is defined as the state of the group at the highest level, and the state of the group estimated when the threshold value is set to the highest level is defined as the state of the group at the lowest level. The integration degree estimation unit 122 calculates the integration degree using the equation (1) based on the state of the group in the highest hierarchy, but the number of groups estimated in the hierarchy lower than the highest hierarchy and the duplication between the groups. The degree of integration may be adjusted based on the number of subjects who are doing it.

［グループの状態の時間的な変化に基づく統合度の推定］
所定期間における統合状態、準統合状態、並列状態の時間的な割合が同じであっても、議論のまとまり度合いが異なることがある。図３は、複数の期間のそれぞれに対して推定されたグループの状態の例を示す図である。図３（ａ）に示すケースと、図３（ｂ）に示すケースとは、統合状態、準統合状態、並列状態の時間的な割合が同じである。しかしながら、図３（ａ）に示すケースは、図３（ｂ）に示すケースに比べて、グループの状態が頻繁に切り替わり、実質的に複数の対象者における議論が進行している可能性が高い。 [Estimation of degree of integration based on changes in group state over time]
Even if the time ratios of the integrated state, the semi-integrated state, and the parallel state in a predetermined period are the same, the degree of cohesiveness of the discussion may be different. FIG. 3 is a diagram showing an example of the state of the group estimated for each of the plurality of periods. The case shown in FIG. 3A and the case shown in FIG. 3B have the same temporal ratio of the integrated state, the semi-integrated state, and the parallel state. However, in the case shown in FIG. 3A, there is a high possibility that the state of the group is changed more frequently than in the case shown in FIG. 3B, and the discussion among a plurality of subjects is substantially in progress. ..

そこで、統合度推定部１２２は、グループ状態推定部１２１が推定した複数の期間のそれぞれのグループの状態の時間的な変化に基づいて、所定期間における複数の対象者の統合度を推定してもよい。具体的には、統合度推定部１２２は、グループ状態推定部１２１が推定したグループの状態の変遷頻度に基づいて、所定期間における複数の対象者の統合度を推定してもよい。 Therefore, the integration degree estimation unit 122 may estimate the integration degree of a plurality of subjects in a predetermined period based on the temporal change of the state of each group in the plurality of periods estimated by the group state estimation unit 121. good. Specifically, the integration degree estimation unit 122 may estimate the integration degree of a plurality of subjects in a predetermined period based on the transition frequency of the group state estimated by the group state estimation unit 121.

例えば、統合度推定部１２２は、グループ状態推定部１２１が推定したグループの状態の変遷頻度が大きければ大きいほど、式（１）に基づいて算出した統合度を増加させる補正を行う。このようにすることで、統合度推定装置１は、グループの状態の変遷頻度を考慮して統合度を推定することができる。なお、統合度推定部１２２は、グループ状態推定部１２１が推定したグループの状態の変遷頻度を示す指標値を、式（１）に基づいて算出した統合度とは別に算出してもよい。 For example, the degree of integration estimation unit 122 makes corrections to increase the degree of integration calculated based on the equation (1) as the frequency of transition of the state of the group estimated by the group state estimation unit 121 increases. By doing so, the integration degree estimation device 1 can estimate the integration degree in consideration of the transition frequency of the state of the group. The integration degree estimation unit 122 may calculate an index value indicating the transition frequency of the group state estimated by the group state estimation unit 121 separately from the integration degree calculated based on the equation (1).

図４は、複数の期間のそれぞれに対して推定されたグループの状態の別の例を示す図である。図４（ａ）に示すケースと、図４（ｂ）に示すケースとは、統合状態、準統合状態、並列状態の時間的な割合が同じである。図４（ａ）に示すケースは、序盤から中盤にかけて並列状態が多く、終盤に進むに従い、統合状態及び準統合状態に遷移している。これに対して、図４（ｂ）に示すケースは、中盤から終盤にかけて並列状態に遷移している回数が多い。したがって、図４（ａ）に示すケースは、図４（ｂ）に示すケースに比べて議論が成熟している可能性が高いと考えられる。 FIG. 4 is a diagram showing another example of the estimated group state for each of the plurality of periods. The case shown in FIG. 4A and the case shown in FIG. 4B have the same temporal ratio of the integrated state, the semi-integrated state, and the parallel state. In the case shown in FIG. 4A, there are many parallel states from the early stage to the middle stage, and as the final stage progresses, the integrated state and the quasi-integrated state are transitioned. On the other hand, in the case shown in FIG. 4B, the number of transitions to the parallel state is large from the middle stage to the final stage. Therefore, it is considered that the case shown in FIG. 4 (a) is more likely to have a more mature discussion than the case shown in FIG. 4 (b).

そこで、統合度推定部１２２は、グループ状態推定部１２１が推定した複数のグループの状態の発生時期に基づいて、所定期間における複数の対象者の統合度を推定してもよい。例えば、統合度推定部１２２は、所定期間の後半において統合状態及び準統合状態の発生頻度が大きければ大きいほど、式（１）に基づいて算出した統合度が高くなるように、統合度を補正してもよい。このようにすることで、統合度推定装置１は、議論の成熟度を考慮して統合度を推定することができる。なお、統合度推定部１２２は、所定期間の後半における統合状態及び準統合状態の発生頻度を示す指標値を、式（１）に基づいて算出した統合度とは別に算出してもよい。 Therefore, the integration degree estimation unit 122 may estimate the integration degree of a plurality of subjects in a predetermined period based on the occurrence time of the state of the plurality of groups estimated by the group state estimation unit 121. For example, the degree of integration estimation unit 122 corrects the degree of integration so that the higher the frequency of occurrence of the integrated state and the quasi-integrated state in the latter half of the predetermined period, the higher the degree of integration calculated based on the equation (1). You may. By doing so, the integration degree estimation device 1 can estimate the integration degree in consideration of the maturity of the discussion. The integration degree estimation unit 122 may calculate an index value indicating the frequency of occurrence of the integration state and the quasi-integration state in the latter half of the predetermined period separately from the integration degree calculated based on the equation (1).

出力部１２３は、統合度推定部１２２が推定した統合度を示す情報を出力する。例えば、出力部１２３は、統合度推定部１２２が式（１）に基づいて算出した統合度を示す情報を記憶部１１に出力したり、表示部（不図示）に出力したりする。 The output unit 123 outputs information indicating the degree of integration estimated by the degree of integration estimation unit 122. For example, the output unit 123 outputs information indicating the degree of integration calculated by the integration degree estimation unit 122 based on the equation (1) to the storage unit 11 or outputs to the display unit (not shown).

［統合度推定装置１の処理の流れ］
続いて、統合度推定装置１の処理の流れについて説明する。図５は、第１実施形態に係る統合度推定装置１の処理の流れを示すフローチャートである。 [Processing flow of integration degree estimation device 1]
Subsequently, the processing flow of the integration degree estimation device 1 will be described. FIG. 5 is a flowchart showing a processing flow of the integration degree estimation device 1 according to the first embodiment.

まず、グループ状態推定部１２１は、複数の期間のそれぞれにおいて形成されたグループを特定する（Ｓ１０）。
続いて、グループ状態推定部１２１は、Ｓ１において特定した複数の期間のそれぞれにおいて形成されたグループに基づいて、複数の期間のそれぞれのグループの状態を推定する（Ｓ２０）。 First, the group state estimation unit 121 identifies the groups formed in each of the plurality of periods (S10).
Subsequently, the group state estimation unit 121 estimates the state of each group in the plurality of periods based on the groups formed in each of the plurality of periods specified in S1 (S20).

続いて、統合度推定部１２２は、所定期間における各グループの状態の割合を特定する（Ｓ３０）。
続いて、統合度推定部１２２は、Ｓ３において推定した各グループの状態の割合に基づいて、式（１）に示す統合度を算出する（Ｓ４０）。
続いて、統合度推定部１２２は、算出した統合度を出力する（Ｓ５０）。 Subsequently, the integration degree estimation unit 122 specifies the ratio of the states of each group in a predetermined period (S30).
Subsequently, the integration degree estimation unit 122 calculates the integration degree shown in the equation (1) based on the ratio of the states of each group estimated in S3 (S40).
Subsequently, the integration degree estimation unit 122 outputs the calculated integration degree (S50).

［第１実施形態における効果］
以上説明したように、本実施形態に係る統合度推定装置１は、所定期間に含まれる複数の期間のそれぞれにおける、所定エリアに存在する複数の対象者により構成されるグループの状態を推定し、複数の期間のそれぞれのグループの状態に基づいて、所定期間における複数の対象者の統合度を推定する。このようにすることで、統合度推定装置１は、議論の状態の評価を支援することができる。 [Effect in the first embodiment]
As described above, the integration degree estimation device 1 according to the present embodiment estimates the state of a group composed of a plurality of subjects existing in a predetermined area in each of the plurality of periods included in the predetermined period. Based on the state of each group in multiple periods, the degree of integration of multiple subjects in a predetermined period is estimated. By doing so, the integration degree estimation device 1 can support the evaluation of the state of the discussion.

＜第２実施形態＞
［分類モデルに基づいて、議論の良否を判定する］
続いて、第２実施形態について説明する。第２実施形態に係る統合度推定装置１は、複数の対象者の間で行われた議論（対話）の良否の学習を行うことにより分類モデルを生成し、当該分類モデルに基づいて、複数の対象者の間で行われた議論の良否を判定する機能をさらに有している点で第１実施形態と異なる。以下に、第２実施形態に係る統合度推定装置１について説明する。なお、第１実施形態と同じ部分については適宜説明を省略する。 <Second Embodiment>
[Judging the quality of the discussion based on the classification model]
Subsequently, the second embodiment will be described. The integration degree estimation device 1 according to the second embodiment generates a classification model by learning the quality of the discussion (dialogue) conducted among a plurality of subjects, and a plurality of classification models are generated based on the classification model. It differs from the first embodiment in that it further has a function of determining the quality of the discussion held between the subjects. The integration degree estimation device 1 according to the second embodiment will be described below. The same parts as those of the first embodiment will be omitted as appropriate.

図６は、第２実施形態に係る統合度推定装置１の構成を示す図である。図６に示すように、第２実施形態に係る統合度推定装置１は、モデル生成部１２４と、判定部１２５とをさらに備える。 FIG. 6 is a diagram showing the configuration of the integration degree estimation device 1 according to the second embodiment. As shown in FIG. 6, the integration degree estimation device 1 according to the second embodiment further includes a model generation unit 124 and a determination unit 125.

モデル生成部１２４は、所定期間に含まれる複数の期間におけるグループの状態を示す期間内状態情報の入力に対して、当該期間内状態情報に対応する複数の対象者の間で行われた議論の良否を示す情報を出力する分類モデルを生成する。 The model generation unit 124 discusses the input of the intra-period state information indicating the state of the group in a plurality of periods included in the predetermined period among a plurality of subjects corresponding to the intra-period state information. Generate a classification model that outputs information indicating good or bad.

具体的には、モデル生成部１２４は、統合度推定装置１が過去に推定した、所定期間に含まれる複数の期間におけるグループの状態を示す期間内状態情報と、当該期間内状態情報に対応する複数の対象者の間で行われた議論の良否を示す情報とを含むデータセットを教師データとして取得する。ここで、期間内状態情報に対応する複数の対象者の間で行われた議論の良否を示す情報は、例えば、当該議論の良否を判断する評価者が作成するものとする。 Specifically, the model generation unit 124 corresponds to the intra-period state information indicating the state of the group in a plurality of periods included in the predetermined period, which was estimated in the past by the integration degree estimation device 1, and the intra-period state information. A data set containing information indicating the quality of a discussion held among a plurality of subjects is acquired as teacher data. Here, the information indicating the quality of the discussion held among the plurality of subjects corresponding to the state information within the period shall be created, for example, by the evaluator who judges the quality of the discussion.

続いて、モデル生成部１２４は、取得した教師データに基づいて機械学習を行うことにより、期間内状態情報の入力に対して、当該期間内状態情報に対応する複数の対象者の間で行われた議論の良否を示す情報を出力する分類モデルを生成する。モデル生成部１２４は、生成した分類モデルを記憶部１１に記憶させる。 Subsequently, the model generation unit 124 performs machine learning based on the acquired teacher data, so that the input of the intra-period state information is performed among a plurality of target persons corresponding to the intra-period state information. Generate a classification model that outputs information indicating the quality of the discussion. The model generation unit 124 stores the generated classification model in the storage unit 11.

判定部１２５は、グループ状態推定部１２１が推定したグループの状態を示す期間内状態情報を分類モデルに入力し、分類モデルから、当該期間内状態情報に対応する複数の対象者の間で行われた議論の良否を示す情報を取得することにより、当該議論の良否を判定する。具体的には、判定部１２５は、グループ状態推定部１２１が所定期間におけるグループの状態を推定すると、所定期間における複数の期間におけるグループの状態を示す時系列情報を期間内状態情報として生成する。判定部１２５は、記憶部１１に記憶されている分類モデルを実行するとともに、当該分類モデルに生成した期間内状態情報を入力し、分類モデルから、当該期間内状態情報に対応する複数の対象者の間で行われた議論の良否を示す情報を取得する。 The determination unit 125 inputs the in-period state information indicating the state of the group estimated by the group state estimation unit 121 into the classification model, and is performed from the classification model among a plurality of subjects corresponding to the in-period state information. By acquiring information indicating the quality of the discussion, the quality of the discussion is determined. Specifically, when the group state estimation unit 121 estimates the state of the group in a predetermined period, the determination unit 125 generates time-series information indicating the state of the group in a plurality of periods in the predetermined period as the time-series state information. The determination unit 125 executes the classification model stored in the storage unit 11, inputs the in-period state information generated in the classification model, and from the classification model, a plurality of target persons corresponding to the in-period state information. Obtain information indicating the quality of the discussions held between.

出力部１２３は、判定部１２５による判定結果を出力する。例えば、出力部１２３は、判定部１２５が判定した複数の対象者の間で行われた議論の良否を示す情報を記憶部１１に出力する。 The output unit 123 outputs the determination result by the determination unit 125. For example, the output unit 123 outputs to the storage unit 11 information indicating the quality of the discussion held between the plurality of subjects determined by the determination unit 125.

［第２実施形態における効果］
以上説明したように、本実施形態に係る統合度推定装置１は、所定期間に含まれる複数の期間におけるグループの状態を示す期間内状態情報の入力に対して、当該期間内状態情報に対応する複数の対象者の間で行われた議論の良否を示す情報を出力する分類モデルを生成する。そして、統合度推定装置１は、グループ状態推定部１２１が推定したグループの状態を示す期間内状態情報を分類モデルに入力し、分類モデルから、当該期間内状態情報に対応する複数の対象者の間で行われた議論の良否を示す情報を取得することにより、当該議論の良否を判定する。このようにすることで、統合度推定装置１は、複数の対象者の間で行われた議論の良否を容易に判定することができる。 [Effect in the second embodiment]
As described above, the integration degree estimation device 1 according to the present embodiment corresponds to the in-period state information in response to the input of the in-period state information indicating the state of the group in a plurality of periods included in the predetermined period. Generate a classification model that outputs information indicating the success or failure of discussions held among multiple subjects. Then, the integration degree estimation device 1 inputs the intra-period state information indicating the group state estimated by the group state estimation unit 121 into the classification model, and from the classification model, a plurality of target persons corresponding to the in-period state information. The quality of the discussion is determined by acquiring the information indicating the quality of the discussion held between them. By doing so, the integration degree estimation device 1 can easily determine the quality of the discussion held among the plurality of subjects.

以上、本発明を実施の形態を用いて説明したが、本発明の技術的範囲は上記実施の形態に記載の範囲には限定されず、その要旨の範囲内で種々の変形及び変更が可能である。例えば、装置の全部又は一部は、任意の単位で機能的又は物理的に分散・統合して構成することができる。また、複数の実施の形態の任意の組み合わせによって生じる新たな実施の形態も、本発明の実施の形態に含まれる。組み合わせによって生じる新たな実施の形態の効果は、もとの実施の形態の効果を併せ持つ。 Although the present invention has been described above using the embodiments, the technical scope of the present invention is not limited to the scope described in the above embodiments, and various modifications and changes can be made within the scope of the gist. be. For example, all or part of the device can be functionally or physically distributed / integrated in any unit. Also included in the embodiments of the present invention are new embodiments resulting from any combination of the plurality of embodiments. The effect of the new embodiment produced by the combination has the effect of the original embodiment together.

１・・・統合度推定装置、１１・・・記憶部、１２・・・制御部、１２１・・・グループ状態推定部、１２２・・・統合度推定部、１２３・・・出力部、１２４・・・モデル生成部、１２５・・・判定部 1 ... Integration degree estimation device, 11 ... Storage unit, 12 ... Control unit, 121 ... Group state estimation unit, 122 ... Integration degree estimation unit, 123 ... Output unit, 124.・ ・ Model generation unit, 125 ・ ・ ・ Judgment unit

Claims (11)

所定期間に含まれる複数の期間のそれぞれにおける、所定エリアに存在する複数の対象者により構成されるグループの状態として、前記複数の対象者により１つのグループが構成されている第１状態、複数のグループが構成されるとともに、前記複数の対象者のうち、一部の対象者が前記複数のグループに属している第２状態、及び複数のグループが構成されるとともに、複数のグループ間において対象者が重複していない第３状態のいずれであるかを推定するグループ状態推定部と、
前記グループ状態推定部が推定した前記所定期間における前記第１状態、前記第２状態、及び前記第３状態のそれぞれの出現割合に基づいて、前記所定期間における前記複数の対象者のまとまり度合いを示す統合度を推定する統合度推定部と、
前記統合度推定部が推定した前記統合度を示す情報を出力する出力部と、
を備える統合度推定装置。 As a state of a group composed of a plurality of target persons existing in a predetermined area in each of a plurality of periods included in a predetermined period, a first state in which one group is composed of the plurality of target persons, and a plurality of states. A group is formed, and among the plurality of subjects, a second state in which some of the subjects belong to the plurality of groups, and a plurality of groups are formed, and the subjects are among the plurality of groups. A group state estimation unit that estimates which of the third states does not overlap , and
Based on the appearance ratios of the first state, the second state, and the third state in the predetermined period estimated by the group state estimation unit, the degree of cohesion of the plurality of subjects in the predetermined period is shown. The integration degree estimation unit that estimates the degree of integration, and the integration degree estimation unit
An output unit that outputs information indicating the degree of integration estimated by the degree of integration estimation unit, and an output unit.
A degree of integration estimation device. 所定期間に含まれる複数の期間のそれぞれにおける、所定エリアに存在する複数の対象者により構成されるグループの状態として、前記複数の対象者により１つのグループが構成されている第１状態、複数のグループが構成されるとともに、前記複数の対象者のうち、一部の対象者が前記複数のグループに属している第２状態、及び複数のグループが構成されるとともに、複数のグループ間において対象者が重複していない第３状態のいずれであるかを推定し、前記対象者の他の対象者への注視量、前記対象者の発話量、及び前記対象者の他の対象者との共感度合いの少なくともいずれかに基づいて、前記グループにおける活性度を推定するグループ状態推定部と、 As a state of a group composed of a plurality of target persons existing in a predetermined area in each of a plurality of periods included in a predetermined period, a first state in which one group is composed of the plurality of target persons, and a plurality of states. A group is formed, and among the plurality of subjects, a second state in which some of the subjects belong to the plurality of groups, and a plurality of groups are formed, and the subjects are among the plurality of groups. Estimates which of the third states does not overlap, and the amount of gaze of the subject to another subject, the amount of speech of the subject, and the sympathy with the other subject of the subject. A group state estimation unit that estimates the activity in the group based on at least one of
前記グループ状態推定部が推定した前記複数の期間のそれぞれの前記グループの状態と、前記グループにおける前記活性度とに基づいて、前記所定期間における前記複数の対象者のまとまり度合いを示す統合度を推定する統合度推定部と、 Based on the state of the group in each of the plurality of periods estimated by the group state estimation unit and the activity in the group, the degree of integration indicating the degree of cohesion of the plurality of subjects in the predetermined period is estimated. Integration degree estimation unit and
前記統合度推定部が推定した前記統合度を示す情報を出力する出力部と、 An output unit that outputs information indicating the degree of integration estimated by the degree of integration estimation unit, and an output unit.
を備える統合度推定装置。 A degree of integration estimation device. 所定期間に含まれる複数の期間のそれぞれにおける、所定エリアに存在する複数の対象者により構成されるグループの状態として、前記複数の対象者により１つのグループが構成されている第１状態、複数のグループが構成されるとともに、前記複数の対象者のうち、一部の対象者が前記複数のグループに属している第２状態、及び複数のグループが構成されるとともに、複数のグループ間において対象者が重複していない第３状態のいずれであるかを推定し、前記対象者の他の対象者への注視量、前記対象者の発話量、及び前記対象者の他の対象者との共感度合いの少なくともいずれかに基づいて、前記第２状態における前記複数のグループの関連度を特定するグループ状態推定部と、 As a state of a group composed of a plurality of target persons existing in a predetermined area in each of a plurality of periods included in a predetermined period, a first state in which one group is composed of the plurality of target persons, and a plurality of states. A group is formed, and among the plurality of subjects, a second state in which some of the subjects belong to the plurality of groups, and a plurality of groups are formed, and the subjects are among the plurality of groups. Estimates which of the third states does not overlap, and the amount of gaze of the subject to another subject, the amount of speech of the subject, and the empathy of the subject with other subjects. A group state estimation unit that specifies the degree of relevance of the plurality of groups in the second state based on at least one of the above.
前記グループ状態推定部が推定した前記複数の期間のそれぞれの前記グループの状態と、前記第２状態における前記複数のグループの関連度とに基づいて、前記所定期間における前記複数の対象者のまとまり度合いを示す統合度を推定する統合度推定部と、 The degree of cohesion of the plurality of subjects in the predetermined period based on the state of each of the group in the plurality of periods estimated by the group state estimation unit and the degree of relevance of the plurality of groups in the second state. The integration degree estimation unit that estimates the integration degree,
前記統合度推定部が推定した前記統合度を示す情報を出力する出力部と、 An output unit that outputs information indicating the degree of integration estimated by the degree of integration estimation unit, and an output unit.
を備える統合度推定装置。 A degree of integration estimation device. 所定期間に含まれる複数の期間のそれぞれにおける、所定エリアに存在する複数の対象者により構成されるグループの状態を推定するグループ状態推定部と、 A group state estimation unit that estimates the state of a group composed of a plurality of subjects existing in a predetermined area in each of a plurality of periods included in the predetermined period.
前記グループ状態推定部が推定した前記複数の期間のそれぞれの前記グループの状態に基づいて、前記所定期間における前記複数の対象者のまとまり度合いを示す統合度を推定する統合度推定部と、 An integration degree estimation unit that estimates the degree of integration indicating the degree of unity of the plurality of subjects in the predetermined period based on the state of the group in each of the plurality of periods estimated by the group state estimation unit.
過去に推定された、所定期間に含まれる複数の期間における前記グループの状態を示す期間内状態情報と、当該期間内状態情報に対応する複数の対象者の間で行われた対話の良否を示す情報とを含むデータセットを教師データとし、前記期間内状態情報の入力に対して、当該期間内状態情報に対応する複数の対象者の間で行われた対話の良否を示す情報を出力する分類モデルを生成するモデル生成部と、 Indicates the quality of the dialogue between the in-period state information indicating the state of the group in a plurality of periods included in the predetermined period estimated in the past and the plurality of subjects corresponding to the in-period state information. A data set containing information is used as teacher data, and in response to the input of the in-period state information, information indicating the quality of the dialogue performed between a plurality of subjects corresponding to the in-period state information is output. The model generator that generates the model and the model generator
前記グループ状態推定部が推定したグループの状態を示す期間内状態情報を前記分類モデルに入力し、前記分類モデルから、当該期間内状態情報に対応する複数の対象者の間で行われた対話の良否を示す情報を取得することにより、前記複数の対象者の間で行われた対話の良否を判定する判定部と、 In-period state information indicating the group state estimated by the group state estimation unit is input to the classification model, and a dialogue performed between a plurality of subjects corresponding to the in-period state information from the classification model is performed. A determination unit that determines the quality of the dialogue performed between the plurality of subjects by acquiring information indicating the quality, and a determination unit.
前記統合度推定部が推定した前記統合度を示す情報と、前記判定部による判定結果とを出力する出力部と、 An output unit that outputs information indicating the degree of integration estimated by the degree of integration estimation unit and a determination result by the determination unit.
を備える統合度推定装置。 A degree of integration estimation device. 前記統合度推定部は、前記グループ状態推定部が推定した前記複数の期間のそれぞれの前記グループの状態の時間的な変化に基づいて、前記所定期間における前記複数の対象者の統合度を推定する、
請求項１から４のいずれか１項に記載の統合度推定装置。 The integration degree estimation unit estimates the integration degree of the plurality of subjects in the predetermined period based on the temporal change of the state of the group in each of the plurality of periods estimated by the group state estimation unit. ,
The integration degree estimation device according to any one of claims 1 to 4 . 前記統合度推定部は、前記グループ状態推定部が推定した前記グループの状態の変遷頻度に基づいて、前記所定期間における前記複数の対象者の統合度を推定する、
請求項５に記載の統合度推定装置。 The integration degree estimation unit estimates the integration degree of the plurality of subjects in the predetermined period based on the transition frequency of the state of the group estimated by the group state estimation unit.
The integration degree estimation device according to claim 5 . 前記統合度推定部は、前記グループ状態推定部が推定した複数の前記グループの状態のそれぞれの発生時期に基づいて、前記所定期間における前記複数の対象者の統合度を推定する、
請求項５又は６に記載の統合度推定装置。 The integration degree estimation unit estimates the integration degree of the plurality of subjects in the predetermined period based on the occurrence time of each of the plurality of states of the group estimated by the group state estimation unit.
The degree of integration estimation device according to claim 5 or 6 . コンピュータが実行する、
所定期間に含まれる複数の期間のそれぞれにおける、所定エリアに存在する複数の対象者により構成されるグループの状態として、前記複数の対象者により１つのグループが構成されている第１状態、複数のグループが構成されるとともに、前記複数の対象者のうち、一部の対象者が前記複数のグループに属している第２状態、及び複数のグループが構成されるとともに、複数のグループ間において対象者が重複していない第３状態のいずれであるかを推定するステップと、
推定された前記所定期間における前記第１状態、前記第２状態、及び前記第３状態のそれぞれの出現割合に基づいて、前記所定期間における前記複数の対象者の統合度を推定するステップと、
推定された統合度を示す情報を出力するステップと、
を備える統合度推定方法。 Computer runs,
As a state of a group composed of a plurality of target persons existing in a predetermined area in each of a plurality of periods included in a predetermined period, a first state in which one group is composed of the plurality of target persons, and a plurality of states. A group is formed, and among the plurality of subjects, a second state in which some of the subjects belong to the plurality of groups, and a plurality of groups are formed, and the subjects are among the plurality of groups. And the step of estimating which of the third states is non-overlapping ,
A step of estimating the degree of integration of the plurality of subjects in the predetermined period based on the appearance ratios of the first state, the second state, and the third state in the estimated predetermined period.
A step to output information indicating the estimated degree of integration,
A method of estimating the degree of integration. コンピュータが実行する、 Computer runs,
所定期間に含まれる複数の期間のそれぞれにおける、所定エリアに存在する複数の対象者により構成されるグループの状態として、前記複数の対象者により１つのグループが構成されている第１状態、複数のグループが構成されるとともに、前記複数の対象者のうち、一部の対象者が前記複数のグループに属している第２状態、及び複数のグループが構成されるとともに、複数のグループ間において対象者が重複していない第３状態のいずれであるかを推定するステップと、 As a state of a group composed of a plurality of target persons existing in a predetermined area in each of a plurality of periods included in a predetermined period, a first state in which one group is composed of the plurality of target persons, and a plurality of states. A group is formed, and among the plurality of subjects, a second state in which some of the subjects belong to the plurality of groups, and a plurality of groups are formed, and the subjects are among the plurality of groups. And the step of estimating which of the third states is non-overlapping,
前記対象者の他の対象者への注視量、前記対象者の発話量、及び前記対象者の他の対象者との共感度合いの少なくともいずれかに基づいて、前記グループにおける活性度を推定するステップと、 A step of estimating activity in the group based on at least one of the subject's gaze on other subjects, the subject's speech volume, and the subject's empathy with other subjects. When,
推定された前記複数の期間のそれぞれの前記グループの状態と、前記グループにおける前記活性度とに基づいて、前記所定期間における前記複数の対象者の統合度を推定するステップと、 A step of estimating the degree of integration of the plurality of subjects in the predetermined period based on the state of the group in each of the estimated plurality of periods and the activity in the group.
推定された統合度を示す情報を出力するステップと、 A step to output information indicating the estimated degree of integration,
を備える統合度推定方法。 A method of estimating the degree of integration. コンピュータが実行する、 Computer runs,
所定期間に含まれる複数の期間のそれぞれにおける、所定エリアに存在する複数の対象者により構成されるグループの状態として、前記複数の対象者により１つのグループが構成されている第１状態、複数のグループが構成されるとともに、前記複数の対象者のうち、一部の対象者が前記複数のグループに属している第２状態、及び複数のグループが構成されるとともに、複数のグループ間において対象者が重複していない第３状態のいずれであるかを推定するステップと、 As a state of a group composed of a plurality of target persons existing in a predetermined area in each of a plurality of periods included in a predetermined period, a first state in which one group is composed of the plurality of target persons, and a plurality of states. A group is formed, and among the plurality of subjects, a second state in which some of the subjects belong to the plurality of groups, and a plurality of groups are formed, and the subjects are among the plurality of groups. And the step of estimating which of the third states is non-overlapping,
前記対象者の他の対象者への注視量、前記対象者の発話量、及び前記対象者の他の対象者との共感度合いの少なくともいずれかに基づいて、前記第２状態における前記複数のグループの関連度を特定するステップと、 The plurality of groups in the second state based on at least one of the subject's gaze on another subject, the subject's utterance, and the empathy of the subject with other subjects. Steps to identify the degree of relevance and
推定された前記複数の期間のそれぞれの前記グループの状態と、特定された前記第２状態における前記グループの関連度とに基づいて、前記所定期間における前記複数の対象者の統合度を推定するステップと、 A step of estimating the degree of integration of the plurality of subjects in the predetermined period based on the state of the group in each of the estimated plurality of periods and the relevance of the group in the identified second state. When,
推定された統合度を示す情報を出力するステップと、 A step to output information indicating the estimated degree of integration,
を備える統合度推定方法。 A method of estimating the degree of integration. コンピュータが実行する、 Computer runs,
所定期間に含まれる複数の期間のそれぞれにおける、所定エリアに存在する複数の対象者により構成されるグループの状態を推定するステップと、 A step of estimating the state of a group composed of a plurality of subjects existing in a predetermined area in each of a plurality of periods included in the predetermined period, and a step of estimating the state.
推定された前記複数の期間のそれぞれの前記グループの状態に基づいて、前記所定期間における前記複数の対象者の統合度を推定するステップと、 A step of estimating the degree of integration of the plurality of subjects in the predetermined period based on the state of the group in each of the estimated plurality of periods, and a step of estimating the degree of integration of the plurality of subjects.
過去に推定された、所定期間に含まれる複数の期間における前記グループの状態を示す期間内状態情報と、当該期間内状態情報に対応する複数の対象者の間で行われた対話の良否を示す情報とを含むデータセットを教師データとし、前記期間内状態情報の入力に対して、当該期間内状態情報に対応する複数の対象者の間で行われた対話の良否を示す情報を出力する分類モデルを生成するステップと、 Indicates the quality of the dialogue between the in-period state information indicating the state of the group in a plurality of periods included in the predetermined period estimated in the past and the plurality of subjects corresponding to the in-period state information. A data set containing information is used as teacher data, and in response to the input of the in-period state information, information indicating the quality of the dialogue performed between a plurality of subjects corresponding to the in-period state information is output. Steps to generate a model and
推定されたグループの状態を示す期間内状態情報を前記分類モデルに入力し、前記分類モデルから、当該期間内状態情報に対応する複数の対象者の間で行われた対話の良否を示す情報を取得することにより、前記複数の対象者の間で行われた対話の良否を判定するステップと、 In-period state information indicating the state of the estimated group is input to the classification model, and information indicating the quality of the dialogue performed between a plurality of subjects corresponding to the in-period state information is input from the classification model. By acquiring, the step of determining the quality of the dialogue performed between the plurality of subjects and the step
推定された統合度を示す情報と、前記判定するステップにおける判定結果とを出力するステップと、 A step for outputting information indicating the estimated degree of integration and a determination result in the determination step, and a step for outputting the determination result.
を備える統合度推定方法。 A method of estimating the degree of integration.

Images