JP7197957B2 - 反応解析システムおよび反応解析装置 - Google Patents
反応解析システムおよび反応解析装置 Download PDFInfo
- Publication number
- JP7197957B2 JP7197957B2 JP2022539466A JP2022539466A JP7197957B2 JP 7197957 B2 JP7197957 B2 JP 7197957B2 JP 2022539466 A JP2022539466 A JP 2022539466A JP 2022539466 A JP2022539466 A JP 2022539466A JP 7197957 B2 JP7197957 B2 JP 7197957B2
- Authority
- JP
- Japan
- Prior art keywords
- reaction
- displayed
- participant
- biological
- biological reaction
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000006243 chemical reaction Methods 0.000 title claims description 149
- 238000004458 analytical method Methods 0.000 title claims description 109
- 239000000463 material Substances 0.000 claims description 29
- 230000008451 emotion Effects 0.000 claims description 28
- 230000001815 facial effect Effects 0.000 claims description 13
- 230000004424 eye movement Effects 0.000 claims description 3
- 230000008921 facial expression Effects 0.000 description 51
- 230000002996 emotional effect Effects 0.000 description 16
- 238000010586 diagram Methods 0.000 description 6
- 238000000034 method Methods 0.000 description 5
- 230000007935 neutral effect Effects 0.000 description 4
- 238000012545 processing Methods 0.000 description 4
- 230000006870 function Effects 0.000 description 3
- 210000000887 face Anatomy 0.000 description 2
- 230000014509 gene expression Effects 0.000 description 2
- 238000010191 image analysis Methods 0.000 description 2
- 238000010801 machine learning Methods 0.000 description 1
- 239000002245 particle Substances 0.000 description 1
- 238000012805 post-processing Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/10—Office automation; Time management
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
Landscapes
- Business, Economics & Management (AREA)
- Engineering & Computer Science (AREA)
- Human Resources & Organizations (AREA)
- Tourism & Hospitality (AREA)
- Strategic Management (AREA)
- General Business, Economics & Management (AREA)
- Entrepreneurship & Innovation (AREA)
- Marketing (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- Economics (AREA)
- General Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Data Mining & Analysis (AREA)
- Primary Health Care (AREA)
- Operations Research (AREA)
- Quality & Reliability (AREA)
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
- User Interface Of Digital Computer (AREA)
Description
12 生体反応解析部
13 反応情報提示部
Claims (10)
- 複数人の参加者でオンラインセッションが行われる環境において、上記参加者の生体反応を解析する反応解析システムであって、
上記オンラインセッション中に上記参加者のユーザ端末から送信される動画像を取得する動画像取得部と、
上記動画像取得部により取得された動画像に基づいて、少なくとも上記オンラインセッション中に上記ユーザ端末の画面に顔画像が表示されていない参加者である非表示参加者について、生体反応の変化を解析する生体反応解析部と、
上記生体反応解析部により少なくとも上記非表示参加者について解析された上記生体反応の変化を示す情報を提示する反応情報提示部とを備え、
上記生体反応解析部は、上記動画像取得部により取得された動画像における音声に基づいて、上記オンラインセッション中に上記画面に表示されている共有資料のどの部分が表示されているときに参加者が声を出したかを解析し、
上記反応情報提示部は、上記オンラインセッション中に上記共有資料のどの部分が表示されているときに参加者が声を出したかという解析結果をもとに、ヒートマップを上記共有資料に投影して表示させる
ことを特徴とする反応解析システム。 - 上記生体反応解析部は、上記動画像取得部により取得された動画像に基づいて、上記オンラインセッション中に上記ユーザ端末の画面に顔画像が表示されている参加者である表示参加者についても、上記生体反応の変化を解析し、
上記反応情報提示部は、上記生体反応解析部により上記非表示参加者および上記表示参加者について解析された上記生体反応の変化を示す情報を提示する
ことを特徴とする請求項1に記載の反応解析システム。 - 上記生体反応解析部は、上記動画像取得部により取得された動画像にける顔画像に基づいて、目線の動きおよび顔の動きの少なくとも一方に関する生体反応の変化を解析することにより、参加者が上記画面に表示されている共有資料のどこを見ているかを解析し、
上記反応情報提示部は、上記参加者が上記画面に表示されている共有資料のどこを見ているかという解析結果をもとに、ヒートマップを上記共有資料に投影して表示させる
ことを特徴とする請求項1または2に記載の反応解析システム。 - 上記反応情報提示部は、上記生体反応の変化を示す情報を上記オンラインセッションの主催者に提示することを特徴とする請求項1~3の何れか1項に記載の反応解析システム。
- 上記生体反応の変化を示す情報を上記主催者に提示するか否かを、上記主催者または上記参加者が指定可能としたことを特徴とする請求項4に記載の反応解析システム。
- 上記生体反応解析部は、上記生体反応の変化の解析を通じて、上記参加者の感情の変化を解析し、
上記反応情報提示部は、上記生体反応の変化を示す情報に代えてまたは加えて、上記感情の変化を示す情報を提示する
ことを特徴とする請求項1~5の何れか1項に記載の反応解析システム。 - 複数人の参加者で行われるオンラインセッション中に上記参加者について得られる動画像に基づいて、少なくとも上記オンラインセッション中にユーザ端末の画面に顔画像が表示されていない参加者である非表示参加者について、生体反応の変化を解析する生体反応解析部と、
上記生体反応解析部により少なくとも上記非表示参加者について解析された上記生体反応の変化を示す情報を提示する反応情報提示部とを備え、
上記生体反応解析部は、上記動画像における音声に基づいて、上記オンラインセッション中に上記画面に表示されている共有資料のどの部分が表示されているときに参加者が声を出したかを解析し、
上記反応情報提示部は、上記オンラインセッション中に上記画面に表示されている共有資料のどの部分が表示されているときに参加者が声を出したかという解析結果をもとに、ヒートマップを上記共有資料に投影して表示させる
ことを特徴とする反応解析装置。 - 上記生体反応解析部は、上記動画像に基づいて、上記オンラインセッション中に上記ユーザ端末の画面に顔画像が表示されている参加者である表示参加者についても、上記生体反応の変化を解析し、
上記反応情報提示部は、上記生体反応解析部により上記非表示参加者および上記表示参加者について解析された上記生体反応の変化を示す情報を提示する
ことを特徴とする請求項7に記載の反応解析装置。 - 上記生体反応解析部は、上記動画像にける顔画像に基づいて、目線の動きおよび顔の動きの少なくとも一方に関する生体反応の変化を解析することにより、参加者が上記画面に表示されている共有資料のどこを見ているかを解析し、
上記反応情報提示部は、上記参加者が上記画面に表示されている共有資料のどこを見ているかという解析結果をもとに、ヒートマップを上記共有資料に投影して表示させる
ことを特徴とする請求項7または8に記載の反応解析装置。 - 上記生体反応解析部は、上記生体反応の変化の解析を通じて、上記参加者の感情の変化を解析し、
上記反応情報提示部は、上記生体反応の変化を示す情報に代えてまたは加えて、上記感情の変化を示す情報を提示する
ことを特徴とする請求項7~9の何れか1項に記載の反応解析装置。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JPPCT/JP2020/029466 | 2020-07-31 | ||
PCT/JP2020/029466 WO2022024353A1 (ja) | 2020-07-31 | 2020-07-31 | 反応解析システム |
PCT/JP2021/027637 WO2022025024A1 (ja) | 2020-07-31 | 2021-07-27 | 反応解析システムおよび反応解析装置 |
Publications (3)
Publication Number | Publication Date |
---|---|
JPWO2022025024A1 JPWO2022025024A1 (ja) | 2022-02-03 |
JPWO2022025024A5 JPWO2022025024A5 (ja) | 2022-09-07 |
JP7197957B2 true JP7197957B2 (ja) | 2022-12-28 |
Family
ID=80035326
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022539466A Active JP7197957B2 (ja) | 2020-07-31 | 2021-07-27 | 反応解析システムおよび反応解析装置 |
Country Status (2)
Country | Link |
---|---|
JP (1) | JP7197957B2 (ja) |
WO (2) | WO2022024353A1 (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7333570B1 (ja) | 2022-12-21 | 2023-08-25 | 株式会社Shift | プログラム、方法、情報処理装置、システム |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005269207A (ja) | 2004-03-18 | 2005-09-29 | Nippon Telegr & Teleph Corp <Ntt> | 情報伝達方法及びこの方法を実現するための通信装置とそのプログラム |
JP2007213364A (ja) | 2006-02-10 | 2007-08-23 | Nec Corp | 画像変換装置、画像変換方法及び画像変換プログラム |
JP2008294724A (ja) | 2007-05-24 | 2008-12-04 | Panasonic Corp | 画像受信装置 |
JP2011065467A (ja) | 2009-09-17 | 2011-03-31 | Sharp Corp | 会議中継装置及びコンピュータプログラム |
US20200169693A1 (en) | 2016-02-03 | 2020-05-28 | Hewlett-Packard Development Company, L.P. | Eye gaze angle feedback in a remote meeting |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10586131B2 (en) * | 2017-07-11 | 2020-03-10 | International Business Machines Corporation | Multimedia conferencing system for determining participant engagement |
-
2020
- 2020-07-31 WO PCT/JP2020/029466 patent/WO2022024353A1/ja active Application Filing
-
2021
- 2021-07-27 WO PCT/JP2021/027637 patent/WO2022025024A1/ja active Application Filing
- 2021-07-27 JP JP2022539466A patent/JP7197957B2/ja active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005269207A (ja) | 2004-03-18 | 2005-09-29 | Nippon Telegr & Teleph Corp <Ntt> | 情報伝達方法及びこの方法を実現するための通信装置とそのプログラム |
JP2007213364A (ja) | 2006-02-10 | 2007-08-23 | Nec Corp | 画像変換装置、画像変換方法及び画像変換プログラム |
JP2008294724A (ja) | 2007-05-24 | 2008-12-04 | Panasonic Corp | 画像受信装置 |
JP2011065467A (ja) | 2009-09-17 | 2011-03-31 | Sharp Corp | 会議中継装置及びコンピュータプログラム |
US20200169693A1 (en) | 2016-02-03 | 2020-05-28 | Hewlett-Packard Development Company, L.P. | Eye gaze angle feedback in a remote meeting |
Also Published As
Publication number | Publication date |
---|---|
WO2022024353A1 (ja) | 2022-02-03 |
JPWO2022025024A1 (ja) | 2022-02-03 |
WO2022025024A1 (ja) | 2022-02-03 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7242114B2 (ja) | 反応解析システムおよび反応解析装置 | |
JP2013101680A (ja) | 電子的に会話を評価するための方法およびシステム | |
WO2020148920A1 (ja) | 情報処理装置、情報処理方法、及び情報処理プログラム | |
JP7197957B2 (ja) | 反応解析システムおよび反応解析装置 | |
CN114566187A (zh) | 具有会话后表示的***、电子装置和相关方法 | |
JP7165463B2 (ja) | 感情解析システムおよび感情解析装置 | |
WO2022180860A1 (ja) | ビデオセッション評価端末、ビデオセッション評価システム及びビデオセッション評価プログラム | |
WO2022024356A1 (ja) | 組織属性解析システム | |
WO2022025025A1 (ja) | 感情解析システムおよび感情解析装置 | |
JP7465040B1 (ja) | コミュニケーション可視化システム | |
WO2022064622A1 (ja) | 感情解析システム | |
WO2022201272A1 (ja) | 動画像分析プログラム | |
WO2024142291A1 (ja) | コミュニケーション可視化システム | |
WO2023007661A1 (ja) | 組織属性解析システムおよび組織属性解析装置 | |
WO2022230136A1 (ja) | 動画像分析システム | |
JP7121436B1 (ja) | 動画像分析プログラム | |
JP7121433B1 (ja) | 動画像分析プログラム | |
WO2022254497A1 (ja) | 動画像分析システム | |
WO2022230051A1 (ja) | 動画像分析システム | |
WO2022201267A1 (ja) | 動画像分析プログラム | |
JP7138997B1 (ja) | ビデオミーティング評価端末 | |
WO2023062794A1 (ja) | ビデオミーティング評価端末 | |
WO2022201268A1 (ja) | 動画像分析プログラム | |
JP7152817B1 (ja) | 動画像分析プログラム | |
WO2022201270A1 (ja) | 動画像分析プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220818 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220818 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20220818 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220929 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20221110 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20221124 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20221209 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7197957 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |