JP7503677B1 - 生体行動反応解析システム - Google Patents
生体行動反応解析システム Download PDFInfo
- Publication number
- JP7503677B1 JP7503677B1 JP2023019353A JP2023019353A JP7503677B1 JP 7503677 B1 JP7503677 B1 JP 7503677B1 JP 2023019353 A JP2023019353 A JP 2023019353A JP 2023019353 A JP2023019353 A JP 2023019353A JP 7503677 B1 JP7503677 B1 JP 7503677B1
- Authority
- JP
- Japan
- Prior art keywords
- subject
- information
- classification information
- gsr
- biobehavioral
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000004458 analytical method Methods 0.000 title claims abstract description 103
- 230000004044 response Effects 0.000 title claims abstract description 101
- 238000009223 counseling Methods 0.000 claims abstract description 95
- 238000012806 monitoring device Methods 0.000 claims abstract description 40
- 238000006243 chemical reaction Methods 0.000 claims abstract description 38
- 230000010365 information processing Effects 0.000 claims abstract description 36
- 230000001360 synchronised effect Effects 0.000 claims description 28
- 238000000034 method Methods 0.000 claims description 16
- 238000004891 communication Methods 0.000 claims description 12
- 238000012360 testing method Methods 0.000 claims description 11
- 230000004791 biological behavior Effects 0.000 claims description 9
- 230000008569 process Effects 0.000 claims description 9
- 230000003304 psychophysiological effect Effects 0.000 claims description 2
- 238000013473 artificial intelligence Methods 0.000 description 68
- 238000005259 measurement Methods 0.000 description 57
- 230000008451 emotion Effects 0.000 description 16
- 238000010586 diagram Methods 0.000 description 13
- 230000008859 change Effects 0.000 description 12
- 238000012545 processing Methods 0.000 description 12
- 230000003542 behavioural effect Effects 0.000 description 11
- 239000003990 capacitor Substances 0.000 description 8
- 230000000694 effects Effects 0.000 description 7
- 238000005516 engineering process Methods 0.000 description 6
- 230000005236 sound signal Effects 0.000 description 6
- 230000006399 behavior Effects 0.000 description 5
- 208000019901 Anxiety disease Diseases 0.000 description 4
- 230000036506 anxiety Effects 0.000 description 4
- 238000013528 artificial neural network Methods 0.000 description 4
- 230000006870 function Effects 0.000 description 4
- 230000007935 neutral effect Effects 0.000 description 4
- 230000003287 optical effect Effects 0.000 description 4
- 238000001671 psychotherapy Methods 0.000 description 4
- 238000012549 training Methods 0.000 description 4
- 230000007423 decrease Effects 0.000 description 3
- 238000011160 research Methods 0.000 description 3
- 230000000284 resting effect Effects 0.000 description 3
- 238000012876 topography Methods 0.000 description 3
- 230000003321 amplification Effects 0.000 description 2
- 210000004556 brain Anatomy 0.000 description 2
- 238000013527 convolutional neural network Methods 0.000 description 2
- 238000013500 data storage Methods 0.000 description 2
- 230000003247 decreasing effect Effects 0.000 description 2
- 238000013135 deep learning Methods 0.000 description 2
- 230000008921 facial expression Effects 0.000 description 2
- 230000004630 mental health Effects 0.000 description 2
- 238000012544 monitoring process Methods 0.000 description 2
- 238000003199 nucleic acid amplification method Methods 0.000 description 2
- 230000002265 prevention Effects 0.000 description 2
- 231100000430 skin reaction Toxicity 0.000 description 2
- 230000001755 vocal effect Effects 0.000 description 2
- 238000009825 accumulation Methods 0.000 description 1
- 230000009118 appropriate response Effects 0.000 description 1
- 230000004397 blinking Effects 0.000 description 1
- 230000017531 blood circulation Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000000747 cardiac effect Effects 0.000 description 1
- 235000009508 confectionery Nutrition 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 230000002354 daily effect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000003203 everyday effect Effects 0.000 description 1
- 238000002474 experimental method Methods 0.000 description 1
- 238000009532 heart rate measurement Methods 0.000 description 1
- 210000002442 prefrontal cortex Anatomy 0.000 description 1
- 238000001454 recorded image Methods 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 230000035945 sensitivity Effects 0.000 description 1
- 230000000638 stimulation Effects 0.000 description 1
- 230000001225 therapeutic effect Effects 0.000 description 1
- 238000013519 translation Methods 0.000 description 1
Landscapes
- Measuring And Recording Apparatus For Diagnosis (AREA)
Abstract
Description
被験者と試験者とのコミュニケーションに基づくカウンセリングに使用するための生体行動反応解析システムであって、
被験者および試験者のGSRおよび心脈拍をそれぞれ検出する第1のGSRセンサおよび第2のGSRセンサならびに第1の心脈拍センサおよび第2の心脈拍センサと、
前記被験者および前記試験者の生体行動に関する画像情報および音声情報を監視および記録して出力する生体行動監視装置と、
前記生体行動監視装置から出力された前記画像情報および前記音声情報に基づく前記被験者および前記試験者の心理学-生理学的分類情報を二人の観察者が入力するための第1および第2の反応キーと、
被験者および試験者の画像情報および音声情報から前記被験者および前記試験者の心理学-生理学的分類情報をそれぞれ分類する、コンピュータで構成された第1および第2のAIモデルによって、前記生体行動監視装置から出力された前記画像情報および前記音声情報を分析して前記被験者および前記試験者の補助的心理学-生理学的分類情報をそれぞれ取得し、それらの補助的心理学-生理学的分類情報を出力する補助的分類情報出力装置と、
前記第1および第2のGSRセンサならびに前記第1および第2の心脈拍センサと、前記第1および第2の反応キーと、前記生体行動監視装置と、前記補助的分類情報出力装置とを接続されており、前記被験者および前記試験者の前記GSRおよび前記心脈拍ならびに前記心理学-生理学的分類情報および前記補助的心理学-生理学的分類情報を同期させる処理を行うとともに、その同期した前記被験者および前記試験者の前記GSRおよび前記心脈拍ならびに前記心理学-生理学的分類情報および前記補助的心理学-生理学的分類情報を出力する情報処理出力装置と、を具え、
同期した前記被験者および前記試験者の前記GSRおよび前記心脈拍ならびに前記心理学-生理学的分類情報および前記補助的心理学-生理学的分類情報の出力に基づいてカウンセリングの解析を行い得るようにしたことを特徴とするものである。
被験者と試験者とのコミュニケーションに基づくカウンセリングに使用するための生体行動反応解析システムであって、
被験者および試験者のGSRおよび心脈拍をそれぞれ検出する第1のGSRセンサおよび第2のGSRセンサならびに第1の心脈拍センサおよび第2の心脈拍センサと、
前記被験者および前記試験者の生体行動に関する画像情報および音声情報を監視および記録して出力する生体行動監視装置と、
被験者および試験者の画像情報および音声情報から前記被験者および前記試験者の心理学-生理学的分類情報をそれぞれ分類する、コンピュータで構成された第1および第2のAIモデルによって、前記生体行動監視装置から出力された前記画像情報および前記音声情報を分析して前記被験者および前記試験者の心理学-生理学的分類情報をそれぞれ取得し、それらの心理学-生理学的分類情報を出力する分類情報出力装置と、
前記第1および第2のGSRセンサならびに前記第1および第2の心脈拍センサと、前記生体行動監視装置と、前記分類情報出力装置とを接続されており、前記被験者および前記試験者の前記GSRおよび前記心脈拍ならびに前記心理学-生理学的分類情報を同期させる処理を行うとともに、その同期した前記被験者および前記試験者の前記GSRおよび前記心脈拍ならびに前記心理学-生理学的分類情報を出力する情報処理出力装置と、を具え、
同期した前記被験者および前記試験者の前記GSRおよび前記心脈拍ならびに前記心理学-生理学的分類情報の出力に基づいてカウンセリングの解析を行い得るようにするとともに、
情報処理出力装置の出力に基づいて、コンピュータで構成されたAIモデルによってカウンセリングの解析を補助的に行うカウンセリング補助装置をさらに具えることを特徴とするものである。
その後、生体行動監視装置から出力された画像情報および音声情報を受取る二人の観察者が第1および第2の反応キーを操作して、その生体行動監視装置から出力された画像情報および音声情報に基づく被験者の喜、怒、楽、当惑、驚き、不安、スムーズ、スムーズでない等の心理学-生理学的分類情報および試験者のかかわる、かかわらない、直視、胸上視線、胸下視線、開かれた質問、閉ざされた質問等の心理学-生理学的分類情報を情報処理出力装置に入力する。
さらに補助的分類情報出力装置が、被験者および試験者の画像情報および音声情報から前記被験者および前記試験者の心理学-生理学的分類情報をそれぞれ分類する、コンピュータで構成された第1および第2のAI(人工知能)モデルによって、生体行動監視装置から出力された画像情報および音声情報を分析して被験者および試験者の心理学-生理学的分類情報をそれぞれ取得し、それらの心理学-生理学的分類情報を情報処理出力装置に入力する。
そして、第1および第2のGSRセンサならびに第1および第2の心脈拍センサと、第1および第2の反応キーと、生体行動監視装置と、補助的分類情報出力装置とを接続された情報処理出力装置が、入力された被験者および試験者のGSRおよび脈拍ならびに心理学-生理学的分類情報および補助的心理学-生理学的分類情報を同期させる処理を行うとともに、その同期した被験者および試験者のGSRおよび心脈拍ならびに心理学-生理学的分類情報および補助的心理学-生理学的分類情報を出力する。
その後、分類情報出力装置が、被験者および試験者の画像情報および音声情報から前記被験者および前記試験者の心理学-生理学的分類情報をそれぞれ分類する、コンピュータで構成された第1および第2のAI(人工知能)モデルによって、生体行動監視装置から出力された画像情報および音声情報を分析して被験者および試験者の心理学-生理学的分類情報をそれぞれ取得し、それらの心理学-生理学的分類情報を情報処理出力装置に入力する。
そして、第1および第2のGSRセンサならびに第1および第2の心脈拍センサと、生体行動監視装置と、分類情報出力装置とを接続された情報処理出力装置が、入力された被験者および試験者のGSRおよび脈拍ならびに心理学-生理学的分類情報を同期させる処理を行うとともに、その同期した被験者および試験者のGSRおよび心脈拍ならびに心理学-生理学的分類情報を出力する。
さらに、カウンセリング補助装置が、前記情報処理出力装置の出力に基づいてカウンセリング解析を補助的に行う。
11 カウンセラ
12, 13 観察者
14 GSRセンサ
15 心脈拍センサ
16 調整器
18 A/Dコンバータ
20 パーソナルコンピュータ(パソコン)
20a ディスプレイ画面
20b 測定プログラム
20c 第1のAIモデル(第1の学習済みAIモデル)
20d 第2のAIモデル(第2の学習済みAIモデル)
21 ビデオカメラ
22 カウンセリング室
24 HDレコーダ
30 スライド式反応キー
30a スライドスイッチ
30b リセットレバー
Claims (7)
- 被験者と試験者とのコミュニケーションに基づくカウンセリングに使用するための生体行動反応解析システムであって、
被験者および試験者のGSRおよび心脈拍をそれぞれ検出する第1のGSRセンサおよび第2のGSRセンサならびに第1の心脈拍センサおよび第2の心脈拍センサと、
前記被験者および前記試験者の生体行動に関する画像情報および音声情報を監視および記録して出力する生体行動監視装置と、
前記生体行動監視装置から出力された前記画像情報および前記音声情報に基づく前記被験者および前記試験者の心理学-生理学的分類情報を二人の観察者が入力するための第1および第2の反応キーと、
被験者および試験者の画像情報および音声情報から前記被験者および前記試験者の心理学-生理学的分類情報をそれぞれ分類する、コンピュータで構成された第1および第2のAIモデルによって、前記生体行動監視装置から出力された前記画像情報および前記音声情報を分析して前記被験者および前記試験者の補助的心理学-生理学的分類情報をそれぞれ取得し、それらの補助的心理学-生理学的分類情報を出力する補助的分類情報出力装置と、
前記第1および第2のGSRセンサならびに前記第1および第2の心脈拍センサと、前記第1および第2の反応キーと、前記生体行動監視装置と、前記補助的分類情報出力装置とを接続されており、前記被験者および前記試験者の前記GSRおよび前記心脈拍ならびに前記心理学-生理学的分類情報および前記補助的心理学-生理学的分類情報を同期させる処理を行うとともに、その同期した前記被験者および前記試験者の前記GSRおよび前記心脈拍ならびに前記心理学-生理学的分類情報および前記補助的心理学-生理学的分類情報を出力する情報処理出力装置と、を具え、
同期した前記被験者および前記試験者の前記GSRおよび前記心脈拍ならびに前記心理学-生理学的分類情報および前記補助的心理学-生理学的分類情報の出力に基づいてカウンセリングの解析を行い得るようにしたことを特徴とする生体行動反応解析システム。 - 前記第1および第2のAIモデルには、過去に前記生体行動監視装置から出力された被験者および試験者の画像情報および音声情報と、それらの情報に基づき二人の観察者が第1および第2の反応キーで入力した被験者および試験者の心理学-生理学的分類情報とを教師データとして、被験者および試験者の画像情報および音声情報と前記被験者および前記試験者の心理学-生理学的分類情報との関係をあらかじめ学習した教師あり学習済みAIモデルを用いることを特徴とする、請求項1記載の生体行動反応解析システム。
- 前記第1および第2のAIモデルは、それらのAIモデルに共通の一台のコンピュータが所定のプログラムを逐次的あるいは並列的に実行することによって構成することを特徴とする、請求項1記載の生体行動反応解析システム。
- 情報処理出力装置の出力に基づいて、コンピュータで構成されたAIモデルによってカウンセリングの解析を補助的に行うカウンセリング補助装置をさらに具えることを特徴とする、請求項1から3までの何れか1項記載の生体行動反応解析システム。
- 被験者と試験者とのコミュニケーションに基づくカウンセリングに使用するための生体行動反応解析システムであって、
被験者および試験者のGSRおよび心脈拍をそれぞれ検出する第1のGSRセンサおよび第2のGSRセンサならびに第1の心脈拍センサおよび第2の心脈拍センサと、
前記被験者および前記試験者の生体行動に関する画像情報および音声情報を監視および記録して出力する生体行動監視装置と、
被験者および試験者の画像情報および音声情報から前記被験者および前記試験者の心理学-生理学的分類情報をそれぞれ分類する、コンピュータで構成された第1および第2のAIモデルによって、前記生体行動監視装置から出力された前記画像情報および前記音声情報を分析して前記被験者および前記試験者の心理学-生理学的分類情報をそれぞれ取得し、それらの心理学-生理学的分類情報を出力する分類情報出力装置と、
前記第1および第2のGSRセンサならびに前記第1および第2の心脈拍センサと、前記生体行動監視装置と、前記分類情報出力装置とを接続されており、前記被験者および前記試験者の前記GSRおよび前記心脈拍ならびに前記心理学-生理学的分類情報を同期させる処理を行うとともに、その同期した前記被験者および前記試験者の前記GSRおよび前記心脈拍ならびに前記心理学-生理学的分類情報を出力する情報処理出力装置と、を具え、
同期した前記被験者および前記試験者の前記GSRおよび前記心脈拍ならびに前記心理学-生理学的分類情報の出力に基づいてカウンセリングの解析を行い得るようにするとともに、
情報処理出力装置の出力に基づいて、コンピュータで構成されたAIモデルによってカウンセリングの解析を補助的に行うカウンセリング補助装置をさらに具えることを特徴とする生体行動反応解析システム。 - 前記二つのAIモデルには、過去に前記生体行動監視装置から出力された被験者および試験者の画像情報および音声情報と、それらの情報に基づき二人の観察者が第1および第2の反応キーで入力した被験者および試験者の心理学-生理学的分類情報とを教師データとして、被験者および試験者の画像情報および音声情報と前記被験者および前記試験者の心理学-生理学的分類情報との関係をあらかじめ学習した教師あり学習済みAIモデルを用いることを特徴とする、請求項5記載の生体行動反応解析システム。
- 前記第1および第2のAIモデルは、それらのAIモデルに共通の一台のコンピュータが所定のプログラムを逐次的あるいは並列的に実行することによって構成することを特徴とする、請求項5記載の生体行動反応解析システム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2023019353A JP7503677B1 (ja) | 2023-02-10 | 2023-02-10 | 生体行動反応解析システム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2023019353A JP7503677B1 (ja) | 2023-02-10 | 2023-02-10 | 生体行動反応解析システム |
Publications (1)
Publication Number | Publication Date |
---|---|
JP7503677B1 true JP7503677B1 (ja) | 2024-06-20 |
Family
ID=91483484
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023019353A Active JP7503677B1 (ja) | 2023-02-10 | 2023-02-10 | 生体行動反応解析システム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7503677B1 (ja) |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2505290B2 (ja) | 1988-10-04 | 1996-06-05 | 福原 真知子 | 生体行動反応解析システム |
JP5150902B2 (ja) | 2009-10-23 | 2013-02-27 | 眞知子 福原 | 生体行動反応解析システム |
-
2023
- 2023-02-10 JP JP2023019353A patent/JP7503677B1/ja active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2505290B2 (ja) | 1988-10-04 | 1996-06-05 | 福原 真知子 | 生体行動反応解析システム |
JP5150902B2 (ja) | 2009-10-23 | 2013-02-27 | 眞知子 福原 | 生体行動反応解析システム |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CA2935813C (en) | Adaptive brain training computer system and method | |
Gruss et al. | Multi-modal signals for analyzing pain responses to thermal and electrical stimuli | |
Nguyen et al. | Studying parent-child interaction with hyperscanning | |
Knapp et al. | Physiological signals and their use in augmenting emotion recognition for human–machine interaction | |
US20050177058A1 (en) | System and method for analyzing the brain wave patterns of one or more persons for determining similarities in response to a common set of stimuli, making artistic expressions and diagnosis | |
Chaló et al. | Brief biofeedback intervention on anxious freshman university students | |
RU2319444C1 (ru) | Способ психологического анализа и устройство для его реализации (варианты) | |
US20200085362A1 (en) | Method of evaluating a psychophysiological state of a person | |
Monti et al. | Midi-level measurement of social anxiety in psychiatric and non-psychiatric samples | |
Francis et al. | Listener characteristics differentially affect self-reported and physiological measures of effort associated with two challenging listening conditions | |
JP5150902B2 (ja) | 生体行動反応解析システム | |
Dhaouadi et al. | A multimodal physiological-based stress recognition: Deep Learning models’ evaluation in gamers’ monitoring application | |
JP7503677B1 (ja) | 生体行動反応解析システム | |
Mokhtar et al. | Assessing attention and meditation levels in learning process using brain computer interface | |
Lee et al. | Fractal analysis of EEG upon auditory stimulation during waking and hypnosis in healthy volunteers | |
Bashir et al. | Electroencephalogram (EEG) Signals for Modern Educational Research | |
Kan et al. | Signal conversion from attention signals to light emitting diodes as an attention level indicator | |
Karlsson et al. | Brain–computer interface as a potential access method for communication in non-verbal children with cerebral palsy: a state-of-the-art review | |
JP2505290B2 (ja) | 生体行動反応解析システム | |
RU77149U1 (ru) | Устройство для психологического и психофизиологического анализа | |
Cano et al. | Towards the design of a system to measure emotions using physiological signals as Biofeedback: case study in higher education students | |
Vera-Munoz et al. | A wearable EMG monitoring system for emotions assessment | |
Rickard et al. | A computer-based auditory sequential pattern test for school-aged children | |
Yajima et al. | Study of a Visualization System of the Concentration Degree by Biological Signals--Case of Active Learning. | |
RU2794620C2 (ru) | Устройство для оценки эмоций младенцев и детей младшего возраста |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20230210 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20240305 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240419 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240514 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240610 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7503677 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |