JP2019055064A - 診断支援情報提供装置及び診断支援情報提供方法 - Google Patents
診断支援情報提供装置及び診断支援情報提供方法 Download PDFInfo
- Publication number
- JP2019055064A JP2019055064A JP2017181766A JP2017181766A JP2019055064A JP 2019055064 A JP2019055064 A JP 2019055064A JP 2017181766 A JP2017181766 A JP 2017181766A JP 2017181766 A JP2017181766 A JP 2017181766A JP 2019055064 A JP2019055064 A JP 2019055064A
- Authority
- JP
- Japan
- Prior art keywords
- support information
- diagnosis support
- change amount
- unit
- face
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003745 diagnosis Methods 0.000 title claims abstract description 160
- 238000000034 method Methods 0.000 title claims description 21
- 230000008859 change Effects 0.000 claims abstract description 144
- 238000005259 measurement Methods 0.000 claims abstract description 95
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 claims abstract description 12
- 201000010099 disease Diseases 0.000 claims abstract description 9
- 230000008921 facial expression Effects 0.000 claims description 71
- 230000003925 brain function Effects 0.000 claims description 11
- 206010012289 Dementia Diseases 0.000 abstract description 39
- 230000001815 facial effect Effects 0.000 abstract 7
- 230000002490 cerebral effect Effects 0.000 abstract 1
- 238000004458 analytical method Methods 0.000 description 46
- 230000008569 process Effects 0.000 description 12
- 208000036574 Behavioural and psychiatric symptoms of dementia Diseases 0.000 description 11
- 238000011156 evaluation Methods 0.000 description 10
- 238000012545 processing Methods 0.000 description 10
- 238000010586 diagram Methods 0.000 description 9
- 230000037406 food intake Effects 0.000 description 9
- 230000014509 gene expression Effects 0.000 description 8
- 238000012360 testing method Methods 0.000 description 7
- 230000006870 function Effects 0.000 description 5
- 238000003384 imaging method Methods 0.000 description 5
- 208000024891 symptom Diseases 0.000 description 4
- 208000024827 Alzheimer disease Diseases 0.000 description 3
- 238000004891 communication Methods 0.000 description 3
- 230000002354 daily effect Effects 0.000 description 3
- 208000035475 disorder Diseases 0.000 description 3
- 238000010191 image analysis Methods 0.000 description 3
- 230000015654 memory Effects 0.000 description 3
- 230000002093 peripheral effect Effects 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 150000004667 medium chain fatty acids Chemical class 0.000 description 2
- 235000011888 snacks Nutrition 0.000 description 2
- 238000012935 Averaging Methods 0.000 description 1
- 206010044565 Tremor Diseases 0.000 description 1
- 239000003795 chemical substances by application Substances 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000003203 everyday effect Effects 0.000 description 1
- 235000013305 food Nutrition 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000002361 ketogenic effect Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000004060 metabolic process Effects 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 235000016709 nutrition Nutrition 0.000 description 1
- 230000035764 nutrition Effects 0.000 description 1
- 229940068196 placebo Drugs 0.000 description 1
- 239000000902 placebo Substances 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
Images
Landscapes
- Measuring And Recording Apparatus For Diagnosis (AREA)
- Image Analysis (AREA)
Abstract
Description
従来からの研究によって、認知症患者は笑顔が減少することが分かっている。認知症患者の介護者には、認知症の症状が進むにつれ、笑顔だけではなく他の表情なども減少し、無表情の時間が増えているようである、との印象を得ている。これに基づけば、認知症に関する診断に有用な情報を得るために、無表情の時間を測定し、認知症の症状を判断することに利用することが考えられる。しかしながら、無表情とは、真顔であるが動きがなく何らかの思考中や動作中でない状態であり、人は比較的容易に無表情でない真顔と無表情の状態を総合的な情報をもとに判断することが可能である一方で、装置を用いた場合には、無表情を含む真顔の状態を測定はできても、無表情であることを正確に測定することができない。
そこで、本実施形態では、被検者の顔の動き、及び、視線の動きを利用して、脳機能疾患、特に、認知症の診断に有用な情報を提供する。
ここでは、認知症の被験者3名についての試験結果を示す。この3名の被験者は、70代の女性の被験者A、90代の女性の被験者B、及び、80代の女性の被験者Cである。被験者Aは、認知症の診断後2年、介護度4である。被験者Bは、認知症の診断後6年、介護度3である。被験者Cは、アルツハイマー型認知症の診断後6年、介護度2である。各被験者は、認知症への効果が研究されている中鎖脂肪酸油6グラム含有食品メモリオン(日清オイリオグループ株式会社製)を1日3回、2ヶ月間摂取した。以下では、このメモリオンの摂取開始前の1ヶ月間を「摂取前」、メモリオンの摂取終了後の1ヶ月間を「摂取後」と記載する。各被験者について、摂取前、摂取開始1ヶ月後、摂取開始2ヶ月後、摂取後に、認知症に特有な周辺症状(以下、BPSD)及び表情に関して、日常的な介護者による評価を実施した。
変化量算出部16は、所定数毎に顔向き測定結果、及び、視線測定結果それぞれを平均した値を、顔向き変化量、及び、視線変化量の算出に用いてもよい。例えば、0.05秒間隔の時系列の画像データを用いた場合、0.05秒ごとの顔向き測定結果及び視線測定結果が得られる。顔向き測定部12及び視線方向測定部13は、例えば、連続した125個を1区間とし、各区間に時系列情報を付与する。顔向き測定部12は、時系列情報と、その時系列情報が付与された区間における顔向き測定結果の平均値とを設定した顔向き測定情報を記憶部15に書き込む。同様に、視線方向測定部13は、時系列情報と、その時系列情報が付与された区間における視線測定結果の平均値とを設定した視線方向測定情報を記憶部15に書き込む。これにより、変化量算出部16は、6.25秒間隔の時系列の顔向き測定結果情報及び視線方向測定情報を用いて、上記処理と同様に顔向き変化量と視線変化量を算出する。認知症患者には、震えの症状はあまり見られないため、区間を適切に決めることで、情報の精度を維持したまま、診断支援情報提供装置1の処理負荷を軽減することができる。
図7は、本実施形態の診断支援情報提供システム4の構成図である。同図に示す診断支援情報提供システム4は、ネットワーク5を介して、第1の実施形態の診断支援情報提供装置1と、1台以上の端末装置6とを接続した構成である。ネットワーク5は、例えば、インターネット網などの公衆網であるが、私設網又は仮想私設網であってもよく、それらの組合せであってもよい。端末装置6は、コンピュータ端末であり、映像データを診断支援情報提供装置1に送信する。診断支援情報提供装置1は、端末装置6から映像データを受信して、第1の実施形態と同様の処理を行う。なお、解析対象期間を指定する場合、診断支援情報提供装置1は、入力部17による入力に代えて、端末装置6から解析対象期間の情報を受信する。診断支援情報提供装置1の出力部19は、診断支援情報を映像データの送信元の端末装置6に返送する。
本実施形態では、診断支援情報提供装置1が出力した診断支援情報と、他の情報とを利用して、総合的な診断支援情報を提供する。
図8は、本実施形態の診断支援システム7の機能ブロック図である。診断支援システム7は、第1の実施形態の診断支援情報提供装置1と、解析部71とを備える。診断支援システム7は、1台のコンピュータ装置により実現してもよく、ネットワークで接続された複数台のコンピュータ装置により実現してもよい。複数台のコンピュータ装置により実現する場合、いずれのコンピュータ装置がいずれの機能部を実現するかは任意とすることができ、1つの機能部を複数台のコンピュータ装置で実現してもよい。
また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ROM、CD−ROM等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。さらに「コンピュータ読み取り可能な記録媒体」とは、インターネット等のネットワークや電話回線等の通信回線を介してプログラムを送信する場合の通信線のように、短時間の間、動的にプログラムを保持するもの、その場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリのように、一定時間プログラムを保持しているものも含むものとする。また上記プログラムは、前述した機能の一部を実現するためのものであっても良く、さらに前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるものであっても良い。
2…被検者
3…撮像装置
4…診断支援情報提供システム
5…ネットワーク
6…端末装置
7…診断支援システム
11…画像取得部
12…顔向き測定部
13…視線方向測定部
14…表情推定部
15…記憶部
16…変化量算出部
17…入力部
18…診断支援情報生成部
19…出力部
71…解析部
Claims (5)
- 時系列の画像データそれぞれにおける被検者の顔向きを測定する顔向き測定部と、
前記顔向き測定部が測定した前記顔向きに基づいて、時系列の顔向き変化量を算出する変化量算出部と、
所定期間において顔向き変化量が所定値以下であった割合を前記変化量算出部が算出した前記顔向き変化量に基づいて算出し、算出結果を示す診断支援情報を生成する診断支援情報生成部と、
前記診断支援情報生成部が算出した前記診断支援情報を出力する出力部と、
を備える診断支援情報提供装置。 - 時系列の前記画像データそれぞれにおける前記被検者の視線方向を測定する視線方向測定部をさらに備え、
前記変化量算出部は、前記視線方向測定部が測定した前記視線方向に基づいて、時系列の視線変化量を算出し、
前記診断支援情報生成部は、前記所定期間において視線変化量が所定値以下であった割合を前記変化量算出部が算出した時系列の前記視線変化量に基づいて算出し、算出結果をさらに前記診断支援情報に設定する、
請求項1に記載の診断支援情報提供装置。 - 前記診断支援情報生成部は、顔向き変化量が所定値以下であった前記割合に基づいて、又は、顔向き変化量が所定値以下であった前記割合及び視線変化量が所定値以下であった前記割合に基づいて、脳機能疾患の可能性又は程度を判定し、
前記出力部は、前記診断支援情報生成部による判定結果を出力する、
請求項2に記載の診断支援情報提供装置。 - 時系列の前記画像データそれぞれにおける前記被検者の表情を推定する表情推定部をさらに備え、
前記診断支援情報生成部は、前記所定期間について前記表情推定部が推定した前記表情をさらに用いて脳機能疾患の可能性又は程度を判定する、
請求項1から請求項3のいずれか一項に記載の診断支援情報提供装置。 - 時系列の画像データそれぞれにおける被検者の顔向きを測定する顔向き測定ステップと、
前記顔向き測定ステップにおいて測定された前記顔向きに基づいて、時系列の顔向き変化量を算出する変化量算出ステップと、
所定期間において顔向き変化量が所定値以下であった割合を前記変化量算出ステップにおいて算出された前記顔向き変化量に基づいて算出し、算出結果を示す診断支援情報を生成する診断支援情報生成ステップと、
前記診断支援情報生成ステップにおいて算出された前記診断支援情報を出力する出力ステップと、
を有する診断支援情報提供方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017181766A JP7123539B2 (ja) | 2017-09-21 | 2017-09-21 | 診断支援情報提供装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017181766A JP7123539B2 (ja) | 2017-09-21 | 2017-09-21 | 診断支援情報提供装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2019055064A true JP2019055064A (ja) | 2019-04-11 |
JP7123539B2 JP7123539B2 (ja) | 2022-08-23 |
Family
ID=66106676
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017181766A Active JP7123539B2 (ja) | 2017-09-21 | 2017-09-21 | 診断支援情報提供装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7123539B2 (ja) |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2021058231A (ja) * | 2019-10-02 | 2021-04-15 | 株式会社エクサウィザーズ | 認知機能推定方法、コンピュータプログラム及び認知機能推定装置 |
WO2022059249A1 (ja) * | 2020-09-16 | 2022-03-24 | コニカミノルタ株式会社 | 情報処理装置、情報処理システム、情報出力方法、および情報出力プログラム |
WO2022091642A1 (ja) * | 2020-10-29 | 2022-05-05 | グローリー株式会社 | 認知機能判定装置、認知機能判定システム、学習モデル生成装置、認知機能判定方法、学習モデル製造方法、学習済みモデル、およびプログラム |
KR20220072560A (ko) * | 2020-11-25 | 2022-06-02 | 상명대학교산학협력단 | 얼굴 방향과 시선의 분석을 통한 치매 스크리닝 장치 및 방법 |
WO2022201275A1 (ja) * | 2021-03-22 | 2022-09-29 | 株式会社I’mbesideyou | 動画像分析プログラム |
WO2023053784A1 (ja) * | 2021-10-01 | 2023-04-06 | パナソニックIpマネジメント株式会社 | 顔タイプ診断装置、顔タイプ診断方法及びプログラム |
WO2023224333A1 (ko) * | 2022-05-18 | 2023-11-23 | 의료법인 명지의료재단 | 치매 진단 시스템 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0670885A (ja) * | 1992-07-09 | 1994-03-15 | A T R Shichokaku Kiko Kenkyusho:Kk | 視線検出を用いた医療診断装置 |
JP2007148922A (ja) * | 2005-11-29 | 2007-06-14 | Advanced Telecommunication Research Institute International | 顔運動療法支援装置 |
JP2012034839A (ja) * | 2010-08-06 | 2012-02-23 | Tokyo Univ Of Agriculture & Technology | 精神疾患判定装置、方法、及びプログラム |
JP2014068941A (ja) * | 2012-09-28 | 2014-04-21 | Jvc Kenwood Corp | 診断支援装置および診断支援方法 |
US20140315168A1 (en) * | 2013-02-12 | 2014-10-23 | Emotient | Facial expression measurement for assessment, monitoring, and treatment evaluation of affective and neurological disorders |
JP2015518402A (ja) * | 2012-04-24 | 2015-07-02 | ウニベルシタ デ バルセローナ | 注意測定方法 |
JP2016147006A (ja) * | 2015-02-13 | 2016-08-18 | オムロン株式会社 | 健康管理補助装置及び健康管理補助方法 |
-
2017
- 2017-09-21 JP JP2017181766A patent/JP7123539B2/ja active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0670885A (ja) * | 1992-07-09 | 1994-03-15 | A T R Shichokaku Kiko Kenkyusho:Kk | 視線検出を用いた医療診断装置 |
JP2007148922A (ja) * | 2005-11-29 | 2007-06-14 | Advanced Telecommunication Research Institute International | 顔運動療法支援装置 |
JP2012034839A (ja) * | 2010-08-06 | 2012-02-23 | Tokyo Univ Of Agriculture & Technology | 精神疾患判定装置、方法、及びプログラム |
JP2015518402A (ja) * | 2012-04-24 | 2015-07-02 | ウニベルシタ デ バルセローナ | 注意測定方法 |
JP2014068941A (ja) * | 2012-09-28 | 2014-04-21 | Jvc Kenwood Corp | 診断支援装置および診断支援方法 |
US20140315168A1 (en) * | 2013-02-12 | 2014-10-23 | Emotient | Facial expression measurement for assessment, monitoring, and treatment evaluation of affective and neurological disorders |
JP2016147006A (ja) * | 2015-02-13 | 2016-08-18 | オムロン株式会社 | 健康管理補助装置及び健康管理補助方法 |
Cited By (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2021058231A (ja) * | 2019-10-02 | 2021-04-15 | 株式会社エクサウィザーズ | 認知機能推定方法、コンピュータプログラム及び認知機能推定装置 |
JP7014761B2 (ja) | 2019-10-02 | 2022-02-01 | 株式会社エクサウィザーズ | 認知機能推定方法、コンピュータプログラム及び認知機能推定装置 |
WO2022059249A1 (ja) * | 2020-09-16 | 2022-03-24 | コニカミノルタ株式会社 | 情報処理装置、情報処理システム、情報出力方法、および情報出力プログラム |
WO2022091642A1 (ja) * | 2020-10-29 | 2022-05-05 | グローリー株式会社 | 認知機能判定装置、認知機能判定システム、学習モデル生成装置、認知機能判定方法、学習モデル製造方法、学習済みモデル、およびプログラム |
KR20220072560A (ko) * | 2020-11-25 | 2022-06-02 | 상명대학교산학협력단 | 얼굴 방향과 시선의 분석을 통한 치매 스크리닝 장치 및 방법 |
KR102446848B1 (ko) * | 2020-11-25 | 2022-09-27 | 상명대학교산학협력단 | 얼굴 방향과 시선의 분석을 통한 치매 스크리닝 장치 및 방법 |
WO2022201275A1 (ja) * | 2021-03-22 | 2022-09-29 | 株式会社I’mbesideyou | 動画像分析プログラム |
WO2023053784A1 (ja) * | 2021-10-01 | 2023-04-06 | パナソニックIpマネジメント株式会社 | 顔タイプ診断装置、顔タイプ診断方法及びプログラム |
WO2023224333A1 (ko) * | 2022-05-18 | 2023-11-23 | 의료법인 명지의료재단 | 치매 진단 시스템 |
Also Published As
Publication number | Publication date |
---|---|
JP7123539B2 (ja) | 2022-08-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7123539B2 (ja) | 診断支援情報提供装置 | |
Aigrain et al. | Multimodal stress detection from multiple assessments | |
Cornelissen et al. | Body size estimation in women with anorexia nervosa and healthy controls using 3D avatars | |
Sato et al. | Enhanced experience of emotional arousal in response to dynamic facial expressions | |
Engbert et al. | Microsaccades keep the eyes' balance during fixation | |
Van der Lans et al. | Defining eye-fixation sequences across individuals and tasks: the Binocular-Individual Threshold (BIT) algorithm | |
US9532711B2 (en) | Affective bandwidth measurement and affective disorder determination | |
WO2018168095A1 (ja) | 人物動向記録装置、人物動向記録方法、及びプログラム | |
KR101722708B1 (ko) | 인체 미동에 의한 hrc 기반 사회 관계성 측정 방법 및 시스템 | |
Kuwahara et al. | Eye fatigue estimation using blink detection based on Eye Aspect Ratio Mapping (EARM) | |
JP6863563B2 (ja) | ストレス評価システム | |
Lott et al. | Face recognition in the elderly | |
JPWO2007135796A1 (ja) | コンテンツに対する利用者応答を評価する制御装置 | |
Kim et al. | Effects of emotional context on memory for details: the role of attention | |
KR20190041081A (ko) | 인지장애 진단을 위한 vr기반 인지능력 평가시스템 | |
Fini et al. | Sharing space: the presence of other bodies extends the space judged as near | |
Stewart et al. | Body image, shape, and volumetric assessments using 3D whole body laser scanning and 2D digital photography in females with a diagnosed eating disorder: Preliminary novel findings | |
Boswell et al. | Smartphone videos of the sit-to-stand test predict osteoarthritis and health outcomes in a nationwide study | |
Sheth et al. | Detecting social and non-social changes in natural scenes: Performance of children with and without autism spectrum disorders and typical adults | |
Rostovtseva et al. | Sexual dimorphism in facial shape of modern Buryats of Southern Siberia | |
Capriola-Hall et al. | Group differences in facial emotion expression in autism: Evidence for the utility of machine classification | |
Muender et al. | Extracting heart rate from videos of online participants | |
Al-Jallad et al. | Artificial intelligence-powered smartphone application, AICaries, improves at-home dental caries screening in children: Moderated and unmoderated usability test | |
Mackenzie et al. | Morphological and morphometric changes in the faces of female-to-male (FtM) transsexual people | |
Ramon | Differential processing of vertical interfeature relations due to real-life experience with personally familiar faces |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20171019 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200826 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20210729 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210810 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210927 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220222 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220329 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220726 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220810 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7123539 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |