JPWO2016093096A1 - プログラム、情報処理装置、及びアイウエア - Google Patents
プログラム、情報処理装置、及びアイウエア Download PDFInfo
- Publication number
- JPWO2016093096A1 JPWO2016093096A1 JP2016563623A JP2016563623A JPWO2016093096A1 JP WO2016093096 A1 JPWO2016093096 A1 JP WO2016093096A1 JP 2016563623 A JP2016563623 A JP 2016563623A JP 2016563623 A JP2016563623 A JP 2016563623A JP WO2016093096 A1 JPWO2016093096 A1 JP WO2016093096A1
- Authority
- JP
- Japan
- Prior art keywords
- value
- electrode
- electrooculogram
- signal
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000010365 information processing Effects 0.000 title claims description 4
- 238000001514 detection method Methods 0.000 claims abstract description 118
- 238000012545 processing Methods 0.000 claims abstract description 79
- 238000004364 calculation method Methods 0.000 claims abstract description 48
- 230000033001 locomotion Effects 0.000 claims abstract description 30
- 238000000034 method Methods 0.000 claims description 72
- 230000008569 process Effects 0.000 claims description 68
- 230000004424 eye movement Effects 0.000 claims description 29
- 210000004709 eyebrow Anatomy 0.000 claims description 15
- 210000001508 eye Anatomy 0.000 description 48
- 239000000872 buffer Substances 0.000 description 28
- 239000011521 glass Substances 0.000 description 25
- 230000003321 amplification Effects 0.000 description 22
- 238000003199 nucleic acid amplification method Methods 0.000 description 22
- 238000004891 communication Methods 0.000 description 20
- 238000010586 diagram Methods 0.000 description 17
- 230000005540 biological transmission Effects 0.000 description 9
- 230000004397 blinking Effects 0.000 description 6
- 238000006243 chemical reaction Methods 0.000 description 4
- 238000002474 experimental method Methods 0.000 description 4
- 238000009434 installation Methods 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 229940112822 chewing gum Drugs 0.000 description 2
- 235000015218 chewing gum Nutrition 0.000 description 2
- 230000007423 decrease Effects 0.000 description 2
- 238000005259 measurement Methods 0.000 description 2
- 238000010295 mobile communication Methods 0.000 description 2
- 208000032140 Sleepiness Diseases 0.000 description 1
- 206010041349 Somnolence Diseases 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 238000010923 batch production Methods 0.000 description 1
- 210000005252 bulbus oculi Anatomy 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000004069 differentiation Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000000193 eyeblink Effects 0.000 description 1
- 210000000887 face Anatomy 0.000 description 1
- 210000003128 head Anatomy 0.000 description 1
- 230000001771 impaired effect Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 230000002207 retinal effect Effects 0.000 description 1
- 230000037321 sleepiness Effects 0.000 description 1
- 230000004599 slow eye movement Effects 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
-
- G—PHYSICS
- G02—OPTICS
- G02C—SPECTACLES; SUNGLASSES OR GOGGLES INSOFAR AS THEY HAVE THE SAME FEATURES AS SPECTACLES; CONTACT LENSES
- G02C5/00—Constructions of non-optical parts
- G02C5/12—Nose pads; Nose-engaging surfaces of bridges or rims
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
-
- G—PHYSICS
- G02—OPTICS
- G02C—SPECTACLES; SUNGLASSES OR GOGGLES INSOFAR AS THEY HAVE THE SAME FEATURES AS SPECTACLES; CONTACT LENSES
- G02C11/00—Non-optical adjuncts; Attachment thereof
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Physics & Mathematics (AREA)
- Life Sciences & Earth Sciences (AREA)
- General Engineering & Computer Science (AREA)
- Ophthalmology & Optometry (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Molecular Biology (AREA)
- Biophysics (AREA)
- Surgery (AREA)
- Animal Behavior & Ethology (AREA)
- General Health & Medical Sciences (AREA)
- Public Health (AREA)
- Veterinary Medicine (AREA)
- Medical Informatics (AREA)
- Human Computer Interaction (AREA)
- Heart & Thoracic Surgery (AREA)
- Biomedical Technology (AREA)
- Optics & Photonics (AREA)
- Eye Examination Apparatus (AREA)
- Position Input By Displaying (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
Description
図1は、実施例におけるメガネ100の前方からの一例を示す斜視図である。図2は、実施例におけるメガネ100の後方からの一例を示す斜視図である。メガネ100は、レンズ110及びフレーム120を備える。メガネ100及びフレーム120は、アイウエアの一例である。
図3は、実施例における処理装置200の一例を示すブロック図である。図3に示すように、処理装置200は、処理部210、送信部220、及び電源部230を有する。第1電極152、第2電極154、第3電極156は、例えば増幅部250を介して処理部210に接続される。処理装置200の各構成は、一対のテンプルに分散して設けられてもよい。
次に、増幅部250の構成について説明する。図5は、実施例における増幅部250の構成の一例を示す図である。図5に示すように、増幅部250は、第1アンプ260及び第2アンプ270を有する。第1アンプ260は、第2アンプ270の前段に位置し、バッファアンプとして機能するアンプである。以下、第1アンプ260をバッファアンプ260とも称する。第2アンプ270は、メインのアンプとして機能するアンプである。以下、第2アンプ270は、メインアンプ270とも称する。メインアンプ270により増幅された信号は処理装置200に有線又は無線を用いて出力される。
次に、外部装置300の構成について説明する。図8は、実施例における外部装置300の構成の一例を示すブロック図である。図8に示すように、外部装置300は、通信部310、記憶部320、及び制御部330を有する。
図9は、実施例における判定部338の構成の一例を示すブロック図である。図9に示す判定部338は、極大値と極小値との比に関する所定条件を用いて判定処理を行う第1判定部402と、眼電図信号の第1値から第2値までの時間に関する所定条件を用いて判定処理を行う第2判定部404とを含む。なお、判定処理については、第1判定部402及び第2判定部404のいずれかの条件が用いられてもよいし、両方の条件が満たされる場合に、判定部338は検出処理を判定してもよい。
つぎに、瞬目検出について説明する。図10は、実施例における瞬目検出部342の一例を示すブロック図である。
次に、視線移動の検出について説明する。図8に戻り、視線移動検出部344は、公知の方法を用いて視線移動を検出すればよい。例えば、視線移動検出部344は、取得した眼電図信号又は差分信号から右眼電図と、左眼電図とに分けて、右眼電図及び左眼電図で負の電位が示された場合には視線が上を向いたことを検出する。また、視線移動検出部344は、右眼電図及び左眼電図で正の電位が示された場合には視線が下、右眼電図で負の電位が示され左眼電図で正の電位が示された場合には視線が右、右眼電図で正の電位が示され左眼電図で負の電位が示された場合には視線が左に向いたことを検出する。
次に、眼電図信号や差分信号の具体例を用いて判定処理や検出処理について説明する。図11は、眼電図信号の一例を示す図である。図11に示すグラフにおいて、縦軸の眼電強度は、眼電位の強度を示す単位であり、例えば眼電図信号の計測値×1.5(V)÷2048などで表される。横軸は時間である。
制御部330は、眼電図信号S4の所定期間T1(例えば500msec)ごとの最大値、最小値を求める。
制御部330は、(1)で求めた最大値が極大値である場合、第1FIFOバッファ(記憶部320)に保存する。
制御部330は、(1)で求めた最小値が極小値である場合、第1FIFOバッファとは別領域の第2FIFOバッファに保存(記憶部320)する。なお、(2)及び(3)について、順序は問わない。以降、第1FIFOバッファ及び第2FIFOバッファをまとめる場合は、単にバッファと称する。図15において、眼電図信号S4上にある黒点は、各期間において極大値又は極小値として検出された値を表す。なお、極大値及び極小値は、微分を用いて、例えば眼電図信号S4の差分信号を用いて求めることができる。
第1算出部512は、第1FIFOバッファに保存されている極大値の平均値(a1)及び標準偏差(b1)を算出する。また、第1算出部512は、第2FIFOバッファに保存されている極小値の平均値(a2)及び標準偏差(b2)を算出する。
第2算出部514は、(4)で算出された平均値及び標準偏差を用いて第5閾値及び第6閾値を算出する。第5閾値(Th1)及び第6閾値(Th2)は、以下の式で算出される。
Th1=a1+E×b1・・・式(1)
Th2=a2−E×b2・・・式(2)
ここで、係数Eは、例えば2とする。
なお、第5閾値(Th1)、第6閾値(Th2)の絶対値に下限値を設定しておいてもよい。これにより、眼のわずかな上下運動を瞬きであると誤検出することを防止することができる。また、係数Eは、信号強度に応じて可変に設定できるようにされてもよい。
検出部340は、(5)で算出された第5閾値以上の極大値を特定する。ここで、閾値判定の対象となる極大値は、第1FIFOバッファに記憶されており、閾値判定がまだされていない極大値である。
検出部340は、特定された極大値毎に、この極大値の第1時刻と、特定された極小値の第2時刻であり、この第1時刻以降の直近の第2時刻との差が、所定時間以内であれば、その眼の上下の動きを瞬目とみなして検出する。
次に、実施例における外部装置300の動作について説明する。図16は、実施例における瞬目、視線移動の検出処理に関する処理の一例を示すフローチャートである。図16に示すフローチャートは、使用者がメガネ100を装着して、第1電極152、第2電極154、第3電極156及び接地電極が使用者の皮膚に接触した状態であって、外部装置300が瞬目又は視線移動の検出を実行するモードである動作モード(通常モード)に設定された場合に開始する。
120 フレーム
124 眉間部
140 ノーズパッド
152 第1電極
154 第2電極
156 第3電極
200 処理装置
300 外部装置
320 記憶部
330 制御部
332 取得部
334 差分算出部
336 極値算出部
338 判定部
340 検出部
Claims (8)
- 対象者の眼周辺に接触する各電極により検出される眼電位に基づく眼電図信号を取得する取得ステップと、
取得された前記眼電図信号と該眼電図信号の所定時間前の眼電図信号との差分信号を算出する算出ステップと、
前記差分信号の極大値及び極小値を算出する算出ステップと、
前記極大値及び/又は前記極小値に関する所定条件が満たされるか否かに基づいて、瞬目の検出処理及び視線移動の検出処理のいずれの検出処理を行うかを判定する判定ステップと、
判定された検出処理を行う検出ステップと、
をコンピュータに実行させるプログラム。 - 前記所定条件は、前記極大値と前記極小値との比に関する条件である、請求項1に記載のプログラム。
- 前記所定条件は、前記比が、第1閾値以上第2閾値以下の所定範囲に含まれることであり、
前記判定ステップは、
前記比が、第1閾値以上第2閾値以下の所定範囲に含まれる場合、前記瞬目の検出処理を行うと判定し、前記比が前記所定範囲に含まれない場合、前記視線移動の検出処理を行うと判定する、請求項2に記載のプログラム。 - 前記判定ステップは、
前記比が、前記第1閾値よりも小さい第3閾値以下又は前記第2閾値よりも大きい第4閾値以上の場合に、前記視線移動の検出処理を行うと判定する、請求項3に記載のプログラム。 - 前記所定条件は、前記極大値又は前記極小値に関する前記眼電図信号の値から前記眼電図信号の所定値までに要する時間に関する条件である、請求項1に記載のプログラム。
- 前記所定条件は、前記時間が、所定時間以内であることであり、
前記判定ステップは、
前記時間が前記所定時間以内である場合、前記瞬目の検出処理を行うと判定し、前記時間が前記所定時間以内ではない場合、前記視線移動の検出処理を行うと判定する、請求項5に記載のプログラム。 - 対象者の眼周辺に接触する各電極により検出される眼電位に基づく眼電図信号を取得する取得部と、
取得された前記眼電図信号と該眼電図信号の所定時間前の眼電図信号との差分信号を算出する差分算出部と、
前記差分信号の極大値及び極小値を算出する極値算出部と、
前記極大値及び/又は前記極小値に関する所定条件が満たされるか否かに基づいて、瞬目の検出処理及び視線移動の検出処理のいずれの検出処理を行うかを判定する判定部と、
判定された検出処理を行う検出部と、
を備える情報処理装置。 - 眉間部と、
一対のノーズパッドを有するフレームと、
前記一対のノーズパッドそれぞれの表面に設けられる第1電極及び第2電極と、
前記眉間部の表面に設けられる第3電極と、
各電極により検出される眼電位に基づく眼電図信号を取得する取得部と、
取得された前記眼電図信号と該眼電図信号の所定時間前の眼電図信号との差分信号を算出する差分算出部と、
前記差分信号の極大値及び極小値を算出する極値算出部と、
前記極大値及び/又は前記極小値に関する所定条件が満たされるか否かに基づいて、瞬目の検出処理及び視線移動の検出処理のいずれの検出処理を行うかを判定する判定部と、
前記判定部により判定された検出処理を行う検出部と、
を備えるアイウエア。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014249120 | 2014-12-09 | ||
JP2014249120 | 2014-12-09 | ||
PCT/JP2015/083588 WO2016093096A1 (ja) | 2014-12-09 | 2015-11-30 | プログラム、情報処理装置、及びアイウエア |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2016093096A1 true JPWO2016093096A1 (ja) | 2017-11-30 |
JP6656166B2 JP6656166B2 (ja) | 2020-03-04 |
Family
ID=56107286
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016563623A Active JP6656166B2 (ja) | 2014-12-09 | 2015-11-30 | プログラム、情報処理装置、及びアイウエア |
Country Status (2)
Country | Link |
---|---|
JP (1) | JP6656166B2 (ja) |
WO (1) | WO2016093096A1 (ja) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108245154B (zh) * | 2018-01-24 | 2020-10-09 | 福州大学 | 利用异常值检测精确确定脑电或眼电中眨眼区间的方法 |
CN110441912B (zh) * | 2019-08-27 | 2024-04-19 | 高维度(深圳)生物信息智能应用有限公司 | 一种便携眼镜智能穿戴设备及其控制方法 |
CN112578682A (zh) * | 2021-01-05 | 2021-03-30 | 陕西科技大学 | 一种基于眼电控制的智能助障家居*** |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH10207615A (ja) * | 1997-01-22 | 1998-08-07 | Tec Corp | ネットワークシステム |
JP2008531142A (ja) * | 2005-03-04 | 2008-08-14 | スリープ・ダイアグノスティックス・プロプライアタリー・リミテッド | 覚醒の測定 |
JP2013244370A (ja) * | 2012-05-29 | 2013-12-09 | Jin Co Ltd | アイウエア |
-
2015
- 2015-11-30 JP JP2016563623A patent/JP6656166B2/ja active Active
- 2015-11-30 WO PCT/JP2015/083588 patent/WO2016093096A1/ja active Application Filing
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH10207615A (ja) * | 1997-01-22 | 1998-08-07 | Tec Corp | ネットワークシステム |
JP2008531142A (ja) * | 2005-03-04 | 2008-08-14 | スリープ・ダイアグノスティックス・プロプライアタリー・リミテッド | 覚醒の測定 |
JP2013244370A (ja) * | 2012-05-29 | 2013-12-09 | Jin Co Ltd | アイウエア |
Non-Patent Citations (2)
Title |
---|
梶原 祐輔 他: "交流眼電図による水平方向の眼球運動と随意性瞬目を用いた意思伝達支援装置の開発", 電気学会論文誌C, vol. 第132巻,第4号, JPN6019047074, 1 April 2012 (2012-04-01), JP, pages 555 - 560, ISSN: 0004167040 * |
湯瀬 裕昭, 田多 英興: "瞬目の自動検出と瞬目波形解析", 人間工学[オンライン], vol. Vol. 30 (1994) No. 5, JPN6019047073, 1994, JP, pages 331 - 337, ISSN: 0004167039 * |
Also Published As
Publication number | Publication date |
---|---|
WO2016093096A1 (ja) | 2016-06-16 |
JP6656166B2 (ja) | 2020-03-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9706941B2 (en) | Eyewear | |
JP6426589B2 (ja) | 眼電位検出装置、眼電位検出方法、アイウエア及びフレーム | |
US20160070122A1 (en) | Computerized replacement temple for standard eyewear | |
CN107743605B (zh) | 用于确定眼睛注视方向的电容传感器 | |
TWI466655B (zh) | 可偵測眼動訊號之影像控制系統 | |
JP2015213734A (ja) | プログラム、情報処理装置、及びアイウエア | |
US20170255029A1 (en) | Systems and methods for charging eyewear | |
JP6656166B2 (ja) | プログラム、情報処理装置、及びアイウエア | |
CN110366388B (zh) | 信息处理方法、信息处理装置以及计算机可读存储介质 | |
JP6687639B2 (ja) | 情報処理方法、情報処理装置、プログラム及びアイウエア | |
WO2016076268A1 (ja) | プログラム、情報処理装置、及びアイウエア | |
WO2015159851A1 (ja) | 検出ユニット、アイウエア、及び眼電位検出システム | |
JP6594953B2 (ja) | 視線移動検出方法、プログラム、情報処理装置及びアイウエア | |
WO2016072395A1 (ja) | プログラム、情報処理装置、及びアイウエア | |
JP6699308B2 (ja) | ウェアラブル生体計測装置 | |
JP2015202183A (ja) | 検出制御装置、装着具、眼電位情報処理システム、及びプログラム | |
WO2017064800A1 (ja) | プログラム、情報処理装置、及びアイウエア | |
JP6556860B2 (ja) | 情報処理方法、情報処理装置、プログラム及びアイウエア | |
WO2016152849A1 (ja) | 信号処理方法、プログラム、情報処理装置及びアイウエア | |
WO2017064799A1 (ja) | アイウエア | |
JP5689206B1 (ja) | アイウエア | |
WO2017150148A1 (ja) | 瞬目検出装置、眼鏡型電子機器、瞬目検出方法およびプログラム | |
JP2017192548A (ja) | アイウエア、情報処理方法、及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
AA64 | Notification of invalidation of claim of internal priority (with term) |
Free format text: JAPANESE INTERMEDIATE CODE: A241764 Effective date: 20170807 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170824 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20181025 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20191203 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200120 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200128 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200204 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6656166 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |