JP5769630B2 - 複数のセンサーを用いた触覚監視システムを提供する方法及び装置 - Google Patents

複数のセンサーを用いた触覚監視システムを提供する方法及び装置 Download PDF

Info

Publication number
JP5769630B2
JP5769630B2 JP2011540792A JP2011540792A JP5769630B2 JP 5769630 B2 JP5769630 B2 JP 5769630B2 JP 2011540792 A JP2011540792 A JP 2011540792A JP 2011540792 A JP2011540792 A JP 2011540792A JP 5769630 B2 JP5769630 B2 JP 5769630B2
Authority
JP
Japan
Prior art keywords
haptic
user
vital
sensor
sensing device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2011540792A
Other languages
English (en)
Other versions
JP2012511782A (ja
Inventor
ラムゼイ,エリン,ビー.
ホイベル,ロバート,ダブリュ.
オライエン,ネイル
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Immersion Corp
Original Assignee
Immersion Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Immersion Corp filed Critical Immersion Corp
Publication of JP2012511782A publication Critical patent/JP2012511782A/ja
Application granted granted Critical
Publication of JP5769630B2 publication Critical patent/JP5769630B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016Input arrangements with force or tactile feedback as computer generated output to the user
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0002Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/02Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/0205Simultaneously evaluating both cardiovascular conditions and different types of body conditions, e.g. heart and respiratory condition
    • A61B5/02055Simultaneously evaluating both cardiovascular condition and temperature
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/74Details of notification to user or communication with user or patient ; user input means
    • A61B5/7455Details of notification to user or communication with user or patient ; user input means characterised by tactile indication, e.g. vibration or electrical stimulation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H40/00ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
    • G16H40/60ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices
    • G16H40/67ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices for remote operation
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/02Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/021Measuring pressure in heart or blood vessels
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/02Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/024Detecting, measuring or recording pulse rate or heart rate
    • A61B5/02438Detecting, measuring or recording pulse rate or heart rate with portable devices, e.g. worn by the patient
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/08Detecting, measuring or recording devices for evaluating the respiratory organs
    • A61B5/0816Measuring devices for examining respiratory frequency
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/103Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A61B5/1112Global tracking of patients, e.g. by using GPS
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/68Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
    • A61B5/6801Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient specially adapted to be attached to or worn on the body surface
    • A61B5/6802Sensor mounted on worn items
    • A61B5/681Wristwatch-type devices
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/01Indexing scheme relating to G06F3/01
    • G06F2203/011Emotion or mood input determined on the basis of sensed human body parameters such as pulse, heart rate or beat, temperature of skin, facial expressions, iris, voice pitch, brain activity patterns

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Biomedical Technology (AREA)
  • Medical Informatics (AREA)
  • Theoretical Computer Science (AREA)
  • Public Health (AREA)
  • General Health & Medical Sciences (AREA)
  • Surgery (AREA)
  • Cardiology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Molecular Biology (AREA)
  • Biophysics (AREA)
  • Animal Behavior & Ethology (AREA)
  • Pathology (AREA)
  • Veterinary Medicine (AREA)
  • Human Computer Interaction (AREA)
  • General Physics & Mathematics (AREA)
  • Physiology (AREA)
  • Pulmonology (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Business, Economics & Management (AREA)
  • General Business, Economics & Management (AREA)
  • Epidemiology (AREA)
  • Primary Health Care (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)

Description

本発明の例示の実施形態は、電子通信の分野に関する。より具体的には、本発明の例示の実施形態は、触覚フィードバックを用いた通信に関する。
[関連出願]
本出願は、本発明の譲受人に譲渡されている以下の同時係属中の出願に関連している。
a.2008年12月12日付けで出願された「Method and Apparatus for Providing a Haptic Monitoring System Using Multiple Sensors」という発明の名称の出願第___号(代理人の整理番号第IMM269(1054.P0005US)号)
コンピューターベースのシステム、器具、現金自動預け払い機(Automated Teller Machine:ATM)、POS端末等がより広く普及するにつれて、ヒューマンマシンインターフェースに関する使いやすさがより重要となってきている。このようなインターフェースは、直観的に動作すべきものであり、ユーザーのトレーニングをほとんど又は全く要しないものであるべきであり、それによって、事実上誰もが用いることができる。キーボード、音声、及びタッチスクリーン等の従来のヒューマンマシンインターフェースは、通常、動作、視覚、及び/又は音の組み合わせを伴うヒューマンインタラクションを要する。たとえば、ユーザーは、タッチスクリーン上で自身の選択を入力するとき、タッチするためにスクリーン上のロケーションを見て特定する必要がある。また、ユーザーは、マウスを操作するとき、マウスをクリックする前にスクリーン上のマウスアイコンを見る必要がある。
しかしながら、従来のヒューマンマシンインターフェースに関連した問題は、いくつかの状況及び/又は環境に関して、オペレーターが視覚能力及び音声能力を用いて入力を行うことができない場合があるということである。
たとえば、健康管理環境では、患者のバイタルサインを監視及び/又は検査するのに用いられる通常の医療及び健康に関連した監視/検査機器は、視覚的通知及び/又は聴覚的通知を介して或る特定のあまり望ましくない所定の状態を検出すると看護師又は医師等の看護人に通知する。たとえば、通常の心拍計は、患者の心臓の鼓動を示すビープ音と共にディスプレイに心拍の波形を示す。患者の状態を認識するには、たとえば、看護人は、通常、患者の現在の状態を観察するために心拍波形をディスプレイ上で見るか若しくは心拍ビープ音を聞くか、又はそれらの双方を行う必要がある。したがって、聴覚通知及び/又は視覚通知を用いた従来のヒューマンマシンインターフェースに関連した欠点は、インターフェースが、騒々しい若しくは視覚的に乱雑な状況、高ストレス環境、ディナーパーティのような社会イベント、又はポーカーゲーム等の娯楽会場等のいくつかの状況において不十分又は不適切であり得るということである。
本発明の実施形態は、検知された情報に基づいて触覚フィードバックを生成することができる触覚監視システム及び該生成を行う方法を含む。この触覚システムは、検知デバイス、デジタル処理ユニット、及び触覚ジェネレーターを備える。検知デバイスは、1つ又は複数の装着可能センサーを介して個人又はユーザーのバイタル情報を選択的に検知するように構成され、その後、検知したバイタル情報をデータ処理のためにデジタル処理ユニットに転送する。デジタル処理ユニットは、バイタル情報を受信すると、該バイタル情報に応じて触覚信号を提供する。触覚ジェネレーターは、その後、触覚信号に従って触覚フィードバックを生成する。代替的な実施形態では、触覚システムは、ユーザーの物理的なロケーションを特定することができる測位デバイスをさらに備える。
本発明の例示の実施形態のさらなる特徴及び利点は、以下で述べる詳細な説明、図、及び特許請求の範囲から明らかになる。
本発明の例示の実施形態は、以下に与える詳細な説明及び本発明のさまざまな実施形態の添付図面からより完全に理解される。しかしながら、これらの実施形態は、本発明をそれらの特定の実施形態に制限するものと解釈されるべきではなく、単なる説明及び理解のためのものである。
本発明の一実施形態による複数のイベントを監視することができる触覚システムを示す図である。 本発明の一実施形態によるイベント情報を収集する複数のセンサーを装着した人間を示す図である。 本発明の一実施形態による触覚健康モニターを示す図である。 本発明の一実施形態による触覚向上デバイスを装着しているサイクリングチームを示す図である。 本発明の一実施形態による触覚向上デバイスを有する水球の泳者のチームへの一例示の適用を示す図である。 本発明の一実施形態による触覚監視デバイスを有するポーカープレーヤーへの一例示の適用を示す図である。 本発明の一実施形態による連係触覚デバイスによって編成された数グループの人々を示す図である。 本発明の一実施形態による触覚アラートデバイスを装着している人を示す図である。 本発明の一実施形態による1つ又は複数のイベントに応じて触覚健康フィードバックを提供するプロセスを示すフローチャートである。 本発明の一実施形態による1つ又は複数のイベントに応じて触覚連係フィードバックを提供するプロセスを示すフローチャートである。
本明細書では、本発明の実施形態を、取り付け可能又は装着可能な触覚デバイスを用いて1つ又は複数のイベントに応じ触覚キューを提供する方法、システム、及び装置のコンテキストで説明する。
本発明の以下の詳細な説明は単なる例示であり、多少なりとも限定的であることを意図するものでないことが当業者には理解されよう。この開示の利益を有するそのような当業者には、本発明の他の実施形態が容易に思いつくであろう。次に、添付図面に示すような本発明の例示の実施形態の実施態様について詳細に言及する。同じ参照指示子(又は番号)は、図面及び以下の詳細な説明の全体を通じて同じ又は同様の部分を指すのに用いられる。
明瞭にするために、本明細書で説明する実施態様の標準的なハードウェア機能及びルーチン機能のすべてが図示及び説明されるわけではない。もちろん、このようなどの実際の実施態様の開発にも、用途に関連した制約及びビジネスに関連した制約との整合性等、開発者の特定の目標を達成するために、数多くの実施態様特有の判断を行う必要があること、及びこれらの特定の目標は実施態様ごと及び開発者ごとに変化することが理解されよう。さらに、このような開発努力は、複雑で多くの時間を要する場合もあるが、それでも、この開示の利益を有する当業者にとってはエンジニアリングの規定通りの作業になることが理解されよう。
本発明の実施形態は、検知された情報に基づいて触覚フィードバックを生成することができる触覚監視システムを含む。この触覚システムは、検知デバイス、デジタル処理ユニット、及び触覚ジェネレーターを備える。検知デバイスは、1つ又は複数の装着可能センサーを介して個人又はユーザーのバイタル情報を選択的に検知することができ、その後、検知したバイタル情報をデータ処理のためにデジタル処理ユニットに転送する。代替的な実施形態では、検知デバイスは、全地球測位システムを用いてユーザーの物理的なロケーションを特定することができる位置デバイスも含む。デジタル処理ユニットは、バイタル情報を受信すると、バイタル情報に応じて触覚信号を提供する。触覚ジェネレーターは、その後、触覚信号に従って触覚フィードバックを生成する。
図1は、本発明の一実施形態による複数のイベントを監視することができる触覚システムを示す図100である。図100は、触覚装着可能デバイス102、コンピューター104、携帯電話106、携帯情報端末(Personal Digital Assistant:PDA)、通信ネットワーク110、及び検知デバイス114を含む。一態様では、図100は、外部コンピューティングプロセッサ112をさらに含み、プロセッサ112は、触覚システムの命令を実行することができる。本発明の例示の実施形態の基礎にある概念は、付加的なブロック又はデバイスが図100に追加されても又は図100から削除されても変化しないことに留意すべきである。
検知デバイス114は、一実施形態では、1つ又は複数のセンサー又は検知素子150乃至160を備え、センサー150乃至160のそれぞれは、個人の特定のバイタルサイン(又はバイタル情報)を監視するために選択的にアクティブ化することができる。個人は、ユーザー、患者、顧客、子供、アスリート、チームのメンバー、グループ参加者等の特定の役割を有することができる。センサー150乃至160は、装着、固着、インプラント、及び接着等のさまざまな取り付けメカニズムを介して個人に取り付けることができる。センサー150乃至160の機能は、バイタルサイン(又はバイタル情報)を読み取ること又は監視することであり、バイタルサインは、基本的な身体状態を評価するのに用いられるさまざまな生理学的統計を示す。たとえば、バイタルサインは、体温、脈拍数(又は心拍数)、血圧、呼吸数等を含む。加えて、代替的な実施形態では、ユーザーの地理的ロケーションが求められる。
一実施形態では、検知デバイス114は、ユーザーの心臓を監視する心拍計150、ユーザーの血圧を監視する血圧モニター又は血圧計152、ユーザーの呼吸を監視する呼気センサー154、ユーザーの体温を監視する温度計156、ユーザーの身体の汗を監視する湿度センサー158、及びユーザーのロケーションを監視する動き検出器160を含む。センサー150乃至160は、同じユニット上に製作又は製造することができる。音を検知する音センサー及び/又は周囲の状態を検出する天候センサー等の他のセンサーを、バイタルデータを取得する他のバイタルセンサーと共に用いることができることに留意すべきである。一実施形態では、検知デバイス114は、バイタル情報を検知すると、そのバイタル情報を通信ネットワークを介してデジタル処理ユニットに転送する。この通信ネットワークは、有線ネットワーク、無線ネットワーク、又は有線ネットワーク及び無線ネットワークの組み合わせとすることができる。
一実施形態では、デバイス102は、センサー120、内部フィルター122、セレクター124、ジェネレーター126、及び触覚出力デバイス128を備える。デバイス102は、一例では、イヤピース、リストバンド、ネックレス、ベルト、ベルトバックル、時計、時計バンド、帽子、又は他の適切な構造体として構成することができる。センサー120は、一例では、センサー150乃至160とデバイス102との間のインターフェースを担当する検知デバイス114の一部とすることができる。フィルター122は、真のバイタルサイン(すなわち所望の情報)の検出と干渉する可能性のある不要な動作及び/又は誤ったパルス等の無関係の情報をフィルタリングする回路部である。別の実施形態では、内部フィルター122は、図1には図示しないホストコンピューターに配置することもでき、フィルタリングプロセスはホストプロセッサによって実施される。ジェネレーター126は、フィルタリングされたバイタルサイン又はバイタル情報に応じてコマンド(触覚信号)を生成し、その後、コマンド及び/又はバイタル情報を、通信チャネル130乃至138を介してコンピューター104又はPDA108等の1つ又は複数の宛先デバイスに送信する。通信チャネル130乃至138は、有線通信ネットワーク、無線通信ネットワーク、又は有線通信ネットワーク及び無線通信ネットワークの組み合わせとすることができることに留意すべきである。
セレクター124は、触覚効果のリストを含む触覚データを記憶するのに用いられる1つ又は複数の触覚ライブラリを含む。一実施形態では、触覚効果のリストは、検出されたバイタル情報に従ってユーザーに触覚フィードバックを提供するのに用いられる。検出された各バイタルサインは、たとえば、一意の触覚フィードバックを必要とする場合がある。触覚データを含むライブラリはリモートホストコンピューターに配置することもできることに留意すべきである。代替的な実施形態では、触覚データを動的に生成し、連続的に更新して、検出されたバイタルサインをエミュレート及び/又は再現することができる。セレクター124は、バイタルサインをリアルタイムでエミュレートするために、触覚効果を動的に生成して、検出されたバイタルサインをエミュレートすることができる。たとえば、自転車レーシングチームを追跡するために、自転車レーシングチームの各アスリートは、該アスリートの心拍数を監視しかつ再現又はエミュレートするデバイスを携帯することができる。再現又はエミュレートされたアスリートの心拍数は、該アスリート、コーチ、又は他の任意の関係者が監視することができる。触覚出力デバイス128は、セレクター124によって選択された触覚データに従って触覚フィードバックを生成する。たとえば、緩やかな振動は、落ち着いた状態又はアスリートが所望のトレーニングゾーン若しくはレースゾーンにいることをエミュレートすることができる。強い振動は、深刻な状態又はアスリートが所望のゾーンにいないことをエミュレートすることができる。
デバイス102の機能は、ラップトップ104、移動電話又はスマートフォン106、PDA108、ネットワーク110等の1つ又は複数のデバイスへの通信チャネルとして触覚フィードバックを同時に提供及び分配することである。構成要素120乃至128は、用途に応じていくつかの異なるエンティティに配置することもできることに留意すべきである。デバイス102は、ケーブル接続、無線接続、及びケーブルネットワーク及び無線ネットワークの組み合わせを介して他のデバイス104乃至110と通信することができる。バイタル情報を検知した後、バイタル情報は、次に、情報処理のためにデジタル処理ユニットに転送される。
一実施形態では、デジタル処理ユニットは、デバイス102内の、図1に図示しない独立した回路である。代替的に、デジタル処理ユニットは、プロセッサ112、フィルター122、及びセレクター124を含む。デジタル処理ユニットの機能は、通信ネットワークを介してバイタル情報を受信し、そのバイタル情報に基づいて触覚信号を提供することである。一実施形態では、デジタル処理ユニットは、バイタル情報又はパラメーターの所定の制限の範囲を提供する構成可能なソフトウェアプログラムを含む。所定の制限の範囲は、異常なバイタルサインに対する正常なバイタルサインの範囲を示す。触覚信号を特定した後、触覚信号は触覚ジェネレーターに転送される。
デバイス出力機構128の一部とすることができる触覚ジェネレーターは、触覚信号を受信し、触覚信号に従って触覚フィードバックを生成することができる。一実施形態では、検知デバイス114、デジタル処理ユニット、及び触覚ジェネレーターは、同じユニット内に実装又は配置することができる。代替的に、検知デバイス114、デジタル処理ユニット、及び触覚ジェネレーターは、回路基板、1つ若しくは複数の配線、及び/又は1つ若しくは複数の無線通信ネットワークを介して論理的に接続される。
図1を再び参照して、触覚システムは、デバイス、センサー、アクチュエーター/ジェネレーター、又は装着可能コンポーネントを備え、センサーは、ユーザーのバイタル状態又は身体状態を検出するのに用いられる一方、アクチュエーターは、ユーザーの状態に従って触覚フィードバックを提供するのに用いられる。一実施形態では、センサー及びアクチュエーターは、同じデバイスのもとで構築することができる。たとえば、心拍数センサーは、ユーザーの心拍数を検知し、この心拍数を処理し、一連の触覚フィードバックを生成して現在のユーザーの身体状態を示す。触覚フィードバックという用語は、触知効果、触知フィードバック、触覚効果、力覚フィードバック、振動触知フィードバック、触覚キュー等を指すことができることに留意すべきである。
圧電材料等のいくつかの触覚材料は、振動触知効果の検知及び提供を行う物理的特性を有する。たとえば、圧電材料は、圧力に起因してその物理形状が変形したときに圧力を検出したことを示す電流を放出する。一実施形態では、圧電材料には、石英(SiO)等の結晶及び/又はセラミックが含まれる。電圧ポテンシャルが圧電材料に印加されたとき、圧電材料はその元の形状から拡大した形状に変形する。圧電材料は、電圧ポテンシャルが取り除かれるとすぐにその元の状態に戻ることができる。一方、圧電材料は、押圧されているとき、電流を放出する。その結果、圧電材料は、押圧されているとき、入力を検出することができる。振動触知フィードバック又は触覚フィードバックは、圧電材料、形状記憶合金(Shape Memory Alloy:SMA)、偏心回転質量体(Eccentric Rotating Mass:ERM)又はリニア共振アクチュエーター(Linear Resonant Actuator:LRA)等を通じて提供することができる。圧電材料をLRA、ERM、及びSMA等の他の材料又はデバイスに取り替えても、センサー/アクチュエーターの同様の機能を実行することができる。SMAは、一例では、電圧ポテンシャルが取り除かれた後、或る時間期間の間その変形形状を維持することができる。本発明の実施形態の基礎となる概念は、異なる材料が用いられても変化しないことに留意すべきである。デバイス102は、個人、チームのメンバー、又はチーム全体の身体状態を特定するために個人又はチームに適用可能である。たとえば、デバイス102は、検出された心理状態に従ってチームのパフォーマンスを改善するために自転車走者のうちの1人に加速又は減速するように通知することができる。デバイス102は、以下で検討する用途等、他の用途に用いることもできることに留意すべきである。一実施形態では、触覚システムは複数のユニットを備えることができ、それらのユニットのうちのいくつかは、胸、手首、足等に配置されて、ユーザーのバイタルサインを検知する。触覚ジェネレーター128は、たとえば、体力及び/又はパフォーマンスのレベルが異なれば異なるレベルの強度で触覚キュー又は触覚警報信号を生成することができる。たとえば、触覚ジェネレーター128は、ユーザーのパフォーマンスが最適なパフォーマンスレベルを僅かに下回っているときは小さな触覚キューを生成し、ユーザーのパフォーマンスが最小許容可能レベルを下回っているときは増強された触覚キューを生成する。触知フィードバックを用いてユーザーの身体状態を示すことは、繊細かつ控え目で邪魔にならない伝達方法とすることができることに留意すべきである。
デバイス102、検知デバイス114、及びコンピューター104は、ネットワーク110を介してデバイス間で通信することができ、ネットワーク110には、有線通信ネットワーク及び無線通信ネットワークが含まれ得る。無線通信ネットワークには、ローカル無線周波数、Bluetooth、携帯(GPRS、CDMA、GSM、CDPD、2.5G、3G等)、超広帯域(Ultra-WideBand:UWB)、WiMax、ZigBee、及び/又は他のアドホック/メッシュ無線ネットワーク技術が含まれ得る。電力消費を削減するために、中継局をネットワークに配置して、触覚信号を他の触覚デバイスを通じて中継することができる。
触覚システムを用いることの利点は、通信チャネルを本質的に作成してユーザーと機械との間で情報を送信することである。触覚システムは、複数の関係者間、スポーツチーム間、軍事ミッション間等の通信等、さまざまな用途を有する。
図2は、本発明の一実施形態によるイベント情報を収集する複数のセンサーを装着した人間を示す図200である。図200は、人202、ネットワーク201、及び全地球測位システム(Global Positioning System:GPS)衛星203を含む一例示のフィードバック監視デバイスを示している。一実施形態では、人202及びネットワーク201は、無線通信ネットワーク、インターネット、パーソナルエリアネットワーク、ローカルエリアネットワーク、メトロポリタンエリアネットワーク、ワイドエリアネットワーク等の1つ又は複数の通信ネットワークを介して通信することができる。本発明の例示の実施形態の基礎にある概念は、付加的なブロック及び/又はデバイスが図200に追加されても又は図200から削除されても変化しないことに留意すべきである。
一実施形態では、人202は1つ又は複数の触覚装着可能デバイス204乃至210を装着し、これらのデバイスのうちのいくつかは人202のバイタルサインを取得するセンサーとすることができる。たとえば、装着可能デバイス204は、脈拍数を監視することができ触覚キューを提供することができる腕時計である。装着可能デバイス210は、ユーザーの呼吸数を検出することができる触覚ベルトである一方、装着可能デバイス208は、ユーザーの血圧を検出することができる触覚ネックレスである。また、装着可能デバイス206は、ユーザーの湿度及び/又は液体の汗を検知するのに用いられるリストバンドとすることもできる。この実施形態では、装着可能デバイス204乃至210は、監視機能を提供するのと同時に触覚フィードバック又は触覚キューを生成することができる。
一実施形態では、人202は、人202のリアルタイムの物理的なロケーションを提供することができるGPSデバイスを携帯する。たとえば、ネックレス208に実装することができるGPSデバイスは、無線周波数212乃至214を介して衛星203と通信し、人202のリアルタイムのロケーションを特定する。プロセッサ220は、無線信号216を介してバイタルサインを収集した後、検出されたバイタルサイン及びロケーションに基づいて人202の身体状態及びパフォーマンスを解析し、チームスポーツのパフォーマンスを向上させる調整を提供する。プロセッサ220はローカル又はリモートに配置することができることに留意すべきである。
触覚装着可能デバイス204、206、208、又は210は、犬、猫、車、又はエンジン等の他の哺乳類及び機械類又は無生物の物体にも適用可能である。たとえば、競馬の成績を向上させるために、ジョッキーは、触覚装着可能デバイスを用いて馬の心拍数を監視することができる。レースカードライバー又はピットクルーチーフは、たとえば、エンジン温度及びタイヤトラクション等の車の機械的状態に関する触覚出力を受信することができる。
図2を再び参照して、触覚システムは、検知デバイス、測位デバイス、デジタル処理ユニット、及び触覚ジェネレーターを備える。検知デバイスは、1つ又は複数の装着可能デバイス204乃至210を含むことができ、センサーを介して人202のバイタル身体サイン又はバイタル身体情報を検知するように選択的に設定することができる。一実施形態では、検知デバイスには、心拍センサー、動きセンサー、血圧センサー、呼気センサー、温度センサー、及び湿度センサーが含まれる。検知デバイスは、1つ又は複数の有線通信ネットワーク又は無線通信ネットワークを介してセンサー間での通信を容易にするセンサー通信ブロックを備えることもできることに留意すべきである。
一実施形態では、測位デバイスは、検知デバイスに結合され、ユーザーの物理的なロケーションを特定するように構成される。たとえば、測位デバイスは、ユーザー又は人202に関連したロケーション、速度、方向、及び時刻を特定することができるGPS回路部を備える。衛星203を介してGPSデータが取得されると、GPSデータは、デジタル処理ユニットに処理のため転送される。
デジタル処理ユニットは、バイタル情報及びGPS情報を受信すると、その後、バイタル身体情報及びユーザーの物理的なロケーションに応じて触覚信号を提供する。デジタル処理ユニットは、用途に応じて、複数の触覚信号を生成して、より現実的な感覚をエミュレートすることができる。デジタル処理ユニットは、一例では、バイタル情報に関連したさまざまなパフォーマンスパラメーターの所定の制限を記憶することができる構成可能ソフトウェアを含む。これらのパラメーターは、汎用的なもの、又は問題の個人若しくは活動に特有のものとすることができる。触覚入力としても知られている触覚信号は、その後、触覚ジェネレーターに転送される。
触覚システムは、軍事行動又は戦闘行動を連係させる触覚キューを提供することができる取り付け可能な連係デバイスとして用いることができることに留意すべきである。また、装着可能パフォーマンスエンハンサーは、チームサイクリング競技又は水球の競技等のチームスポーツ中に各チームメンバーの身体パフォーマンスを上げる触覚キューを提供することによりチームパフォーマンスを改善することができる。
図3は、本発明の一実施形態による触覚健康モニターを示す図300である。図300は、患者302、看護師304、及び点滴(IntraVenous:IV)スタンド306を含む。一実施形態では、IVスタンド306は、リアルタイム検知能力を提供する触覚健康モニターを備える。本発明の例示の実施形態の基礎にある概念は、付加的なブロック及び/又はデバイスが図300に追加されても又は図300から削除されても変化しないことに留意すべきである。
たとえば、患者302は、心臓疾患、呼吸器疾患、高血圧等の内科的疾患に罹患しており、常時観察下に置かれている必要がある。一実施形態では、患者302は、患者302のバイタルサインを継続的に読み取る触覚健康モニターを装着している。触覚健康モニターは、バイタルサインを観察した後、バイタルサインに関する情報を患者302、看護師304、及び/又は他の関係者に配信する。触覚健康モニターは、一例では、IVスタンド306に実装することができ、それによって、患者302がIVスタンド306と接触しているか又はその近くにいる限り、モニターは患者302のバイタルサインを検出及び記録することができる。代替的に、患者302は、患者のガウンの下に図3には図示しない異なる装着可能触覚健康デバイスを装着することもできる。
一実施形態では、触覚健康モニターは、検知能力、較正機能、及び触覚フィードバックを含む。たとえば、触覚健康モニターは、触覚アラートをいつどのようにしてトリガーすべきかの手順を容易にする構成可能なかつ/又は較正用のソフトウェアを含む。特定の患者の監視手順がセットアップされた後、モニター上の1つ又は複数のセンサーは、監視手順に従って個人、すなわち患者302のバイタル統計を読み取る。バイタル統計が処理されると、モニター内の電子機器及びアクチュエーターは、バイタル統計に応じて触覚イベント又は触覚フィードバックを患者302、看護師304、又は他の者に送信する。アラートに従って生成された触覚フィードバック又は触覚キューは、聴覚アラート又は視覚アラートの構成要素を含むこともできるし、含まないこともできることに留意すべきである。
触覚健康モニターは、入院患者だけでなく、退院患者にも特に役立つ。たとえば、血友病患者又は心臓疾患に罹患している患者の場合、それらの患者又は該患者の看護人は、患者の心拍数に際立った低下又は上昇があるとすぐにアラート又は通知を受ける必要がある。アラートによって、血友病患者が刃物等で傷を負って気付いていないことを該血友病患者に警告することができるので、血友病患者はアラートによって大きな利益を受けることができる。心臓疾患の患者も、異常に高い血圧又は異常に低い血圧が検出されると警告を受けることによって利益を受けることができる。アラートに従って生成される触覚フィードバックは、医学的治療が必要であることを示すことができる。
触覚健康モニターを用いることの利点は、代替的な通信チャネルを提供することである。触覚フィードバックは、或る特定の環境的に不利な状況の下で有効なものとなることができる。たとえば、触覚フィードバックは、音のアラートを妨げる雑音のある環境で効果を奏する傾向がある。触覚健康モニター及びアラーターは、高圧力の場所で作業する個人及び或る娯楽レジャー活動にも役立つことができる。
図4は、本発明の一実施形態による触覚向上デバイスを装着しているサイクリングチームを示す図400である。図400は、4台の自転車と共に4人の自転車走者402乃至408を有するサイクリングチームを示している。一実施形態では、各自転車走者は、触覚連係向上デバイス410を装着している。各デバイス410は、該デバイスを携帯する自転車走者のバイタルサインを検知し、他のデバイス410と連係してチームのパフォーマンスを向上させる。本発明の例示の実施形態の基礎にある概念は、付加的なブロック又はデバイスが図400に追加されても又は図400から削除されても変化しないことに留意すべきである。
各自転車走者又は一般的には各アスリートは、個人のパフォーマンスだけでなくチームのパフォーマンスを改善するために触覚向上デバイスを適用することによって利益を受けることができる。長期間にわたって行われる心臓血管系集中活動は、心拍数の常時監視によって利益を受けることができることに留意されたい。たとえば、フィードバックをアスリートに提供する触覚モニターは、より良いレース管理戦略を容易にすると共に、発揮すべきエネルギーレベルを提案することも容易にする。心拍数情報は、たとえば、無関係な運動中に酸素を消費する身体の最大容量であるVO(最大酸素消費)に関係する情報を提供することができる。ミリリットルの単位による最大酸素量としても知られているVOは、スポーツ活動によって用いられる測定値である。
触覚連係向上デバイス410は、たとえば、各自転車の物理的なロケーションを特定するGPSシステムと通信することができる測位ブロック回路を備える。触覚連係向上デバイス410は、各自転車の物理的なロケーションに関するデータ及びすべての自転車走者のバイタル統計を解析すると、チームパフォーマンスを改善するために自転車走者402に自転車走者408の位置につくように指令することができる。触覚連係向上デバイス410は、フットボールチーム、水球チーム、及び/又はバスケットボールチーム等のさまざまなタイプのチームスポーツに適用することができることに留意すべきである。
図5Aは、本発明の一実施形態による触覚向上デバイスを有する水球泳者のチームへの一例示の適用を示す図500である。図500は、第1の泳者502及び第2の泳者504を含み、各泳者は触覚向上デバイス506を装着している。一実施形態では、デバイス506は、すべての泳者のバイタルサイン、及びGPSデバイスを介したその泳者の物理的なロケーションを監視及び記録する。デバイス506は、たとえば、収集されたバイタル情報に応じて、泳者504のパフォーマンス解析が所定の許容可能なパフォーマンスレベルを下回るとき、泳者504の疲労レベルを示す触覚フィードバック又は触覚キューを生成する。触覚フィードバック又は触覚キューは、デバイス506を装着している泳者、又はコーチ、トレーナー、若しくはチームメート等の他の関係者に送信することができる。
図5Bは、本発明の一実施形態による触覚監視デバイスを有するポーカープレーヤーへの一例示の適用を示す図550である。図550は、触覚監視デバイス510を装着しているポーカープレーヤー552を含む。デバイス510は、ポーカープレーヤー552のバイタルサインを監視するように構成することができ、或る特定のバイタルサインが望ましくない範囲に達した場合、プレーヤー552に触覚アラートを提供することができる。たとえば、ポーカープレーヤー552は、心拍数の制限を150に設定することができ、心拍計は、プレーヤー552の心拍数が制限に達したことをプレーヤー552に通知する触覚アラートを提供する。掛け金の高いカードのプレーヤー又はポーカープレーヤーは、自身の心拍数を示すサイレントアラームをありがたく思うことに留意すべきである。心拍数をより低く保ち、冷静なままでいることは、あらゆる顔色及び/又はジェスチャが対戦相手によって見抜かれるのを避けるためにポーカーテーブルにおいてきわめて重要となる可能性がある。
バイタルサインによる触覚キュー又は触覚アラートは、妊娠の医学的状態においても適用可能である。たとえば、妊婦は、母親が触覚キューを介して胎児の心拍数を感じることを可能にする心拍計を介して胎児の心臓の鼓動を感じることができる。妊婦は胎児の心臓の鼓動に応じて或る特定の事前の対策を講じることができる。代替的に、胎児のバイタルサインを医院(産科医院又は婦人科医院)に定期的に送信することもできる。医院への報告は無線通信ネットワークを介して自動的に行うことができることに留意すべきである。
バイタルサインによる触覚キュー又は触覚アラートは、スポーツ競技等の他の状況においても適用可能とすることができる。たとえば、バイアスロン競技中、各アスリートは或る距離をスキーで滑り(又は走り)、その後、的を射撃する。アスリートが触覚連係向上デバイスを装着している場合、触覚連係向上デバイスは、スキーで最も望ましい速度を有すると同時に的を狙うのに十分落ち着いているようにアスリートの身体状態を最適化することができる。
バイタルサインによる触覚キュー又は触覚アラートは、マシンオペレーター等のための他の状況においても適用可能である。たとえば、高速及び重力のもとでの操縦を行っている空軍パイロットは、操縦加速が、パイロットが装着しているGスーツのしきい値に達した場合に警告を受けることができる。触覚キュー及び触覚アラートのデバイスは、高速自動車レーサー又は深海ダイバー等の状況にも適用することができることに留意すべきである。
図6は、本発明の一実施形態による連係触覚デバイスによって編成された数グループの人々を示す図600である。図600は、装着可能又は取り付け可能な触覚デバイス602、第1の人々のグループ604、第2の人々のグループ606、第3の人々のグループ608、第4の人々のグループ610、及び中継局612を含む。中継局612は、触覚信号を増幅して中継することができる。本発明の例示の実施形態の基礎にある概念は、電源等の付加的なブロックが図600に追加されても又は図600から削除されても変化しないことに留意すべきである。
各人々のグループは固有の特性を包含することができ、各人々のグループは特定の一組の触覚信号を送信又は受信することができる。たとえば、第1のグループ604は特殊部隊の兵士のグループ642を含む一方、第2のグループ606は後方支援部隊の兵士のグループを含む。第3のグループ608はおとり兵士のグループを含む一方、第4のグループ610は部隊長を含む。グループ604乃至610内の各人は、触覚連係デバイスを装着し、触覚デバイスはサイレント通信チャネルを提供するのに用いられる。たとえば、部隊長は、兵士のバイタルサインを介して兵士の身体ステータスをリアルタイムで検知することができる。
図1に示すデバイス102と同様の装着可能触覚デバイス602は、センサー120、内部フィルター122、セレクター124、ジェネレーター626、触覚出力デバイス128を備える。センサー120はバイタルサインを検知するように構成され、フィルター122は、バイタルサインには関係しない無関係な情報を除去するのに用いられる。セレクター124は、一群の記憶された触覚効果から1つの触覚キューを選択する。触覚出力デバイス128は、セレクター124から受信された情報に従って触覚フィードバックを生成することができるアクチュエーターである。グループとデバイス602との間の通信632乃至638は、有線通信ネットワーク又は無線通信ネットワークとすることができることに留意すべきである。
戦闘状況では、自身の現在の物理的な状況及びロケーションに関して自身の戦力を利用できるか否かを知ることが重要である。たとえば、物理的な状況は、活動できる兵士、負傷した兵士、及び死んだ兵士の数を示すことができる。物理的なロケーションは、兵士が攻撃可能距離内にいるか否かを示すことができる。また、衛生兵には、兵士が医学的治療を必要としていることを知らせることができる。兵士の医学的治療のための触覚フィードバックは、グループのバイタル統計及びグループの物理的なロケーションの読み取りに基づいて生成することができることに留意すべきである。
図7は、本発明の一実施形態による触覚アラートデバイスを装着している人を示す図700である。図700は、子供702、教師704、及びネットワークシステム705を含む。一実施形態では、子供702は、触覚アラートを提供することができる触覚アラートデバイス706を装着している。教師704は触覚アラートデバイス707を携帯し、デバイス706及び707は1つ又は複数の無線信号712及び716を通じてネットワーク705を介し通信することができる。本発明の例示の実施形態の基礎にある概念は、付加的なブロックが図700に追加されても又は図700から削除されても変化しないことに留意すべきである。
一実施形態では、触覚アラートデバイス706は、イベントが検出されたときにアラート信号をブロードキャストすることができる位置特定ブロック又は測位ブロックを含む。たとえば、RF(無線周波数)技術を触覚技術と共に用いて、子供又は児童が学校構内の外に歩いて出て行ったときに教師に警告することができる。たとえば、デバイス706を装着している子供が、デバイス706から放出される無線周波数708を直ちに検出するRFポスト710を歩いて通過したとき、RFポスト710は、子供702がポスト710を通過したことを示す警報信号を、無線信号714を用いてネットワーク705を介し教師704に発行する。教師704が携帯している触覚デバイス707は、警報信号を受信すると、子供702が学校の校庭を歩いて出て行っていることを教師704に知らせるサイレント触覚キューを送信する。いくつかの状況におけるサイレント触覚通信チャネルは、視覚及び聴覚等の通常の通信チャネルよりも効果的であることに留意すべきである。たとえば、騒々しい校庭及び/又はにぎやかな遊び場にいる教師又は教員は、サイレント振動触覚信号を介して警告を受けることができる。
触覚アラートデバイス706は、触覚アラート及び/又は触覚フィードバックを提供する他の状況にも適用することもできる。たとえば、デバイス706は、看護人の患者、身体障害者、身体的妨げを受ける人、又は高齢者が医学的治療又は身体的治療を必要としているときに看護人に警告するのに用いることができる。たとえば、触覚モニターは、人の垂直の向き及び水平の向きを監視することができる場合において地面又は床に倒れている人を検出したときは医学的治療を要求する触覚アラートを発行することができる。
本発明の例示の実施形態は、以下で説明するさまざまな処理ステップを含む。実施形態のステップは、マシン実行可能命令又はコンピューター実行可能命令で実施することができる。命令は、該命令を用いてプログラムされる汎用システム又は専用システムに本発明のステップを実行させるのに用いることができる。代替的に、本発明のステップは、該ステップを実行するハードワイヤードロジックを含む特定のハードウェア構成要素が実行することもできるし、プログラムされたコンピューター構成要素及びカスタムハードウェア構成要素の任意の組み合わせが実行することもできる。
図8は、本発明の一実施形態による1つ又は複数のイベントに応じて触覚健康フィードバックを提供するプロセスを示すフローチャート800である。ブロック802において、プロセスは、ユーザーに関連した第1のバイタルサインを検知することができる。ユーザーは、たとえば、触覚デバイスを装着又は携帯している人である。一実施形態では、プロセスは、ユーザーに関連した第2のバイタルサインを検知することができる。たとえば、心拍数は心拍計が検出することができ、ユーザーの血圧は血圧モニターが測定することができる。代替的な実施形態では、プロセスは、呼吸センサーを介してユーザーの呼吸数を検出し、温度計を介してユーザーの体温を読み取るようにさらに構成される。
ブロック804において、プロセスは、第1のバイタルサイン及び/又は第2のバイタルサインをデータ処理のために処理ユニットに転送する。処理ユニットは、オンボードプロセッサ又はリモートプロセッサとすることができることに留意すべきである。
ブロック806において、プロセスは、第1のバイタルサインに応じて第1のバイタル信号を生成し、第2のバイタルサインに応じて第2のバイタル信号を生成する。バイタルサインに応じて、さまざまな触覚効果信号がさまざまな触覚感覚を生成する。
ブロック808において、プロセスは、ネットワークを介して第1のバイタル信号及び第2のバイタル信号を受信することができる。プロセスは、追加のバイタルサインを受信及び処理することができ、追加のバイタル信号又は触覚信号を生成することができることに留意すべきである。
ブロック810において、プロセスは、第1のバイタル信号に従って第1の触覚フィードバックを生成することができ、第2のバイタル信号に従って第2の触覚フィードバックを生成することができる。一実施形態では、プロセスは、第1の触覚フィードバック及び第2の触覚フィードバックに応じて触覚キューを生成することができる。また、プロセスは、胎児の心臓の鼓動を示す触覚キューを提供することもできる。プロセスは、現在の心臓の状態を示す触覚キューを提供することもできる。さらに、プロセスは、ユーザーのリアルタイムの血糖値を示す触覚キューを提供することもできる。別の実施形態では、プロセスは、現在の血圧レベルを示す触覚キューを提供することができる。さらに別の実施形態では、プロセスは、血友病のリアルタイムの出血状態を示す触覚キューを提供することができる。
図9は、本発明の一実施形態によるイベントに基づいて触覚連係フィードバックを提供するプロセスを示すフローチャート900である。ブロック902において、プロセスは、第1のセンサーを介してリアルタイムで第1のユーザーに関連した第1のバイタルサインを監視し、第2のセンサーを介してリアルタイムで第2のユーザーに関連した第2のバイタルサインを監視する。プロセスは、その後、バイタルサインをデータ処理のために処理ユニットに転送する。一実施形態では、プロセスは心拍計を利用して心拍数を読み取るように構成される。プロセスは血圧モニターを介して第1のユーザーの血圧を読み取ることもできる。別の実施形態では、プロセスは呼吸センサーを介してユーザーの呼吸を検出することもできる。代替的に、温度計によって体温を読み取ることもできる。
ブロック904において、プロセスは、第1の測位デバイスを介してリアルタイムで第1のユーザーに関連した第1のロケーションを取得し、第2の測位デバイスを介してリアルタイムで第2のユーザーに関連した第2のロケーションを取得する。第1の人及び第2の人は同じ人とすることができることに留意すべきである。
ブロック906において、プロセスは、第1の所定のパフォーマンスパラメーターを記憶ロケーションからフェッチし、第2の所定のパフォーマンスパラメーターを記憶ロケーションからフェッチする。所定のパフォーマンスパラメーターは、ユーザーが入力して記憶することができる。
ブロック908において、プロセスは、第1のバイタルサイン、第1のロケーション、及び第1の所定のパフォーマンスパラメーターに応じて第1のパフォーマンスレベルを計算することができる。プロセスは、第2のバイタルサイン、第2のロケーション、及び第2の所定のパフォーマンスパラメーターに応じて第2のパフォーマンスレベルをさらに計算することができる。
ブロック910において、プロセスは、第1のパフォーマンスレベルが所定の最適なパフォーマンスと整合しないとき、第1の触覚信号を発行する。代替的に、プロセスは、第2のパフォーマンスレベルが所定の最適なパフォーマンスと整合しないとき、第2の触覚信号を発行する。
ブロック912において、プロセスは、第1のユーザーに現在の行動方針を変更するように指令する第1の触覚フィードバックを生成し、第2のユーザーに現在の行動方針を変更するように指令する第2の触覚フィードバックを生成する。プロセスは、第1の触覚信号及び第2の触覚フィードバックに応じて第1の触覚キューを生成することができ、第1の触覚信号及び第2の触覚信号に応じて第2の触覚キューを生成することができる。一実施形態では、プロセスは、第1のユーザーに第2のユーザーの位置を引き継ぐように指令することができる。加えて、プロセスは、第1のユーザーのロケーションを第2のユーザーに知らせることもできる。一実施形態では、プロセスは、現在の血圧レベルを示す触覚キューを提供することができる。代替的に、プロセスは、血友病患者のリアルタイムの出血状態を示す触覚キューを提供することもできる。
本発明の特定の実施形態を図示及び説明してきたが、本明細書の教示に基づいて、本発明及びそのより広い態様から逸脱することなく、変更及び改良を行うことができることが当業者に明らかであろう。したがって、添付の特許請求の範囲は、本発明の例示の実施形態の真の趣旨及び範囲内にあるすべての変更及び改良をその範囲内に包含するように意図されている。

Claims (10)

  1. 触覚システムであって、該触覚システムは、
    第1のユーザーによって着用されるように構成された第1の触覚デバイスと、
    前記第1のユーザーとは異なる第2のユーザーによって着用されるように構成された第2の触覚デバイスと、
    を備え、
    前記第1の触覚デバイス及び前記第2の触覚デバイスはそれぞれ、
    それぞれのユーザーのバイタル身体情報をセンサーを介して検知するように選択的に設定することができ、かつ前記バイタル身体情報を処理のために転送することができる検知デバイスと、
    前記検知デバイスに結合され、かつそれぞれのユーザーの物理的なロケーションを特定するように構成された測位デバイスと、
    前記検知デバイスに結合され、かつ前記それぞれの触覚デバイスを着用しているユーザーの前記バイタル身体情報及び物理的なロケーションに応じて触覚信号を提供するように構成されたデジタル処理ユニットと、
    前記デジタル処理ユニットに結合され、かつ前記触覚信号に従って触覚フィードバックを生成することができる触覚ジェネレーターと、
    を備え、
    前記第1の触覚デバイスの前記触覚ジェネレーターは、前記第2のユーザーの前記バイタル身体情報及び前記物理的なロケーションに基づいて、触覚フィードバックを生成するように構成されており、且つ、
    前記第2の触覚デバイスの前記触覚ジェネレーターは、前記第1のユーザーの前記バイタル身体情報及び前記物理的なロケーションに基づいて、触覚フィードバックを生成するように構成されている、触覚システム。
  2. 前記検知デバイスは、
    心拍数を検知することができる心拍数センサーと、
    身体の動作を検出するように構成された動きセンサーと、
    個人の血圧を読み取ることができる血圧センサーと、
    を備える、請求項1に記載のシステム。
  3. 前記検知デバイスは、
    空気呼吸を検出するように動作可能な呼気センサーと、
    体温を読み取るように動作可能な温度センサーと、
    身体の液体の汗を検知するように構成された湿度センサーと、
    を備える、請求項2に記載のシステム。
  4. 前記検知デバイスは、
    1つ又は複数の無線ネットワークを介して該検知デバイスと前記センサーとの間で通信するように構成されたセンサー通信ブロックと、
    無線通信ネットワークを介して前記バイタル身体情報を送信するように動作可能な送受信機と、
    を備える、請求項3に記載のシステム。
  5. 前記測位デバイスは、前記ユーザーに関連したロケーション、速度、方向、及び時刻を特定することができる全地球測位システム(GPS)を含む、請求項1に記載のシステム。
  6. 前記デジタル処理ユニットは、さまざまなバイタルパラメーターの所定の制限を記憶することができる構成可能なソフトウェアを含む、請求項5に記載のシステム。
  7. 前記デジタル処理ユニットは、チームスポーツのパフォーマンスを向上させる、1人又は複数の人への触覚キューを生成する、請求項1に記載のシステム。
  8. 前記検知デバイス、前記測位デバイス、前記デジタル処理ユニット、及び前記触覚ジェネレーターは、1つ又は複数の無線通信ネットワークを介して論理的に接続される、請求項1に記載のシステム。
  9. 請求項1に記載のシステムを備える、ユーザーの身体状態に従って軍事ミッションを連係する触覚キューを提供することができる取り付け可能連係デバイス。
  10. 請求項1に記載のシステムを備える、チームサイクリング活動中の身体パフォーマンスを増大させる触覚キューを提供することができるフィードバック監視デバイス。
JP2011540792A 2008-12-12 2009-12-07 複数のセンサーを用いた触覚監視システムを提供する方法及び装置 Expired - Fee Related JP5769630B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US12/334,330 US9727139B2 (en) 2008-12-12 2008-12-12 Method and apparatus for providing a haptic monitoring system using multiple sensors
US12/334,330 2008-12-12
PCT/US2009/066910 WO2010068574A1 (en) 2008-12-12 2009-12-07 Method and apparatus for providing a haptic monitoring system using multiple sensors

Publications (2)

Publication Number Publication Date
JP2012511782A JP2012511782A (ja) 2012-05-24
JP5769630B2 true JP5769630B2 (ja) 2015-08-26

Family

ID=41650481

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2011540792A Expired - Fee Related JP5769630B2 (ja) 2008-12-12 2009-12-07 複数のセンサーを用いた触覚監視システムを提供する方法及び装置

Country Status (5)

Country Link
US (2) US9727139B2 (ja)
EP (1) EP2370874A1 (ja)
JP (1) JP5769630B2 (ja)
CN (1) CN102246120B (ja)
WO (1) WO2010068574A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2020098638A (ja) * 2015-11-25 2020-06-25 グーグル エルエルシー トリガ領域

Families Citing this family (55)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100152620A1 (en) * 2008-12-12 2010-06-17 Immersion Corporation Method and Apparatus for Providing A Haptic Monitoring System Using Multiple Sensors
JP5951994B2 (ja) * 2008-12-19 2016-07-13 イマージョン コーポレーションImmersion Corporation 対話型ペインティングゲーム及び関連するコントローラ
US8798534B2 (en) 2010-07-09 2014-08-05 Digimarc Corporation Mobile devices and methods employing haptics
EP2433667A1 (en) 2010-09-28 2012-03-28 Koninklijke Philips Electronics N.V. Breath pacing apparatus, and method for pacing the respiration of a person
US9392963B2 (en) * 2010-11-23 2016-07-19 Koninklijke Philips N.V. Breath pacing system and method for pacing the respiratory activity of a subject
US9317660B2 (en) * 2011-03-31 2016-04-19 Adidas Ag Group performance monitoring system and method
US20120268285A1 (en) * 2011-04-22 2012-10-25 Nellcor Puritan Bennett Llc Systems and methods for providing haptic feedback in a medical monitor
US9411442B2 (en) 2011-06-29 2016-08-09 Google Technology Holdings LLC Electronic device having managed input components
US8890823B2 (en) 2012-01-09 2014-11-18 Motorola Mobility Llc System and method for reducing occurrences of unintended operations in an electronic device
CN102572156A (zh) * 2012-01-11 2012-07-11 南京航空航天大学 基于无线传感器网络的儿童警报车载***及方法
US8711118B2 (en) * 2012-02-15 2014-04-29 Immersion Corporation Interactivity model for shared feedback on mobile devices
US8493354B1 (en) 2012-08-23 2013-07-23 Immersion Corporation Interactivity model for shared feedback on mobile devices
CN102715891B (zh) * 2012-03-28 2013-12-25 中国人民解放军第二军医大学 基于无线射频技术的穿戴式伤员生命体征实时监控***
US9579048B2 (en) * 2012-07-30 2017-02-28 Treefrog Developments, Inc Activity monitoring system with haptic feedback
US9116546B2 (en) * 2012-08-29 2015-08-25 Immersion Corporation System for haptically representing sensor input
US20140180582A1 (en) * 2012-12-21 2014-06-26 Mark C. Pontarelli Apparatus, method and techniques for wearable navigation device
US9550105B2 (en) 2013-03-07 2017-01-24 Immersion Corporation Pacing system with feedback based adjustments
US9202352B2 (en) 2013-03-11 2015-12-01 Immersion Corporation Automatic haptic effect adjustment system
CN111554378B (zh) * 2013-08-16 2024-02-27 直观外科手术操作公司 用于异构设备间的协调运动的***和方法
US20150116079A1 (en) * 2013-10-24 2015-04-30 GM Global Technology Operations LLC Enhanced vehicle key fob
KR101538470B1 (ko) * 2013-12-09 2015-07-29 주식회사 대덕지에스 통합형 모바일 환자 상태 모니터링 시스템
JP6644466B2 (ja) * 2013-12-31 2020-02-12 イマージョン コーポレーションImmersion Corporation 触覚通知を提供するシステム及び方法
JP6664069B2 (ja) * 2013-12-31 2020-03-13 イマージョン コーポレーションImmersion Corporation 触覚コンテンツを伴う視点動画を記録及び再生するシステム並びに方法
KR102160636B1 (ko) * 2014-02-21 2020-09-28 삼성전자주식회사 전자 장치 및 입출력 장치를 제어하는 방법
US10965159B2 (en) 2014-05-29 2021-03-30 Sony Corporation Scalable antenna system
US9843360B2 (en) 2014-08-14 2017-12-12 Sony Corporation Method and system for use in configuring multiple near field antenna systems
US10277280B2 (en) 2014-05-29 2019-04-30 Sony Interactive Entertainment LLC Configuration of data and power transfer in near field communications
US9577463B2 (en) 2014-05-29 2017-02-21 Sony Corporation Portable device to portable device wireless power transfer methods and systems
US9906897B2 (en) 2014-07-16 2018-02-27 Sony Corporation Applying mesh network to pet carriers
US9900748B2 (en) 2014-07-16 2018-02-20 Sony Corporation Consumer electronics (CE) device and related method for providing stadium services
US9516461B2 (en) * 2014-07-16 2016-12-06 Sony Corporation Mesh network applied to arena events
US9426610B2 (en) 2014-07-16 2016-08-23 Sony Corporation Applying mesh network to luggage
US10127601B2 (en) 2014-07-16 2018-11-13 Sony Corporation Mesh network applied to fixed establishment with movable items therein
US9361802B2 (en) 2014-07-16 2016-06-07 Sony Corporation Vehicle ad hoc network (VANET)
JP2016038815A (ja) * 2014-08-08 2016-03-22 ソニー株式会社 情報提示装置
CN104398239B (zh) * 2014-12-03 2018-02-09 永春福源建材科技有限公司 一种汗液检测方法、装置与***
BR112017014898B1 (pt) * 2015-01-12 2022-06-21 Trekace Technologies Ltd Sistema de navegação portátil para o fornecimento de um conjunto de instruções táteis distinguíveis ao antebraço de um usuário
US10636261B2 (en) * 2015-01-12 2020-04-28 Trekace Technologies Ltd. Intuitive tactile devices, systems and methods
US20160242680A1 (en) * 2015-02-20 2016-08-25 Umm Al-Qura University Intelligent comfort level monitoring system
DE102015104432A1 (de) * 2015-03-24 2016-09-29 Beurer Gmbh BDM-System für die Langzeitmessung eines Blutdrucks
US9691238B2 (en) * 2015-07-29 2017-06-27 Immersion Corporation Crowd-based haptics
WO2017017681A2 (en) * 2015-07-30 2017-02-02 Rahamim Yishai Wearable device for stimulating and monitoring activity in body organs
US10102722B2 (en) 2015-12-18 2018-10-16 Immersion Corporation Wearable article having an actuator that performs non-haptic and haptic operations
US10285642B2 (en) 2016-02-03 2019-05-14 Invoy Holdings, Llc Breath analysis device with watch band that holds breath analysis cartridges
CA3020346A1 (en) 2016-04-15 2017-10-19 Baxalta Incorporated Method and apparatus for providing a pharmacokinetic drug dosing regimen
CN105892690B (zh) 2016-05-17 2019-09-06 京东方科技集团股份有限公司 动作获取装置及方法、动作仿真装置及方法、触觉通信***
US10896749B2 (en) 2017-01-27 2021-01-19 Shire Human Genetic Therapies, Inc. Drug monitoring tool
US11622716B2 (en) * 2017-02-13 2023-04-11 Health Care Originals, Inc. Wearable physiological monitoring systems and methods
WO2018227269A1 (en) * 2017-06-12 2018-12-20 Scorched Ice Inc. System and apparatus for performance monitoring
CN109388226A (zh) * 2017-08-04 2019-02-26 北京臻迪科技股份有限公司 一种智能穿戴设备
CN107595263A (zh) * 2017-10-11 2018-01-19 上海展扬通信技术有限公司 一种基于智能终端的健康监测方法及健康监测装置
US11357981B2 (en) 2018-03-01 2022-06-14 Adventus Ventures, Llc Systems and methods for controlling blood pressure
CN109272432B (zh) * 2018-08-08 2020-11-13 广州杰赛科技股份有限公司 用户行为监测方法和***、计算机设备、计算机存储介质
CN109556453B (zh) * 2018-12-27 2023-07-25 中国人民解放军总参谋部第六十研究所 一种用于实弹射击过程数据的记录分析***及其使用方法
CN111466898A (zh) * 2020-04-28 2020-07-31 重庆金美通信有限责任公司 一种基于5g技术的分队监测评估***

Family Cites Families (55)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5395301A (en) * 1992-03-30 1995-03-07 Russek; Linda G. Kinesthetic system for promoting rhythmic breathing by tactile stimulation
US5555891A (en) * 1994-05-20 1996-09-17 Hartford Hospital Vibrotactile stimulator system for detecting and interrupting apnea in infants
US6147674A (en) 1995-12-01 2000-11-14 Immersion Corporation Method and apparatus for designing force sensations in force feedback computer applications
US6463385B1 (en) * 1996-11-01 2002-10-08 William R. Fry Sports computer with GPS receiver and performance tracking capabilities
US6198394B1 (en) 1996-12-05 2001-03-06 Stephen C. Jacobsen System for remote monitoring of personnel
US7996187B2 (en) * 2005-02-16 2011-08-09 Card Guard Scientific Survival Ltd. Method and system for health monitoring
US6013007A (en) * 1998-03-26 2000-01-11 Liquid Spark, Llc Athlete's GPS-based performance monitor
US6563487B2 (en) 1998-06-23 2003-05-13 Immersion Corporation Haptic feedback for directional control pads
JP4168752B2 (ja) * 1999-03-17 2008-10-22 富士ゼロックス株式会社 情報受感装置、情報伝達システム、情報受感装置の制御を行なうプログラムが記憶された記憶媒体
US6695770B1 (en) 1999-04-01 2004-02-24 Dominic Kin Leung Choy Simulated human interaction systems
US6424356B2 (en) * 1999-05-05 2002-07-23 Immersion Corporation Command of force sensations in a forceback system using force effect suites
AU6202800A (en) 1999-06-29 2001-01-31 Trakus, Inc. Performance monitoring system
WO2001009863A1 (en) 1999-07-31 2001-02-08 Linden Craig L Method and apparatus for powered interactive physical displays
WO2001028416A1 (en) 1999-09-24 2001-04-26 Healthetech, Inc. Physiological monitor and associated computation, display and communication unit
US6527711B1 (en) * 1999-10-18 2003-03-04 Bodymedia, Inc. Wearable human physiological data sensors and reporting system therefor
US6398728B1 (en) 1999-11-16 2002-06-04 Cardiac Intelligence Corporation Automated collection and analysis patient care system and method for diagnosing and monitoring respiratory insufficiency and outcomes thereof
US7159008B1 (en) 2000-06-30 2007-01-02 Immersion Corporation Chat interface with haptic feedback functionality
US7510398B1 (en) * 2000-10-30 2009-03-31 Board Of Regents Of The University Of Texas System Apparatus for simulating a pulse and heart beat and methods for using same to train medical professionals
US20050101841A9 (en) 2001-12-04 2005-05-12 Kimberly-Clark Worldwide, Inc. Healthcare networks with biosensors
US6812833B2 (en) 2002-04-12 2004-11-02 Lear Corporation Turn signal assembly with tactile feedback
US7082570B1 (en) * 2002-08-29 2006-07-25 Massachusetts Institute Of Technology Distributed haptic interface system and method
US7046151B2 (en) 2003-07-14 2006-05-16 Michael J. Dundon Interactive body suit and interactive limb covers
CN100482149C (zh) * 2003-08-19 2009-04-29 索尼株式会社 图像显示***、图像显示装置及图像显示方法
JP3931889B2 (ja) 2003-08-19 2007-06-20 ソニー株式会社 画像表示システム、画像表示装置、画像表示方法
EP2319410A1 (en) 2003-09-12 2011-05-11 BodyMedia, Inc. Apparatus for measuring heart related parameters
EP1524586A1 (en) 2003-10-17 2005-04-20 Sony International (Europe) GmbH Transmitting information to a user's body
US6978684B2 (en) 2003-11-10 2005-12-27 Nike, Inc. Apparel that dynamically, consciously, and/or reflexively affects subject performance
EP1533678A1 (en) 2003-11-24 2005-05-25 Sony International (Europe) GmbH Physical feedback channel for entertaining or gaming environments
TW200537901A (en) 2004-04-22 2005-11-16 Yuh-Swu Hwang Method and apparatus enable mobile phone capable of exercise measuring and workout support
US20060015560A1 (en) * 2004-05-11 2006-01-19 Microsoft Corporation Multi-sensory emoticons in a communication system
US7433853B2 (en) 2004-07-12 2008-10-07 Cardiac Pacemakers, Inc. Expert system for patient medical information analysis
US9495009B2 (en) * 2004-08-20 2016-11-15 Immersion Corporation Systems and methods for providing haptic effects
US8585476B2 (en) * 2004-11-16 2013-11-19 Jeffrey D Mullen Location-based games and augmented reality systems
US7254516B2 (en) 2004-12-17 2007-08-07 Nike, Inc. Multi-sensor monitoring of athletic performance
AU2006217448A1 (en) * 2005-02-22 2006-08-31 Health-Smart Limited Methods and systems for physiological and psycho-physiological monitoring and uses thereof
US8651964B2 (en) 2005-04-29 2014-02-18 The United States Of America As Represented By The Secretary Of The Army Advanced video controller system
US8139803B2 (en) * 2005-08-15 2012-03-20 Immerz, Inc. Systems and methods for haptic sound
WO2007033194A2 (en) * 2005-09-13 2007-03-22 Aware Technologies, Inc. Method and system for proactive telemonitor with real-time activity and physiology classification and diary feature
US7805151B2 (en) 2005-10-06 2010-09-28 Vergence Entertainment Llc System for substantially simultaneous alerts
US7872574B2 (en) 2006-02-01 2011-01-18 Innovation Specialists, Llc Sensory enhancement systems and methods in personal electronic devices
US20090253109A1 (en) 2006-04-21 2009-10-08 Mehran Anvari Haptic Enabled Robotic Training System and Method
EP2010935A4 (en) * 2006-04-25 2012-10-03 Univ Mississippi METHOD FOR DETECTING PEOPLE
US8027286B2 (en) * 2006-07-28 2011-09-27 Samsung Electronics Co., Ltd. Multi-layer multi-hop wireless system
US8157730B2 (en) * 2006-12-19 2012-04-17 Valencell, Inc. Physiological and environmental monitoring systems and methods
CN100546553C (zh) 2007-05-18 2009-10-07 天津大学 采用肌电和脑电协同控制的假肢手及其控制方法
US8221290B2 (en) 2007-08-17 2012-07-17 Adidas International Marketing B.V. Sports electronic training system with electronic gaming features, and applications thereof
US8092355B2 (en) 2007-09-01 2012-01-10 Mortimer Bruce J P System and method for vibrotactile guided motional training
US20090062686A1 (en) * 2007-09-05 2009-03-05 Hyde Roderick A Physiological condition measuring device
US7788032B2 (en) * 2007-09-14 2010-08-31 Palm, Inc. Targeting location through haptic feedback signals
US7911328B2 (en) * 2007-11-21 2011-03-22 The Guitammer Company Capture and remote reproduction of haptic events in synchronous association with the video and audio capture and reproduction of those events
US20090221890A1 (en) 2008-02-28 2009-09-03 Daniel Saffer Diabetes Management System
US8226479B2 (en) * 2008-04-07 2012-07-24 Disney Enterprises, Inc. Group decision haptic feedback systems and methods
US8976007B2 (en) * 2008-08-09 2015-03-10 Brian M. Dugan Systems and methods for providing biofeedback information to a cellular telephone and for using such information
US10289199B2 (en) * 2008-09-29 2019-05-14 Apple Inc. Haptic feedback system
US20100152620A1 (en) 2008-12-12 2010-06-17 Immersion Corporation Method and Apparatus for Providing A Haptic Monitoring System Using Multiple Sensors

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2020098638A (ja) * 2015-11-25 2020-06-25 グーグル エルエルシー トリガ領域
US11748992B2 (en) 2015-11-25 2023-09-05 Google Llc Trigger regions

Also Published As

Publication number Publication date
JP2012511782A (ja) 2012-05-24
US20100152545A1 (en) 2010-06-17
CN102246120B (zh) 2016-01-20
US9727139B2 (en) 2017-08-08
EP2370874A1 (en) 2011-10-05
CN102246120A (zh) 2011-11-16
US20170322630A1 (en) 2017-11-09
WO2010068574A1 (en) 2010-06-17

Similar Documents

Publication Publication Date Title
JP5769630B2 (ja) 複数のセンサーを用いた触覚監視システムを提供する方法及び装置
US20180233226A1 (en) Method and apparatus for providing a haptic monitoring system using multiple sensors
Dian et al. Wearables and the Internet of Things (IoT), applications, opportunities, and challenges: A Survey
US11375948B2 (en) Methods and systems for providing a preferred fitness state of a user
US20230009588A1 (en) Wearable device utilizing flexible electronics
Nadeem et al. Application specific study, analysis and classification of body area wireless sensor network applications
JP5438725B2 (ja) リアルタイム生理学的監視用のシステム及び方法
US9754078B2 (en) Haptic health feedback monitoring
US9841816B2 (en) Method and apparatus for generating mood-based haptic feedback
US10631760B2 (en) Method for prediction, detection, monitoring, analysis and alerting of seizures and other potentially injurious or life-threatening states
US9492084B2 (en) Systems and methods for monitoring subjects in potential physiological distress
Carrington et al. " But, I don't take steps" Examining the Inaccessibility of Fitness Trackers for Wheelchair Athletes
US20210307443A1 (en) Systems and methods for providing training opportunities based on data collected from monitoring a physiological parameter of persons engaged in physical activity
US20140375470A1 (en) Wearable networked and standalone biometric sensor system to record and transmit biometric data for multiple applications
US20130053652A1 (en) System, business and technical methods, and article of manufacture for design, implementation, and usage of biometric, proximity, and other sensors to detect, record, and treat persons that may be or have been involved in certain physical injuries or disabilities
US20110245633A1 (en) Devices and methods for treating psychological disorders
JP2008503268A5 (ja)
Asif et al. Applications of wireless body area network (wban): A survey
CN109745016A (zh) 一种穿戴式ble mesh组网士兵态势感知的装置及方法
Eid et al. A real time vibrotactile biofeedback system for optimizing athlete training
US10736555B2 (en) Wearable mood and activity monitoring system
Rawashdeh et al. A multimedia cloud-based framework for constant monitoring on obese patients
Li et al. Real-time tracking and detection of patient conditions in the intelligent m-Health monitoring system
WO2019048883A1 (en) PORTABLE DEVICE FOR THE EXPRESSION OF COLLECTIVE EMOTIONS
Sposaro Performance Gains Through Sensory Systems: A Dissertation

Legal Events

Date Code Title Description
RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20120713

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20121005

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20131225

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20140107

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140404

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20141002

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20141224

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20150526

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20150623

R150 Certificate of patent or registration of utility model

Ref document number: 5769630

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees