JP2008257295A - 触覚刺激提示方法 - Google Patents
触覚刺激提示方法 Download PDFInfo
- Publication number
- JP2008257295A JP2008257295A JP2007095705A JP2007095705A JP2008257295A JP 2008257295 A JP2008257295 A JP 2008257295A JP 2007095705 A JP2007095705 A JP 2007095705A JP 2007095705 A JP2007095705 A JP 2007095705A JP 2008257295 A JP2008257295 A JP 2008257295A
- Authority
- JP
- Japan
- Prior art keywords
- vibration
- vibration generator
- finger
- movement
- device body
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- User Interface Of Digital Computer (AREA)
Abstract
【課題】 マウスやコンテンツビューアを保持する複数の指の触覚を刺激する振動生成器を指別に導入して、GUIの基本操作であるスクロール、カーソル、フォーカス移動を実行する際に触覚情報を手掛かりとして利用できるようにすること。
【解決手段】 マウスやコンテンツビューアを保持する複数の指が接触するデバイス側面に、触覚を刺激する振動生成器を指別に導入して、振動パルスを各指に別個に与え、それらの振動パルス間の時間差を制御することにより、指にぶつかる物体の運動を錯覚させる。この錯覚を通じてGUIの基本操作であるスクロール、カーソル、フォーカス移動の移動量や移動速度、移動方向を把握できるようにすることによって、表示システムの操作を支援する。
【選択図】 図1
【解決手段】 マウスやコンテンツビューアを保持する複数の指が接触するデバイス側面に、触覚を刺激する振動生成器を指別に導入して、振動パルスを各指に別個に与え、それらの振動パルス間の時間差を制御することにより、指にぶつかる物体の運動を錯覚させる。この錯覚を通じてGUIの基本操作であるスクロール、カーソル、フォーカス移動の移動量や移動速度、移動方向を把握できるようにすることによって、表示システムの操作を支援する。
【選択図】 図1
Description
本発明は、手で保持するマウスや小型ディスプレイ等を動かして表示内容をスクロールしたり、カーソルを移動したり、メニューのフォーカスを移動したりする場合に、複数の振動生成器からユーザの手指に振動を加え、その振動パターンを通じて、ユーザがスクロールやカーソル移動の量と方向を明瞭に把握できるようにする触覚刺激提示方法に関する。
近年のコンピュータは、マイクロソフト社のウィンドウズ(登録商標)のようにGUI(グラフィカル・ユーザインターフェイス)を基本とする操作体系を用いており、マウスなどのポインティングデバイスで、表示内容をスクロールしたり、カーソルを移動したり、メニューのフォーカスを移動したりする操作でユーザの意図がコンピュータに伝達される。また近年、携帯電話等の小型の情報端末でもGUIを利用するようになり、小型のディスプレイでパソコンの大型画面を想定してデザインされたコンテンツを閲覧する上で適した表示システムが求められている。GUIの最大の欠点は視覚に過度の負担を強いることであり、視覚障害者には全く操作できないし、健常人にとってもディスプレイを常時注視しながら、カーソルを目標地点に移動する作業は疲労を伴う。
そこで視覚に触覚を援用することで、視覚障害者にも利用でき、健常人にも負荷を軽減できる新しいユーザインターフェイスとしてハプティック・ユーザインターフェイス(HUI)が研究されている。そこで基本となるのは、表示内容をスクロールしたり、カーソルを移動したり、メニューのフォーカスを移動したりするGUIの操作を可能な限り触覚を通じて把握できるようにすることである。
また前述したように小型ディスプレイを用いて大型ディスプレイ用にデザインされた画像コンテンツを閲覧する場合に、全体像を把握しやすくするためにディスプレイの奥に外界に対して仮想的に静止したコンテンツを想定し、小型ディスプレイを覗き窓のように動かすと、それに応じて仮想的に静止しているコンテンツの見える部位が変わるようにしたスクロール方式が提案されているが、小型ディスプレイで広いコンテンツを隈なく探るのには時間を要する。そこで、小型ディスプレイをゆっくり動かす場合には小型ディスプレイの移動量とスクロールの移動量を一対一に対応付けるが、速く動かす場合には小型ディスプレイの移動量を拡大してスクロールの移動量に対応付けるようにすると探索能率を向上できる。ところがこのように移動量の対応関係が変わると、ユーザはその時々の対応関係を把握できずに混乱して、スクロールを思い通りにコントロールできないことが問題であった。
上述した問題に対処するために、本発明では、マウスや小型ディスプレイを保持するユーザの複数の指のそれぞれに独立の振動源を通じて振動を与えるようにしている。そして、スクロール時の表示内容やカーソル、メニュー中のハイライトの当たる項目を示すフォーカス等の移動量や移動速度、移動方向に応じて、各振動源の振動生成のタイミングを変えることにより、これらの移動量、移動速度、移動方向をユーザが触覚を通じて把握できるようにしている。あるいは従来から行われているように、カーソルやフォーカスが画面上の目標地点に到達したことを通知するために振動を生成する目的にもこれらの振動源を利用している。
本発明に関連する特許文献を以下に示す。
特開平7−271505号公報
特開平8−314629号公報
特開2000−148345号公報
特開2002−7027号公報
特開2002−297284号公報
特開平6−261738公報
特開平9−164858号公報
特開平11−150794公報
特開2003−199974公報
まず特許文献1から5までは、小型ディスプレイを手で保持して動かす際に、その動きを検出して、動きの量や速度、加速度、方向に基づいて表示内容をスクロールする方式に関連する。特に特許文献1には小型ディスプレイに加速度センサを搭載し、加速度センサによって検出されるディスプレイ本体の動きに基づいて表示画像をスクロール、拡大縮小する方法が示されている。また特許文献2には小型ディスプレイを机上で動かすときに机上に固定された仮想画像コンテンツを小型ディスプレイを小窓として覗いたときに見える部位を表示する表示システムが示されている。さらに特許文献4には、外界に仮想的に静止した対象があるものとして、小さなディスプレイを手で移動したときに移動位置でその対象の本来見えるべき部位を表示することによって、全体像を分かりやすく表示する技術が示されている。このようにディスプレイ自体の動きを検出して、その動きに基づいてスクロールを行う表示システムに関しては、古くから多数の特許が出願されているのにもかかわらず実用化に至っていない理由として、従来の方式には触覚的手掛かりが欠けており、視覚だけで画像の動きを確認しながらスクロールをコントロールすることが難しく、ユーザの思い通りにスクロールできなかったことが挙げられる。
次に特許文献6から9までは、複数の振動源が時間差あるいは位相差のある振動をユーザの触覚に加えることにより、ユーザに対して様々な情報を提供する方式に関連する。特許文献6では、操作部表面に振動の定在波または進行波を発生させて、その表面に触れる操作者に滑べり感や表面粗さ等の表面情報を伝達する装置を与えている。特許文献7では、呈示する情報の内容に対応して振動体の駆動タイミングや場所、駆動する振動体の数等を制御することによって車内の運転者に振動を通じて情報を伝達する方法を示している。また特許文献8では、皮膚表面に、それぞれが独立して駆動される複数の刺激源を近接させて配置して、近接した振動源の振動の位相差を制御することで各種の触感を生成する方法を示している。そして特許文献9では、ゲームコントローラに2つの振動モータを搭載し、その偏心錘の回転タイミングに差を持たせたり、強度を変えたりすることにより、ユーザに様々な慣性力を感じさせる方法を示している。以上の特許文献6,8,9では、位相差として振動波形(または偏心錘の回転運動)自体の位相差が使われており、そのような位相差によって作り出せる触感の変化を利用しているが、そうした触感によってGUIに関わるスクロールやカーソルの移動速度などを明瞭に伝達することは難しい。また特許文献7では、振動源を駆動するタイミングに時間差を持たせているが、各振動源の作り出す振動は別個の刺激として知覚されるように使われており、2つの振動源を近接した時刻に時間差をもって振動させたときに振動源の動きを感じる現象を利用しているわけではない。
本発明は、以上の状況に鑑みて考案されたものであり、比較的周波数の高い振動を短時間に集中的に発生することで、エネルギーが短時間に集中した振動波形の塊(以後、この振動波形の塊を振動パルスと呼ぶ)を作り出し、上述した先行技術に用いられていた振動波形自体の位相差ではなく、振動パルスの時間差を利用して、ユーザの触覚に振動源の移動に関する知覚を生じさせ、それにより、表示内容をスクロールしたり、カーソルを移動したり、メニューのフォーカスを移動したりするGUIの操作を触覚を通じて把握できる触覚刺激提示方法を提供することを目的とする。
本発明は、マウスや、小型ディスプレイを搭載した本体そのものの動きに基づいて小型ディスプレイの表示内容をスクロールするコンテンツビューアの操作性を向上するために利用することを目的としている。そこでマウスや上記コンテンツビューアを保持する際に、その側面に複数の指が接触することに着目して、これらの各指が接触する位置にそれぞれ独立に駆動される振動源を別個に配置する。そして、これらの振動源が発生する振動パルスに適当な時間差を持たせてユーザの指の触覚を刺激することにより、ユーザが指先の間で振動源が移動しているように感じるようにする。
これは視覚においては、アニメーションの原理を通じて知られるように、適当な時間差をもって提示される2つの画像に動きがあるかのように感じられる錯覚現象が、触覚においても生じることを想定したものである。
ただしこのような錯覚は振動波形のレベルで2つの波形に時間差(位相差)があっても感じることができない。そのような波形の位相差レベルの時間差は人が動きを感じる知覚限界以下の短い時間差であるため、人には動きとしては感じ得ないのである。
そこで本発明では、ユーザの2つの指に、人が動きを感じる上で適度な時間差でもって振動パルスを加えるようにする。振動パルスは、周波数の高い振動が短い期間にエネルギーを集中的に指に加えるため、ユーザはコツンと指に何かが当たったような感触を受けるが、その感触が短い時間差で指から指へ移動すると、ユーザは指にぶつかったものが瞬時に別の指へと移動したような印象を受ける。
なお振動パルスの具体的な振動数などは、共振体の重さや大きさにも依存するが、たとえば、アルプス電気社等が製品化している振動パルス生成用の振動源(例えば商品名はフォースリアクタ)等を用いた場合、振動パルスの振動数は2回から30回程度まで、振動波形の周期は1ミリ秒から10ミリ秒程度、継続時間は2ミリ秒から300ミリ秒程度が好ましい。
なお振動パルスの具体的な振動数などは、共振体の重さや大きさにも依存するが、たとえば、アルプス電気社等が製品化している振動パルス生成用の振動源(例えば商品名はフォースリアクタ)等を用いた場合、振動パルスの振動数は2回から30回程度まで、振動波形の周期は1ミリ秒から10ミリ秒程度、継続時間は2ミリ秒から300ミリ秒程度が好ましい。
こうして振動パルスによって作り出される動きに関する感触を利用して、GUIの基本操作である、表示内容をスクロールしたり、カーソルを移動したり、メニューのフォーカスを移動したりする操作において、スクロール量やカーソルやフォーカスの移動量、あるいはこれらの速度、さらに目標に到達したかどうか、といったことまでをも、ユーザが触覚を通じて把握できるようにする。その具体的な手段は以下の通りである。
まず本触覚刺激提示方法は、手で保持して前後左右に動かして操作するデバイスに搭載される。このデバイスの動きの方向と量または速さに基づき、このデバイス本体に設けられたディスプレイまたは別途設置されたディスプレイの表示内容をスクロールしたり、カーソルやフォーカスを移動したりする表示システムとともに利用され、この表示システムの操作を触覚を通じて支援することを目的とする。そのために、デバイス本体の側面上で手指が接する少なくとも2つの位置にそれぞれ独立に振動する振動生成器を設置し、これらの振動生成器は駆動信号が加えられると短い期間に集中的に振動することによって振動パルスを生成するようにする。ここで各振動生成器が生成する振動パルスに所定の時間差が生じるように振動パルスの生成タイミングを制御し、振動パルスの生成位置と時間差によって、前記スクロールの方向と量または速度、及び前記カーソルやフォーカスの移動方向と移動量または移動速度をユーザに通知する。
ここで各指に独立に振動パルスが伝わることが望ましく、振動が本体を介在して他の指に伝わるクロストークを生じにくくする工夫が必要である。そこで振動生成器とデバイス本体の間には振動を吸収するインシュレータやダンパーとなる素材やバネのような弾性体を配置すると良い。あるいは電気的に振動生成器で生じた振動と逆位相の振動を生成し、両振動が打ち消しあってデバイス本体には振動が伝わらないようにしても良い。
GUIでは画面上にアイコンが表示されて、それをカーソルで指示して選択する操作が行われる。このときユーザはマウスやディスプレイ本体を動かしてカーソルを移動して目標のアイコンに到達させなければならないが、従来のGUIではこの作業を視覚でカーソルの動きを注視しながら進めなければならず、作業中に視線を他に向けることも許されなかったため、視覚に大きな負荷がかかっていた。この作業を少しでも触覚で把握できるようにして視覚を支援できれば、ユーザインターフェイスの操作性は大幅に改善すると予想される。従来の振動の利用法では、カーソルが目標地点に到達したら振動を生成して通知するくらいのことしか行っていなかったが、本発明では、目標に到達するまでの過程で触覚手掛かりを加えて、事前の過程から操作を支援することを考えている。そのために、カーソルが目標のアイコンに到達したとき、あるいは目標のメニュー項目の境界を横切るときなどに振動を生成するだけでなく、カーソル移動中に、複数の振動生成器から振動パルスを適当な時差で生成し、スクロールの量または速度、及びカーソルやフォーカスの移動量または移動速度に依存して、振動パルス生成のタイミングや周期を変更して指先に加えることによって、これらの速度や方向を感触として指先に伝えるようにする。具体的には、カーソルの移動方向に応じて複数の振動源の間の振動パルスの生成順と時差を変更して指に加え、動きの錯覚を作り出して、カーソルの移動方向を把握できるようにする。あるいは、振動パルスの生成周期を変えて、カーソルの移動速度を把握できるようにする。これと同様の手法がフォーカスを移動するときや表示画面をスクロールする場合にも適用できる。
上記のカーソルやスクロールの移動速度や移動方向を通知するには、具体的には、2つの振動生成器を、デバイスを保持する2つの指が接する位置にそれぞれ設置し、第1の指が接する第1の振動生成器と第2の指が接する第2の振動生成器とが、次のように振動パルスを生成するようにすると良い。すなわち、デバイス本体を前後に動かすときには、第1の振動生成器が振動パルスを生成して第2の振動生成器は停止し、デバイス本体を左右に動かすときには、第1の振動生成器は停止して第2の振動生成器が振動パルスを生成する。この方法では、第1の振動生成器と第2の振動生成器のどちらが振動するかと言うことによって、左右と前後のどちらの動きなのかを識別できる。また振動パルスの生成周期によって、ユーザへ移動量や移動速度を伝えることはできる。しかしながら、2つの振動生成器が生成する振動パルスの時差によって動きの錯覚を生じていないので、前後の動きのうち前なのか後ろなのか、あるいは左右の動きのうち左なのか右なのかについては識別できない。この問題を改善するためには、振動生成器を1つ増やして次のような方法を用いる必要がある。
第1の指が接する第1の振動生成器と第2の指が接する第2の振動生成器と第3の指が接する第3の振動生成器とを設置し、デバイス本体を前後に動かすときには、第1の振動生成器と第2の振動生成器が微小な時間差で振動パルスを生成し、デバイス本体を左右に動かすときには、第1の振動生成器と第3の振動生成器が微小な時間差で振動パルスを生成するようにする。そして上述した錯覚を通じて移動方向を把握するために、上述した微小な時間差を人が動きを錯覚するのに適した時間差とし、振動パルスの生成順序はデバイス本体の移動方向に依存して変わるようにする。
上記の方法では、第1の振動生成器を前後左右の動きの錯覚を作り出す際に共用しているが、コスト的に余裕があれば、そして本体を保持するときに4本の指を同時に本体に接することができるようにデバイスを設計できるのであれば、さらにもう一つの振動生成器を導入し、次のような方法を取ると良い。すなわち、第1の指が接する第1の振動生成器と第2の指が接する第2の振動生成器と第3の指が接する第3の振動生成器と第4の指が接する第4の振動生成器とを設置し、デバイス本体を前後に動かすときには、第1の振動生成器と第2の振動生成器が微小な時間差で振動パルスを生成し、デバイス本体を左右に動かすときには、第3の振動生成器と第4の振動生成器が微小な時間差で振動パルスを生成する。これらの微小な時間差は人が動きを錯覚する上で適度な大きさとして、これらの振動パルスの生成順序をデバイス本体の移動方向に依存して変えることで、カーソルやスクロールがどちらからどちらへ動いたのかをユーザが錯覚を通じて把握できるようにする。
近年のGUIでは操作能率を上げるために操作中にカーソルやスクロールの動きが加速される仕組みが導入されている。カーソルを遠くに動かすためにマウスを長距離動かすとユーザは疲れるし時間もかかる。そこでマウスをゆっくり動かすときには、その動きが増幅されずにカーソルやスクロールの動きに反映されるが、すばやく動かすときにはマウスの動きが増幅されてカーソルやスクロールの動きに反映される。こうしてマウスを狭い操作範囲内で限られた距離しか動かせない場合でも、マウスをすばやく動かせば、カーソルやスクロールを大きく動かして遠くの目標に到達できるようになっている。ところがこの仕組みはユーザが現時点の増幅度を把握できていないと大きな混乱を招く。特に前述した小型ディスプレイを備えたコンテンツビューアにおいては、増幅度を把握できないままスクロールを続けると、ディスプレイサイズが小さく全体像を把握できないため、ユーザは今自分がコンテンツのどこの部分を見ているのか分からなくなってしまう。
このように加速の仕組みが導入されたGUIの操作を支援するためには、振動パルスの発生周期を通じてユーザが前記スクロールの速度、または前記カーソルあるいはフォーカスの速度を把握できるようにすると良い。すなわちこれらの速度と振動パルスの生成周期が大よそ反比例するようにして、上記の増幅率が高ければ、振動パルスの生成周期が短くなり、マウスを少し動かしただけで振動パルスが高頻度に発生するようにし、逆に増幅率が低いとマウスをたくさん動かしても振動パルスが低頻度でしか生じないように、振動パルスの生成周期を長くすると良い。こうすれば、ユーザはマウスを動かしている最中の振動パルスの発生頻度や発生回数を通じて、カーソルやスクロールの移動速度や移動量を操作中に常に把握することができるようになる。
なお上述した方法で、マウスやコンテンツビューアを斜めに移動する場合には、前後の動きを通知するための振動パルスと左右の動きを通知するための振動パルスをそれぞれの方向への移動量成分あるいは速度成分に応じて同時に生成するようにすれば良いが、振動生成器が3つしかなく、第1の振動生成器を両者の通知に共用する場合には、第1の振動生成器が発生する1つの振動パルスを両移動量成分の表現に共用できるように振動パルス生成タイミングの同期を取る必要が生じる。そこで斜め方向の移動については、前後方向の移動と左右方向の移動が交互に起きる(同時には起こらない)ものとしてそれぞれの移動を表す振動パルスを時間的にずらして生成しても良い。
本発明では、マウスやコンテンツビューアを保持する複数の指に接する振動生成器を指別に設け、それらが生成する振動パルスの時差と周期を適切に制御して指に加えることによって、指の触覚を通じてスクロールやカーソル、フォーカスの動きの量や方向、速度を把握できるようになった。こうしてGUIの基本操作に触覚情報を援用できるようになったので、小さなディスプレイを備えたコンテンツビューアにおいてもGUIの操作性が格段に向上するようになった。
図1に本発明の触覚刺激提示方法をコンテンツビューア(デバイス)に適用した実施例を示す。図1(a)は斜視図、図1(b)は左側面図、図1(c)は右側面図である。各側面図には主要な内部構造を透視して描いている。図中の1はコンテンツを表示する小型ディスプレイであるが、このディスプレイとそれに関わる機能を除去すれば、本発明をマウスに実施した例にもなっている。このコンテンツビューアにはマウスと同様の入力機能が設けられており、2はマウスの左ボタン、3はスクロールホイール、4はマウスの右ボタン、そして15は現在のマウスで主流の光学式動き検出センサである。このセンサではデバイスの底から照射する光で照明された机などの表面の動きを計測することによって、デバイス本体のx軸方向とy軸方向の位置変化分を検出する。
そして本実施例の要となるのが、5,6,7に示す振動生成器である。ここでは上述した各種の方法の中で、振動生成器の数を3つとする方法を示している。後に図3で示すように、振動生成器5には親指が、振動生成器6に薬指が、そして振動生成器7に中指が接触することを想定しているが、他の指を接触させても構わない。ただし本実施例では、これらの各指を各振動生成器の側面に接触したまま、デバイス本体を保持して、前後左右に動かすように操作することを想定しており、そのような操作中に指が触れやすいデバイスの側面に振動生成器を配置している。
図2(a)には、図1のコンテンツビューアを上から見た図(上面図)を示す。図中のディスプレイ1には典型的なGUIで用いられる各種要素が表示されている。コンテンツビューア本体を動かすと、その動きの量と方向に応じてカーソル8やメニュー10内のフォーカス9(ハイライトが当たっている項目)が移動する。あるいはスクロールする場合にはコンテンツビューア本体の動きと共に画面に表示されている内容が移動する。例えばコンテンツビューア本体を矢印11の方向に移動するとカーソル8やフォーカス9あるいは表示内容は矢印11と同じ方向か、または設定によっては矢印11と逆方向に移動する。スクロールの場合にはコンテンツビューア本体の動きに対して画面の表示内容は逆方向に動く方が前述した覗き窓で外界の静止した対象を見ている状況と対応が取れるので直感的に分かり易い。
図2(b)には、コンテンツビューア内部で3つの振動生成器5、6、7を設置されている様子を示す。各振動生成器とコンテンツビューア本体の間には、ダンパー、インシュレータあるいはサスペンションの役割をするバネ12、13、14が介在している。これによって各振動生成器の振動は本体に伝わりにくくなっており、ユーザがそれぞれの振動を干渉なく独立に感じられるようにしている。さらにバネの代わりに振動をキャンセルするように振動生成器と逆位相で振動する別の振動生成器を導入しても良い。
図3には、図1のコンテンツビューアを手で保持して操作する様子を示す。この図のように保持するとちょうど本体側面に親指、中指、薬指が接するようになる。そこでこの接する位置に振動生成器を設置するのが本発明の大きなポイントになる。人の触覚の能力は限られており、また振動には拡散する性質があるため、皮膚の近接した位置に振動が加わってもそれらの位置を区別して知覚することは難しい。本発明では複数の振動源が異なる指の指先に接して振動を加えるようにして、敏感な指先で異なる振動源を区別できるようにしている。このように振動を感じるように指を当てながら本体を保持して前後左右に動かせるように、振動源を本体側面の指が当たる位置に配置していることに特徴がある。図中には前後左右の基準方向を定義する矢印も示している。
図4は、本実施例による制御回路20を含むコンテンツビューア30のブロック図である。ここで、コンテンツビューア30の制御回路20は、マウス左ボタン2、右ボタン4、スクロールホイール3、光学式動き検出センサ15から信号を入力して、CPU処理をするための信号に変換する入力回路21、データを記憶する記憶回路22、CPUによって演算処理を実行する演算回路25、演算回路25からの出力信号をもとに振動生成器5〜7を駆動するための信号に変換する出力回路23、およびディスプレイ1に表示出力するための信号を生成する表示出力回路24から構成されている。
記憶回路22は、メモリ素子等で構成され、CPUが演算処理をするために必要なデータが保存されている。たとえば、振動パルス間の時間差Δ、振動生成器5〜7の振動の大きさを決めるためのデータとしてベースとなる基本刺激量およびコンテンツビューア1の移動加速度と振動の大きさとの関係を示すデータである加速度刺激量、振動周期、および、制御条件データが保存されている。制御条件としては、たとえばインパルスの幅(継続時間)を決定する条件として移動距離にするのか、あるいは時間にするのか、また、長い距離を移動させた場合刺激を繰り返すか否か等がある。
次に、図5を用いて、上記の構成を有するコンテンツビューア1の演算処理を説明する。演算回路25は、光学式動き検出センサ15、左右ボタン2,4、スクロールホイール3からの信号を入力回路21を介して入力し、その信号をもとに動きの変化(たとえば、速度の変化あるいは位置の変化)を検出することによって起動する。
そして、入力信号から、デバイスの移動方向、移動量、移動速度、移動加速度を演算し(S101)、移動加速度から振動インパルスの大きさを計算し(S102)、移動方向と反対側の振動生成器を計算した大きさで振動させる(S103)。演算回路25から出力された制御信号は出力回路23を介して該当する振動生成器へ伝えられる。
そして、振動開始時点からΔ時間経過すると(S104で「Yes」)、他方、すなわち、移動方向の振動生成器を同じ大きさで振動させる(S105)。
そして、振動開始時点からΔ時間経過すると(S104で「Yes」)、他方、すなわち、移動方向の振動生成器を同じ大きさで振動させる(S105)。
次に、制御回路25は、記憶回路22から刺激継続条件を抽出して(S106)、その条件を判定し(S107)、刺激継続条件が移動量である場合は、デバイスの移動量が所定値に達したか否かを判定し(S108)、所定値以上ならば移動方向と逆方向の振動生成器の振動を停止す(S112)。一方、ステップS107で刺激継続条件が時間の場合は、振動生成器をONしてから所定時間経過したか否かを判定して(S110)、所定時間経過している場合は、移動方向と逆方向の振動生成器の振動を停止す(S112)。
そして、ステップS112の処理の後、Δ時間経過した場合は(S113で「Yes」)、他方すなわち移動方向の振動生成器の振動を停止する(S114)。
そして、ステップS112の処理の後、Δ時間経過した場合は(S113で「Yes」)、他方すなわち移動方向の振動生成器の振動を停止する(S114)。
次に移動が終了したか否かを移動方向および移動量等のデータによって判定して(S115)、移動が継続している場合は(S115で「No」)、記憶回路22の刺激繰り返し条件を参照して、この条件がONになっている場合は(S116で「Yes」)、所定値以上移動したか否かを判定して(S117)、所定値以上移動している場合は、ステップS101へ戻る。これによって再度、振動インパルスが生成される。
一方、ステップS116で刺激繰り返し条件がOFFになっている場合は(S116で「No」)、終了する。
一方、ステップS116で刺激繰り返し条件がOFFになっている場合は(S116で「No」)、終了する。
図6に上記の処理で生成される振動インパルスの波形を示す。ここで横軸は時間軸、縦軸は振動の変異量(または圧力)を示す。通常の振動と異なり、振動インパルスは短い時間間隔にエネルギーが集中し、図6(a)に示すように時間的に局在した振動波形の塊となっている。また図6(b)には2つの振動インパルスが時間差をもって生成されている様子を示す。A波とB波の間にはΔの時間差がある。この時間差は波形の塊間の時間差であり、通常の波形の位相差とは異なることを指摘しておきたい。波形の位相差では、最大でも波形の1周期までの時間差までしか区別できないが(それ以上大きくしても波形の周期性により、周期の整数倍分の違いは区別できず、1周期以内の時間差と同等になってしまう)、振動インパルス間で図6(b)のように定義される時間差は任意の大きさを取る事ができるし、大きくしてもその違いを区別することができる。このΔの大きさを数十ミリ秒から数百ミリ秒の範囲で変更して、指から指に物体が触れて移動する錯覚を作り出すようにする。例えばA波を親指に加え、B波を薬指に加えると、親指にぶつかった物体がそのまま移動して薬指にぶつかるような錯覚が生じる。
本発明は、上述の実施例に限定されること無く、種々変形して実施することができる。たとえば、上記実施例では、入力デバイスにディスプレイを一体化コンテンツビューアを例に説明したが、ディスプレイを別に設けて入力デバイス単体として構成することも可能である。
1 ディスプレイ
2 マウス左ボタン
3 スクロールホイール
4 マウス右ボタン
5 振動生成器
6 振動生成器
7 振動生成器
15 光学式動き検出センサ
20 制御回路
21 入力回路
22 記憶回路
23 出力回路
24 表示出力回路
25 演算回路
30 コンテンツビューア(デバイス)
2 マウス左ボタン
3 スクロールホイール
4 マウス右ボタン
5 振動生成器
6 振動生成器
7 振動生成器
15 光学式動き検出センサ
20 制御回路
21 入力回路
22 記憶回路
23 出力回路
24 表示出力回路
25 演算回路
30 コンテンツビューア(デバイス)
Claims (7)
- 手で保持して前後左右に動かして操作するデバイスに適用され、前記デバイスの動きの方向と、量もしくは速さとに基づき、前記デバイス本体に設けられたディスプレイまたは別途設けられたディスプレイの表示内容をスクロールしたり、カーソルやフォーカスを移動したりする表示システムの操作を支援するための触覚刺激提示方法であって、
前記デバイス本体の側面上で手指が接する少なくとも2つの位置にそれぞれ独立に振動する振動生成器を設置し、
前記各振動生成器は駆動信号が加えられると短い期間に集中的に振動することによって振動パルスを生成し、
前記各振動生成器が生成する振動パルスに所定の時間差が生じるように振動パルスの生成タイミングを制御し、
振動パルスの生成位置と時間差によって、前記スクロールの方向と、量もしくは速度とをユーザに通知すると共に、前記カーソルあるいはフォーカスの移動方向と、移動量もしくは移動速度とをユーザに通知することを特徴とする触覚刺激提示方法。 - 前記振動生成器とデバイス本体の間に振動を吸収するかキャンセルする素材または機構を介在することを特徴とする請求項1に記載の触覚刺激提示方法。
- 前記振動パルスは、前記スクロールの量または速度、及び前記カーソルやフォーカスの到達位置や移動量または移動速度に依存したタイミングあるいは周期で生成されることを特徴とする請求項1または請求項2に記載の触覚刺激提示方法。
- 第1の指が接する第1の振動生成器と第2の指が接する第2の振動生成器とを備え、デバイス本体を前後に動かすときには、前記第1の振動生成器が前記振動パルスを生成して前記第2の振動生成器は停止し、デバイス本体を左右に動かすときには、前記第1の振動生成器は停止して前記第2の振動生成器が前記振動パルスを生成することを特徴とする請求項1乃至3のいずれか一に記載の触覚刺激提示方法。
- 第1の指が接する第1の振動生成器と第2の指が接する第2の振動生成器と第3の指が接する第3の振動生成器とを備え、デバイス本体を前後に動かすときには、前記第1の振動生成器と前記第2の振動生成器が微小な時間差で前記振動パルスを生成し、デバイス本体を左右に動かすときには、前記第1の振動生成器と前記第3の振動生成器が微小な時間差で前記振動パルスを生成し、これらの微小な時間差で生成される振動パルスの生成順序はデバイス本体の移動方向に依存して変わることを特徴とする請求項1乃至3のいずれか一に記載の触覚刺激提示方法。
- 第1の指が接する第1の振動生成器と第2の指が接する第2の振動生成器と第3の指が接する第3の振動生成器と第4の指が接する第4の振動生成器とを備え、デバイス本体を前後に動かすときには、前記第1の振動生成器と前記第2の振動生成器が微小な時間差で前記振動パルスを生成し、デバイス本体を左右に動かすときには、前記第3の振動生成器と前記第4の振動生成器が微小な時間差で前記振動パルスを生成し、これらの微小な時間差で生成される振動パルスの生成順序はデバイス本体の移動方向に依存して変わることを特徴とする請求項1乃至3のいずれか一に記載の触覚刺激提示方法。
- 前記デバイス本体の移動量に対して、前記スクロールの量、または前記カーソルまたはフォーカスの移動量を対応付ける規則が、前記デバイス本体の速度または加速度に依存して変化するように構成された表示システムの操作を支援することを目的として、前記振動パルスの発生周期を前記スクロールの速度、または前記カーソルまたはフォーカスの速度に概反比例するように定めることを特徴とする請求項1乃至6のいずれか一に記載の触覚刺激提示方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007095705A JP2008257295A (ja) | 2007-03-30 | 2007-03-30 | 触覚刺激提示方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007095705A JP2008257295A (ja) | 2007-03-30 | 2007-03-30 | 触覚刺激提示方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2008257295A true JP2008257295A (ja) | 2008-10-23 |
Family
ID=39980836
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2007095705A Pending JP2008257295A (ja) | 2007-03-30 | 2007-03-30 | 触覚刺激提示方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2008257295A (ja) |
Cited By (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011107879A (ja) * | 2009-11-16 | 2011-06-02 | Nec Corp | 力覚提示装置、携帯端末機器 |
JP2012252398A (ja) * | 2011-05-31 | 2012-12-20 | Sony Corp | ポインティングシステム、ポインティングデバイス及びポインティング制御方法 |
WO2013035587A1 (ja) * | 2011-09-07 | 2013-03-14 | 日本電気株式会社 | 触覚提示システム |
JP2013164845A (ja) * | 2012-02-10 | 2013-08-22 | Samsung Electronics Co Ltd | 振動装置間振動伝達を制御する装置及び方法 |
JP2014093091A (ja) * | 2012-11-02 | 2014-05-19 | Immersion Corp | ダイナミックハプティック効果のコード化 |
WO2015096584A1 (zh) * | 2013-12-25 | 2015-07-02 | 乐视网信息技术(北京)股份有限公司 | 对含链接的显示页面中移动光标位置设置的方法和*** |
CN105892978A (zh) * | 2016-03-24 | 2016-08-24 | 南通艾利特自动化有限公司 | 一种具有背部按键的机器人示教器 |
JPWO2014104007A1 (ja) * | 2012-12-28 | 2017-01-12 | 株式会社ニコン | データ処理装置、およびデータ処理プログラム |
JP2017027294A (ja) * | 2015-07-21 | 2017-02-02 | 株式会社デンソー | 表示操作装置 |
JP2017510923A (ja) * | 2014-03-21 | 2017-04-13 | イマージョン コーポレーションImmersion Corporation | 触覚対応湾曲装置のためのシステム及び方法 |
JP2017073100A (ja) * | 2015-10-05 | 2017-04-13 | 株式会社ミライセンス | 触力覚情報提示システム |
WO2017169115A1 (ja) * | 2016-03-30 | 2017-10-05 | ソニー株式会社 | 制御装置、制御方法およびプログラム |
US9898084B2 (en) | 2012-12-10 | 2018-02-20 | Immersion Corporation | Enhanced dynamic haptic effects |
JPWO2018016107A1 (ja) * | 2016-07-21 | 2018-11-01 | 株式会社ソニー・インタラクティブエンタテインメント | 操作デバイス、及び制御システム |
US10850192B2 (en) | 2016-03-04 | 2020-12-01 | Sony Interactive Entertainment Inc. | Control apparatus and control program |
US10967253B2 (en) | 2016-07-26 | 2021-04-06 | Sony Interactive Entertainment Inc. | Operation device and method for controlling the same |
US11173393B2 (en) | 2017-09-29 | 2021-11-16 | Sony Interactive Entertainment Inc. | Operation device and control apparatus therefor |
US11344797B2 (en) | 2016-07-26 | 2022-05-31 | Sony Interactive Entertainment Inc. | Information processing system, operation device, and operation device control method with multi-mode haptic feedback |
US11511185B2 (en) | 2017-10-27 | 2022-11-29 | Sony Interactive Entertainment Inc. | Operation device |
-
2007
- 2007-03-30 JP JP2007095705A patent/JP2008257295A/ja active Pending
Cited By (29)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011107879A (ja) * | 2009-11-16 | 2011-06-02 | Nec Corp | 力覚提示装置、携帯端末機器 |
JP2012252398A (ja) * | 2011-05-31 | 2012-12-20 | Sony Corp | ポインティングシステム、ポインティングデバイス及びポインティング制御方法 |
WO2013035587A1 (ja) * | 2011-09-07 | 2013-03-14 | 日本電気株式会社 | 触覚提示システム |
JP2013164845A (ja) * | 2012-02-10 | 2013-08-22 | Samsung Electronics Co Ltd | 振動装置間振動伝達を制御する装置及び方法 |
JP2014093091A (ja) * | 2012-11-02 | 2014-05-19 | Immersion Corp | ダイナミックハプティック効果のコード化 |
US10248212B2 (en) | 2012-11-02 | 2019-04-02 | Immersion Corporation | Encoding dynamic haptic effects |
US9958944B2 (en) | 2012-11-02 | 2018-05-01 | Immersion Corporation | Encoding dynamic haptic effects |
US9898084B2 (en) | 2012-12-10 | 2018-02-20 | Immersion Corporation | Enhanced dynamic haptic effects |
US10359851B2 (en) | 2012-12-10 | 2019-07-23 | Immersion Corporation | Enhanced dynamic haptic effects |
JPWO2014104007A1 (ja) * | 2012-12-28 | 2017-01-12 | 株式会社ニコン | データ処理装置、およびデータ処理プログラム |
WO2015096584A1 (zh) * | 2013-12-25 | 2015-07-02 | 乐视网信息技术(北京)股份有限公司 | 对含链接的显示页面中移动光标位置设置的方法和*** |
JP2017510923A (ja) * | 2014-03-21 | 2017-04-13 | イマージョン コーポレーションImmersion Corporation | 触覚対応湾曲装置のためのシステム及び方法 |
JP2017027294A (ja) * | 2015-07-21 | 2017-02-02 | 株式会社デンソー | 表示操作装置 |
JP2017073100A (ja) * | 2015-10-05 | 2017-04-13 | 株式会社ミライセンス | 触力覚情報提示システム |
US11198060B2 (en) | 2016-03-04 | 2021-12-14 | Sony Interactive Entertainment Inc. | Control apparatus and control program |
US10850192B2 (en) | 2016-03-04 | 2020-12-01 | Sony Interactive Entertainment Inc. | Control apparatus and control program |
US11654353B2 (en) | 2016-03-04 | 2023-05-23 | Sony Interactive Entertainment Inc. | Control apparatus and control program |
CN105892978A (zh) * | 2016-03-24 | 2016-08-24 | 南通艾利特自动化有限公司 | 一种具有背部按键的机器人示教器 |
WO2017169115A1 (ja) * | 2016-03-30 | 2017-10-05 | ソニー株式会社 | 制御装置、制御方法およびプログラム |
US10739856B2 (en) | 2016-03-30 | 2020-08-11 | Sony Corporation | Control device and a control method to cause a user to perceive a tactile stimuli |
JPWO2018016107A1 (ja) * | 2016-07-21 | 2018-11-01 | 株式会社ソニー・インタラクティブエンタテインメント | 操作デバイス、及び制御システム |
US11596858B2 (en) | 2016-07-21 | 2023-03-07 | Sony Interactive Entertainment Inc. | Operating device and control system |
US10881953B2 (en) | 2016-07-21 | 2021-01-05 | Sony Interactive Entertainment Inc. | Operating device and control system |
US10967253B2 (en) | 2016-07-26 | 2021-04-06 | Sony Interactive Entertainment Inc. | Operation device and method for controlling the same |
US11344797B2 (en) | 2016-07-26 | 2022-05-31 | Sony Interactive Entertainment Inc. | Information processing system, operation device, and operation device control method with multi-mode haptic feedback |
US11524226B2 (en) | 2016-07-26 | 2022-12-13 | Sony Interactive Entertainment Inc. | Operation device and method for controlling the same |
US11980810B2 (en) | 2016-07-26 | 2024-05-14 | Sony Interactive Entertainment Inc. | Information processing system, operation device, and operation device control method |
US11173393B2 (en) | 2017-09-29 | 2021-11-16 | Sony Interactive Entertainment Inc. | Operation device and control apparatus therefor |
US11511185B2 (en) | 2017-10-27 | 2022-11-29 | Sony Interactive Entertainment Inc. | Operation device |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP2008257295A (ja) | 触覚刺激提示方法 | |
US9134797B2 (en) | Systems and methods for providing haptic feedback to touch-sensitive input devices | |
JP6591805B2 (ja) | 静電触覚効果を提供する表面要素のためのシステム及び方法 | |
US10191562B2 (en) | Pointing system, pointing device, and pointing control method | |
JP4860625B2 (ja) | タッチ式入力装置におけるボタンおよびスクロール動作シミュレーション用の触覚フィードバック | |
CN101828161B (zh) | 使用音频、视觉和触觉反馈的三维对象模拟 | |
KR101618665B1 (ko) | 동적 햅틱 효과를 가지는 멀티 터치 장치 | |
US6211861B1 (en) | Tactile mouse device | |
JP5613126B2 (ja) | 画面内の対象が押圧によって操作可能なユーザインタフェース装置、対象操作方法及びプログラム | |
JP6761225B2 (ja) | 手持ち型情報処理装置 | |
JP4445582B2 (ja) | 仮想感覚提示装置 | |
EP2947548A1 (en) | Non-collocated haptic cues in immersive environments | |
JP2007331066A (ja) | 接触提示装置及び方法 | |
KR20100127207A (ko) | 진동햅틱 모바일기기 및 그 구동방법 | |
JP2003337962A5 (ja) | ||
JP2016126422A (ja) | 手持ち型情報処理装置 | |
JP6376886B2 (ja) | 入力システムおよび入力方法 | |
JP3855561B2 (ja) | 触覚力覚呈示装置及び情報入出力装置 | |
JP6809868B2 (ja) | 移動誘導装置、パネル装置、制御装置及び移動誘導方法 | |
JP6723380B2 (ja) | 仮想オブジェクトからの反力をシミュレートするためのシステム及び方法 | |
JP2005078310A (ja) | 触覚呈示装置、触覚呈示方法、及びプログラム | |
JP3084433U (ja) | 触感マウス装置 | |
WO2022149361A1 (ja) | 3次元触覚情報を提供可能な入力装置 | |
JP2022105942A (ja) | シミュレートされた仮想空間における操作のための入力装置 | |
JP2021047897A (ja) | 移動誘導装置及び移動誘導方法 |