JP2007148949A

JP2007148949A - 自動クリック入力システム

Info

Publication number: JP2007148949A
Application number: JP2005344875A
Authority: JP
Inventors: Rieko Otsuka; 理恵子大塚; Yoichi Horii; 洋一堀井
Original assignee: Hitachi Ltd
Current assignee: Hitachi Ltd
Priority date: 2005-11-30
Filing date: 2005-11-30
Publication date: 2007-06-14
Also published as: US20070120823A1

Abstract

【課題】マウスやジョイスティックなど従来の入力装置では、クリック時に指や手にかかる負担が大きく、腱鞘炎症状をもつユーザにとって使いづらいものであった。本発明は、マウスカーソルを移動させ、停止させるだけでユーザが自らクリックしなくても自動的にクリックイベントを発生させる入力システムを提供する。また、キーボード入力作業時における意図しないクリック操作発生を回避し、入力作業に専念できる入力システムを提供する。
【解決手段】カーソルの位置変化とキーボードからの入力を監視し、カーソルが所定時間（T_１）を越えて停止し、また現在時刻から遡って所定時間（T₂）を超えてキーボードからの入力がなかった場合に、自動的にクリックイベントを発生させる入力システムを実現する。
【選択図】図３

Description

本発明は、コンピュータ操作におけるクリック入力作業を自動化するシステムに関する。

パーソナルコンピュータを操作する際に、モニタ上のカーソルの移動や、選択するための入力装置としてマウスやトラックボール、ジョイスティックなどが広く利用されている。一般的にマウスなどの入力装置では、選択する際にクリックと呼ばれる操作が必要であるが、クリック操作を多用すると、指や手に大きな負担がかかり、長時間作業を続けると腱鞘炎へと症状が進行してしまうこともある。腱鞘炎の予防としては、できる限りマウスを使用する時間やクリックの回数を減らすことが望ましいと考えられる。一方、クリック操作自体が困難な肢体不自由者向けには、入力作業を支援するような技術が提案されている。例えば、特許文献１に記載されているように、足で表示画面上のカーソルを操作する技術が提案されている。また特許文献２では、画面上のカーソル位置の移動を検知し、所定の時間内に移動がない場合にクリックイベントを発生させる入力方法が提案されている。

特開平10-55248号

特開2005-18222号

しかしながら、特許文献１の方法では足で操作するための専用の機器が必要であり、例えば、移動先でPC作業を行う場合など、どこでも気軽に利用できるわけではない。また特許文献２の方法では、クリックイベントを自動的に発生させるまでの時間をカウント表示およびサウンドで提示させる技術が提案されているが、テキスト入力が主となる作業時には、カーソル移動によって自動的にクリックイベントが発生しないようにしておく方が望ましい場合がある。例えばキーボード操作時に、意図せず、マウスを動かしてしまうと、予期しない場所でクリックイベントが発生してしまい、入力したい場所からキャレット（文字入力ポインタ）が飛んでしまうなどのおそれがある。また、PC作業時にはシングルクリックだけでなく、フォルダやファイルを開く場合など、ダブルクリック操作が必要なことがあるが、特許文献２の技術はシングルクリックだけに限られている。

本発明は、かかる問題を解消するためのものであり、その第１の目的は、クリック操作の回数をできる限り減らしたい腱鞘炎ユーザや、クリック操作自体が困難な肢体不自由者のために、クリック操作やダブルクリック操作と同様の操作を自動的に発生させるシステムを提供することである。さらに第２の目的は、文字入力作業時にはクリック操作の発生を抑える。

上記の目的を達成するために、本発明に係るクリック操作自動化技術では、カーソルの移動状態とキーボードからの入力状態を監視し、カーソルの移動が所定時間、停止したことが確認され、さらに所定時間内にキーボードからの文字入力がなかった場合に、クリックイベントを自動発生することを特徴とする。

また、本発明はカーソルの停止時間と、キーボード入力後の待機時間とをユーザが任意に設定できることを特徴とする。

また、本発明は、用途によってシングルクリック、ダブルクリック、右クリックなどをユーザが容易に切り替えることが可能であることを特徴とする。

また、本発明はユーザによって定められたドラッグ開始、終了キーの押下げを検知することで、マウスボタンを押下げずに、ドラッグ操作を行えることを特徴とする。

このような構成により、ユーザは、コンピュータ操作においてクリック操作の回数を大幅に減らすことができるため、クリック操作による手指の負担や労力を軽減することができる。また、キーボードでの文字入力作業時に、手や腕が無意識にマウスに触れ、画面上のカーソルが移動してしまうと、意図しない位置やウィンドウにフォーカスが移動してしまうことがあるが、キーボードからの入力状態を監視しておき、最後のキーボード入力発生から所定時間経過していない場合は、クリック操作を無効とすることで、そのような文字入力作業時における意図しないフォーカスの移動を回避することができる。

また、クリックのタイプをシングルやダブルなど容易に変更できることによって、さまざまな操作がボタンを押さずに可能になる。例えば、シングルクリックを自動化することによって、Webブラウジングやメール操作などが可能である。また、ダブルクリックを自動化することによってフォルダやファイルを開くなどの操作が可能になる。さらに右クリックを自動化することによって、メニュー画面を開く操作が可能になり、選択したいメニュー上で一定時間、停止すれば、再度クリックイベントが発生し、メニューを選択することができる。

また、クリック操作発生時に音を発生させることで、ユーザにクリック発生を提示することができる。音の発生の有無についてはユーザが自由に設定できるのが望ましい。

以下、図１から図９を参照して、本発明に係る実施形態を詳細に説明する。なお、同一または同様の部位、あるいは、矢印などは同一の符号を持って示し重複した説明を省略する。また、以後に説明する実施形態は代表的なものであり、これに限定されるものではない。

図１は本発明に係る実施形態の全体構成図であり、１０１はコンピュータシステム、１０２はモニタ、１０３はマウス、１０４はキーボードであり、１０２モニタと１０３マウスと１０４キーボードは、１０１コンピュータシステムを操作する際の入力／出力インタフェースである。本発明に係る自動クリック入力システムは、カーソル位置とキーボード入力を取得する入力部１０６、カーソル移動、文字入力状態を監視する処理部１０７、ユーザによってあらかじめ決められた所定時間等を保存しておく記憶部１０８、クリックイベントを発生させる出力部１０９、および、入力部１０６、処理部１０７、記憶部１０８、出力部１０９を制御する制御部１０５を含んで構成される１０１コンピュータシステム上で動くプログラムである。

同図において１０３マウスは、例えばジョイスティックやタッチパッドなどカーソル位置の指定に用いることができる他の入力装置でも代替可能であり、マウスに限定するものではない。

また同図において、該自動クリック入力システムは、コンピュータシステムに組み込み可能なプログラムとして提供することも可能であり、あるいは該プログラムがコンピュータシステムに接続された外部記憶装置、あるいは記憶媒体に格納されるものとして提供することも可能である。本実施例では、前者の場合を想定して説明する。

また同図において、該自動クリック入力システムは、コンピュータシステム１０１の起動時に自動的に起動するプログラムとして提供することも可能である。

図２は本発明の自動クリック入力システムのための設定画面例を示したものである。２０１設定画面を開き、２０２クリックイベント発生までのカーソル停止時間、２０３キーボード入力後に待機する時間、２０４クリックイベント発生時のサウンドの有無、２０５クリックの種類(シングルクリックかダブルクリックかなど)を設定すると、設定値がそれぞれ保存され、次回、該プログラムを起動したときに反映される。

同図において２０２クリックイベント発生までの時間は、カーソルが停止してからクリックイベントが発生するまでの時間が設定される。

また同図において２０３キーボード入力後に待機する時間は、カーソルが停止していてもキーボードからの入力があった場合に、クリックイベントの発生を無効化する待機時間が設定される。

また同図において、サウンドの有無はクリックイベント発生時に、クリック操作が行われたことを提示するための音効果を使用するか否かが設定される。

また同図において、クリックタイプの選択は、発生されるイベントがシングルクリックかダブルクリックかなどクリックのタイプを選ぶためのものである。クリックタイプの選択については、該設定画面上で行うことも可能であり、あるいはキーボード上のあるキーが押されたかどうかを検知し、クリックの種類を切り替えてもよい。また他に右クリックやドラッグ機能などを追加すること可能である。

図３は、カーソル位置とキーボード入力状態を監視し、クリックイベントを発生するまでの処理の流れを示したものである。ステップ３０１では、図２に示すような条件設定画面で設定したキーボード入力後に待機する時間T_２（秒）を参照し、最後にキーボード入力があった時刻からT₂（秒）経過したかどうかが判定される。最後のキーボード入力時刻からT₂（秒）経過していればステップ３０２へと進み（Yes）、現在時刻から遡ってT₂（秒）以内にキーボード入力があった場合は処理を終了する（No）。ステップ３０２では、現在のカーソル位置座標（ｘ，ｙ）が取得される。ステップ３０３では、図２に示す条件設定画面で設定したクリック操作発生までのカーソル停止時間T₁（秒）を参照し、カーソル位置座標（ｘ，ｙ）がT_１（秒）間、停止しているかどうかが判定される。T_１（秒）の間、停止していればステップ３０４へと進み（Yes）、現在時刻から遡ってT₁（秒）の間にカーソルの移動が見られた場合は、処理を終了する（No）。ステップ３０４では、図２に示す条件設定画面で設定したサウンドの再生の有無を参照し、再生する場合はステップ３０５へ進んで（Yes）、クリック発生時の効果音を再生し、再生しない場合はステップ３０６へ進む（No）。ステップ３０６では、ユーザによって設定されたクリックタイプ（シングルクリックであるか、ダブルクリックであるか）を判定し、シングルクリックである場合にはステップ３０７へ進んで（Yes）、シングルクリックイベントを発生し、ダブルクリックである場合にはステップ３０８へ進んで（No）、ダブルクリックイベントを発生する。

同図においてクリックタイプはシングルクリック、ダブルクリックに限らず、右クリックやドラッグ操作なども可能である。同図では例としてシングルクリックとダブルクリックの二種類のクリックタイプを用いて説明する。

図４は、本発明の自動クリック操作入力システムにおいて、キーボード入力作業時に意図せずにクリック操作が発生してしまった場合に起こる問題を示したものである。４０１は一般的なメールソフトに見られるウィンドウであり、４０２は文字入力ポインタであるキャレット、４０３はカーソルである。図４（ａ）のようにキャレットとカーソルが近くにあるときに、カーソルの存在がうるさく感じられることがあり、少し離れたところに動かしておきたい場合があるが、カーソルの停止時間のみを条件にクリック発生判断を行う手法を採用すると、カーソルを例えば図４（ｂ）のように現在、入力している場所以外のテキスト入力可能領域に移動し、停止させてしまうと、図４（ｃ）のように所定時間後にキャレットが移動先のフォームに移ってしまうことがある。現在、キャレットが表示されているテキスト入力可能領域内で移動する分には、上述のような移動による問題は起こらないが、かかる問題が起こらないようにカーソルの移動先に気を配っていたのではテキスト入力作業に専念できない。

図５は、本発明の自動クリック操作入力システムにおいて、キーボード入力作業時に意図せずにクリック操作が発生してしまった場合に起こる問題を回避した例を示したものである。５０１は一般的なメールソフトに見られるウィンドウであり、５０２は文字入力ポインタであるキャレット、５０３はカーソルである。図５（ａ）のようにキャレットとカーソルが近くにあるときに、カーソルの存在がうるさく感じられることがあり、少し離れたところに動かしておきたい場合があるが、カーソルを例えば図５（ｂ）のように現在、入力している場所以外のテキスト入力可能領域に移動し、停止させた場合、キーボードからの入力状態を監視しておき、ユーザによって定められたキーボード入力後の待機時間内には、カーソルの停止による自動クリック操作を行わないようにすることで、図５（ｃ）のようにカーソルに伴うキャレットの移動を回避することができる。

図６は、本発明の自動クリック操作入力システムの、Ｗｅｂブラウザを用いた作業時における効果を示したものである。６０１はＷｅｂページの一例で６０２はカーソルを示している。一般的なＷｅｂブラウザ上では、ユーザはマウスのクリック操作だけで、リンク先のページを開くことや、元のページに戻るなどの操作を行うことができる。このとき、本発明の自動クリック入力システムを用いると図６（ａ）に示すように、６０１Ｗｅｂページ上でリンク先を示す表示の上に６０２カーソルを移動させ、停止させるだけで、図６（ｂ）に示すように、６０３リンク先のページを開くことができる。同様の操作で、元のページに戻ることや、ページを更新すること、Ｗｅｂブラウザ自体を閉じることなど、ほとんど全ての操作をユーザが自らクリックすることなしに、マウスを移動し、停止させるだけで行うことができる。

図７は、本発明の自動クリック操作入力システムの、クリックの種類によって得られる効果を示したものである。図７（ａ）は該入力システムを用いない場合を、図７（ｂ）は該入力システムにおいてシングルクリックを用いた場合を、図７（ｃ）は該入力システムにおいてダブルクリックを用いた場合を、図７（ｄ）は該入力システムにおいて右クリックを用いた場合を示したものである。７０１はコンピュータを操作する際の一般的な画面で、７０２はフォルダアイコン、７０３はカーソルである。同図では、シングルクリックで選択し、ダブルクリックで開くクリック方法を用いた場合において説明する。図７（ａ）のように該入力システムを用いない場合は、７０３カーソルを７０２フォルダアイコン上に移動させ、停止させても操作上、何も変化は見られない。これに対して、図７（ｂ）に示すように該入力システムにおいて自動シングルクリック操作を行った場合に、７０２フォルダアイコン上でカーソルを所定時間、停止するとクリック操作が行われ、選択された結果、７０４フォルダアイコンのように反転表示される。また図７（ｃ）に示すように該入力システムにおいて自動ダブルクリック操作を行った場合に、７０２フォルダアイコン上でカーソルを所定時間、停止すると、７０２フォルダアイコンに対して開くという操作が行われ、７０５フォルダウィンドウのように、その内容が表示される。また図７（ｄ）に示すように該入力システムにおいて自動右クリック操作を行った場合に、７０２フォルダアイコン上でカーソルを所定時間、停止すると、７０６右メニューが開かれる。

図８は、本発明の自動クリック操作入力システムの、ユーザがクリックの種類を切り替える際の提示方法を示したものである。図７で示したようにシングルクリック、ダブルクリック、右クリックの切替えを可能にすることにより、ユーザがカーソルを移動するだけで行える操作の種類を大幅に増やすことができる。このシングルクリック、ダブルクリック、右クリックの切替えは、図２で示したような条件設定画面上で行ってもよく、またキーボード上のあるキーをクリックタイプ切替えキーとしてユーザがあらかじめ設定しておき、操作中に該キーを押すことで、切替えてもよい。

同図において現在の設定がシングルクリック、ダブルクリック、右クリックのいずれかであるかについては、例えばカーソルのマークなどに変化をつけることでユーザに提示することができる。図８（ａ）のように従来のカーソルマークの場合は、シングルクリックモード、図８（ｂ）の場合はダブルクリックモード、図８（ｃ）の場合は右クリックモードのようにそれぞれのクリックタイプに対して異なるカーソルマークを割り当てることができる。

同図においてそれぞれのクリックモードに、どのカーソルマークを割り当てるかは、ユーザが自由に設定できることが望ましい。

図９は、本発明の自動クリック操作入力システムのドラッグイベントを発生させるまでの処理の流れを示したものである。ドラッグは通常、左クリックボタンを押下げたまま、選択したい範囲の終点までカーソルを移動させる操作である。該入力システムでは、ドラッグ操作の始点と終点を、あらかじめ設定しておいたキーを押すことで検知し、ユーザがクリックボタンを押下げたまま移動しなくてもドラッグ操作が可能である手段を提供する。
ステップ９０１では、現在のマウス左ボタンの状態を取得し、左ボタンが押下げ状態でないか（ドラッグ中でないか）判定する。押下げた状態でなければステップ９０２へと進み（No）、押下げた状態であれば処理を終了する（Yes）。ステップ９０２では、あらかじめ設定しておいたドラッグ開始キーが押されたかどうかを判定し、押されればステップ９０３へ進み（Yes）、押されなければ待機する（No）。ステップ９０３では左ボタンダウンイベントを発生し、ステップ９０４へ進む。ステップ９０４ではドラッグ中を示すカーソルマークを表示し、ステップ９０５へ進む。ステップ９０５では、あらかじめ設定しておいたドラッグ終了キーが押されたかどうかを判定し、押されればステップ９０６へ進み（Yes）、押されなければ待機する（No）。ステップ９０６では左ボタンアップイベントを発生し、ステップ９０７へ進む。ステップ９０７では元のカーソルマークを表示し、処理を終了する。これによって従来、左クリックボタンを押下げたまま、操作する必要があったドラッグ操作を、ボタンを押すことなしにキーボード上のキーを押すだけで代替することが可能であり、これによってユーザの手指にかかる負担を大幅に軽減することができる。

同図においてドラッグ操作の始点と終点を示すキーは、図２に示すような条件設定画面上で行ってもよい。

また同図においてドラッグ操作の始点と終点を示すキーはキーボード上のキーを用いればよく、それぞれ異なるキーでもよく、あるいは同一のキーでもよい。

本発明に係る入力システムの全体概略を示す説明図である。本発明に係る入力システムの条件設定画面を示す説明図である。本発明に係る入力システムのカーソル移動とキーボードからの入力を監視し、クリック操作を発生するまでの処理の流れを示す説明図である。本発明に係る入力システムにおいて、キーボードからの入力を考慮しない場合に起こる意図しないマウスフォーカスの移動を示す説明図である。本発明に係る入力システムにおいて、キーボードからの入力を考慮し、意図しないマウスフォーカスの移動を回避する例を示す説明図である。本発明に係る入力システムにおいて、Webブラウザ上でシングルクリックを自動発生する機能の効果を示す説明図である。本発明に係る入力システムのウィンドウ操作場面においてシングルクリック、ダブルクリック、右クリックを自動発生する機能の効果を示す説明図である。本発明に係る入力システムにおいて、クリックタイプを提示する方法を示す説明図である。本発明に係る入力システムにおいて、キーボードからの入力を監視し、ドラッグ操作を発生させるまでの処理の流れを示す説明図である。

符号の説明

101：コンピュータ、102：モニタ、103：マウス、104：キーボード、105：制御部、106：入力部、107：処理部、108：記憶部、109：出力部、
201：設定画面、202：カーソル停止時間、203：キーボード入力後の待機時間、204：サウンドの有無、205：クリックタイプ、
301：キーボード入力後の待機時間判定ステップ、302：カーソルの位置座標取得ステップ、303：カーソル停止時間判定ステップ、304：サウンド再生判定ステップ、305：サウンド再生ステップ、306：クリックタイプ判定ステップ、307：シングルクリックイベント発生ステップ、308：ダブルクリックイベント発生ステップ、
401：ウィンドウ、402：キャレット、403：カーソル、
501：ウィンドウ、502：キャレット、503：カーソル、
601：Webページ、602：カーソル、603：リンク先のページ、
701：コンピュータ操作画面、702：フォルダアイコン、703：カーソル、704：選択されたフォルダアイコン、705：開かれたフォルダウィンドウ、706：右メニュー、
801：シングルクリックモードのカーソル、802：ダブルクリックモードのカーソル、803：右クリックモードのカーソル、
901：ドラッグ操作判定ステップ、902：ドラッグ開始キー押下判定ステップ、903：左クリックボタンダウンイベント発生ステップ、904：カーソル表示ステップ、 905：ドラッグ終了キー押下判定ステップ、906：左クリックボタンアップイベント発生ステップ、907：カーソル表示ステップ。

Claims

座標入力装置とキーボードとが接続されるコンピュータにおいてクリック入力操作を発生させる、クリック入力操作発生方法であって、
前記キーボードからの入力の有無を検出する第１のステップと、
前記座標入力装置から入力される座標の変化の有無を検出する第２のステップと、
前記キーボードからの入力が検出されない時間が第１の所定時間以上であり、かつ、前記座標の変化がない時間が第２の所定時間以上である場合に、前記座標入力装置からのクリック入力に関連付けられているコマンドを実行する第３のステップとを有することを特徴とするクリック入力操作発生方法。
請求項１記載のクリック入力操作発生方法であって、
シングルクリック、ダブルクリック、左クリック、右クリックの少なくとも２つを選択肢とし、そのいずれかを前記第３のステップにおけるクリック入力として設定する第４のステップを有することを特徴とするクリック入力操作発生方法。
請求項１記載のクリック入力操作発生方法であって、
前記第１の所定時間、または前記第２の所定時間の少なくともいずれかをユーザが設定する設定入力を受け付ける第５のステップを有することを特徴とするクリック入力操作発生方法。
請求項１記載のクリック入力発生操作方法であって、
前記第３のステップにおいて、前記コマンドの実行に合わせてクリック入力操作発生を通知するサウンド発生を行うことを特徴とするクリック入力操作発生方法。
座標入力装置とキーボードとが接続されるコンピュータにおいてクリック入力操作を発生させる、クリック入力操作発生プログラムであって、
前記キーボードからの入力の有無を検出する第１のステップと、
前記座標入力装置から入力される座標の変化の有無を検出する第２のステップと、
前記キーボードからの入力が検出されない時間が第１の所定時間以上であり、かつ、前記座標の変化がない時間が第２の所定時間以上である場合に、前記座標入力装置からのクリック入力に関連付けられているコマンドを実行する第３のステップとを実行させることを特徴とするクリック入力操作発生プログラム。
請求項５記載のクリック入力操作発生プログラムであって、
シングルクリック、ダブルクリック、左クリック、右クリックの少なくとも２つを選択肢とし、そのいずれかを前記第３のステップにおけるクリック入力として設定する第４のステップを実行させることを特徴とするクリック入力操作発生プログラム。
請求項５記載のクリック入力操作発生プログラムであって、
前記第１の所定時間、または前記第２の所定時間の少なくともいずれかをユーザが設定する設定入力を受け付ける第５のステップを実行させることを特徴とするクリック入力操作発生プログラム。
請求項５記載のクリック入力発生操作プログラムであって、
前記第３のステップにおいて、前記コマンドの実行に合わせてクリック入力操作発生を通知するサウンド発生を行わせることを特徴とするクリック入力操作発生プログラム。
座標入力装置とキーボードと処理計算部とを有するコンピュータシステムであって、
前記キーボードは、ユーザによるキー入力を受け付け、
前記座標入力装置は、ユーザによる座標入力を受け付け、
前記処理計算部において、前記キーボードからの入力が検出されない時間が第１の所定時間以上であり、かつ、前記座標の変化がない時間が第２の所定時間以上である場合に、前記座標入力装置からのクリック入力に関連付けられているコマンドを実行することを特徴とするコンピュータシステム。
請求項９記載のコンピュータシステムであって、
前記処理計算部は、シングルクリック、ダブルクリック、左クリック、右クリックの少なくとも２つを選択肢とし、そのいずれかを、前記第１及び第２の所定時間を用いて入力を判断するクリック入力として設定するためのユーザ設定入力を受け付けることを特徴とするコンピュータシステム。
請求項９記載のコンピュータシステムであって、
前記処理計算部は、前記第１の所定時間、または前記第２の所定時間の少なくともいずれかを設定するためのユーザ設定入力を受け付けることを特徴とするコンピュータシステム。
請求項９記載のコンピュータシステムであって、
前記コマンドの実行に合わせてクリック入力操作発生を通知するサウンド発生を行うサウンド発生装置を有することを特徴とするコンピュータシステム。
座標入力装置とキーボードとが接続されるコンピュータにおいてドラッグ操作入力を発生させる、ドラッグ操作入力発生プログラムであって、
前記キーボードからの第１または第２のキー入力の有無を検出する第１のステップと、
前記座標入力装置から入力される座標を検出する第２のステップと、
前記第１のキー入力が検出されたときの前記検出された座標をドラッグ開始位置とし、前記第２のキー入力が検出されたときの前記検出された座標をドラッグ終了位置とし、前記座標入力装置からのドラッグ操作入力に関連付けられているコマンドを実行する第３のステップとを実行させることを特徴とするドラッグ操作入力発生プログラム。