JPH10260773A - 情報入力方法及びその装置 - Google Patents

Abstract

(57)【要約】 【課題】 コンピュータに対する情報入力手段として、
視線を用いて手入力を代替することである。 【解決手段】 視線情報検出手段５により表示手段４に
注がれた視線の位置および動きを検出し、入力処理およ
び表示制御手段２により検出した視線の位置を表示手段
４に表示し、視線の位置で定まる情報をコンピュータの
入力信号として用いることを特徴とする。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、コンピュータへの
情報入力方法および装置に関するもので、特に音声を用
いた入力と視線を用いた入力を組み合わせた情報入力方
法および装置に関するものである。

【０００２】

【従来の技術】コンピュータへの情報入力方法に関する
従来技術は、現在市販されているコンピュータでは主
に、キーボードを用いて指で文字や数字などを入力する
方法と、マウスにより入力する方法が用いられている。
図１０に従来技術の構成を示す。

【０００３】図１０において、１はキーボードやマウス
などの入力手段、２は前記入力手段１よりの信号を、そ
の入力信号の最終的な受け取り側である情報処理手段３
への受け渡し処理をし、さらに、表示手段４に表示する
ための制御を行う、入力処理および表示制御手段であ
る。なお、入力処理および表示制御手段２，情報処理手
段３および表示手段４はいわゆるコンピュータの構成要
素である。キーボード入力は指でキーを叩くことによっ
て、文字や数字などを入力するものであり、マウス入力
は画面上の希望する項目をマウスボタンで１回押下（ク
リック）する、２回押下する（ダブルクリック）、押し
たまま引っ張る（ドラッグ）ことにより、「選択」，
「実行」，「ドラッグ」といった制御情報を入力する。
また、マウスボタンを押さないで動かす場合は、表示手
段４上で指示位置を示しているポインタの単に「移動」
となる。これらの方法では、常に画面あるいはキーボー
ドを見ながら、さらにキーボード，マウスといった２種
類の入力端末を用いた手による入力を必要とし、手が使
えないような状況下では入力することができない。

【０００４】

【発明が解決しようとする課題】このように従来技術
は、コンピュータへの情報入力方法が限定されている。
すなわち、キーボードやマウスといった手入力による入
力手段１を必要とし、音声や視線は使われていなかっ
た。また、マウスとキーボードでは機能が異なるため、
それぞれ状況に応じて使い分けが必要であった。

【０００５】本発明の目的は、コンピュータに対する情
報入力手段に、視線，音声を用いており、また視線と音
声を組み合わることにより手入力を代替したコンピュー
タの情報入力方法および装置を提供することにある。

【０００６】

【課題を解決するための手段】請求項１に記載の発明
は、ディスプレイ上の視線位置を検出し、前記ディスプ
レイ上に前記検出した視線位置を表示するとともに、前
記視線位置および視線の動きに応じて定まる情報をコン
ピュータへの入力信号とするものである。

【０００７】請求項２に記載の発明は、ディスプレイ上
の視線位置を検出し、前記ディスプレイ上に前記検出し
た視線位置を表示するとともに、前記視線位置および視
線の動きに応じて定まる情報をコンピュータへの入力信
号とし、さらに入力された音声を認識し、前記音声によ
って定まる情報を前記コンピュータへの入力信号とする
ものである。

【０００８】請求項３に記載の発明は、視線位置がアイ
コン上に停止したときの、まばたきの回数と間隔に応じ
て、前記アイコンの選択，実行，ドラッグのための制御
信号を対応させておき、前記視線位置がアイコン上に停
止し、まばたきがなされたとき、前記まばたきの回数と
間隔に対応する制御信号をコンピュータに入力し、アイ
コンがドラッグされているときの視線位置の動きに追随
して、前記ドラッグされたアイコンの位置を移動させる
ものである。

【０００９】請求項４に記載の発明は、キーボードをデ
ィスプレイ上に表示し、前記ディスプレイ上のキーボー
ドにおいて視線位置にある文字を検出し、予め定めた視
線の動きを検出したときに、前記検出されている視線位
置にある文字を、コンピュータへの入力情報とするもの
である。

【００１０】請求項５に記載の発明は、有限個の文字ま
たはコマンドに対応する音声を事前に登録しておき、音
声入力があった場合、前記入力された音声を、前記予め
登録されている有限個の文字またはコマンドに対応する
音声と比較し、最も近い文字またはコマンドを、コンピ
ュータへの入力情報とするものである。

【００１１】請求項６に記載の発明は、ディスプレイに
注がれた視線の位置および動きを検出する視線情報検出
手段（図１に示す視線情報検出手段５）と、前記視線情
報検出手段にて検出された視線の位置を、ディスプレイ
（図１に示す表示手段４）上に表示する視線位置表示手
段（図１に示す入力処理および表示制御手段２）と、前
記検出された視線位置または動きに応じて定まる情報を
コンピュータの入力信号として入力する視線対応情報入
力手段（図１に示す入力処理および表示制御手段２）と
を有するものである。

【００１２】請求項７に記載の発明は、音声を認識する
音声処理手段（図１に示す音声処理手段６）と、前記認
識された音声によって定まる情報を前記コンピュータへ
の入力信号として入力する音声対応情報入力手段（図１
に示す入力処理および表示制御手段２）とを有するもの
である。

【００１３】請求項８に記載の発明は、視線位置がアイ
コン上に停止したときの、まばたきの回数と間隔に応じ
て、前記アイコンの選択，実行，ドラッグのための制御
信号を対応させ、対応する制御信号をコンピュータに入
力する制御信号入力手段（図１に示す入力処理および表
示制御手段２）と、アイコンがドラッグされているとき
の視線位置の動きに付随して、前記ドラッグされたアイ
コンの位置を移動させる移動手段（図１に示す入力処理
および表示制御手段２）とを有するものである。

【００１４】請求項９に記載の発明は、キーボードをデ
ィスプレイ上に表示するキーボード表示手段（図１に示
す入力処理および表示制御手段２）と、前記ディスプレ
イ上のキーボードにおいて視線位置にある文字を検出
し、予め定めた視線の動きを検出したときに、前記検出
されている視線位置にある文字を、コンピュータへの入
力情報とするキーボード対応情報入力手段（図１に示す
入力処理および表示制御手段２）とを有するものであ
る。

【００１５】請求項１０に記載の発明は、事前に登録さ
れた有限個の文字またはコマンドに対応する音声と、入
力された音声とを比較する比較手段（図１に示す情報処
理手段３）と、最も近い文字またはコマンドを、コンピ
ュータへの入力情報とする登録情報入力手段（図１に示
す情報処理手段３）とを有するものである。

【００１６】

【発明の実施の形態】本発明の特徴は、視線、および音
声と視線により従来、コンピュータの入力となっていた
マウスやキーボードの入力を代替するものであり、具体
的には、音声入力については、音声を認識し処理する音
声処理手段を持ち、発生した音声をコンピュータ（情報
処理手段）の入力信号に変換する。

【００１７】また、ディスプレイに注がれた視線位置を
検出し、移動距離，移動速度，注視時間，瞳孔径，まば
たきの回数及びまばたきの間隔を収集する視線検出手段
と、収集結果を処理してコンピュータの入力にするとと
もに、ディスプレイ上（表示手段）での表示を制御する
制御処理手段からなり、視線の位置を検出してディスプ
レイ上の位置の指示に利用し、さらに、まばたきをする
間の時間長（まばたき間隔）およびまばたきの回数を測
定することにより、前記指示位置における入力がコマン
ドの選択なのか実行あるいはドラッグなのかに対応させ
るものであり、視線を用いたコンピュータへの情報入力
方法および装置を提供する。

【００１８】本発明は、従来コンピュータ使用者がマウ
スやキーボードで行っている入力手段に代わり、使用者
の視線および音声でコンピュータの入力を可能としてい
ることが従来技術と異なる。

【００１９】図１に、本発明を利用した情報入力装置の
構成例を示す。２は入力処理および表示制御手段、３は
情報処理手段、４はコンピュータの表示手段（以下、デ
ィスプレイという）、５は視線情報検出手段、６は情報
入力の対象となるところの音声処理手段である。

【００２０】視線は、従来のコンピュータの情報入力方
法であるキーボード入力やマウス入力に対する作業では
入力手段として全く使用されていない。また、音声も、
従来のコンピュータの情報入力手段としてほとんど利用
されていない。視線情報検出手段５では、視線情報とし
て視線位置，移動距離，移動速度，注視時間，瞳孔径，
まばたきの回数及びまばたきの間隔の測定を行ってい
る。また、入力処理および表示制御手段２は、視線位
置，移動距離，移動速度，注視時間，瞳孔径，まばたき
の回数及びまばたきの間隔を利用してポインタの位置や
移動状態かどうか、あるいはコンピュータの入力である
選択，実行及びドラッグのうちいずれであるかを判断す
る。音声を入力とする音声処理手段６では、音声を認識
し、認識された音声を入力信号に変換することで、コン
ピュータへの音声入力を可能とする。これにより、手が
使えない状態でもコンピュータへの入力を可能とする。
また、視線入力だけでなく音声入力も用いることによ
り、視線入力のみによる疲労を軽減することができる。

【００２１】

【実施例】

〔実施例１〕本発明における第１の実施例について説明
する。本実施例は、上述した図１に示す構成によって視
線情報入力で、通常のマウスによる入力を代替させるも
のである。また、音声による入力で、通常のキーボード
による入力を代替させるものである。

【００２２】図１において、２は入力処理および表示制
御手段、３は情報処理手段、４は表示手段（ディスプレ
イ）、５は視線情報検出手段、６は音声処理手段であ
り、２〜４は図１０に示すものと対応する。視線情報検
出手段５は、図示はしていないが、光学系装置，ビデオ
カメラ及びミラーからなり、光学系装置からコンピュー
タ使用者の瞳孔に送出された赤外線を、ディスプレイ４
の横に設置しているミラーで反射し、その反射光を再度
光学系装置に取り込む。また、ビデオカメラは被験者
（コンピュータの操作者）の見ているディスプレイ４を
映すものであり、視線の位置と画面の位置を一致させる
ためのものである。

【００２３】視線位置の検出技術は既にあり、文献とし
ては、坂口，中野，山本：“自動車運転中のドライバの
視線検出”，信学技報ＰＲＵ９５−２８，ｐｐ５７−６
４，１９９５などがある。また、製品化された視線検出
装置の例としては、ＡＳＬ（Applied Science Laborato
ries）社製の、「アイトラッキングシステム４２５０Ｒ
リモート式光学系装置」などがある。本発明において、
これらの技術を用いることが可能である。

【００２４】視線位置の検出精度は、真正眼球位置付近
における、真の視線位置と測定視線位置の誤差は１度以
下、また、視野の周辺部における同誤差は２度以下であ
る。したがって、ディスプレイまでの距離を３０ｃｍと
すると、視野の周辺部では、

【００２５】

【数１】３０ｃｍ×ｔａｎ２度＝１．０４７ｃｍ すなわち、プラスマイナス約１ｃｍの誤差である。した
がって２ｃｍ程度の大きさのアイコンであれば、視線位
置を検出することによって操作者がそのアイコンを注視
しているかどうか検出できる。また、後述するように検
出した視線位置を視線ポインタでディスプレイ４に表示
させるようにすると、操作者からのフィードバックが可
能となるので、さらに小さなアイコンでも指示可能とな
る。

【００２６】図２は、音声および視線入力を行うための
起動アイコンおよび終了アイコンのイメージである。音
声入力起動アイコンをクリックすると、音声入力が可能
になり、同時に音声入力終了アイコンが表示される。音
声入力終了アイコンをクリックすると音声入力を終了す
る。同様に、視線入力起動アイコンをクリックすると視
線入力が可能となり、ポインタがディスプレイ４上の視
線の位置となり、同時に視線入力終了アイコンが表示さ
れる。視線入力終了アイコンをクリックすると、視線入
力を終了する。音声入力起動アイコンおよび視線入力起
動アイコンは、コンピュータの起動時に画面上に現れる
ものとする。これらのアイコンを用意することにより、
音声や視線による入力を必要とするときだけ利用するこ
とができる。

【００２７】音声を入力に変換するためには、コンピュ
ータのマイク入力から入力された音声を音声処理手段６
を通して入力処理および表示制御手段２に送り、音声を
入力情報に変換する。マイクは、コンピュータに付属し
ているマイク入力に接続できるものを用い、音声入力用
の特別なマイクは必要としない。

【００２８】音声の入力情報は、主としてキーボードの
機能を代替するものであり、アルファベット入力やかな
入力による文章や、キーパッド入力による数値などであ
る。

【００２９】音声入力用にあらかじめ用意されているコ
マンドとしては、ファイル管理に必要な「複製」，「削
除」，「名前変更」といったコマンドや、ファイル内容
の編集に必要な「入力」，「変換」，「コピー」，「ペ
ースト」，「消去」，「置換・検索」といったコマンド
がある。これらのコマンドについては、音声で発声する
とコマンドを実行できる。

【００３０】音声入力による文字や数字の入力には、
「入力」コマンドを用いる。「入力」コマンドが実行さ
れると、続いて発声されるものが数字あるいは文字入力
とみなされ、最も近い文字や数字に変換される。また、
ユーザがよく使う文字やコマンドについては、ユーザに
より単語登録やコマンド登録ができるものとする。

【００３１】さらに、ファイル操作や編集操作などの基
本的な操作については、音声コマンドとしてあらかじめ
登録されている言葉を用いることにより、これらの操作
も音声入力により可能となる音声認識の技術も既にある
ので、その詳細は省略する。

【００３２】視線の入力情報は、主としてマウス機能の
代替をするものであり、ポインタの移動や、選択，実
行，ドラッグといった機能を可能にするものである。

【００３３】視線を入力に変換するためには、視線情報
検出手段５を通して得られる視線情報を入力処理および
表示制御手段２に送り、視線位置，移動距離，移動速
度，注視時間，瞳孔径，またばきの回数及びまたばきの
間隔から、ポインタの位置や移動状態かどうか、さらに
「選択」，「実行」、および「ドラッグ」のうち、どの
入力制御を行うかを判別する。その結果を表示手段４に
出力し、情報処理手段３に引き渡す。

【００３４】視線をマウス機能の代替入力とするための
情報の流れを図３〜図５のフローチャートに示す。な
お、（１）〜（２１）は各ステップを示す。

【００３５】図３において、視線入力起動アイコンを起
動すると（１）、ポインタ上の視線情報の収集を開始す
る。まず、初期設定として視線の位置と画面の位置を一
致させるために校正を行う（２）。校正は、画面上に中
央および四隅を中心とした数カ所（５カ所もしくは９カ
所）の位置を画面上の表示に従い、使用者が凝視し、視
線の特性を登録する。これにより、使用者の視覚特性を
コンピュータに認識させる。ただし、校正はコンピュー
タを起動する度に要求されるが、同じ利用者が続けて使
用する場合は校正を省略できるものとする。

【００３６】次に、実際のコンピュータ入力に対する視
線情報の収集を開始する（３）。処理の開始時におい
て、コンピュータへの入力状態は図中の「中立状態」で
ある（４）。

【００３７】視線による入力の可能な期間中は、視線位
置の検出を常に行っておく。ただし、人間の視線の特性
として、以下に示す固視微動があり、これへの対処を以
下のように行う。

【００３８】固視微動とは、人間の目は絶えず動いてお
り、一点を凝視したときでも自覚はされないが小さな微
動を続けており、この小さな微動のことである。したが
って、本発明では、視線位置の停止とは、視線の移動速
度が予め決められた一定値（しきい値ａ）より小さいと
きに、視線が停止しているとみなす。しきい値ａの具体
値を参考までに挙げると、５度／秒である。この値は使
用者により設定できるものとする。

【００３９】以上は、本発明における視線位置検出処理
の基本であって、常にこの処理を行っている。以上を前
提として、図３〜図５に基づいて、通常のマウスからの
入力を代替する手順について説明する。

【００４０】本発明では、ディスプレイ４上における、
（イ）アイコン等の選択（通常のマウスでは１回クリッ
クで実現される）、（ロ）アイコンに対応する処理の実
行（通常のマウスでは２回クリックで実行される）、
（ハ）アイコン等をドラッグしての移動を以下のように
実現する。

【００４１】（イ）アイコン等の選択 視線があるアイコンの上にきて（５）、まばたき１回し
たら（６）、そのアイコンを選択したものとする
（９）。このとき、視線の移動速度が上記のしきい値ａ
より小さいこと、すなわち停止しているとみなされるこ
とが前提である。また、まばたきが真に１回だけなの
か、２回のまばたきの内の最初のまばたきなのかを検出
する必要があるが、それは上記のまばたきの後、一定時
間ｂまばたきがなければ真に１回だけのまばたきである
と見なすことで（７）、解決できる。一定時間ｂの具体
的な値は、たとえば０．５秒であり、利用者により設定
できるものとする（１０）。この操作で選択されたアイ
コン等は、選択されたまま保持されるものとし、次に、
視線位置が前記アイコン以外の場所でまばたきを検出し
たときに選択情報が解除されるものとする（１３）〜
（１６）。

【００４２】（ロ）アイコンに対応する処理の実行 （イ）と同様にして、視線があるアイコンの上にきて停
止したとみなされ、まばたきを一定時間ｂ内に２回した
ら、そのアイコンに対応する処理またはソフトウエアの
実行とする（７），（８）。

【００４３】（ハ）アイコン等のドラッグ ドラッグしようとするアイコンの上に視線を停止させ、
１回まばたきをして選択状態にさせ（上記ステップ
（１）の処理と同じ）、さらに視線位置を一定時間以上
動かすことなく次のまばたきをしたときに、当該アイコ
ンがドラッグされたものとする（１１），（１２）。ド
ラッグされたアイコンの移動は、そのアイコン上に視線
位置をもって来て（１７）、視線を動かすことで（１
８）、その動きに追随させて移動させる（１９）。ただ
し、視線の動きが一定の速度のしきい値ｃ以上のとき
は、視線位置に追随させてのアイコンの動きを行わない
ことにする。しきい値ｃの具体値を参考までに挙げる
と、一度ドラッグされたアイコンは、視線位置が前記ア
イコン以外の場所で、まばたきを検出したときにドラッ
グ状態が解除されるものとし（２０），（２１）、それ
までは、たとえ視線位置が前記アイコン以外の位置に来
ても解除されないものとする。

【００４４】このような処理をすることで、ドラッグし
たアイコンの移動を視線の動きで行う際に、過度の集中
を要することもなくなる。

【００４５】なお、ドラッグの解除については前述した
とおりである。また、まばたきの検出は、まばたきで瞳
孔が閉じるときに視線情報として瞳孔径のデータが取れ
ないことを利用し、瞳孔径データが取れない時間が２０
０ｍｓ以下である場合を、まばたきしたと判断する。

【００４６】このような構造になっているので、コンピ
ュータの入力装置であるマウスの代わりに視線が使用で
きるので、指を使わなくても入力ができるようになる。
その効果としては、コンピュータの入力端末が特に必要
ない、使用者のユーザインタフェースの負担が少ない、
指の動きが不自由なユーザが使用しやすいことが挙げら
れる。

【００４７】〔実施例２〕図６は、本発明の第２の実施
例を説明する図であって、実施例１の場合に比べ、視線
による入力を実施例１のような従来のマウス入力の代替
としてのみ使うものではなく、キーボード入力の代替品
としても使うことであり、この場合は音声入力は行わな
い。構成は図１と同様であるが、音声入力を行わないの
でマイク入力は使わない。視線入力起動アイコンを起動
すると、ポインタ上に視線情報の収集を開始する。ま
ず、初期設定として視線の位置と両面の位置を一致させ
るために校正を行う。校正は、画面上に中央および四隅
を中心とした数カ所（５カ所もしくは９カ所）の位置を
画面上の表示に従い、使用者が凝視し、視線の特性を登
録する。これにより、使用者の視覚特性をコンピュータ
に認識させる。ただし、校正はコンピュータを起動する
度に要求されるが、同じ利用者が続けて使用する場合は
校正を省略できるものとする。

【００４８】次に、実際のコンピュータ入力に対する視
線の収集を開始する。画面上には、キーボード入力を可
能とするアイコンがあり、これを起動すると、図６の
（ａ）の状態から（ｂ）のようにキーボードが画面上に
現れる。この画面キーボード上のキーを視線によって選
択することで、キーボード入力を可能にする。この場合
は、従来の使い方であるキーボード端末の上に指を置い
て入力する代わりに、視線を画面上のキーボードのキー
の上に置くことで機能を代替する。視線によるキーボー
ド入力注視するときは、画面上に表示されているキーボ
ードの最上段左にある終了ボタンを選択することによ
り、終了できる。

【００４９】図７に視線をキーボード機能の代替入力と
するための情報の流れをフローチャートで示す。なお、
（３１）〜（３７）は各ステップを示す。コンピュータ
が起動すると、画面中央にポインタおよび視線入力起動
アイコンが表示される。視線入力起動アイコンをクリッ
クすると（３１）、ポインタ上の視線の収集を開始す
る。まず、校正を行う（３２）。校正が終了すると入力
情報の分析に入る。まず、視線が静止しているか移動し
ているかを測定する（３３）。移動速度（単位時間あた
りの移動角度）ｖ１がしきい値ａより小さいと（３
４）、その位置に視線が静止状態であるものと判定し、
しきい値ａより大きいと移動状態であると判定する（３
７）。移動状態（Ｎｏの方向）では、測定時間単位で、
移動角度および移動距離を測定することにより位置検出
を行う。一方、静止状態（Ｙｅｓの方向）では、次にま
ばたきをしたかどうかを検出する。まばたきをした状態
（Ｙｅｓの方向）は、その位置にあるコマンドを実行す
る（３５），（３６）。一方、まばたきをしなかった場
合（Ｎｏの方向）は、再度、視線位置，注視時間，瞳孔
径，移動速度および移動距離を測定する。マウス機能と
キーボード機能の両者を視線で代替する場合は、使用者
の校正は１回のみとする。

【００５０】このような構造になっているから、指を使
わず、実施例１の場合より直接文字や数字が入力できる
という点で、コンピュータでできる作業内容が拡大す
る。その効果としては、指を触れずに現在のコンピュー
タ操作と同等の作業が行え、使用者のユーザインタフェ
ースの負担が少ないことが挙げられる。

【００５１】〔実施例３〕図８は本発明の第３の実施例
を説明する図であって、１Ａは入力手段のうちのキーボ
ード、２は入力処理および表示制御手段、３は情報処理
手段、４は表示手段、５は視線情報検出手段である。キ
ーボード１Ａは従来の使い方と同様で、指による入力と
し、マウスの機能のみ視線により代替する。このような
構造になっているから、従来のコンピュータ作業におけ
るマウス機能を視線で代替することにより、キーボード
とマウスという従来使われていた２種類の入力装置から
指先からはキーボード入力のみ、あとの入力は視線によ
り入力というように、指先を用いた入力装置を１種類に
できる。その効果としては、入力端末の簡素化、ユーザ
の入力端末使用に関する煩雑さからの開放がある。

【００５２】〔実施例４〕図９は、本発明の第４の実施
例を説明する図であって、１Ｂは入力手段のうちのマウ
ス、２〜４，６は図１の実施例と同じである。マウス１
Ｂは従来の使い方と同様で、指による入力とし、キーボ
ードの機能のみ音声により代替する。このような構造に
なっているから、従来のコンピュータ作業におけるキー
ボード機能を音声で代替することにより、キーボードと
マウスという従来使われていた２種類の入力装置から指
先からはマウス入力のみ、あとの入力は音声による入力
というように、指先を用いた入力装置を１種類にでき
る。その効果としては、入力端末の簡素化、ユーザの入
力端末使用に関する煩雑さからの開放などがある。

【００５３】音声入力用にあらかじめ用意されているコ
マンドとしては、ファイル管理に必要な「複製」，「削
除」，「名前変更」といったコマンドや、ファイル内容
の編集に必要な「入力」，「変換」，「コピー」，「ペ
ースト」，「消去」，「置換・検索」といったコマンド
がある。これらのコマンドについては、音声で発声する
とコマンドを実行できる。

【００５４】音声入力による文字や数字の入力には、
「入力」コマンドを用いる。「入力」コマンドが実行さ
れると、続いて発声されるものが数字あるいは文字入力
とみなされ、最も近い文字や数字に変換される。また、
ユーザがよく使う文字やコマンドについては、ユーザに
より単語登録やコマンド登録ができるものとする。

【００５５】

【発明の効果】以上説明したように、本発明による情報
入力方法および装置により音声および視線でコンピュー
タへの入力が可能であるから、コンピュータのユーザイ
ンタフェースがより容易になり、入力端末の簡易化が図
られ、例えば指に障害を持つ人や病気等で寝たきりの人
でもキーボードやマウスの操作なしにコンピュータの操
作が可能になるという利点がある。

【００５６】また、本発明では、視線情報と音声情報の
両方を併用しているので、視線情報だけによる入力で
は、あちこち移動して場所を示すのは有効であるが、文
字，数字などの連続入力の際には、疲労がたまるという
欠点と、音声情報だけによる入力では、文字や数字の連
続入力には有効であるが、場所を細かく示すのに不便、
というそれぞれの欠点を相補うことができる。

【００５７】また、音声による入力だけでは場所を細か
く示すのには不便であるため、任意の図形の描画は難し
かったが、視線入力を併用することにより、容易に図形
描画ができる。

【００５８】さらに、視線入力だけでは、文字や数字を
画面上のキーボードから入力する際に細かい場所の移動
を繰返すことによる疲労が考えられるが、文字や数字の
入力の際に音声入力を併用することによって疲労を軽減
できるという効果を奏する。

【図面の簡単な説明】

【図１】本発明にかかる情報入力装置の一実施例の構成
を示すブロック図である。

【図２】図１の実施例で用いる画面上に表示される音声
および視線入力用の起動アイコンおよび終了アイコンの
一例を示すイメージ図である。

【図３】本発明にかかる情報入力方法の一実施例を説明
するためのフローチャートである。

【図４】本発明にかかる情報入力方法の一実施例を説明
するためのフローチャートである。

【図５】本発明にかかる情報入力方法の一実施例を説明
するためのフローチャートである。

【図６】本発明において画面上からキーボード入力を行
う際のキーボード表示のイメージ図である。

【図７】本発明にかかる情報入力方法の他の実施例を説
明するためのフローチャートである

【図８】本発明にかかる情報入力装置の他の実施例の構
成を示すブロック図である。

【図９】本発明にかかる情報入力装置のさらに他の実施
例の構成を示すブロック図である。

【図１０】従来のコンピュータの構成例を示したブロッ
ク図である。

【符号の説明】

１ 入力手段 ２ 入力処理および表示制御手段 ３ 情報処理手段 ４ 表示手段 ５ 視線情報検出手段 ６ 情報処理手段

Claims (10)

【特許請求の範囲】
1. 【請求項１】 コンピュータへの情報入力方法であっ
   て、 ディスプレイ上の視線位置を検出し、前記ディスプレイ
   上に前記検出した視線位置を表示するとともに、前記視
   線位置および視線の動きに応じて定まる情報をコンピュ
   ータへの入力信号とすることを特徴とする情報入力方
   法。
2. 【請求項２】 コンピュータへの情報入力方法であっ
   て、 ディスプレイ上の視線位置を検出し、前記ディスプレイ
   上に前記検出した視線位置を表示するとともに、前記視
   線位置および視線の動きに応じて定まる情報をコンピュ
   ータへの入力信号とし、さらに入力された音声を認識
   し、前記音声によって定まる情報を前記コンピュータへ
   の入力信号とすることを特徴とする情報入力方法。
3. 【請求項３】 請求項１または請求項２記載のコンピュ
   ータへの情報入力方法において、 視線位置がアイコン上に停止したときの、まばたきの回
   数と間隔に応じて、前記アイコンの選択，実行，ドラッ
   グのための制御信号を対応させておき、前記視線位置が
   アイコン上に停止し、まばたきがなされたとき、前記ま
   ばたきの回数と間隔に対応する制御信号をコンピュータ
   に入力し、アイコンがドラッグされているときの視線位
   置の動きに追随して、前記ドラッグされたアイコンの位
   置を移動させることを特徴とする情報入力方法。
4. 【請求項４】 請求項１または請求項２記載の情報入力
   方法において、 キーボードをディスプレイ上に表示し、 前記ディスプレイ上のキーボードにおいて視線位置にあ
   る文字を検出し、予め定めた視線の動きを検出したとき
   に、前記検出されている視線位置にある文字を、コンピ
   ュータへの入力情報とすることを特徴とする情報入力方
   法。
5. 【請求項５】 請求項２記載の情報入力方法において、 有限個の文字またはコマンドに対応する音声を事前に登
   録しておき、音声入力があった場合、前記入力された音
   声を、前記予め登録されている有限個の文字またはコマ
   ンドに対応する音声と比較し、最も近い文字またはコマ
   ンドを、コンピュータへの入力情報とすることを特徴と
   する情報入力方法。
6. 【請求項６】 ディスプレイに注がれた視線の位置およ
   び動きを検出する視線情報検出手段と、 前記視線情報検出手段にて検出された視線の位置を、デ
   ィスプレイ上に表示する視線位置表示手段と、 前記検出された視線位置または動きに応じて定まる情報
   をコンピュータの入力信号として入力する視線対応情報
   入力手段と、を有することを特徴とする情報入力装置。
7. 【請求項７】 音声を認識する音声処理手段と、 前記認識された音声によって定まる情報を前記コンピュ
   ータへの入力信号として入力する音声対応情報入力手段
   と、を有することを特徴とする情報入力装置。
8. 【請求項８】 請求項６記載の情報入力装置において、 視線位置がアイコン上に停止したときの、まばたきの回
   数と間隔に応じて、前記アイコンの選択，実行，ドラッ
   グのための制御信号を対応させ、対応する制御信号をコ
   ンピュータに入力する制御信号入力手段と、 アイコンがドラッグされているときの視線位置の動きに
   付随して、前記ドラッグされたアイコンの位置を移動さ
   せる移動手段と、を有することを特徴とする情報入力装
   置。
9. 【請求項９】 請求項６記載の情報入力装置において、 キーボードをディスプレイ上に表示するキーボード表示
   手段と、 前記ディスプレイ上のキーボードにおいて視線位置にあ
   る文字を検出し、予め定めた視線の動きを検出したとき
   に、前記検出されている視線位置にある文字を、コンピ
   ュータへの入力情報とするキーボード対応情報入力手段
   と、を有することを特徴とする情報入力装置。
10. 【請求項１０】 請求項７記載の情報入力装置におい
    て、 事前に登録された有限個の文字またはコマンドに対応す
    る音声と、入力された音声とを比較する比較手段と、最
    も近い文字またはコマンドを、コンピュータへの入力情
    報とする登録情報入力手段と、を有することを特徴とす
    る情報入力装置。