JPH08314619A - ペン入力型電子装置及びその制御方法 - Google Patents

Abstract

(57)【要約】 【目的】 軌跡の誤入力や誤認識があった場合に簡単な
操作で修正することができるペン入力型電子装置及びそ
の制御方法を提供する。 【構成】 既に入力された軌跡（第１の軌跡）が表示さ
れている部分をホットポイントとするコマンド実行中止
ジェスチャ（第２の軌跡）が入力されると、第１の軌跡
の消去を中断する（ステップ７０３）。つぎに第１の軌
跡を移動させるジェスチャを実行し、任意のオブジェク
ト上まで移動した後（ステップ７０４〜７０６）、コマ
ンド実行開始ジェスチャを実行すると、移動先のオブジ
ェクトに対して第１の軌跡に対応するコマンドを再実行
する（ステップ７０７、７０８、図６のステップ６０
６）。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は、ペンにより軌跡を入力
して操作を行うペン入力型電子装置及びその制御方法に
関する。

【０００２】

【従来の技術】ペン入力型電子装置においては、入力さ
れた軌跡に対してジェスチャ認識を行い、ジェスチャで
あると判断されればそのジェスチャに対応するコマンド
が実行される。

【０００３】

【発明が解決しようとする課題】しかしながら、ジェス
チャが誤認識された場合には、操作者の意思とは違った
コマンドが実行されてしまうことになる。また、ジェス
チャのホットポイント（操作対象位置）がずれてしまっ
た場合には、ホットポイントにオブジェクトがなければ
ジェスチャが無効となり、ホットポイントに別のオブジ
ェクトがあればそれに対してコマンドが実行されるとい
う問題もある。

【０００４】本発明はこのような点に着目してなされた
ものであり、軌跡の誤入力や誤認識があった場合に簡単
な操作で修正することができるペン入力型電子装置及び
その制御方法を提供することを目的とする。

【０００５】

【課題を解決するための手段】上記目的を達成するため
本発明は、軌跡を入力するための入力手段と、該入力手
段により入力された軌跡をジェスチャとして認識し、対
応するコマンドに変換する認識手段とを備えたペン入力
型電子装置において、前記入力手段により入力された軌
跡を表示する表示手段と、前記軌跡の入力時点からの経
過時間を計測する計時手段と、該計測した経過時間が所
定時間を越えたときは、前記表示手段に表示されている
軌跡を消去する消去手段と、前記表示手段に第１の軌跡
が表示されているされている間に、その第１の軌跡を対
象として第２の軌跡が入力されたときは、その第２の軌
跡に対応するコマンドを実行する実行手段とを設けるよ
うにしたものである。

【０００６】前記第２の軌跡に対応するコマンドは、前
記第１の軌跡に対応するコマンドを無効とするコマン
ド、あるいは前記第１の軌跡を移動させるコマンドとす
ることが望ましい。

【０００７】同じ目的を達成するため本発明は、軌跡を
入力するための入力手段と、該入力手段により入力され
た軌跡をジェスチャとして認識し、対応するコマンドに
変換する認識手段とを備えたペン入力型電子装置の制御
方法において、前記入力手段により入力された軌跡を表
示し、前記軌跡の入力時点からの経過時間を計測し、該
計測した経過時間が所定時間を越えたときは、前記表示
手段に表示されている前記軌跡を消去し、前記表示手段
に第１の軌跡が表示されているされている間に、その第
１の軌跡を対象として第２の軌跡が入力されたときは、
その第２の軌跡に対応するコマンドを実行するようにし
たものである。

【０００８】

【作用】請求項１のペン入力型電子装置又は請求項４の
制御方法によれば、入力手段により入力された軌跡が表
示され、前記軌跡の入力時点からの経過時間が計測さ
れ、該計測した経過時間が所定時間を越えたときは、表
示手段に表示されている前記軌跡が消去され、表示手段
に第１の軌跡が表示されているされている間に、その第
１の軌跡を対象として第２の軌跡が入力されたときは、
その第２の軌跡に対応するコマンドが実行される。

【０００９】

【実施例】以下本発明の実施例を図面を参照して説明す
る。

【００１０】（第１の実施例）図１は本発明の第１の実
施例にかかるペン入力型電子装置の機能ブロック図であ
る。

【００１１】同図において、１は軌跡データを入力する
ための軌跡入力部、２は軌跡入力部１から送られた軌跡
データの管理を行う軌跡データ管理部、３は操作対象や
軌跡を表示する表示部、４は表示部３に軌跡、或いはオ
ブジェクト等の描画命令を発行する表示制御部、５は入
力された軌跡をジェスチャとして認識し、対応するコマ
ンドに変換するためのジェスチャ認識部、６はジェスチ
ャ認識部４よりコマンドとホットポイント（コマンドを
実行する位置（操作対象位置）、例えば×であれば２本
の線のクロスする点）の座標を受け取り、コマンドを実
行するためのコマンド実行制御部である。

【００１２】なお、図１に示した装置は、実際には例え
ばプログラムに従って各種の演算処理を行うＣＰＵ、プ
ログラム等を格納するＲＯＭ、ＣＰＵによる演算に使用
するＲＡＭ、入力用ペン、ディジタイザ、液晶ディスプ
レイ等により構成され、上述し各機能ブロックの機能が
実現される。

【００１３】図２、３および４は、軌跡データ管理部２
における処理のフローチャートであり、この処理は他の
構成要素における処理と平行して行われる。

【００１４】まず、ステップ２１において、表示停止フ
ラグがセットされているかどうかを判別する。なお、表
示停止フラグは、図１のコマンド実行制御部６によりセ
ット・リセットされるが、表示が残っているジェスチャ
に対するジェスチャ入力が行われているときにはセット
され、オブジェクトに対するジェスチャ入力のときには
リセットされている。表示停止フラグがセットされてい
なければ、図４のステップ４１を実行するが、これ以後
の処理については後述する。

【００１５】一方、表示停止フラグがセットされている
場合にはステップ２２において軌跡データ管理部２が表
示制御すべき時間情報付座標データがあるかどうかを判
別する。ある場合には図３のステップ３１以後の処理を
行う。

【００１６】図３は、表示が残っているジェスチャに対
するジェスチャ入力の軌跡表示の処理の流れを示してい
る。まず、ステップ３１では軌跡入力部１からの入力が
あるか否かを判別する。入力がある場合には、その座標
データをジェスチャ認識部５に送り（ステップ３２）、
軌跡データ管理部２においてもそれを時間情報のない座
標データとし保持する（ステップＳ３３）。この時間情
報のない座標データは、図５（ｂ）に示すように時間情
報フラグ（＝０）、Ｘ座標及びＹ座標からなる。そして
ステップ３４においてその座標の表示部３上での位置に
表示を行うべく、表示制御部４に表示命令と座標データ
を送る。これらステップ３２から３４により表示が残っ
ているジェスチャに対するジェスチャ入力の軌跡が表示
される。

【００１７】一方、ステップ３１において入力がないと
判断された場合には、ステップ３５において時間情報を
持たない座標データ群とそれらの消去命令を表示制御部
４に送り、ステップ３６において時間情報を持たない座
標データの消去を行う。これらステップ３５、３６によ
り表示が残っているジェスチャに対するジェスチャ入力
の軌跡の消去を行う。ステップ３４またはステップ３６
終了後、図２のステップ２３に進む。

【００１８】ステップ２３では移動コマンド実行フラグ
がセットされているかどうかを判別する。移動コマンド
実行フラグは、図１のコマンド実行制御部６によりセッ
ト・リセットされるが、表示が残っているジェスチャに
対する移動ジェスチャ入力が行われているときにはセッ
トされ、それ以外のときにはリセットされている。移動
コマンド実行フラグがセットされている場合には、移動
対象のジェスチャの軌跡も移動して表示しなくてならな
いため、ステップ２４において保持している座標データ
の変更を行い、ステップ２５において表示制御部４に対
し表示変更命令を送る。

【００１９】図４は、通常のオブジェクトに対するジェ
スチャ入力の際に入力された軌跡の表示に関する処理の
流れを示している。まずステップ４１において軌跡入力
部１に入力があるかどうかを判別する。ある場合には、
ステップ４２において座標データをジェスチャ認識部５
に送る。次にステップ４３において現在の時刻を取得
し、座標値とともに時間情報付座標データとして保持す
る。この時間情報付座標データは、図５（ａ）に示すよ
うに、時間情報フラグ（＝１）、Ｘ座標、Ｙ座標、入力
時刻及び時間差からなる。ステップ４４では、座標値と
その座標の表示命令を表示制御部４に送り、入力された
点を表示部３上に表示する。

【００２０】一方、ステップ４１において入力がないと
判断された場合には、まずステップ４５で現在の時刻を
取得し、保持している時間情報付座標データの時刻との
差を計算し、その結果を時間情報付座標データの時間差
フィールドに格納する。次のステップ４５では時間差フ
ィールドをチェックし、設定されているしきい値（所定
時間）より大きいものがあるかどうかを調べる。ある場
合にはステップ４７において、表示制御部４に対ししき
い値を超える座標の消去を指示し、ステップ４８では軌
跡データ管理部２で保持している時間情報付座標データ
の消去を行う。

【００２１】以上の処理により、オブジェクトに対する
ジェスチャ入力の軌跡を一定時間表示部３上に表示させ
ることができる。なお、ステップ４４、４８終了後図２
のステップ２１に戻る。

【００２２】次に、図６及び図７を用いてコマンド実行
制御部６における処理の流れについて説明する。なお、
以下の説明ではコマンド実行中止コマンド、軌跡移動コ
マンド、コマンド実行開始コマンドの３つのコマンドを
「実行制御コマンド」と呼ぶ。

【００２３】まず、ステップ６０１においてＵｎｄｏコ
マンド（対象となるコマンドの実行前の状態に戻すコマ
ンド）かどうかを判断する。Ｕｎｄｏコマンドではない
場合には、次にステップ６０２においてジェスチャ認識
部５から送られてきたコマンドが実行制御コマンドであ
るか否かの判断を行う。実行制御コマンドでない場合に
は、ステップ６０３においてコマンドとホットポイント
を保存する。ステップ６０４ではホットポイントにオブ
ジェクトがあるかどうかを判断し、ある場合にはステッ
プ６０５においてコマンド実行前のオブジェクトの状態
を保存し、ステップ６０６においてコマンドを実行す
る。

【００２４】ステップ６０２において実行制御コマンド
であると判断された場合には、図７のステップ７０１に
おいてそれらのホットポイントが、表示の残っている軌
跡（軌跡データ管理部２で保持している時間情報付座標
データ群）上にあるか否か判別する。ステップ７０１の
答がＹｅｓのときには実行制御コマンドごとに処理が異
なってくる。まずコマンド実行中止コマンドの場合に
は、ステップ７０３で表示停止フラグをセットする。移
動コマンドの場合、移動開始時に移動コマンド実行フラ
グをセットし（ステップ７０４）、移動終了時に移動コ
マンド実行フラグをリセットし（ステップ７０５）、Ｘ
方向、Ｙ方向にそれぞれどれだけ移動したかを算出する
（ステップ７０６）。コマンド実行開始コマンドの場合
には、まずステップ７０７において、表示停止フラグを
リセットしておく。次にステップ７０８では、ステップ
７０６において算出した数値を基にホットポイントを計
算し、そのホットポイントを基に前述した図６のステッ
プ６０４からの処理を行う。

【００２５】図６のステップ６０１において、Ｕｎｄｏ
コマンドであると判断された場合にはステップ６０７に
おいてＵｎｄｏコマンドのホットポイントにオブジェク
トがあるか否かを判断し、ある場合にはステップ６０５
で保存したオブジェクトの状態を取り出し（ステップ６
０８）、表示等の変更を行う（ステップ６０９）。一
方、ホットポイントにオブジェクトがないときには何も
実行しない。

【００２６】図１に示した構成で、以上説明した軌跡デ
ータ管理部２、コマンド実行制御部６の処理を行うこと
により以下のような動作を実現することができる。

【００２７】まず、オブジェクトに対するジェスチャ入
力があった場合、軌跡入力部１に入力が行われ、軌跡入
力部１から軌跡データ管理部２に座標データが送られ
る。上述したように、軌跡データ管理部２からは表示制
御部４とジェスチャ認識部５に座標データが送られる。
ジェスチャ認識部５では送られてきた一連の座標データ
を基にジェスチャ認識を行い、結果としてコマンドとホ
ットポイントをコマンド実行制御部６に送る。コマンド
実行制御部６ではホットポイントにオブジェクトがあれ
ば、そのオブジェクトに対しコマンドを実行する（図
６、ステップ６０４〜６０６）。

【００２８】以上の処理が終了していても、入力してか
らの経過時間がしきい値以下であれば、軌跡は表示部３
に表示された状態になっている。そして入力してからの
経過時間がしきい値を超えた点から順に表示部３から消
える（図４、ステップ４６〜４８）。このとき、軌跡が
完全に消える前に表示が残っている部分にコマンド実行
中止ジェスチャを入力した場合、コマンド実行制御部６
は軌跡データ管理部２内の表示停止フラグをセットし
（図７、ステップ７０３）、これによりコマンドの実行
中、あるいはコマンドの実行を終わったジェスチャの軌
跡の消去を中断する。

【００２９】次に軌跡の消去を中断しているジェスチャ
に対し移動ジェスチャを実行すると、移動ジェスチャに
追随して残っている軌跡が表示される（図７、ステップ
７０２，７０４）。そして任意のオブジェクト上まで移
動した後、コマンド実行開始ジェスチャを行うことによ
り、移動されたジェスチャにより実行されたコマンド
を、移動先のオブジェクトに対して実行することができ
る（図７、ステップ７０２，７０７，７０８）。

【００３０】以上のように本実施例によれば、軌跡を誤
入力した場合や誤認識された場合には、その軌跡が表示
されている間はＵｎｄｏコマンドによりその軌跡に対応
するコマンドを簡単な操作で無効にすることができる。
また、ジェスチャのホットポイントが操作者の意図した
位置とは違う位置として認識された場合には、その軌跡
が表示されている間に、その軌跡を移動させるコマンド
に対応する軌跡を入力することにより、ホットポイント
を移動させて該当するコマンドを再実行させることがで
き、操作性を向上させることができる。

【００３１】（第２の実施例）第１実施例では、入力さ
れたすべての点に対しその点が入力された時刻を保持
し、一定時間後にその点を消去するようにした。これに
対し、本実施例において、軌跡データをストローク単位
に管理する。すなわち、ストローク入力終了時の時刻を
保持し、それと現在の時刻とを比較し、経過時間がしき
い値より大きければ、その時点でストローク全体を消去
する。このときストロークの表示が残っていれば、第１
実施例と同様にその表示の残っているジェスチャに対し
て、ホットポイントの移動、Ｕｎｄｏ等の操作をするこ
とができるようになる。これを実現するには、第１実施
例における軌跡データ管理部２の処理のうち、図２の
Ｃ、Ｄ間の処理を図８に示す処理に変更することで可能
である。以下、図８を用いて第２実施例について第１実
施例と異なる部分について説明する。

【００３２】図２のステップ２１において、通常のオブ
ジェクトに対するジェスチャ入力であると判断された場
合、まずステップ８０１において軌跡入力部１に入力が
あるか否かを判別する。ある場合には、ステップ８０２
において座標データをジェスチャ認識部５に送る。次に
ステップ８０３において入力中フラグをセットする。ス
テップ８０４では座標データをストロークデータの要素
として保持し、ステップ８０５では、座標値とその座標
の表示命令を表示制御部４に送り、入力された点を表示
部３上に表示する。

【００３３】一方、ステップ８０１において入力がない
と判断された場合には、まずステップ８０６で入力中フ
ラグがセットされているかどうかを見て、入力フラグが
セットされている場合には、ステップ８０７で入力中フ
ラグをリセットし、ステップ８０８で現在の時刻をスト
ローク入力終了時刻としてストロークデータに付加す
る。入力中フラグがセットされていない場合には、ステ
ップ８０９において、現在の時刻を取得し、保持してい
るストロークの入力終了時刻との差（経過時間）を計算
する。ステップ８０１では、ステップ８０９で計算され
た値がしきい値より大きいかどうかを判断し、大きいス
トロークに対しては、ステップ８１１において表示制御
部４に対し軌跡（を構成する座標）の消去を指示し、ス
テップ８１２において保持しているストロークデータの
消去を行う。なお、ステップ８１０の答が否定（ＮＯ）
のときは直ちに図２のステップ２１に進む。

【００３４】以上の処理により、オブジェクトに対する
ジェスチャ入力の軌跡を一定時間表示部３上に表示さ
せ、一定時間後にストローク単位で表示部３上から消去
することができる。なお、ステップ８０５，８０８，８
１２終了後は図２のステップ２１に進む。

【００３５】

【発明の効果】以上詳述したように本発明によれば、入
力手段により入力された軌跡が表示され、前記軌跡の入
力時点からの経過時間が計測され、該計測した経過時間
が所定時間を越えたときは、表示手段に表示されている
前記軌跡が消去され、表示手段に第１の軌跡が表示され
ているされている間に、その第１の軌跡を対象として第
２の軌跡が入力されたときは、その第２の軌跡に対応す
るコマンドが実行されるので、軌跡を誤入力した場合や
誤認識された場合でも簡単な操作で修正することがで
き、例えば第１の軌跡のホットポイントを移動させて再
実行させることにより、第１の軌跡の再入力が不要とな
り、操作性を向上させることができる。

【図面の簡単な説明】

【図１】本発明の一実施例にかかるペン入力型電子装置
の機能ブロック図である。

【図２】図１の軌跡データ管理部における処理のフロー
チャートである。

【図３】図１の軌跡データ管理部における処理のフロー
チャートである。

【図４】図１の軌跡データ管理部における処理のフロー
チャートである。

【図５】図１の軌跡データ管理部で保持するデータの構
造を示す図である。

【図６】図１のコマンド実行制御部における処理のフロ
ーチャートである。

【図７】図１のコマンド実行制御部における処理のフロ
ーチャートである。

【図８】図１の軌跡データ管理部における処理のフロー
チャートである（第２の実施例）。

【符号の説明】

１ 軌跡入力部 ２ 軌跡データ管理部 ３ 表示部 ４ 表示制御部 ５ ジェスチャ認識部 ６ コマンド実行制御部

Claims (4)

【特許請求の範囲】
1. 【請求項１】 軌跡を入力するための入力手段と、該入
   力手段により入力された軌跡をジェスチャとして認識
   し、対応するコマンドに変換する認識手段とを備えたペ
   ン入力型電子装置において、 前記入力手段により入力された軌跡を表示する表示手段
   と、 前記軌跡の入力時点からの経過時間を計測する計時手段
   と、 該計測した経過時間が所定時間を越えたときは、前記表
   示手段に表示されている軌跡を消去する消去手段と、 前記表示手段に第１の軌跡が表示されているされている
   間に、その第１の軌跡を対象として第２の軌跡が入力さ
   れたときは、その第２の軌跡に対応するコマンドを実行
   する実行手段とを設けたことを特徴とするペン入力型電
   子装置。
2. 【請求項２】 前記第２の軌跡に対応するコマンドは、
   前記第１の軌跡に対応するコマンドを無効とするコマン
   ドであることを特徴とする請求項１記載のペン入力型電
   子装置。
3. 【請求項３】 前記第２の軌跡に対応するコマンドは、
   前記第１の軌跡を移動させるコマンドであることを特徴
   とする請求項１記載のペン入力型電子装置。
4. 【請求項４】 軌跡を入力するための入力手段と、該入
   力手段により入力された軌跡をジェスチャとして認識
   し、対応するコマンドに変換する認識手段とを備えたペ
   ン入力型電子装置の制御方法において、 前記入力手段により入力された軌跡を表示し、 前記軌跡の入力時点からの経過時間を計測し該計測した
   経過時間が所定時間を越えたときは、前記表示手段に表
   示されている前記軌跡を消去し、 前記表示手段に第１の軌跡が表示されているされている
   間に、その第１の軌跡を対象として第２の軌跡が入力さ
   れたときは、その第２の軌跡に対応するコマンドを実行
   することを特徴とするペン入力型電子装置の制御方法。