JPH07141093A

JPH07141093A - 手書き入力装置

Info

Publication number: JPH07141093A
Application number: JP28636793A
Authority: JP
Inventors: Hideo Suzuki; 秀夫鈴木
Original assignee: Casio Computer Co Ltd
Current assignee: Casio Computer Co Ltd
Priority date: 1993-11-16
Filing date: 1993-11-16
Publication date: 1995-06-02

Abstract

(57)【要約】【目的】現在のページ上にウィンドウをオープンし、
さらに手書き操作によって、そのウィンドウを移動させ
たり、該ウィンドウ内のデータをページに取り込むこと
ができるようにする。【構成】入力・表示装置１３の画面上の現在のページ
上に、メモウィンドウ４３がオープンされている。この
とき、手書き操作によって、メモウィンドウ４３のメモ
枠バー４８内の任意の位置を始点として矢印４９を手書
き入力すると（図４（ａ））、その矢印４９の描く方向
と長さに応じてメモウィンドウ４３が移動する（図４
（ｂ））。また、手書き操作によって、上記メモ枠バー
４８上に消去イメージ（×印５０）を記入すると（図４
（ｃ））、メモウィンドウ４３の枠が消滅し、メモウィ
ンドウ４３内に表示されていたイメージデータ（２本の
横線４５）が現在のページ上にコピーされる（図４
（ｄ））。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は、手書き入力によりデー
タ入力を行う手書き入力装置に係り、特に図形イメージ
の手書き入力により画面上で領域指定を行ってイメージ
データの編集を行う手書き入力装置に関する。

【０００２】

【従来の技術】最近、コンピュータにおいてユーザ・イ
ンタフェースの重要性が認識されつつある。これに伴
い、操作性に優れたＧＵＩ（Graphical User Interfac
e；グラフィカル・ユーザ・インタフェース）がユーザ
・インタフェースの主流になりつつある。

【０００３】このインタフェースにおいては、マウスや
キーボード等を操作してアイコン（絵記号）を選択する
ことにより、メニューからコマンド選択、ファイル操
作、プログラムの起動など文字入力以外の全ての操作を
実行できるようになっている。

【０００４】

【発明が解決しようとする課題】しかしながら、従来の
ＧＵＩはマウス操作を基本にしているため操作性の面で
問題があった。すなわち、マウス操作によるアイコン選
択のためのマウス・カーソルの移動はなかなかスムーズ
に行えるものではなく、慣れたとしても結構時間がかか
るものであった。また、マウス操作のためのスペースも
必要であった。このようなポインティング・デバイスと
してのマウスの欠点を克服するものとして、最近、ペン
入力が注目されている。

【０００５】ペン入力は、ユーザが日頃から慣れ親しん
でいるノートや手帳に記入するのと同様な感覚で文字や
図形等を直接表示画面に入力できる。また、アイコンの
選択も直接ペンにより指し示せばよいので非常に簡単・
高速であり、ＧＵＩ用のポインティング・デバイスとし
ても最適である。

【０００６】したがって、従来、キー操作やマウス操作
により行っていた画面上におけるデータの入力・変更な
どの編集を、ペン操作により手書き入力で行えるように
なれば、その編集作業が容易になり効率も向上するもの
と考えられる。また、その作業も従来とは異なり違和感
のない自然な感覚で行えるようになるものと考えられ
る。

【０００７】ところで、このようなペン入力を基本操作
とする手書き入力装置において、現在画面上に開かれて
いるページ上でデータ入力等の操作を行っている最中
に、以前登録したメモ内容や他ページの内容を参照した
い場合がある。この場合、現在のページを閉じることな
く、該ページ上にウィンドウをオープンさせて、そのウ
ィンドウ上に上記所望のデータを表示させることができ
れば、現在の作業を継続して行えるので便利であり、そ
の作業効率も向上するものと考えられる。

【０００８】また、ウィンドウは、一般に、現在のペー
ジ画面に上書き表示されるので、上記のようなウィンド
ウ表示を行った場合、そのウィンドウによりページ上の
一部が隠されてしまい、その部分のデータ内容が分から
なくなってしまうという視認性の問題も生じる。したが
って、ページ上にオープンされているウィンドウを画面
上の任意の位置に移動できるようにすることも望まれ
る。

【０００９】また、さらに、上記ウィンドウ内に表示さ
れているデータを、そのウィンドウが上書きされている
ページ内に取り込むことが出来れば、データのコピーな
どの編集作業等においてたいへん便利である。

【００１０】第１の発明の課題は、簡単な手書き操作に
より、現在画面上に開かれているページの所望する位置
にウィンドウをオープンさせ、さらにこのウィンドウを
任意の表示位置に移動出来るようにすることであり、ま
た、第２の発明の課題は、ウィンドウ内に表示されてい
るデータを、そのウィンドウが上書きされているページ
内に取り込めるようにすることである。

【００１１】

【課題を解決するための手段】本発明の請求項１に記載
の手書き入力装置は以下の各手段を備える。表示手段
は、ビットマップ形式でイメージデータを表示する装置
であり、例えば、液晶ディスプレイ装置等から成る。

【００１２】入力座標検出手段は、上記表示手段の表示
画面上でのペンの操作位置の座標を検出する。この手段
は、例えば、感圧方式、静電容量方式、電磁誘導方式等
のタブレット（ディジタイザ）から成る。

【００１３】コマンド認識手段は、上記入力座標検出手
段によって検出された座標データを基に、ウィンドウの
オープンを指示するコマンドの入力を認識する。ウィン
ドウ表示手段は、上記コマンド認識手段により上記ウィ
ンドウオープン指示コマンドの入力が認識された場合、
上記入力座標検出手段によって検出された該コマンドの
入力座標位置データに基づいて、上記表示手段の表示画
面上の該コマンドの入力位置を基準とする位置にウィン
ドウをオープンして表示する。

【００１４】ウィンドウ移動手段は、上記入力座標検出
手段により検出されるペン操作の入力座標データに基づ
いて所定の手書き操作を検出し、該検出時には上記表示
手段に表示されている該当するウィンドウを表示画面上
の任意の位置に移動させる。

【００１５】本発明の請求項２に記載の手書き入力装置
は、上記表示手段、入力座標検出手段、コマンド認識手
段、ウィンドウ表示手段、に加えて、下記のコピー手段
を有する。

【００１６】このコピー手段は、上記入力座標検出手段
により検出されるペン操作の入力座標データに基づいて
所定の手書き操作を検出し、該検出時には上記表示手段
に表示されている該当するウィンドウ内のデータを、現
在、上記表示手段に表示されているページ内の所定位置
にコピーする。

【００１７】上記コマンド認識手段、ウィンドウ表示手
段、ウィンドウ移動手段、およびコピー手段は、たとえ
ばＣＰＵ（中央演算処理装置）、メモリ等から構成され
る。

【００１８】

【作用】本発明の手書き入力装置においては、表示手段
に表示されている画面上でユーザがペン操作により予め
定められたウィンドウのオープンを指示するコマンド
（例えば、ウィンドウをオープンし、そのウィンドウ上
にメモ内容を表示させるためのメモコマンド）を手書き
入力すると、この手書き入力位置の画面上での座標を入
力座標検出手段が検出する。そして、コマンド認識手段
は、入力座標検出手段からこの検出された手書き入力の
座標データを受け取り、この座標データを基に、上記ウ
ィンドウオープン指示コマンドが手書き入力されたこと
を認識する。

【００１９】上記ウィンドウオープン指示コマンドが手
書き入力されたことが認識されると、ウィンドウ表示手
段は、そのコマンドの表示手段の画面上での手書き入力
座標位置を入力座標検出手段から受け取り、表示手段の
画面上の上記手書き入力座標位置を基準とする所定の位
置に所定サイズのウィンドウをオープンさせる。

【００２０】このウィンドウのオープンを指示するコマ
ンドが、例えばメモコマンドであった場合には、そのメ
モコマンドにより指定されるメモのイメージが、該ウィ
ンドウのオープンと同時に表示される。このようにし
て、簡単な手書き入力により現在の表示画面上の所望す
る位置にウィンドウを開くことができ、さらにメモコマ
ンド等の場合には該ウィンドウ内に所望のデータを表示
させることができ、そのデータを参照しながら作業を進
められるようになる。

【００２１】上記ウィンドウを画面上で移動させる場合
には、ペン操作によりそのウィンドウを移動させる方向
と距離（ベクトル）を指定する手書き入力を行う。この
手書き入力において、その始点は、例えばウィンドウの
ウィンドウ枠の線上となる。そして、その手書き入力の
軌跡に基づいて、ウィンドウ表示手段は、ウィンドウの
表示位置を移動させる。この移動方向と移動量は、例え
ば上記手書き入力の始点と終点を結ぶベクトルの方向お
よびそのベクトルの長さによって決定される。

【００２２】したがって、簡単な手書き操作によりウィ
ンドウを所望する位置に移動させることが可能になる。
上記ウィンドウ上に表示されているデータを現在のペー
ジ上に取り込む（コピーする）場合は、ペン操作による
手書き入力で、例えば、上記ウィンドウ上（例えば、ウ
ィンドウの枠線上）に、例えば×印等の記号を記入す
る。この記入位置は、入力座標検出手段によって検出さ
れ、該入力座標検出手段からコピー手段に出力される。
コピー手段は、その入力される手書き入力の座標位置デ
ータの軌跡等から予め定められた所定の手書き操作を認
識する。そして、コピー手段は、ウィンドウ内に表示さ
れているデータを、現在、画面上に表示されているペー
ジの一部（例えば、上記ウィンドウが上書きされている
部分）にコピーするとともに、ウィンドウ枠を消去す
る。

【００２３】したがって、簡単な手書き操作により、ウ
ィンドウ内のデータを現在表示されているページの一部
に簡単かつ高速にコピーすることができる。

【００２４】

【実施例】以下、図面を参照しながら本発明の実施例を
説明する。図１は本発明の実施例の外観図である。

【００２５】同図に示す装置はペン１１による手書き入
力を基本操作としており、手書き文字認識機能を備えて
いる。この装置全体はパッド型の外形をしており、上方
にペン１１を収納するためのペン収納溝１２が設けられ
ている。また、そのペン収納溝１２を除く上面のほぼ全
体にはペン入力用の入力・表示装置１３が組み込まれて
いる。

【００２６】この入力・表示装置１３は、液晶ディスプ
レイ等のビットマップ・ディスプレイから成る表示部１
３ａと、これに重ねて配置されたタブレットから成る座
標入力部１３ｂとで構成されている。

【００２７】次に、上記外観を有する実施例のシステム
構成を図２に示す。同図において、ＣＰＵ２１はマイク
ロプロセッサ等から成る中央演算処理装置であり、プロ
グラムメモリ２２に格納されているプログラムを実行し
て、システム内の各コンポーネントの制御を行う。

【００２８】座標入力部１３ｂは、例えば感圧式、電磁
誘導方式等のタブレットから成り、ペン入力を検出する
とこのペン入力の座標位置（手書き入力の書き込み軌跡
の座標データ）を不図示のインタフェースを介してＣＰ
Ｕ２１に出力する。ＣＰＵ２１は、この座標データから
ペン入力による手書きイメージデータを生成しイメージ
メモリＩ２６に書き込む。

【００２９】イメージ認識部２３は、ＣＰＵ２１からの
指示を受けて、後述するメモウィンドウ４３のクローズ
や削除を指示する所定の形状の手書き操作のイメージデ
ータを図形認識する。そして、それらの手書き操作を認
識した場合、その旨をＣＰＵ２１へ通知する。

【００３０】コマンド認識部２４は、ＣＰＵ２１からの
指示を受けて手書き入力データを文字認識する。そし
て、この文字認識により得られた文字列（又は記号）を
予約コマンドメモリ２５に格納されている編集コマンド
の文字列（又は記号）と照合して編集コマンドの手書き
入力を認識し、この認識結果をＣＰＵ２１へ通知する。

【００３１】予約コマンドメモリ２５は、本装置で使用
可能な全ての編集コマンドをテキストデータ、記号デー
タ（文字コード列、又は記号コード列）の形式で格納し
ている。

【００３２】イメージメモリＩ２６は、入力・表示装置
１３の画面上にペン入力された最新の手書き入力イメー
ジデータをビットマップ形式で格納するメモリである。
イメージメモリII２７は、現在画面に表示されている既
に入力済みのイメージデータをビットマップ形式で格納
するメモリである。

【００３３】表示メモリ２８は、表示部１３ａに表示さ
れる画面のイメージデータをビットマップ形式で格納す
るフレームメモリである。表示制御部２９は、ＣＰＵ２
１からの描画命令を受けて、表示メモリ２８に表示部１
３ａに表示すべきイメージデータを書き込む。さらに、
表示メモリ２８から上記イメージデータを読み出し、こ
のイメージデータをシリアルのビデオ信号に変換して表
示部１３ａに出力すると共に、表示部１３ａに対して水
平／垂直同期信号を供給し、これにより表示部１３ａに
表示メモリ２８に格納されているイメージデータの画像
を表示させる。

【００３４】メモ登録メモリ３０は、複数種類のメモを
それぞれのメモ番号に対応させて格納するメモリであ
り、入力・表示装置１３の画面上でメモとしてペン入力
された手書き入力のメモイメージデータをビットマップ
形式で格納する。

【００３５】枠基準位置メモリ３１は、コマンド認識部
２４により認識されたメモコマンド（現在開かれている
ページ上にウィンドウを開き、そのウィンドウ内に所望
のメモ番号のメモを表示させるコマンドであり、その後
ろにメモ番号が続く）の入力・表示装置１３の画面上で
の記入位置の座標データを格納するメモリである。

【００３６】メモウィンドウ枠メモリ３２は、コマンド
認識部２４によりメモコマンドが認識された場合、ＣＰ
Ｕ２１によりメモ登録メモリ３０から読み出される該メ
モコマンドで指定されたメモ番号に対応するメモイメー
ジデータを格納するメモリである。また、表示部１３ａ
にオープンされた上記メモイメージデータが表示される
メモウィンドウの座標領域に関する位置情報も記憶す
る。

【００３７】ページファイル３３は、ペン入力によって
作成される１ページ（表示部１３の一画面に相当）の文
書を複数ページ分格納する。ＣＰＵ２１は入力・表示装
置１３上で１ページの文書が作成される毎にこれをペー
ジファイル３３に書き込む。

【００３８】次に、上記構成の手書き入力装置におい
て、現在開かれているページ上にウィンドウをオープン
してそのウィンドウ上に所望のメモ内容を表示させる場
合の手書き入力の方法を図３および図４を参照しながら
説明する。

【００３９】図３において、矩形枠（外枠）１３は、入
力・表示装置１３の表示画面であり、現在データ編集作
業中のページが表示されている。また、同図に示す螺旋
印４１および三角形４２は、そのページに既に書き込ま
れているイメージデータを示している。

【００４０】このような手書き入力装置において、現
在、あるページ上でデータ入力等の操作を行っていると
きに、例えば、以前登録したメモ内容を参照しながらそ
の操作を進めたい場合や、操作中に思いついたことをメ
モとして記録しておきたい場合がある。この場合、図３
（ａ）に示すように、まず、現在、表示されているペー
ジ上にペン１１を用いて所望するメモを指定するメモコ
マンドを手書き記入する。このメモコマンドの入力は、
まず、コマンド「Ｍ：」を記入し、続いてそのコマンド
の後ろにデータ内容を表示させたいメモのメモ番号（こ
こでは、２）を記入する。

【００４１】装置側では、コマンド認識部２４により、
上記手書き記入がメモコマンド「Ｍ：２」であることを
認識し、また、ＣＰＵ２１がそのメモコマンド「Ｍ：
２」の記入位置の座標を枠基準位置メモリ３１に格納す
る。

【００４２】続いて、入力・表示装置１３の表示画面に
は、図３（ｂ）に示すように、上記メモコマンド「Ｍ：
２」が書き込まれた位置を基準として、所定サイズのメ
モウィンドウ４３がオープン（表示）される。具体的に
は、上記メモコマンド「Ｍ：２」が書き込まれた位置に
メモウィンドウ４３の左上隅が位置し、その左上隅に枠
基準位置ボックス４４が表示される。また、メモウィン
ドウ４３の左側部には、該枠基準位置ボックス４４の下
方にメモ枠バー４８が表示される。このとき、メモウィ
ンドウ４３は、ページ画面に対して上書きされるので、
該ページ内のイメージデータである三角形４２の一部が
このメモウィンドウ４３によって隠されている。

【００４３】このように、ユーザが手書き入力するメモ
コマンドの入力位置によって、メモウィンドウ４３をオ
ープンさせる位置を指定することができる。このオープ
ンされたメモウィンドウ４３内には、上記メモコマンド
「Ｍ：２」によって指定されたメモ番号“２”に基づい
て、メモ番号が“２”のメモイメージデータがメモ登録
メモリ３０から読み出されて表示される。

【００４４】ここで、メモ登録メモリ３０の一構成例を
図５に示す。同図に示すように、メモ登録メモリ３０内
には、複数種類のメモが、メモ番号１，２，・・・と対
応付けられて格納されている。同図の例では、メモ番号
１として螺旋印６１，三角形６２，および×印６３のイ
メージデータが格納されており、メモ番号２としては２
本の横線４５のイメージデータが格納されている。

【００４５】メモウィンドウ４３内のメモ内容を追加・
修正等により更新する場合には、図３（ｃ）に示すよう
に、ユーザが、メモウィンドウ４３内に所望するデータ
をペン１１を用いて手書き記入する。同図（ｃ）におい
ては、メモウィンドウ４３上に螺旋印４６が書き込まれ
ている。

【００４６】また、同図（ｂ）に示すように、上記メモ
ウィンドウ４３がオープンされた状態で、現在表示中の
ページ内容を更新する場合には、同図（ｄ）に示すよう
に、ユーザが、メモウィンドウ４３の外側のページ領域
にペン１１を用いて所望するデータを手書き記入する。
同図（ｄ）においては、メモウィンドウ４３の上側にジ
グザグ印４７が書き込まれている。

【００４７】なお、上述の例では、図３（ｃ）と（ｄ）
とを独立に示しているが、メモウィンドウ４３内への手
書き記入に続いてページ上に手書き記入を行うことや、
その逆手順で手書き記入を行うことも可能である。

【００４８】一方、上述のようにして現在のページ上に
メモウィンドウ４３をオープンし、そのメモウィンドウ
４３上に表示されているメモ内容を参照または更新する
などした後にそのメモ内容を表示させておく必要がなく
なった場合には、図３（ｅ）に示すように、ユーザが、
メモウィンドウ４３をクローズさせるコマンドとして、
ペン１１を用いて枠基準位置ボックス４４上を手書き操
作する。この手書き操作は、枠基準位置ボックス４４上
に斜線５１を引くような操作である。

【００４９】装置側では、ＣＰＵ２１とイメージ認識部
２３により、上記枠基準位置ボックス４４に対する上記
斜線５１の手書き操作を、メモウィンドウ４３をクロー
ズさせるコマンドであると認識する。そして、メモウィ
ンドウ４３に書き込まれている内容を、メモ登録メモリ
３０内のメモ番号２に対応する領域に登録する。また、
入力・表示装置１３の表示画面上では、図３（ｆ）に示
すように、メモウィンドウ４３が消去される。そして、
メモウィンドウ４３によってその一部が隠されていた三
角形４２の全体が、再び表示される。

【００５０】なお、図３（ｃ）に示すようにしてメモウ
ィンドウ４３上のメモ内容が更新された後に、上述のよ
うにしてメモウィンドウ４３をクローズした場合には、
その更新されたメモ内容がメモ登録メモリ３０内のメモ
番号２のデータ格納領域に登録される。同図の例では、
メモウィンドウ４３上に表示されていた２本の横線４３
と螺旋印４６のイメージデータがメモ登録メモリ３０内
のメモ番号２に対応する領域に登録（格納）され、デー
タ内容の更新が行われる。

【００５１】次に、現在のページ上に表示されているメ
モウィンドウ４３を移動させるときの操作を図４を参照
しながら説明する。まずユーザが、図４（ａ）に示すよ
うに、手書き操作でメモウィンドウ４３のメモ枠バー４
８上をペン１１で指示する（この点を、始点という）。
そして、メモウィンドウ４３を移動させたい方向と距離
とを入力（指定）するために、上記始点を起点とする矢
印４９を手書き記入する。

【００５２】装置側では、ＣＰＵ２１とイメージ認識部
２３により、上記手書き操作がメモウィンドウ４３を移
動させるためのコマンドであると認識し、図４（ｂ）に
示すように、上記始点から矢印４９の先端（この点を、
終点という）へ向かうベクトルに基づいて、メモウィン
ドウ４３を移動させる。すなわち、そのベクトルの方向
によって移動方向を、そのベクトルの長さによって移動
量を決定する。

【００５３】次に、メモウィンドウ４３内のメモ内容
を、そのメモウィンドウ４３が上書きされている現在の
ページ上に取り込む（貼り付け）ときの操作を説明す
る。この場合、ユーザは、図４（ｃ）に示すように、ペ
ン１１による手書き操作で、メモウィンドウ４３のメモ
枠バー４８を消すような削除イメージである×印５０を
記入する。

【００５４】装置側では、ＣＰＵ２１とイメージ認識部
２３により上記手書き操作がメモウィンドウ４３内のメ
モ内容を上記現在のページ上にコピーするためのコマン
ドであると認識し、現在のページ上からメモウィンドウ
４３の枠を消去する。このとき、図４（ｄ）に示すよう
に、メモウィンドウ４３内に表示されていた２本の横線
４５は消去されることなく、現在のページ上にコピーさ
れる。

【００５５】なお、上記の例では、図３（ｂ）の状態で
メモウィンドウ４３上のデータを現在のページ内に取り
込む操作を示しているが、図４（ｂ）のようにメモウィ
ンドウ４３を移動させた状態で該メモウィンドウ４３内
のデータを取り込むようにすることも同様に可能であ
る。また、図３（ｃ）のように、メモウィンドウ４３上
のメモ内容を更新した後に上記のようなデータ取り込み
操作を行えば、現在のページには、２本の横線４５とと
もに、螺旋印４６もコピーされる。

【００５６】次に、このような、現在、表示中のページ
上にメモウィンドウ４３をオープンしてそのメモウィン
ドウ４３内に所望のメモ内容を表示させた後、さらにそ
のメモウィンドウ４３を移動させる操作、さらにはその
メモウィンドウ４３の内容を上記現在のページ上に取り
込む操作を実現している本実施例の動作を、図６および
図７のフローチャートを参照しながら説明する。

【００５７】ユーザが入力・表示装置１３上でペン１１
により手書き操作（手書き入力）を行うと、座標入力部
１３ｂが手書き入力座標位置（ペン操作された位置の、
座標入力部１３ｂ上に設定された正規化座標系での座標
位置。本実施例では、表示部１３ａと座標入力部１３ｂ
に設定される正規化座標系は一致する）を検出し、この
座標データをＣＰＵ２１に対し割り込みにより通知する
（Ｓ１）。

【００５８】ＣＰＵ２１は、この入力される手書き入力
座標データが時系列順に描く軌跡に等しいイメージデー
タを作成し、これをイメージメモリＩ２６に書き込む
（Ｓ２）。

【００５９】そして、ユーザの手書き入力が終了し、座
標入力部１３ｂからの割り込みが所定時間以上途絶える
と、ＣＰＵ２１は手書き入力が終了したものと判断し、
表示制御部２９を介し、イメージメモリＩ２６に書き込
んだ今回新たに手書き入力されたイメージデータと、イ
メージメモリII２７に格納されている既に入力・表示さ
れている手書き入力イメージデータとをＯＲ合成して表
示メモリ２８に書き込む。そして、表示制御部２９が、
表示メモリ２８からこのＯＲ合成されたイメージデータ
を読み出し、そのイメージデータに対応する画像を表示
部１３ａに表示させる（Ｓ３）。

【００６０】上記ステップＳ１〜Ｓ３を図３（ａ）に対
応させると、ステップＳ１を行うときに既にイメージメ
モリII２７に格納されていたイメージデータが、入力・
表示装置１３上の螺旋印４１および三角形４２であり、
ステップＳ１で手書き入力したイメージデータがメモコ
マンド「Ｍ：２」である。

【００６１】以上の動作により、ユーザが入力・表示装
置１３にペン１１で手書き入力を行うと、ペン入力され
た文字や図形等が表示部１３ａに即時に表示される。次
に、ＣＰＵ２１は、上記ペン入力によりイメージメモリ
Ｉ２６に書き込まれたイメージデータがメモコマンドで
あるか否か調べる。この処理では、ＣＰＵ２１は、イメ
ージメモリＩ２６に格納されている手書き入力のイメー
ジデータをコマンド認識部２４に転送し、そのイメージ
データがメモコマンドであるか否かの判断を指示する。
コマンド認識部２４は、この手書き入力のイメージデー
タを文字認識し、その文字認識によって得られた文字列
（または記号）がメモコマンドであるか否かを、予約コ
マンドメモリ２５に格納されている編集コマンドと照合
することによって判断する。また、コマンド認識部２４
は、上記イメージデータがメモコマンドであったとき、
そのメモコマンドとともに入力されたメモ番号も認識す
る。そして、この判断結果をＣＰＵ２１に通知する（Ｓ
４）。

【００６２】上記手書き入力のイメージデータがメモコ
マンドであった場合（Ｓ４：Ｙｅｓ）、ＣＰＵ２１は、
予め所定の作業領域（不図示）に記憶しておいた座標入
力部１３ｂから受け取った上記メモコマンドの手書き入
力位置の座標データを枠基準位置メモリ３１に書き込
み、記憶する（Ｓ５）。

【００６３】続いて、ＣＰＵ２１は、コマンド認識部２
４が認識したメモ番号（図３（ａ）では、２）がメモ登
録メモリ３０に既に登録されているか否かを判断する
（Ｓ６）。

【００６４】上記メモ番号がメモ登録メモリ３０に登録
されている場合（Ｓ６：Ｙｅｓ）、ＣＰＵ２１は、その
メモ番号に対応するメモイメージデータをメモ登録メモ
リ３０から読み出して、表示制御部２９を介してメモウ
ィンドウ枠メモリ３２に書き込む（Ｓ７）。その後、イ
メージメモリＩ２６に格納されているイメージデータを
クリアする（Ｓ８）。

【００６５】これにより、イメージメモリＩ２６は、新
たな入力データを格納可能な状態になる。一方、上記メ
モ番号がメモ登録メモリ３０に登録されていない場合に
は（Ｓ６：Ｎｏ）、ステップＳ７がスキップされて、ス
テップＳ８の処理が行われる。

【００６６】続いて、ＣＰＵ２１は、表示制御部２９を
介してメモウィンドウ枠メモリ３２に格納されているメ
モイメージデータ（メモ内容）を表示メモリ２８の内容
に上書きする。表示制御部２９は、このメモイメージデ
ータの表示メモリ２８への書き込みを、枠基準位置メモ
リ３１に格納されているメモコマンドの記入位置の座標
位置データおよびメモウィンドウ枠メモリ３２に格納さ
れているメモイメージデータを基に行う。すなわち、ま
ず、上記座標位置データが示す位置にメモウィンドウ４
３の左上隅を設定し、次に、その左上隅を基準として所
定長さでｘ方向，ｙ方向に広がる矩形領域をメモウィン
ドウ４３として設定する。そして、このようなメモウィ
ンドウ４３の外枠のイメージデータ表示メモリ２８に上
書きすると共に、メモウィンドウ枠メモリ３２から読み
出したメモイメージデータを表示メモリ２８内の該メモ
ウィンドウ４３の外枠のイメージデータ内に上書きす
る。また、さらには、上述のようにしてオープンしたメ
モウィンドウ４３の座標領域に関するデータもメモウィ
ンドウ枠メモリ３２に書き込む。

【００６７】なお、ステップＳ６においてメモ番号が登
録メモリ３０に登録されていないと判断されたときに
は、メモウィンドウ枠メモリ３２にはイメージデータが
格納されていないので、上記メモイメージデータの代わ
りに空白データを表示メモリ２８に書き込む。

【００６８】そして、表示制御部２９が、このようにし
て更新された表示メモリ２８内のイメージデータを表示
部１３ａに表示する（Ｓ９）。ステップＳ９までの処理
が終了した状態が図３（ｂ）であり、現在表示中のペー
ジ上にメモウィンドウ４３がオープンされ、そのメモウ
ィンドウ４３上にはメモ番号が“２”のメモイメージデ
ータ（２本の横線４５）が該ページのデータに対して上
書き表示されている。

【００６９】続いてステップＳ１０，Ｓ１１では、ステ
ップＳ１，Ｓ２と同様の動作が行われ、入力・表示装置
１３上でユーザによって手書き操作されたイメージデー
タがイメージメモリＩ２６に格納される。

【００７０】そして、ＣＰＵ２１は、ステップＳ１０，
Ｓ１１において、上記のようにしてメモウィンドウ枠メ
モリ３２に記録したメモウィンドウ４３の座標領域に関
するデータを基に、上記手書き操作位置がメモウィンド
ウ４３の枠内か否かを判断する（Ｓ１２）。

【００７１】ＣＰＵ２１は、上記手書き操作位置がメモ
ウィンドウ４３の枠内であると判断すると（Ｓ１２：Ｙ
ｅｓ）、上記手書き操作により入力されたイメージデー
タがメモウィンドウ４３内への入力データであると認識
し、ステップＳ１１においてイメージメモリＩ２６に格
納されたイメージデータを、メモウィンドウ枠メモリ３
２に格納されているイメージデータにＯＲ合成して、メ
モウィンドウ枠メモリ３２に書き込む（Ｓ１３）。

【００７２】この後、イメージメモリＩ２６をクリアし
（Ｓ１４）、ステップＳ９の処理に戻る。このステップ
Ｓ９では、上記ステップＳ１０での手書き操作によって
入力されたイメージデータが、たとえば図３（ｃ）の螺
旋印４６のように、メモウィンドウ４３内に新たに表示
される。この後、再びユーザによる手書き入力操作を待
ち、ステップＳ１０以降の処理を行う。

【００７３】したがって、ユーザがメモウィンドウ４３
内にデータを記入し続ける間、上記ステップＳ９〜Ｓ１
４が繰り返され、該メモウィンドウ４３内にそれらの記
入データがリアルタイムで表示される。

【００７４】一方、ステップＳ１０での操作位置がメモ
ウィンドウ４３の枠内でないと判断した場合には（Ｓ１
２：Ｎｏ）、ＣＰＵ２１は、その手書き操作位置が枠基
準位置ボックス４４上であるか否かを判断する（Ｓ２
１）。

【００７５】すなわち、ＣＰＵ２１は、枠基準位置メモ
リ３１に格納されている座標位置データを参照して、上
記手書き操作位置が枠基準位置ボックス４４上であるか
否かを判断する。このステップＳ１０での手書き操作位
置が枠基準位置ボックス４４上であった場合（Ｓ２１：
Ｙｅｓ）、ＣＰＵ２１は、その旨をイメージ認識部２３
に送り、上記手書き操作がメモウィンドウ４３をクロー
ズさせるための編集コマンド（図３（ｅ）に示す斜線５
１）であるか否かを認識するように指示する。イメージ
認識部２３は、その手書き操作が該コマンドであると認
識すると、上記メモウィンドウクローズコマンドの入力
をＣＰＵ２１に通知する。ＣＰＵ２１は、この通知を受
けて該ウィンドウクローズコマンドを実行する。すなわ
ち、メモウィンドウ枠メモリ３２に格納されているイメ
ージデータを、上記ステップＳ１で入力されたメモコマ
ンドで指定されたメモ番号と対応づけてメモ登録メモリ
３０内の当該領域に登録（格納）する（Ｓ２２）。

【００７６】ここで、上記ステップＳ６において、メモ
番号が予めメモ登録メモリ３０に登録されていた場合に
は、そのメモ番号に対応してメモ登録メモリ３０に登録
されていたイメージデータは、メモウィンドウ枠メモリ
３２に格納されているイメージデータによって更新され
る。例えば、上記ステップＳ１０〜Ｓ１４において、メ
モウィンドウ４３内に新たにイメージデータが入力され
（たとえば図３（ｃ）の螺旋印４６）、その後に枠基準
位置ボックス４４上で上記斜線５１を引く手書き操作が
行われた場合には、メモ番号２に対応づけられて２本の
横線４５とともに螺旋印４６がメモ登録メモリ３０に登
録される。一方、上記ステップＳ６において、メモ番号
が予めメモ登録メモリ３０に登録されていなかった場合
には、メモウィンドウ枠メモリ３２に格納されているイ
メージデータは、上記メモコマンドによって指定された
メモ番号と対応付けられてメモ登録メモリ３０内の空領
域に新規登録される。

【００７７】続いて、ＣＰＵ２１は、メモウィンドウ枠
メモリ３２およびイメージメモリＩ２６をクリアする
（Ｓ２３）。そして、ＣＰＵ２１は、表示制御部２９を
介してイメージメモリII２７に格納されているイメージ
データを表示メモリ２８に書き込み、表示制御部２９が
表示メモリ２８内のイメージデータを表示部１３ａに表
示させる（Ｓ２４）。このときの表示部１３ａの表示
は、たとえば図３（ｆ）に示すように、ページ上からメ
モウィンドウ４３が消去された表示となる。

【００７８】このステップＳ２４が終了すると、処理は
スタートに戻り、再びユーザからの手書き操作を待つ。
一方、ＣＰＵ２１は、ステップＳ２１において、ステッ
プＳ１０での操作位置が枠基準位置ボックス４４上でな
いと判断すると（Ｓ２１：Ｎｏ）、その手書き操作位置
がメモ枠バー４８上であるか否かを判断する（Ｓ２
５）。

【００７９】そして、この判断結果が、メモ枠バー４８
上であった場合（Ｓ２５：Ｙｅｓ）、ステップＳ２６，
Ｓ２７において、ステップＳ１，Ｓ２と同様の動作が行
われ、ユーザによって手書き入力されたイメージデータ
がイメージメモリＩ２６に格納される。

【００８０】続いて、ＣＰＵ２１は、イメージ認識部２
３に対して、上記ステップＳ１０及び上記ステップＳ２
５で上記メモ枠バー４８上で入力された手書きイメージ
がメモウィンドウ４３の削除を指示するイメージ（図４
の×印５０）か否かを判断させる（Ｓ２８）。

【００８１】ＣＰＵ２１は、イメージ認識部２３から上
記手書き操作によるイメージが削除イメージ５０である
旨の通知を受け取ると（Ｓ２８：Ｙｅｓ）、メモウィン
ドウ枠メモリ３２内のイメージデータを、イメージメモ
リII２７の対応する位置にＯＲ合成して、イメージメモ
リII２７に格納する（Ｓ２９）。このイメージメモリII
２７への格納は、ＣＰＵ２１が、メモウィンドウ枠メモ
リ３２に格納されているメモウィンドウ４３の座標領域
に関するデータを基に、メモウィンドウ枠メモリ３２内
のイメージデータをイメージメモリII２７内の該メモウ
ィンドウ４３の座標領域に書き込むことによって行われ
る。

【００８２】ステップＳ２９の処理が終わると、ステッ
プＳ２３以降の処理を行う。これにより、まず、ステッ
プＳ２４でイメージメモリII２７に格納されているイメ
ージデータが表示部１３ａに表示される。この結果、た
とえば図４（ｃ）においてメモウィンドウ４３上に表示
されていたイメージデータ（２本の横線４５）が、図４
（ｄ）に示すように、ページ上のデータとして取り込ま
れて（貼り付けられて）表示される。すなわち、メモウ
ィンドウ４３内のイメージデータが、現在のページ上に
コピーされる。

【００８３】一方、上記手書き操作によるイメージが削
除イメージでないと判断された場合（Ｓ２８：Ｎｏ）、
ＣＰＵ２１は、イメージ認識部２３に、その手書き操作
によって入力されたイメージデータの軌跡を解析させ、
その軌跡の始点（メモ枠バー４８上の矢印４９の後端）
と終点（矢印４９の先端）の座標データとを結ぶベクト
ルを生成する。そして、ＣＰＵ２１は、そのベクトルに
従って、枠基準位置メモリ３１に格納されているメモウ
ィンドウ４３の左上隅を示す座標位置データを書き換え
る（Ｓ３０）。

【００８４】続いて、ＣＰＵ２１は、イメージメモリＩ
２６をクリア（Ｓ３１）した後、表示制御部２９を介し
てイメージメモリII２７に格納されているイメージデー
タを読み出して表示メモリ２８に書き込み、表示制御部
２９が表示メモリ２８内のイメージデータを表示部１３
ａに表示させる（Ｓ３２）。

【００８５】ステップＳ３２の処理が終了すると、ステ
ップＳ９の処理へ戻る。このステップＳ９においてメモ
枠メモリ３２の内容を表示部１３ａに表示させるとき、
メモウィンドウ４３を表示する位置は、ステップＳ３０
で書き換えられた座標位置データに設定される。したが
って、上記手書き操作後にページ上に表示されるメモウ
ィンドウ４３は、図４（ｂ）に示すように、矢印４９を
手書き入力する前の位置に対して、上記手書き入力され
た矢印４９のイメージが示す方向と距離だけ移動して表
示される。

【００８６】また、ステップＳ２５での判断結果が、メ
モ枠バー４８上でなく、メモウィンドウ４３の外側のペ
ージ上であった場合（Ｓ２５：Ｎｏ）、ＣＰＵ２１は、
上記手書き操作がページ上への記入であると判断し、イ
メージメモリＩ２６に格納されているイメージデータ
を、イメージメモリII２７に格納されているイメージデ
ータにＯＲ合成してイメージメモリII２７に書き込む
（Ｓ３３）。ステップＳ３３の処理が終了した後は、ス
テップＳ３１以降の処理を実行する。

【００８７】これにより、メモウィンドウ４３外に手書
き入力されたイメージデータは、現在のページ上にその
まま表示される。ステップＳ３２の処理が終了すると、
ステップＳ９の処理に戻り、再びユーザからの手書き入
力操作を待つ。

【００８８】したがって、メモウィンドウ４３をオープ
ンした状態で、該メモウィンドウ４３の移動や、該メモ
ウィンドウ４３外の現在のページ上へのデータの記入は
何回でも行うことができる。これは、ステップＳ９→Ｓ
２１〜Ｓ３２のループ処理によって行われる。

【００８９】ところで、上記ステップＳ４において、手
書き入力のイメージデータがメモコマンドでなかった場
合（Ｓ４：Ｎｏ）、ＣＰＵ２１は、その手書き入力が現
在のページ上へのイメージデータの書き込みであると認
識し、イメージメモリＩ２６に格納されているイメージ
データをイメージメモリII２７に格納されているイメー
ジデータにＯＲ合成してイメージメモリII２７に格納し
た後（Ｓ４１）、イメージメモリＩ２６をクリアする
（Ｓ４２）。そして、ＣＰＵ２１が、表示制御部２９を
介してイメージメモリII２７に格納されたイメージデー
タを表示メモリ２８に書き込み、表示制御部２９が表示
メモリ２８内のイメージデータを表示部１３ａに表示さ
せる（Ｓ４３）。

【００９０】これにより、メモウィンドウ４３が表示さ
れていない状態で入力・表示装置１３の表示部１３ａの
画面上にペン１１を用いて手書き操作を行うと、現在の
ページにその手書き操作により入力されたイメージデー
タが順次追加されていく。

【００９１】尚、上記にフローチャートおいては、ステ
ップＳ２９が終了した後にステップＳ２３に移行するよ
うにしているが、ステップＳ２９が終了した後にステッ
プＳ２２の処理に移行するようにしてもよい。このよう
なフローにすると、メモウィンドウ枠メモリ３２の内容
がステップＳ１０〜Ｓ１３において書き換えられている
場合、その書き換えられた内容を、メモ登録メモリ３０
にも、反映させて登録することができる。

【００９２】また、上記実施例においては、現在のペー
ジ上にウィンドウをオープンしてそのウィンドウ上にメ
モ内容を表示させているが、本発明はこれに限定される
ものではなく、例えば他のページに記入されているイメ
ージを現在のページ上にオープンさせたウィンドウ内に
表示させるようにしても良い。この場合、上記実施例に
おけるメモコマンド“Ｍ：”のかわりに、例えばページ
コマンドを示す“Ｐ：”を用いる。そして、このコマン
ド“Ｐ：”に続いて、上記ウィンドウ内にそのデータ内
容を表示させたいページのページ番号を手書き入力する
ことによって、その所望するページの内容を参照または
更新することができる。

【００９３】さらに、ページ上のウィンドウに表示させ
るデータは、上述のような手書きイメージデータに限定
されず、所定のフォントで書かれた文字等や、図表であ
ってもよい。

【００９４】

【発明の効果】第１の発明によれば、現在、画面上で任
意のページ上でデータ編集操作を行っているときに、以
前登録したメモの内容や他のページの内容を参照しなが
らその操作を進めたい場合、現在のページを閉じること
なくそのページ上の任意の位置にウィンドウをオープン
させて、その作業を続けることができる。

【００９５】そして、このウィンドウの位置を、手書き
操作によって自由に移動させることができるので、常に
視認性の良い環境の下で、効率の良いデータ編集作業を
行うことができる。

【００９６】さらに、第２の発明によれば、簡単な手書
き操作によって、上記ウィンドウ内に表示されるデータ
を現在のページの任意の位置に取り込む（コピーする）
ことができるので、ページ編集作業等の操作性並びに効
率が向上する。

【図面の簡単な説明】

【図１】本発明の手書き入力装置の一例の外観図であ
る。

【図２】本発明の実施例の手書き入力装置のシステム構
成を示すブロック図である。

【図３】図２に示す手書き入力装置において、現在開か
れているページ上にウィンドウをオープンしてそのウィ
ンドウ内にメモ内容を呼び出して、該メモ内容の更新、
並びに上記ページの更新を行う場合の手書き入力の方法
を説明するための図である。

【図４】図２に示す手書き入力装置において、ページ上
のウィンドウを移動させる場合、およびそのウィンドウ
内のデータをページにデータとして取り込む場合の手書
き入力の方法を説明するための図である。

【図５】図２に示すメモ登録メモリのメモデータの格納
形式を説明するための図である。

【図６】図２に示す手書き入力装置の処理を説明するフ
ローチャート（その１）である。

【図７】図２に示す手書き入力装置の処理を説明するフ
ローチャート（その２）である。

【符号の説明】

１１ペン１３入力・表示装置１３ａ座標入力部１３ｂ表示部２１ＣＰＵ２２プログラムメモリ２３イメージ認識部２４コマンド認識部２５予約コマンドメモリ２６イメージメモリＩ２７イメージメモリII ２８表示メモリ２９表示制御部３０メモ登録メモリ３１枠基準位置メモリ３２メモウィンドウ枠メモリ３３ページファイル４３メモウィンドウ４４枠基準位置ボックス４８メモ枠バー

Claims

【特許請求の範囲】

【請求項１】イメージデータを表示する表示手段と、該表示手段の表示画面上でのペン操作による入力座標を
検出する入力座標検出手段と、該入力座標検出手段によって検出された座標データを基
に、ウィンドウのオープンを指示するコマンドの入力を
認識するコマンド認識手段と、該コマンド認識手段により前記ウィンドウオープン指示
コマンドの入力が認識された場合、前記入力座標検出手
段によって検出された該コマンドの入力座標位置データ
に基づいて、前記表示手段の表示画面上の該コマンドの
入力位置を基準とする位置にウィンドウをオープンして
表示するウィンドウ表示手段と、前記入力座標検出手段により検出されるペン操作の入力
座標データに基づいて所定の手書き操作を検出し、該検
出時には前記表示手段に表示されている該当するウィン
ドウを表示画面上の任意の位置に移動させるウィンドウ
移動手段と、を有することを特徴とする手書き入力装置。
【請求項２】イメージデータを表示する表示手段と、該表示手段の表示画面上でのペン操作による入力座標を
検出する入力座標検出手段と、該入力座標検出手段によって検出された座標データを基
に、ウィンドウのオープンを指示するコマンドの入力を
認識するコマンド認識手段と、該コマンド認識手段により前記ウィンドウオープン指示
コマンドの入力が認識された場合、前記入力座標検出手
段によって検出された該コマンドの入力座標位置データ
に基づいて、前記表示手段の表示画面上の該コマンドの
入力位置を基準とする位置にウィンドウをオープンして
表示するウィンドウ表示手段と、前記入力座標検出手段により検出されるペン操作の入力
座標データに基づいて所定の手書き操作を検出し、該検
出時には前記表示手段に表示されている該当するウィン
ドウ内のデータを、現在、前記表示手段に表示されてい
るページ内の所定位置にコピーするコピー手段と、有することを特徴とする手書き入力装置。