JP2008077218A - 筆記情報処理システム、ペンデバイスおよびプログラム - Google Patents

Abstract

【課題】媒体に対して筆記された文字や文字列をその文字や文字列を示す普遍的な電子情報として扱うことを可能とする。
【解決手段】筆記操作に関連した情報を媒体から読み取る電子ペンは、媒体に筆記された文字の文字コード情報を生成する文字コード情報生成部６１３を有する。
【選択図】図５

Description

紙等の媒体への筆記を電子化した筆記情報を処理する筆記情報処理システム等に関する。

近年、用紙上に筆記された文字や図形等が電子データに変換され、これがパソコンや携帯電話等に転送されて、筆記内容がそのまま保存されたり、メールとして送信される技術が注目されている。
かかる技術では、微細なドットが印刷された特殊な用紙が使用される。すなわち、この特殊用紙上では、微細ドットが例えば所定の大きさのグリッド毎にそれぞれ異なるパターンを持って形成されている。そのため、例えば撮像素子が内蔵された専用ペンを用いてこの特殊用紙に筆記を行うと、文字や図形等が筆記された位置のドットパターンが撮像素子に読み込まれ、この特殊用紙上で筆記された位置（描画トレース）の座標が特定される。それにより、かかる筆記された文字や図形等からなる電子文書を生成したり、筆記された文字や図形等を所定の電子文書に付加すること等が可能となる(例えば、特許文献１参照)。

特開２００４−９４９０７号公報(第１２−１４頁)

ここで、一般に、情報処理装置は、電子文書におけるその筆記された文字や文字列をその文字や文字列を示す電子情報として普遍的に認識することができない。そのため、筆記された文字や文字列に対して、例えば平仮名から漢字等への変換や英語等の外国語への翻訳、関連した情報の検索等といった情報処理を施すことができないという不都合があった。

本発明は、以上のような技術的課題を解決するためになされたものであって、その目的は、媒体に対して筆記された文字や文字列をその文字や文字列を示す普遍的な電子情報として扱うことを可能とすることにある。

かかる目的のもと、本発明の筆記情報処理システムは、ユーザによる媒体への筆記操作に対応して、筆記操作に関連した情報を媒体から読み取るペンデバイスと、ペンデバイスにて読み取られた情報を取得し、取得した情報に基づいて媒体への筆記内容を媒体または媒体に印刷された電子文書に関連付けて記憶する情報処理装置とを備え、ペンデバイスは、媒体に筆記された文字の文字コード情報を生成する文字コード情報生成部を有することを特徴としている。

ここで、ペンデバイスは、文字コード情報生成部にて文字コード情報の生成を行うか否かを切り替える切替部をさらに有することを特徴とすることができる。また、文字コード情報生成部は、筆記された文字の中の片仮名および平仮名について文字コード情報を生成することを特徴とすることができる。さらに、文字コード情報生成部は、媒体上の所定の領域内に筆記された文字について文字コード情報を生成することを特徴とすることができる。加えて、文字コード情報生成部は、媒体上に形成された所定のチェックボックス内がマークされた場合に、筆記された文字について文字コード情報を生成することを特徴とすることができる。
また、ペンデバイスは、筆記された文字を文字コード情報生成部にて生成された文字コード情報に基づいて表示する表示部をさらに有することを特徴とすることができる。

また、本発明をペンデバイスとして捉え、本発明のペンデバイスは、媒体に筆記された文字の媒体上での位置情報を読み取る位置情報読取部と、位置情報読取部にて読み取られた位置情報に基づいて、媒体に筆記された文字の文字コード情報を生成する文字コード情報生成部とを備えたことを特徴としている。
ここで、文字コード情報生成部にて文字コード情報の生成を行うか否かを切り替える切替部をさらに備えたことを特徴とすることができる。また、筆記された文字を文字コード情報生成部にて生成された文字コード情報に基づいて表示する表示部をさらに備えたことを特徴とすることができる。

また、本発明をプログラムとして捉え、本発明のプログラムは、コンピュータに、媒体に筆記された文字の媒体上での位置情報を読み取る機能と、読み取られた位置情報に基づいて、媒体に筆記された文字の文字コード情報を生成する機能とを実現させることを特徴としている。

なお、このプログラムは、例えば、ＲＯＭ等に格納されたプログラムを、ＲＡＭにロードして実行される場合がある。また、予めＲＯＭに格納された状態にて、ＣＰＵで実行される形態がある。さらに、ＥＥＰＲＯＭ等の書き換え可能なＲＯＭを備えている場合には、機器がアッセンブリされた後に、プログラムだけが提供されてＲＯＭにインストールされる場合がある。このプログラムの提供に際しては、インターネット等のネットワークを介してデータ記録装置を備えたコンピュータにプログラムが伝送され、データ記録装置の有するＲＯＭにインストールされる形態も考えられる。

本発明の請求項１によれば、媒体に対して筆記された文字や文字列をその文字や文字列を示す普遍的な電子情報として扱うことが可能となる。
また、本発明の請求項２によれば、筆記された文字や文字列を文字コード情報に変換するか否かを容易に設定することが可能となる。
また、本発明の請求項３によれば、ペンデバイスを小型に形成することが可能となる。

また、本発明の請求項４によれば、筆記された文字や文字列を文字コード情報に変換するか否かを媒体上にて容易に選択することが可能となる。
また、本発明の請求項５によれば、筆記された文字や文字列を文字コード情報に変換するか否かを媒体上にて容易に選択することが可能となるとともに、文字コード情報に変換される文字や文字列が筆記される領域を大きく設定することができる。
また、本発明の請求項６によれば、文字コード情報に変換された文字や文字列をユーザは手元で確認することができる。

本発明の請求項７によれば、媒体に対して筆記された文字や文字列をその文字や文字列を示す普遍的な電子情報として扱うことが可能となる。
また、本発明の請求項８によれば、筆記された文字や文字列を文字コード情報に変換するか否かを容易に設定することが可能となる。
また、本発明の請求項９によれば、文字コード情報に変換された文字や文字列をユーザは手元で確認することができる。
本発明の請求項１０によれば、媒体に対して筆記された文字や文字列をその文字や文字列を示す普遍的な電子情報として扱うことが可能となる。

以下、添付図面を参照して、本発明を実施するための最良の形態(以下、「実施の形態」という)について詳細に説明する。
本実施の形態の筆記情報処理システムでは、紙等の媒体に対し、電子文書の文書画像に加え、コードパターン画像を印刷する。コードパターン画像とは、識別情報および位置情報を符号化して得られる識別符号および位置符号を画像化したものである。
ここで、識別情報としては、媒体を一意に識別する識別情報、または、媒体に印刷された電子文書を一意に識別する識別情報のいずれかが採用される。前者の識別情報を採用した場合、同じ電子文書を複数部数印刷すると、異なる媒体には異なる識別情報が付与される。一方、後者の識別情報を採用した場合、同じ電子文書を印刷すると、異なる媒体であっても同じ識別情報が付与される。
また、位置情報は、媒体上の座標位置を表す情報である。

本実施の形態の筆記情報処理システムでは、このような画像が印刷された媒体に対し、電子ペン（ペンデバイス）で筆記する。これにより、コードパターン画像に含まれる位置情報に基づいて筆記情報や文字コード情報が生成される。また、コードパターン画像に含まれる識別情報に基づいて電子文書が特定される。なお、コードパターン画像に含まれる識別情報が媒体の識別情報である場合は、この識別情報と媒体に印刷された電子文書との対応を管理しておくことで、電子文書を特定することができる。
そして、この特定された電子文書に対し、筆記情報や文字コード情報が関連付けられる。

なお、本明細書では、「電子文書」の文言を用いるが、これは、テキストを含む「文書」を電子化したデータのみを意味するものではない。例えば、絵、写真、図形等の画像データ(ラスタデータかベクターデータかによらない)、その他の印刷可能な電子データも含めて「電子文書」としている。

以下、このような概略動作を行う本実施の形態の筆記情報処理システムについて、具体的に説明する。
ところで、上述したように、本実施の形態の筆記情報処理システムでは、識別情報として、媒体を一意に識別する識別情報と、媒体に印刷された電子文書を一意に識別する識別情報とを用いることができるが、ここでは媒体を一意に識別する識別情報を採用した場合を例として説明する。

本実施の形態の筆記情報処理システムでは、すでに述べたように、媒体の識別情報をコードパターン画像に埋め込む。そこで、本実施の形態において「識別情報」というときは、媒体の識別情報を指すものとする。例えば、同じ電子文書から作成した印刷文書に各人が別々にメモ等を書き込むような場合に、媒体毎に異なる識別情報を埋め込むと便利である。媒体に対する筆記情報や文字コード情報を媒体ごとに別々に管理することが容易に行えるからである。
また、媒体毎に異なる識別情報を埋め込んでおけば、情報追跡にも役立つ。例えば、媒体の識別情報と印刷を指示したユーザとの対応を記録しておくことで、特定の印刷文書を誰が出力したか容易に把握できるようになる。
なお、以下では、説明を簡単にするために、識別情報と位置情報とは明確に区別して用いる。しかしながら、媒体毎に異なる位置情報をコードパターン画像に埋め込み、その位置情報の違いにより媒体を識別するという手法もある。そこで、このような手法を採用した場合は、位置情報に媒体を識別する機能も備わっているものと見て、これを識別情報と考えるものとする。

まず、本実施の形態の筆記情報処理システムの構成について説明する。
図１は、本実施の形態が適用される筆記情報処理システムの全体構成を示した図である。この筆記情報処理システムは、情報処理装置の一例としての端末装置１０、情報処理装置の一例としての文書サーバ２０、情報処理装置の一例としての識別情報サーバ３０、および画像形成装置４０がネットワーク９０に接続されることにより構成されている。また、この筆記情報処理システムは、印刷文書５０およびペンデバイスの一例としての電子ペン６０を含んで構成される。

端末装置１０は、電子文書の印刷を指示したり、筆記情報を生成したりするために用いられる。なお、この端末装置１０としては、例えばパーソナルコンピュータ(ＰＣ)が用いられる。
文書サーバ２０は、電子文書を記憶している。そして、電子文書の印刷指示があると、電子文書の画像とコードパターン画像とを重畳した重畳画像の形成指示を出力する。また、本実施の形態において、文書サーバ２０は、電子文書を複製する機能も有する。なお、この文書サーバ２０は、例えば汎用のサーバコンピュータによって実現することができる。

識別情報サーバ３０は、媒体に付与する識別情報を発行する。そして、発行した識別情報を、その媒体に印刷される電子文書と関連付けて管理する。また、本実施の形態において、識別情報サーバ３０は、筆記情報や文字コード情報を関連付ける電子文書を特定する機能も有する。なお、この識別情報サーバ３０は、例えば汎用のサーバコンピュータによって実現することができる。
画像形成装置４０は、媒体に画像を形成する。ここで、画像形成装置４０における画像形成方式としては、例えば、電子写真方式を用いることができるが、インクジェット方式等のその他の如何なる方式を用いてもよい。

印刷文書５０は、電子文書の画像とコードパターン画像とを重畳した重畳画像が印刷された媒体である。
電子ペン６０は、印刷文書５０に文字または図形を記録(筆記)する機能を有するペンデバイスである。また、本実施の形態において、電子ペン６０は、コードパターン画像から取得した情報を他の装置に送信する機構も有する。

次に、本実施の形態の筆記情報処理システムにおいて印刷文書５０を生成する際の動作を説明する。
図２は、印刷文書５０を生成する際の筆記情報処理システムでの動作を示したシーケンス図である。
まず、ユーザが、端末装置１０を操作し、文書サーバ２０に格納された電子文書の中から印刷対象の電子文書を指定する。それにより、端末装置１０は、その電子文書の印刷指示を文書サーバ２０に送信する(ステップ１０１)。なお、このとき、端末装置１０は、ユーザが指定した印刷パラメータも送信する。ここで、印刷パラメータには、ページ、部数、用紙サイズ、Ｎ−ｕｐ(用紙の１ページ内に電子文書のＮページを割り付ける印刷)、余白等がある。

文書サーバ２０は、端末装置１０から電子文書の印刷指示を受信する(ステップ２０１)。そして、印刷を指示された電子文書の格納場所と、端末装置１０から受信した印刷パラメータとを識別情報サーバ３０に送信する(ステップ２０２)。

それにより、識別情報サーバ３０は、電子文書の格納場所と印刷パラメータとを受信する(ステップ３０１)。そして、識別情報を管理するデータベースから未使用の識別情報を取り出す(ステップ３０２)。ここで、取り出す識別情報の数は、印刷パラメータに応じて決定される。つまり、基本的には、印刷するページ数に印刷部数を乗じて得られる数の識別情報が取り出される。ただし、印刷パラメータ中に、Ｎ−ｕｐの指定等がある場合は、それも考慮される。例えば、１０ページの電子文書を２−ｕｐで５部印刷する場合は、２５(＝１０÷２×５)個の識別情報が取り出される。
次に、識別情報サーバ３０は、識別情報と、電子文書の格納場所と、印刷パラメータとを関連付けてデータベースに登録する(ステップ３０３)。そして、識別情報サーバ３０は、文書サーバ２０に対し、識別情報を送信する(ステップ３０４)。

それにより、文書サーバ２０は、識別情報を受信する(ステップ２０３)。そして、識別情報および位置情報を埋め込んだコードパターン画像を生成する(ステップ２０４)。なお、コードパターン画像の生成処理の詳細は後段で述べる。
その後、文書サーバ２０は、電子文書の文書画像とコードパターン画像とを画像形成装置４０に送信し、画像形成を指示する(ステップ２０５)。この指示は、例えば、電子文書、識別情報、位置情報からページ記述言語(ＰＤＬ：Print Description Language)を生成し、これを送信することで行うことができる。

画像形成装置４０は、文書サーバ２０から電子文書の文書画像とコードパターン画像とを受信する(ステップ４０１)。そして、画像形成装置４０は、まず、文書画像をＣ(シアン)、Ｍ(マゼンタ)、Ｙ(イエロー)の画像に展開する(ステップ４０２)。次に、文書画像はＣ、Ｍ、Ｙのトナーを用いて、コードパターン画像はＫ(黒)のトナーを用いて、画像形成を行う(ステップ４０３)。

ところで、上述した例では、識別情報サーバ３０は識別情報を発行するだけで、文書サーバ２０が、識別情報を含むコードパターン画像を生成し、画像形成装置４０に画像形成を指示する構成とした。しかしながら、識別情報サーバ３０が、コードパターン画像を生成し、画像形成装置４０に画像形成を指示する構成としてもよい。
また、コードパターン画像は、画像形成装置４０で生成することもできる。この場合は、文書サーバ２０または識別情報サーバ３０が、電子文書から生成したＰＤＬに識別情報を付加して画像形成装置４０へ送信し、画像形成装置４０が識別情報を含むコードパターン画像を生成することになる。

また、上記では、識別情報と、電子文書の格納場所と、印刷パラメータとが関連付けられて構成されたデータベースを識別情報管理サーバ３０に置く構成について説明した。これは、かかるデータベースを共有可能な装置（識別情報サーバ３０）に置くことで、複数ユーザへの対応や、サーバのアクセス制御技術を利用した電子文書のセキュリティ確保が可能となるからである。しかしながら、必ずしもこのような構成を採用しなければならないというわけではなく、端末装置１０や文書サーバ２０にこのようなデータベースを置く構成を採用してもよい。

また、上記した画像形成装置４０では、コードパターン画像をＫのトナーを用いて形成するようにした。これは、Ｋのトナーが、Ｃ、Ｍ、Ｙのトナーよりも赤外光の吸収量が多く、電子ペン６０でコードパターン画像を読み取ることができるからである。しかしながら、コードパターン画像は、特殊トナーを用いて形成することも可能である。
ここで、特殊トナーとしては、可視光領域(４００ｎｍ〜７００ｎｍ)における最大吸収率が７％以下であり、近赤外領域(８００ｎｍ〜１０００ｎｍ)における吸収率が３０％以上の不可視トナーが例示される。ここで、「可視」および「不可視」は、目視により認識できるかどうかとは関係しない。印刷された媒体に形成された画像が可視光領域における特定の波長の吸収に起因する発色性の有無により認識できるかどうかで「可視」と「不可視」とを区別している。また、可視光領域における特定の波長の吸収に起因する発色性が若干あるが、人間の目で認識し難いものも「不可視」に含める。
また、この不可視トナーは、画像の機械読取りのために必要な近赤外光吸収能力を高めるために、平均分散径が１００ｎｍ〜６００ｎｍの範囲のものが望ましい。

次に、本実施の形態で生成されるコードパターン画像の元となるコードパターンについて説明する。
図３は、コードパターンについて説明するための図である。
まず、コードパターンを構成するビットパターンについて説明する。
図３(ａ)に、ビットパターンの配置の一例を示す。
ビットパターンとは、情報埋め込みの最小単位である。ここでは、図３(ａ)に示すように、９箇所の中から選択した２箇所にビットを配置する。図では、黒の四角が、ビットが配置された位置を示し、斜線の四角が、ビットが配置されていない位置を示している。９箇所の中から２箇所を選択する組み合わせは、３６(＝_９Ｃ_２)通りある。したがって、このような配置方法により、３６通り(約５．２ビット)の情報を表現することができる。
ただし、識別情報および位置情報は、この３６通りのうち３２通り(５ビット)を使用して表現するものとする。

ところで、図３(ａ)に示した最小単位の四角は、６００ｄｐｉにおける２ドット×２ドットの大きさを有している。６００ｄｐｉにおける１ドットの大きさは０．０４２３ｍｍなので、この最小単位の四角の一辺は、８４．６μｍ(＝０．０４２３ｍｍ×２)である。コードパターンを構成するドットは、大きくなればなるほど目に付きやすくなるため、できるだけ小さいほうが好ましい。ところが、あまり小さくすると、プリンタで印刷できなくなってしまう。そこで、ドットの大きさとして、５０μｍより大きく１００μｍより小さい上記の値を採用している。これにより、プリンタで印刷可能な最適な大きさのドットを形成することができる。つまり、８４．６μｍ×８４．６μｍが、プリンタ（画像形成装置４０）で安定的に形成可能な最小の大きさなのである。
なお、ドットをこのような大きさにすることで、１つのビットパターンの一辺は、約０．５ｍｍ(＝０．０４２３ｍｍ×２×６)となる。

また、このようなビットパターンから構成されるコードパターンについて説明する。
図３(ｂ)に、コードパターンの配置の一例を示す。
ここで、図３(ｂ)に示した最小単位の四角が、図３(ａ)に示したビットパターンに相当する。すなわち、識別情報を符号化した識別符号は、１６(＝４×４)個のビットパターンを使用して埋め込まれる。また、Ｘ方向の位置情報を符号化したＸ位置符号と、Ｙ方向の位置情報を符号化したＹ位置符号とは、それぞれ、４個のビットパターンを使用して埋め込まれる。さらに、左上角部に、コードパターンの位置と回転を検出するための同期符号が、１つのビットパターンを使用して埋め込まれる。
なお、１つのコードパターンの大きさは、ビットパターンの５個分の幅に等しいため、約２．５ｍｍとなる。本実施の形態では、このように生成したコードパターンを画像化したコードパターン画像を、用紙全面に配置する。

次に、本実施の形態の筆記情報処理システムにおける筆記情報や文字コード情報の電子文書への反映について説明する。ただし、以下の説明において、筆記情報や文字コード情報は、電子文書に直接付加されるものとする。
まず、印刷文書５０に対する筆記を読み取るのに用いられる電子ペン６０について説明する。
図４は、電子ペン６０の機能構成を示したブロック図である。
図４に示したように、電子ペン６０は、ペン全体の動作を制御する制御部６１、電子ペン６０による筆記動作をペンチップ６９に加わる圧力によって検出する圧力センサ６２、媒体上に赤外光を照射する赤外ＬＥＤ６３、画像を入力する赤外ＣＭＯＳセンサ６４を備えている。さらに、識別情報および位置情報、さらには文字コード情報を記憶する情報メモリ６５、外部装置との通信を制御する通信部６６、電子ペン６０を駆動するためのバッテリ６７、電子ペン６０の識別情報(ペンＩＤ)を記憶するペンＩＤメモリ６８、筆記された文字等を表示する表示部７１、筆記された文字を文字モード情報に変換するか否かを切り替える切替部の一例としての切替スイッチ７２を備えている。そして、これら各部は、制御部６１に接続されている。なお、各部を制御部６１と直接接続するかどうかは、制御方法に応じて適宜定められる。
ここで、表示部７１としては、液晶ディスプレイ等のようなそれ自体に文字等を表示する表示装置や、自らが出射した光を紙面上に投影することで文字等を表示する表示装置等を用いることができる。

図５は、制御部６１の機能構成を示したブロック図である。図５に示したように、制御部６１は、入力画像から検出したコードパターン画像を処理する画像処理部６１１、画像処理部６１１での処理結果から識別情報および位置情報を抽出するデータ処理部６１２、データ処理部６１２にて抽出された位置情報から文字コード情報を生成する文字コード情報生成部６１３を含んで構成されている。
文字コード情報生成部６１３は、特徴量抽出部６１３ａ、文字特徴量記憶部６１３ｂ、文字識別部６１３ｃを含んで構成されている。特徴量抽出部６１３ａは、データ処理部６１２にて抽出された位置情報から筆記された文字毎の外接矩形を切り出し、その切り出した文字画像の特徴量を抽出する。文字特徴量記憶部６１３ｂは、各々の文字の標準的な文字パターンについての特徴量を記憶している。文字識別部６１３ｃは、特徴抽出部６１３ａにて抽出された文字画像の特徴量と、文字特徴量記憶部６１３ｂに記憶されている文字パターンについての特徴量とを比較して、文字認識を行うとともに、認識された文字に対応する文字コード情報を生成する。ここで、文字コード情報としては、例えば、汎用性のあるＡＳＣＩＩコードやシフトＪＩＳコード等を用いることができる。
また、文字コード情報生成部６１３は、例えば切替スイッチがＯＮされた場合に機能するように構成されている。

ここで、この電子ペン６０の動作の概略を説明する。
電子ペン６０による筆記が行われると、ペンチップ６９に接続された圧力センサ６２が、筆記動作を検出する。これにより、赤外ＬＥＤ６３が点灯し、赤外ＣＭＯＳセンサ６４がＣＭＯＳセンサによって媒体上の画像を撮像する。
なお、赤外ＬＥＤ６３は、消費電力を抑制するために、ＣＭＯＳセンサのシャッタタイミングに同期させてパルス点灯する。
また、赤外ＣＭＯＳセンサ６４は、赤外領域に感度があるＣＭＯＳセンサであって、撮像した画像を同時に転送できるグローバルシャッタ方式のＣＭＯＳセンサが使用される。また、外乱の影響を低減するために、ＣＭＯＳセンサ全面に可視光カットフィルタを配置している。そして、赤外ＣＭＯＳセンサ６４は、７０ｆｐｓ〜１００ｆｐｓ(frame per second)程度の周期で、画像を撮像する。なお、撮像素子はＣＭＯＳセンサに限定するものではなく、ＣＣＤ等、他の撮像素子を使用してもよい。

このように撮像した画像が制御部６１に入力されると、制御部６１は、撮像した画像からコードパターン画像を取得する。そして、それを復号し、コードパターン画像に埋め込まれている識別情報および位置情報を取得する。
以下、その際の制御部６１における画像処理部６１１およびデータ処理部６１２の動作について説明する。
図６は、電子ペン６０の画像処理部６１１およびデータ処理部６１２での動作を示したフローチャートである。
まず、画像処理部６１１は、印刷文書５０上の画像を入力する(ステップ６０１)。そして、画像に含まれるノイズを除去するための処理を行う(ステップ６０２)。ここで、ノイズとしては、ＣＭＯＳ感度のばらつきや電子回路により発生するノイズ等がある。ノイズを除去するために如何なる処理を行うかは、電子ペン６０の撮像系の特性に応じて決定する。例えば、ぼかし処理やアンシャープマスキング等の先鋭化処理を適用することができる。

次に、画像処理部６１１は、画像からドットパターン(ドット画像の位置)を検出する(ステップ６０３)。例えば、２値化処理によりドットパターン部と背景部とを切り分け、２値化された個々の画像位置からドットパターンを検出することができる。２値化画像にノイズ成分が多数含まれる場合は、例えば、２値化画像の面積や形状によりドットパターンの判定を行うフィルタ処理を組み合わせる必要がある。
また、画像処理部６１１は、検出したドットパターンを２次元配列上のデジタルデータに変換する(ステップ６０４)。例えば、２次元配列上で、ドットがある位置を「１」、ドットがない位置を「０」というように変換する。そして、この２次元配列上のデジタルデータは、画像処理部６１１からデータ処理部６１２へと受け渡される。

次いで、データ処理部６１２は、受け渡されたデジタルデータから、図３(ａ)に示した２つのドットの組み合わせからなるビットパターンを検出する(ステップ６０５)。例えば、ビットパターンに対応するブロックの境界位置を２次元配列上で動かし、ブロック内に含まれるドットの数が２つになるような境界位置を検出することにより、ビットパターンを検出することができる。
このようにしてビットパターンが検出されると、データ処理部６１２は、ビットパターンの種類を参照することにより、同期符号を検出する(ステップ６０６)。そして、同期符号からの位置関係に基づいて、識別符号および位置符号を検出する(ステップ６０７)。
その後、データ処理部６１２は、識別符号を復号して識別情報を取得し、位置符号を復号して位置情報を取得する(ステップ６０８)。

ここで、本実施の形態の電子ペン６０においては、切替スイッチ７２がＯＮに設定された場合には、制御部６１の文字コード情報生成部６１３は、データ処理部６１２から位置情報を取得し、取得した位置情報に基づいて、筆記された文字についての文字コード情報を生成する。
次に、その際の制御部６１における文字コード情報生成部６１３の動作について説明する。
図７は、電子ペン６０の文字コード情報生成部６１３での動作を示したフローチャートである。
電子ペン６０の切替スイッチ７２がＯＮに設定されると、文字コード情報生成部６１３は、データ処理部６１２から位置情報を取得する（Ｓ７０１）。ここでは、データ処理部６１２は、媒体に筆記された文字の媒体上での位置情報を読み取る位置情報読取部として機能する。
文字コード情報生成部６１３が位置情報を取得すると、特徴量抽出部６１３ａは、取得した位置情報から筆記された文字毎の外接矩形を切り出し、その切り出した文字画像の特徴量を抽出する（Ｓ７０２）。そして、抽出された文字画像の特徴量を文字識別部６１３ｃに送る。

文字識別部６１３ｃは、特徴量抽出部６１３ａから取得した文字画像の特徴量から文字認識を実行する（Ｓ７０３）。具体的には、文字識別部６１３ｃは、特徴量抽出部６１３ａから取得した文字画像の特徴量と、文字特徴量記憶部６１３ｂに記憶されている各々の文字の標準的な文字パターンについての特徴量との論理上の距離を計測する。そして、かかる計測の結果に基づいて、特徴量の距離の開きが最も少ない文字が描画（筆記）されているものと判断する。
そして、ステップ７０３にて描画されているものと判断された文字に対応する文字コード情報（例えば、ＡＳＣＩＩコードやシフトＪＩＳコード等）を生成する（Ｓ７０４）。

ここで、文字識別部６１３ｃは、字体構成が比較的単純である例えば平仮名および片仮名に限って、文字認識を実行するように構成することもできる。すなわち、文字特徴量記憶部６１３ｂには、平仮名および片仮名の標準的な文字パターンについての特徴量のみを記憶しておき、特徴量抽出部６１３ａから取得した文字画像の特徴量との比較を行うように構成することもできる。このように構成することで、文字特徴量記憶部６１３ｂの記憶容量や文字識別部６１３ｃでの処理負荷を低く抑えることができるので、内部スペースに制限がある電子ペン６０において、文字コード情報生成部６１３を小型に形成することができる。

その後、文字識別部６１３ｃは、ステップ７０４にて生成された文字コード情報を、データ処理部６１２にて生成された識別情報および位置情報に対応付けて、情報メモリ６５に記憶する（Ｓ７０５）。そして、文字コード情報は、通信部６６を介して、識別情報および位置情報とともに端末装置１０に送られる。
それと同時に、文字識別部６１３ｃは、ステップ７０４にて生成された文字コード情報を表示制御部６１４に送る（Ｓ７０６）。そして、表示制御部６１４は、表示部７１に筆記された文字を文字コード形式で表示する（Ｓ７０７）。
なお、ここで、電子ペン６０は、表示部７１に代えて、または表示部７１に加えて、所定の音を発する音源部や所定の光を発する発光部を備えることもできる。そして、表示部７１での表示に代えて、または表示部７１での表示とともに、所定の音や所定の光によって、文字コード情報生成部６１３により筆記された文字が認識され、文字コード情報が生成されたことをユーザに知らせることもできる。

ところで、上記の説明では、電子ペン６０の切替スイッチ７２がＯＮに設定された場合に、文字コード情報生成部６１３が筆記された文字についての文字コード情報を生成処理する構成について説明した。
本実施の形態の電子ペン６０では、例えば印刷文書５０上の所定の領域に筆記された場合に、その領域に筆記された文字については、電子ペン６０にて文字コード情報を生成し、印刷文書５０上の他の領域に筆記された文字については、端末装置１０にて筆記情報を生成するように構成することもできる。
ここで、図８は、媒体である印刷文書５０の一例を示した図である。図８に示したように、印刷文書５０上には、筆記された文字について文字コード情報を生成する領域Ｇが予め設定されている。そして、領域Ｇにて筆記された場合には、筆記された文字について電子ペン６０が文字コード情報を生成する。また、印刷文書５０上の他の領域に筆記された文字については、位置情報が送られる端末装置１０が筆記情報を生成する。
また、領域Ｇには、図８に示したように、筆記される文字の大きさを指定する枠を設けておくこともできる。この枠の大きさは、文字コード情報を電子文書上に反映する際の基準となる大きさに設定される。そのため、この枠内に収まるように文字を記載することで、電子文書上に常時一定の大きさの文字を反映させるように設定することができる。

また、その際に、切替スイッチ７２によるＯＮ設定と連動させることもできる。すなわち、領域Ｇでの文字の筆記が一文字単位で、または所定の文字列単位で終了した時点で、切替スイッチ７２をＯＮすることにより、一文字単位または所定の文字列単位毎に、文字コード情報を生成すように構成することもできる。それにより、ユーザは、筆記した文字を一文字単位または所定の文字列単位で文字コード情報に変換するか否かを容易に選択することができる。また、例えば切替スイッチ７２を連続して２回ＯＮすることにより、生成した文字コード情報を消去するように設定することもできる。このように、筆記された文字について文字コード情報を生成する領域Ｇと、切替スイッチ７２によるＯＮ設定とを連動させることにより、文字コード情報への変換の実行／不実行や生成した文字コード情報の消去を、一文字単位または所定の文字列単位に自由に行うことができる。

また、本実施の形態の電子ペン６０では、例えば印刷文書５０上に所定のチェックボックスを形成しておき、チェックボックスに例えばチェックマークが記載された場合に、印刷文書５０上に筆記された文字について文字コード情報を生成するように構成することもできる。
ここで、図９は、他の印刷文書５０の一例を示した図である。図９に示したように、印刷文書５０上に予め形成されたチェックボックスＨにチェックマークが記載された場合には、電子ペン６０は、印刷文書５０上に筆記された文字について文字コード情報を生成する。
このように、印刷文書５０上に筆記された文字についての文字コード情報の生成指示は、様々な態様を用いることができる。

続いて、電子ペン６０が取得した情報から筆記情報を生成して電子文書に付加し、電子ペン６０が生成した文字コード情報を電子文書に付加する処理について説明する。この処理は、端末装置１０、文書サーバ２０、識別情報サーバ３０が情報を交換することによって実現される。
図１０は、端末装置１０、文書サーバ２０、識別情報サーバ３０の機能構成を示した図である。なお、端末装置１０、文書サーバ２０、識別情報サーバ３０は、印刷文書５０を生成するための機能も有しているが、ここでは、筆記情報や文字コード情報を電子文書に付加するための機能のみを示す。

図１０に示したように、端末装置１０は、入力部１１、出力部１２、筆記生成部１３、送信部１４、受信部１５を含んで構成されている。
入力部１１は、ユーザへの問い合わせに対するユーザからの応答等の入力を受け付ける。
出力部１２は、ユーザへの問い合わせ等を出力する。
筆記生成部１３は、電子ペン６０から得た位置情報に基づいて筆記情報を生成する。したがって、筆記生成部１３は筆記情報生成手段として機能する。なお、筆記生成部１３は、電子ペン６０から得た文字コード情報については、そのまま送信部１４に送る。
送信部１４は、識別情報、筆記情報、文字コード情報、ユーザへの問い合わせに対する応答等を送信する。
受信部１５は、電子ペン６０からは、識別情報、位置情報、文字コード情報を受信し、識別情報サーバ３０からは、ユーザへの問い合わせ等を受信する。

なお、これらの機能部分は、ソフトウェアとハードウェア資源とが協働することにより実現される。具体的には、端末装置１０の図示しないＣＰＵが、入力部１１、出力部１２、筆記生成部１３、送信部１４、受信部１５の各機能を実現するプログラムを外部記憶装置から主記憶装置に読み込んで処理を行う。

また、文書サーバ２０は、文書記憶部２１、文書生成部２２、筆記付加部２３、送信部２４、受信部２５を含んで構成されている。
文書記憶部２１は、記憶手段であって、電子文書を記憶する。
文書生成部２２は、文書記憶部２１に記憶された電子文書を複製した新たな電子文書(以下、「複製文書」という)を生成し、この複製文書を文書記憶部２１に記憶する。
筆記付加部２３は、文書記憶部２１に記憶された複製文書に筆記情報や文字コード情報を付加する。
送信部２４は、複製文書の生成や、複製文書に対する筆記情報や文字コード情報の付加の結果を送信する。
受信部２５は、複製文書の生成や、複製文書に対する筆記情報や文字コード情報の付加の指示を受信する。

なお、これらの機能部分は、ソフトウェアとハードウェア資源とが協働することにより実現される。具体的には、文書サーバ２０の図示しないＣＰＵが、文書生成部２２、筆記付加部２３、送信部２４、受信部２５の各機能を実現するプログラムを外部記憶装置から主記憶装置に読み込んで処理を行う。また、文書記憶部２１は、例えば、磁気ディスクによって実現される。

また、識別情報サーバ３０は、ＤＢ(データベース)記憶部３１、制御部３２、登録部３３、送信部３４、受信部３５を含んで構成されている。
ＤＢ記憶部３１は、識別情報と、電子文書の格納場所と、印刷パラメータと、複製文書の存否を示すフラグとを対応付けたデータベースを記憶する。
制御部３２は、識別情報サーバ３０全体の動作を制御する。
登録部３３は、ＤＢ記憶部３１に記憶されたデータベースに情報を登録する。
送信部３４は、端末装置１０へは、ユーザへの問い合わせ等を送信し、文書サーバ２０へは、複製文書の生成や、複製文書に対する筆記情報や文字コード情報の付加の指示を送信する。
受信部３５は、端末装置１０からは、識別情報、筆記情報、文字コード情報、ユーザへの問い合わせに対する応答等を受信し、文書サーバ２０からは、複製文書の生成や、複製文書に対する筆記情報や文字コード情報の付加の結果を受信する。

なお、これらの機能部分は、ソフトウェアとハードウェア資源とが協働することにより実現される。具体的には、識別情報サーバ３０の図示しないＣＰＵが、制御部３２、登録部３３、送信部３４、受信部３５の各機能を実現するプログラムを外部記憶装置から主記憶装置に読み込んで処理を行う。また、ＤＢ記憶部３１は、例えば、磁気ディスクによって実現される。

次に、識別情報サーバ３０内のＤＢ記憶部３１が記憶するデータベースの内容について具体的に説明しておく。
図１１は、このデータベース内のデータの一例を示している。
このうち、図１１(ａ)は、各媒体に印刷された電子文書を管理するためのテーブルを示している。
図１１(ａ)に示したように、このテーブルには、識別情報と、電子文書の格納場所と、印刷パラメータと、フラグとが項目として設けられている。

識別情報は、本実施の形態では、上述したように、各媒体の識別情報である。
電子文書の格納場所は、各媒体に印刷された電子文書が格納された場所の情報(アドレス情報)である。
印刷パラメータは、各媒体に電子文書を印刷した際に設定した印刷パラメータである。図１１(ａ)では、印刷パラメータを、「ページ(Ｐ)，余白(Ａ，Ｂ，Ｃ，Ｄ)」という形式で示している。Ｐはページ番号であり、Ａ、Ｂ、Ｃ、Ｄは、それぞれ、左側、右側、上側、下側の余白(単位はｍｍ)である。なお、ここでは、印刷パラメータとしてページおよび余白を示したが、これに限られるものではない。この他にも、通常の印刷で用いられる種々の印刷パラメータを管理することが可能である。

また、フラグは、各媒体に印刷された電子文書に対し、複製文書が生成されているかどうかを示すものである。本実施の形態において、フラグ「ＯＮ」は、複製文書が生成されていることを示し、フラグ「ＯＦＦ」は、複製文書が生成されていないことを示している。図２のステップ３０３でデータが登録された直後は、対応するフラグは初期値である「ＯＦＦ」に設定されている。しかしながら、その後、印刷文書５０に筆記がなされることにより複製文書が生成されると、フラグは「ＯＮ」になる。

図１１(ａ)のデータベースについて、より具体的に説明する。
まず、１行目から４行目は、電子文書「ａａａ．ｄｏｃ」の第１ページから第２ページが２部印刷されたことを示している。その際、１部は、左右上下の余白が１ｍｍで印刷され、もう１部は、左右上下の余白が２ｍｍで印刷されている。
また、５行目は、電子文書「ｂｂｂ．ｄｏｃ」の第１ページが１部印刷されたことを示している。その際、左右の余白は１ｍｍで、上下の余白は２ｍｍで印刷されている。

そして、１行目から５行目のうち、３行目から５行目におけるフラグは「ＯＦＦ」なので、オリジナルの電子文書は複製されていない。これに対し、１行目および２行目におけるフラグは「ＯＮ」となっている。これは、１行目で管理される媒体、または、２行目で管理される媒体に筆記がなされ、そのオリジナルの電子文書である「ａａａ．ｄｏｃ」が複製されていることを示している。

このようにオリジナルの電子文書に対する複製文書が生成されると、本実施の形態の識別情報サーバ３０では、これを別のテーブルで管理している。
図１１(ｂ)は、このような複製文書を管理するテーブルを示している。
すなわち、図１１(ａ)の１行目で管理される媒体に対し、「ａａａ．ｄｏｃ」に対する複製文書である「ａａａ．ｘｄｗ」の１ページ目が関連付けられている。また、図１１(ａ)の２行目で管理される媒体に対し、「ａａａ．ｄｏｃ」に対する複製文書である「ａａａ．ｘｄｗ」の２ページ目が関連付けられている。

なお、ここでは、図１１(ａ)の１行目および２行目で管理される電子文書の複製文書が図１１(ｂ)で管理される例を示した。しかしながら、このことは、図１１(ａ)の１行目および２行目で管理される媒体の両方に実際に筆記がなされたことを意味しない。ある媒体に筆記がなされた場合、オリジナルの電子文書全体について複製文書を生成してもよいし、オリジナルの電子文書のうちその媒体に印刷されたページのみについて複製文書を生成してもよいからである。

続いて、筆記情報や文字コード情報を電子文書に付加する際の動作について説明する。
図１２は、このときの動作を示したシーケンス図である。
まず、電子ペン６０は、図６の処理により取得した識別情報および位置情報、さらに、例えば切替スイッチ７２がＯＮに設定された場合等には、図７の処理により取得した識別情報および位置情報に対応付けられた文字コード情報を端末装置１０に送信する(ステップ６１１)。

端末装置１０では、受信部１５が、電子ペン６０から識別情報および位置情報、さらには識別情報および位置情報に対応付けられた文字コード情報を受信し、これらの情報を筆記生成部１３に受け渡す(ステップ１１１)。
次に、筆記生成部１３は、受け渡された情報のうち位置情報に基づいて筆記情報を生成し、送信部１４に受け渡す(ステップ１１２)。このとき、筆記情報は、媒体上の複数の位置を示す位置情報に基づいて生成される。

なお、電子ペン６０から受信した位置情報に誤りがあった場合、筆記生成部１３は、次のような処理を行うことで、位置情報を補正するようにしてもよい。
第一に、複数の位置情報を比較し、その中で特異点を取り除くフィルタ処理である。すなわち、１回の筆記動作(ストローク)によって取得した複数の位置情報の連続性を検査し、連続性から大きく外れる点は、復号エラーがあった点として除外する。これにより、スムーズな筆記情報を得ることができる。
第二に、復号に失敗した位置情報を検出し、その位置情報を周辺の位置情報に基づいて補正する補正処理である。すなわち、１回の筆記動作(ストローク)によって取得した複数の位置情報の連続性を検査することで、復号エラーを検出する。そして、復号に失敗した位置情報を、その近傍の復号に成功した位置情報を用いて補正する。ここで、補正方法としては、線形補間、スプライン補間等、公知の手法を用いることができる。

また、筆記生成部１３は、受信部１５から受け渡された識別情報は、そのまま送信部１４に受け渡す。同様に、受信部１５から受け渡された文字コード情報は、識別情報および位置情報に対応付けられた形態でそのまま送信部１４に受け渡す。
その後、送信部１４は、識別情報、位置情報、および文字コード情報を識別情報サーバ３０に送信する(ステップ１１３)。

これにより、識別情報サーバ３０では、受信部３５が、識別情報、位置情報、および文字コード情報を受信し、制御部３２に受け渡す(ステップ３１１)。そして、制御部３２は、ＤＢ記憶部３１に記憶されたデータベースを参照し、受信した識別情報に対応するフラグが「ＯＮ」になっているかどうかを判定する(ステップ３１２)。つまり、過去に同じ媒体に筆記がなされたことにより、その媒体に印刷された電子文書に対する複製文書が生成済みであるかどうかを判定する。

ここで、フラグが「ＯＮ」であると判定された場合、すなわち、複製文書があると判定された場合、制御部３２は、端末装置１０に問い合わせを送信するよう送信部３４に指示する。そして、送信部３４は、端末装置１０に問い合わせを送信する(ステップ３１３)。
複製文書があれば、その複製文書に筆記情報や文字コード情報を追加する場合と、その複製文書とは別に新たな複製文書を生成してその新たな複製文書に筆記情報や文字コード情報を付加する場合とが考えられる。そこで、本実施の形態では、このどちらを選択するかをユーザの判断に委ねているのである。例えば、図１１(ａ)の１行目で管理される媒体に筆記がなされた場合、図１１(ｂ)の１行目で管理される複製文書に筆記情報や文字コード情報を追加するか、図１１(ａ)の１行目で管理されるオリジナルの電子文書から生成された新たな複製文書に筆記情報や文字コード情報を付加するかが、問い合わせられる。

これにより、端末装置１０では、受信部１５が、問い合わせを受信する(ステップ１１４)。そして、受信部１５が、この問い合わせを出力部１２に受け渡し、出力部１２が、問い合わせのメッセージを出力し、ユーザが、この問い合わせに対する応答を入力する。ここで、応答の内容は、既にある複製文書に筆記情報や文字コード情報を追加するか、新たに生成した複製文書に筆記情報や文字コード情報を付加するか、の選択情報である。このような応答が入力されると、入力部１１が、応答を受け付けて送信部１４に受け渡し、送信部１４が応答を識別情報サーバ３０に送信する(ステップ１１５)。

これにより、識別情報サーバ３０では、受信部３５が、応答を受信し、制御部３２に受け渡す(ステップ３１４)。そして、制御部３２は、応答内容を参照し、既にある複製文書に筆記情報や文字コード情報を追加するか、新たに複製文書を生成してそれに筆記情報や文字コード情報を付加するかを判定する(ステップ３１５)。
ここで、既にある複製文書に筆記情報や文字コード情報を追加すると判定した場合は、その旨の指示を送信部３４に対して行う。そして、送信部３４が、ステップ３１２で特定した複製文書に対する筆記情報や文字コード情報の追加を文書サーバ２０に指示する(ステップ３１９)。

これにより、文書サーバ２０では、受信部２５が、筆記情報や文字コード情報の追加指示を受信し、筆記付加部２３に受け渡す。そして、筆記付加部２３は、文書記憶部２１に記憶された複製文書のうち、指定された複製文書に筆記情報や文字コード情報を追加する(ステップ２１３)。
ここで、筆記付加部２３は、指定された複製文書に文字コード情報を追加するに際しては、識別情報および位置情報に対応した複製文書および複製文書の位置に文字コード情報を追加するが、その際の文字のサイズを、予め定められたサイズ（デフォルト値）に設定する。また、端末装置１０の入力部１１からのユーザの指示入力により、筆記付加部２３で設定される文字のサイズを任意に設定することも可能である。

一方、新たに複製文書を生成してそれに筆記情報や文字コード情報を付加すると判定した場合は、ステップ３１６へ進む。また、本実施の形態では、媒体に印刷された電子文書そのもの(オリジナルの電子文書)に筆記情報や文字コード情報を付加することはしない。したがって、ステップ３１２でフラグが「ＯＦＦ」であると判定された場合、すなわち、複製文書がないと判定された場合も、同様にステップ３１６へ進む。
すなわち、制御部３２は、ステップ３１２で特定したオリジナルの電子文書に対する複製文書の生成指示を文書サーバ２０に送信するよう送信部３４に指示する。そして、送信部３４は、文書サーバ２０に対し、複製文書の生成を指示する(ステップ３１６)。例えば、図１１(ａ)の３行目で管理される媒体に筆記がなされた場合、「ａａａ．ｄｏｃ」に対する複製文書の生成が指示される。

これにより、文書サーバ２０では、受信部２５がこの指示を受信し、文書生成部２２に受け渡す。そして、文書生成部２２が、文書記憶部２１に記憶された電子文書のうち、指定された電子文書に対する複製文書を生成し、文書記憶部２１に記憶する(ステップ２１１)。

なお、このとき、識別情報サーバ３０の制御部３２は、ＤＢ記憶部３１内のデータベースにおいて媒体に対応付けられた印刷パラメータを取得する。そして、送信部３４が、この印刷パラメータを文書サーバ２０に送信する。こうすることにより、文書サーバ２０の文書生成部２２は、印刷文書と見た目が同じ複製文書を生成することができる。その結果、筆記情報や文字コード情報の電子文書への反映がより高精度に行えるようになる。
また、電子文書が編集されてしまうと、電子文書と筆記情報や文字コード情報との対応関係が崩れ、矛盾が生じる場合がある。さらに、電子文書の中には、Ｗｅｂページ等のように、印刷文書に相当するページ構造を持たないものもあり、印刷時の設定により印刷文書のレイアウトが大きく異なる場合がある。このような場合であっても、印刷文書と同じレイアウトを持つ電子文書を生成することで、筆記情報や文字コード情報を適切な位置に反映させることができるのである。

このとき、さらに、複製文書は、オリジナルの電子文書に相当する部分が編集できない形式とすることができる。このような複製文書の形式としては、富士ゼロックス社の「ＤｏｃｕＷｏｒｋｓ」における「ＸＤＷ形式」や、米国アドビシステムズ社の「Ａｃｒｏｂａｔ」における「ＰＤＦ形式」等がある。そして、このようにオリジナルの電子文書に相当する部分が編集できない形式の複製文書を生成した場合、例えば、富士ゼロックス社の「ＤｏｃｕＷｏｒｋｓ」における「アノテーション」の機能を用いて複製文書に筆記情報や文字コード情報を貼り付けることができる。

このように複製文書が生成されると、文書生成部２２は、複製文書の格納場所(ファイル名を含む)の情報を取得し、それを送信部２４に受け渡す。そして、送信部２４が、この情報を識別情報サーバ３０に送信する(ステップ２１２)。

これにより、識別情報サーバ３０では、受信部３５が、複製文書の格納場所の情報を受信し、制御部３２を介して登録部３３に受け渡す(ステップ３１７)。そして、登録部３３は、識別情報とこの格納場所との対応をＤＢ記憶部３１に記憶する。また、複製元のオリジナルの電子文書に対応するフラグを「ＯＮ」に変更する(ステップ３１８)。例えば、図１１(ａ)の１行目が登録された直後において媒体に筆記がなされたとすると、ここで図１１(ｂ)の１行目が登録される。そして、図１１(ａ)の１行目のフラグが「ＯＦＦ」から「ＯＮ」へ変更される。

その後、制御部３２は、複製文書への筆記情報や文字コード情報の追加を送信部３４に指示する。そして、送信部３４が、ステップ３１７で特定した複製文書に対する筆記情報や文字コード情報の付加を文書サーバ２０に指示する(ステップ３１９)。例えば、図１１(ａ)の１行目が登録された直後において媒体に筆記がなされたとすると、図１１(ｂ)に１行目に登録された「ａａａ．ｘｄｗ」の１ページ目への筆記情報や文字コード情報の付加が指示される。

これにより、文書サーバ２０では、受信部２５が、筆記情報や文字コード情報の付加指示を受信し、筆記付加部２３に受け渡す。そして、筆記付加部２３は、文書記憶部２１に記憶された複製文書のうち、指定された複製文書に筆記情報や文字コード情報を付加する(ステップ２１３)。

なお、以上では、筆記情報や文字コード情報の付加対象を既にある複製文書とするか新たに生成した複製文書とするかを、ユーザに問い合わせて判断したが、これには種々のバリエーションが考えられる。
まず、ユーザに対する問い合わせ等を行うことなく、筆記情報や文字コード情報を付加する電子文書をシステム側で決めてしまうという方法である。
或いは、筆記情報や文字コード情報を付加すべき電子文書の選択方法が印刷時に既に決まっている場合は、その選択方法を指定する指定情報をコードパターン画像の一部として媒体に埋め込んでおいてもよい。この場合は、電子ペン６０がコードパターン画像から識別情報および位置情報を取得する際に、この指定情報も取得し、識別情報サーバ３０に送信する。そして、識別情報サーバ３０では、ステップ３１５での判定をこの指定情報に基づいて行う。

以上説明したように、本実施の形態の筆記情報処理システムでは、電子ペン６０が筆記された文字や文字列をその文字や文字列を普遍的に示す電子情報である文字コード情報に変換するように構成されている。
それにより、筆記情報だけでなく、文字コード情報を電子文書に反映することが可能となる。そのため、電子文書上において、筆記された文字や文字列を電子的に処理することができる。具体的には、筆記された文字や文字列に対して、例えば、電子ペン６０での表示、平仮名から漢字等への変換や英語等の外国語への翻訳、その文字や文字列が有する意味の検索、さらには、関連した情報の検索等といった電子的な処理を施すことが可能となる。
また、電子ペン６０が文字コード情報への変換機能を有するので、変換する文字等の指定が容易となる。

本発明の筆記情報処理システムの全体構成を示した図である。 印刷文書を生成する際の筆記情報処理システムでの動作を示したシーケンス図である。 コードパターンについて説明するための図である。 電子ペンの機能構成を示したブロック図である。 制御部の機能構成を示したブロック図である。 電子ペンの画像処理部およびデータ処理部での動作を示したフローチャートである。 電子ペンの文字コード情報生成部での動作を示したフローチャートである。 印刷文書の一例を示した図である。 印刷文書の他の一例を示した図である。 端末装置、文書サーバ、識別情報サーバの機能構成を示した図である。 ＤＢ記憶部が記憶するデータベース内のデータの一例を示した図である。 筆記情報処理システムでの筆記情報や文字コード情報を電子文書に付加し、電子文書を編集処理する際の動作を示したシーケンス図である。

符号の説明

１０…端末装置、２０…文書サーバ、３０…識別情報サーバ、４０…画像形成装置、５０…印刷文書、６０…電子ペン

Claims (10)

1. ユーザによる媒体への筆記操作に対応して、当該筆記操作に関連した情報を当該媒体から読み取るペンデバイスと、
   前記ペンデバイスにて読み取られた前記情報を取得し、取得した当該情報に基づいて前記媒体への筆記内容を当該媒体または当該媒体に印刷された電子文書に関連付けて記憶する情報処理装置とを備え、
   前記ペンデバイスは、前記媒体に筆記された文字の文字コード情報を生成する文字コード情報生成部を有することを特徴とする筆記情報処理システム。
2. 前記ペンデバイスは、前記文字コード情報生成部にて前記文字コード情報の生成を行うか否かを切り替える切替部をさらに有することを特徴とする請求項１記載の筆記情報処理システム。
3. 前記文字コード情報生成部は、筆記された前記文字の中の片仮名および平仮名について前記文字コード情報を生成することを特徴とする請求項１記載の筆記情報処理システム。
4. 前記文字コード情報生成部は、前記媒体上の所定の領域内に筆記された前記文字について前記文字コード情報を生成することを特徴とする請求項１記載の筆記情報処理システム。
5. 前記文字コード情報生成部は、前記媒体上に形成された所定のチェックボックス内がマークされた場合に、筆記された前記文字について前記文字コード情報を生成することを特徴とする請求項１記載の筆記情報処理システム。
6. 前記ペンデバイスは、筆記された前記文字を前記文字コード情報生成部にて生成された前記文字コード情報に基づいて表示する表示部をさらに有することを特徴とする請求項１記載の筆記情報処理システム。
7. 媒体に筆記された文字の当該媒体上での位置情報を読み取る位置情報読取部と、
   前記位置情報読取部にて読み取られた前記位置情報に基づいて、前記媒体に筆記された文字の文字コード情報を生成する文字コード情報生成部と
   を備えたことを特徴とするペンデバイス。
8. 前記文字コード情報生成部にて前記文字コード情報の生成を行うか否かを切り替える切替部をさらに備えたことを特徴とする請求項７記載のペンデバイス。
9. 筆記された前記文字を前記文字コード情報生成部にて生成された前記文字コード情報に基づいて表示する表示部をさらに備えたことを特徴とする請求項７記載のペンデバイス。
10. コンピュータに、
    媒体に筆記された文字の当該媒体上での位置情報を読み取る機能と、
    読み取られた前記位置情報に基づいて、前記媒体に筆記された文字の文字コード情報を生成する機能と
    を実現させるプログラム。

Images