JP2009232202A - 情報処理装置、及びプログラム - Google Patents

Abstract

【課題】紙媒体に記録された情報の一部を強調できる情報処理装置及びプログラムを提供する。
【解決手段】紙媒体を識別する媒体識別子と、媒体上の領域を特定する少なくとも一つの領域情報とを関連づけた記録装置と通信し、紙媒体全体を支持可能な面を有し、予め定められた紙媒体上の複数の領域のいずれかを選択的に照明する。ここで、上記面に支持された紙媒体を識別する媒体識別子を検知し、当該検知した媒体識別子に関連づけて記録装置に記録された領域情報を取得する。そして当該取得した領域情報に対応する領域を照明するよう制御する。このとき制御手段は、紙媒体上で利用者がした記入内容に基づき、紙媒体と面との相対位置を検出し、当該検出した相対位置により照明する領域を制御する情報処理装置である。
【選択図】図１

Description

本発明は、情報処理装置及びプログラムに関する。

印刷物を電子的に読み取り、その印刷物の電子データを比較元画像として入力し、比較元画像に含まれるページ画像を含む処理対象領域の特徴量を抽出する。抽出した特徴量を用いて、前記比較元画像に対応する比較先画像を記憶媒体から検索する。そして、検索結果である画像に対して処理を行う技術が特許文献１に開示されている。
特開２００５−４７２４号公報

紙媒体に記録された情報の一部を強調できる情報処理装置及びプログラムを提供する。

請求項１記載の発明は、情報処理装置であって、紙媒体を識別する媒体識別子と、媒体上の領域を特定する少なくとも一つの領域情報とを関連づけた記録装置と通信する通信手段と、紙媒体全体を支持可能な面を有し、予め定められた紙媒体上の複数の領域のいずれかを選択的に照明する選択照明手段と、前記面に支持された紙媒体を識別する媒体識別子を検知する検知手段と、前記通信手段を介して、前記検知された媒体識別子に関連づけて前記記録装置に記録された領域情報を取得する取得手段と、前記取得した領域情報に対応する領域を照明するよう制御する制御手段と、を含み、前記制御手段は、紙媒体上で利用者がした記入内容に基づき、紙媒体と、前記面との相対位置を検出し、当該検出した相対位置により照明する領域を制御することとしたものである。

請求項２記載の発明は、請求項１に記載の情報処理装置であって、前記制御手段は、紙媒体上で予め定められた複数の位置で利用者がした記入内容に基づき、紙媒体と、前記面との相対位置を検出することとしたものである。

請求項３記載の発明は、請求項１に記載の情報処理装置であって、前記制御手段は、紙媒体上で予め定められた位置で、利用者がした、異方性のある記入内容に基づき、紙媒体と、前記面との相対位置を検出することとしたものである。

請求項４記載の発明は、請求項１に記載の情報処理装置であって、前記制御手段は、紙媒体上で予め定められた位置で、利用者がした記入内容を受け入れて、当該記入内容に外接する領域を検出し、当該検出した領域の特徴量に基づいて、紙媒体と、前記面との相対位置を検出することとしたものである。

請求項５記載の発明は、請求項１に記載の情報処理装置であって、前記面内には、面に載せられた媒体の裏面を撮像する撮像手段を備え、当該撮像手段が撮像した媒体の裏面の画像に基づいて、前記制御手段が紙媒体と、前記面との相対位置を検出することとしたものである。

請求項６記載の発明は、請求項１に記載の情報処理装置であって、前記面内には、面に載せられた媒体の裏面を撮像する撮像手段を備え、媒体を透かして当該撮像手段が撮像した媒体表面側の画像に基づいて、前記制御手段が紙媒体と、前記面との相対位置を検出することとしたものである。

請求項７記載の発明は、請求項１から６のいずれか一項に記載の情報処理装置であって、前記面内には、面に載せられた媒体の裏面を撮像する撮像手段を備え、紙媒体ごとに固有の繊維構造を前記撮像手段が撮像し、当該撮像した繊維構造に基づいて、媒体識別子の検知が行われることとしたものである。

請求項８記載の発明は、プログラムであって、コンピュータを、紙媒体を識別する媒体識別子と、媒体上の領域を特定する少なくとも一つの領域情報とを関連づけた記録装置と通信する通信手段と、紙媒体全体を支持可能な面に配置された選択照明部を制御し、紙媒体上の予め定められた複数の領域のいずれかを選択的に照明する選択照明手段と、前記面に支持された紙媒体を識別する媒体識別子を検知する検知手段と、前記通信手段を介して、前記面で検知された媒体識別子に関連づけて前記記録装置に記録された領域情報を取得する取得手段と、紙媒体上で利用者がした記入内容に基づき、紙媒体と、前記面との相対位置を検出し、当該検出した相対位置を用いて前記取得した領域情報に対応する前記面の領域を照明するよう制御する制御手段と、として機能させることとしたものである。

請求項１，８記載の発明によると、面上に配された紙媒体上の情報の一部が照明によって強調できる。

請求項２，３記載の発明によると、利用者の記入操作によって面上に配された紙媒体の相対位置が検出できる。

請求項４記載の発明によると、利用者の記入内容によって面上に配された紙媒体の相対位置が検出できる。

請求項５，６記載の発明によると、紙媒体に形成された情報を面側に配された素子で撮像することで紙媒体の相対位置が検出できる。

請求項７記載の発明によると、紙媒体の紙繊維の特徴から紙媒体を識別する識別情報が検出できる。

本発明の実施の形態について図面を参照しながら説明する。本発明の実施の形態に係る情報処理装置１は、図１に例示するように、ネットワーク等の通信回線を介して記録装置２に接続されている。

ここで情報処理装置１は、制御部１１と、記憶部１２と、操作部１３と、表示部１４と、媒体検知部１５と、通信部１６とを有する。制御部１１は、ＣＰＵ（Central Processing Unit）等のプログラム制御デバイスであり、記憶部１２に格納されたプログラムに従って動作している。この情報処理装置１は、図２（ａ）にその外観を例示し、図２（ｂ）にその使用態様を例示するように、紙媒体Ｐを載せて用いる。ここで紙媒体は１枚だけのものであってもよいし、後に説明するように冊子状の資料であっても構わない。しかしながら、まずは簡単のため、紙媒体Ｐは１枚だけであるものとして説明を行う。

情報処理装置１は、紙媒体Ｐの全体を支持可能なサイズの面Ｓを有している。この面Ｓは、操作部１３として機能している。すなわち操作部１３は、ここでは例えば表示部１４に重ね合わせられた透明電極であり、紙媒体Ｐを介して利用者の押圧操作（紙媒体Ｐへの書き込みなど）が行われると、当該書き込みの位置を検知する。

なお、操作部１３は、押圧操作を検出する以外にも、電磁誘導パネルを用いてもよい。この場合、利用者が書き込み操作に使用するペンは電磁ペンとなる。

さらに、表示部１４である表示デバイスの各画素に対応する各素子に、操作部１３となる光センサを配してもよい。このときには、ペン先近傍に発光素子を配したペンなどを用いて利用者に紙媒体Ｐ上への文字などの記入を行わせ、操作部１３が紙媒体Ｐを介して透過した当該ペン先近傍に配した発光素子の光を検出する（そのために発光素子の光は変調されていてもよい）こととしてもよい。すなわち操作部１３は、検出した光の位置により利用者のペンの位置を検出することになる。

表示部１４は、例えば図３に破線で例示するように、少なくとも一枚の紙媒体である紙媒体Ｐを仮想的に複数の領域（照明領域）に区切ったとき、各照明領域を単位として、紙媒体Ｐを下部から照明可能な程度の解像度を有する。この照明領域の数Ｎは、例えばＮ＝３０程度（３×１０個の領域に区切った場合）でもよい。つまり表示部１４は、これら各照明領域ごとに発光素子（ＬＥＤ（Light Emission Diode）等）を配したものであってもよいし、また、表示部１４は、一般的な液晶表示デバイスや有機ＥＬ（Electro-Luminescence）デバイスなどであってもよい。照明領域の数よりも高解像度の画素を有している場合、画素の点灯・消灯を制御して、対応する照明領域の照明を行うこととすればよい。この場合も、照明は、照明領域を単位として行えばよい。

媒体検知部１５は、面Ｓに支持された紙媒体Ｐを識別する識別情報を取得する。この媒体検知部１５の例については後に述べる。

制御部１１は、ＣＰＵ（Central Processing Unit）等のプログラム制御デバイスであり、記憶部１２に格納されているプログラムに従って動作する。この制御部１１は、面Ｓに載せられ、支持された紙媒体Ｐを識別する識別情報を、媒体検知部１５から取得する。

また制御部１１は、面Ｓに置かれた紙媒体Ｐの面Ｓに対する相対的な位置（想定されている位置からのずれ、回転）を検出する処理や、紙媒体Ｐへの書き込みが行われた時刻と領域とを特定する情報の生成・記録指示、記録装置２において記録されている情報に基づく、紙媒体Ｐ上の領域を照明する処理などを実行する。これらの制御部１１の処理の内容については、後に述べる。

記憶部１２は、ＲＡＭ（Random Access Memory）等のメモリ素子を備える。この記憶部１２には制御部１１によって実行されるプログラムが格納される。このプログラムは、例えばＤＶＤ−ＲＯＭなどのコンピュータ可読な記録媒体から読み取られて複写されたものであってもよい。さらにこの記憶部１２は、制御部１１のワークメモリとしても動作する。

記憶部１２にはまた、表示部１４が個別に照明可能な各領域を画定する情報を記憶している。この情報は、例えば各領域の識別子と、各領域の頂点座標（領域が矩形の領域である場合、領域の左上座標と右下座標）とを関連づけたものでよい。

通信部１６は、例えば無線ＬＡＮ（Local Area Network）インタフェースであり、ネットワーク等の通信回線を介し、制御部１１からの指示に従って記録装置２との間で情報の送受を行う。

記録装置２は、例えばデータベースサーバであり、情報処理装置１から受信される指示に従って情報を保持する。本実施の形態の例では、記録装置２と情報処理装置１とは別体の装置として例示しているが、これらは一体であっても構わない。

［媒体検知部の例］
ここで媒体検知部１５の例について述べる。媒体検知部１５は、紙媒体Ｐを特定する識別情報を、無線タグ（ＲＦＩＤ（Radio Frequency IDentification））や、紙媒体ごとに固有の繊維パターンに基づく情報や、紙媒体上に記録された情報（例えばバーコードなど）や、紙媒体側のマークを利用者にポイントさせ、又はなぞらせることにより、面Ｓに支持されている紙媒体の識別情報を取得する。

例えば、個々の紙媒体Ｐに予め、固有の識別情報を記録した無線タグが付されている場合、本実施の形態に係る情報処理装置１は、面Ｓに載せられた紙媒体Ｐに付された無線タグから識別情報を取得する。つまりこの場合の媒体検知部１５は、無線タグの情報読み取り装置として機能する。さらに媒体検知部１５としての無線タグの情報読み取り装置は複数あってもよい。

また、紙の繊維の構造が、紙ごとに異なっていることを利用して、紙媒体Ｐの予め定められた部分における紙繊維の構造に基づき、紙媒体Ｐを識別する識別情報を生成してもよい。この場合、媒体検知部１５は、上記予め定められた部分の紙繊維の構造を撮像するカメラとして機能する。

さらに、媒体検知部１５は、表示部１４または操作部１３と同じ面に配列された複数の受光素子を備えてもよい。この場合、媒体検知部１５は、紙媒体Ｐが面Ｓに載せられると、当該紙媒体Ｐの面Ｓ側の面全体を撮像することとなる。そこで、予め紙媒体Ｐの面Ｓ側に向く面に、紙媒体Ｐごとに異なる識別情報を表したコンピュータ可読な符号画像（バーコードなど）を形成しておいてもよい。このときには、媒体検知部１５は、撮像した紙媒体Ｐの面からこの符号画像を検出し、当該符号画像の表す識別情報を出力することになる。
また、紙媒体Ｐに予め固有の識別情報を記録したマークが付されている場合、利用者が紙媒体Ｐのマークをペンなどでポイントする、またはなぞることによって紙媒体Ｐの識別情報を生成しても良い。この場合、マークをポイントまたはなぞることによって生成されるペンの移動情報の特徴を面Ｓの操作部１３が取得することで紙媒体の識別情報とする。
さらに、紙媒体Ｐに予め固有の識別情報を記録したマークが付されていない場合、最初に利用者に対して紙媒体Ｐにペンなどでマークを書き込ませ、当該書き込まれたマークから識別情報を生成してもよい。それ以後は、紙媒体Ｐを識別する際に当該書き込まれたマークをペンなどでポイントするか、なぞることで識別情報を再度生成しても良い。この場合、識別情報の記録開始を操作部１３から指示した後、ペンなどで記録することにより識別情報を記録し、識別情報の取得開始を操作部１３で指示した後 ペンなどでなぞることにより識別情報を取得開始してもよい。
また、紙媒体の特定の領域を識別情報領域として定めることにより、その領域をペンなどでポイントする、またはなぞる操作が行われることで識別情報の記録や取得が行われるようにしてもよい。

［紙媒体の位置ずれの検知］
次に、制御部１１による紙媒体Ｐと面Ｓとの相対的位置のずれ検知の処理について述べる。この処理では、
（１）予め紙媒体側に形成したマークを利用者にポイントさせ、又はなぞらせて、当該操作により位置ずれを検知する
（２）予め紙媒体側に形成した欄に利用者に文字列などを記入させ、当該記入の操作により位置ずれを検知する
（３）予め紙媒体の表裏対応する位置に、それぞれ利用者のポイント位置と、所定位置ずれ検出用の所定パターンとを形成しておき、利用者がポイント位置をポイントすると、それに対応して裏面側に形成された位置ずれ検出用の所定パターンを読み取って位置ずれを検知する
（４）無線タグを用いる
のいずれかの処理を行えばよい。以下、各処理について説明する。

（１）マークをポイントまたはなぞらせる例
ここで紙媒体Ｐ側に形成するマークは、例えば図４（ａ）に示すように、紙媒体Ｐの辺に平行にならない線分上にある予め定められた複数の点（例えばＭ１，Ｍ２）に形成したＸ字状（または十字など中心点のわかる形状）のマークでよい。これらのマークは、例えば紙媒体Ｐの左下の頂点を原点として、短辺の方向をＸ軸、長辺の方向をＹ軸として（M1x,M1y），（M2x,M2y）の座標を中心点として表すマークとして予め定められているものとする。

制御部１１は、利用者がこれらの予め定められた複数の位置で、その中心をペンなどでポイントする（記入を行う）と、その記入操作が行われた位置（面Ｓ上のＭ１，Ｍ２に対応する各座標μ１，μ２）を記入内容として操作部１３によって検出する。そして当該検出した座標により、紙媒体Ｐの面Ｓに対する相対位置を検知する。すなわち、制御部１１は、紙媒体Ｐ上の点（ｘ，ｙ）と、面Ｓ上の点（ξ，η）とを関連づけるパラメータを生成する。具体的に、紙媒体Ｐと面Ｓとの位置ずれは、回転と平行移動との組み合わせであるものとすれば、座標Ｍ１（M1x,M1y），Ｍ２（M2x,M2y），μ１（μ1ξ,μ1η），μ２（μ2ξ,μ2η）と、回転角度θ、平行移動量（α，β）とを用いて、

の２式をともに満足するθ，α，βを求めることで、紙媒体Ｐ上の点（ｘ，ｙ）と面Ｓ上の点（ξ，η）とを関連づける変換式、

を得る。

また制御部１１は、この変換式（便宜的に第１変換式と呼ぶ）を用いて、面Ｓ上の点（ξ，η）を紙媒体Ｐ上の点（ｘ，ｙ）に変換する第２変換式を得ておく。

制御部１１は、この変換式を得た後、利用者が書き込みを行って、操作部１３を押圧すると、操作部１３の押圧位置から第２変換式を用いて、紙媒体Ｐ上のどの領域内に書き込みをしているかを検知する。

ここでは図５に示すように、紙媒体Ｐ上に予め仮想的な領域を設定しておくものとする。各領域Ｒ１，Ｒ２…は、ここでは矩形であるものとし、領域Ｒiの左上座標は、ＲiL(ＲiLx，ＲiLy）とし、右下座標はＲiR（ＲiRx，ＲiRy）であるものとする。制御部１１は、操作部１３において押圧が検出されると、次に押圧が検出されずに予め定めた時間が経過するまで（利用者が押圧操作を中断するまで）の間に検出した押圧位置（ξ，η）の最小値（ξmin，ηmin）、最大値（ξmax，ηmax）を記録しておく。そしてこれら最小値、最大値を第２変換式を用いて、紙媒体Ｐ上の点ＬＴ（ｘmin，ｙmin），ＲＢ（ｘmax，ｙmax）にそれぞれ変換する。そして、このＬＴ，ＲＢの座標を含む領域、すなわち
ＲiL＜ＬＴ≦ＲiR（またはＲiL≦ＬＴ＜ＲiRでもよい）
ＲjL＜ＲＢ≦ＲjR（またはＲjL≦ＲＢ＜ＲjRでもよい）
となるｉ，ｊを見いだす。これにより制御部１１は、利用者が書き込みをした範囲の左上端を含む領域Ｒｉと、右下端を含む領域Ｒｊとを見いだす。制御部１１は、また、操作部１３において押圧が検出されていた時刻（押圧検出の開始時刻と、最後に押圧検出した終了時刻）とを図示しない時計部から読み出して記憶しておき、これら開始時刻及び終了時刻を含む時刻情報と、上記見いだした領域Ｒｉと領域Ｒｊとを特定する情報（領域情報）と、紙媒体Ｐの識別情報とを関連づけて記憶するよう、記録装置２に対して指示を送信する。

また、ここでは複数の互いに異なる位置で行われた記入内容に基づいて紙媒体Ｐと面Ｓとの相対的位置を検知する例としたが、例えば図４（ｂ）に示すように、紙媒体Ｐの予め定められた位置Ｍにおいて、利用者に異方性のある図形などを記入させ、その記入内容に基づいて、紙媒体Ｐと面Ｓとの相対位置を検知してもよい。

ここで異方性のある図形とは、少なくとも回転・平行移動に対して非対称であるような図形である。一例として図４（ｂ）ではＶ字状の例を示している。利用者がこの図形をなぞると、操作部１３からの入力により、制御部１１はＶ字を構成する線分の面Ｓに対する向き及び位置等を検出する。そしてその検出結果によって紙媒体Ｐの面Ｓに対する回転角度と平行移動位置とを演算によって求める。

この場合も制御部１１は、第１、第２の変換式を得ることとなり、制御部１１は、これらの変換式を用いて利用者が書き込みをした範囲の左上端を含む領域Ｒｉと、右下端を含む領域Ｒｊとを見いだす。そして、開始時刻及び終了時刻を含む時刻情報と、上記見いだした領域Ｒｉと領域Ｒｊとを特定する情報（領域情報）と、紙媒体Ｐの識別情報とを関連づけて記憶するよう、記録装置２に対して指示を送信する。

（２）利用者に文字列などを記入させ、当該記入の操作により位置ずれを検知する例
また本実施の形態において、紙媒体Ｐには、図６に示すように予め定められた領域に、利用者に記入を行わせる欄Ｗを設けておいてもよい。そして制御部１１が、この領域内において利用者がした記入の内容に基づいて紙媒体Ｐと面Ｓとの相対位置を検知してもよい。

すなわちこの例では制御部１１は、利用者がこの欄Ｗのうちで記入した文字等に外接する矩形を画定する（図７）。そしてこの外接矩形の各辺が面Ｓの軸に対してどれだけ傾いているかによって回転を検出する。また、外接矩形の重心など外接矩形から求められる、外接矩形内外の点に基づいて平行移動量を推定する。例えば外接矩形の重心が欄Ｗの重心に一致すると仮定して、欄Ｗの重心を外接矩形の重心であると推定し、欄Ｗの重心（事前に定められている欄Ｗの位置から求めることができる）と、それに対応する面Ｓ上の座標とにより、制御部１１は第１、第２の変換式を得ればよい。

以下、先の例と同様に、制御部１１は、これらの変換式を用いて利用者が書き込みをした範囲の左上端を含む領域Ｒｉと、右下端を含む領域Ｒｊとを見いだす。そして、開始時刻及び終了時刻を含む時刻情報と、上記見いだした領域Ｒｉと領域Ｒｊとを特定する情報（領域情報）と、紙媒体Ｐの識別情報とを関連づけて記憶するよう、記録装置２に対して指示を送信する。

さらに、このように利用者に文字列等を記入させる場合、紙媒体ごとに異なる文字列等を記入させることとしてもよい。この場合、紙媒体Ｐの予め定めた位置に、記入するべき文字列等の画像を予め形成しておく。そして利用者に当該画像に従って文字列等を記入させる。

一方、例えば記録装置２において、紙媒体Ｐの識別情報と、記入された文字列等の特徴量とを関連づけるテーブルを記憶させておき、制御部１１は、記入された文字列等の特徴量を抽出して、当該抽出した特徴量に関連づけられた識別情報を記録装置２から取得する。これにより、記入内容から紙媒体Ｐの識別情報を取得することとしてもよい。この場合、媒体検知部１５は必ずしも必要ではない。

（３）紙媒体上に形成されたパターンを利用する例
この場合は、操作部１３として光センサを用いる。操作部１３は、面Ｓに置かれた紙媒体の裏面側（利用者が記入をする面の裏側）を撮像する。また、紙媒体の裏側の予め定めた位置に、傾き角度を検出可能なバーコードなどの符号画像を形成しておく。このような符号画像の例としては、例えばＱＲコードがある。制御部１１は、操作部１３が撮像した紙媒体Ｐの裏面の映像からＱＲコードの位置及び傾きを検出する。そして、当該検出した傾きと位置とにより、上記第１、第２の変換式を得ればよい。

以下、先の例と同様に、制御部１１は、これらの変換式を用いて利用者が書き込みをした範囲の左上端を含む領域Ｒｉと、右下端を含む領域Ｒｊとを見いだす。そして、開始時刻及び終了時刻を含む時刻情報と、上記見いだした領域Ｒｉと領域Ｒｊとを特定する情報（領域情報）と、紙媒体Ｐの識別情報とを関連づけて記憶するよう、記録装置２に対して指示を送信する。

なお、この例のように符号画像を用いる場合は、符号画像が、紙媒体Ｐの識別情報を記録したものであってもよい。このようにするときには、制御部１１は、ＱＲコードをデコードすることで識別情報を得ることができる。従って、このような場合、媒体検知部１５は必ずしも必要ではない。

なお、ＱＲコードを紙媒体Ｐの裏面全面から検出することが困難であるなどの場合は、ＱＲコードの位置を利用者が特定するようにしてもよい。例えば、ＱＲコードが形成されている位置に対応する表側の位置に、マークなどを形成しておき、利用者に、当該マークの位置で記入操作を行わせることとしてもよい。制御部１１は、記入操作を受けて、当該記入操作が行われた位置を含む予め定めた範囲の領域からＱＲコードを検出してもよい。

また、ここで述べたような液晶ディスプレイと光センサとを組み合わせたデバイスを用い、利用者に紙媒体Ｐ上で予め定めた複数の点をペンなどで指し示させ、その面Ｓ上での座標を検出して、第１、第２の変換式を得ることとしてもよい。

さらに、紙媒体Ｐの表面（面Ｓ側とは反対の面）に形成された画像を紙媒体Ｐを透かして認識できる場合は、操作部１３である光センサは、当該紙媒体Ｐの表側に形成されたＱＲコードなどの画像を撮像し、当該撮像した画像から相対位置や識別情報を検出してもよい。

（４）無線タグを用いる例
さらに、無線タグを用いて紙媒体Ｐの面Ｓに対する傾き及び位置（相対位置）を検出してもよい。この例では、紙媒体Ｐの複数の位置（例えば紙媒体の中央からやや右よりの上下）にそれぞれ無線タグＱ，Ｒを配する。

また、面Ｓの基準位置（予定されている位置）に紙媒体Ｐが配されたときに、無線タグＱ，Ｒがそれらの中心に位置することとなるよう、複数の無線タグリーダーをマトリクス状にして各位置に配する（図８（ａ）のＡからＤ、及びＥからＨ）。面Ｓの基準位置に紙媒体Ｐが置かれると、図８（ｂ）に示すように、無線タグＱは、無線タグリーダーＡからＤにより形作られる２×２のマトリクス略中央に位置し、無線タグＲは、無線タグリーダーＥからＨにより形作られる２×２のマトリクス略中央に位置する。従って、無線タグリーダーＡからＤは、無線タグＱからの情報を略同強度で受信することとなる（Ａ＝Ｂ＝Ｃ＝Ｄ）。また無線タグリーダーＥからＨは、無線タグＲからの情報を略同強度で受信することとなる（Ｅ＝Ｆ＝Ｇ＝Ｈ）。

しかし、紙媒体Ｐが面Ｓに対して傾いて置かれると（図８（ｃ））、各無線タグリーダーが無線タグから受信する情報の強度が変化する。図８（ｃ）の例では、Ａ＞Ｂ＞Ｃ＞Ｄ、Ｆ＞Ｅ＞Ｈ＞Ｇの順にそれぞれ無線タグＱ，Ｒからの信号強度が弱くなる。

また紙媒体Ｐが面Ｓの基準位置に対して平行移動された位置に置かれた場合（図８（ｄ））も同様に、各無線タグリーダーが無線タグから受信する情報の強度が変化する。そこで制御部１１は、各無線タグリーダーが無線タグから受信する情報の強度と、無線タグリーダーの配置位置の情報とから、紙媒体Ｐの傾きと平行移動量とを推定する。

この例では、制御部１１は、無線タグからの信号強度と無線タグリーダーからの距離との相関関係に基づいて、各無線タグリーダーでの受信信号強度に基づいて無線タグまでの距離を算出し、三角測量と同様の原理により面Ｓの座標系で表した、紙媒体Ｐ上の無線タグの位置を取得し、これと、紙媒体Ｐの座標系で表した無線タグの位置（予め定められている）との比較によって上記第１、第２の変換式を得てもよい。

また、無線タグリーダーＡからＤの受信強度のうち、最大のものと最小のものとの差が予め定めたしきい値にないか、または、無線タグリーダーＥからＨの受信強度のうち、最大のものと最小のものとの差が予め定めたしきい値にない場合は、基準位置からのずれが大きいものと判定して、基準位置に紙媒体Ｐを戻すよう警告する処理（音声を鳴動するなどの処理）を行ってもよい。後者の場合、利用者に対して紙媒体Ｐを基準位置に配させることとなるので、変換式は不要となる。

［紙媒体上での書き込み位置の検知］
次に、制御部１１による書き込み検知処理について説明する。制御部１１は、過去に押圧の検出が終了した時点から予め定めた時間ΔＴが経過した後、操作部１３において押圧が検出されると、その時点での時刻の情報Ｔｓを図示しない時計部から取得して記憶する。また制御部１１は、最後に押圧が検出された時点の時刻の情報Ｔｅも時計部から取得して記憶する。制御部１１は、押圧が検出されずに予め定めた時間ΔＴが経過すると（利用者が押圧操作を中断すると）、時刻ＴｓからＴｅまでの間に操作部１３にて検出した押圧位置（ξ，η）の最小値（ξmin，ηmin）、最大値（ξmax，ηmax）を演算する。

そして最小値（ξmin，ηmin）、最大値（ξmax，ηmax）を、事前に得た第２変換式を用いて紙媒体Ｐの座標系（ｘ，ｙ）に変換し、対応する最小値（ｘmin，ｙmin）、最大値（ｘmax，ｙmax）を得る。制御部１１は、予め検知した紙媒体Ｐの識別情報と、書き込みが開始された時刻の情報Ｔｓと、終了した時刻の情報Ｔｅと、ここで得られた座標の最小値（ｘmin，ｙmin）及び、最大値（ｘmax，ｙmax）（以下、対象領域情報と呼ぶ）とを関連づけて、記録装置２へ送信して蓄積させる（図９）。

［照明処理］
次に、制御部１１による照明処理について説明する。制御部１１は、紙媒体Ｐが面Ｓに置かれ、その識別情報が得られると、記録装置２に対して、当該得られた識別情報に関連づけられている対象領域情報を要求する。

制御部１１は、また、紙媒体Ｐの面Ｓに対する相対位置を検知し、第１変換式を得ておく。制御部１１は、記録装置２から得た対象領域情報に含まれる座標の最小値（ｘmin，ｙmin）及び、最大値（ｘmax，ｙmax）を第１変換式によって変換し、面Ｓでの座標で表した最小値（ξmin，ηmin）、最大値（ξmax，ηmax）を得る。

そして、制御部１１は、これら面Ｓでの座標で表した最小値（ξmin，ηmin）、最大値（ξmax，ηmax）で表される矩形に含まれる表示部１４の照明領域に対応するＬＥＤを点灯させる。これにより利用者の過去の書き込みに対応する一部の照明領域が紙媒体の下部から選択的に照明される。

また図９に示したように、書き込みが開始、または終了した時刻の情報Ｔｓ，Ｔｅが記録されているときには、例えば書き込みの開始時刻Ｔｓをキーとして、記録装置２から得た対象領域情報を並べ替え、並べ替え後のｉ番目（例えば当初は「ｉ＝１」などとしておく）の対象領域情報に対応する照明領域（第１変換式を適用して面Ｓでの座標に変換した後の領域）を点灯させてもよい。このときには、操作部１３が利用者からｉをデクリメント、またはインクリメントさせる指示を受け入れ、制御部１１がデクリメントまたはインクリメント後のｉ番目の対象領域情報に対応する照明領域（第１変換式を適用して面Ｓでの座標に変換した後の領域）を点灯させてもよい。

また利用者が時刻の情報を操作部１３を介して入力し、制御部１１が、入力された時刻Ｔが、Ｔｓ≦Ｔ≦Ｔｅであるような時刻情報に関連づけられた対象領域情報に対応する照明領域（第１変換式を適用して面Ｓでの座標に変換した後の領域）を点灯させてもよい。

［動作］
以上のように構成された本実施の形態の情報処理装置１は、次のように動作する。利用者が紙媒体Ｐを本実施の形態の情報処理装置１の面Ｓに重ね合わせて置くと、情報処理装置１は、これを（例えば光センサなどによって）検知して、または利用者の操作によって、次の図１０に示す処理を開始する。

情報処理装置１は、紙媒体Ｐの識別情報を取得する（Ｓ１）。この識別情報は、例えば紙媒体ＰにＲＦＩＤタグやＱＲコードが付されていれば、それを読み取ることによって得てもよいし、紙の繊維の構造を読み取って得てもよい。また、利用者に紙媒体Ｐ上で記号などを記入させ、当該記入された記号の内容に基づいて識別情報を得てもよい。

また情報処理装置１は、紙媒体Ｐと面Ｓとの相対位置（紙媒体Ｐ上の仮想的な座標系と面Ｓ上の座標系との相対的な傾き及び平行移動量）を検知する（Ｓ２）。この相対位置の検知は、紙媒体Ｐ上で利用者が記入した記入の内容に基づいて行ってもよい。また、ＱＲコードの位置が検出できる場合は、当該ＱＲコードの位置の検出結果に基づいて検知してもよい。

情報処理装置１は、紙媒体Ｐと面Ｓとの相対位置に基づいて、紙媒体Ｐ上の座標系と、面Ｓの座標系とを相互に変換する変換式ペアを得る。

情報処理装置１は、利用者が紙媒体Ｐ上で書き込みの操作を行うまで待機し（Ｓ３）、利用者が紙媒体Ｐ上で書き込みの操作を行うと、その書き込みが行われた範囲を面Ｓの座標系で検出する（Ｓ４）。そして、この検出した範囲を表す座標の値を、先に得ておいた変換式ペアの一方の変換式を用いて紙媒体Ｐ上の座標系に変換する（Ｓ５）。

そして当該変換した座標系で表した書き込みの範囲を表す領域情報を対象領域情報として、処理Ｓ１で取得した識別情報とともに記録装置２に送信し、記録装置２において識別情報と当該対象領域情報とを関連づけて蓄積させる（Ｓ６）。以上の処理を、紙媒体Ｐが面Ｓから取り去られるか、利用者の終了指示があるまで処理Ｓ３から（または指示等により処理Ｓ２から）繰り返す。

また情報処理装置１は、利用者が紙媒体Ｐを本実施の形態の情報処理装置１の面Ｓに重ね合わせて置いたときに、利用者の指示等によって図１１に示す処理を開始する。情報処理装置１は、紙媒体Ｐの識別情報を取得する（Ｓ１１）。ここでも例えば紙媒体ＰにＲＦＩＤタグやＱＲコードが付されていれば、それを読み取ることによって識別情報を得てもよいし、紙の繊維の構造を読み取って得てもよい。また、利用者に紙媒体Ｐ上で記号などを記入させ、当該記入された記号の内容に基づいて識別情報を得てもよい。

また情報処理装置１は、紙媒体Ｐと面Ｓとの相対位置（紙媒体Ｐ上の仮想的な座標系と面Ｓ上の座標系との相対的な傾き及び平行移動量）を検知する（Ｓ１２）。ここでも、相対位置の検知は、紙媒体Ｐ上で利用者が記入した記入の内容に基づいて行ってもよい。また、ＱＲコードの位置が検出できる場合は、当該ＱＲコードの位置の検出結果に基づいて検知してもよい。

情報処理装置１は、紙媒体Ｐと面Ｓとの相対位置に基づいて、紙媒体Ｐ上の座標系と、面Ｓの座標系とを相互に変換する変換式ペアを得る。

情報処理装置１は、記録装置２に対して処理Ｓ１１で取得した識別情報と、当該識別情報に関連づけられた対象領域情報を要求する（Ｓ１３）。そして記録装置２から当該要求に応じて送信される対象領域情報を受信する（Ｓ１４）。情報処理装置１は、受信した対象領域情報（紙媒体Ｐの座標系で表されている）を、変換式ペアの一方によって面Ｓの座標系に変換する（Ｓ１５）。

そして、表示部１４を制御して当該変換した座標系で表される面Ｓの範囲に対応する部分を照明させる（Ｓ１６）。これにより、過去に当該紙媒体Ｐにおいて行われた書き込みの範囲が照明される。

ここで表示部１４における照明範囲は、必ずしも対象領域情報に表された座標情報に従って正確に為されている必要はない。既に説明したように、紙媒体Ｐを３×１０程度の領域（照明領域）に分割し、各照明領域を単位として点灯・消灯を制御して照明することとしてもよい。この場合、表示部１４は、対象領域情報で表される矩形範囲と重なる照明領域の画素を点灯すればよい。

これらの処理によると、情報処理装置１の面Ｓに重ね合わせた状態で、紙媒体Ｐに対して書き込みをすると、この書き込みを行った領域を表す対象領域情報が記録装置２に記録される。そして後に、指示により、この記録装置２に格納された対象領域情報を取得し、当該対象領域情報に含まれる照明領域を照明する。これによって過去に書き込みを行った領域が照明される。

［領域情報記録の別例］
ここまでの説明では、紙媒体Ｐに対して書き込みが行われた領域を表す対象領域情報を記録して、書き込みが行われた領域を照明する処理を行う例について述べたが、照明を行う領域の例は、これに限られるものではない。

例えば、紙媒体に対して資料の文字列等を印刷し、紙媒体とするときに、当該紙媒体の識別情報を検出しておく。また、印刷する文字列等から予め定めた条件に合致する部分（例えばハイパーリンクを表すＵＲＬ（Uniform Resource Locators）の文字列など）が印刷される領域を検出し、当該検出した領域を表す対象領域情報を生成して、識別情報に関連づけて記録装置２に蓄積しておいてもよい。

この例によると、情報処理装置１が記録装置２に対して識別情報に関連づけられた対象領域情報を要求したときに、記録装置２が印刷された文字列等の部分に対応する識別情報を送信する。

そして記録装置２から当該要求に応じて送信される対象領域情報を受信した情報処理装置１が、受信した対象領域情報（紙媒体Ｐの座標系で表されている）を、変換式ペアの一方によって面Ｓの座標系に変換する。そして当該変換した座標系で表される面Ｓの範囲に対応する部分を表示部１４を制御して照明させる。これにより紙媒体Ｐに記録されている情報の生成者が希望する部分を照明させることができる。

［照明の他の例］
なお、表示部１４による照明方法は、単に点灯・消灯するだけに留まらず、一例として表示部１４が多色ＬＥＤを備えている場合や、カラー液晶表示デバイスである場合であって、紙媒体Ｐの識別情報に関連づけられた対象領域情報が複数ある場合には、各対象領域情報に対応する照明領域を互いに異なる色で点灯するようにしてもよい。ここでさらに対象領域情報について時刻の情報が関連づけられているときには、時刻の情報に応じて（例えばより早い時刻ほど明るい色とするなど）点灯色を制御してもよい。また、点灯態様を点滅パターンで異ならせてもよい。

本発明の実施の形態に係る情報処理装置の構成例ならびに接続例を表すブロック図である。 本発明の実施の形態に係る情報処理装置の外観例を表す説明図である。 本発明の実施の形態に係る情報処理装置によって照明される照明領域の設定例を表す説明図である。 本発明の実施の形態に係る情報処理装置において利用者に行わせる記入操作、記入内容の例を表す説明図である。 本発明の実施の形態に係る情報処理装置における照明領域の座標設定の例を表す説明図である。 本発明の実施の形態に係る情報処理装置において利用者に行わせる記入操作の対象となる領域を表す説明図である。 本発明の実施の形態に係る情報処理装置が記入操作の内容に基づいて相対位置を検知する処理の例を表す説明図である。 本発明の実施の形態に係る情報処理装置が無線タグを用いて相対位置を検知する例を表す説明図である。 本発明の実施の形態に係る情報処理装置により、記録装置において記録される情報の例を表す説明図である。 本発明の実施の形態に係る情報処理装置による記録処理の例を表すフローチャート図である。 本発明の実施の形態に係る情報処理装置による照明処理の例を表すフローチャート図である。

符号の説明

１ 情報処理装置、２ 記録装置、１１ 制御部、１２ 記憶部、１３ 操作部、１４ 表示部、１５ 媒体検知部、１６ 通信部。

Claims (8)

1. 紙媒体を識別する媒体識別子と、媒体上の領域を特定する少なくとも一つの領域情報とを関連づけた記録装置と通信する通信手段と、
   紙媒体全体を支持可能な面を有し、予め定められた紙媒体上の複数の領域のいずれかを選択的に照明する選択照明手段と、
   前記面に支持された紙媒体を識別する媒体識別子を検知する検知手段と、
   前記通信手段を介して、前記検知された媒体識別子に関連づけて前記記録装置に記録された領域情報を取得する取得手段と、
   前記取得した領域情報に対応する領域を照明するよう制御する制御手段と、
   を含み、
   前記制御手段は、紙媒体上で利用者がした記入内容に基づき、紙媒体と、前記面との相対位置を検出し、当該検出した相対位置により照明する領域を制御することを特徴とする情報処理装置。
2. 前記制御手段は、紙媒体上で予め定められた複数の位置で利用者がした記入内容に基づき、紙媒体と、前記面との相対位置を検出することを特徴とする請求項１に記載の情報処理装置。
3. 前記制御手段は、紙媒体上で予め定められた位置で、利用者がした、異方性のある記入内容に基づき、紙媒体と、前記面との相対位置を検出することを特徴とする請求項１に記載の情報処理装置。
4. 前記制御手段は、紙媒体上で予め定められた位置で、利用者がした記入内容を受け入れて、当該記入内容に外接する領域を検出し、当該検出した領域の特徴量に基づいて、紙媒体と、前記面との相対位置を検出することを特徴とする請求項１に記載の情報処理装置。
5. 前記面内には、面に載せられた媒体の裏面を撮像する撮像手段を備え、
   当該撮像手段が撮像した媒体の裏面の画像に基づいて、前記制御手段が紙媒体と、前記面との相対位置を検出することを特徴とする請求項１に記載の情報処理装置。
6. 前記面内には、面に載せられた媒体の裏面を撮像する撮像手段を備え、
   媒体を透かして当該撮像手段が撮像した媒体表面側の画像に基づいて、前記制御手段が紙媒体と、前記面との相対位置を検出することを特徴とする請求項１に記載の情報処理装置。
7. 前記面内には、面に載せられた媒体の裏面を撮像する撮像手段を備え、
   紙媒体ごとに固有の繊維構造を前記撮像手段が撮像し、当該撮像した繊維構造に基づいて、媒体識別子の検知が行われることを特徴とする請求項１から６のいずれか一項に記載の情報処理装置。
8. コンピュータを、
   紙媒体を識別する媒体識別子と、媒体上の領域を特定する少なくとも一つの領域情報とを関連づけた記録装置と通信する通信手段と、
   紙媒体全体を支持可能な面に配置された選択照明部を制御し、紙媒体上の予め定められた複数の領域のいずれかを選択的に照明する選択照明手段と、
   前記面に支持された紙媒体を識別する媒体識別子を検知する検知手段と、
   前記通信手段を介して、前記面で検知された媒体識別子に関連づけて前記記録装置に記録された領域情報を取得する取得手段と、
   紙媒体上で利用者がした記入内容に基づき、紙媒体と、前記面との相対位置を検出し、当該検出した相対位置を用いて前記取得した領域情報に対応する前記面の領域を照明するよう制御する制御手段と、
   として機能させることを特徴とするプログラム。

Images