JP4352684B2 - Information provision processing system, program - Google Patents

Information provision processing system, program Download PDF

Info

Publication number
JP4352684B2
JP4352684B2 JP2002315121A JP2002315121A JP4352684B2 JP 4352684 B2 JP4352684 B2 JP 4352684B2 JP 2002315121 A JP2002315121 A JP 2002315121A JP 2002315121 A JP2002315121 A JP 2002315121A JP 4352684 B2 JP4352684 B2 JP 4352684B2
Authority
JP
Japan
Prior art keywords
annotation
document
user
search
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2002315121A
Other languages
Japanese (ja)
Other versions
JP2004151899A (en
Inventor
則之 倉林
猛志 永峯
明男 山下
克典 芳地
圭 田中
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Business Innovation Corp
Original Assignee
Fuji Xerox Co Ltd
Fujifilm Business Innovation Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fuji Xerox Co Ltd, Fujifilm Business Innovation Corp filed Critical Fuji Xerox Co Ltd
Priority to JP2002315121A priority Critical patent/JP4352684B2/en
Publication of JP2004151899A publication Critical patent/JP2004151899A/en
Application granted granted Critical
Publication of JP4352684B2 publication Critical patent/JP4352684B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • Information Transfer Between Computers (AREA)
  • Document Processing Apparatus (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Description

【0001】
【発明の属する技術分野】
本発明は、データベースなどの情報管理装置を利用した情報提供処理システム並びにこれらに使用されるプログラムに関する。より詳細には、複数のユーザ間において情報の共有を図るための技術に関する。
【0002】
【従来の技術】
組織やグループで情報を共有する手段として、従来よりデータベースを用いたクライアントサーバ型のシステムが用いられている。データベースを用いたクライアントサーバ型のシステムでは、予め設定したデータベーススキーマに従って、データベースサーバに情報を保存しておき、クライアントアプリケーションからSQL(Structured Query Language )などのデータベースアクセス言語を用いてデータベースへの問い合わせや情報の格納を行なうことで、情報の共有を図っている。
【0003】
しかしながら、データベースを用いたクライアントサーバ型のシステムでは、設定したスキーマに適合する情報以外の情報が扱えないという欠点があった。また、システムを構成するデータベースの数や所在は固定的であり、新たなデータベースを追加することは困難であった。このため、扱う情報の種類が増えたり変化したりする状況に対応する事が極めて困難であった。
【0004】
このような問題点に対処する手法として、ときの状況や扱う情報の種類によって、同一の情報管理装置が情報の提供者にも情報の消費者にもなり得るようにすることで、情報の共有を実現する仕組みが考えられている。
【0005】
たとえば、情報管理装置が管理する情報内容を考慮して、類似の情報を持った情報管理装置で構成されるクラスタを構成するシステムが提案されている。特許文献1には、同じようなテーマ、話題、興味を持った者同士での、情報共有を実現する仕組みが提案されている。
【0006】
【特許文献1】
特開平10−301905号公報
【0007】
この特許文献1の手法では、情報管理装置間の局所的な関係を用いて、大域的な関係を合成することによって情報の共有を実現するようにしている。すなわち、2つの情報管理装置間の繋がりを表す意味、さらには、繋がりの重みを持ったパイプ情報の集合を管理するパイプ管理手段と、ユーザからの要求や他の情報管理装置からの要求に対して、パイプ管理手段が管理するパイプ情報から適するパイプ情報を検索するパイプ検索手段と、検索された複数のパイプ情報を合成して新たなパイプ情報を生成するパイプ合成手段とを備えた構成としている。
【0008】
これにより、ユーザからの要求(他の情報管理装置からの要求)があった場合に、パイプ管理手段から要求に合致するパイプ情報をパイプ検索手段により検索して適切なパイプ情報を選択し、必要な情報管理装置とのコミュニケーションを可能にしている。さらに、必要に応じてパイプ合成手段が複数のパイプ情報を合成することにより、要求に適するパイプ情報を生成し、必要な情報管理装置とのコミュニケーションを可能にしている。
【0009】
パイプの生成と更新は、電子メールシステムなどの情報交換をモニタリングし、コミュニケーションを検出することによって、同じ興味のある人同士を特定することで行なう。たとえば、メールの送受信からキーワードを検出して共通の関心を持った人同士の繋がりを「パイプ」として管理し、さらに複数のパイプを合成することで直接繋がりがなかったが、共通の関心を持った人とのパイプを構築する。そして、これに基づいてデータベースの相互利用を可能とすることで、同じようなテーマ、話題、興味を持った者同士での、情報共有を実現している。
【0010】
【発明が解決しようとする課題】
一方、情報を共有するという点では、知識(知的な情報)の共有、つまり自己の持っていない知識を他人が持っている知識で補い合うということもポイントとなる。
【0011】
しかしながら、特許文献1の発明をはじめとする従来の「情報の共通」の考え方は、専ら、情報源であるデータベースの共有に主眼をおいたもので、個人ベースでの情報共有(知識の共有)という点では難がある。すなわち、特許文献1などの情報共有の手法は、「複数の情報管理装置間」で相互に情報を提供し合うことによって情報の共有を実現するもので、これは、情報提供源の“マス(桝)”を拡張することで、提供可能な情報の量や数を増やす点に主眼をおいている。
【0012】
したがって、特許文献1などの情報共有の手法では、個人ベースでの情報共有、換言すれば、複数の個人が持つ知識を共有し合うということの解決にはならない。
【0013】
たとえば、自分と同じような興味を持っている他人が知っている情報であって、その自分が有していない情報を知りたい場合があるが、特許文献1などの従来の手法では、それができない。このような、自分は有していないが他人が有する(あるいは有するであろう)情報にアクセスしようとすれば、自分は有していないが他人が有する情報が何であるかを自らがサーチし、その情報にアクセスする必要があるが、実際にはそのようなことは難しい。
【0014】
本発明は、上記事情に鑑みてなされたものであり、同じようなテーマ、話題、あるいは興味などを持った者同士で、自分は有していないが他人が有する(あるいは有するであろう)情報に簡易にアクセスすることを可能にする情報提供処理システムを提供することを目的とする。また、本発明は、コンピュータを利用して前記システムを実現するためのプログラムを提供することを目的とする。
【0015】
【課題を解決するための手段】
発明に係る情報提供方法では、表示文書上で付与されたアノテーションを、文書ごと、ユーザごとに、記憶部に記憶(登録部に登録)しておく。
【0016】
アノテーションを利用した情報検索時には、検索指示を受け付けると、検索指示を発したユーザが付与したアノテーションにより示されるそのユーザの対象文字列と、検索指示を発したユーザが付与したアノテーションと重なりを持つ他ユーザの付与に基づく記憶部に記憶(登録部に登録)しておいたアノテーションにより示される他ユーザの対象文字列とを比較する。
【0017】
そして、この比較結果に基づき、表示されている文書中に他ユーザが付与したアノテーションが示している部分に基づく他ユーザに関する検索条件を決定する。
【0018】
そして、他ユーザに関する検索条件に合致する情報の検索処理も実行します。その後、検索処理により得られた検索結果を提示する。
【0019】
好ましくは、指示ユーザの対象文字列に基づく指示ユーザに関する検索条件に合致する情報の検索処理も実行し、その検索結果も提示する。
【0023】
本発明に係る情報提供処理システムは、本発明に係る情報提供方法を応用したシステムであって、表示デバイス上に表示された文書に、この文書とは別に管理可能なアノテーションを付与するアノテーション付与部と、アノテーション付与部により付与された前記アノテーションが示している部分のアノテーション付与部分情報を取得するアノテーション付与部分情報取得部と、文書ごとに、前記アノテーション付与部分情報取得部により取得された前記アノテーション付与部分情報を複数のユーザについて登録する登録部とを備えるものとした。
【0024】
また、本発明に係る情報提供処理システムは、表示されている文書中のアノテーションが示している部分に基づく検索指示を受け付けたとき、検索指示を発した指示ユーザが付与したアノテーションにより示される指示ユーザの対象文字列と、前記指示ユーザが付与した前記アノテーションが示している部分と同じような位置への他ユーザの付与に基づく前記登録部に登録しておいた前記アノテーションにより示される前記他ユーザの対象文字列とを比較することで、表示されている文書中に他ユーザが付与したアノテーションが示している部分に基づく他ユーザに関する検索条件を決定する検索条件決定部と、他ユーザに関する検索条件に合致する情報を検索する検索部と、検索部により検索された検索結果を提示する提示部とを備えるものとした。
【0025】
また従属項に記載された発明は、本発明に係る情報提供処理システムのさらなる有利な具体例を規定する。さらに、本発明に係るプログラムは、本発明に係る情報提供方法や情報表示処理システムを、電子計算機(コンピュータ)を用いてソフトウェアで実現するために好適なものである。なお、プログラムは、コンピュータ読取り可能な記憶媒体に格納されて提供されてもよいし、有線あるいは無線による通信手段を介して配信されてもよい。
【0026】
【作用】
上記構成においては、先ず、文書それぞれについて、検索指示があるか否かに拘わらず、その文書にアノテーションが付与される都度、アノテーションが付与されたアノテーション付与部分の情報をユーザごとに管理する。
【0027】
そして、アノテーションが付与されるととともに、付与部分に基づく検索処理を指示されたときには、検索指示を発したユーザが付与したアノテーションにより示されるそのユーザの対象文字列と、検索指示を発したユーザが付与したアノテーションが示している部分と同じような位置への他ユーザの付与に基づく記憶部に記憶(登録部に登録)しておいたアノテーションにより示される他ユーザの対象文字列とを比較して、表示されている文書中に他ユーザが付与したアノテーションが示している部分に基づく他ユーザに関する検索条件を決定する。そして、この決定した検索条件に基づいて検索処理を実行し、検索結果をユーザに提示する。
【0028】
【発明の実施の形態】
以下、図面を参照して本発明の実施の形態について詳細に説明する。
【0029】
図1は、本発明に係る表示制御方法および情報表示処理システムを適用した電子会議システムの構成例を示す図である。
【0030】
なお、この例での電子会議の場面設定としては、たとえば、開発開始提案や国際技術標準化会議など、電子的なドキュメントベースの会議の場面を想定する。
【0031】
電子的なドキュメントとしては、たとえば、開発開始提案の場面では、前任機(現行機種など開発対象機種に対するそれ以前の機種)に関する仕様書、市場トラブルレポート、サポート部門の技術標準書類、など類似文書が多数ある。
【0032】
また、技術標準化会議の場面では、似たような技術標準書や同じ技術に関するメーリングリストなど関連する文書が周囲に存在している。
【0033】
電子会議システムへの参加者としては、たとえば、決定に影響を与えたり決定事項から影響を受けたりする組織の代表である参加者、議長、記録係などが想定される。
【0034】
電子会議システムでは、たとえば、代表者の誰かが提案書を纏め事前に資料を配布している。そして、会議の前に参加者ならびに議長が資料を読み、手書きのアノテーションを表示画面上に加えることができる。また、会議の進行中に組織の代表者は、バックオフィスにいる関係者とアノテーションを用いてコンテキストを共有し、また互いに連絡をとりながらリアルタイムに部門意見の調整を行なうこともできる。
【0035】
ここで、電子会議システムにおける会議の流れの中で、手書きアノテーションの共有が関わる場面としては、たとえば、次のようなものが考えられる。
*配布された資料を会議前に読み、アノテーションを書き込む。
*説明内容を聞きながらアノテーションを入れる。
*質疑応答セッションで、アノテーションをもとに質問箇所を素早く探して質問する、あるいは応答する。
*過去の関連文書を検索する。
*会議中で同僚に質問する。
*議論のセッション。
*合意事項の確認のセッション。
*議事録作成。
*会議の模様をグループのメンバーに報告する。
*会議を通して専門家を発見したり、多様な視点に気付かされたりする。
【0036】
<システム構成>
次に、図1に示した電子会議システムの構成を説明する。電子会議システム1は、電子会議の参加者が使用するクライアントシステム100と、電子会議システム1にて使用される電子データ(文書データに限らず、会議に必要な他の電子的な情報の全てを含む)を処理するサーバシステム200とを備えている。クライアントシステム100およびサーバシステム200を構成する各機能要素は、有線や無線などのネットワーク(通信網)9によって接続されている。
【0037】
クライアントシステム100は、会議への参加者ごとに設けられている。図示した例では、2セット分を例示しているが、その数は2つに限らない。なお、1つのセットを複数人が共用してもかまわない。
【0038】
クライアントシステム100は、電子文書を表示するための文書ビューア102(図では102a,102b)、文書ビューア102に表示されている電子文書に付加情報の一例であるアノテーションを付与するためのアノテーションデバイス170(図では170a,170b)、および画面操作の履歴を保存したり文書ビューア102を制御したりするマネジャ部180(図では180a,180b)を有する。文書ビューア102とアノテーションデバイス170とで、付加情報付与部106(図では106a,106b)およびアノテーション検出部(アノテーション付与部分情報取得部)107(図では107a,107b)とが構成される。
【0039】
文書ビューア102は、図示しない本体(クレードル/ドッキングステーション)に装着自在となっている。文書ビューア102としては、たとえば、パソコンなどに使用されるCRTや液晶(LCD)などのディスプレイや、紙を模倣したようなデバイス(たとえばタブレットPC)などを使用するとよい。なお、文書ビューア102は、ホワイトボード程度の大きさにした大型タブレットとして構成してもよい。
【0040】
アノテーションデバイス170としては、手書き入力ができる機能を備えたものであるのがよく、たとえばペンの形状を持つデバイスなどの入力デバイスを使用するとよい。ペン形状のデバイスの場合、表示面上をデバイスで直接指示できるように、たとえば電磁誘導方式の検知機構とする場合には文書ビューア102およびアノテーションデバイス170ともに指示入力を検知する仕組みを持つものとする。また、タッチパネル方式を採用してもかまわない。また、アノテーションデバイス170は、ペン型のものに限らず、マウスやキーボードなどの入力・指示デバイスを用いるものであってもよい。
【0041】
マネジャ部180は、文書の閲覧履歴やアノテーションの履歴(ログファイル)を保存する記憶部182(図では182a,182b)を有する。また、このマネジャ部180は、読み手により指定された表示手法(本例では強調表示機能)を実現する機能部が設けられる(後述する図3参照)。
【0042】
サーバシステム200は、付加情報管理部の一例であってログファイルやアノテーションを管理するアノテーション管理部210、電子文書を管理する文書管理部220、個人のプロファイルを管理するプロファイル管理部230、および文章の解析や重要語の抽出を行なうなどして会議を支援する情報検索部240を有する。
【0043】
アノテーション管理部210は、文書に付与されたアノテーションの保存と検索を行なうサーバであるアノテーションサーバ212と、各クライアント端末のログファイルの内容を保存するデータベース(Data Base )であるアクションログDB214と、付加情報格納部の一例であってアノテーションおよびそれに付随する属性情報を保存するためのデータベースであるアノテーションDB216とを有する。
【0044】
文書管理部220は、文書の保存と検索を行なうサーバである文書サーバ222と、文書およびそれに付随した属性情報を保存するためのデータベースである文書DB224とを有する。
【0045】
文書本体を管理する文書管理部220と、電子文書に付与されるアノテーションなどの付加情報を管理するアノテーション管理部210とを設けることで、配布資料に対する加筆修正がそれぞれ独自に行なわれるケースでも、会議終了時に原本と合わせたときにその内容に矛盾が生じることを回避することができる。
【0046】
たとえば、だれかが原本のある部分に補足説明を加え、一方、だれかが同じ部分を削除するような修正を加えたときでも、それらの編集部分を文書DB224に登録されている文書本体とは別に、文書本体と対応付けてアノテーションDB216に登録しておくことで、会議資料本体やこれに対する加筆修正などの内容に矛盾が生じることなく情報の管理を行なうことができる。また、アノテーションDB216を参照することで、その場で出された意見や討論の内容を後で書き出すことも容易である。
【0047】
プロファイル管理部230は、個人のプロファイルの保存と検索を行なうサーバであるプロファイルサーバ232と、個人のプロファイルを保存するデータベースであるプロファイルDB234とを有する。
【0048】
情報検索部240は、文章の解析や重要語の抽出を行なうサーバである自然言語処理サーバ242と、自然言語処理サーバ242が参照する解析辞書や類義語辞書などを保存したデータベースである自然言語処理DB244とを有する。
【0049】
自然言語処理DB244には、情報検索手法に適したデータ構造で所定のデータが格納される。たとえば、語義ベースで単語の意味ベクトルを格納する単語ベクトル辞書(辞書はデータベースの一例)、係り受け単語間の共起関係を格納する共起データベース、あるいは類義語展開や関連展開を行なうために使用される拡張辞書(類義語辞書を含む)などを格納する。
【0050】
情報検索部240は、自然言語処理DB244に、これら種々のデータベース(辞書を含む)を有することで、さまざまな検索エンジンを選択して使うことができるようになる。
【0051】
なお、図示したサーバシステム200の各管理部210,220,230,240は、それぞれ別体のものであってもよいし、任意の組合せにて同一筐体内に収容されたものであってもよい。たとえば、各サーバは共通のコンピュータで構成されていてもよいし、各データベースとして共通のハードディスク装置を利用するものであってもよい。なお、アノテーション管理部210、文書管理部220、および情報検索部240を纏めて、文書情報管理部ともいう。これら管理部210,220,230,240としては、たとえばワークステーションが使用されるとよい。
【0052】
<文書ビューアの外観>
図2は、情報表示処理装置の一実施形態である文書ビューア102の表示面側に着目した外観図である。図示するように、この文書ビューア102は、表示デバイスの一例である液晶表示パネル103と種々のハードウェアキーで構成された操作ボタン110とが筐体109に収容されて構成されており、ある程度の厚みを持った1枚の板状に形成されている。
【0053】
液晶表示パネル103は、バックライト付きパネルとして構成されており、文書を表示するための文書表示エリア104として使用される。文書表示エリア104上は、アノテーションデバイス170にて手書き入力(デジタルインク)が可能である。マネジャ部180には、このデジタルインクに対応したメモ書きユーティリティ(ハードウェアおよびアプリケーションソフト)が組み込まれる。
【0054】
デジタルインクに対応したコントローラとしては、手書きで入力したデータを“デジタルインク(手書き文字)”として認識し処理するためのものであればよく、必ずしも、手書きで入力したものをテキスト変換する機能(手書き文字認識機能)を備えたものである必要はない。この場合でも、テキストの最上位フォーマットとして取り扱うことができ、手書き文字のまま検索したり、文字を加工(カラー変更など)したりすることができる。なお、デジタルインクデータフォーマットを画像データ(たとえばビットマップデータ)として取り扱ってもよい。
【0055】
このように、文書ビューア102は、紙の文書を読む際に文書に好きな形で下線や丸を付けたりメモを書き込んだりするのと同様に、アノテーションデバイス170を用いて書込み入力が可能となっている。また、厚みを持った1枚の板状に形成されているので、たとえば、書込み時に、膝の上に置いたり傾けたりして読みやすい位置や角度に据えることも容易である。
【0056】
書込み入力された情報(文書本体の付加情報)は、文書ビューア102内の図示しない記憶部に保持され、所定のときにサーバシステム200のアノテーション管理部210に送られ、アノテーションDB216に文書本体と対応付けられて格納される。後にその文書を読み出すときには、文書本体とともに、過去に記入したアノテーションも読み出され、文書表示エリア104に表示される。
【0057】
これにより、紙のように自由に好きな形で下線や丸あるいはメモなどの書込みを入れることで、情報の記載場所に関する読み手の記憶を視覚的に助ける効果を発揮させることが可能となる。
【0058】
たとえば、電子会議システム1を利用した会議であれば、配布された資料を会議前に読みアノテーションを書き込んだり、あるいは説明内容を聞きながらアノテーションを入れたりするなどに利用することができる。
【0059】
操作ボタン110としては、複数のハードウェアキーが用意されている。たとえば図示するように、文書DB224に格納された文書を読み込むための文書読込みボタン114と、文書表示エリア104に描画されたアノテーションを保存するための保存ボタン116と、アノテーションDB216に保存されるアノテーションを検索し文書表示エリア104に表示させるための検索ボタン118と、表示を更新させるための更新ボタン120とを備えている。
【0060】
また、操作ボタン110としては、ページを前後に捲るための前ページ送りボタン122aおよび次ページ送りボタン122bからなるページ捲りボタン122と、重要語を表示するための強調表示ボタン124と、文書ビューア102が開いている文書にアノテーションを付けているユーザの一覧を表示するユーザ表示ボタン126とを備えている。
【0061】
なお、操作ボタン110のハードウェアキーに代えて、文書表示エリア104にキーボタンを表示するソフトウェアキーとしてもよい。
【0062】
この文書ビューア102は、内部に備えられている記憶媒体から読み出したデータ、あるいは図示しないネットワーク接続機能部を介してサーバシステム200(Webサーバでもよい)などから取得したデータに基づいて画像を液晶表示パネル103に表示するように構成されている。
【0063】
また、文書ビューア102は、本を読むようにパラパラと捲りながらページ単位で表示を切り替えていく機能(捲り表示機能)が搭載されており、この捲り表示機能を利用することで、たとえば、取り込んだ多数の情報の中から所望の情報を素早く検索できるように構成されている。
【0064】
すなわち、この文書ビューア102における情報検索時には、前ページ送りボタン122aや次ページ送りボタン122bといった2つのページ送りボタン(ページ捲りボタン122)を操作することで、ページ捲り操作を行ないながら所望のページ情報を液晶表示パネル103に表示させることができる。また、前ページ送りボタン122aや次ページ送りボタン122bの何れか一方を連続的に押し続けると高速でページ送りを行なうことができ、これにより、次々と表示される情報を確認しながら所望とする情報を探すという操作が可能となっている。
【0065】
また、捲り表示の際は、ページ送り操作に合わせて、液晶表示パネル103の液晶素子を駆動する画素振幅である画像コントラストや画像全体の明るさである表示明度(ブライトネス/背景輝度)を通常表示時と異なるものとし、表示デバイス上の表示画像の明暗状態を所定時間に亘って通常状態の明暗の調子と異なるものにすることで、全体の画像の特徴抽出が容易となるように構成されている。
【0066】
<文書ビューア/マネジャ部>
図3は、文書ビューア102とマネジャ部180の機能ブロック図である。文書ビューア102は、ページ単位で画像を表示する表示デバイスの一例である液晶表示パネル103と、文書ビューア102におけるの表示処理全体を制御するコントローラ130と、所定条件の元に新しいページ画像を生成するページ画像生成部140とを備える。コントローラ130は、液晶表示パネル103上のページ画像の切替指示を操作ボタン110を介して受け付けるページ送り指示受付部132を有する。ページ画像生成部140は、ページ送り指示受付部132がページ画像の切替指示を受け付けたことを条件として新しいページ画像を生成する。
【0067】
また、文書ビューア102は、ページ送り指示受付部132がページ画像の切替指示を受け付けたことを条件として、液晶表示パネル103上の画像を切り替えるとともに表示画像の明暗状態を所定順序に従って切り替える表示輝度制御部150を備える。
【0068】
ページ画像生成部140は、ページ送り指示受付部132がページ画像の切替指示を受け付けると、指示された方向(前方/後方の何れか)の新しいページ画像を生成し、生成し終えると、その旨を示す生成完了信号S1を表示輝度制御部150に通知する。
【0069】
表示輝度制御部150は、液晶表示パネル103上におけるページ画像の表示コントラストを制御する機能部であるコントラスト制御部150aと、液晶表示パネル103のバックライト輝度を制御することでブライトネスを制御する機能部であるブライトネス制御部150bとを有する。
【0070】
表示輝度制御部150は、液晶表示パネル103上のページ画像のコントラストをコントラスト制御部150aにより調整したり、あるいはページ画像のブライトネスをブライトネス制御部150bにより調整することで、液晶表示パネル103上における表示輝度を制御する。なお、コントラストおよびブライトネスの両方に限らず、この両者の少なくとも一方を調整するものであればよい。
【0071】
この表示輝度制御部150は、ページ送り指示受付部132がページ画像の切替指示を受け付けると、液晶表示パネル103の画像をページ画像生成部140が生成した新しいページ画像に切り替えるとともに、液晶表示パネル103上の表示画像の輝度を所定時間に亘って、表示画像の切替指示を受け付ける直前の明暗状態である通常状態の輝度(その時点にユーザが設定しているコントラストやブライトネスの状態)と異なるものに設定し、その後、通常状態の輝度とほぼ等しい輝度に設定する。たとえば、捲り表示中には表示輝度を高めに設定し、捲り表示完了後には、概ね元の表示輝度(ページ捲り操作直前のコントラストやブライトネスの状態)と等しい状態に戻す。
【0072】
そして、ページ画像生成部140が新しいページ画像を生成し終えると、表示輝度制御部150は、ページ画像生成部140から生成完了信号S1の通知を受けて液晶表示パネル103上の画像をその新しいページ画像に切り替えさせる。ページ画像生成部140は、表示輝度制御部150からの画像切替指示S2を受けると、生成した新しいページ画像を液晶表示パネル103に設定する。
【0073】
また、表示輝度制御部150は、表示画像の輝度を通常輝度よりも比較的高い輝度に設定する。これにより、ページ画像生成部140にて生成された新しいページ画像が、通常輝度よりも高めに表示される。そして、表示輝度制御部150は、この高めの表示輝度を、生成完了信号S1が入力されてからの経過時間に応じて漸次通常輝度に戻していく。
【0074】
このように、ページ切替時に、表示輝度を所定時間だけ通常表示と少し変えることで、本を読むようにパラパラと捲りながら表示を行なっていく場合でも、判別能を高めることができる。
【0075】
一方、マネジャ部180は、ログファイル格納部182の他に、読み手が読もうとする対象文書を文書DB224から取り込み強調表示すべき文字やセンテンスを特定する強調語/センテンス特定部184と、強調表示すべき文字やセンテンスの選択手法を強調語/センテンス特定部184に指示する強調語/センテンス選択手法指示部186と、強調表示機能の有効/無効(オン/オフ)を制御する強調指示制御部188とを備える。
【0076】
マネジャ部180は、先ず、強調語/センテンス選択手法指示部186にて読み手(本例では会議参加者)により指定された手法を実現する強調語/センテンス特定手法を選択し強調語/センテンス特定部184に指示する。読み手が読もうとする対象文書は、強調語/センテンス特定部184に入力される。強調表示機能がオンとなっている場合は、強調語/センテンス特定部184にて強調表示すべき語句(単語、センテンス、あるいは文章)をどのように表示するかが決定された後に文書ビューア102のコントローラ130を通じページ画像生成部140へ画像情報が送られる。
【0077】
なお、強調表示手法としては、濃度(コントラスト/ブライト)を変化させて表示させる、フォント(種類やサイズ)を変化させて表示させる、文字色を変化させて表示させる、文字の背景色を変化させて表示させる、下線やべた塗りを付す、などという方法がある。
【0078】
濃度を変化させて表示させる場合、前述のように、表示輝度制御部150の機能を利用する。この場合、確信度の値に応じて濃度を多段階に切り替えるようにしてもよい。
【0079】
フォントを変化させて表示させる場合、文字色を変化させて表示させる場合、文字の背景色を変化させて表示させる場合、あるいは下線やベタ塗りを付す場合には、強調語/センテンス特定部184は、文書DB224から取得した文書情報を、それらに応じた画像データに変換してページ画像生成部140に渡す。これらの場合、確信度の値に応じて、フォントを切り替えたり、文字色・背景色・下線やべた塗りの色を多段階に切り替えるようにしてもよい。
【0080】
確信度の値に応じて、濃度、フォント、あるいは文字色・背景色・下線やべた塗りの色を多段階に切り替えるようにすれば、検索結果後の強調表示の違いによって、検索結果の重要度を判断することができる。
【0081】
たとえば、強調語/センテンス特定部184は、自然言語処理サーバ242が付ける専門用語あるいは固有名詞分類の確信度が高いものを強調表示するよう制御する。どの分類に入れられた語を強調表示するかは読み手の指示に従う。
【0082】
こうすることで、一般的な語の重要度ではなく現在の読み手の関心に合致していると思われる語句のみを強調表示させることができる。これによりたとえば、システムが企業による事件に関する資料を集めている場合に間違って場所情報が強調表示されるといったことを防ぐことができる。
【0083】
また、強調語/センテンス特定部184は、要約や前書きなど文書の概略を纏めた部分の記載中に出現する名詞語句(固有名詞や専門用語を含んでもよい)やその類義語を強調表示するよう制御してもよい。要約部分に含まれる単語を重要語とすることで、精度よくかつ手間をかけずに、重要語または重要文を強調表示することができる。たとえば、文意をよく表現している単語を濃く表示することができる。本文の全ての文に対して類似度解析を行ない各文の類似度を計算するよりも処理が速い。
【0084】
また、要約や前書きなどは、人間が纏めたものであるため機械要約(自動要約)を利用する場合よりも強調表示すべき語句の選択の信頼性が高くなる。また、要約などの中に出現する語句だけでなく、類義語まで強調表示するようにすれば、他の文書との比較としての重要語でなく、筆者がその文書を通じて伝えたい内容を表現しているであろう語句を的確に識別して読むことができる。この結果、内容を素早く理解することが可能となる。
【0085】
また、強調語/センテンス特定部184は、要約との意味的な距離を利用して強調表示すべき語句を特定してもよい。要約との意味的な距離の計算は、たとえば、ベクトル空間法を利用することでセンテンスの類似度を測る手法(たとえば特開平11−110395号や特開2000−331027号など参照)、格助詞を利用した格構造の比較による類似度の測定、係り受け解析あるいは意味解析の結果をグラフあるいはツリー構造で表現し、それらの比較によって類似度を測る、などの手法を利用するとよい。
【0086】
これにより、本文中で注目すべき点を明らかにすることができ、内容を素早く理解することが可能となる。また、機械要約と異なり、本文自体も参照可能なため、間違った解釈をすることがない。
【0087】
また、「流し読み機能」を持たせる場合にも効果が高まる。たとえば、紙の文書を流し読みするとき、読み手は、興味を引く語句や文書を特徴づけている語句を拾い読みしながら、大事な内容が掲載されていそうなページや文書の大凡の印象を得るといったことを行なっている。この文書ビューア102でも、「流し読みモード」を設けることで、文意をよく表現していると思われる重要語句を濃く表示することができる。濃く表示されているキーワードを追っていくことによって、短時間で文書の内容を理解することができる。また、読み手は、濃く表示されている語句の周辺が重要な箇所であると推測することもできる。より深く内容を理解したければ、そこを読み進めればよい。
【0088】
また、アノテーション機能を利用した文献リストの自動生成とリンクさせた文書を表示することもできる。たとえば、ある文書に読み手が書き込んだ下線や丸などの印がついた語句をキーワードにして、サーバシステム200に保持している文書に検索をかける。そしてキーワードが頻出する文書を参考文献としてリストアップする。読み手は、文書のタイトル、キーワードが頻出している個所の文章(クリップ)とページ番号を参照することができる。指定された参照文献を表示する際には、クリップ(検索条件に該当した語句を示す状態)中のキーワードに、たとえば、フォント種やサイズを変える、下線を引く、色塗りする、あるいは濃い文字で表示するなどの強調表示をする。こうすることで、参照文献の内容を素早く理解することが可能となる。
【0089】
なお、強調語/センテンス特定部184、強調語/センテンス選択手法指示部186、および強調指示制御部188の各処理、特に確信度を求める処理の詳細は、本願と同日出願に係る特願2002−314876号を参照するとよい。
【0090】
<文書サーバ/文書データベース>
図4は、文書サーバ222および文書DB224の構成例を示す図である。文書サーバ222は、「登録」と「文書読込み」を外部からの指示により受け付ける。たとえば、文書ビューア102の文書読込みボタン114が操作されたことをクライアントシステム100にて検知すると、クライアントシステム100は、その旨をサーバシステム200を構成する文書管理部220の文書サーバ222に通知する。これにより、文書サーバ222は、文書DB224から指示された文書を読み込む。
【0091】
なお、「登録」は、たとえば“http://datacenter.company.co.jp/access.cgi?DocumentID=8gjk3cl3”などのように、文書DB224への文書の格納先を示すアドレスを示した登録したい文書へのURL(Uniform Resource Locators )などのパスやディレクトリへのパスで与えることとする。
【0092】
文書サーバ222は、与えられたパスが示す文書(群)に対し、順次、文書IDを付与し、文書名と文書本文を文書DB224に登録する。このとき、文書DB224内のデータ構造は、たとえば図4(B)のようになる。文書名または文書本文はURLなどの文書へのパスでもかまわない。
【0093】
文書サーバ222は、文書ビューア102から「文書読込み」の指示を受け付ける。文書サーバ222は、「文書読込み」の指示を受け付けると、文書DB224内の文書名の一覧を作成し、文書ビューア102へ返す。また、文書サーバ222は、文書ビューア102より文書名を受け取り、対応する文書本文を文書ビューア102へ送り返す。
【0094】
<アノテーションサーバ/アノテーションデータベース>
図5は、アノテーションサーバ212およびアノテーションDB216の構成例を示す図である。
【0095】
アノテーションサーバ212は、「保存」と「検索」を外部からの指示により受け付ける。たとえば、文書ビューア102の保存ボタン116が操作されたことをクライアントシステム100にて検知すると、クライアントシステム100は、その旨をサーバシステム200を構成するアノテーション管理部210のアノテーションサーバ212に通知する。これにより、アノテーションサーバ212は、保存を指示されたアノテーション情報(付加情報の特徴を表した情報の一例)をそのアノテーションが付与されていた文書に対応付けて、記憶部の一例であるアノテーションDB216に登録(格納)する。
【0096】
たとえば、アノテーションサーバ212は、文書ビューア102から「保存」の指示を受け付ける。このとき、保存したいアノテーション内容とアノテーションの矩形情報と色や形状、またアノテーションが付与された文書IDおよび「保存」指示を発した文書ビューア102の端末IDが与えられる。またこのとき、同様に、「保存」を指示した会議参加者(クライアント)のユーザ名や、その参加者が属するグループID、並びに保存を指示したアノテーションに関する公開属性、およびアノテーションが付与された時刻も与えられる。
【0097】
アノテーションサーバ212は、与えられた端末ID、文書ID、矩形情報(詳細は後述する)、アノテーション内容、色、形状、ユーザID(あるいはユーザ名)、グループID、公開属性、時刻を、テーブルデータとしてアノテーションDB216に保存する。このときアノテーションDB216内のデータ構造は、たとえば図5(B)のようになる。アノテーションIDは、文書IDおよびユーザIDの組合せが新規の場合、新たに付与される。新規でない場合は、そのアノテーションIDで示される行を上書きするものとする。
【0098】
アノテーション内容は、描画されたアノテーションを再現するためのデータであり、ビットマップやベクトルデータなどのデータとなる。色や形状は、アノテーションの色や形状である。ユーザID(あるいはユーザ名)は、文書ビューア102を操作しているユーザを示す情報であり、グループIDは、そのユーザが属しているグループのIDである。
【0099】
公開属性は、たとえば、公開可能(制限なし)とする(=Pub)、あるグループ内だけに公開する(=Frd)、アノテーションを非公開(個人用)とする(=Prv)のうちの何れかをとるものとする。あるグループ内だけに公開する(Frd)場合には、公開対象のグループの情報(たとえばグループID)もアノテーションDB216に登録する。
【0100】
時刻は、文書ビューア102においてアノテーションが付与された時刻であり、日付と時間からなる。
【0101】
また、クライアントシステム100は、文書ビューア102の検索ボタン118が操作されたことを検知すると、その旨をサーバシステム200を構成するアノテーション管理部210のアノテーションサーバ212に通知する。これにより、アノテーションサーバ212は、検索を指示されたアノテーション情報をアノテーションDB216から読み出す。
【0102】
たとえば、アノテーションサーバ212は、文書ビューア102から「検索」の指示を受け付ける。このとき、アノテーションサーバ212は、文書IDと矩形情報とアノテーション付与範囲に関する情報をクライアントシステム100(文書ビューア102)から受け取る。アノテーションサーバ212は、これらの情報(検索条件)に基づきアノテーションDB216内を検索し、適切なアノテーション内容を文書ビューア102へ返す。この検索処理については後述する。
【0103】
<アノテーション付与に関する処理>
次に、アノテーション付与に関する処理について、具体例を用いて説明する。先ず、文書の登録、読込み、アノテーション付与、保存までを説明する。
【0104】
<文書の登録処理>
図6は、以下に述べる具体例における文書DB224の構成例を示す図である。本例におけるそれぞれの文書は、コピー機の操作に関するマニュアルである。
【0105】
先にも述べたように、文書の登録は、登録したい文書へのURLやディレクトリへのパスで与えることとする。文書サーバ222は、受け取ったパスで示される文書の文書ID、文書名、文書本文を、文書DB224への文書の登録内容として、図6のように登録する。
【0106】
<文書の読込み処理>
文書の読み込みを希望する参加者は、文書ビューア102の文書読込みボタン114を押下する。この指示を受け付けた文書ビューア102は、文書読込み要求を文書サーバ222へ発信する。
【0107】
この通知を受けた文書サーバ222は、文書DB224内の文書名の一覧を作成し、文書ビューア102へ返す。ここでは“manual1.txt, manual2.txt, manual3.txt, manual4.txt”となる。文書ビューア102は、文書名の一覧をリストボックスなどで表示しユーザA(ユーザIDはuser1)へ選択を促す。
【0108】
ユーザAは、“manual2.txt”を選択したものとする。文書ビューア102は、“manual2.txt”が選択されたことを文書サーバ222へ通知する。文書サーバ222は、“manual2.txt”に付与される文書IDと文書本文を文書DB224より検索し、文書ビューア102へ返す。文書ビューア102は、受け取った文書本文を文書表示エリア104へ表示する。なお、文書サーバ222に全文検索機能などを設けると、読込みの対象として検索結果を提示することも可能である。
【0109】
<アノテーション付与処理>
図7は、文書ビューア102の文書表示エリア104に表示された文書にアノテーションを付与した状態の表示例を示す図である。読み手(ユーザA)は、文書表示エリア104に表示された文書に対して、興味や関心に応じて下線や丸などの印(アノテーション)を付与しながら文書を読む。ここではアノテーションデバイス170としてペン型のデバイスを利用する。この場合、紙に書き込むようにアノテーションを付与することができる。
【0110】
このとき、文書表示エリア104は、図7(A)に示されるように、実際には目に見えないが文字を含む矩形に区切られているものとする。文字の無い空白名部分や図表などの部分も適当な大きさの矩形に区切る。たとえば、前後の文字のフォントサイズを参考に適当な大きさの矩形に区切るとよい。それぞれの矩形には、各矩形を特定するための情報が付与される。たとえば、連続した矩形番号が左上から横方向に順に付与される。
【0111】
たとえば、コピー機のマニュアルの校正を行う会議で、ユーザAはマニュアルのあるページの説明文の「原稿の中心を…」に着目して、図7(A)に示されるアノテーションa1を付与したとする。また、綴じ代を行なう操作にも注目してアノテーションb1を付与したとする。この後、2ページ目、3ページ目と読み進み、実際に操作を行ないながら注意すべき点などを、図7(B)のように3ページに亘ってアノテーションを付与したとする。
【0112】
<保存処理>
図8は、本事例において文書ビューア102がアノテーションサーバ212へ送る情報の一例を示した図である。また、図9は、本事例におけるアノテーションDB216の構成例を示す図である。また、図10は、本事例におけるアクションログDB214の構成例を示す図である。
【0113】
ユーザA(ユーザIDはuser1)は、本システムの利用の際、事前に付与されているユーザIDを入力してプロファイルサーバ232に問い合わせることで個人認証をする。照合に合致すれば、本システムが利用可能となる。この後、ユーザAは、文書ビューア102の保存ボタン116を押下することによってアノテーションの保存を指示することができる。
【0114】
文書ビューア102は、この保存指示を受け付けると、アノテーションが付与された文書の文書ID、端末ID、アノテーションが付与された矩形の矩形番号、アノテーション内容、線種、ユーザID、公開属性、および時刻をアノテーションサーバ212へ送る。アノテーションサーバ212へ送る情報は、図8のようになる。ここで文書ビューア102の端末IDは“1”であるとする。
【0115】
アノテーションサーバ212は、図8に示した情報を受け取り、アノテーションDB216へ格納する。このとき、既に同一の文書IDとユーザIDの組合せがある場合は、受け取った情報をそこに上書きをする。また、アノテーションサーバ212は、ユーザIDをプロファイルサーバ232に送り、プロファイルサーバ232からそのユーザが属するグループID(この例では143)を受け取り、このグループIDもアノテーションDB216に登録する。
【0116】
この例では、図9に示すように、アノテーションDB216には既に、文書ID2,3,4,5に対して所定の端末で付与されたアノテーションが6個保存されている(アノテーションID;1,2,3,4,5,6)。ここで、アノテーションDB216には、文書ビューア102から送られた図8に示す情報と同一の文書IDと端末IDの組合せの登録がないので、アノテーションサーバ212は、新規にアノテーションIDに“7”を割り当て、図9の下段のように登録する。
【0117】
また、文書ビューア102は、ユーザA(ユーザIDはuser1)による保存指示を受け付けると、ログファイル格納部182に格納しているログファイルの内容もアノテーションサーバ212に送る。アノテーションサーバ212は、文書ビューア102から受け取ったログファイルを、図10に示すように、アクションログDB214に保存する。なお、アクションログDB214には、閲覧している文書のページが変更された時間(PAGE_OPEN )と文書を開いていた時間(DOC_OPEN)も記録する。また、アノテーションが保存された時間(ANT_SAVE )も記録する。
【0118】
以上で、アノテーションや文書およびページに関する操作履歴の所定のデータベースへの保存が終了する。
【0119】
図11は、本事例におけるアノテーションDB216の他の構成例を示す図である。この構成例の場合、アノテーションは予めある纏まりによって1つのアノテーションに纏められる。たとえば、ある時間以内において書き込まれたアノテーションは1つのベクトルデータに纏められるとする。ここで「ベクトルデータ」とは、ある色や太さを持つ複数の座標点が書き込まれた時間順に纏められているデータである。
【0120】
<<アノテーションを利用した情報検索>>
次に、文書ビューア102の文書表示エリア104に表示された文書にアノテーションを付し、このアノテーションで示された情報を利用することで、システムを利用するユーザ個々人が持つ個人情報の共有、つまり個人ベースでの情報共有(知識の共有)を実現する手法について、具体的に説明する。
【0121】
図12は、アノテーション処理に着目した電子会議システム1の構成例を示す図である。基本的な枠組みは、図1に示した全体構成図と相違ない。同一文書に対して、複数のユーザがアノテーションを付与できるように構成されている。
【0122】
なお、本実施形態のシステム構成では、個人ベースでの情報共有(知識の共有)を実現するためのアノテーション処理を実行する仕組みを司る専用の装置であるアノテーション処理装置218を設けている。
【0123】
なお、アノテーション処理装置218の機能を、アノテーションサーバ212や文書サーバ222にて担当してもよい。この場合、図中点線で示すように、アノテーションサーバ212と文書サーバ222とが直接に(あるいはネットワーク9を介して)アノテーション処理に関わるアノテーション情報のやり取りをするようにする。
【0124】
文書閲覧者(本例では会議への参加者)は、文書ビューア102の文書表示エリア104に表示された文書を読みながら、アノテーションデバイス170を用いて、興味を引く語句や文書を特徴づけている語句に下線や丸などの印(アノテーション)を書き込む。あるいは、メモ書きを付してもよい。
【0125】
これらの手書き入力(デジタルインク)された文書本体に対する付加情報に関する情報は、保存ボタンが押されることで、ネットワーク9を介してサーバシステム200に送信される(図8参照)。文書本体は、文書管理部220にて管理されている(図6参照)。この文書本体に対応するアノテーションなどの付加情報は、アノテーション管理部210のアノテーションDB216に、その文書本体に対応付けられて管理(保存)される(図9や図11参照)。そして、必要に応じて読み手から検索が指示されると、読み手が指定した付加情報の属性に適合する付加情報(たとえばアノテーション)をアノテーション管理部210を利用してサーチ(検索)する。
【0126】
また、アノテーションで示された語句、たとえばアノテーション付近に書かれている文字情報である対象文字列を抽出することができる。また、この対象文字列をクエリとして、文書サーバ222は、そのクエリに合致する文書を文書DB224から検索し、そのリストを文書ビューア102に返すことができる。このとき、文書サーバ222は、検索リストとしてリストアップされた文書本体の格納先(URL)の情報をリンクとして付加しておく。
【0127】
ユーザは、文書ビューア102に表示されたリスト(検索結果)を参照して、必要であれば、そのリストにリンクされている文書をクリックする。これを受けて、文書サーバ222は、指示された文書本体を文書DB224から読み出し、文書ビューア102に提示する。
【0128】
このような検索の仕組みにより、たとえば議事進行中に、過去の関連文書を検索したり、あるいは、会議を通して専門家を発見したりすることができる。これにより、必要とする情報であって、自分がそれまで知らなかった情報を取得することができる。
【0129】
ここで、本実施形態では、検索結果を得る際、ユーザが指定した検索条件そのものに関わる情報に限らず、そのユーザが指定した検索条件と類する他のユーザが指定した検索条件にて取得され得る情報についても、自動的にユーザに提示されるような仕組みが設けられている。
【0130】
換言すれば、ほぼ同じ視点の検索条件ではあるが、個々人の個性による視点差(ちょっと違う点)に着目して、同様の興味を持つ他人が取得し得る情報に関しても、検索を指示したユーザに提示するようになっている。以下この点について詳しく説明する。
【0131】
先ず、アノテーション情報は、それを付与した人(ユーザ)および付与された文書内の位置(アノテーション位置)を含んでいる。1つ以上のアノテーション位置を指定することで、その付近にアノテーションを付与したすべてのユーザおよびそれらのユーザが付与した別のアノテーションを検索することができる。
【0132】
ここで、アノテーションの検索対象は同一文書内であっても、別の文書であってもよい。すなわち、「文書の部分→その部分にアノテーションを付与したユーザ→そのユーザが付与したアノテーション位置(の集合)→対象文字列(の集合)」の順に検索が行なわれる。
【0133】
情報提供処理システム7は、あるユーザが付与したアノテーションの対象文字列を管理し、あるアノテーションの対象文字列、そのアノテーションが付与された文書内のすべてのアノテーションの対象文字列の集合、そのユーザが付与したアノテーションの対象文字列の集合を検索する。このような処理を実現する中央処理部として、アノテーション処理装置218が機能する。
【0134】
図13は、図1に示した電子会議システム1について、アノテーションを用いた検索処理や情報提供処理を利用して、複数ユーザ間で情報の共有を可能とする機能に着目したブロック図である。ここで、図13(A)は、全体構成の概要を示し、図13(B)は、情報提供処理に特化した機能要素の詳細を示す。
【0135】
図13(A)に示すように、この機能をなす情報共有処理システム7は、読み手から検索指示を受け付けるための検索要求指定部500と、検索を要求された文書やその他の関連した情報がアノテーション管理部210のアノテーションDB216や文書管理部220の文書DB224、あるいはアノテーション処理装置218に登録済みか否かを検索し、該当品がある場合にはその検索結果を表示側へ送るアノテーション処理装置218と、アノテーション処理装置218から送られた検索結果を表示する表示処理部101とからなる。表示処理部101は、文書ビューア102とマネジャ部180とにおける表示処理に関わる部分で構成される。
【0136】
アノテーション処理装置218の一構成例は図13(B)に示される。このブロック図により、アノテーションを用いた検索処理や情報提供処理を利用して、複数のユーザ間で情報の共有を可能にする機能が具体的に示されることとなる。
【0137】
図示するように、アノテーション処理装置218は、文書ごとに、アノテーション検出部107により取得されたアノテーション付与情報を複数のユーザについて登録する登録部542と、アノテーション検出部107により取得されたアノテーション付与情報と登録部542に予め登録されている複数のユーザについてのアノテーション付与部分情報とを比較することで、アノテーションが追記された部分の情報に関連し且つ他ユーザと関わりのある関連情報の検索条件を決定する検索条件決定部544と、検索条件決定部544により決定された検索条件に合致する情報を検索する検索部546と、検索部546により検索された検索結果を関連情報として提示する関連情報提示部548とを備える。
【0138】
検索部546は、指示ユーザのアノテーションが付与された部分のテキスト(対象文字列)の位置とほぼ同一位置にアノテーションを付した他ユーザによる、そのアノテーションが付与された部分の情報と直接的に関連する(指示ユーザとは直接的には関係しない)情報を検索する。
【0139】
たとえば、指示ユーザが付与したアノテーション位置とほぼ同一位置にアノテーションを付した他ユーザによる、そのアノテーションが付与された部分の情報と直接的に関連する(指示ユーザとは直接的には関係しない)文書情報を検索する。また、指示ユーザと同一もしくは類似する視点または興味を有するユーザに関する情報を検索する。このときには、登録部542に登録されている情報を参照する。
【0140】
また、指示ユーザが付与したアノテーション位置とほぼ同一位置にアノテーションを付した他ユーザの視点または興味に関する情報を検索する。この場合にも、に登録されている情報を参照する。このとき、関連情報の検索を指示したユーザが付与したアノテーションにより示される対象文字列と、ほぼ同一位置の他ユーザによるアノテーションにより示される対象文字列との差を他ユーザの視点または興味に関する情報とする。このとき、検索部546は、他ユーザのアノテーションに関しての検索をアノテーション管理部210に指示する。
【0141】
なお、文書中のアノテーションが付与された部分の情報(たとえばテキストや画像に埋め込まれている参照情報など)と直接的に関連する文書情報やアノテーションに関しての検索を文書管理部220に指示してもよい。
【0142】
図14は、図13に示した情報提供処理システム7におけるアノテーション処理(特に他ユーザに関連する情報の提供処理)の手順を示す概略図である。以下では、アノテーションを付与する行為を自らの興味あるいは視点を表出するものと捉え、アノテーション(行為とそれ自体および対象文字列)を通じて興味の近さや視点の違いを知るための操作および機能について説明する。
【0143】
ステップS100;
ユーザは、文書ビューア102の文書表示エリア104に表示された文書を読みながら、アノテーションデバイス170を用いて、興味を引く語句や文書を特徴づけている語句にアノテーションを付与する。文書ビューア102は、文書に付与されたアノテーションの位置や属性を検出し、この検出したアノテーションの位置や属性の情報をアノテーション管理部210に送る。アノテーション管理部210は、このアノテーションの位置や属性の情報を、アノテーションサーバ212を介して図5に示したようにアノテーションDB216に登録する。このとき、文書ビューア102は、文書IDについて、文書ビューア102に表示されている文書IDを属性として送付する。アノテーションサーバ212は、文書ビューア102から受け取った文書IDとアノテーション位置の情報をアノテーション処理装置218に渡す。
【0144】
ステップS102;
これを受けて、アノテーション処理装置218は、アノテーションDB216の登録情報に基づき、あるアノテーション位置にアノテーションを付与した他のユーザすべてに対して、同一文書内のアノテーション位置を検索してそれらの対象文字列の集合を得る。つまり、アノテーション処理装置218は、このような処理を複数のユーザから受け付け、データベースを構築する。たとえば、アノテーション処理装置218は、以下のような要素からなるリスト(以下関連ユーザリストともいう)を作成する。
a)同一文書で同一位置に1つでもアノテーションを付与したユーザのリスト
b)アノテーション位置(アノテーションが付与された部分を特定する矩形の位置)のリスト(上記全ユーザ分)
c)対象文字列のリスト(上記全ユーザ分の)
【0145】
次に、アノテーション処理装置218は、アノテーション情報とともに検索指示をあるユーザから受け付けると、対象文字列の情報を文書管理部220に送付する。文書管理部220の文書サーバ222は、この対象文字列をクエリとして、そのクエリに合致する文書を文書DB224から検索し、アノテーション処理装置218を介して、その検索リストをアノテーション処理装置218を介して文書ビューア102に返す。このとき、文書サーバ222は、検索リストとしてリストアップされた文書本体の格納先(URL)の情報をリンクとして付加しておく。
【0146】
また、アノテーション処理装置218は、検索指示を受け付けると、前述の関連ユーザリスト作成を実行するとともに、アノテーションにて示された対象文字列と登録済みのアノテーション情報とを比較する。この対象文字列の比較により興味の近いユーザを推定することができる。また、対象文字列の差分を求めることで、他のユーザの視点を得ることができる。
【0147】
ここで、対象文字列の比較は、たとえば、対象文字列からキーワード(たとえば、固有名詞)を抽出し、キーワードベクトルの比較による類似度計算によって類似度を計算し、ある閾値を境に類似しているかどうかを判定する。類似度計算の手法としては、たとえば、TF(Term Frequency)法やIDF(Inverted Document Frequency )法、あるいはTF法とIDF法とを組み合わせたTF/IDF法などを利用すればよい。
【0148】
次に、アノテーション処理装置218は、対象文字列の差分の情報を文書サーバ222に渡す(S110)。これを受けて、文書サーバ222は、文書DB224内の対象文字列の差分に関連する文書を検索する(関連文書検索という)。この関連文書検索の手法は何れの手法であってもよいが、たとえば“Namazu”などの公知の全文検索エンジンを使用することができる。
【0149】
文書サーバ222は、検索結果の情報をアノテーション処理装置218に渡す(S120)。アノテーション処理装置218は、この関連情報の検索結果と関連ユーザリストとを元に、文書ビューア102に以下のような情報のうちの少なくとも1つを返す(S130)。
a)興味の近いユーザのリスト
b)他のユーザの視点(対象文字列の差分)
c)関連文書の情報(関連文書の検索リスト)
【0150】
このとき、アノテーション処理装置218(文書サーバ222でもよい)は、関連文書の検索リストとしてリストアップされた文書本体の格納先(URL)の情報をリンクとして付加しておく。
【0151】
このように、上記実施形態の手法によれば、あるユーザが検索を希望する文字列にアノテーションを付与して検索指示を発すると、アノテーションが付与された対象文字列のみをクエリにして検索するのではなく、その対象文字列と同じような位置にアノテーションを付与した他ユーザの視点をも加味した検索結果や同様な検索視点の他ユーザに関する情報がそのユーザに提示されることになる。
【0152】
この結果、以下のような効果が得られる。
(1)各ユーザのアノテーションから得られた対象文字列の集合同士を比較することで、その文書に対する興味の近さを推定し、興味の近いユーザのリストを提示することができる。
(2)他のユーザのアノテーションから得られた対象文字列と自分のそれの差分を求め、他のユーザの視点を得ることができる。これら興味の近さおよび対象文字列の差分は、興味の近いユーザ名あるいはそのユーザの視点による文書の別な解釈としてユーザに提示することができる。
(3)対象文字列の差分は、それに近い内容を持つ別の文書の検索に利用することができる。
(4)さらに、検索の結果得られた文書に付与されているアノテーションから、そのアノテーションを付与した他ユーザを検索することも可能である。この結果、対話的かつ網羅的に複数の文書を扱うことが容易となる。
【0153】
つまり、あるユーザの視点に立ったテーマ、話題、あるいは興味に基づく検索対象文字列をトリガとして、この対象文字列に直接に関係する文書情報だけでなく、そのユーザの視点と類する視点を持つ他ユーザによる対象文字列に直接に関係する(元のユーザにとっては直接的でない)文書情報をも取得できるようになる。
【0154】
換言すれば、あるユーザの視点と同様もしくは類似する視点を持つ他ユーザが得るであろう情報まで検索範囲を広げることができる。個性の違いがあっても、似通った視点や興味などを持つ他人の情報を加味して、自分の視点や興味などと「ちょっと違う」範囲にまで情報検索範囲を拡張することができる。そして、このことが、複数のユーザ相互になされることで、結果として、それぞれが持つ(あるいは持つであろう)情報を相互に共有することができるようになり、複数のユーザの間で情報の共有を実現することができるようになる。
【0155】
これにより、自己の視点だけでは得られない情報であって、自己の視点と類似する他ユーザの視点から得られる情報についても、自己の知識として得ることができる。つまり自己の持っていない知識を他人が持っている知識で補い合うことができ、知識(知的な情報)の共有を実現することができる。
【0156】
また、検索結果だけでなく、あるユーザの視点と同様もしくは類似する視点を持つ他ユーザに関する情報についても通知することで、自己と他人との興味の近さや視点の違いを知ることもできる。
【0157】
たとえば、自分はある文書を見始めたばかりで、読んでいる最中にある場所にアノテーションを付したとする。またこのとき、自分が付したアノテーション位置(第1付与点)と同じような所に他人が既にアノテーションを付していたとする。そしてこの場合、その他人は既に文書を読み進めており、第1付与点以降にも多数のアノテーションを付していたとする。
【0158】
このような場合、上記実施形態の構成では、自分が付したアノテーションをトリガとして、自分が付したアノテーション位置(第1付与点)と同じような位置にアノテーションを付した他ユーザに関する情報がその自分に通知される。このとき、他人がその文書に付したアノテーションの情報を知ることができる。たとえば、他人が付したアノテーションを表示させることで、他人が先読みし印を付した箇所だけを読み進めることで、速読ができ、また、文書の内容を素早く理解することもできる。
【0159】
このように、上記実施形態の構成では、検索を希望する部位にアノテーションを付すだけで他ユーザに関する情報が自動的に通知される仕組みとしているので、これらの情報に簡易にアクセスすることができる。
【0160】
なお、上述したアノテーションを利用した知識の共有を実現する一連の処理は、ハードウェアにより実行させることもできるが、ソフトウェアにより実行させることもできる。一連の処理をソフトウェアにより実行させる場合には、そのソフトウェアを構成するプログラムが、専用のハードウェアに組み込まれているコンピュータ(組込みマイコンなど)、または、各種のプログラムをインストールすることで各種の機能を実行することが可能な汎用のパーソナルコンピュータなどに、記録媒体からインストールされる。
【0161】
この記録媒体は、コンピュータとは別に、ユーザにプログラムを提供するために配布される、プログラムが記録されている磁気ディスク(フレキシブルディスクを含む)、光ディスク(CD−ROM(Compact Disc-Read Only Memory )、DVD(Digital Versatile Disc)を含む)、光磁気ディスク(MD(Mini Disc )を含む)、もしくは半導体メモリなどよりなるパッケージメディアにより構成されるだけでなく、コンピュータに予め組み込まれた状態でユーザに提供されてもよいし、プログラムが記録されているROMやハードディスクなどで構成されてもよい。あるいは、ソフトウェアを構成するプログラムが、通信網を介して提供されてもよい。
【0162】
図15は、上述した情報表示処理システム7を、コンピュータにより構成する場合のシステム構成の概略を示した図である。このようなコンピュータシステムの基本構成は、ハードウェア層910、OS(Operating Systems )層920、文書情報管理層930、ユーザインタフェース層940という4つの層から成り立っている。各層は独立性が保たれており、層ごとに機能を拡張したり別のものに交換することが容易になっている。
【0163】
ハードウェア層910は、図1で示したシステム構成に相当するもので、たとえば、文書ビューア102に対応するタブレット911、アノテーションデバイス170に対応するペン入力装置912、操作ボタン110に対応するボタン913、およびネットワーク9に対応する通信ネットワーク914からなる。なお、たとえば音声入出力インタフェース915など、その他の仕組みを設けてもよい。
【0164】
文書情報管理層930は、文書管理部220に対応し文書本体の管理を担当する文書層932、アノテーション管理部210に対応しアノテーションなどの文書本体に付加される付加情報の管理を担当するワークスペース934、および情報検索部240に対応しアノテーションなどを利用して情報検索を行なう情報検索層936からなる。
【0165】
ユーザインタフェース層940は、文書ビューア102やアノテーションデバイス170に対応しユーザからの入力を管理するユーザ入力管理層942、文書表示エリア104における情報表示に関わる画面層944、およびマネジャ部180に対応し文書表示エリア104の表示動作を管理する画面マネジャ946からなる。
【0166】
ユーザ入力管理層942の“手書きによる注記”の機能部分は、アノテーションデバイス170による手書き入力を受け付ける機能部分であり、受け付けた結果は、文書情報管理層930のワークスペース934における“注釈のデータベース”(アノテーションDB216に対応)に送られる。画面層944のワークスペース944aは、必要な情報を入力するための指定画面などの作業画面に対応する。画面マネジャ946には、表示モードを切り替える機能部分(946a〜946c)の他に、図3に示したマネジャ部180内の機能部分である強調語/センテンス選択手法指示部186などに対応する強調表示管理層946dを有する。
【0167】
このようなシステム構成においては、たとえば前述した実施形態の機能を実現するソフトウェアのプログラムコードを記録した記憶媒体を、システムに供給し、そのシステムのコンピュータ(またはCPUやMPU)が記憶媒体に格納されたプログラムコードを読み出し実行することによって、上記実施形態で述べた効果が達成される。この場合、記憶媒体から読出されたプログラムコード自体が前述した実施形態の機能を実現することになる。また、コンピュータが読み出したプログラムコードを実行することにより、前述した実施形態の機能が実現されるだけでなく、そのプログラムコードの指示に基づき、コンピュータ上で稼働しているオペレーティングシステムOSなどが実際の処理の一部または全部を行ない、その処理によって前述した実施形態の機能が実現される場合であってもよい。
【0168】
さらに、記憶媒体から読み出されたプログラムコードが、コンピュータに挿入された機能拡張カードやコンピュータに接続された機能拡張ユニットに備わるメモリに書き込まれた後、そのプログラムコードの指示に基づき、機能拡張カードや機能拡張ユニットに備わるCPUなどが実際の処理の一部または全部を行ない、その処理によって前述の実施形態の機能が実現される場合であってもよい。
【0169】
なお、上記実施形態で述べた処理を実現するプログラムコードを記述したファイルとしプログラムが提供されるが、この場合、一括のプログラムファイルとして提供されることに限らず、システムのハードウェア構成に応じて、個別のプログラムモジュールとして提供されてもよい。
【0170】
たとえば、図1に示したシステム構成では、クライアントシステム100とサーバシステム200とがネットワーク9で接続された形態であるので、表示に関する処理プログラム(たとえばページ捲り時や検索結果を反映した強調表示機能用の処理プログラム)は、クライアントシステム100側の装置に向けて、クライアントシステム用モジュールとして提供される。一方、アノテーションの管理や検索、あるいは文書管理や語句検索に関する処理プログラムは、サーバシステム200側の装置に向けて、サーバシステム用モジュールとして提供される。また、サーバシステム用モジュールは、さらに、サーバシステム200を構成する各管理部の構成に応じて、一括ファイル若しくはサブモジュールファイルとして提供される。
【0171】
なお、クライアントシステム100とサーバシステム200とは、ネットワーク9にて接続されているが、これらは近接した場所に配置されてもよい。この場合、クライアントシステム100のマネジャ部180をサーバシステム200(その全体あるいはその一部)と一体化させてもよい。
【0172】
また、上述の説明では、文書ビューア102がマネジャ部180を収容した本体(クレードル/ドッキングステーション)と別体であるものとして説明したが、上記実施形態で説明したマネジャ部180内の機能部分を文書ビューア102と一体化させてもかまわない。
【0173】
以上、本発明を実施形態を用いて説明したが、本発明の技術的範囲は上記実施形態に記載の範囲には限定されない。発明の要旨を逸脱しない範囲で上記実施形態に多様な変更または改良を加えることができ、そのような変更または改良を加えた形態も本発明の技術的範囲に含まれる。
【0174】
また、上記の実施形態は、クレーム(請求項)にかかる発明を限定するものではなく、また実施形態の中で説明されている特徴の組合せの全てが発明の解決手段に必須であるとは限らない。前述した実施形態には種々の段階の発明が含まれており、開示される複数の構成要件における適宜の組合せにより種々の発明を抽出できる。実施形態に示される全構成要件から幾つかの構成要件が削除されても、効果が得られる限りにおいて、この幾つかの構成要件が削除された構成が発明として抽出され得る。
【0175】
** 電子会議システム1が有するその他の機能 **
次に、本願発明の範囲ではないが、図1に示した電子会議システム1の構成にて実現し得るその他の特徴的な機能について説明する。
【0176】
<<1.アノテーションの更新の通知>>
特開平9−62676号公報では、アノテーションを付与した人物または付与された日時で管理し、ある特定の人物を指定することによりその人物が付与したアノテーションを再現したり、特定の日時に付与されたアノテーションを再現したりできる手法が開示されている。
【0177】
しかしながら、同公報に記載の手法では、たとえば、会議などの場面で、複数人が同時間帯に同一文書に書きアノテーションを共有する場合、ユーザは常にアノテーションの読込みや再現手続きを行なわなければならない。
【0178】
これに対して、図1に示した電子会議システム1では、アノテーションが付与された場合に、その旨をその文書を参照しているユーザへ通知する仕組みを講じることができる。以下この点について説明する。
【0179】
全体構成は、図1を参照し、アノテーションデータの内容例は、図11に示したものを参照する。
【0180】
図16は、アノテーションの更新の通知に関わる保存処理を説明する図である。ユーザが文書ビューア102上でアノテーションを付与し、保存を選択する。文書ビューア102は、ユーザID、文書ID、アノテーション内容からなるアノテーションを、その保存を管理するアノテーション管理部210に送る。
【0181】
アノテーション管理部210のアノテーションサーバ(保存手段)212は、受け取ったユーザID、文書ID、アノテーション内容をアノテーションDB216に保存する。
【0182】
アノテーションサーバ212は、変更のあった文書IDとユーザID(ユーザ名)、追加されたアノテーションIDを、現在セッションが存在するすべての文書ビューア102の通知手段へ送る。
【0183】
通知手段は、送られてきた文書IDと文書ビューア102に表示されている文書IDとを比較し同じ場合は、アノテーションが送られてきたユーザ名によって更新されたことをユーザへ通知する。
【0184】
図17は、アノテーションの更新の通知に関わるアノテーションの更新について説明する図である。ユーザは通知手段によってアノテーションが通知された場合、「更新」ボタンを押下することによりアノテーションを更新することができる。更新手段は、更新されたアノテーションIDを更新検索手段へ渡す。更新検索手段(アノテーションサーバ212)は、アノテーションIDをキーとしてアノテーションDB216内を検索し、アノテーション内容を表示手段(文書ビューア102)へ渡す。表示手段は、アノテーション内容を文書ビューア102に表示する。
【0185】
<<2.アノテーションの公開制限>>
アノテーションには個人的な内容もあり、公開すべきではない場合もある。特開平11−120191号公報では、アノテーションに公開属性を持たせ、その公開属性をキーとして検索を行ない、文書を検索する技術が提案されている。
【0186】
しかし、この方法はある公開属性をもつアノテーションを含む文書を検索する方法であって、すでに、表示されている文書に対してアノテーションを再現するわけではない。
【0187】
これに対して、図1に示した電子会議システム1では、アノテーションに公開属性を持たせ、アノテーションの公開に制限を加える仕組みを講じることができる。以下この点について説明する。なお、全体構成は、図1を参照すればよい。
【0188】
図18は、プロファイルDB234の内容の一例を示す図である。プロファイルサーバ232およびプロファイルDB234は、各ユーザの所属グループを管理し保存する。プロファイルDB234の内容は、図18のようになる。
【0189】
まず、ユーザは、文書ビューア102にログイン操作を行なうことにより、プロファイルサーバ232からユーザの所属グループを取得する。
【0190】
図19は、アノテーションの公開制限に関わるアノテーションの保存について説明する図である。ユーザは、文書ビューア102にアノテーションを付与し、保存ボタンを押下する。ユーザはアノテーション保存手段に対して、保存するアノテーションの公開属性「個人」、「グループ:グループ名」「制限なし」のいずれかで保存するかを通知する。アノテーション保存手段は、ユーザID、文書ID、アノテーション内容、公開属性を保存手段(アノテーションサーバ212)へ送る。保存手段(アノテーションサーバ212)は、それをアノテーションDB216に保存する。その結果、アノテーションDB216は、図9に示すような内容になる。
【0191】
図20は、アノテーションの公開制限に関わる検索と再現について説明する図である。まず、ユーザは、文書ビューア102にログイン操作を行なうことにより、プロファイルサーバ232からユーザの所属グループを取得する。検索要求手段は、文書ビューア102に表示されている文書の文書ID、ユーザID、ユーザが属するグループ名を検索手段へ送る。
【0192】
検索手段は、一致する文書IDで、公開属性がふさわしいアノテーションを検索する。ここで、ふさわしい公開属性とは、「制限なし」またはユーザと同一のグループ名をもつアノテーションである。もちろん、公開属性が「個人」の場合でも同一ユーザであれば付与したアノテーションであれば検索される。
【0193】
公開属性としては、他のユーザID(ユーザ名)やグループを指定することも可能である。ユーザIDを指定した場合、そのユーザが制限なし属性を指定したアノテーションが再現される。また、グループ名を指定した場合、そのグループ属性が付与されたアノテーションが再現される。
【0194】
<<3.シートGUI(ハードも可能)を利用したアクセス制限>>
2.アノテーションの公開制限では、アノテーションの保存・検索時に公開属性を指定して保存していた。属性の指定を簡便に行なうために、シート状のGUIを導入するとよい。
【0195】
図21は、シートGUIを利用したアクセス制限の処理を説明する図である。図21に示されるように、文書ビューア102に(半)透明のシートを複数枚かぶせる仕組みをGUIとして表現する。
【0196】
一枚のシートには、一つの公開属性が割り当てられ、そのシートをかぶせてアノテーションを付与することにより、自動的にそのシートの公開属性が割り当てられる。またそのシートをかぶせることにより、その属性の他人のアノテーションを再現することができる。
【0197】
たとえば、文書ビューア102そのものには個人属性を付与し、一枚目のシートにあるグループ属性をあたえ、2枚目(一番上)のシートに制限なしの属性を与える。このように属性を設定することにより、シートをかぶせるごとに、徐々に公開制限が緩くなるアノテーションを付与することができる。
【0198】
個人的なアノテーションを付与する場合は、直接文書ビューア102に、グループで共有する場合は一枚目のシートを被せてアノテーションを付与し、誰に見られてもかまわないアノテーションは2枚目のシートを被せて付与する。
【0199】
シートを半透明とした場合、重ねられるシートが増えることにより、ビューアは徐々に色が濃く表示されるため、どの属性のビューに書き込もうとしているのか一目瞭然である。また、この場合、シートが半透明なので、自分が付与したアノテーションは常に見ることができる。
【0200】
<<4.アノテーション情報を使った会議の振り返り支援>>
電子会議システム1では、電子文書を表示し、その上にアノテーションを付与できる装置において、そのアノテーションの属性を利用して、会議の振り返り支援、会議資料の要約作成を行なう仕組みを提案することができる。
【0201】
様々な文書や、膨大な量の文書を使う会議において、または長期間継続して文書を使った活動において、アノテーションを付与できる文書表示装置を使って、知的活動を行った場合を考える。
【0202】
最初はある一つの文書から使い始め、その文書のある箇所について詳細を知る必要に迫られ、別の文書を表示する。その別の文書でもさらに別の文書の情報を必要としている箇所があり、また別の文書を開く。次々に肝要となる箇所にアノテーションを付けていくシーンを考える。
【0203】
会議の途中や会議が終わった後など、今までの議論を振り返りたい場合、重要箇所に付けていったアノテーションを時系列に纏めて見られれば、少なくともその会議に参加した人間ならば、話の流れを思い出すことができるだろう。
【0204】
全体構成は図1を参照すればよい。なお、アノテーションDB216の内容例として図9、アクションログDB214の内容例として、図10のものを参照する。
【0205】
図22は、「振り返り支援」の機能について説明する図である。付けたアノテーションに何らかのアクションを起こすことにより、付けたアノテーションの前後を見ることができる。たとえば、ある任意のアノテーションをペンで選択した状態で、ページ捲りボタン122(文書ビューアの外観を示した図2を参照)を押すことにより、前後にアノテーションを付けた部分を中心に文書を振り返ることができる。
【0206】
該当のアノテーションの表示の仕方は、図22のように、文書ビューア102の中心に該当のアノテーションを持ってくる。該当のアノテーションをアノテーションに使用されている色以外の色を使って表示する。
【0207】
図23は、「振り返り支援」の機能に関わるアノテーションの検索を説明する図である。この図は、文書ビューア102の検索ボタンを押したときに表示される検索要求の入力画面を示している。
【0208】
ビューア使用者は、自分もしくは自分が閲覧することのできる他人のアノテーションを検索することができる。指定しなかった項目は全ての可能性あるものが対象となる。
【0209】
<<5.アノテーション箇所の抽出>>
図24は、アノテーション箇所の抽出処理を説明する図である。電子会議システム1は、文書に付けたアノテーションの部分を切り取り、位置順に並べたり、特定のアノテーション色のみ(位置順に)表示する機能は既に存在しているが、これを、アノテーションを付けた時間順に並べなおしたり、ユーザ毎に分けて表示する機能を付けることが可能である。
【0210】
また、現在は1文書についてのみであるが、これを複数文書について行なえるようにする。
【0211】
少しでも重なる部分アノテーションがユーザ間で重複している場合、そのアノテーションを付けた範囲の語句が、その文書を用いた活動において重要であることを示している。
【0212】
アノテーションをつけた部分の振り返りとしては、たとえば、個人の範囲のみで振り返る、活動の参加者全員の全て込みで振り返る、全員のものをマージして求まる重複部分を中心に振り返る、といったケースがある。
【0213】
アノテーション範囲が句を指している場合、係り受け解析し、その主となる単語に範囲を限定した上で重複を計算する。
【0214】
今、文書を使った活動を行っていく上で、各ユーザがそれぞれの端末を使い、文書に図24のようにアノテーションを付けていったものとする。
【0215】
ここでユーザがアノテーションビューを指示すると、装置は以下の方法でアノテーション付加部分を切り取り、表示する。
1)矩形情報により、切り取ったアノテーション部分の先頭の矩形番号が小さい(大きい)順に並べて表示
2)時間情報により、切り取ったアノテーション部分を並べて時間情報が早い(遅い)順に並べて表示
【0216】
また、以下の方法でアノテーションを選別し、表示する。
1)特定の端末IDのものだけを表示
2)特定の文書ID(複数可)だけを表示
3)特定の時間区間のものだけを表示
4)特定のアノテーション色だけを表示
5)特定のアノテーション形状だけを表示
【0217】
<<6.要約(その他の概要記載を含む)部分の利用>>
アノテーションが時間的に多く付けられている場合、その文書単位(文書、頁)中における議論が活発であったことを示している。
【0218】
アノテーションを付けた部分が重要であることに加えて、最もアノテーションの時間的頻度が高かった文書単位はその文書を用いた活動の山場であったことを示している。つまり、アノテーションがつけられている部分は重要度を上げる。
【0219】
“1文書中のアノテーション数/時間”から求められる頻度情報を元に、単語の重要度(TF/IDF、アノテーションが付けられた所などから求められる)にバイアスをかける、といった重み付けが可能である。
【0220】
基本的にある決められた語数の中で、アノテーション重複部分を優先し、その際にアノテーション頻度を加味して要約に使う文の候補を選定する。文が決まったら、係り受け解析による文の省略処理を行ない、文と文の関係を修正して要約を完成させる。
【0221】
もしくは、重要文を出力するだけで、後は人間がそれを元に要約を作成する。
【0222】
そのときの時間に対するアノテーションDBと文書・ページに関するアクションDBをマージした結果は、たとえば後述する図25のように示すとよい。
【0223】
<<7.活動活性度の視覚化>>
図25は、活動活性度を視覚化した例を示す図である。アノテーションDB216とアクションログDB214から文書のページ捲り時間とアノテーション付与時間を収集できる。縦線はアノテーションのあったことを、矩形内の番号は文書IDを示す。ほかにページごとに活性度を表示する手法を利用することもできる。
【0224】
<<8.アノテーションの検索と表示の方法および装置;どういった視点でアノテーションを付与したかを検索条件とする>>
人が文書を読む場合、ペンなどのポインティングデバイスを利用してアノテーションを付与しながら読解を行なうことは自然なことである。アノテーションが付与された位置は読み手にとって、何らかの興味がある位置であると思われる。
【0225】
また、文書の電子化やネットワークの利用によりアノテーションを共有できるようになってきている。他人や自分が以前に付与したアノテーションを再現することにより他人や自分が付与した興味のある位置を知ることができる。
【0226】
特開平9−62676では、アノテーションを付与した人物ごとに管理し、ある特定の人物を指定することによりその人物が付与したアノテーションを再現することができる。ある特定の人物の興味を知りたい場合はこの方法により解決できる。
【0227】
しかし、特定の人物のアノテーションを再現するよりも、特定の視点で付与されたアノテーションを再現することも有効となる場合がある。
【0228】
たとえば、自分がある視点である文書を読む場合に、既に同一の視点で他者がその文書を読んでおり、アノテーションを付与している場合、その他者のアノテーションを再現することにより、同一の視点で付与されたアノテーションを得ることができる。したがって、興味のある個所にアノテーションがすでに付与されているので、そこに目を通すことにより興味ある情報をすばやく得ることができる。
【0229】
図1の電子会議システム1においては、このような同一の視点を持つと思われるアノテーションを検索し再現する仕組みを提案することができる。
【0230】
具体的には、電子的に表示された文書に対して付与されたアノテーション(アンダーラインやマーキングや文字の書込み等)を共有できる装置において、ある文書の一部に付与されたアノテーションの状態をクエリとして、既に同じ位置に付与されている文書のすべてのアノテーションを検索結果として再現する仕組みを提案することができる。以下、具体的に説明する。
【0231】
基本的なハードウェア構成は、先に述べた本発明の実施形態と同じである。また、文書の読み込み、アノテーション付与、保存の動作も、上記本発明の実施形態と同じである。ただし、図9に示したアノテーションDBの構成例に代えて、図26の構成例を用いて以下の説明を行なう。
【0232】
次にアノテーションの検索を説明する。別のユーザBは自分の端末の文書ビューア102へ文書を読み込む。読み込む手順は上述した通りである。ここでもやはりコピー時の画像移動を行なうための文書として、文書ID2の文書を読み込んだとする。
【0233】
原稿画像を用紙の中心へ移動して、とじしろを付ける操作に注目したとする。このとき、1ページ目について注目すべき単語や文について図27のようにアノテーション40、41を付与する。
【0234】
ユーザBは検索ボタン118を押下することにより、これらのアノテーションをもとに同一視点で付与されたと思われるアノテーションを検索・再現することができる。
【0235】
図28は、検索要求の情報の一例を示す図である。検索ボタン118を押下すると、文書ビューア102は、図28に示すように、文書IDおよび端末IDおよび表示されているページのアノテーションが付与された矩形の矩形番号を検索要求としてアノテーションサーバ212へ送る。ここで文書ビューア102の端末IDは4とする。
【0236】
アノテーションサーバ212は、図28に示される情報を受け取る。アノテーションサーバ212文書ID2に対するアノテーションが存在するかアノテーションDB216を検索する。もし無い場合は文書ID2に対するアノテーションが存在しない旨を文書ビューア102に返す。
【0237】
ここでは図26に示すデータ構造のアノテーションDB216を検索したとする。文書ID2に関するアノテーションは3件(アノテーションID2,4,5)が検索される。
【0238】
図28の検索要求とアノテーションID2,4,5の矩形情報(矩形番号)をそれぞれ順に比較する。比較の方法は以下の通りである。
【0239】
1)検索要求の矩形情報でもっとも小さな矩形番号(MinRectNum)を抽出する。図28の例では、MinRectNum=79となる。
【0240】
2)検索要求の矩形情報でもっとも大きな矩形番号(MaxRectNum)を抽出する。図28の例では、MaxRectNum=142となる。
【0241】
3)それぞれの比較対象のアノテーションIDの矩形情報(矩形番号)に対して、以下を繰り返す。
【0242】
3−1)
MinRectNum≦TargetNum≦MaxRectNumとなるような矩形番号TargetNumを存在するか否か計算する。存在する場合、その範囲の矩形情報が検索対象となる。存在しない場合、次のアノテーションIDについて調べる。たとえば、アノテーションID2の矩形情報を調べると、159−183,231−256となっており、MinRectNum≦TargetNum≦MaxRectNumとなるようなTargetNumは存在しない。アノテーションID4の矩形情報は134−147のうち134−142が含まれるので検索対象となる。アノテーションID5の矩形情報は76−100,133−147のうち79−100、133−142が含まれるので検索対象となる。
【0243】
3−2)
a;MinRectNum、MaxRectNumの範囲で何割の検索要求の矩形が検索対象の矩形情報に含まれるか計算する(アノテーション再現率)。
【0244】
b;MinRectNum、MaxRectNumの範囲で何割の検索対象の矩形情報が検索要求の矩形情報に含まれるか計算する(アノテーション適合率)。
【0245】
c;アノテーション再現率と適合率の平均値を取る。
【0246】
アノテーションID4の場合、検索要求の矩形情報は検索対象の矩形情報に含まれる割合は、 9/26=0.35( 79−94,133−142は134−142中に9個含まれる)。またアノテーションID4の検索対象の矩形情報が検索要求の矩形情報に含まれる割合は、9/9=1 (134−142中に79−94,133−142は9個含まれる)。平均値は(0.35+1)/2=0.675となる。
【0247】
アノテーションID5の場合、検索要求の矩形情報は検索対象の矩形情報に含まれる割合は、 26/26=1(79−94,133−142は79−100、133−142中に18個含まれる)。またアノテーションID4の検索対象の矩形情報が検索要求の矩形情報に含まれる割合は、26/42=0.62 (79−100、133−142中に79−94,133−142は26個含まれる)。平均値は(1+0.62)/2=0.81となる。
【0248】
以上、すべての検索対象アノテーションに対して比較が終了したら、アノテーションサーバ212は最も高いスコアを獲得したアノテーションIDのアノテーション内容(画像情報)を文書ビューア102へ返す。ここでは、アノテーションID5のスコアが0.81と最も高いので、アノテーションサーバ212アノテーションID5の画像情報1,2,3を01へ返す。
【0249】
文書ビューア102は、受け取った画像情報を文書表示エリア104上に再現する。
【0250】
以上がアノテーションの検索手順である。
【0251】
ユーザBは1ページ目に付けたアノテーションをもとに、ユーザAが2ページ目と3ページ目のアノテーションを得ることができる。ユーザBが1ページ目に付けたアノテーションはユーザAが1ページ目に付けたアノテーションと位置が類似しているので、近い視点でアノテーションを付与したとみなせる。
【0252】
したがって、ユーザBはおそらく、ユーザAが2,3ページ目に付与したアノテーションにも付与する可能がある。それをあらかじめ提示することにより、ユーザBの文書理解を促進できるであろう。
【0253】
この例ではユーザBはコピー操作のマニュアルにおいて、原稿を用紙の中心へ移動して、かつ綴じ代を付けてコピーしたいので、1ページ目にその操作に相当する位置にアノテーションを付与した。同じ位置に、既にユーザAがアノテーションを付与しており、かつ2,3ページ目においても、注意点や補足などにアノテーションを付与していれば、ユーザAはそのアノテーションを参照することにより、注目すべき点をすばやく確認できるといった効果がある。
【0254】
この例では、不特定他者のアノテーションを保存・検索できる例であるが、マニュアルの場合、マニュアル執筆者があらかじめ、この部分に興味あるユーザはここにも興味があるはずだとか、ここを注意してみて欲しいといった部分にあらかじめアノテーションを付与し、マニュアルと一緒に提供することによりマニュアルの理解の促進を促すことができる。
【0255】
変形例としては、以下のようなことが考えられる。
【0256】
A.上記の例では、アノテーションの検索に、矩形情報を付与し、同じ矩形を共有する割合でアノテーションの類似性を判断したが、類似性の判定方法はこの方法によらない。
【0257】
B.上記の例では、アノテーションの検索結果のランキングにおいて、単純に同じ矩形を含む数をもとにしているが、より長い範囲に付与されたアノテーションの場合、さらに重み付けを行ってもよい。
【0258】
C.アノテーションに色属性を持たせて、検索時に色の合致も考慮してもよい。
【0259】
D.再現率、適合率優先の重み付け。再現率重視か適合率中しかユーザが指定できるようにする。
【0260】
E.電子ビューアへのログイン機能を待たせることにより、端末IDの代わりにユーザIDも利用可能である。この場合、ユーザIDの合致も考慮できる(ユーザIDによるフィルタリング)。
【0261】
F.クエリとなるアノテーション付与の範囲の指定方法
F−1.上記の例では、検索要求のアノテーションの付与範囲については、アノテーションが付与された最も小さい矩形番号ともっとも大きい矩形番号を範囲とする。
【0262】
F−2.検索ボタンを押下した時点で表示されているページ全体とする。
【0263】
F−3.ユーザが明示的に指定する。ペンなどを利用して範囲を指定する。このとき、範囲を指定するために利用するアノテーションは通常のアノテーションとは異なる仕組みを持つ。たとえばアノテーション属性として、範囲指定属性を持ち、GUI上は他のペンとはインクの色を変える。そのペンで記された、最も小さい矩形番号ともっとも大きい矩形番号を範囲とする。
【0264】
F−4.最新のアノテーション一個の範囲、または、F−1とF−2の組合せなど。
【0265】
<<9.アノテーションの検索と表示の方法および装置;アノテーションを付与した人物属性を検索条件とする>>
人が文書を読む場合、ペンなどのポインティングデバイスを利用してアノテーションを付与しながら読解を行なうことは自然なことである。アノテーションが付与された位置は読み手にとって、何らかの興味がある位置であると思われる。
【0266】
また、文書の電子化やネットワークの利用によりアノテーションを共有できるようになってきている。他人や自分が以前に付与したアノテーションを再現することにより他人や自分が付与した興味のある位置を知ることができる。
【0267】
特開平9−62676では、アノテーションを付与した人物ごとに管理し、ある特定の人物を指定することによりその人物が付与したアノテーションを再現することができる。ある特定の人物の興味を知りたい場合はこの方法により解決できる。
【0268】
どの人物がどのような特性を持つか知っている場合、特定の人物のアノテーションは意味があるが、不特定多数の人物が文書やアノテーションを共有する場合、素性の知らぬ人物のアノテーションはあまり意味が無いと思われる。
【0269】
特定の人物のアノテーションを再現するよりも、特定の属性の人物が付与したアノテーションを再現することが有効となる場合がある。
【0270】
たとえば、製品のプレス発表の記事にたいして、エンジニアが注目している点や営業が注目している点をすばやく知りたい場合がある。
【0271】
エンジニアがアノテーションを付与した位置、営業がアノテーションを付与した位置、企画がアノテーションを付与した位置等を記事上に強調表示などをすることにより、ある特定の属性を持つ人々の注目点をすばやく知ることができる。
【0272】
図1の電子会議システム1においては、特定の属性を持つ人物が付与したアノテーションを検索し再現する仕組みをを提案することができる。
【0273】
具体的には、電子的に表示された文書に対して付与されたアノテーション(アンダーラインやマーキングや文字の書き込み等)を共有できる装置において、ある文書の一部に付与されたアノテーションの状態をクエリとして、既に同じ位置に付与されている文書のすべてのアノテーションを検索結果として再現する仕組みを提案することができる。以下、具体的に説明する。
【0274】
基本的なハードウェア構成は、先に述べた本発明の実施形態と同じである。また、文書の読み込み、アノテーション付与、保存の動作も、上記本発明の実施形態と同じである。
【0275】
図29は、プロファイルサーバ232とプロファイルDB234の構成例を示す図である。図30は、プロファイルDBのデータ構造の一例を示す図である。
【0276】
文書サーバ222は「登録」と「文書読込み」を外部からの指示により受け付ける。プロファイルサーバ232は「登録」または「修正」を外部からの指示により受け付ける。
【0277】
「登録」では所定のフォーマットに記述されたユーザ情報を与える。ユーザ情報はユーザ名、およびさまざまな属性情報からなる。属性情報として年齢、職種、性別、役職、現住所、国籍などがある。「修正」ではユーザ情報を修正するために修正項目を与える。プロファイルDB234は、図30のようになる。ユーザIDは登録されるユーザが新規の場合、新たに割り当てられる。「検索」はある特定の属性を持つユーザIDを検索し返す。
【0278】
次に、具体例を用いて、ユーザプロファイルの登録を説明する。
【0279】
<ユーザプロファイルの登録>
図31は、本事例におけるプロファイルDB234のデータ構造の一例を示す図である。プロファイルは所定のフォーマットに記述されたテキストファイルをプロファイルサーバ232へ与える。プロファイルサーバ232は、与えられたプロファイルをプロファイルDB234へ保存する。このときユーザIDを割り当てる。ここでは図31のように登録されたとする。
【0280】
なお、プロファイルはテキストファイルで与える必要はなく、CGIなどを利用したGUI上からの登録も可能である。
【0281】
次に、文書の登録、読込み、アノテーションの付与、保存までを説明する。
【0282】
<文書の登録>
図32は、本事例における文書DB224のデータ構造の一例を示す図である。登録は、登録したい文書へのURLやディレクトリへのパスで与えることとする。文書サーバ222は、受け取ったパスで示される文書の文書ID、文書名、文書本文を文書DB224へ登録する。それぞれの文書はさまざまな企業が発表した新製品のプレス発表である。
【0283】
<読込み>
あらかじめ文書ビューア102を使用するにあたり、ユーザはその文書ビューア102に対してログイン作業を行なう。ここでは、ユーザ名ユーザAでログインする。文書ビューア102は、ユーザ名とパスワードを受け付けると、ユーザ名とパスワードをプロファイルサーバ232へ送り、認証を行なう。認証に成功した場合、文書ビューア102は使用可能状態となる。
【0284】
文書ビューア102の文書読込みボタン114を押下する。文書ビューア102は文書読込み要求を文書サーバ222へ発信する。
文書サーバ222は文書DB224内の文書名の一覧を作成し文書ビューア102へ返す。ここでは(press1.txt, press2.txt, press3.txt, press4.txt)となる。文書ビューア102は文書名の一覧をリストボックスなどで表示しユーザAへ選択を促す。
【0285】
ユーザAはpress2.txtを選択したものとする。文書ビューア102はpress2.txtが選択されたことを文書サーバ222へ通知する。文書サーバ222はpress2.txtに付与される文書IDと文書本文を文書DB224より検索し、文書ビューア102へ返す。文書ビューア102は受け取った文書本文を文書表示エリア104へ表示する。
【0286】
なお、文書サーバ222に全文検索機能などを設ければ、読込みの対象として検索結果を提示することも可能である。
【0287】
<アノテーション付与>
図33は、本事例における、文書にアノテーションを付与した状態の表示例を示す図である。ユーザAは文書表示エリア104に表示された文書にアノテーションを付与しながら読む。ここではアノテーションデバイス170としてペン型のデバイスを利用する。この場合、紙に書き込むようにアノテーションを付与することができる。
【0288】
このとき、文書表示エリア104は、図33に示されるように、目には見えないが文字を含む矩形に区切られているものとする。文字の無い空白名部分や図表などの部分も前後のフォン他サイズを参考に適当な大きさの矩形に区切られる。それぞれ矩形には連続した矩形番号が左上から横方向に順に付与されている。
【0289】
<保存>
図34は、本事例におけるアノテーションサーバ212へ送る情報の一例を示した図である。図35は、本事例におけるアノテーションDB216の登録例を示した図である。
【0290】
ユーザAは保存ボタン116を押下することによってアノテーションを保存することができる。保存ボタン116を押下すると、文書ビューア102はアノテーションが付与された文書の文書IDおよびユーザIDおよびアノテーションが付与された矩形の矩形番号、アノテーションの画像情報をアノテーションサーバ212へ送る。
【0291】
アノテーションサーバ212へ送る情報は図34のようになる。ここで文書ビューア102の端末IDは1とする。アノテーションサーバ212は、上述の情報を受け取り、アノテーションサーバ212へ格納する。このとき、すでに同一の文書IDと端末IDの組合せがある場合は、そこに上書きをする。
【0292】
ここではなかったものとして新規にアノテーションIDに5を割り当て図35のように登録することとする。アノテーションDBには既に、文書ID2,3,4に対して他のユーザが付与したアノテーションが保存されているものとする(アノテーションID、1,2,3、4)。以上でアノテーションの保存が終了する。次にアノテーションの検索を説明する。
【0293】
図36は、文書ビューア102にログインしたときに表示される画面の一例を示した図である。図37は、再現されたエンジニアの視点によるアノテーションの一例を示す図である。
【0294】
ユーザXが文書ビューア102にログインする。ユーザXは文書ビューア102にpress2.txtを読み検索ボタン118を押下する。すると、図36に示すような人物属性のカテゴリ名とその属性候補が表示されたリストボックスが表示される表示される。
【0295】
ユーザXはエンジニアの視点で付与されたアノテーションを参照したいと思い、属姓名のエンジニアを選択する。その人物属性がアノテーションサーバ212へ送られ、アノテーションサーバ212はその人物属性を持つユーザIDをプロファイルサーバ232へ問い合わせる。
【0296】
プロファイルサーバ232は、エンジニア属性を持つユーザIDとしてユーザID1を検索しアノテーションサーバ212へ返す。
【0297】
アノテーションサーバ212は、ユーザID1かつ文書ID2をもつアノテーションをアノテーションDBより検索する。ここではアノテーションID5が検索される。このアノテーション内容を文書ビューア102に返す。
【0298】
文書ビューア102は、受け取ったアノテーション画像を、たとえば図37に示すように、文書ビューア102上に表示する。
【0299】
このように、ユーザXはエンジニアの視点で付与されたアノテーションを再現することができ、ある特定の属性を持つユーザがどのような点に興味があるかをすばやく読み取れる。
【0300】
次に、同じ属性をもつ複数の人が同一文書にアノテーションを付与していた場合をについて説明する。
【0301】
この場合、アノテーションサーバ212は、検索結果として複数人が付与したアノテーションを文書ビューア102に返す。このとき文書ビューア102は、以下の方法を取ることができる。
1.複数人のアノテーションをそのまま重ねて表示する。
2.検索結果として、矩形情報も返してもらい、その中で複数存在する矩形に含まれる文字を強調表示する。
【0302】
2の方法では、たとえば、図38に示すように、検索結果として複数存在する矩形の数に応じて、その矩形に含まれる文字をより濃く表示している。この例は、企画の人の視点で付与したアノテーションを再現した状態であるとすると、「「ホット茶」を12月9日から新たに」、「希望小売価格」、「 140円 115円」、「人気女優のTTTさんを起用」にアノテーションが付与され、特にこの中の濃い部分は複数人の人々によって注目されていることが分かる。
【0303】
他に強調表示の例として、太さを変えてアンダーラインを引く、文字を大きさをかえて表示するなどがある。
【0304】
変形例としては、以下のようなことが考えられる。
A.検索時に複数のカテゴリの属性を指定できるようにする。たとえば、職種:エンジニア、性別:男、年代:30代などと指定できるようにする。この場合、検索条件としてAND、ORまたはNOTで検索することができるものとする。
B.検索時に、単一カテゴリの中で複数の属性を指定できるようにする。職業:エンジニア、リサーチャーのように指定したできる(この場合OR検索)。
【0305】
この場合、アノテーションの色または強調表示の色を属性に応じて変えることにより、異なる属性を持つ人々の注目している点を比較しながら見ることができる。
【0306】
【発明の効果】
以上のように本発明によれば、アノテーションを介して検索処理を行なうとともに、そのアノテーションを付与したユーザの視点と同様もしくは類似する視点を持つ他ユーザが得るであろう情報までを検索範囲に広げるようにした。
【0307】
これにより、検索対象範囲を、自己の視点や興味の範囲だけでなく、自己と類する他人の視点や興味の範囲まで拡張することができる。この結果、自己の視点だけでは得られない情報であって、自己の視点と類似する他ユーザの視点から得られる情報についても、自己の知識として得ることができる。つまり自己の持っていない知識を他人が持っている知識で補い合うことができ、知識の共有を実現することができる。
【図面の簡単な説明】
【図1】 本発明に係る表示制御方法および情報表示処理システムを適用した電子会議システムの構成例を示す図である。
【図2】 情報表示処理装置の一実施形態である文書ビューアの表示面側に着目した外観図である。
【図3】 文書ビューアとマネジャ部の機能ブロック図である。
【図4】 文書サーバおよび文書DBの構成例を示す図である。
【図5】 アノテーションサーバおよびアノテーションDBの構成例を示す図である。
【図6】 文書DBの具体的な構成例を示す図である。
【図7】 文書にアノテーションを付与した状態の表示例を示す図である。
【図8】 文書ビューアがアノテーションサーバへ送る情報の一例を示した図である。
【図9】 アノテーションDBの構成例を示す図である。
【図10】 アクションログDBの構成例を示す図である。
【図11】 アノテーションDBの他の構成例を示す図である。
【図12】 アノテーション処理に着目した電子会議システム1の構成例を示す図である。
【図13】 アノテーションを用いた検索処理や情報提供処理を利用して、複数ユーザ間で情報の共有を可能とする機能に着目したブロック図である。
【図14】 図13に示した情報提供処理システムにおける他ユーザに関連する情報の提供処理の手順を示す概略図である。
【図15】 情報表示処理システムを、コンピュータにより構成する場合のシステム構成の概略を示した図である。
【図16】 アノテーションの更新の通知に関わる保存処理を説明する図である。
【図17】 アノテーションの更新の通知に関わるアノテーションの更新について説明する図である。
【図18】 プロファイルDBの内容の一例を示す図である。
【図19】 アノテーションの公開制限に関わるアノテーションの保存について説明する図である。
【図20】 アノテーションの公開制限に関わる検索と再現について説明する図である。
【図21】 シートGUIを利用したアクセス制限の処理を説明する図である。
【図22】 「振り返り支援」の機能について説明する図である。
【図23】 「振り返り支援」の機能に関わるアノテーションの検索を説明する図である。
【図24】 アノテーション箇所の抽出処理を説明する図である。
【図25】 活動活性度を視覚化した例を示す図である。
【図26】 アノテーションDBの他の構成例を示す図である。
【図27】 アノテーションが付与された画面例を示す図である。
【図28】 検索要求の情報の一例を示す図である。
【図29】 プロファイルサーバ232とプロファイルDB234の構成例を示す図である。
【図30】 プロファイルDBのデータ構造の一例を示す図である。
【図31】 事例におけるプロファイルDBのデータ構造の一例を示す図である。
【図32】 事例における文書DBのデータ構造の一例を示す図である。
【図33】 事例における、文書にアノテーションを付与した状態の表示例を示す図である。
【図34】 本事例におけるアノテーションサーバへ送る情報の一例を示した図である。
【図35】 本事例におけるアノテーションDBの登録例を示した図である。
【図36】 文書ビューアにログインしたときに表示される画面の一例を示した図である。
【図37】 再現されたエンジニアの視点によるアノテーションの一例を示す図である。
【図38】 複数人が付与したアノテーションに基づく強調表示の一例を示した図である。
【符号の説明】
1…電子会議システム、7…情報共有処理システム、9…ネットワーク、100…クライアントシステム、101…表示処理部、102…文書ビューア、103…液晶表示パネル、104…文書表示エリア、109…筐体、110…操作ボタン、114…文書読込みボタン、116…保存ボタン、118…検索ボタン、120…更新ボタン、122…ページ捲りボタン、122a…前ページ送りボタン、122b…次ページ送りボタン、124…強調表示ボタン、126…ユーザ表示ボタン、130…コントローラ、132…ページ送り指示受付部、140…ページ画像生成部、150…表示輝度制御部、150a…コントラスト制御部、150b…ブライトネス制御部、170…アノテーションデバイス、180…マネジャ部、182…ログファイル格納部、184…強調語/センテンス特定部、186…強調語/センテンス選択手法指示部、188…強調指示制御部、200…サーバシステム、210…アノテーション管理部、212…アノテーションサーバ、214…アクションログDB、216…アノテーションDB、220…文書管理部、222…文書サーバ、224…文書DB、230…プロファイル管理部、232…プロファイルサーバ、234…プロファイルDB、240…情報検索部、242…自然言語処理サーバ、244…自然言語処理DB、500…検索要求指定部、542…登録部、544…検索条件決定部、546…検索部、548…関連情報提示部
[0001]
BACKGROUND OF THE INVENTION
  The present invention uses an information management device such as a database.FeelingsThe present invention relates to an information providing processing system and a program used therefor. More specifically, the present invention relates to a technique for sharing information among a plurality of users.
[0002]
[Prior art]
Conventionally, a client server type system using a database has been used as means for sharing information between organizations and groups. In a client server type system using a database, information is stored in a database server in accordance with a preset database schema, and a client application can query the database using a database access language such as SQL (Structured Query Language). Information is stored by storing information.
[0003]
However, a client-server system using a database has a drawback that it cannot handle information other than information that conforms to a set schema. In addition, the number and location of databases constituting the system are fixed, and it is difficult to add a new database. For this reason, it has been extremely difficult to cope with the situation where the types of information to be handled increase or change.
[0004]
As a method to deal with such problems, information sharing is possible by allowing the same information management device to be both an information provider and an information consumer depending on the situation and the type of information handled. A mechanism to realize this is considered.
[0005]
For example, in consideration of the information content managed by the information management apparatus, a system that constitutes a cluster composed of information management apparatuses having similar information has been proposed. Patent Document 1 proposes a mechanism for realizing information sharing between persons who have similar themes, topics, and interests.
[0006]
[Patent Document 1]
JP-A-10-301905
[0007]
In the method of Patent Document 1, information sharing is realized by synthesizing a global relationship using a local relationship between information management apparatuses. That is, the meaning representing the connection between two information management devices, and further, a pipe management means for managing a set of pipe information having a connection weight, and a request from a user or a request from another information management device The pipe search means for searching for suitable pipe information from the pipe information managed by the pipe management means, and the pipe composition means for synthesizing a plurality of retrieved pipe information to generate new pipe information. .
[0008]
As a result, when there is a request from the user (a request from another information management device), the pipe search unit searches for pipe information that matches the request from the pipe management unit, and selects appropriate pipe information. Communication with various information management devices. Furthermore, pipe synthesizing means synthesizes a plurality of pieces of pipe information as necessary, thereby generating pipe information suitable for the request and enabling communication with a necessary information management apparatus.
[0009]
Pipes are created and updated by monitoring the exchange of information such as an e-mail system and detecting communications to identify people with similar interests. For example, keywords were detected from sending and receiving emails, and the connections between people with common interests were managed as “pipes”, and there was no direct connection by combining multiple pipes. Build a pipe with someone. Based on this, mutual use of the database is made possible, thereby realizing information sharing between persons having similar themes, topics, and interests.
[0010]
[Problems to be solved by the invention]
On the other hand, in terms of sharing information, it is also important to share knowledge (intelligent information), that is, to supplement knowledge that one does not have with knowledge possessed by others.
[0011]
However, the conventional concept of “common information” including the invention of Patent Document 1 focuses exclusively on the sharing of databases as information sources, and information sharing on an individual basis (sharing of knowledge) There is difficulty in that. In other words, the information sharing method disclosed in Patent Document 1 realizes information sharing by mutually providing information among “a plurality of information management apparatuses”. The main focus is on increasing the amount and number of information that can be provided by extending "i)".
[0012]
Therefore, the information sharing technique disclosed in Patent Document 1 cannot solve the information sharing on an individual basis, in other words, the knowledge shared by a plurality of individuals.
[0013]
For example, there is a case where it is information that is known to other people who are interested in the same manner as that of the person and wants to know information that the person does not have. Can not. If you try to access information that you don't have but others have (or will have), you search for what you don't have but what others have, You need access to that information, but in practice it is difficult.
[0014]
  The present invention has been made in view of the above circumstances, and is a person who has the same theme, topic, or interest, and does not have it but has (or will have) another person. Allows easy access toFeelingAn object is to provide an information provision processing system. The present invention also uses a computer toNoteIt aims at providing the program for realizing the system.
[0015]
[Means for Solving the Problems]
BookInformation providing method according to inventionThen, annotations given on the display document are stored (registered in the registration unit) in the storage unit for each document and each user.
[0016]
  When searching for information using annotations, if a search instruction is accepted, the target character string of the user indicated by the annotation given by the user who issued the search instruction and the annotation given by the user who issued the search instructionAnd overlapThe target character string of the other user indicated by the annotation stored (registered in the registration unit) in the storage unit based on the assignment of the other user is compared.
[0017]
And based on this comparison result, the search condition regarding the other user based on the part which the annotation which the other user provided in the displayed document has shown is determined.
[0018]
It also performs a search process for information that matches the search conditions for other users. Then, the search result obtained by the search process is presented.
[0019]
Preferably, a search process for information that matches a search condition related to the instruction user based on the target user's target character string is also executed, and the search result is also presented.
[0023]
  An information provision processing system according to the present invention is a system to which the information provision method according to the present invention is applied., tableAnnotation that can be managed separately from this document is added to the document displayed on the display device.GrantAnnotation giving part and the annotation given by the annotation giving partOf the partAn annotation giving part information obtaining unit for obtaining annotation giving part information, and a registration unit for registering the annotation giving part information obtained by the annotation giving part information obtaining unit for a plurality of users for each document .
[0024]
  In addition, the information provision processing system according to the present invention includes:When a search instruction based on the portion indicated by the annotation in the displayed document is received, the target user's target character string indicated by the annotation given by the instruction user who issued the search instruction and the instruction user gave The target character string of the other user indicated by the annotation registered in the registration unit based on the assignment of another user to the same position as the part indicated by the annotationBy comparing withA search condition determination unit for determining a search condition related to another user based on a portion indicated by an annotation given by another user in the displayed document, andSearch unit that searches for information that matches the search conditions, and search results searched by the search unitOfferShowRyuAnd an indicator.
[0025]
The inventions described in the dependent claims define further advantageous specific examples of the information provision processing system according to the present invention. Furthermore, the program according to the present invention is suitable for realizing the information providing method and the information display processing system according to the present invention by software using an electronic computer (computer). The program may be provided by being stored in a computer-readable storage medium, or may be distributed via wired or wireless communication means.
[0026]
[Action]
In the above configuration, first, for each document, regardless of whether or not there is a search instruction, each time an annotation is given to the document, information on the annotation-given portion to which the annotation is given is managed for each user.
[0027]
  And when an annotation is given,Based onWhen instructed to searchMemory based on the user's target character string indicated by the annotation given by the user who issued the search instruction and the other user's assignment to the same position as the part indicated by the annotation given by the user who issued the search instruction The target character string of the other user indicated by the annotation stored in the part (registered in the registration part)CompareBased on the part indicated by annotations given by other users in the displayed documentRegarding other usersDoDetermine search criteria. Then, search processing is executed based on the determined search condition, and the search result is presented to the user.
[0028]
DETAILED DESCRIPTION OF THE INVENTION
Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings.
[0029]
FIG. 1 is a diagram showing a configuration example of an electronic conference system to which a display control method and an information display processing system according to the present invention are applied.
[0030]
As an example of the electronic conference scene setting in this example, an electronic document-based conference scene such as a development start proposal or an international technical standardization conference is assumed.
[0031]
Electronic documents include, for example, specifications related to predecessor models (models prior to the development target model such as the current model), market trouble reports, technical standard documents of the support department, etc. There are many.
[0032]
In the technical standardization meeting, related documents such as similar technical standards and mailing lists related to the same technology exist in the surrounding area.
[0033]
As the participants in the electronic conference system, for example, a participant who represents the organization that influences the decision or is influenced by the decision, a chairperson, a record clerk, and the like are assumed.
[0034]
In the electronic conference system, for example, a representative person collects proposals and distributes materials in advance. Then, before the meeting, participants and the chair can read the material and add handwritten annotations on the display screen. In addition, during the conference, the organization representative can share the context with the people in the back office using annotations, and can adjust the department opinion in real time while communicating with each other.
[0035]
Here, for example, the following can be considered as a scene involving sharing of handwritten annotations in the conference flow in the electronic conference system.
* Read the distributed materials before the meeting and write annotations.
* Add annotations while listening to explanations.
* In a question-and-answer session, quickly search for a question based on the annotation and ask or answer a question.
* Search past related documents.
* Ask your colleagues questions during the meeting.
* Discussion session.
* A session for confirming the agreement.
* Making minutes.
* Report the meeting to the group members.
* Discover experts through meetings and be aware of diverse perspectives.
[0036]
<System configuration>
Next, the configuration of the electronic conference system shown in FIG. 1 will be described. The electronic conference system 1 includes a client system 100 used by participants of the electronic conference and electronic data used in the electronic conference system 1 (not only document data but all other electronic information necessary for the conference). Including a server system 200 for processing. Each functional element constituting the client system 100 and the server system 200 is connected by a network (communication network) 9 such as a wired or wireless network.
[0037]
The client system 100 is provided for each participant in the conference. In the illustrated example, two sets are illustrated, but the number is not limited to two. A single set may be shared by multiple people.
[0038]
The client system 100 includes a document viewer 102 (102a and 102b in the figure) for displaying an electronic document, and an annotation device 170 (for adding an annotation as an example of additional information to the electronic document displayed on the document viewer 102). 170a and 170b in the figure, and a manager unit 180 (180a and 180b in the figure) for storing a history of screen operations and controlling the document viewer 102. The document viewer 102 and the annotation device 170 constitute an additional information adding unit 106 (106a and 106b in the figure) and an annotation detecting unit (annotation adding part information acquiring unit) 107 (107a and 107b in the figure).
[0039]
The document viewer 102 can be freely mounted on a main body (cradle / docking station) (not shown). As the document viewer 102, for example, a display such as a CRT or liquid crystal (LCD) used for a personal computer or a device imitating paper (for example, a tablet PC) may be used. The document viewer 102 may be configured as a large tablet about the size of a whiteboard.
[0040]
The annotation device 170 is preferably provided with a function capable of handwritten input. For example, an input device such as a device having a pen shape may be used. In the case of a pen-shaped device, both the document viewer 102 and the annotation device 170 have a mechanism for detecting an instruction input so that, for example, an electromagnetic induction type detection mechanism is used so that the display surface can be directly indicated by the device. . Also, a touch panel method may be adopted. Further, the annotation device 170 is not limited to a pen-type device, and an input / instruction device such as a mouse or a keyboard may be used.
[0041]
The manager unit 180 includes a storage unit 182 (182a and 182b in the figure) that stores a document browsing history and an annotation history (log file). In addition, the manager unit 180 is provided with a functional unit that realizes a display method (in this example, an emphasis display function) designated by the reader (see FIG. 3 described later).
[0042]
The server system 200 is an example of an additional information management unit, which includes an annotation management unit 210 that manages log files and annotations, a document management unit 220 that manages electronic documents, a profile management unit 230 that manages personal profiles, and a sentence management unit. It has an information search unit 240 that supports meetings by analyzing and extracting important words.
[0043]
The annotation management unit 210 includes an annotation server 212 that is a server that stores and retrieves annotations attached to a document, an action log DB 214 that is a database (Data Base) that stores log file contents of each client terminal, and an addition An annotation DB 216 is an example of an information storage unit and is a database for storing annotations and attribute information associated therewith.
[0044]
The document management unit 220 includes a document server 222 that is a server for storing and retrieving documents, and a document DB 224 that is a database for storing documents and associated attribute information.
[0045]
Even in the case where additional corrections to the distributed materials are performed independently by providing the document management unit 220 that manages the document body and the annotation management unit 210 that manages additional information such as annotations attached to the electronic document. It is possible to avoid inconsistencies in the contents when combined with the original at the end.
[0046]
For example, when someone adds a supplementary explanation to a part of the original, and someone makes a modification that deletes the same part, the edited part is the document body registered in the document DB 224. Separately, by registering in the annotation DB 216 in association with the document main body, it is possible to manage the information without causing any contradiction in the content of the conference material main body and the retouching correction. In addition, by referring to the annotation DB 216, it is easy to later write out the opinions and discussions that were made on the spot.
[0047]
The profile management unit 230 includes a profile server 232 that is a server that stores and searches personal profiles, and a profile DB 234 that is a database that stores personal profiles.
[0048]
The information search unit 240 is a natural language processing server 242 that is a server that analyzes sentences and extracts important words, and a natural language processing DB 244 that is a database that stores an analysis dictionary, a synonym dictionary, and the like referred to by the natural language processing server 242. And have.
[0049]
The natural language processing DB 244 stores predetermined data in a data structure suitable for the information search method. For example, a word vector dictionary (dictionary is an example of a database) that stores word semantic vectors on a semantic basis, a co-occurrence database that stores co-occurrence relationships between dependency words, or synonym expansion and association expansion. Extended dictionaries (including synonym dictionaries).
[0050]
The information search unit 240 can select and use various search engines by having these various databases (including a dictionary) in the natural language processing DB 244.
[0051]
Each management unit 210, 220, 230, 240 of the illustrated server system 200 may be separate, or may be housed in the same housing in any combination. . For example, each server may be constituted by a common computer, or may use a common hard disk device as each database. The annotation management unit 210, the document management unit 220, and the information search unit 240 are collectively referred to as a document information management unit. As these management units 210, 220, 230, and 240, for example, a workstation may be used.
[0052]
<Appearance of document viewer>
FIG. 2 is an external view focusing on the display surface side of the document viewer 102 which is an embodiment of the information display processing apparatus. As shown in the figure, the document viewer 102 is configured such that a liquid crystal display panel 103 which is an example of a display device and operation buttons 110 including various hardware keys are housed in a casing 109, and a certain amount of information is displayed. It is formed into a single plate having a thickness.
[0053]
The liquid crystal display panel 103 is configured as a backlit panel, and is used as a document display area 104 for displaying a document. On the document display area 104, handwriting input (digital ink) is possible with the annotation device 170. The manager unit 180 incorporates a memo writing utility (hardware and application software) corresponding to the digital ink.
[0054]
As a controller corresponding to digital ink, any controller for recognizing and processing handwritten data as “digital ink (handwritten characters)” can be used. It is not necessary to have a character recognition function. Even in this case, it can be handled as the top-level format of the text, and can be searched with handwritten characters or processed (color change etc.). The digital ink data format may be handled as image data (for example, bitmap data).
[0055]
As described above, the document viewer 102 can input data by using the annotation device 170 in the same manner as adding underline or circle or writing a memo in a desired form when reading a paper document. ing. Further, since it is formed in a single plate having a thickness, it can be easily placed at a position and an angle that are easy to read by, for example, placing on the knee or tilting at the time of writing.
[0056]
The written input information (additional information of the document body) is held in a storage unit (not shown) in the document viewer 102 and is sent to the annotation management unit 210 of the server system 200 at a predetermined time, and the annotation DB 216 corresponds to the document body. Attached and stored. When the document is read later, the annotation entered in the past is read together with the document body and displayed in the document display area 104.
[0057]
Thereby, it is possible to exert an effect of visually assisting the reader's memory regarding the information description place by writing underline, circle, or memo in a desired shape like paper.
[0058]
For example, in the case of a conference using the electronic conference system 1, it can be used to read the distributed material before the conference and write an annotation, or to add an annotation while listening to the explanation.
[0059]
A plurality of hardware keys are prepared as the operation buttons 110. For example, as shown in the figure, a document reading button 114 for reading a document stored in the document DB 224, a save button 116 for saving an annotation drawn in the document display area 104, and an annotation saved in the annotation DB 216 are displayed. A search button 118 for searching and displaying in the document display area 104 and an update button 120 for updating the display are provided.
[0060]
The operation buttons 110 include a page turning button 122 including a previous page turning button 122a and a next page turning button 122b for turning the page back and forth, a highlight button 124 for displaying an important word, and a document viewer 102. Is provided with a user display button 126 for displaying a list of users who have annotated the document that is open.
[0061]
Instead of the hardware key of the operation button 110, a software key for displaying a key button in the document display area 104 may be used.
[0062]
The document viewer 102 displays an image on a liquid crystal display based on data read from an internal storage medium or data acquired from a server system 200 (or a Web server) via a network connection function unit (not shown). It is configured to display on the panel 103.
[0063]
In addition, the document viewer 102 is equipped with a function (turning display function) for switching the display in units of pages while reading the book in a flipping manner. It is configured so that desired information can be quickly searched from a large number of information.
[0064]
That is, when searching for information in the document viewer 102, desired page information can be obtained while performing page turning operation by operating two page turning buttons (page turning buttons 122) such as the previous page turning button 122a and the next page turning button 122b. Can be displayed on the liquid crystal display panel 103. Further, if either one of the previous page feed button 122a and the next page feed button 122b is continuously pressed, page feed can be performed at a high speed. Searching for information is possible.
[0065]
In addition, in the flip display, the image contrast that is the pixel amplitude for driving the liquid crystal element of the liquid crystal display panel 103 and the display brightness (brightness / background luminance) that is the brightness of the entire image are normally displayed in accordance with the page turning operation. It is configured to facilitate the feature extraction of the entire image by making the display image on the display device different from the time, and making the light and dark state of the display device different from the lightness and darkness of the normal state over a predetermined time. Yes.
[0066]
<Document Viewer / Manager>
FIG. 3 is a functional block diagram of the document viewer 102 and the manager unit 180. The document viewer 102 generates a new page image based on a predetermined condition, a liquid crystal display panel 103 that is an example of a display device that displays an image in units of pages, a controller 130 that controls the entire display processing in the document viewer 102, and the like. And a page image generation unit 140. The controller 130 includes a page feed instruction receiving unit 132 that receives a page image switching instruction on the liquid crystal display panel 103 via the operation button 110. The page image generation unit 140 generates a new page image on condition that the page feed instruction reception unit 132 has received a page image switching instruction.
[0067]
In addition, the document viewer 102 switches the image on the liquid crystal display panel 103 and switches the brightness state of the display image according to a predetermined order on the condition that the page feed instruction receiving unit 132 receives the page image switching instruction. Part 150.
[0068]
When the page feed instruction receiving unit 132 receives a page image switching instruction, the page image generating unit 140 generates a new page image in the instructed direction (either forward / backward), and when generation is completed, Is displayed to the display brightness control unit 150.
[0069]
The display luminance control unit 150 includes a contrast control unit 150a that is a functional unit that controls display contrast of a page image on the liquid crystal display panel 103, and a functional unit that controls brightness by controlling the backlight luminance of the liquid crystal display panel 103. And a brightness control unit 150b.
[0070]
The display brightness control unit 150 adjusts the contrast of the page image on the liquid crystal display panel 103 with the contrast control unit 150a, or adjusts the brightness of the page image with the brightness control unit 150b, thereby displaying on the liquid crystal display panel 103. Control brightness. It should be noted that the present invention is not limited to both the contrast and the brightness, and it is sufficient to adjust at least one of the both.
[0071]
When the page turning instruction receiving unit 132 receives a page image switching instruction, the display luminance control unit 150 switches the image on the liquid crystal display panel 103 to a new page image generated by the page image generating unit 140 and also displays the liquid crystal display panel 103. The brightness of the upper display image is different from the brightness in the normal state (the contrast or brightness state set by the user at that time) immediately before receiving a display image switching instruction for a predetermined time. After that, the brightness is set to be approximately equal to the brightness in the normal state. For example, the display brightness is set to be high during turning display, and after the turn display is completed, the display brightness is returned to a state substantially equal to the original display brightness (contrast or brightness state immediately before the page turning operation).
[0072]
When the page image generation unit 140 finishes generating the new page image, the display brightness control unit 150 receives the notification of the generation completion signal S1 from the page image generation unit 140 and converts the image on the liquid crystal display panel 103 to the new page. Switch to an image. Upon receiving the image switching instruction S <b> 2 from the display brightness control unit 150, the page image generation unit 140 sets the generated new page image on the liquid crystal display panel 103.
[0073]
In addition, the display brightness control unit 150 sets the brightness of the display image to a relatively higher brightness than the normal brightness. As a result, the new page image generated by the page image generation unit 140 is displayed higher than the normal luminance. Then, the display luminance control unit 150 gradually returns the higher display luminance to the normal luminance according to the elapsed time after the generation completion signal S1 is input.
[0074]
In this way, when the page is switched, the display brightness is slightly changed from the normal display for a predetermined time, so that the discriminability can be improved even when the display is performed while reading the book like a book.
[0075]
On the other hand, in addition to the log file storage unit 182, the manager unit 180 takes in the target document that the reader wants to read from the document DB 224, and an emphasized word / sentence specifying unit 184 that specifies characters and sentences to be highlighted, and highlighting. An emphasis word / sentence selection method instructing unit 186 for instructing the emphasis word / sentence specifying unit 184 to select a character or sentence to be selected, and an emphasis instruction control unit 188 for controlling the validity / invalidity (on / off) of the emphasis display function. With.
[0076]
The manager 180 first selects an emphasized word / sentence specifying method for realizing the method specified by the reader (in this example, a conference participant) in the emphasized word / sentence selecting method instruction unit 186, and selects the emphasized word / sentence specifying unit. 184 is instructed. The target document to be read by the reader is input to the emphasized word / sentence specifying unit 184. When the highlighting function is on, the highlighted word / sentence specifying unit 184 determines how to display the words (words, sentences, or sentences) to be highlighted, and then the document viewer 102 Image information is sent to the page image generation unit 140 through the controller 130.
[0077]
Note that the highlighting method includes changing the density (contrast / bright), changing the font (type and size), changing the character color, and changing the character background color. Display them, or add underline or solid fill.
[0078]
In the case of displaying with changing the density, the function of the display luminance control unit 150 is used as described above. In this case, the density may be switched in multiple stages according to the certainty value.
[0079]
When the font is changed for display, the character color is changed for display, the character background color is changed for display, or the underline or solid color is added, the emphasized word / sentence specifying unit 184 The document information acquired from the document DB 224 is converted into image data corresponding to the document information and passed to the page image generation unit 140. In these cases, the font may be switched or the character color / background color / underline / solid color may be switched in multiple stages according to the certainty value.
[0080]
If the density, font, or text color / background color / underline / solid color are switched in multiple steps according to the certainty value, the importance of the search results depends on the difference in highlighting after the search results. Can be judged.
[0081]
For example, the emphasized word / sentence specifying unit 184 controls to highlight and display a technical term attached to the natural language processing server 242 or a certainty of proper noun classification. Follow the reader's instructions as to which words in which category to highlight.
[0082]
By doing this, it is possible to highlight only words that seem to match the interest of the current reader, not the importance of general words. Thereby, for example, it is possible to prevent the location information from being highlighted by mistake when the system collects materials related to incidents by companies.
[0083]
Further, the emphasized word / sentence specifying unit 184 controls to highlight a noun word / phrase (which may include proper nouns and technical terms) and its synonyms that appear in the description of the summary of the document such as a summary or a foreword. May be. By making the word included in the summary part an important word, it is possible to highlight the important word or the important sentence with high accuracy and without trouble. For example, a word that expresses the meaning of the sentence well can be displayed darkly. Processing is faster than performing similarity analysis on all sentences in the body and calculating the similarity of each sentence.
[0084]
In addition, since summaries and prefaces are collected by humans, the selection of words to be highlighted is more reliable than when using machine summarization (automatic summarization). In addition, not only words that appear in summaries, but also synonyms are highlighted so that they express what the author wants to convey through the document, not as an important word for comparison with other documents. You will be able to accurately identify and read the words that will be. As a result, the contents can be understood quickly.
[0085]
Further, the emphasized word / sentence specifying unit 184 may specify a phrase to be highlighted using a semantic distance from the summary. For the calculation of the semantic distance from the summary, for example, a method of measuring the similarity of sentences by using a vector space method (see, for example, JP-A-11-110395 and JP-A-2000-331027), a case particle It is preferable to use a method of measuring the degree of similarity by comparing the used case structures, expressing the result of dependency analysis or semantic analysis in a graph or tree structure, and measuring the degree of similarity by comparing them.
[0086]
This makes it possible to clarify points that should be noted in the text, and to quickly understand the contents. Also, unlike the machine summary, the text itself can be referred to, so there is no misinterpretation.
[0087]
In addition, the effect is enhanced when the “reading function” is provided. For example, when scanning a paper document, the reader gets a general impression of a page or document that is likely to contain important content while browsing through interesting words and phrases that characterize the document. Doing things. Even in the document viewer 102, by providing the “flow-reading mode”, it is possible to display an important phrase that seems to express the meaning of the sentence well. By following the darkly displayed keywords, the contents of the document can be understood in a short time. In addition, the reader can also infer that the periphery of the darkly displayed phrase is an important part. If you want to understand the contents deeper, you can read it.
[0088]
In addition, it is possible to display a document linked to automatic generation of a document list using the annotation function. For example, a search is performed on a document held in the server system 200 by using, as a keyword, a phrase with an underline or a circle written by a reader in a document. Documents with frequent keywords are listed as references. The reader can refer to the document title, the sentence (clip) where the keyword appears frequently, and the page number. When displaying a specified reference, for example, change the font type or size, underline, color, or use dark characters for the keywords in the clip (states that indicate the terms that match the search criteria) Emphasize display. By doing so, it becomes possible to quickly understand the contents of the reference document.
[0089]
Note that details of each process of the emphasized word / sentence specifying unit 184, the emphasized word / sentence selection method instruction unit 186, and the emphasis instruction control unit 188, particularly the process for obtaining the certainty factor, are described in Japanese Patent Application No. 2002-2003. Reference may be made to 314876.
[0090]
<Document server / Document database>
FIG. 4 is a diagram illustrating a configuration example of the document server 222 and the document DB 224. The document server 222 accepts “registration” and “document reading” according to external instructions. For example, when the client system 100 detects that the document reading button 114 of the document viewer 102 has been operated, the client system 100 notifies the document server 222 of the document management unit 220 configuring the server system 200 to that effect. As a result, the document server 222 reads the document instructed from the document DB 224.
[0091]
“Registration” is to be registered indicating an address indicating the storage location of the document in the document DB 224, for example, “http://datacenter.company.co.jp/access.cgi?DocumentID=8gjk3cl3”. It is given by a path such as URL (Uniform Resource Locators) to a document or a path to a directory.
[0092]
The document server 222 sequentially assigns document IDs to the document (group) indicated by the given path, and registers the document name and document text in the document DB 224. At this time, the data structure in the document DB 224 is, for example, as shown in FIG. The document name or the document text may be a path to a document such as a URL.
[0093]
The document server 222 accepts a “document read” instruction from the document viewer 102. When the document server 222 accepts an instruction “read document”, it creates a list of document names in the document DB 224 and returns it to the document viewer 102. In addition, the document server 222 receives the document name from the document viewer 102 and sends back the corresponding document text to the document viewer 102.
[0094]
<Annotation server / Annotation database>
FIG. 5 is a diagram illustrating a configuration example of the annotation server 212 and the annotation DB 216.
[0095]
The annotation server 212 accepts “save” and “search” according to instructions from the outside. For example, when the client system 100 detects that the save button 116 of the document viewer 102 has been operated, the client system 100 notifies the annotation server 212 of the annotation management unit 210 constituting the server system 200 to that effect. As a result, the annotation server 212 associates the annotation information instructed to save (an example of information representing the characteristics of the additional information) with the document to which the annotation has been added, and stores it in the annotation DB 216 that is an example of the storage unit. Register (store).
[0096]
For example, the annotation server 212 receives a “save” instruction from the document viewer 102. At this time, the annotation contents to be saved, the rectangle information and color and shape of the annotation, the document ID to which the annotation is given, and the terminal ID of the document viewer 102 that issued the “save” instruction are given. At this time, similarly, the user name of the conference participant (client) who instructed “save”, the group ID to which the participant belongs, the public attribute related to the annotation instructed to save, and the time when the annotation was given Given.
[0097]
The annotation server 212 uses the given terminal ID, document ID, rectangular information (details will be described later), annotation content, color, shape, user ID (or user name), group ID, public attribute, and time as table data. Saved in the annotation DB 216. At this time, the data structure in the annotation DB 216 is, for example, as shown in FIG. The annotation ID is newly given when the combination of the document ID and the user ID is new. If it is not new, the line indicated by the annotation ID is overwritten.
[0098]
The annotation content is data for reproducing the drawn annotation, and is data such as bitmap or vector data. The color and shape are the color and shape of the annotation. The user ID (or user name) is information indicating the user who is operating the document viewer 102, and the group ID is the ID of the group to which the user belongs.
[0099]
The public attribute is, for example, any one of publicly available (no restriction) (= Pub), public only within a certain group (= Frd), and annotation private (for personal use) (= Prv). Shall be taken. When the information is disclosed only within a certain group (Frd), information on the group to be disclosed (for example, group ID) is also registered in the annotation DB 216.
[0100]
The time is the time when the annotation is given in the document viewer 102, and consists of a date and a time.
[0101]
When the client system 100 detects that the search button 118 of the document viewer 102 has been operated, the client system 100 notifies the annotation server 212 of the annotation management unit 210 constituting the server system 200 to that effect. Thereby, the annotation server 212 reads the annotation information instructed to be searched from the annotation DB 216.
[0102]
For example, the annotation server 212 receives a “search” instruction from the document viewer 102. At this time, the annotation server 212 receives information regarding the document ID, the rectangle information, and the annotation assignment range from the client system 100 (document viewer 102). The annotation server 212 searches the annotation DB 216 based on these pieces of information (search conditions), and returns appropriate annotation content to the document viewer 102. This search process will be described later.
[0103]
<Annotation processing>
Next, processing related to annotation assignment will be described using a specific example. First, registration, reading, annotation assignment, and storage of a document will be described.
[0104]
<Document registration process>
FIG. 6 is a diagram illustrating a configuration example of the document DB 224 in a specific example described below. Each document in this example is a manual regarding the operation of the copier.
[0105]
As described above, registration of a document is given by a URL to a document to be registered or a path to a directory. The document server 222 registers the document ID, document name, and document text of the document indicated by the received path as the document registration contents in the document DB 224 as shown in FIG.
[0106]
<Document reading process>
A participant who wishes to read a document presses the document reading button 114 of the document viewer 102. Upon receiving this instruction, the document viewer 102 sends a document reading request to the document server 222.
[0107]
Upon receiving this notification, the document server 222 creates a list of document names in the document DB 224 and returns it to the document viewer 102. Here, it is “manual1.txt, manual2.txt, manual3.txt, manual4.txt”. The document viewer 102 displays a list of document names in a list box or the like, and prompts the user A (user ID is user1) to select.
[0108]
It is assumed that the user A selects “manual2.txt”. The document viewer 102 notifies the document server 222 that “manual2.txt” has been selected. The document server 222 searches the document DB 224 for the document ID and the document text assigned to “manual2.txt” and returns them to the document viewer 102. The document viewer 102 displays the received document text in the document display area 104. If the document server 222 is provided with a full-text search function or the like, it is possible to present a search result as a reading target.
[0109]
<Annotation process>
FIG. 7 is a diagram illustrating a display example in a state where annotations are added to the document displayed in the document display area 104 of the document viewer 102. The reader (user A) reads the document while giving a mark (annotation) such as an underline or a circle to the document displayed in the document display area 104 according to interest. Here, a pen-type device is used as the annotation device 170. In this case, an annotation can be given to write on paper.
[0110]
At this time, it is assumed that the document display area 104 is divided into rectangles that include characters that are not actually visible as shown in FIG. A blank name part without a character or a part such as a chart is also divided into rectangles of an appropriate size. For example, it may be divided into rectangles of an appropriate size with reference to the font size of the characters before and after. Information for specifying each rectangle is given to each rectangle. For example, consecutive rectangular numbers are assigned sequentially from the upper left to the horizontal direction.
[0111]
For example, in a meeting for proofreading a manual of a copier, the user A gives the annotation a1 shown in FIG. To do. Further, it is assumed that the annotation b1 is given by paying attention to the operation for performing the binding margin. After that, it is assumed that the second page and the third page are read and annotations are given over three pages as shown in FIG. 7B for points to be noted while actually performing the operation.
[0112]
<Save process>
FIG. 8 is a diagram showing an example of information sent from the document viewer 102 to the annotation server 212 in this case. FIG. 9 is a diagram illustrating a configuration example of the annotation DB 216 in the present case. FIG. 10 is a diagram illustrating a configuration example of the action log DB 214 in this example.
[0113]
User A (user ID is user1) performs personal authentication by using the user ID given in advance and inquiring to the profile server 232 when using this system. If it matches, the system can be used. Thereafter, the user A can instruct to save the annotation by pressing the save button 116 of the document viewer 102.
[0114]
When the document viewer 102 receives this save instruction, the document ID, terminal ID, rectangle number of the rectangle with the annotation, annotation content, line type, user ID, public attribute, and time are displayed. It is sent to the annotation server 212. Information to be sent to the annotation server 212 is as shown in FIG. Here, it is assumed that the terminal ID of the document viewer 102 is “1”.
[0115]
The annotation server 212 receives the information shown in FIG. 8 and stores it in the annotation DB 216. At this time, if there is already a combination of the same document ID and user ID, the received information is overwritten there. Further, the annotation server 212 sends the user ID to the profile server 232, receives the group ID (143 in this example) to which the user belongs from the profile server 232, and registers this group ID in the annotation DB 216 as well.
[0116]
In this example, as shown in FIG. 9, the annotation DB 216 has already stored six annotations assigned to the document IDs 2, 3, 4 and 5 at a predetermined terminal (annotation ID; 1, 2). 3, 4, 5, 6). Here, since there is no registration of the same document ID and terminal ID combination as the information shown in FIG. 8 sent from the document viewer 102 in the annotation DB 216, the annotation server 212 newly sets “7” as the annotation ID. Assign and register as shown in the lower part of FIG.
[0117]
When the document viewer 102 receives a save instruction from the user A (user ID is user1), the document viewer 102 also sends the contents of the log file stored in the log file storage unit 182 to the annotation server 212. The annotation server 212 stores the log file received from the document viewer 102 in the action log DB 214 as shown in FIG. The action log DB 214 also records the time when the page of the document being viewed is changed (PAGE_OPEN) and the time when the document is opened (DOC_OPEN). Also, the time (ANT_SAVE) when the annotation was saved is recorded.
[0118]
This completes the storage of the operation history regarding annotations, documents, and pages in a predetermined database.
[0119]
FIG. 11 is a diagram illustrating another configuration example of the annotation DB 216 in the present case. In the case of this configuration example, annotations are grouped into one annotation by a certain group in advance. For example, it is assumed that annotations written within a certain time are collected into one vector data. Here, the “vector data” is data collected in the order of time when a plurality of coordinate points having a certain color and thickness are written.
[0120]
<< Information search using annotations >>
Next, by annotating the document displayed in the document display area 104 of the document viewer 102 and using the information indicated by the annotation, sharing of personal information held by each individual user using the system, that is, personal A method for realizing information sharing (knowledge sharing) on a base basis will be specifically described.
[0121]
FIG. 12 is a diagram illustrating a configuration example of the electronic conference system 1 focusing on annotation processing. The basic framework is no different from the overall configuration shown in FIG. A plurality of users can add annotations to the same document.
[0122]
In the system configuration of the present embodiment, an annotation processing device 218 that is a dedicated device that manages a mechanism for executing annotation processing for realizing information sharing (knowledge sharing) on an individual basis is provided.
[0123]
Note that the annotation server 212 and the document server 222 may be responsible for the function of the annotation processing device 218. In this case, as indicated by a dotted line in the figure, the annotation server 212 and the document server 222 exchange annotation information related to annotation processing directly (or via the network 9).
[0124]
A document viewer (participant in a meeting in this example) uses an annotation device 170 to characterize an interesting phrase or document while reading the document displayed in the document display area 104 of the document viewer 102. Write underline and circle marks (annotations) in words. Or you may attach a note.
[0125]
Information related to the additional information for the document body that has been input by handwriting (digital ink) is transmitted to the server system 200 via the network 9 when the save button is pressed (see FIG. 8). The document body is managed by the document management unit 220 (see FIG. 6). Additional information such as annotations corresponding to the document body is managed (saved) in association with the document body in the annotation DB 216 of the annotation management unit 210 (see FIGS. 9 and 11). When a search is instructed by the reader as necessary, additional information (for example, annotation) that matches the attribute of the additional information specified by the reader is searched (searched) using the annotation management unit 210.
[0126]
Further, it is possible to extract a target character string that is character information written in the vicinity of the annotation, for example, a phrase indicated by the annotation. Also, using this target character string as a query, the document server 222 can search the document DB 224 for documents that match the query, and return the list to the document viewer 102. At this time, the document server 222 adds, as a link, information on the storage destination (URL) of the document body listed as a search list.
[0127]
The user refers to the list (search result) displayed on the document viewer 102 and, if necessary, clicks on a document linked to the list. In response to this, the document server 222 reads the instructed document body from the document DB 224 and presents it to the document viewer 102.
[0128]
With such a search mechanism, it is possible to search past related documents or to find an expert through a meeting, for example, while proceedings are in progress. As a result, it is possible to acquire information that is necessary and that the user has not known before.
[0129]
Here, in the present embodiment, when obtaining a search result, the search result is not limited to information related to the search condition itself specified by the user, and can be acquired by a search condition specified by another user similar to the search condition specified by the user. A mechanism for automatically presenting information to the user is also provided.
[0130]
In other words, although it is a search condition of almost the same viewpoint, paying attention to the viewpoint difference (a little different point) due to the individuality of each individual, the information that can be acquired by other people with similar interests is also sent to the user who instructed the search. It comes to present. This point will be described in detail below.
[0131]
First, the annotation information includes a person (user) who gave it and a position (annotation position) in the given document. By designating one or more annotation positions, it is possible to search for all users who have given annotations in the vicinity and other annotations given by those users.
[0132]
Here, the annotation search target may be within the same document or another document. That is, a search is performed in the order of “document part → user who has given annotation to that part → annotation position (set) assigned by the user → target character string (set)”.
[0133]
The information provision processing system 7 manages a target character string of an annotation given by a certain user, a target character string of a certain annotation, a set of target character strings of all annotations in a document to which the annotation is given, and the user Search the set of target character strings of the assigned annotation. The annotation processing device 218 functions as a central processing unit that realizes such processing.
[0134]
FIG. 13 is a block diagram focusing on a function that enables information sharing among a plurality of users by using search processing and information providing processing using annotations in the electronic conference system 1 shown in FIG. Here, FIG. 13A shows an outline of the overall configuration, and FIG. 13B shows details of functional elements specialized for information providing processing.
[0135]
As shown in FIG. 13A, the information sharing processing system 7 having this function includes a search request designating unit 500 for receiving a search instruction from a reader, a document requested to be searched, and other related information as annotations. An annotation processing device 218 that searches whether it has been registered in the annotation DB 216 of the management unit 210, the document DB 224 of the document management unit 220, or the annotation processing device 218, and sends the search result to the display side if there is a corresponding product; The display processing unit 101 displays the search result sent from the annotation processing device 218. The display processing unit 101 is composed of portions related to display processing in the document viewer 102 and the manager unit 180.
[0136]
An example of the configuration of the annotation processing device 218 is shown in FIG. This block diagram specifically shows a function that enables information sharing among a plurality of users by using search processing and information providing processing using annotations.
[0137]
As illustrated, the annotation processing device 218 includes, for each document, a registration unit 542 that registers the annotation addition information acquired by the annotation detection unit 107 for a plurality of users, and the annotation addition information acquired by the annotation detection unit 107. By comparing the annotation-added partial information for a plurality of users registered in advance in the registration unit 542, the search condition for the related information related to the information of the part in which the annotation is added and related to other users is determined. A search condition determination unit 544 that performs search, a search unit 546 that searches for information that matches the search condition determined by the search condition determination unit 544, and a related information presentation unit that presents the search results searched by the search unit 546 as related information 548.
[0138]
The search unit 546 directly relates to the information of the part to which the annotation is given by another user who has annotated the position of the text (target character string) of the part to which the annotation of the instructing user is given. Search for information (not directly related to the instructing user).
[0139]
For example, a document that is directly related to the information of the part to which the annotation is given by another user who has annotated the annotation position almost the same as the annotation position given by the instructing user (not directly related to the instructing user) Search for information. In addition, information relating to a user who has the same or similar viewpoint or interest as the instructing user is searched. At this time, information registered in the registration unit 542 is referred to.
[0140]
In addition, information on the viewpoint or interest of another user who has annotated the position substantially the same as the annotation position given by the instructing user is searched. Also in this case, the information registered in is referred to. At this time, the difference between the target character string indicated by the annotation given by the user who instructed the retrieval of the related information and the target character string indicated by the annotation by the other user at substantially the same position is the information on the viewpoint or interest of the other user. To do. At this time, the search unit 546 instructs the annotation management unit 210 to search for another user's annotation.
[0141]
It should be noted that even if the document management unit 220 is instructed to search for document information or annotation that is directly related to information of an annotation-attached portion of the document (for example, reference information embedded in text or an image). Good.
[0142]
FIG. 14 is a schematic diagram illustrating a procedure of annotation processing (particularly, information provision processing related to other users) in the information provision processing system 7 illustrated in FIG. The following describes operations and functions for understanding the closeness of interest and differences in viewpoints through annotations (acts, themselves, and target character strings), taking the act of giving annotations as expressing their own interests or viewpoints. To do.
[0143]
Step S100;
While reading the document displayed in the document display area 104 of the document viewer 102, the user uses the annotation device 170 to add an annotation to an interesting phrase or a phrase characterizing the document. The document viewer 102 detects the position and attribute of the annotation attached to the document, and sends the detected position and attribute information of the annotation to the annotation management unit 210. The annotation management unit 210 registers the annotation position and attribute information in the annotation DB 216 via the annotation server 212 as shown in FIG. At this time, the document viewer 102 sends the document ID displayed on the document viewer 102 as an attribute. The annotation server 212 passes the document ID and annotation position information received from the document viewer 102 to the annotation processing device 218.
[0144]
Step S102;
In response to this, the annotation processing device 218 searches the annotation position in the same document for all other users who have added annotations to a certain annotation position based on the registration information in the annotation DB 216, and their target character strings. Get the set of That is, the annotation processing device 218 accepts such processing from a plurality of users and constructs a database. For example, the annotation processing device 218 creates a list including the following elements (hereinafter also referred to as a related user list).
a) List of users who have annotated even the same position in the same document
b) A list of annotation positions (rectangular positions that specify the part to which the annotation is attached) (for all the above users)
c) List of target character strings (for all users above)
[0145]
Next, when the annotation processing apparatus 218 receives a search instruction together with annotation information from a certain user, the annotation processing apparatus 218 sends information on the target character string to the document management unit 220. The document server 222 of the document management unit 220 uses the target character string as a query, searches the document DB 224 for a document that matches the query, and passes the search list via the annotation processing device 218 and the annotation processing device 218. Return to document viewer 102. At this time, the document server 222 adds, as a link, information on the storage destination (URL) of the document body listed as a search list.
[0146]
When the annotation processing device 218 receives the search instruction, the annotation processing device 218 executes the related user list creation described above, and compares the target character string indicated by the annotation with the registered annotation information. Users who are interested in it can be estimated by comparing the target character strings. Moreover, the viewpoint of another user can be obtained by calculating the difference between the target character strings.
[0147]
Here, for comparison of target character strings, for example, keywords (for example, proper nouns) are extracted from the target character strings, similarity is calculated by similarity calculation by comparing keyword vectors, and is similar to a certain threshold. Determine whether or not. As a method of calculating the similarity, for example, a TF (Term Frequency) method, an IDF (Inverted Document Frequency) method, or a TF / IDF method in which the TF method and the IDF method are combined may be used.
[0148]
Next, the annotation processing device 218 passes information on the difference between the target character strings to the document server 222 (S110). In response to this, the document server 222 searches for a document related to the difference between the target character strings in the document DB 224 (referred to as related document search). The related document search method may be any method, but a known full-text search engine such as “Namazu” may be used.
[0149]
The document server 222 passes the search result information to the annotation processing device 218 (S120). The annotation processing device 218 returns at least one of the following information to the document viewer 102 based on the search result of the related information and the related user list (S130).
a) List of users who are interested
b) Other user's viewpoint (difference of target character string)
c) Related Document Information (Related Document Search List)
[0150]
At this time, the annotation processing device 218 (which may be the document server 222) adds information on the storage destination (URL) of the document body listed as a related document search list as a link.
[0151]
As described above, according to the method of the above embodiment, when a user gives an annotation to a character string that the user wants to search and issues a search instruction, only the target character string with the annotation is searched for as a query. Instead, the search result including the viewpoints of other users who have added annotations at the same positions as the target character string and information related to other users with similar search viewpoints are presented to the users.
[0152]
As a result, the following effects can be obtained.
(1) By comparing sets of target character strings obtained from each user's annotation, it is possible to estimate the closeness of interest in the document and present a list of users with close interest.
(2) The difference between the target character string obtained from the annotation of another user and that of the user can be obtained, and the viewpoint of the other user can be obtained. The closeness of interest and the difference between the target character strings can be presented to the user as another interpretation of the document based on the user name of close interest or the user's viewpoint.
(3) The difference between the target character strings can be used to search for another document having a similar content.
(4) Furthermore, it is possible to search for another user who has given the annotation from the annotation given to the document obtained as a result of the search. As a result, it becomes easy to handle a plurality of documents interactively and exhaustively.
[0153]
In other words, a search target character string based on a theme, topic, or interest from the viewpoint of a certain user is used as a trigger to have not only document information directly related to the target character string but also a viewpoint similar to that user's viewpoint. Document information directly related to the target character string by the user (not directly to the original user) can be acquired.
[0154]
In other words, the search range can be expanded to information that other users who have a viewpoint similar to or similar to the viewpoint of a certain user can obtain. Even if there is a difference in individuality, the information search range can be expanded to a range that is slightly different from your own point of view and interest, taking into account information from other people with similar viewpoints and interests. This is done among a plurality of users, and as a result, the information that each (or will have) can be shared with each other, and the information can be shared among a plurality of users. Sharing can be realized.
[0155]
As a result, information that cannot be obtained only from its own viewpoint and that is obtained from the viewpoint of another user similar to its own viewpoint can also be obtained as its own knowledge. That is, knowledge that oneself does not have can be supplemented with knowledge possessed by another person, and sharing of knowledge (intellectual information) can be realized.
[0156]
Further, not only the search result but also information related to other users having a viewpoint similar to or similar to the viewpoint of a certain user can be notified, so that it is possible to know the closeness of interest between the self and others and the difference in viewpoint.
[0157]
For example, suppose you are just starting to see a document and annotating a location that you are reading. Further, at this time, it is assumed that another person has already added an annotation at a place similar to the annotation position (first giving point) attached by himself / herself. In this case, it is assumed that the other person has already read the document and has added many annotations after the first grant point.
[0158]
In such a case, in the configuration of the above embodiment, the information related to the other user who has annotated at the same position as the annotation position (first grant point) that he / she attached is triggered by the annotation given by himself / herself. Will be notified. At this time, it is possible to know the information of the annotation attached to the document by another person. For example, by displaying an annotation attached by another person, it is possible to read speedily by reading only a portion that has been pre-read and marked by another person, and it is also possible to quickly understand the contents of the document.
[0159]
As described above, in the configuration of the above-described embodiment, information related to other users is automatically notified only by adding an annotation to a site desired to be searched. Therefore, such information can be easily accessed.
[0160]
The series of processes for realizing knowledge sharing using the annotations described above can be executed by hardware, but can also be executed by software. When a series of processing is executed by software, the programs that make up the software can be used for various functions by installing a computer (such as an embedded microcomputer) built into dedicated hardware or installing various programs. It is installed from a recording medium in a general-purpose personal computer that can be executed.
[0161]
The recording medium is distributed to provide a program to the user separately from the computer, and includes a magnetic disk (including a flexible disk) on which the program is recorded, an optical disk (CD-ROM (Compact Disc-Read Only Memory)). , DVD (Digital Versatile Disc)), magneto-optical disc (MD (Mini Disc)), or a package medium consisting of a semiconductor memory, etc. It may be provided, or may be constituted by a ROM, a hard disk or the like in which a program is recorded. Or the program which comprises software may be provided via a communication network.
[0162]
FIG. 15 is a diagram showing an outline of a system configuration when the above-described information display processing system 7 is configured by a computer. The basic configuration of such a computer system includes four layers: a hardware layer 910, an OS (Operating Systems) layer 920, a document information management layer 930, and a user interface layer 940. Each layer maintains independence, and it is easy to expand the function of each layer or replace it with another one.
[0163]
The hardware layer 910 corresponds to the system configuration shown in FIG. 1. For example, the tablet 911 corresponding to the document viewer 102, the pen input device 912 corresponding to the annotation device 170, the button 913 corresponding to the operation button 110, And a communication network 914 corresponding to the network 9. Note that other mechanisms such as a voice input / output interface 915 may be provided.
[0164]
The document information management layer 930 corresponds to the document management unit 220 and is a document layer 932 that is responsible for managing the document body, and corresponds to the annotation management unit 210 and is a workspace that is responsible for management of additional information added to the document body such as annotations. 934 and an information search layer 936 that corresponds to the information search unit 240 and performs information search using annotations or the like.
[0165]
The user interface layer 940 corresponds to the document viewer 102 and the annotation device 170, manages the user input management layer 942, manages the input from the user, the screen layer 944 related to information display in the document display area 104, and the manager unit 180. The screen manager 946 manages the display operation of the display area 104.
[0166]
The functional part of “note by handwriting” in the user input management layer 942 is a functional part that accepts handwritten input by the annotation device 170, and the accepted result is “annotation database” (in the workspace 934 of the document information management layer 930). Corresponding to the annotation DB 216). The work space 944a of the screen layer 944 corresponds to a work screen such as a designation screen for inputting necessary information. On the screen manager 946, in addition to the function portions (946a to 946c) for switching the display mode, highlighting corresponding to the emphasis word / sentence selection method instruction portion 186, which is the function portion in the manager portion 180 shown in FIG. It has a management layer 946d.
[0167]
In such a system configuration, for example, a storage medium recording software program codes for realizing the functions of the above-described embodiments is supplied to the system, and the computer (or CPU or MPU) of the system is stored in the storage medium. By reading and executing the program code, the effects described in the above embodiments are achieved. In this case, the program code itself read from the storage medium realizes the functions of the above-described embodiment. In addition, by executing the program code read by the computer, not only the functions of the above-described embodiments are realized, but also the operating system OS running on the computer based on the instruction of the program code is actually It may be a case where part or all of the processing is performed and the functions of the above-described embodiments are realized by the processing.
[0168]
Further, after the program code read from the storage medium is written in a memory provided in a function expansion card inserted into the computer or a function expansion unit connected to the computer, the function expansion card is based on the instruction of the program code. The CPU of the function expansion unit may perform part or all of the actual processing, and the functions of the above-described embodiments may be realized by the processing.
[0169]
The program is provided as a file describing the program code that realizes the processing described in the above embodiment. In this case, the program is not limited to being provided as a batch program file, but depending on the hardware configuration of the system. May be provided as individual program modules.
[0170]
For example, in the system configuration shown in FIG. 1, since the client system 100 and the server system 200 are connected via the network 9, a display processing program (for example, for highlighting function reflecting page turning or search results) Is provided as a module for a client system to a device on the client system 100 side. On the other hand, processing programs related to annotation management and search, or document management and phrase search are provided as a server system module to an apparatus on the server system 200 side. Further, the server system module is further provided as a batch file or a sub-module file according to the configuration of each management unit constituting the server system 200.
[0171]
Although the client system 100 and the server system 200 are connected via the network 9, they may be arranged in close proximity. In this case, the manager unit 180 of the client system 100 may be integrated with the server system 200 (all or a part thereof).
[0172]
In the above description, the document viewer 102 is described as a separate body from the main body (cradle / docking station) that houses the manager unit 180. However, the functional part in the manager unit 180 described in the above embodiment is a document. It may be integrated with the viewer 102.
[0173]
As mentioned above, although this invention was demonstrated using embodiment, the technical scope of this invention is not limited to the range as described in the said embodiment. Various changes or improvements can be added to the above-described embodiment without departing from the gist of the invention, and embodiments to which such changes or improvements are added are also included in the technical scope of the present invention.
[0174]
Further, the above embodiments do not limit the invention according to the claims (claims), and all combinations of features described in the embodiments are not necessarily essential to the solution means of the invention. Absent. The embodiments described above include inventions at various stages, and various inventions can be extracted by appropriately combining a plurality of disclosed constituent elements. Even if some constituent requirements are deleted from all the constituent requirements shown in the embodiment, as long as an effect is obtained, a configuration from which these some constituent requirements are deleted can be extracted as an invention.
[0175]
** Other functions of electronic conference system 1 **
Next, although not within the scope of the present invention, other characteristic functions that can be realized by the configuration of the electronic conference system 1 shown in FIG. 1 will be described.
[0176]
<< 1. Annotation update notification >>
In Japanese Patent Laid-Open No. 9-62676, the person who has given the annotation or the date and time at which the annotation was given is managed. A technique that can reproduce annotations is disclosed.
[0177]
However, according to the technique described in the publication, for example, in the case of a meeting or the like, when a plurality of people write annotations to the same document at the same time and share annotations, the user must always perform annotation reading and reproduction procedures.
[0178]
On the other hand, in the electronic conference system 1 shown in FIG. 1, when an annotation is given, a mechanism for notifying the user referring to the document to that effect can be taken. This point will be described below.
[0179]
Refer to FIG. 1 for the entire configuration, and refer to FIG. 11 for an example of the content of the annotation data.
[0180]
FIG. 16 is a diagram for explaining a storage process related to an annotation update notification. The user gives an annotation on the document viewer 102 and selects save. The document viewer 102 sends an annotation including a user ID, a document ID, and annotation contents to the annotation management unit 210 that manages the storage.
[0181]
An annotation server (storage unit) 212 of the annotation management unit 210 stores the received user ID, document ID, and annotation content in the annotation DB 216.
[0182]
The annotation server 212 sends the changed document ID, user ID (user name), and added annotation ID to the notification means of all the document viewers 102 in which the current session exists.
[0183]
The notifying means compares the sent document ID with the document ID displayed on the document viewer 102, and if they are the same, notifies the user that the annotation has been updated with the sent user name.
[0184]
FIG. 17 is a diagram for explaining the annotation update related to the notification of the annotation update. When an annotation is notified by the notification means, the user can update the annotation by pressing an “update” button. The update unit passes the updated annotation ID to the update search unit. The update search means (annotation server 212) searches the annotation DB 216 using the annotation ID as a key, and passes the annotation content to the display means (document viewer 102). The display means displays the annotation content on the document viewer 102.
[0185]
<< 2. Annotation release restriction >>
Annotations also have personal content and may not be public. Japanese Patent Application Laid-Open No. 11-120191 proposes a technique for searching a document by giving a public attribute to an annotation and performing a search using the public attribute as a key.
[0186]
However, this method is a method of searching for a document including an annotation having a certain public attribute, and does not reproduce the annotation on a document that is already displayed.
[0187]
On the other hand, in the electronic conference system 1 shown in FIG. 1, it is possible to provide a mechanism for giving an annotation a public attribute and restricting the publication of the annotation. This point will be described below. In addition, what is necessary is just to refer FIG. 1 for the whole structure.
[0188]
FIG. 18 is a diagram illustrating an example of the contents of the profile DB 234. The profile server 232 and the profile DB 234 manage and store the group to which each user belongs. The contents of the profile DB 234 are as shown in FIG.
[0189]
First, the user acquires a user's group from the profile server 232 by performing a login operation on the document viewer 102.
[0190]
FIG. 19 is a diagram illustrating annotation storage related to annotation disclosure restrictions. The user adds annotations to the document viewer 102 and presses the save button. The user notifies the annotation storage means whether to save the annotation with the public attribute “individual”, “group: group name”, or “no restriction”. The annotation storage unit sends the user ID, document ID, annotation content, and public attribute to the storage unit (annotation server 212). The storage means (annotation server 212) stores it in the annotation DB 216. As a result, the annotation DB 216 has contents as shown in FIG.
[0191]
FIG. 20 is a diagram for explaining search and reproduction related to annotation disclosure restrictions. First, the user acquires a user's group from the profile server 232 by performing a login operation on the document viewer 102. The search request unit sends the document ID, user ID, and group name to which the user belongs to the search unit displayed on the document viewer 102.
[0192]
The search means searches for an annotation having an appropriate public attribute with a matching document ID. Here, a suitable public attribute is “no restriction” or an annotation having the same group name as the user. Of course, even if the public attribute is “individual”, if it is the same user, it is searched if it is an attached annotation.
[0193]
Other public IDs (user names) and groups can be specified as public attributes. When the user ID is designated, the annotation for which the user designates the unlimited attribute is reproduced. Also, when a group name is specified, an annotation with that group attribute is reproduced.
[0194]
<< 3. Access restriction using sheet GUI (hardware is possible) >>
2. With the restriction of annotation release, the annotation was specified and saved when saving / retrieving the annotation. In order to easily specify the attribute, a sheet-like GUI may be introduced.
[0195]
FIG. 21 is a diagram illustrating access restriction processing using the sheet GUI. As shown in FIG. 21, a mechanism for covering the document viewer 102 with a plurality of (semi) transparent sheets is expressed as a GUI.
[0196]
One public attribute is assigned to one sheet, and the public attribute of the sheet is automatically assigned by adding an annotation by covering the sheet. Also, by covering the sheet, it is possible to reproduce another person's annotation of the attribute.
[0197]
For example, a personal attribute is given to the document viewer 102 itself, a group attribute on the first sheet is given, and an unlimited attribute is given to the second (top) sheet. By setting the attributes in this way, it is possible to add annotations that gradually loosen the disclosure restrictions each time a sheet is covered.
[0198]
When giving personal annotations, the annotation is applied directly to the document viewer 102, and when sharing with a group, the first sheet is applied, and the annotation that can be viewed by anyone is the second sheet. To cover.
[0199]
If the sheet is made translucent, the viewer will gradually darken the color as more sheets are stacked, making it easy to see which attribute you are trying to write to. In this case, since the sheet is translucent, the annotation given by the user can always be seen.
[0200]
<< 4. Support for reviewing meetings using annotation information >>
In the electronic conference system 1, it is possible to propose a mechanism for supporting the reflection of a conference and creating a summary of conference materials using an annotation attribute in an apparatus that can display an electronic document and annotate the electronic document. .
[0201]
Consider a case where an intellectual activity is performed using a document display device capable of giving an annotation in a meeting using various documents or a large amount of documents, or in an activity using documents continuously for a long period of time.
[0202]
At first, you start using one document and you need to know more about one part of the document, and then display another document. In the other document, there is a part that needs information of another document, and another document is opened. Consider a scene where annotations are added to important points one after another.
[0203]
If you want to look back on the discussions you have made so far, such as in the middle of a meeting or after the meeting is over, if you can see the annotations attached to important points in chronological order, at least if you are a person who participated in the meeting, You will be able to remember the flow.
[0204]
The overall configuration may be referred to FIG. Note that FIG. 9 is referred to as the content example of the annotation DB 216 and FIG. 10 is referred to as the content example of the action log DB 214.
[0205]
FIG. 22 is a diagram for explaining the function of “reflecting support”. By taking some action on the attached annotation, you can see before and after the attached annotation. For example, in a state where an arbitrary annotation is selected with a pen, the page turning button 122 (see FIG. 2 showing the appearance of the document viewer) is pressed to look back on the document centering on the annotated part. Can do.
[0206]
As a method of displaying the corresponding annotation, the corresponding annotation is brought to the center of the document viewer 102 as shown in FIG. Display the corresponding annotation using a color other than the color used in the annotation.
[0207]
FIG. 23 is a diagram for explaining the search for annotations related to the “retrospective support” function. This figure shows a search request input screen displayed when the search button of the document viewer 102 is pressed.
[0208]
The viewer user can search for annotations of himself or others that he or she can view. Items that are not specified are all possible items.
[0209]
<< 5. Annotation extraction >>
FIG. 24 is a diagram for explaining annotation location extraction processing. The electronic conference system 1 already has functions for cutting out annotation portions attached to a document and arranging them in order of position or displaying only a specific annotation color (in order of position). It is possible to add a function of rearranging or displaying separately for each user.
[0210]
In addition, currently only for one document, this can be performed for a plurality of documents.
[0211]
If a partial annotation that overlaps even a little overlaps between users, it indicates that the phrase in the range with the annotation is important in the activity using the document.
[0212]
For example, looking back on the part with an annotation, there are cases such as looking back only on the individual's scope, looking back on all the participants of the activity, or looking back on the overlapping part obtained by merging all the members.
[0213]
If the annotation range points to a phrase, dependency analysis is performed, and the range is limited to the main word to calculate the overlap.
[0214]
Now, assume that each user uses his / her terminal to annotate a document as shown in FIG. 24 when performing an activity using the document.
[0215]
Here, when the user designates the annotation view, the apparatus cuts out and displays the annotation added portion by the following method.
1) The rectangle information at the beginning of the clipped annotation part is displayed in order from the smallest (largest) according to the rectangle information.
2) The annotation parts that have been cut out are arranged according to the time information, and the time information is arranged in order of early (slow).
[0216]
The annotation is selected and displayed by the following method.
1) Display only specific terminal IDs
2) Display only specific document ID (s)
3) Display only for a specific time interval
4) Display only specific annotation colors
5) Display only specific annotation shapes
[0217]
<< 6. Use of summary (including other summary descriptions) >>
When many annotations are added in time, it indicates that discussions in the document unit (document, page) were active.
[0218]
In addition to the fact that the annotated part is important, it indicates that the document unit with the highest time frequency of annotation was a hill of activity using the document. In other words, the annotated part increases the importance.
[0219]
Based on the frequency information obtained from “number of annotations in one document / time”, weighting such as biasing the importance of words (determined from TF / IDF, annotated place, etc.) is possible. .
[0220]
Basically, among the determined number of words, priority is given to the overlapping part of the annotation, and the sentence candidate to be used for the summary is selected in consideration of the annotation frequency. When the sentence is determined, sentence omission processing is performed by dependency analysis, the relation between the sentence and the sentence is corrected, and the summary is completed.
[0221]
Or just output an important sentence, and then humans create a summary based on it.
[0222]
The result of merging the annotation DB for the time and the action DB for the document / page may be shown as shown in FIG.
[0223]
<< 7. Visualization of activity activity >>
FIG. 25 is a diagram illustrating an example of visualizing activity activity. From the annotation DB 216 and the action log DB 214, it is possible to collect the page turning time and the annotation giving time of the document. A vertical line indicates that there is an annotation, and a number in the rectangle indicates a document ID. In addition, a method of displaying the activity level for each page can be used.
[0224]
<< 8. Annotation search and display method and device; from what point of view the annotation is given as a search condition >>
When a person reads a document, it is natural to read the document while giving an annotation using a pointing device such as a pen. The position where the annotation is given seems to be a position of interest to the reader.
[0225]
Annotations can be shared by digitizing documents and using networks. By reproducing the annotation previously assigned by another person or oneself, it is possible to know the position of interest given by another person or oneself.
[0226]
In Japanese Patent Application Laid-Open No. 9-62676, management is performed for each person to whom an annotation is given, and the annotation given by the person can be reproduced by designating a specific person. If you want to know the interest of a particular person, you can solve this problem.
[0227]
However, it may be more effective to reproduce the annotation given from a specific viewpoint than to reproduce the annotation of a specific person.
[0228]
For example, when you read a document that has a certain viewpoint, if another person has already read the document from the same viewpoint and has annotated it, the same viewpoint can be obtained by reproducing the annotation of the other person. You can get annotations attached with. Therefore, since the annotation has already been given to the portion of interest, it is possible to quickly obtain the information of interest by looking there.
[0229]
In the electronic conference system 1 of FIG. 1, a mechanism for searching and reproducing such an annotation that seems to have the same viewpoint can be proposed.
[0230]
Specifically, in an apparatus that can share annotations attached to electronically displayed documents (such as underlining, marking, and writing characters), query the state of annotations attached to a part of a document. As a result, it is possible to propose a mechanism for reproducing all annotations of documents already assigned at the same position as search results. This will be specifically described below.
[0231]
The basic hardware configuration is the same as that of the above-described embodiment of the present invention. The document reading, annotation giving, and saving operations are the same as those in the embodiment of the present invention. However, instead of the configuration example of the annotation DB shown in FIG. 9, the following description will be given using the configuration example of FIG.
[0232]
Next, an annotation search will be described. Another user B reads the document into the document viewer 102 of his terminal. The reading procedure is as described above. Here again, it is assumed that the document with document ID 2 is read as a document for moving an image during copying.
[0233]
Suppose that attention is paid to the operation of moving the original image to the center of the paper and adding a margin. At this time, annotations 40 and 41 are given to the words and sentences to be noted about the first page as shown in FIG.
[0234]
By pressing the search button 118, the user B can search and reproduce the annotation that seems to have been given from the same viewpoint based on these annotations.
[0235]
FIG. 28 is a diagram illustrating an example of search request information. When the search button 118 is pressed, as shown in FIG. 28, the document viewer 102 sends the document ID, the terminal ID, and the rectangle number with the annotation of the displayed page to the annotation server 212 as a search request. Here, the terminal ID of the document viewer 102 is assumed to be 4.
[0236]
The annotation server 212 receives the information shown in FIG. The annotation DB 216 is searched for an annotation for the annotation server 212 document ID2. If there is not, the fact that there is no annotation for the document ID 2 is returned to the document viewer 102.
[0237]
Here, it is assumed that the annotation DB 216 having the data structure shown in FIG. 26 is searched. Three annotations (annotation IDs 2, 4, and 5) regarding the document ID 2 are searched.
[0238]
The search request in FIG. 28 and the rectangle information (rectangle numbers) of annotation IDs 2, 4, and 5 are respectively compared in order. The comparison method is as follows.
[0239]
1) Extract the smallest rectangle number (MinRectNum) from the rectangle information of the search request. In the example of FIG. 28, MinRectNum = 79.
[0240]
2) Extract the largest rectangle number (MaxRectNum) from the rectangle information of the search request. In the example of FIG. 28, MaxRectNum = 142.
[0241]
3) The following is repeated for the rectangle information (rectangle number) of each comparison target annotation ID.
[0242]
3-1)
It is calculated whether or not there is a rectangle number TargetNum such that MinRectNum ≦ TargetNum ≦ MaxRectNum. If it exists, the rectangle information in that range is the search target. If not, the next annotation ID is checked. For example, when the rectangle information of the annotation ID 2 is examined, 159-183 and 231-256 are obtained, and there is no TargetNum that satisfies MinRectNum ≦ TargetNum ≦ MaxRectNum. Since the rectangle information of the annotation ID 4 includes 134-142 out of 134-147, it becomes a search target. Since the rectangle information of annotation ID 5 includes 79-100 and 133-142 of 76-100 and 133-147, it is a search target.
[0243]
3-2)
a: Calculate how many search request rectangles are included in the search target rectangle information within the range of MinRectNum and MaxRectNum (annotation reproduction rate).
[0244]
b: Calculate the percentage of search target rectangle information included in the search request rectangle information within the range of MinRectNum and MaxRectNum (annotation match rate).
[0245]
c: Take the average of annotation recall and precision.
[0246]
In the case of annotation ID4, the ratio of the search request rectangle information included in the search target rectangle information is 9/26 = 0.35 (9 to 79-94 and 133-142 are included in 134-142). Further, the ratio of the rectangle information to be searched for the annotation ID 4 included in the rectangle information of the search request is 9/9 = 1 (9 to 79-94 and 9 to 142 are included in 134-142). The average value is (0.35 + 1) /2=0.675.
[0247]
In the case of annotation ID 5, the ratio of the search request rectangle information included in the search target rectangle information is 26/26 = 1 (79-94 and 133-142 are included in 79-100 and 133-142) . Further, the ratio of the rectangle information to be searched for the annotation ID 4 in the rectangle information of the search request is 26/42 = 0.62 (79-94 and 133-142 are included in 26 in 79-100 and 133-142). ). The average value is (1 + 0.62) /2=0.81.
[0248]
As described above, when the comparison is completed for all the search target annotations, the annotation server 212 returns the annotation content (image information) of the annotation ID that has obtained the highest score to the document viewer 102. Here, the annotation ID 5 has the highest score of 0.81, so the image information 1, 2, 3 of the annotation server 212 annotation ID 5 is returned to 01.
[0249]
The document viewer 102 reproduces the received image information on the document display area 104.
[0250]
The above is the annotation search procedure.
[0251]
User B can obtain the second and third page annotations based on the annotation added to the first page. Since the annotation given to the first page by the user B is similar in position to the annotation given by the user A to the first page, it can be considered that the annotation is given from a close viewpoint.
[0252]
Therefore, the user B may possibly give the annotation given to the second and third pages by the user A. By presenting it in advance, the document understanding of the user B will be promoted.
[0253]
In this example, in the copy operation manual, user B wants to move the document to the center of the sheet and copy it with a binding margin, so an annotation is added to the position corresponding to the operation on the first page. If user A has already added an annotation at the same position, and annotations have been added to points of caution and supplements on the second and third pages, user A refers to the annotation and receives attention. There is an effect that a point to be confirmed can be quickly confirmed.
[0254]
In this example, annotations of unspecified others can be saved and searched, but in the case of a manual, the user who is interested in this part in advance should be interested here. Annotations can be added to parts that you want to try, and provided together with the manual to facilitate the understanding of the manual.
[0255]
The following can be considered as a modification.
[0256]
A. In the above example, the rectangle information is added to the annotation search, and the similarity of the annotation is determined based on the ratio of sharing the same rectangle. However, the similarity determination method is not based on this method.
[0257]
B. In the above example, the ranking of the annotation search result is simply based on the number including the same rectangle. However, in the case of an annotation assigned to a longer range, further weighting may be performed.
[0258]
C. The annotation may have a color attribute, and color matching may be taken into consideration when searching.
[0259]
D. Weighting with priority on recall and precision. Allow the user to specify only when the recall ratio is important or the precision ratio.
[0260]
E. By waiting for the login function to the electronic viewer, the user ID can be used instead of the terminal ID. In this case, matching of user IDs can also be considered (filtering by user ID).
[0261]
F. How to specify the range of annotations to be a query
F-1. In the above example, the range for adding the annotation of the search request is set to the smallest rectangular number and the largest rectangular number to which the annotation is attached.
[0262]
F-2. The entire page displayed when the search button is pressed.
[0263]
F-3. Explicitly specified by the user. Specify the range using a pen. At this time, the annotation used for designating the range has a mechanism different from that of a normal annotation. For example, a range designation attribute is provided as an annotation attribute, and the ink color is changed from that of other pens on the GUI. The range is the smallest rectangle number and the largest rectangle number written with the pen.
[0264]
F-4. A range of the latest annotation, or a combination of F-1 and F-2.
[0265]
<< 9. Annotation search and display method and apparatus; annotated person attribute is used as a search condition >>
When a person reads a document, it is natural to read the document while giving an annotation using a pointing device such as a pen. The position where the annotation is given seems to be a position of interest to the reader.
[0266]
Annotations can be shared by digitizing documents and using networks. By reproducing the annotation previously assigned by another person or oneself, it is possible to know the position of interest given by another person or oneself.
[0267]
In Japanese Patent Application Laid-Open No. 9-62676, management is performed for each person to whom an annotation is given, and the annotation given by the person can be reproduced by designating a specific person. If you want to know the interest of a particular person, you can solve this problem.
[0268]
Annotation of a specific person is meaningful if you know what kind of person has what characteristics, but if an unspecified number of people share a document or annotation, annotation of a person who does not know the feature is not very meaningful There seems to be no.
[0269]
In some cases, it may be more effective to reproduce the annotation given by a person with a specific attribute than to reproduce the annotation of a specific person.
[0270]
For example, you may want to quickly find out what engineers are paying attention to and what sales are paying attention to in articles about product press releases.
[0271]
Quickly know the attention points of people with a specific attribute by highlighting on the article the position where the engineer annotated, the position where the sales annotated, the position where the plan annotated, etc. Can do.
[0272]
In the electronic conference system 1 of FIG. 1, a mechanism for searching and reproducing annotations given by a person having a specific attribute can be proposed.
[0273]
Specifically, in an apparatus that can share annotations attached to electronically displayed documents (such as underlining, marking, and writing characters), query the state of annotations attached to a part of a document. As a result, it is possible to propose a mechanism for reproducing all annotations of documents already assigned at the same position as search results. This will be specifically described below.
[0274]
The basic hardware configuration is the same as that of the above-described embodiment of the present invention. The document reading, annotation giving, and saving operations are the same as those in the embodiment of the present invention.
[0275]
FIG. 29 is a diagram illustrating a configuration example of the profile server 232 and the profile DB 234. FIG. 30 is a diagram illustrating an example of a data structure of the profile DB.
[0276]
The document server 222 accepts “registration” and “document reading” according to instructions from the outside. The profile server 232 receives “registration” or “correction” according to an instruction from the outside.
[0277]
“Registration” gives user information described in a predetermined format. The user information includes a user name and various attribute information. The attribute information includes age, job type, gender, job title, current address, nationality, and the like. “Modify” gives a correction item to correct the user information. The profile DB 234 is as shown in FIG. The user ID is newly assigned when the registered user is new. “Search” searches and returns a user ID having a specific attribute.
[0278]
Next, registration of a user profile will be described using a specific example.
[0279]
<Register user profile>
FIG. 31 is a diagram showing an example of the data structure of the profile DB 234 in this example. The profile gives a text file described in a predetermined format to the profile server 232. The profile server 232 stores the given profile in the profile DB 234. At this time, a user ID is assigned. Here, it is assumed that registration is performed as shown in FIG.
[0280]
The profile does not need to be given as a text file, and registration from the GUI using CGI or the like is also possible.
[0281]
Next, document registration, reading, annotation assignment, and storage will be described.
[0282]
<Register document>
FIG. 32 is a diagram showing an example of the data structure of the document DB 224 in this example. Registration is given by a URL to a document to be registered or a path to a directory. The document server 222 registers the document ID, document name, and document text of the document indicated by the received path in the document DB 224. Each document is a press release of a new product announced by various companies.
[0283]
<Read>
In using the document viewer 102 in advance, the user performs a login operation on the document viewer 102. Here, login is performed with the user name user A. When the document viewer 102 receives the user name and password, the document viewer 102 sends the user name and password to the profile server 232 for authentication. If the authentication is successful, the document viewer 102 becomes usable.
[0284]
A document reading button 114 of the document viewer 102 is pressed. The document viewer 102 sends a document reading request to the document server 222.
The document server 222 creates a list of document names in the document DB 224 and returns it to the document viewer 102. Here, (press1.txt, press2.txt, press3.txt, press4.txt). The document viewer 102 displays a list of document names in a list box or the like and prompts the user A to select.
[0285]
User A presses 2. Assume that txt is selected. The document viewer 102 is pressed2. The document server 222 is notified that txt has been selected. The document server 222 uses press2. The document ID and document text assigned to txt are retrieved from the document DB 224 and returned to the document viewer 102. The document viewer 102 displays the received document text in the document display area 104.
[0286]
If the document server 222 is provided with a full-text search function or the like, the search result can be presented as a reading target.
[0287]
<Annotation>
FIG. 33 is a diagram illustrating a display example in a case where an annotation is added to a document in this example. User A reads the document displayed in the document display area 104 while giving an annotation. Here, a pen-type device is used as the annotation device 170. In this case, an annotation can be given to write on paper.
[0288]
At this time, it is assumed that the document display area 104 is divided into rectangles that are invisible but include characters as shown in FIG. A blank name part without a character and a part such as a chart are also divided into rectangles of an appropriate size with reference to the front and rear phone and other sizes. Each rectangle is given a sequential rectangle number in the horizontal direction from the upper left.
[0289]
<Save>
FIG. 34 is a diagram showing an example of information sent to the annotation server 212 in this example. FIG. 35 is a diagram showing a registration example of the annotation DB 216 in the present case.
[0290]
User A can save the annotation by pressing a save button 116. When the save button 116 is pressed, the document viewer 102 sends the document ID and user ID of the document with the annotation, the rectangular number of the rectangle with the annotation, and the image information of the annotation to the annotation server 212.
[0291]
The information sent to the annotation server 212 is as shown in FIG. Here, the terminal ID of the document viewer 102 is 1. The annotation server 212 receives the above information and stores it in the annotation server 212. At this time, if there is already a combination of the same document ID and terminal ID, it is overwritten there.
[0292]
Assuming that this is not the case, 5 is newly assigned to the annotation ID and registered as shown in FIG. It is assumed that annotations given by other users to document IDs 2, 3, and 4 are already stored in the annotation DB (annotation IDs 1, 2, 3, and 4). This completes the annotation storage. Next, an annotation search will be described.
[0293]
FIG. 36 is a diagram showing an example of a screen displayed when logging into the document viewer 102. FIG. 37 is a diagram illustrating an example of the reproduced annotation from the viewpoint of the engineer.
[0294]
User X logs into the document viewer 102. User X sends press2. Read txt and press the search button 118. Then, a list box displaying the category names of human attributes and their attribute candidates as shown in FIG. 36 is displayed.
[0295]
The user X wants to refer to the annotation given from the engineer's point of view, and selects the engineer with the family name. The person attribute is sent to the annotation server 212, and the annotation server 212 inquires the profile server 232 about a user ID having the person attribute.
[0296]
The profile server 232 searches for the user ID 1 as the user ID having the engineer attribute and returns it to the annotation server 212.
[0297]
The annotation server 212 searches the annotation DB for annotations having user ID1 and document ID2. Here, the annotation ID 5 is searched. The annotation content is returned to the document viewer 102.
[0298]
The document viewer 102 displays the received annotation image on the document viewer 102 as shown in FIG. 37, for example.
[0299]
In this way, the user X can reproduce the annotation given from the viewpoint of the engineer, and can quickly read what point the user having a specific attribute is interested in.
[0300]
Next, a case where a plurality of persons having the same attribute have added annotations to the same document will be described.
[0301]
In this case, the annotation server 212 returns the annotation given by a plurality of people as the search result to the document viewer 102. At this time, the document viewer 102 can take the following method.
1. Multiple annotations are displayed as they are.
2. As a search result, rectangle information is also returned, and characters included in a plurality of rectangles are highlighted.
[0302]
In the second method, for example, as shown in FIG. 38, characters included in a rectangle are displayed darker according to the number of rectangles present as a search result. In this example, assuming that the annotation given from the perspective of the planner is reproduced, "" Hot tea "is new from December 9th", "Suggested retail price", "140 yen 115 yen", Annotation is given to “Appointing Popular Actress TTT”, and it can be seen that a particularly dark part of this is attracting attention by a plurality of people.
[0303]
Other examples of highlighting include changing the thickness to draw an underline, or changing the size of characters.
[0304]
The following can be considered as a modification.
A. Allow multiple category attributes to be specified when searching. For example, it is possible to specify job type: engineer, gender: male, age: 30s, etc. In this case, it is assumed that the search condition can be searched with AND, OR, or NOT.
B. Allows multiple attributes to be specified within a single category when searching. Occupation: Can be specified as an engineer or researcher (in this case OR search).
[0305]
In this case, by changing the color of the annotation or the highlight color according to the attribute, it is possible to see the points of interest of people having different attributes while comparing them.
[0306]
【The invention's effect】
As described above, according to the present invention, search processing is performed via annotations, and information that other users who have a viewpoint similar to or similar to the viewpoint of the user to which the annotations are given is expanded to the search range. I did it.
[0307]
Thereby, the search target range can be expanded not only to the own viewpoint and the range of interest, but also to the range of other people's viewpoint and interest similar to the self. As a result, information that cannot be obtained only from its own viewpoint and that can be obtained from the viewpoint of another user similar to its own viewpoint can also be obtained as its own knowledge. In other words, knowledge that oneself does not have can be supplemented with knowledge possessed by others, and knowledge sharing can be realized.
[Brief description of the drawings]
FIG. 1 is a diagram showing a configuration example of an electronic conference system to which a display control method and an information display processing system according to the present invention are applied.
FIG. 2 is an external view focusing on the display surface side of a document viewer which is an embodiment of the information display processing apparatus.
FIG. 3 is a functional block diagram of a document viewer and a manager unit.
FIG. 4 is a diagram illustrating a configuration example of a document server and a document DB.
FIG. 5 is a diagram illustrating a configuration example of an annotation server and an annotation DB.
FIG. 6 is a diagram illustrating a specific configuration example of a document DB.
FIG. 7 is a diagram illustrating a display example in a state where an annotation is added to a document.
FIG. 8 is a diagram showing an example of information sent from a document viewer to an annotation server.
FIG. 9 is a diagram illustrating a configuration example of an annotation DB.
FIG. 10 is a diagram illustrating a configuration example of an action log DB.
FIG. 11 is a diagram illustrating another configuration example of the annotation DB.
FIG. 12 is a diagram illustrating a configuration example of the electronic conference system 1 focusing on annotation processing.
FIG. 13 is a block diagram focusing on a function that enables information sharing among a plurality of users by using a search process and an information providing process using annotations.
14 is a schematic diagram illustrating a procedure for providing information related to other users in the information provision processing system illustrated in FIG. 13;
FIG. 15 is a diagram showing an outline of a system configuration when an information display processing system is configured by a computer.
FIG. 16 is a diagram illustrating a storage process related to notification of annotation update.
[Fig. 17] Fig. 17 is a diagram for describing annotation update related to annotation update notification.
FIG. 18 is a diagram illustrating an example of the contents of a profile DB.
FIG. 19 is a diagram for explaining the storage of annotations related to annotation disclosure restrictions;
FIG. 20 is a diagram for explaining search and reproduction related to annotation disclosure restrictions;
FIG. 21 is a diagram illustrating access restriction processing using a sheet GUI.
FIG. 22 is a diagram for explaining a function of “return support”;
FIG. 23 is a diagram for explaining an annotation search related to a function of “reflecting support”;
FIG. 24 is a diagram for explaining annotation location extraction processing;
FIG. 25 is a diagram illustrating an example of visualizing activity activity.
FIG. 26 is a diagram illustrating another configuration example of the annotation DB.
FIG. 27 is a diagram showing an example of a screen with annotations attached.
FIG. 28 is a diagram illustrating an example of search request information;
29 is a diagram illustrating a configuration example of a profile server 232 and a profile DB 234. FIG.
FIG. 30 is a diagram illustrating an example of a data structure of a profile DB.
FIG. 31 is a diagram illustrating an example of a data structure of a profile DB in an example.
FIG. 32 is a diagram illustrating an example of a data structure of a document DB in an example.
FIG. 33 is a diagram illustrating a display example in a case where an annotation is added to a document.
FIG. 34 is a diagram showing an example of information sent to the annotation server in this example.
FIG. 35 is a diagram showing an example of registration of an annotation DB in this example.
FIG. 36 is a diagram showing an example of a screen displayed when logging in to the document viewer.
FIG. 37 is a diagram showing an example of a reproduced annotation from the viewpoint of an engineer.
FIG. 38 is a diagram showing an example of highlighting based on annotations given by a plurality of people.
[Explanation of symbols]
DESCRIPTION OF SYMBOLS 1 ... Electronic conference system, 7 ... Information sharing processing system, 9 ... Network, 100 ... Client system, 101 ... Display processing part, 102 ... Document viewer, 103 ... Liquid crystal display panel, 104 ... Document display area, 109 ... Case, 110 ... Operation button, 114 ... Document reading button, 116 ... Save button, 118 ... Search button, 120 ... Update button, 122 ... Page turn button, 122a ... Previous page feed button, 122b ... Next page feed button, 124 ... Highlighting Button 126, user display button 130, controller 132, page feed instruction receiving unit 140, page image generation unit 150, display brightness control unit 150a, contrast control unit 150b, brightness control unit 170, annotation device , 180 ... Manager section, 182 ... B File storage unit, 184 ... emphasized word / sentence specifying unit, 186 ... emphasized word / sentence selection method instruction unit, 188 ... emphasis instruction control unit, 200 ... server system, 210 ... annotation management unit, 212 ... annotation server, 214 ... action Log DB, 216 ... Annotation DB, 220 ... Document Management Unit, 222 ... Document Server, 224 ... Document DB, 230 ... Profile Management Unit, 232 ... Profile Server, 234 ... Profile DB, 240 ... Information Search Unit, 242 ... Natural Language Processing server, 244 ... Natural language processing DB, 500 ... Search request specifying unit, 542 ... Registration unit, 544 ... Search condition determination unit, 546 ... Search unit, 548 ... Related information presentation unit

Claims (5)

表示デバイス上に表示された文書に、当該文書とは別に管理可能なアノテーションを付与するアノテーション付与部と、
前記アノテーション付与部により付与された前記アノテーションが示している部分の情報を取得するアノテーション付与部分情報取得部と、
文書ごとに、前記アノテーション付与部分情報取得部により取得されたアノテーション付与部分情報を複数のユーザについて登録する登録部と、
表示されている文書中の前記アノテーションが示している部分に基づく検索指示を受け付けたとき、前記検索指示を発した指示ユーザが付与した前記アノテーションにより示される前記指示ユーザの対象文字列と、前記検索指示を発した指示ユーザが付与した前記アノテーションと重なりを持つ他ユーザの付与に基づく前記登録部に登録しておいた前記アノテーションにより示される前記他ユーザの対象文字列とを比較することにより、前記表示されている文書中に前記他ユーザが付与した前記アノテーションが示している部分に基づく前記他ユーザに関する検索条件を決定する検索条件決定部と、
前記他ユーザに関する検索条件に合致する情報の検索処理を実行する検索部と、
前記検索部により検索された検索結果を提示する提示部と、
を備えた情報提供処理システム。
An annotation assigning unit for giving an annotation that can be managed separately from the document to the document displayed on the display device;
An annotation giving part information acquiring unit for acquiring information of a part indicated by the annotation given by the annotation giving unit;
For each document, a registration unit for registering annotated part information acquired by the annotated part information acquiring unit for a plurality of users;
When a search instruction based on a portion indicated by the annotation in the displayed document is received, the target user's target character string indicated by the annotation given by the instruction user who issued the search instruction, and the search By comparing the target character string of the other user indicated by the annotation registered in the registration unit based on the grant of another user having an overlap with the annotation given by the instructing user who issued the instruction, A search condition determination unit for determining a search condition related to the other user based on a portion indicated by the annotation given by the other user in the displayed document;
A search unit that executes a search process for information that matches the search condition for the other user;
A presentation unit for presenting a search result searched by the search unit;
An information provision processing system.
前記検索条件決定部は、前記ユーザの対象文字列と前記他ユーザの対象文字列との差分を前記検索条件とし、
前記検索部は、前記対象文字列の差分に関連する別の文書を検索する
請求項に記載の情報提供処理システム。
The search condition determination unit uses a difference between the target character string of the user and the target character string of the other user as the search condition,
The information provision processing system according to claim 1 , wherein the search unit searches for another document related to the difference between the target character strings.
前記検索部は、前記別の文書に付与されている前記アノテーションから、そのアノテーションを付与した他ユーザを検索する
請求項に記載の情報提供処理システム。
The information provision processing system according to claim 2 , wherein the search unit searches for another user who has given the annotation from the annotation given to the other document.
前記検索条件決定部は、前記検索指示を受け付けたとき、同一文書で同一位置に1つでもアノテーションを付与した付与ユーザのリスト、前記付与ユーザの全てについての前記アノテーションが付与された部分を特定するアノテーション位置のリスト、前記付与ユーザの全てについての対象文字列のリストからなる関連ユーザリストの作成を実行し、作成した関連ユーザリストに基づいて、前記ユーザの対象文字列と前記他ユーザの対象文字列とを比較し、または、前記対象文字列の差分を求める
請求項またはに記載の情報提供処理システム。
When the search condition determination unit receives the search instruction, the search condition determination unit specifies a list of grant users to which at least one annotation is added at the same position in the same document, and a portion to which the annotation is assigned for all of the grant users. Create a related user list consisting of a list of annotation positions and a list of target character strings for all of the given users, and based on the generated related user list, the target character string of the user and the target character of the other user The information provision processing system according to claim 1 or 2 , wherein a sequence is compared or a difference between the target character strings is obtained.
表示デバイス上に表示された文書に、当該文書とは別に管理可能なアノテーションを付与するアノテーション付与工程と、
前記アノテーション付与工程により付与された前記アノテーションが示している部分の情報を取得するアノテーション付与部分情報取得工程と、
文書ごとに、前記アノテーション付与部分情報取得工程により取得されたアノテーション付与部分情報を複数のユーザについて記憶部に登録する登録工程と、
表示されている文書中の前記アノテーションが示している部分に基づく検索指示を受け付けたとき、前記検索指示を発した指示ユーザが付与した前記アノテーションにより示される前記指示ユーザの対象文字列と、前記指示ユーザが付与した前記アノテーションと重なりを持つ他ユーザの付与に基づく前記登録部に登録しておいた前記アノテーションにより示される前記他ユーザの対象文字列とを比較することにより、前記表示されている文書中に前記他ユーザが付与した前記アノテーションが示している部分に基づく前記他ユーザに関する検索条件を決定する検索条件決定工程と、
前記他ユーザに関する検索条件に合致する情報の検索処理を実行する検索工程と、
前記検索工程により検索された検索結果を提示する提示工程と、
を電子計算機に実行させるプログラム。
Annotation adding step for adding an annotation that can be managed separately from the document to the document displayed on the display device;
Annotation giving part information obtaining step for obtaining information of a part indicated by the annotation given by the annotation giving step;
For each document, a registration step of registering the annotation giving partial information acquired by the annotation giving partial information acquiring step in a storage unit for a plurality of users,
When a search instruction based on a portion indicated by the annotation in the displayed document is received, the target user's target character string indicated by the annotation given by the instruction user who issued the search instruction, and the instruction The displayed document by comparing the target character string of the other user indicated by the annotation registered in the registration unit based on the assignment of another user having an overlap with the annotation given by the user A search condition determining step for determining a search condition for the other user based on a portion indicated by the annotation given by the other user;
A search step for executing a search process for information that matches the search condition for the other user;
A presenting step for presenting a search result searched by the search step;
A program that causes an electronic computer to execute.
JP2002315121A 2002-10-29 2002-10-29 Information provision processing system, program Expired - Fee Related JP4352684B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2002315121A JP4352684B2 (en) 2002-10-29 2002-10-29 Information provision processing system, program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2002315121A JP4352684B2 (en) 2002-10-29 2002-10-29 Information provision processing system, program

Publications (2)

Publication Number Publication Date
JP2004151899A JP2004151899A (en) 2004-05-27
JP4352684B2 true JP4352684B2 (en) 2009-10-28

Family

ID=32459211

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2002315121A Expired - Fee Related JP4352684B2 (en) 2002-10-29 2002-10-29 Information provision processing system, program

Country Status (1)

Country Link
JP (1) JP4352684B2 (en)

Families Citing this family (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006099414A (en) * 2004-09-29 2006-04-13 Casio Comput Co Ltd Electronic conference device and electronic conference device control program
JP4612834B2 (en) * 2004-12-17 2011-01-12 キヤノン株式会社 Document management system, document search method, computer program, document search apparatus
JP2006260522A (en) * 2005-02-21 2006-09-28 Ricoh Co Ltd Information processing device, information management device, information management system, information processing method, information management method, information processing program, information management program, and recording medium
JP2007088967A (en) * 2005-09-26 2007-04-05 Nomura Research Institute Ltd Content supplying system and content reproducing terminal
JP4692315B2 (en) * 2006-02-15 2011-06-01 富士ゼロックス株式会社 Image processing apparatus, image processing method, and computer program
JP4793064B2 (en) * 2006-04-05 2011-10-12 富士ゼロックス株式会社 Data processing system and program
JP2008026978A (en) * 2006-07-18 2008-02-07 Fuji Xerox Co Ltd Electronic document management device, method, and program
JP2008083898A (en) * 2006-09-27 2008-04-10 Fuji Xerox Co Ltd Information processing system and information processing program
JP5233220B2 (en) * 2006-10-11 2013-07-10 株式会社リコー Page additional information sharing management method
JP2009059043A (en) * 2007-08-30 2009-03-19 Chiritumo Inc Digital information display system and digital information display method, and server device and terminal device
JP2009110506A (en) * 2007-10-11 2009-05-21 Ricoh Co Ltd Information processing apparatus and information processing program
JP5103161B2 (en) * 2007-12-27 2012-12-19 株式会社リコー Document management apparatus, document management system, document search method, program, and computer-readable recording medium
JP5761564B2 (en) * 2011-05-31 2015-08-12 カシオ計算機株式会社 User search system, user search device and program
CN103875008B (en) * 2011-10-12 2017-05-03 国际商业机器公司 Method and system for generating graphs of workflow
JP2014186536A (en) * 2013-03-22 2014-10-02 Yahoo Japan Corp Social graph generation device, social graph generation program and social graph generation method
JP2016045835A (en) * 2014-08-26 2016-04-04 京セラコミュニケーションシステム株式会社 Annotation sharing system
JP6315599B2 (en) * 2015-03-04 2018-04-25 日本電信電話株式会社 Marking support method, marking support server and computer
JP6699219B2 (en) * 2016-02-22 2020-05-27 株式会社リコー System, information processing apparatus, information processing method and program
JP7508446B2 (en) 2019-04-17 2024-07-01 株式会社ワコム Ink annotation sharing method and system
JP7423953B2 (en) 2019-09-20 2024-01-30 富士フイルムビジネスイノベーション株式会社 Information processing device and information processing program

Also Published As

Publication number Publication date
JP2004151899A (en) 2004-05-27

Similar Documents

Publication Publication Date Title
JP4352684B2 (en) Information provision processing system, program
JP4702705B2 (en) Information display processing system, client terminal, management server, program
Ovsiannikov et al. Annotation technology
Rhodes et al. Just-in-time information retrieval agents
US8135669B2 (en) Information access with usage-driven metadata feedback
Hart Doing a literature search: A comprehensive guide for the social sciences
CN102349087B (en) Automatically providing content associated with captured information, such as information captured in real-time
US20120036429A1 (en) Electronic book system and content server
JP2004206658A (en) Display control method, information display processing system, client terminal, management server, and program
JP4123928B2 (en) Information display processing system, client terminal
US20070198246A1 (en) Interactive system for building, organising, and sharing one&#39;s own encyclopedia in one or more languages
JP2000231627A (en) Plural modes scanning pen provided with feedback mechanism and input method using the same
JP2000215214A (en) Method for processing dynamic contents data base for plural document genres
JP2000215213A (en) Method and system for preparing table based on distributed type documents
JP2000195735A (en) Interactive parasitic display device
JP2000235475A (en) System and method for extracting data from audio message
KR20120013044A (en) Mobile system, search system and search result providing method for mobile search
JP2004199408A (en) Method for processing document, method for display processing of information, system for display processing of information, management server, client terminal, and program
US9104880B2 (en) Apparatus for E-learning and method therefor
JP2004151898A (en) Display control method, information display processing system, and program
JP2004199407A (en) Method for display processing of information, system for display processing of information, management server, client terminal, and program
JP4172266B2 (en) Client terminal
JP2003157245A (en) Electronic form preparation device, computer program for the same, and electronic form processing system
JP2004151882A (en) Method of controlling information output, information output processing system, and program
JP2004240597A (en) Display control method, information display processing system, client&#39;s terminal, management server, and program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20050926

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20081127

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20081216

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20090213

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20090317

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20090514

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20090707

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20090720

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120807

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120807

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130807

Year of fee payment: 4

LAPS Cancellation because of no payment of annual fees