JP2018073096A - 情報表示装置 - Google Patents

情報表示装置 Download PDF

Info

Publication number
JP2018073096A
JP2018073096A JP2016211668A JP2016211668A JP2018073096A JP 2018073096 A JP2018073096 A JP 2018073096A JP 2016211668 A JP2016211668 A JP 2016211668A JP 2016211668 A JP2016211668 A JP 2016211668A JP 2018073096 A JP2018073096 A JP 2018073096A
Authority
JP
Japan
Prior art keywords
unit
display
conference
subject
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2016211668A
Other languages
English (en)
Other versions
JP6865015B2 (ja
Inventor
季穂 坂本
Kiho Sakamoto
季穂 坂本
寺田 智
Satoshi Terada
智 寺田
洋樹 棟朝
Hiroki Muneasa
洋樹 棟朝
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sharp Corp
Original Assignee
Sharp Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sharp Corp filed Critical Sharp Corp
Priority to JP2016211668A priority Critical patent/JP6865015B2/ja
Priority to CN201711029549.3A priority patent/CN108021311A/zh
Priority to US15/795,432 priority patent/US20180121084A1/en
Publication of JP2018073096A publication Critical patent/JP2018073096A/ja
Application granted granted Critical
Publication of JP6865015B2 publication Critical patent/JP6865015B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0483Interaction with page-structured environments, e.g. book metaphor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/10Office automation; Time management
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0412Digitisers structurally integrated in a display
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482Interaction with lists of selectable items, e.g. menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842Selection of displayed objects or displayed text elements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0486Drag-and-drop
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1454Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048Indexing scheme relating to G06F3/048
    • G06F2203/04806Zoom, i.e. interaction techniques or interactors for controlling the zooming operation

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Business, Economics & Management (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Human Resources & Organizations (AREA)
  • Strategic Management (AREA)
  • Operations Research (AREA)
  • Tourism & Hospitality (AREA)
  • General Business, Economics & Management (AREA)
  • Quality & Reliability (AREA)
  • Marketing (AREA)
  • Economics (AREA)
  • Data Mining & Analysis (AREA)
  • User Interface Of Digital Computer (AREA)
  • Processing Or Creating Images (AREA)

Abstract

【課題】異なる主題に係る資料を他の主題に係る資料と容易に区別でき、過去のある時点における資料画像の配置を容易に再現できる情報表示装置を提供する。【解決手段】画像を同時に1以上表示する表示部と、前記表示部に表示されている画像の配置を表す画像毎の配置情報を、表示内容の記憶および再現に係る主題と紐付けて格納する記憶部と、表示部に再現すべき1以上の画像の配置を、前記主題について選択できるように主題別一覧を生成する一覧生成部と、前記主題別一覧を用いたユーザーによる主題の選択を受け付ける操作部と、選択された主題に紐付けられた配置情報に基づいて前記表示部に画像の配置を再現するレイアウト再現部とを備える情報表示装置。【選択図】図9

Description

この発明は、情報表示装置に関し、より詳細には例えば会議、講義、講演、授業やプレゼンテーション等において対象となる主題(例えば、会議の議題、講義のテーマ、講演の演題、授業の科目など)に関連した文書や画像等の資料を表示し管理する情報表示装置に関する。
近年、会議や講義・プレゼン等の場面において、大画面の表示装置に資料を表示し、さらに、表示画面に対して電子的な書き込みを行うことができるいわゆる電子黒板とよばれる表示装置が普及している。表示装置を電子黒板として利用することで、会議、講義やプレゼンテーション等を円滑にすすめることが可能になってきている。
電子黒板の代表的な用途の例として、会議がある。電子黒板は、議事を書きとめて参加者の認識を共有するために従来から用いられている黒板あるいは白板の機能を発展させたものであって、資料を表示したり、議事録を印刷し保存することもできる。
電子黒板は、いわゆるプレゼンテーションソフト、文書作成ソフト、表計算ソフト、ドローイングソフト、テキストエディタなどのソフトウェアで作成されたさまざまな種類の文書、画像あるいはその組合せ(以下、単に文書という)表示可能である。一般に、それらを表示するには、文書のデータを作成したソフトウェアが必要である。あるいは、文書がPDF形式などに変換されたものを表示することもできる。さらに、電子黒板は、動画を表示できる。即ち、電子黒板は、一種の情報処理装置といえる。
1つの論題についてさまざまな種類の資料を同時に表示させて議論する状況は数多く存在する。ここで、1回の集まりにおいて複数の論題を扱うことがある。この場合、異なる論題に係る資料が他の論題に係る資料と容易に区別でき、混同が生じないことが望ましい。また、1つの論題についての集まりが日時を隔て複数回に及ぶこともある。この場合、その論題について前回の最後の状態を再現できれば継続が容易である。
これに関し、情報処理装置の表示画面を変更するための操作を記録し、記録された操作に応じて、表示画面のサムネイルを生成し、選択されたサムネイルに対応する画面表示を再現できるようにしたものが提案されている(例えば、特許文献1参照)。
また、特定のユーザーが使用する任意の情報処理装置を想定したものであるが、さまざまな物理空間を移動するオフィス環境において作業状況の連続性を確保する情報処理環境管理装置が提案されている(例えば、特許文献2参照)。特許文献2のものは、ユーザーを認識する手段として例えばタグリーダを用い、ユーザーが作業を終了するときに作業状況を検出して作業状況保持手段に保持する。そして、そのユーザーが移動先の任意の情報処理装置で作業を開始するときに、認識されたユーザーの作業状況を作業状況保持手段から読み出して以前の作業状況を再現する。
さらに、表示装置の構成が異なっても適切に会議を再現することを目的とした情報処理装置が提案されている(例えば、特許文献3参照)。特許文献3のものは、議事情報の入力時に表示装置に表示されている画面を再生用の画像として生成し、再生用の画像と議事情報とを関連付ける処理を行う。そして、議事情報の再生時に、入力時の表示装置と構成情報が異なる場合、入力時とは異なる配置で再生用の画像を表示する。
特開2013−161302号公報 特開2005−44159号公報 特開2013−126127号公報
前述の電子黒板のように主として資料を表示することが想定され、表示画面に対する操作を受付けて表示画面に電子的な書き込みを行う機能を有する情報処理装置をこの明細書で情報表示装置と呼ぶ。
異なる論題に係る資料を他の論題に係る資料と区別する手法の一つは、論題別にその論題に係る資料をまとめて記憶する機能を提供することである。ただし、資料をまとめて記憶するだけでは表示部全体としての資料画像の配置まで再現することができないし、その論題に係るすべての資料がいつも画面に表示されている訳ではない。
また、スクリーンスナップショットのように、ある時点の資料画像の配置を記憶する機能を提供する手法も考えられる。しかし、多数のスクリーンスナップショットを記憶すると、ユーザーは自分が呼び出したいものがどれかを見分けることが容易でなくなる。
この発明は、以上のような事情を考慮してなされたものであって、異なる論題に係る資料を他の論題に係る資料と容易に区別でき、過去のある時点において表示部に表示された資料の資料画像の配置を容易に再現できる情報表示装置を提供するものである。
この発明は、画像を同時に1以上表示する表示部と、前記表示部に表示されている画像の配置を表す画像毎の配置情報を、表示内容の記憶および再現に係る主題と紐付けて格納する記憶部と、表示部に再現すべき1以上の画像の配置を、前記主題について選択できるように主題別一覧を生成する一覧生成部と、前記主題別一覧を用いたユーザーによる主題の選択を受け付ける操作部と、選択された主題に紐付けられた配置情報に基づいて前記表示部に画像の配置を再現するレイアウト再現部とを備える情報表示装置を提供する。
この発明による情報表示装置は、表示部に再現すべき1以上の画像の配置を、主題について選択できるように主題別一覧を生成する一覧生成部と、前記主題別一覧を用いたユーザーによる主題の選択を受け付ける操作部と、選択された主題に紐付けられた配置情報に基づいて前記表示部に資料画像の配置を再現するレイアウト再現部とを備えるので、ユーザーは異なる主題に係る資料を他の主題に係る資料と容易に区別でき、ある主題についての過去のある時点における資料画像の配置を容易に再現できる。
この実施形態に係る情報表示装置の外観を示す正面図である。 この実施形態に係る情報装置の電気的構成を示すブロック図である。 図1の情報表示装置の表示部に資料画像が表示された様子を示す説明図である。 この実施形態において情報表示装置の起動時に制御部が実行する表示処理の示すフローチャートである。 この実施形態における会議管理画面の例を示す説明図である。 この実施形態において制御部が実行する表示処理の概要を示すフローチャートである。(実施の形態1) この実施形態において主題格納部、ドロアー格納部および配置情報格納部のデータを示す説明図である。 この実施形態において会議の終了時に制御部が実行する処理を示すフローチャートである。 この実施形態に係る表示処理のポイントを示す説明図である。 この実施形態において制御部が実行する表示処理の概要を示すフローチャートである。(実施の形態3) この実施形態において、会議管理画面の例を示す説明図である。(実施の形態5)
以下、図面を用いてこの発明をさらに詳述する。なお、以下の説明は、すべての点で例示であって、この発明を限定するものと解されるべきではない。
(実施の形態1)
図1は、この実施形態に係る情報表示装置の外観を示す正面図である。
図1に示すように、情報表示装置11は、正面の大部分を表示部13が占める。表示部13は、例えば液晶表示パネルであるがそれに限定されず、有機ELなど他の方式の表示装置であってもよい。ユーザーが電子ペンや指先で表示部13の表面に触れると、操作部15(図1に図示せず)としてのタッチセンサがその位置と接触を検出する。表示部13の下方の中央部には、電子ペン等を置くためのトレイ18が配置されている。トレイ18の左右にはスピーカー17が配置されている。表示部13の左右両側には、運搬用の取っ手19が上下に2つずつ配置されている。
≪情報表示装置の構成と画面の構成≫
図2は、この実施形態に係る情報装置の電気的構成を示すブロック図である。鎖線で示すブロックは必須の構成要素でないことを示している。
図2に示すように、情報表示装置11は、図1に示す表示部13およびスピーカー17の他に、図1に図示しない操作部15としてのタッチセンサ、制御部35および記憶部21を有している。タッチセンサは、例えば静電容量式のタッチパネルであってもよいがそれに限らず、赤外線方式など他のタイプのものであってもよい。また、外部機器との通信インターフェイスである通信部12を備えていてもよい。通信方式は特に限定されない。さらにまた、マイクロフォン14やカメラ16を備えていてもよい。
記憶部21は、制御部35の中心であるCPUが処理を実行する際にワークエリアを提供するRAMを含み、さらに、フラッシュメモリやハードディスク装置からなる不揮発性の記憶装置で構成される。記憶部21は、前記CPUが実行する制御プログラムを格納するほか、配置情報格納部23、主題格納部25、ドロアー格納部27としてデータを格納する記憶領域を有している。
配置情報格納部23は、表示部13に表示する資料画像の配置に係る情報を格納する。配置情報は個々の資料画像に対応したものである。配置情報は、その資料画像を用いる主題と紐付けられて管理される。また、資料画像は元になる資料データを特定する情報と紐付けて管理される。
ここで、資料データは、いわゆるプレゼンテーションソフト、文書作成ソフト、表計算ソフト、ドローイングソフト、テキストエディタなどのソフトウェアで作成されたさまざまな種類の文書(画像を含んでもよい)のデータファイルである。その具体的な態様の一例は、テキストエディタで作成されたテキストデータである。また、例えば前述のテキストデータがPDF形式に変換されたPDFデータである。資料データは、対応するアプリケーションソフトウェアを用いて開くことができる。
一方、資料画像は、前述の資料データが画像に変換された画像データである。元の資料データに紐付けられているが、資料画像自体は画像データであるので、移動、拡大縮小、回転ができる程度である。例えば、ある資料画像に対してページ送り等の要求を受け付けたとすると、制御部35は、元の資料データを開いて次ページを画像化し、現在表示されている資料画像と置換するといった処理を実行することが必要である。或いは、元の資料データを開く際に全てのページを一度に画像化してもよい。
主題格納部25は、情報表示装置11の表示に係る主題を格納する。配置情報格納部23に格納される配置情報は、主題格納部25に格納される主題の何れかと紐付けられている。主題格納部は、主題がどの配置情報と対応するかを示すデータを格納する。
ドロアー格納部27は、1以上の資料データの参照先(アドレス情報)をまとめて格納する。具体的には、資料データを特定する情報を格納するファイルフォルダーを参照するためのファイルパスを格納する。どの資料データをまとめるかはユーザーの選択によるが、例えば一つの主題に関連する資料データがまとめて格納されることが想定される。なお、各資料データの配置情報は格納されない。ドロアーの数は1以上である。この実施形態では3つのドロアーがある。各ドロアーはそれぞれファイルパスを格納する。通常各ドロアーは異なるファイルパスを格納する。ただし、ユーザーが同一のファイルパスを設定した場合は、有用性はともかくその設定に従う。
なお、各ドロアーに対応付けられるファイルパスが主題毎に設定できる態様も考えられるが、それについては別の実施形態として述べる(実施の形態3参照)。この実施形態では、各ドロアーに対応付けられたファイルパスは、選択された主題に関係なく共通のものである。
制御部35は、CPUを中心に構成される電子回路である。前記CPUは記憶部21に格納された制御プログラムを実行することによって一覧生成部31、履歴一覧生成部33、資料画像生成部37、レイアウト再現部39およびドロアー管理部41としての機能を実現する。さらに、前記制御プログラムを実行することによってキーワード抽出部43や推移情報生成部45としての機能を実現してもよい。
一覧生成部31は、ある時点で表示部13に表示されている資料画像の配置をサムネイル化して主題別のサムネイル一覧を生成する。そのサムネイル一覧は、ユーザーが再現表示する主題を選択する際の参考情報として使用される。
履歴一覧生成部33は、一覧生成部31が主題別のサムネイルを生成する際に、同じ主題の異なる時点における資料画像の配置を異なるサムネイルとして生成する。よって、ある論題(主題)について表示部に表示された資料画像の推移(履歴)がサムネイルで閲覧可能になる。
なお、履歴のサムネイルを用いて、ある論題についてどの時点の表示を再現するかをユーザーが選択可能な態様も考えられるが、それについては別の実施形態として述べる(実施の形態2参照)。この実施形態では、選択された論題の直近の資料画像の表示が再現される。
資料画像生成部37は、資料データの内容に基づいて表示部13に表示する画像データ(以下、資料画像あるいはシートという)を生成する。
レイアウト再現部39は、ユーザーが選択した主題について、配置情報格納部23を参照し、直近の資料画像およびその配置の表示を表示部13上に再現する処理を行う。
ドロアー管理部41は、ドロアーに対するユーザーの操作を処理する。例えば、ドロアーを表示部13に表示してユーザーがドロアーを選択できるようにする。ユーザーがドロアーを選択したら、そのドロアーに登録されている資料データの一覧を表示部13に表示してユーザーが選択できるようにする。
また、ドロアー管理部41は、ユーザーがそのうち何れかの資料データの内容を表示する選択をしたら、選択された資料データの資料画像を資料画像生成部37に生成させて表示部13に表示されるようにする。さらにまた、ユーザーがドロアーを選択し資料データを追加する操作をしたら、その資料データを選択されたドロアーに追加する。具体的にはドロアーが参照するファイルフォルダーに、その資料データを特定する情報を格納する。
図3は、図1の情報表示装置の表示部13に資料画像が表示された様子を示す説明図である。図3で、表示部13の表示は上側のワークエリア51、下端部の引出しエリア53、その左隣のホームメニュー55および右隣の「閉じる」ボタン56に大別される。ワークエリア51は資料画像を表示する領域であって上方の大半の領域を占めている。図3において、ワークエリア51に資料画像52が表示されている。それぞれ「シート1」、「シート2」、「シート3」と表記された矩形の領域である。なお、シートの形状は矩形で、基本的に縦横方向に配置されるものとしているが、「シート3」のように回転操作ができるものとして扱ってもよい。
引出しエリア53には、3つのドロアー54が表示されている。「ドロアー1」、「ドロアー2」、「ドロアー3」と表記された領域である。ユーザーが例えば「ドロアー1」の領域にタッチすると、ドロアーの一覧に代えて「ドロアー1」に格納された資料データのアイコン一覧が引出しエリア53に表示される。ユーザーが、一覧表示されたアイコンうちの何れかをタッチしてワークエリア51にドラッグアンドドロップするとドロップされた位置にそのアイコンに対応する資料画像が表示される。
なお、初期は各ドロアーにどのファイルフォルダーも登録されていない。ユーザーがファイルフォルダーをドロアーに登録すると、選択されたドロアーに資料データが対応付けられる。
引出しエリア53の左隣にはホームメニュー55がある。ユーザーがホームメニュー55をタッチすると予め定められたホームメニューが表示される。
引出しエリア53の右隣には「閉じる」ボタン56がある。ユーザーが「閉じる」ボタンにタッチすると、制御部35は、その時点でワークエリア51に表示されている資料画像の配置を配置情報格納部23に格納し、情報表示装置11の表示処理を実行するアプリケーションソフトを終了してオペレーティングシステムに戻る。
図2の説明に戻る。
キーワード抽出部43は、ある主題についての音声および資料の文書の少なくとも何れかからキーワードを抽出する。例えば、主題が会議であるとき、マイクロフォン14によって記録された会議の音声に音声認識処理を適用して頻出する語をキーワードとして抽出する。それに加え、あるいはそれに代えて、その会議の資料データの中から頻出する語やタイトルに用いられた語をキーワードとして抽出する(実施の形態5参照)。
推移情報生成部45は、主題についての推移に関する推移情報を生成する。例えば、主題が会議であるとき、マイクロフォン14によって記録された会議の音声の大きさの程度を推移情報とする。一般に会議が盛り上がると音声が大きくなる傾向があるので、会議の重要なポイントを見出す手がかりを得ることができる(実施の形態5参照)。
≪情報表示装置の起動時の表示処理≫
図4は、この実施形態において情報表示装置11の起動時に制御部35が実行する表示処理の例を示すフローチャートである。なお、以降、図4〜図11において、主題は会議であるとして説明を述べている。ただし、この発明に係る主題は会議に限定されるものではない。
図4に示すように制御部35は、起動時に初期画面設定を確認するダイアログボックスを表示部13に表示させる(ステップS11)。そのダイアログボックスには、3つの選択肢の何れかをユーザーが設定する欄が設けられている。起動時に会議管理のダイアログボックス(会議管理画面)を表示させるか、前回終了時の状態をワークエリアに表示させるかあるいはワークエリアが空の状態で開始するかの選択肢である。なお、何れかの設定がなされたら制御部35は、記憶部21にその設定を記憶させてもよい。そして、初期画面設定を確認するダイアログボックスを次回起動時にも表示するか、表示を省略して記憶された設定に基づく画面を表示するかを設定できるようにしてもよい。その設定は、ホームメニューの「設定」を選択していつでも変更可能である。
前記ダイアログボックスを用いて会議管理画面から開始するように設定がなされたら(ステップS12)、あるいは会議管理画面が起動時の既定の表示に設定されたら、制御部35は、次の処理を行う。即ち、一覧生成部31および履歴一覧生成部33として制御部35は、会議管理画面を表示部13に表示させる(ステップS13)。
図5は、この実施形態における会議管理画面の例を示す説明図である。図5に示すように、会議管理画面は、主題としての会議名を示す項目、会議が行われた直近の日時、その会議でワークエリア51に表示されたシートの配置を示す複数のサムネイルを会議毎に表示する画面である。この実施形態において、各会議のサムネイルは予め定められた数(例えば、図5の例では4つ)が表示される。また、会議管理画面に表示される既存の会議には、固有のID(主題が会議でない場合もあるので主題IDが適当かもしれないが、この実施形態では会議IDとする)がそれぞれ対応付けられている。複数のサムネイルは、前回の会議終了時、即ち直近の時点のシートの配置を含み、過去に遡った幾つかの時点のレイアウト、即ちワークエリア51に表示されたシートの配置を示している。この態様によればサムネイルにより会議の推移を一覧できるので、ユーザーは呼び出したいと考えている会議を容易に見出すことができる。なお、既存の会議が選択されて「会議を開く」ボタン77で呼び出されるのは、選択された会議の直近のレイアウトである。
会議管理画面には種々の操作ボタンが配置されている。
「会議の持込」ボタン71は、このボタンの操作によって、外部の情報表示装置や情報処理装置に格納された会議の内容および画面レイアウトを、情報表示装置11にインポートするものである。インポートされた会議の内容は、記憶部21に格納され、情報表示装置11で記録された会議と同等に扱われる。
「会議の持出」ボタン72は、このボタンの操作によって、情報表示装置11に格納された会議の内容および画面レイアウトを、外部の情報表示装置や情報処理装置にエクスポートするものである。エクスポートされる内容は、選択されている会議IDについて、配置情報格納部23に格納された配置情報、主題格納部25に格納されたデータおよびドロアー格納部27に格納されたドロアーの構成、資料画像の元になった資料データである。
「新規会議の追加」ボタン73は、このボタンの操作によって、新規の会議を追加して管理の対象とするものである。新規会議を追加した場合、制御部は、空のワークエリアを表示部13に表示する。
「会議を保存」ボタン74は、このボタンの操作によって、現在開催している会議の情報を更新して保存するものである。制御部35は、その時点の画面レイアウトを直近の画面レイアウトとして保存する。
「会議の詳細設定」ボタン75は、このボタンの操作によって、会議の属性に係る詳細設定を行うものである。
「レイアウトを追加」ボタン76は、このボタンの操作によって、すべての会議のレイアウト管理画面を表示し、そのレイアウト管理画面を用いてユーザーが選択した画面レイアウトを現在選択されている会議に追加するものである。
「会議を開く」ボタン77は、このボタンの操作によって、現在選択されている会議を再現表示するものである。
「会議を削除」ボタン78は、現在選択されている会議を会議管理画面から削除するものである。主題格納部25、配置情報格納部23に格納されているデータもそれに伴って削除される。ドロアー構成が会議毎に格納されている場合は、ドロアー格納部27の該当するデータも削除される。
「閉じる」ボタン79は、このボタンの操作によって、会議管理画面が閉じて元の画面に戻るものである。
図4の説明に戻る。
会議管理画面において、ユーザーは既に記憶されている会議を選択できるだけでなく、新たな会議を選択することもできる(ステップS15)。
ユーザーが新たな会議を選択した場合(ステップS15のYes)、それに応答して制御部35は新規会議作成のダイアログボックスを表示部に表示させる(ステップS16)。新規会議作成のダイアログボックスで、ユーザーは会議名の設定等ができる。
新規会議作成のダイアログボックスで設定が入力され、会議を開く指示がなされたら(ステップS20のYes)、制御部35は、会議名を主題格納部25に格納し、新規会議画面用に空のワークエリアを表示部13に表示させる(ステップS23)。さらに、ドロアー管理部41として制御部35は、ドロアー格納部27を参照して引出しエリア53にドロアーを表示させ(ステップS25)、起動時の表示処理を終了する。
一方、会議管理画面でサムネイル表示された既存の会議の何れかが選択されたら(ステップS30のYes)、レイアウト再現部39としての制御部35は、次の処理を行う。即ち、配置情報格納部23を参照して選択された会議に係る直近のレイアウトをワークエリア51に再現表示する(ステップS35)。さらに、ドロアー管理部41として制御部35は、ドロアー格納部27を参照して引出しエリア53にドロアーを表示させる(ステップS37)。そして、起動時の表示処理を終了する。
初期画面設定のダイアログボックスで前回終了時の状態をワークエリア51に表示させる選択がなされた場合(ステップS12のNoを経てS61)、レイアウト再現部39として制御部35は次の処理を行う。即ち、配置情報格納部23を参照して前回表示した会議の終了時のレイアウトをワークエリア51に再現表示する(ステップS63)。さらに、ドロアー管理部41として制御部35は、ドロアー格納部27を参照して引出しエリア53にドロアーを表示させる(ステップS64)。そして、起動時の表示処理を終了する。
また、初期画面設定のダイアログボックスで、空のワークエリアで開始する選択がなされた場合(ステップ61のNoを経てS65)、制御部35は空のワークエリアを表示部13に表示する(ステップS67)。さらに、ドロアー管理部41として制御部35は、ドロアー格納部27を参照して引出しエリア53にドロアーを表示させる(ステップS68)。そして、起動時の表示処理を終了する。
初期画面設定のダイアログボックスで上述の3つの選択肢の何れも選択されずに、ホームメニュー55がタッチされた場合(ステップS65のNoを経てS69)、制御部35はホームメニューのダイアログボックスを表示させる。ホームメニューダイアログボックスには「会議管理」の項目が含まれる。「会議管理」が選択された場合(ステップS71)、制御部35は会議管理画面を表示部13に表示させる(ステップS73)。前述のステップS13と同様のダイアログボックスである。ホームメニューダイアログボックスの他の項目として「ワークエリアをクリア」、「レイアウト管理」や「設定」があるが、ここではそれらの項目が選択された場合の処理についての説明を省略する。制御部は、それらのうち何れかの項目が選択されたら、ホームメニューのダイアログボックスを閉じて選択された項目の処理を行う。その後にルーチンはステップS13へ戻る。
ホームメニューをタッチすることによって、ユーザーは起動時に限らずいつでも会議管理画面にアクセスできる。会議管理画面は、起動時においては既存の会議を呼び出すために使用される。一方、起動後は、ワークエリア51に表示されている会議のレイアウトを保存するために使用される。
起動時に、ホームメニュー経由で呼び出された会議管理画面で、サムネイル表示された既存の会議の何れかが選択されたら(ステップS75のYes)、ルーチンはステップS35へ進む。レイアウト再現部39としての制御部35は、配置情報格納部23を参照して選択された会議に係る直近のレイアウトをワークエリア51に再現表示する。さらに、ドロアー管理部41として制御部35は、ドロアー格納部27を参照して引出しエリア53にドロアーを表示させる(ステップS37)。そして、起動時の表示処理を終了する。
起動時にホームメニュー経由で呼び出された会議管理画面で、新規会議が選択された場合(ステップS75のNoを経てステップS77)、ルーチンはステップS16へ進み(ステップS77のYes)新規会議作成のダイアログボックスを表示する。一方、いずれも選択されなかった場合、ルーチンはステップS71へ戻りホームメニューの項目選択を待つ。
以上が、起動時の画面処理である。
≪情報表示装置の表示処理≫
続いて、情報表示装置の表示処理に関して制御部35が実行する概要について述べる。図4で述べた起動時の処理を含む、全体の処理である。
図6は、この実施形態において制御部35が実行する表示処理の概要を示すフローチャートである。なお、図4に対応または関連する処理がある場合は図4と同様の符号を付している。
図6に示すように、制御部35は、起動後に、情報表示装置11の画面表示を制御するアプリケーションソフトウェアを起動する(ステップS11)。その処理には、図4のステップS11の処理が含まれる。なお、図6では起動時の初期画面として会議管理画面を表示する設定がなされているものとしている。よって、制御部35は、会議管理画面を表示部13に表示する(ステップS13)。
会議管理画面で新規の会議を作成する選択がなされたら(ステップS15のNo)、制御部35は、新規会議作成画面を表示部13に表示させて会議の名称の入力を受け付ける(ステップS17)。会議名が入力されたら、会議毎のデータ管理に使用するID(会議ID)を新たに発行する(ステップS19)。新たに発行された会議IDを会議名と紐付けて主題格納部25に格納する(ステップS21)。そして、空のワークエリアを表示部13に表示させる(ステップS23)。
さらに、制御部35は、ドロアー格納部27を参照して引出しエリア53にドロアーを表示する(ステップS25)。
図7は、この実施形態において主題格納部25、ドロアー格納部27および配置情報格納部23に格納されるデータの一例を示す説明図である。
図7に示す主題格納部25の例では、3つの会議が格納されている。それらの会議名は、「経営会議」、「開発日程会」、「特許確認会」である。それぞれの会議に固有のIDMTG0001、MTG0002、MTG0003が割り当てられている。さらに、それぞれの会議について、会議に紐づけられた配置情報のID(配置ID)が登録されている。新たな会議が登録された時点においては、最新(直近)の配置情報のみであるが、過去に開催された会議については、保存処理を行った時点の配置情報が履歴として登録されている。さらに、会議の推移に伴って、所定の条件が充足された場合に配置情報を追加してもよい。ここで、所定の条件としては、例えば新たな資料画像が開かれた場合、資料画像が閉じられた場合、所定期間が経過した時点で以前とレイアウトが変化している場合などが考えられる。
図6の説明に戻る。
一方、会議管理画面で既存の会議、即ち、既に主題格納部25に登録されている会議の何れかが選択されたら(ステップS15のYes)、制御部35は選択された会議の会議IDを取得する(ステップS31)。そして、配置情報格納部23を参照し、取得された会議IDに関連付けられた配置情報を配置情報格納部23から読み出す(ステップS33)。そして、読み出した配置情報に基づいたシートの位置、大きさ(回転操作ができる場合は傾き角度を含む)で、ワークエリア51にシートを再現表示する(ステップS35)。
図7に配置情報格納部が格納するデータの例を示している。配置情報は、それが記憶された時点毎に固有のID(配置ID)を有している。その時点でワークエリア51に表示されていたシートは共通の配置IDを有する。さらに、配置情報が格納された日時を含む。そして、シート毎にシートの位置、大きさ、傾きの少なくとも何れかを示すパラメータを含んでいる。さらに、シートの元になる資料データを特定するパラメータを含む。図7に示す例は、シートの位置と大きさを表す対角座標を格納する。図7に示す例においては、説明を単純にするためシートはすべて矩形で、回転操作には対応しないものとしている。よって、各シートの位置と大きさを表す対角座標と、元の資料データを表すファイル名を配置情報としている。異形のシートや回転操作に対応する場合は、それに伴ってより複雑な配置情報を格納する。
さらに、制御部35は、ドロアー格納部27を参照して引出しエリア53にドロアーを表示する(ステップS37)。
以上で述べた図6の各処理は起動時の表示処理を示す。起動時の表示処理が終了したら、制御部35は、ワークエリア51に表示されたシート、引出しエリア53に表示されたドロアー、ホームメニューや「閉じる」ボタンに対する操作を受付ける。
例えばユーザーが、ドロアーを操作して新たな資料データを選択し、その資料データのアイコンをワークエリア51にドラッグアンドドロップする操作をしたら、制御部35はその操作に応答して以下の処理を行う。資料画像生成部37としての制御部35は、ドロアー格納部27選択された資料データのアドレスを取得して資料データを開く。そして、開かれた資料データを画像化し、画像化されたシートをワークエリア51に表示する(ステップS41)。
なお、図7はドロアー格納部27に格納されるデータの例を示している。図7に示す例では3つのドロアーがあり、それぞれの名称は「ドロアー1」、「ドロアー2」、「ドロアー3」である。この実施形態では、各ドロアーに対応付けられたファイルパスは、選択された主題に関係なく共通のものとしている。ドロアー格納部27は、それぞれのドロアーについて、ファイルが格納されているファイルフォルダーへのパスを格納する。
異なる態様として、ドロアー格納部27が会議(主題)に応じたドロアーの構成を有してもよい。詳細は別の実施形態で述べるが(実施の形態3参照)、図7で鎖線の枠で示す部分は、それぞれの会議に対応して、各ドロアーに異なる資料データの参照先が格納される場合の構成を示している。
図6の説明に戻る。
ユーザーがワークエリア51に表示されたシートを選択し、例えばドラッグして移動させる操作、ズームして拡大縮小する操作、回転して傾きを変える操作を行った場合、制御部35は、次の処理を行う。即ち、その操作に対応してワークエリア51に表示されたシートを移動、拡大縮小、回転させる(ステップS43)。
また、シートを選択せずにユーザーがワークエリア51に表示されたシートの領域を指先や電子ペンのペン先で触れたままその位置を移動させたら、制御部35は、その位置に対応する手書きストロークをワークエリア51に描画する(ステップS45)。なお、資料画像と手書きストロークとは異なるレイヤーの画像として管理される。
ユーザーは、空白のシートをワークエリア51に表示し、そのシートの領域に手書きストロークを描画することもできる。このような操作によって、手書きメモの代わりにシートを用いることができる。
会議中、ユーザーはこれらの機能を用いてワークエリア51にシートを表示させたり、シートの配置を変更したり、シートに手書きストロークを描画したりできる。
さらに、ユーザーはホームメニューにタッチしてホームメニューを実行することもできる。ホームメニューは、複数のメニューを含み、その中に「会議管理」を含む。起動後に「会議管理」が選択された場合、制御部35は、ワークエリア51に表示されている会議のレイアウトを配置情報格納部23に格納する。会議を終了する場合に、ユーザーは、ホームメニューから「会議管理」を選択してレイアウトを記憶させることができる。
さらに、ユーザーがドロアーの構成を編集する操作、例えばドロアーに資料データを追加する操作、資料データをドロアーから削除する操作を行ったら、その操作に応じてドロアー格納部27にアクセスして構成を変更する(ステップS47)。この実施形態ではどの会議にも共通のドロアー構成である。
ホームメニューで「会議管理」が選択されたら(ステップS51)、制御部35は、次の処理を行う。その時点のレイアウト、即ち、ワークエリア51に表示されているシートの配置(位置、大きさ、回転操作ができる場合は傾き)を、格納した日時と共に配置情報格納部23に格納する。そして、その時点の配置情報を異なる時点の配置情報と区別するために新たな配置IDを付与する。さらに、その配置IDを、対応するレイアウトで表示を行った会議と紐付けて、主題格納部25に格納する。具体的には、配置IDを会議IDと紐付けて主題格納部25に格納する(ステップS53)。
以上が、表示処理の概要である。
≪終了、保存時の表示処理≫
図8は、この実施形態において会議の終了時に制御部35が実行する処理の例を示すフローチャートである。図6において、ステップS53の処理に相当する部分を含む。図8に沿って、表示の終了時における処理を述べる。
図8に示すように、会議の終了時にユーザーがホームメニューにタッチすると(ステップS101)、制御部35は、ホームメニューを表示部13に表示する(ステップS103)。
ホームメニューの項目のうち「会議管理」が選択されたら(ステップS105のYes)、制御部35は、会議管理画面を表示部13に表示する(ステップS107)。ユーザーが、会議管理画面に表示された既存の会議の何れかを選択したら(ステップS109)、制御部35は、選択された会議についての次の操作を待つ。
図5に示すように会議管理画面には、「会議を保存」ボタン74がある。ユーザーがそれを選択した場合(ステップS111)、制御部35は、ワークエリア51に表示されているシートの配置を最新の配置情報として、配置情報格納部23のうち選択された会議に対応する領域に保存して(ステップS113)処理を終了する。
さらに、会議管理画面には、「レイアウトを追加」ボタン76がある。既存の会議が選択された状態でユーザーがそのボタンをタッチした場合(ステップS111のNoを経てS115)、制御部35は、現在選択されている会議のレイアウトの履歴一覧を提供するレイアウト管理画面を表示部13に表示する(ステップS117)。レイアウト管理画面に表示されたレイアウトのうち、何れかのレイアウトが選択されたら(ステップS119のYes)、制御部35は次の処理を行う。即ち、選択された配置IDを有する配置情報を配置情報格納部23から削除し、代わって現在のレイアウトに係る配置情報を追加する(ステップS121)。言い換えれば、選択された配置情報を現時点の配置情報に置換する。そして、処理を終了する。
レイアウト管理画面には、現在選択されている会議でなく、別の会議のレイアウトの履歴を表示する選択肢がある。その選択肢が選択された場合(ステップS119のNoを経てS123)、制御部35は、会議管理画面を表示部13に表示して(ステップS125)、別の会議の選択を受け付ける(ステップS127)。何れかの会議が選択されたら、その会議に係るレイアウト管理画面を表示する。その会議の何れかのレイアウトが選択されたら、制御部35は、選択された会議の選択された配置IDに係る配置情報を現在のレイアウトに係る配置情報で更新する(ステップS129)。そして、処理を終了する。
また、会議管理画面で、既存の会議が選択されていない状態で「レイアウトを追加」ボタン76がタッチされたら(ステップS109のNoを経てS131)、制御部35は、すべての会議のレイアウト管理画面を表示部13に表示する(ステップS133)。そして、何れかの会議の何れかのレイアウトが選択されるのを待つ(ステップS135)。選択がなされたら(ステップS135のYes)、制御部35は、選択された画面構成を現在選択されている会議に追加して(ステップS137)処理を終了する。
また、表示部13には、引出し「閉じる」ボタン56が表示されている。「閉じる」ボタン56は、引出しエリア53の右隣に表示される。「閉じる」ボタン56がタッチされたら(ステップS101のNoを経てS141)、制御部は会議終了のダイアログボックスを表示部13に表示する。会議終了のダイアログボックスは、「現在の会議を保存して終了します。」のメッセージと「OK」、「キャンセル」の選択肢で構成される。「OK」が選択されたら、ルーチンはステップS121へ進み、現在の会議について直近のレイアウトを配置情報格納部に追加して処理を終了する。
以上が、終了時の処理である。
≪主題による管理のまとめ≫
図9は、この実施形態に係る表示処理のポイントを示す説明図である。図9に「会議管理ダイアログボックス」で示すように、ユーザーは会議管理画面を用いて、会議を選択できる。図9に「配置情報格納部」で示すように、選択された会議には、配置情報格納部の配置情報が関連付けられている。直近のレイアウトだけでなく、過去のレイアウトも格納されている。会議とレイアウトとの関連付けは、主題格納部に各会議IDに対応する配置IDを格納することで実現される。
ユーザーが会議管理画面で会議を選択すると、その会議に関連付けられた直近のレイアウトに基づいて、ワークエリア51に1以上のシートが再現表示される。
会議が終了したら、終了時のレイアウトが最新のレイアウトとして格納される。あるいは、図8の終了時の表示処理で述べたように、過去の履歴と置換したり、別の会議にレイアウトを保存したり、別の会議のレイアウトをコピーして追加したりできる。
(実施の形態2)
実施の形態1では、会議管理画面にそれぞれの会議について表示された資料画像の推移が一覧できるようにサムネイルが表示されるが、それらのサムネイルは会議を選択するための単なる参考情報である。
それに対してこの実施形態は、資料画像の推移を示すサムネイルを用いて、どの時点のレイアウトを再現表示するかをユーザーが選択可能である。
図7に示すように、配置情報格納部23は、それぞれの会議について直近の時点の配置情報だけでなく、過去の時点の配置情報を格納している。
この実施形態で、制御部35は、会議管理画面の履歴のサムネイルのうちどのサムネイルがタッチされたかを認識し、そのサムネイルに対応する配置IDを取得する。そして、配置情報格納部23に格納された配置情報の中から、その配置IDを有する配置情報を参照してワークエリア51にシートを再現表示する。
ユーザーは、会議管理画面のサムネイルの何れにタッチするかを選択する。それによって、どの会議のどの時点のサムネイルを再現表示させるかを指示できる。直近の画面配置を再現表示したければ、直近の時点のサムネイルをタッチすればよいし、過去の画面配置を再現表示したければ、過去の時点のサムネイルをタッチすればよい。
(実施の形態3)
実施の形態1では、ドロアーの構成は選択された主題に関係なく共通のものである。それに対してこの実施形態は、選択された主題毎に、画面レイアウトだけでなくドロアーの構成も再現表示する。
そのために、この実施形態においては図7の鎖線の枠部分を含むようにドロアー格納部27が構成されており、それぞれの会議に対応してドロアーの名称とパスを格納する。
図10は、この実施形態において制御部が実行する表示処理の概要を示すフローチャートであり、図6に対応している。よって、実施の形態1に係る図6と異なる処理についてのみ説明する。
図10で、起動後、会議管理画面で新規会議が選択された場合(ステップS15のNo)、制御部35は次の処理を行う。空白のワークエリアを表示した後に新規のドロアー構成、即ち、どのファイルフォルダーにも対応付けられていないドロアーを引出しエリア53に表示する(ステップS25)。
一方、既存の会議が選択された場合(ステップS15のYes)、制御部35は次の処理を行う。即ち、選択された会議の画面レイアウトをワークエリア51に再現表示した後、ドロアー格納部27を参照してその会議IDに対応するドロアー構成を引出しエリア53に再現表示する(ステップS37)。
また、起動後、ユーザーがドロアーの構成を編集する操作、例えばドロアーに資料データを追加する操作、資料データをドロアーから削除する操作を行ったら、その操作に応じて制御部35は、次の処理を行う。ドロアー格納部27にアクセスして、選択されている会議IDに対応するドロアー構成を変更する(ステップS47)。この実施形態ではどの会議毎のドロアー構成である。
なお、ドロアー構成の変更操作が行われる毎にドロアー格納部27の対応する会議IDを更新するので、会議終了時にドロアー構成を更新する必要はない。
(実施の形態4)
実施の形態1では、表示部13が1つの表示装置であるが、複数の表示装置を並べて1つの表示部13を構成する場合がある。いわゆるマルチディスプレイと呼ばれる対応である。複数の表示装置を隙間なく並べて疑似的に1つの大きな画面を構成する場合もあるが、物理的に離れた場所に複数の表示装置があってもそれらが隣り合っているかのように表示を行う態様もある。いずれの場合もこの実施形態のマルチディスプレイに含まれる。
実施の形態1〜3で、ユーザーは会議管理画面で1つの会議あるいは1つのサムネイル(ある時点の画面レイアウト)だけを選択できるものとしている。それに対してこの実施形態は、ユーザーが複数の会議あるいは複数のサムネイルを選択できる。
選択可能な会議あるいはサムネイルの上限は、マルチディスプレイを構成する表示装置の数を超えない。
制御部35は、選択された複数の画面レイアウトのそれぞれを異なる表示装置に1画面で表示する。即ち、選択された1つの画面レイアウトについて、複数の表示装置に分割表示せずに1つの表示装置に表示する。
(実施の形態5)
実施の形態1〜4では、会議管理画面でユーザーが会議を選択する際の参考として、サムネイル化された画面レイアウトの履歴を表示した。この実施形態では、履歴のレイアウトに代えて、あるいはそれに加えて表示する参考情報をいくつか挙げる。
図11は、この実施形態において、会議管理画面の例を示す説明図である。会議は、遠隔の3拠点を通信で結んだテレビ会議である。図11に示すように、会議管理画面には、会議名称が「IoSP定例」、「TD Gr.定例」、「SSDI定例」の3つの会議が表示され、さらに右端のスクロールバーを用いて下方へスクロールすると図11では隠れている他の会議が表示される。
最も上に表示されている「IoSP定例」を例に会議の参考情報を説明する。符号61を付した左端の欄は、会議の名称「IoSP定例」と、その会議の直近の開催日時「2016/06/14」、会議に要した時間「1h53m」(1時間53分)が表示されている。
符号63を付した右隣の欄には、会議の参加者の人数を拠点別に示しており、そのうち、拠点別の発言数の割合と、発言数の多い上位3名の氏名と、各人の発言の会議全体に占める割合が表示されている。この参考情報は、参加者各人が異なるマイクロフォンを使用し、各マイクロフォンの音声記録を分析することによって導き出される。
符号65を付したさらに右隣の欄は、会議で使用された代表的な画像や資料のサムネイルを表示している。図11では複数のサムネイルを表示しているが、表示方法の別の例として、1つの表示領域に複数のサムネイルをスライドショーのように連続的に切り替えて表示してもよい。
符号67を付したさらに右隣の欄は、会議の発言の中や資料データで多用されたキーワードを抽出して表示している。発言の中からキーワードを抽出する処理は、例えば音声認識技術を用いて実現できる。
符号69を付した右端の欄は、会議の推移に伴って盛り上がり度を示すグラフである。縦軸が盛上がり度で、横軸は時間である。グラフの横軸の下方には、抽出されたキーワードが用いられた時間が時間軸に整合するように表示されている。また、会議中に新たな資料画像が表示されたタイミングを資料画像のアイコンで示している。
盛上がり度を示す曲線は、記録された音声の音量に基づくものである。即ち、推移情報生成部45として制御部35は、発言の音量が大きいときに会議が盛り上がっていると判断して盛り上がり度を示すグラフを生成する。
会議中に新たな資料画像が表示されると、画面レイアウトが変化する。よって、盛上がり度のグラフに重畳された資料画像のアイコンとアイコンの区間をユーザーがタッチして選択できるようにしてもよい。制御部35は、タッチされた区間に対応する画面レイアウトを符号65の欄に表示してもよい。
図11に示すように、画面配置の推移だけでなく、キーワードや盛上り度を表示することによって、ユーザーは会議の内容や会議の推移を容易に思い出し、適切な会議を選択することができる。
以上に述べたように、
(i)この発明による情報表示装置は、画像を同時に1以上表示する表示部と、前記表示部に表示されている画像の配置を表す画像毎の配置情報を、表示内容の記憶および再現に係る主題と紐付けて格納する記憶部と、表示部に再現すべき1以上の画像の配置を、前記主題について選択できるように主題別一覧を生成する一覧生成部と、前記主題別一覧を用いたユーザーによる主題の選択を受け付ける操作部と、選択された主題に紐付けられた配置情報に基づいて前記表示部に画像の配置を再現するレイアウト再現部とを備えることを特徴とする。
この発明において、資料データは、いわゆるプレゼンテーションソフト、文書作成ソフト、表計算ソフト、ドローイングソフト、テキストエディタなどのソフトウェアで作成されたさまざまな種類の文書(画像を含んでもよい)のデータファイルである。その具体的な態様の一例は、テキストエディタで作成されたテキストデータである。また、例えば前述のテキストデータがPDF形式に変換されたPDFデータである。資料データは、対応するアプリケーションソフトウェアを用いて開くことができる。
一方、資料画像(シートともいう)は、前述の資料データが画像に変換された画像データである。元の資料データに紐付けられているものの単なる画像データであるので、資料画像自体は表示の移動、拡大縮小、回転ができる程度である。例えば、ページ送り等の要求に対応するには元の資料データを開いて次ページを画像化し、それを表示部に表示されている現在の資料画像と置換する処理が必要である。
また、配置情報は、表示部に資料画像の表示を再現するための幾何学的属性である。例えば、資料画像の位置、大きさ、傾きである。ここで、常に同一の表示部に表示を再現することだけを考えるのであれば、それぞれの資料画像について単に絶対的な位置、大きさおよび傾きを記憶すれば足りる。しかし、異なる大きさや異なる縦横比の表示部に表示を再現することを考慮すると、例えば、表示部の縦および横に対する資料画像の縦および横の比を属性とするといったような工夫がなされたものを配置情報としてもよい。
記憶部は、少なくとも一部がフラッシュメモリやハードディスク装置等の不揮発性の記憶装置であって、過去のある時点において表示部に表示された資料画像の配置を記憶できる。
また、サムネイルは画像や文字を縮小したものである。
なお、表示を行う部分と情報処理を行う部分は通信等で接続された機能的に一体であればよく、物理的に必ずしも一体である必要はない。
さらに、この発明の好ましい態様について説明する。
(ii)前記一覧生成部は、一つの主題について過去のある時点の画像の配置をユーザーが選択できるように主題毎に画像の配置の履歴一覧を生成し、前記レイアウト再現部は、前記操作部が受け付けたどの主題のどの時点の画面を再現するかの選択に基づいて前記表示部に画像の配置および表示内容を再現してもよい。
このようにすれば、ユーザーは異なる主題に係る画像を他の主題に係る画像と容易に区別でき、どの主題のどの時点の画面を再現するかを選択して対応する画像の配置および表示内容を表示部上に容易に再現できる。
(iii)前記主題は、会議、講義、講演、授業またはプレゼンテーションの論題に係るものであってもよい。あるいは、それらに類するものであってもよい。
(iv)前記画像の元のデータである資料データをユーザーが選択できるように表示するドロアー管理部をさらに備え、前記記憶部は、資料データの格納先を示すアドレス情報を1以上の資料データについてまとめて格納し、前記ドロアー管理部は、まとめて格納された前記アドレス情報の単位でユーザーが資料データを選択できるように前記単位を前記表示部に表示し、その単位の何れかが選択された場合に選択された単位に属する資料データをユーザーがさらに選択できるように前記表示部に表示し、いずれかの資料データが選択された場合にその資料データを資料画像に画像化して前記表示部に表示してもよい。
このようにすれば、ユーザーはある主題についての過去のある時点における資料画像の配置を容易に再現できるだけでなく、例えばある主題を単位として、まとめて格納された資料データの中から何れかを選択して対応する資料画像を表示部に表示させることができる。
(v)前記表示部は、複数の表示装置が並んで構成され、前記操作部は、一覧表示された選択肢のうち複数の選択を受付け、前記レイアウト再現部は、選択されたそれぞれの選択肢に対応する画面を異なる表示装置に再現してもよい。
このようにすれば、複数の表示装置が並んで構成されるいわゆるマルチディスプレイの構成において、それぞれのディスプレイに異なる選択肢に対応する画面を再現表示させることができる。ここで、異なる選択肢は、例えば異なる主題の画面であってもよいし、例えば同じ主題の異なる時点の画面であってもよい。
(vi)ある主題についての音声および資料の文書の少なくとも何れかに基づいてキーワードを抽出するキーワード抽出部をさらに備え、前記一覧生成部は、抽出されたキーワードが付加された主題別一覧を生成してもよい。
このようにすれば、主題別一覧を用いた主題の選択に際し、ユーザーは主題別一覧に付加されたキーワードを参考にして適切な主題を容易に見出すことができる。
(vii)ある主題についての推移に関する推移情報を生成する推移情報生成部をさらに備え、前記一覧生成部は、生成された推移情報が付加された主題別一覧を生成してもよい。
このようにすれば、主題別一覧を用いた主題の選択に際し、ユーザーは主題別一覧に付加された推移情報を参考にして適切な主題を容易に見出すことができる。
この発明の好ましい態様には、上述した複数の態様のうちの何れかを組み合わせたものも含まれる。
前述した実施の形態の他にも、この発明について種々の変形例があり得る。それらの変形例は、この発明の範囲に属さないと解されるべきものではない。この発明には、請求の範囲と均等の意味および前記範囲内でのすべての変形とが含まれるべきである。
11:情報表示装置、 12:通信部、 13:表示部、 14:マイクロフォン、 15:操作部、 16:カメラ、 17:スピーカー、 18:トレイ、 19:取っ手
21:記憶部、 23:配置情報格納部、 25:主題格納部、 27:ドロアー格納部
31:一覧生成部、 33:履歴一覧生成部、 35:制御部、 37:資料画像生成部、 39:レイアウト再現部、 41:ドロアー管理部、 43:キーワード抽出部、 45:推移情報生成部
51:ワークエリア、 52:資料画像、 53:引出しエリア、 54:ドロアー、 55:ホームメニュー、 56:「閉じる」ボタン

Claims (7)

  1. 画像を同時に1以上表示する表示部と、
    前記表示部に表示されている画像の配置を表す画像毎の配置情報を、表示内容の記憶および再現に係る主題と紐付けて格納する記憶部と、
    表示部に再現すべき1以上の画像の配置を、前記主題について選択できるように主題別一覧を生成する一覧生成部と、
    前記主題別一覧を用いたユーザーによる主題の選択を受け付ける操作部と、
    選択された主題に紐付けられた配置情報に基づいて前記表示部に画像の配置を再現するレイアウト再現部とを備える情報表示装置。
  2. 前記一覧生成部は、一つの主題について過去のある時点の画像の配置をユーザーが選択できるように主題毎に画像の配置の履歴一覧を生成し、
    前記レイアウト再現部は、前記操作部が受け付けたどの主題のどの時点の画面を再現するかの選択に基づいて前記表示部に画像の配置および表示内容を再現する請求項1に記載の情報表示装置。
  3. 前記主題は、会議、講義、講演、授業またはプレゼンテーションの論題に係るものである請求項1または2に記載の情報表示装置。
  4. 前記画像の元のデータである資料データをユーザーが選択できるように表示するドロアー管理部をさらに備え、
    前記記憶部は、資料データの格納先を示すアドレス情報を1以上の資料データについてまとめて格納し、
    前記ドロアー管理部は、まとめて格納された前記アドレス情報の単位でユーザーが資料データを選択できるように前記単位を前記表示部に表示し、その単位の何れかが選択された場合に選択された単位に属する資料データをユーザーがさらに選択できるように前記表示部に表示し、いずれかの資料データが選択された場合にその資料データを資料画像に画像化して前記表示部に表示する請求項1〜3の何れか一つに記載の情報表示装置。
  5. 前記表示部は、複数の表示装置が並んで構成され、
    前記操作部は、一覧表示された選択肢のうち複数の選択を受付け、
    前記レイアウト再現部は、選択されたそれぞれの選択肢に対応する画面を異なる表示装置に再現する請求項1〜4の何れか一つに記載の情報表示装置。
  6. ある主題についての音声および資料の文書の少なくとも何れかに基づいてキーワードを抽出するキーワード抽出部をさらに備え、
    前記一覧生成部は、抽出されたキーワードが付加された主題別一覧を生成する請求項1に記載の情報表示装置。
  7. ある主題についての推移に関する推移情報を生成する推移情報生成部をさらに備え、
    前記一覧生成部は、生成された推移情報が付加された主題別一覧を生成する請求項1に記載の情報表示装置。
JP2016211668A 2016-10-28 2016-10-28 情報表示装置 Active JP6865015B2 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2016211668A JP6865015B2 (ja) 2016-10-28 2016-10-28 情報表示装置
CN201711029549.3A CN108021311A (zh) 2016-10-28 2017-10-27 信息显示装置
US15/795,432 US20180121084A1 (en) 2016-10-28 2017-10-27 Information display device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2016211668A JP6865015B2 (ja) 2016-10-28 2016-10-28 情報表示装置

Publications (2)

Publication Number Publication Date
JP2018073096A true JP2018073096A (ja) 2018-05-10
JP6865015B2 JP6865015B2 (ja) 2021-04-28

Family

ID=62022344

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016211668A Active JP6865015B2 (ja) 2016-10-28 2016-10-28 情報表示装置

Country Status (3)

Country Link
US (1) US20180121084A1 (ja)
JP (1) JP6865015B2 (ja)
CN (1) CN108021311A (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023079602A1 (ja) * 2021-11-02 2023-05-11 ハイラブル株式会社 音声分析装置及び音声分析方法
US11687312B2 (en) 2021-03-19 2023-06-27 Ricoh Company, Ltd. Display apparatus, data sharing system, and display control method

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7035840B2 (ja) * 2018-06-19 2022-03-15 株式会社リコー 情報処理装置、情報処理システム及び遠隔共有方法
US11218520B2 (en) 2019-06-25 2022-01-04 Ricoh Company, Ltd. Information processing apparatus, information processing system, and information processing method

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007280235A (ja) * 2006-04-11 2007-10-25 Fuji Xerox Co Ltd 電子会議支援プログラム、電子会議支援方法、電子会議システムにおける情報端末装置
JP2011244319A (ja) * 2010-05-20 2011-12-01 Konica Minolta Business Technologies Inc 電子会議システムおよび電子会議システムにおける制御方法
JP2012049969A (ja) * 2010-08-30 2012-03-08 Ricoh Co Ltd 電子会議装置、情報表示方法、プログラム
JP2013039701A (ja) * 2011-08-12 2013-02-28 Ricoh Co Ltd 電子黒板装置、画面表示方法およびプログラム
JP2015005005A (ja) * 2013-06-19 2015-01-08 シャープ株式会社 コンテンツ表示装置
JP2016105241A (ja) * 2014-12-01 2016-06-09 株式会社リコー 画像処理装置、画像処理方法、及びプログラム
JP2016180961A (ja) * 2015-03-25 2016-10-13 シャープ株式会社 表示システム、及び、表示方法

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040001106A1 (en) * 2002-06-26 2004-01-01 John Deutscher System and process for creating an interactive presentation employing multi-media components
WO2004097599A2 (en) * 2003-04-28 2004-11-11 Sony Pictures Entertainment Inc. Rich media publishing
US7590939B2 (en) * 2005-06-24 2009-09-15 Microsoft Corporation Storage and utilization of slide presentation slides
US8762880B2 (en) * 2007-06-29 2014-06-24 Microsoft Corporation Exposing non-authoring features through document status information in an out-space user interface
US8775918B2 (en) * 2008-10-07 2014-07-08 Visual Software Systems Ltd. System and method for automatic improvement of electronic presentations
US20100218100A1 (en) * 2009-02-25 2010-08-26 HNTB Holdings, Ltd. Presentation system
US8471781B2 (en) * 2009-03-17 2013-06-25 Litera Technologies, LLC System and method for the auto-detection and presentation of pre-set configurations for multiple monitor layout display
JP2013009299A (ja) * 2011-05-25 2013-01-10 Panasonic Corp 画像編集装置、及び画像編集方法
JP5818172B2 (ja) * 2013-06-21 2015-11-18 コニカミノルタ株式会社 情報表示装置及び表示制御プログラム並びに表示制御方法
TWI669652B (zh) * 2013-07-12 2019-08-21 日商新力股份有限公司 資訊處理裝置、資訊處理方法及電腦程式
US20150143210A1 (en) * 2013-11-18 2015-05-21 Microsoft Corporation Content Stitching Templates
CN105302285B (zh) * 2014-08-01 2019-03-01 福州瑞芯微电子股份有限公司 多屏显示方法、设备及***
KR20160026317A (ko) * 2014-08-29 2016-03-09 삼성전자주식회사 음성 녹음 방법 및 장치

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007280235A (ja) * 2006-04-11 2007-10-25 Fuji Xerox Co Ltd 電子会議支援プログラム、電子会議支援方法、電子会議システムにおける情報端末装置
JP2011244319A (ja) * 2010-05-20 2011-12-01 Konica Minolta Business Technologies Inc 電子会議システムおよび電子会議システムにおける制御方法
JP2012049969A (ja) * 2010-08-30 2012-03-08 Ricoh Co Ltd 電子会議装置、情報表示方法、プログラム
JP2013039701A (ja) * 2011-08-12 2013-02-28 Ricoh Co Ltd 電子黒板装置、画面表示方法およびプログラム
JP2015005005A (ja) * 2013-06-19 2015-01-08 シャープ株式会社 コンテンツ表示装置
JP2016105241A (ja) * 2014-12-01 2016-06-09 株式会社リコー 画像処理装置、画像処理方法、及びプログラム
JP2016180961A (ja) * 2015-03-25 2016-10-13 シャープ株式会社 表示システム、及び、表示方法

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11687312B2 (en) 2021-03-19 2023-06-27 Ricoh Company, Ltd. Display apparatus, data sharing system, and display control method
WO2023079602A1 (ja) * 2021-11-02 2023-05-11 ハイラブル株式会社 音声分析装置及び音声分析方法

Also Published As

Publication number Publication date
US20180121084A1 (en) 2018-05-03
CN108021311A (zh) 2018-05-11
JP6865015B2 (ja) 2021-04-28

Similar Documents

Publication Publication Date Title
US10866715B2 (en) Single action selection of data elements
KR102345993B1 (ko) 터치 감응형 이차 디스플레이에서 사용자 인터페이스 제어부들을 동적으로 제공하기 위한 시스템들, 디바이스들, 및 방법들
US10133475B2 (en) Portable electronic device configured to present contact images
CN108958608B (zh) 电子白板的界面元素操作方法、装置及交互智能设备
CN111339032B (zh) 管理具有多页面的文件夹的设备、方法和图形用户界面
US7650575B2 (en) Rich drag drop user interface
CN107426403B (zh) 移动终端
JP4951128B1 (ja) 端末装置およびアイコン管理方法
CN105706428B (zh) 提供消息的方法以及支持所述方法的用户设备
JP6865015B2 (ja) 情報表示装置
WO2022062070A1 (en) Software clipboard
US20130002796A1 (en) System and Method For Incorporating Content In A Videoconferencing Environment Without A Personal Computer
CN114766015A (zh) 用于与对应于应用程序的用户界面对象进行交互的设备、方法和图形用户界面
JP6271125B2 (ja) 電子機器、表示方法、およびプログラム
JP2010237722A (ja) フォトアルバムコントローラ
JP4419056B2 (ja) 情報処理装置および方法、並びにプログラム
JP4565317B2 (ja) 情報処理装置および方法、並びにプログラム
WO2024077613A1 (zh) 一种菜单展示方法及智能显示设备
WO2016119453A1 (zh) 一种在文本中***多媒体对象的方法、装置及终端
DE202014004477U1 (de) Vorrichtung und grafische Benutzerschnittstelle zum Verwalten von Ordnern mit mehreren Seiten
JP2008158782A (ja) 表示装置、表示方法、プログラム
JP2005228087A (ja) 情報処理装置および方法、並びにプログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190920

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20201109

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20201117

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210107

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210316

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210405

R150 Certificate of patent or registration of utility model

Ref document number: 6865015

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150