JP6862952B2 - 情報処理システム、情報処理装置、情報処理プログラム及び情報処理方法 - Google Patents
情報処理システム、情報処理装置、情報処理プログラム及び情報処理方法 Download PDFInfo
- Publication number
- JP6862952B2 JP6862952B2 JP2017050890A JP2017050890A JP6862952B2 JP 6862952 B2 JP6862952 B2 JP 6862952B2 JP 2017050890 A JP2017050890 A JP 2017050890A JP 2017050890 A JP2017050890 A JP 2017050890A JP 6862952 B2 JP6862952 B2 JP 6862952B2
- Authority
- JP
- Japan
- Prior art keywords
- important matter
- information
- data
- important
- information processing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000010365 information processing Effects 0.000 title claims description 49
- 238000003672 processing method Methods 0.000 title claims description 4
- 238000000605 extraction Methods 0.000 claims description 45
- 238000000034 method Methods 0.000 claims description 23
- 239000000284 extract Substances 0.000 claims description 15
- 230000005540 biological transmission Effects 0.000 claims description 10
- 230000004044 response Effects 0.000 claims description 7
- 238000010586 diagram Methods 0.000 description 18
- 230000006870 function Effects 0.000 description 13
- 238000006243 chemical reaction Methods 0.000 description 4
- 238000004891 communication Methods 0.000 description 3
- 239000004065 semiconductor Substances 0.000 description 3
- 230000000694 effects Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000003384 imaging method Methods 0.000 description 2
- 238000010801 machine learning Methods 0.000 description 2
- 239000003550 marker Substances 0.000 description 2
- 238000012015 optical character recognition Methods 0.000 description 2
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 1
- 238000013473 artificial intelligence Methods 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/906—Clustering; Classification
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/5866—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using information manually generated, e.g. tags, keywords, comments, manually generated location and time information
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04842—Selection of displayed objects or displayed text elements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
- G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/06—Transformation of speech into a non-audible representation, e.g. speech visualisation or speech processing for tactile aids
- G10L21/10—Transforming into visible information
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/16—Sound input; Sound output
- G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Databases & Information Systems (AREA)
- Data Mining & Analysis (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Acoustics & Sound (AREA)
- Computational Linguistics (AREA)
- Library & Information Science (AREA)
- Quality & Reliability (AREA)
- Information Transfer Between Computers (AREA)
- Processing Or Creating Images (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Controls And Circuits For Display Device (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Description
以下に図面を参照して、第一の実施形態について説明する。図1は、第一の実施形態の情報処理システムのシステム構成の一例を示す図である。
以下に、図面を参照して、第二の実施形態について説明する。第二の実施形態では、サーバ装置300が電子黒板200から随時受信する音声データに基づき重要事項情報を抽出する点が、第一の実施形態と相違する。よって、以下の第二の実施形態の説明では、第一の実施形態の説明との相違点についてのみ説明し、第一の実施形態と同様の機能構成を有するものには、第一の実施形態の説明で用いた符号を付与し、その説明を省略する。
以下に、図面を参照して、第三の実施形態について説明する。第三の実施形態では、サーバ装置300は、コンテンツデータと共に、参加者を特定する識別情報を受信する点が、第一の実施形態と相違する。よって、以下の第三の実施形態の説明では、第一の実施形態の説明との相違点についてのみ説明し、第一の実施形態と同様の機能構成を有するものには、第一の実施形態の説明で用いた符号を付与し、その説明を省略する。
200、200A 電子黒板
210 表示制御部
220 入力部
230 集音部
240 ページ記録部
250、340 送信部
260、350 受信部
270 重要事項取得部
280 重要事項更新部
290 カード読取部
295 カード情報対応付け部
300、300A サーバ装置
310 コンテンツデータベース
320 参照データベース
330、330A 重要事項データベース
360 音声認識部
370 コンテンツ格納部
380 重要事項抽出部
Claims (9)
- 端末装置と、前記端末装置から、前記端末装置の表示装置に表示された画面のページを示すページデータと、前記端末装置において集音された音声データとを含むコンテンツデータを受信する情報処理装置とを有する情報処理システムであって、
重要事項とされる情報が格納された参照記憶部を参照し、前記コンテンツデータから前記重要事項とされる情報と対応する重要事項情報を抽出する重要事項抽出部と、
抽出された前記重要事項情報を重要事項記憶部に格納する重要事項格納部と、
前記重要事項情報の表示要求を受けて、前記重要事項記憶部に格納された前記重要事項情報を表示装置に表示させる表示制御部と、有し、
前記重要事項抽出部は、
音声認識機能によって前記音声データから変換されテキストデータに、前記重要事項とされる情報であるキーワードが含まれるとき、
前記ページデータから、前記音声データが集音された時刻を含む所定の時間帯において入力された描画データを、前記重要事項情報として抽出する、情報処理システム。 - 前記重要事項抽出部は、
前記ページに前記重要事項とされる情報である画像が存在するか否かを判定し、
前記画像が存在するとき、前記ページデータにおける前記画像を含む所定領域の画像データと、前記所定領域に入力された描画データとを、重畳した画像データを、前記重要事項情報として抽出する、請求項1記載の情報処理システム。 - 前記重要事項抽出部は、
前記ページデータから、前記音声データが集音された時刻を含む所定の時間帯において入力された描画データと、前記ページデータにおいて前記描画データと重なっている画像の画像データと、を前記重要事項情報として抽出する、請求項1又は2記載の情報処理システム。 - 前記重要事項情報を更新する重要事項更新部を有し、
前記表示制御部は、
前記重要事項情報の表示要求を受けて、前記重要事項情報と、前記重要事項情報の抽出元となるページのページデータとを表示させ、
前記重要事項更新部は、
表示されたページにおいて領域が指定されたとき、前記抽出元のページデータのうち、指定された前記領域内の画像データを新たな前記重要事項情報とする、請求項2又は3の何れ一項に記載の情報処理システム。 - 前記端末装置と対応付けられたカード読取装置に翳されたカードのカード識別情報を読み取るカード読取部と、
前記カード識別情報と前記コンテンツデータとを対応付けるカード情報対応付け部と、を有し、
前記重要事項抽出部は、
前記重要事項情報が抽出されたコンテンツデータと対応付けられたカード識別情報を、前記重要事項情報と共に抽出する、請求項1乃至4の何れか一項に記載の情報処理システム。 - 前記端末装置は、
集音装置を有する電子黒板である、請求項1乃至5の何れか一項に記載の情報処理システム。 - 端末装置から、前記端末装置の表示装置に表示された画面のページを示すページデータと、前記端末装置において集音された音声データとを含むコンテンツデータを受信する情報処理装置であって、
重要事項とされる情報が格納された参照記憶部を参照し、前記コンテンツデータから前記重要事項とされる情報と対応する重要事項情報を抽出する重要事項抽出部と、
抽出された前記重要事項情報を重要事項記憶部に格納する重要事項格納部と、
前記重要事項情報の表示要求を受けて、前記重要事項記憶部に格納された前記重要事項情報を端末装置へ送信する送信部と、を有し、
前記重要事項抽出部は、
音声認識機能によって前記音声データから変換されテキストデータに、前記重要事項とされる情報であるキーワードが含まれるとき、
前記ページデータから、前記音声データが集音された時刻を含む所定の時間帯において入力された描画データを、前記重要事項情報として抽出する、情報処理装置。 - 端末装置と、前記端末装置から、前記端末装置の表示装置に表示された画面のページを示すページデータと、前記端末装置において集音された音声データとを含むコンテンツデータを受信する情報処理装置とを有する情報処理システムによる情報処理方法であって、前記情報処理システムが、
重要事項とされる情報が格納された参照記憶部を参照し、前記コンテンツデータから前記重要事項とされる情報と対応する重要事項情報を抽出し、
抽出された前記重要事項情報を重要事項記憶部に格納し、
前記重要事項情報の表示要求を受けて、前記重要事項記憶部に格納された前記重要事項情報を表示装置に表示させ、
前記重要事項情報を抽出する際に、
音声認識機能によって前記音声データから変換されテキストデータに、前記重要事項とされる情報であるキーワードが含まれるとき、
前記ページデータから、前記音声データが集音された時刻を含む所定の時間帯において入力された描画データを、前記重要事項情報として抽出する、情報処理方法。 - 端末装置から、前記端末装置の表示装置に表示された画面のページを示すページデータと、前記端末装置において集音された音声データとを含むコンテンツデータを受信する情報処理装置に、
重要事項とされる情報が格納された参照記憶部を参照し、前記コンテンツデータから前記重要事項とされる情報と対応する重要事項情報を抽出する処理と、
抽出された前記重要事項情報を重要事項記憶部に格納する処理と、
前記重要事項情報の表示要求を受けて、前記重要事項記憶部に格納された前記重要事項情報を端末装置に送信する処理と、を実行させ、
前記重要事項情報を抽出する処理において、
音声認識機能によって前記音声データから変換されテキストデータに、前記重要事項とされる情報であるキーワードが含まれるとき、
前記ページデータから、前記音声データが集音された時刻を含む所定の時間帯において入力された描画データを、前記重要事項情報として抽出する、プログラム。
Priority Applications (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017050890A JP6862952B2 (ja) | 2017-03-16 | 2017-03-16 | 情報処理システム、情報処理装置、情報処理プログラム及び情報処理方法 |
EP17822479.6A EP3596592B1 (en) | 2017-03-16 | 2017-12-07 | Information processing system, information processing program and information processing method |
CN201780088251.1A CN110431524B (zh) | 2017-03-16 | 2017-12-07 | 信息处理***、信息处理装置、信息处理程序和信息处理方法 |
US16/484,673 US11163835B2 (en) | 2017-03-16 | 2017-12-07 | Information processing system, information processing apparatus, information processing program and information processing method |
PCT/JP2017/044035 WO2018168114A1 (en) | 2017-03-16 | 2017-12-07 | Information processing system, information processing apparatus, information processing program and information processing method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017050890A JP6862952B2 (ja) | 2017-03-16 | 2017-03-16 | 情報処理システム、情報処理装置、情報処理プログラム及び情報処理方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2018155831A JP2018155831A (ja) | 2018-10-04 |
JP6862952B2 true JP6862952B2 (ja) | 2021-04-21 |
Family
ID=60857145
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017050890A Active JP6862952B2 (ja) | 2017-03-16 | 2017-03-16 | 情報処理システム、情報処理装置、情報処理プログラム及び情報処理方法 |
Country Status (5)
Country | Link |
---|---|
US (1) | US11163835B2 (ja) |
EP (1) | EP3596592B1 (ja) |
JP (1) | JP6862952B2 (ja) |
CN (1) | CN110431524B (ja) |
WO (1) | WO2018168114A1 (ja) |
Families Citing this family (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2020127095A (ja) * | 2019-02-01 | 2020-08-20 | 株式会社リコー | 情報処理システム、電子黒板、及びプログラム |
JP7395825B2 (ja) * | 2019-02-13 | 2023-12-12 | 株式会社リコー | 表示端末、共用システム、表示制御方法およびプログラム |
JP7205697B2 (ja) * | 2019-02-21 | 2023-01-17 | 株式会社リコー | 通信端末、共用システム、表示制御方法およびプログラム |
JP7413660B2 (ja) * | 2019-04-26 | 2024-01-16 | 株式会社リコー | 通信端末、共用システム、記憶制御方法およびプログラム |
US11625155B2 (en) * | 2020-03-23 | 2023-04-11 | Ricoh Company, Ltd. | Information processing system, user terminal, method of processing information |
US11349888B2 (en) | 2020-03-31 | 2022-05-31 | Ricoh Company, Ltd. | Text data transmission-reception system, shared terminal, and method of processing information |
JP7491025B2 (ja) | 2020-03-31 | 2024-05-28 | 株式会社リコー | 会議登録システム、管理システム、情報処理方法、及びプログラム |
Family Cites Families (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3185505B2 (ja) | 1993-12-24 | 2001-07-11 | 株式会社日立製作所 | 会議録作成支援装置 |
JP2006277167A (ja) * | 2005-03-29 | 2006-10-12 | Fuji Xerox Co Ltd | アノテーションデータ処理プログラム、装置、方法 |
US20070216660A1 (en) * | 2006-03-20 | 2007-09-20 | Steve Sposato | Methods and apparatus to implement electronic whiteboards |
JP4305672B2 (ja) * | 2006-11-21 | 2009-07-29 | ソニー株式会社 | 個人識別装置、個人識別方法、識別用辞書データの更新方法および識別用辞書データの更新プログラム |
JP5121367B2 (ja) * | 2007-09-25 | 2013-01-16 | 株式会社東芝 | 映像を出力する装置、方法およびシステム |
JP2012000865A (ja) * | 2010-06-17 | 2012-01-05 | Hitachi Ltd | 電子黒板装置 |
JP5606385B2 (ja) | 2011-04-28 | 2014-10-15 | 楽天株式会社 | サーバ装置、サーバ装置の制御方法、及び、プログラム |
JP5172997B2 (ja) * | 2011-07-15 | 2013-03-27 | シャープ株式会社 | 情報処理装置、操作画面表示方法、制御プログラムおよび記録媒体 |
KR102009423B1 (ko) * | 2012-10-08 | 2019-08-09 | 삼성전자주식회사 | 음성 인식을 이용한 미리 설정된 동작 모드의 수행 방법 및 장치 |
JP6115221B2 (ja) | 2013-03-21 | 2017-04-19 | カシオ計算機株式会社 | 情報処理装置、情報処理方法、およびプログラム |
JP2015061194A (ja) | 2013-09-18 | 2015-03-30 | キヤノン株式会社 | 情報処理装置、情報処理方法、及びプログラム |
JP6471614B2 (ja) * | 2015-05-29 | 2019-02-20 | 株式会社リコー | 通信端末、通信システム、通信制御方法、及びプログラム |
JP2017004252A (ja) * | 2015-06-10 | 2017-01-05 | 株式会社ウイル・コーポレーション | 画像情報処理システム |
US9641563B1 (en) | 2015-11-10 | 2017-05-02 | Ricoh Company, Ltd. | Electronic meeting intelligence |
-
2017
- 2017-03-16 JP JP2017050890A patent/JP6862952B2/ja active Active
- 2017-12-07 WO PCT/JP2017/044035 patent/WO2018168114A1/en unknown
- 2017-12-07 EP EP17822479.6A patent/EP3596592B1/en active Active
- 2017-12-07 US US16/484,673 patent/US11163835B2/en active Active
- 2017-12-07 CN CN201780088251.1A patent/CN110431524B/zh active Active
Also Published As
Publication number | Publication date |
---|---|
CN110431524A (zh) | 2019-11-08 |
CN110431524B (zh) | 2022-10-21 |
EP3596592B1 (en) | 2023-02-08 |
EP3596592A1 (en) | 2020-01-22 |
WO2018168114A1 (en) | 2018-09-20 |
JP2018155831A (ja) | 2018-10-04 |
US11163835B2 (en) | 2021-11-02 |
US20200034387A1 (en) | 2020-01-30 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6862952B2 (ja) | 情報処理システム、情報処理装置、情報処理プログラム及び情報処理方法 | |
JP5931829B2 (ja) | 合成画像作成アシスト装置、合成画像作成アシスト方法、合成画像作成アシストプログラムおよびその記録媒体 | |
JP2020149687A (ja) | レビューされた1つ以上の文書へのリンクを含む会議レビュー文書の生成 | |
JP5642889B2 (ja) | 入力された画像中に含まれるオブジェクトの収集をサポートするための方法、端末およびコンピュータ可読記録媒体 | |
CN101998107B (zh) | 信息处理装置、会议***和信息处理方法 | |
CN106933465A (zh) | 一种基于智能桌面的内容显示方法和智能桌面终端 | |
KR20070118038A (ko) | 정보처리 장치 및 정보처리 방법과 컴퓨터·프로그램 | |
JP2010141412A (ja) | 画像選択装置及びその制御方法 | |
US8457412B2 (en) | Method, terminal, and computer-readable recording medium for supporting collection of object included in the image | |
CN108364653B (zh) | 语音数据处理方法及处理装置 | |
CN110796180B (zh) | 一种基于人工智能的模型训练***与方法 | |
CN109857505A (zh) | 操作的执行方法、装置、终端及存储介质 | |
CN113241175B (zh) | 基于边缘计算的帕金森症辅助诊断***和方法 | |
US11017073B2 (en) | Information processing apparatus, information processing system, and method of processing information | |
JP2005345616A (ja) | 情報処理装置及び情報処理方法 | |
CN114866851B (zh) | 基于ai图像的短视频创作方法、智能电视及存储介质 | |
JP6772734B2 (ja) | 言語処理システム、言語処理装置、言語処理プログラム及び言語処理方法 | |
JP2010028486A (ja) | 撮像装置およびその制御方法 | |
JP2011187001A (ja) | 案内情報提供装置、案内情報提供方法、案内情報提供プログラム | |
KR101837963B1 (ko) | 웹툰 무단 복사 방지 및 추적시스템, 방법 및 프로그램 | |
JP7288491B2 (ja) | 情報処理装置、及び制御方法 | |
JP7183316B2 (ja) | 音声記録検索方法、コンピュータ装置およびコンピュータプログラム | |
JP2006107109A (ja) | 情報管理装置及び情報管理方法 | |
JP2023083867A (ja) | 情報処理装置、情報処理方法、プログラム | |
JP2006185342A (ja) | 情報処理装置および文字列分類方法およびプログラムおよび記録媒体 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200116 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20201208 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210204 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210302 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20210315 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6862952 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |