JP6912749B1 - Information processing equipment, information processing systems, and information processing programs - Google Patents

Information processing equipment, information processing systems, and information processing programs Download PDF

Info

Publication number
JP6912749B1
JP6912749B1 JP2020181919A JP2020181919A JP6912749B1 JP 6912749 B1 JP6912749 B1 JP 6912749B1 JP 2020181919 A JP2020181919 A JP 2020181919A JP 2020181919 A JP2020181919 A JP 2020181919A JP 6912749 B1 JP6912749 B1 JP 6912749B1
Authority
JP
Japan
Prior art keywords
information
image information
character image
unit
information processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2020181919A
Other languages
Japanese (ja)
Other versions
JP2022072461A (en
Inventor
剛史 坂巻
剛史 坂巻
和宏 武田
和宏 武田
友樹 矢井
友樹 矢井
裕幸 前川
裕幸 前川
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujitsu Client Computing Ltd
Original Assignee
Fujitsu Client Computing Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujitsu Client Computing Ltd filed Critical Fujitsu Client Computing Ltd
Priority to JP2020181919A priority Critical patent/JP6912749B1/en
Application granted granted Critical
Publication of JP6912749B1 publication Critical patent/JP6912749B1/en
Publication of JP2022072461A publication Critical patent/JP2022072461A/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Information Transfer Between Computers (AREA)
  • User Interface Of Digital Computer (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

【課題】ユーザーにより情報端末上に追加で書き込まれた文字画像情報の特定を容易する情報処理装置、情報処理システム及び情報処理プログラムを提供する。【解決手段】情報処理装置と、情報端末と、外部装置と、を備える情報処理システム100において、情報処理装置は、外部装置より、第1の文字画像情報を受信する第1の受信部と、第1の文字画像情報に情報の追加が可能な情報端末に、第1の文字画像情報を送信する送信部と、送信部より情報端末に送信された第1の文字画像情報に対応する第2の文字画像情報を、情報端末より受信する第2の受信部と、第1の文字画像情報と、第2の文字画像情報とで異なる領域があるか否かを判定する判定部と、判定部で異なる領域があると判定された場合に、異なる領域を表した画像情報と、第2の文字画像情報の表示領域内の前記異なる領域の位置を示す座標情報と、を第2の文字画像情報から抽出する抽出部と、を備える。【選択図】図2PROBLEM TO BE SOLVED: To provide an information processing device, an information processing system and an information processing program which facilitates identification of character image information additionally written on an information terminal by a user. In an information processing system 100 including an information processing device, an information terminal, and an external device, the information processing device includes a first receiving unit that receives first character image information from the external device. A transmission unit that transmits the first character image information to an information terminal capable of adding information to the first character image information, and a second unit that corresponds to the first character image information transmitted from the transmission unit to the information terminal. A second receiving unit that receives the character image information of the above from the information terminal, a determination unit that determines whether or not there is a different region between the first character image information and the second character image information, and a determination unit. When it is determined that there are different regions, the image information representing the different regions and the coordinate information indicating the positions of the different regions in the display region of the second character image information are provided as the second character image information. It is provided with an extraction unit for extracting from. [Selection diagram] Fig. 2

Description

本発明の実施形態は、情報処理装置、情報処理システム、および情報処理プログラムに関する。 Embodiments of the present invention relate to information processing devices, information processing systems, and information processing programs.

近年、紙書類に置き換えが可能な情報端末として、いわゆる「電子ペーパー」が普及している。電子ペーパーは手書きによる文字画像の入力を、例えばユーザーの操作する電子ペン等によって受け付ける。 In recent years, so-called "electronic paper" has become widespread as an information terminal that can be replaced with paper documents. The electronic paper accepts the input of a character image by handwriting by, for example, an electronic pen operated by a user.

特許第6764124号公報Japanese Patent No. 67642424

例えば、オンライン会議においては、会議資料の共有が問題となる。情報端末のスクリーンショット機能を使用して生成された文字画像情報が、ユーザーに送付され、資料として共有される場合もある。しかし、例えばあるユーザーにより、追加で情報が書き込まれた資料を共有したい場合、上記機能を再度使用する必要があり、手間が掛かる。このため、ユーザーにより情報端末上に追加で情報が書き込まれた領域の特定を容易にしたいという、要望がある。 For example, in an online meeting, sharing meeting materials becomes a problem. Text image information generated by using the screenshot function of the information terminal may be sent to the user and shared as a material. However, for example, if a user wants to share a material in which additional information is written, it is necessary to use the above function again, which is troublesome. Therefore, there is a demand that the user can easily identify the area in which the information is additionally written on the information terminal.

このような問題を解決するため、本発明は、複数の情報端末のうち、一つの情報端末上に情報が書き込まれた領域の特定を容易にすることで、文字画像情報の共有を容易に実現することが可能な情報処理装置、情報処理システム、および情報処理プログラムを提供することを目的とする。 In order to solve such a problem, the present invention facilitates sharing of character image information by facilitating identification of an area in which information is written on one information terminal among a plurality of information terminals. It is an object of the present invention to provide an information processing device, an information processing system, and an information processing program capable of performing information processing.

本発明の第1態様に係る情報処理装置は、外部装置より、第1の文字画像情報を受信する第1の受信部と、前記第1の文字画像情報に情報の追加が可能な情報端末に、前記第1の文字画像情報を送信する送信部と、前記送信部より前記情報端末に送信された前記第1の文字画像情報に対応する第2の文字画像情報を、前記情報端末より受信する第2の受信部と、前記第1の文字画像情報と、前記第2の文字画像情報とで異なる領域があるか否かを判定する判定部と、前記判定部で前記異なる領域があると判定された場合に、前記異なる領域を表した画像情報と、前記第2の文字画像情報の表示領域内の前記異なる領域の位置を示す座標情報と、を前記第2の文字画像情報から抽出する抽出部と、を備え、前記送信部は、前記抽出部により抽出された、前記画像情報および前記座標情報を、前記外部装置に送信する。 The information processing device according to the first aspect of the present invention is an information terminal capable of adding information to the first character image information and a first receiving unit that receives the first character image information from an external device. , The transmission unit that transmits the first character image information and the second character image information corresponding to the first character image information transmitted from the transmission unit to the information terminal are received from the information terminal. A second receiving unit, a determination unit that determines whether or not there is a different region between the first character image information and the second character image information, and a determination unit that determines that the different region exists. When this is done, the image information representing the different areas and the coordinate information indicating the positions of the different areas in the display area of the second character image information are extracted from the second character image information. The transmission unit transmits the image information and the coordinate information extracted by the extraction unit to the external device.

本発明の第2態様に係る情報処理システムは、情報処理装置と、情報端末と、外部装置と、を備えるシステムである。前記外部装置は、前記情報処理装置に第1の文字画像情報を送信する送信部、を備える。前記情報処理装置は、前記外部装置より、前記第1の文字画像情報を受信する第1の受信部と、前記第1の文字画像情報に情報の追加が可能な前記情報端末に、前記第1の文字画像情報を送信する送信部と、前記送信部より前記情報端末に送信された前記第1の文字画像情報に対応する第2の文字画像情報を、前記情報端末より受信する第2の受信部と、前記第1の文字画像情報と、前記第2の文字画像情報とで異なる領域があるか否かを判定する判定部と、前記判定部で前記異なる領域があると判定された場合に、前記異なる領域を表した画像情報と、前記第2の文字画像情報の表示領域内の前記異なる領域の位置を示す座標情報と、を前記第2の文字画像情報から抽出する抽出部と、を備える。前記情報端末は、前記情報処理装置より、前記第1の文字画像情報を受信する受信部と、前記第1の文字画像情報を表示する表示部と、前記表示部に表示された前記第1の文字画像情報に対する情報の入力を受け付ける入力部と、前記第1の文字画像情報に対して入力を受け付けた情報を前記異なる領域として合成することで生成された、前記第2の文字画像情報を前記情報処理装置に送信する送信部と、を備え、前記情報処理装置の送信部は、前記抽出部により抽出された、前記画像情報および前記座標情報を、前記外部装置に送信する。 The information processing system according to the second aspect of the present invention is a system including an information processing device, an information terminal, and an external device. The external device includes a transmission unit that transmits first character image information to the information processing device. The information processing device is attached to a first receiving unit that receives the first character image information from the external device, and the information terminal capable of adding information to the first character image information. A second reception unit that transmits the character image information of the above and a second reception unit that receives the second character image information corresponding to the first character image information transmitted from the transmission unit to the information terminal from the information terminal. When the determination unit determines whether or not there is a different region between the unit, the first character image information, and the second character image information, and when the determination unit determines that the different region exists. An extraction unit that extracts image information representing the different regions and coordinate information indicating the positions of the different regions in the display region of the second character image information from the second character image information. Be prepared. The information terminal includes a receiving unit that receives the first character image information from the information processing device, a display unit that displays the first character image information, and the first display unit displayed on the display unit. The second character image information generated by synthesizing the input unit that accepts the input of information for the character image information and the information that accepts the input for the first character image information as the different regions is described. The transmission unit of the information processing device includes a transmission unit for transmitting to the information processing device, and the transmission unit of the information processing device transmits the image information and the coordinate information extracted by the extraction unit to the external device.

本発明の第3態様に係る情報処理プログラムは、外部装置より、第1の文字画像情報を受信する第1の受信処理と、前記第1の文字画像情報に情報の追加が可能な情報端末に、前記第1の文字画像情報を送信する送信処理と、前記送信処理より前記情報端末に送信された前記第1の文字画像情報に対応する第2の文字画像情報を、前記情報端末より受信する第2の受信処理と、前記第1の文字画像情報と、前記第2の文字画像情報とで異なる領域があるか否かを判定する判定処理と、前記判定処理で前記異なる領域があると判定された場合に、前記異なる領域を表した画像情報と、前記第2の文字画像情報の表示領域内の前記異なる領域の位置を示す座標情報と、を前記第2の文字画像情報から抽出する抽出処理と、前記画像情報および前記座標情報を、前記外部装置に送信する第2の送信処理と、をコンピュータに実行させる。 The information processing program according to the third aspect of the present invention is an information terminal capable of receiving a first character image information from an external device and adding information to the first character image information. , The transmission process of transmitting the first character image information and the second character image information corresponding to the first character image information transmitted from the transmission process to the information terminal are received from the information terminal. The second reception process, the determination process of determining whether or not the first character image information and the second character image information have different regions, and the determination process determine that the different regions exist. When this is done, the image information representing the different areas and the coordinate information indicating the positions of the different areas in the display area of the second character image information are extracted from the second character image information. The computer is made to execute the process and the second transmission process of transmitting the image information and the coordinate information to the external device.

本発明の上記態様によれば、情報端末上に情報が書き込まれた領域の特定を容易にすることが可能な情報処理装置、情報処理システム、および情報処理プログラムを提供することができる。 According to the above aspect of the present invention, it is possible to provide an information processing apparatus, an information processing system, and an information processing program capable of easily identifying an area in which information is written on an information terminal.

図1は、実施形態にかかる情報処理装置を含む情報処理システムの構成図である。FIG. 1 is a configuration diagram of an information processing system including an information processing device according to an embodiment. 図2は、実施形態にかかる情報処理システムを構成する、情報端末、情報処理装置、および外部装置のそれぞれの構成を示すブロック図である。FIG. 2 is a block diagram showing the configurations of an information terminal, an information processing device, and an external device constituting the information processing system according to the embodiment. 図3は、実施形態にかかる情報処理システムにおいて、手書き画像が追記される状況と、画像情報および座標情報の抽出状況を示す説明図である。FIG. 3 is an explanatory diagram showing a situation in which a handwritten image is added and a situation in which image information and coordinate information are extracted in the information processing system according to the embodiment. 図4は、実施形態にかかる情報処理システムにおいて、第1の文字画像情報の送信状況を示す説明図である。FIG. 4 is an explanatory diagram showing a transmission status of the first character image information in the information processing system according to the embodiment. 図5は、実施形態にかかる情報処理システムにおいて、手書き画像の入力状況と、第2の文字画像情報の送信状況を示す説明図である。FIG. 5 is an explanatory diagram showing an input status of a handwritten image and a transmission status of a second character image information in the information processing system according to the embodiment. 図6は、実施形態にかかる情報処理システムにおいて、画像情報および座標情報の抽出状況を示す説明図である。FIG. 6 is an explanatory diagram showing an extraction status of image information and coordinate information in the information processing system according to the embodiment. 図7は、実施形態にかかる情報処理システムにおいて、抽出された画像情報および座標情報の送信状況と、外部装置の結合処理の状況と、他の情報処理装置および他の情報端末への第2の文字画像情報の送信状況を示す説明図である。FIG. 7 shows the transmission status of the extracted image information and the coordinate information, the status of the coupling process of the external device, and the second information processing device and the second information terminal in the information processing system according to the embodiment. It is explanatory drawing which shows the transmission state of character image information. 図8は、実施形態にかかる情報処理システムにおいて、情報処理装置が外部装置へ問い合わせを行った状況を示す説明図である。FIG. 8 is an explanatory diagram showing a situation in which the information processing device makes an inquiry to an external device in the information processing system according to the embodiment. 図9は、実施形態にかかる情報処理システムにおいて、外部装置が結合中である場合に、外部装置への問い合わせが複数存在する状況を示す説明図である。FIG. 9 is an explanatory diagram showing a situation in which a plurality of inquiries to the external device exist when the external device is being coupled in the information processing system according to the embodiment. 図10は、実施形態にかかる情報処理システムにおいて、外部装置が結合完了している場合に、外部装置への問い合わせが複数存在する状況を示す説明図である。FIG. 10 is an explanatory diagram showing a situation in which a plurality of inquiries to the external device exist when the external device has been combined in the information processing system according to the embodiment. 図11は、実施形態にかかる情報処理システムにおける処理シーケンスを示す説明図である。FIG. 11 is an explanatory diagram showing a processing sequence in the information processing system according to the embodiment. 図12は、実施形態にかかる情報処理装置の処理フローを示すフローチャートである。FIG. 12 is a flowchart showing a processing flow of the information processing apparatus according to the embodiment. 図13は、実施形態にかかる外部装置における結合処理を示すフローチャートである。FIG. 13 is a flowchart showing a coupling process in the external device according to the embodiment. 図14は、実施形態にかかる外部装置が問い合わせを受信した際の処理を示すフローチャートである。FIG. 14 is a flowchart showing a process when the external device according to the embodiment receives an inquiry.

以下、本発明の例示的な実施形態が開示される。以下に示される実施形態の構成、ならびに当該構成によってもたらされる作用、結果、および効果は、一例である。本発明は、以下の実施形態に開示される構成以外によっても実現可能であるとともに、基本的な構成に基づく種々の効果や、派生的な効果のうち、少なくとも一つを得ることが可能である。 Hereinafter, exemplary embodiments of the present invention will be disclosed. The configurations of the embodiments shown below, as well as the actions, results, and effects produced by such configurations, are examples. The present invention can be realized by a configuration other than the configurations disclosed in the following embodiments, and at least one of various effects based on the basic configuration and derivative effects can be obtained. ..

図1は、本実施形態にかかる情報処理装置10を含む情報処理システム100の構成図である。情報処理システム100は、外部装置20と、情報処理装置10―1、10−2と、情報端末12―1、12−2と、で構成される。 FIG. 1 is a configuration diagram of an information processing system 100 including an information processing device 10 according to the present embodiment. The information processing system 100 includes an external device 20, information processing devices 10-1, 10-2, and information terminals 12-1, 12-2.

外部装置20は、接続された装置に対してサービスを提供するサーバとする。外部装置20は、例えば、CPU、通信インターフェース等で構成されている。本実施形態の外部装置20は、オンライン会議で用いる文字画像情報を、情報処理装置10―1,10−2を介して、情報端末12―1,12−2に送信する。 The external device 20 is a server that provides a service to the connected device. The external device 20 is composed of, for example, a CPU, a communication interface, and the like. The external device 20 of the present embodiment transmits the character image information used in the online conference to the information terminals 12-1, 12-2 via the information processing devices 10-1, 10-2.

このため、外部装置20は、情報処理装置10―1,10−2と無線または有線で接続され、情報の送受信を可能とする。本実施形態では、送受信する情報の一例として、文字画像情報が含まれる。 Therefore, the external device 20 is wirelessly or wiredly connected to the information processing devices 10-1, 10-2 to enable transmission and reception of information. In the present embodiment, character image information is included as an example of the information to be transmitted and received.

外部装置20が提供するサービスとして、例えばクラウド等のデータ保存が可能な領域や、複数人によるデータの共有が可能なフォルダ等を備えていてもよい。なお、外部装置20は、情報端末12と直接に、文字画像情報の送受信が可能であってもよい。 As a service provided by the external device 20, for example, an area such as a cloud where data can be stored, a folder where data can be shared by a plurality of people, and the like may be provided. The external device 20 may be capable of directly transmitting and receiving character image information to and from the information terminal 12.

情報端末12―1は、情報処理装置10−1と無線または有線で接続され、情報処理装置10−1との間で情報の送受信を可能とする。情報端末12―2は、情報処理装置10−2と無線または有線で接続され、情報処理装置10−2との間で情報の送受信を可能とする。情報端末12―1及び情報端末12―2のうち、任意の端末を示す場合には、情報端末12と称する。以下、情報処理装置10においても同様とする。 The information terminal 12-1 is connected to the information processing device 10-1 wirelessly or by wire, and can transmit and receive information to and from the information processing device 10-1. The information terminal 12-2 is wirelessly or wiredly connected to the information processing device 10-2, and can transmit and receive information to and from the information processing device 10-2. When indicating an arbitrary terminal among the information terminal 12-1 and the information terminal 12-2, it is referred to as an information terminal 12. Hereinafter, the same applies to the information processing device 10.

情報端末12は、いわゆるタブレット形式の電子ペーパーとすることができる。情報端末12は、例えば、CPU(Central Processing Unit)、通信インターフェース、タッチパネル等で構成される。また、情報端末12には、画面上で電子ペン12p等を用いてペン先を移動させることにより、手書きで情報の入力が可能である。 The information terminal 12 can be a so-called tablet-type electronic paper. The information terminal 12 is composed of, for example, a CPU (Central Processing Unit), a communication interface, a touch panel, and the like. In addition, information can be input by handwriting to the information terminal 12 by moving the pen tip on the screen using an electronic pen 12p or the like.

文字画像情報とは、情報端末12において情報の入力や表示が可能であるとともに、無線または有線により、情報端末12と情報処理装置10との間や、情報処理装置10と外部装置20との間等で、送受信が可能な情報をいう。 The character image information can be input and displayed on the information terminal 12, and can be wirelessly or wired between the information terminal 12 and the information processing device 10 or between the information processing device 10 and the external device 20. Etc., which means information that can be sent and received.

また、文字画像情報には、例えばひらがな、カタカナ、又はアルファベットなどの文字形式の文字情報と、例えば写真や絵などの画像情報等と、の両者が含まれてもよく、文字情報と画像情報とのいずれかのみが含まれてもよい。 Further, the character image information may include both character information in a character format such as hiragana, katakana, or alphabet, and image information such as a photograph or a picture, and includes character information and image information. Only one of the above may be included.

さらに、文字画像情報は、例えば、PDF形式のデータが考えられる。文字画像情報が、PDF形式の場合に、情報端末12の電子ペン12p等を用いて手書きで情報(例えば、絵や文字など)の入力を可能とする。この場合、情報端末12は、当該入力された情報が表された領域に関する情報を、注釈として文字画像情報に格納する。領域に関する情報としては、入力された情報を表した画像情報、及び入力された情報の領域を示した座標情報が含まれている。つまり、文字画像情報に対して、手書きで情報が入力される毎に、入力された情報が表された領域に関する情報(座標情報、および画像情報)が格納される。したがって、当該領域に関する情報が新たに格納されたか否かによって、追記されたか否かを判断することができる。なお、本実施形態はPDF形式を採用した例について説明するが、追記された領域を特定可能であれば良く、他の形式のデータであっても良い。 Further, as the character image information, for example, data in PDF format can be considered. When the character image information is in the PDF format, the information (for example, a picture, a character, etc.) can be input by hand using the electronic pen 12p or the like of the information terminal 12. In this case, the information terminal 12 stores the information regarding the area in which the input information is represented in the character image information as an annotation. The information regarding the area includes image information representing the input information and coordinate information indicating the area of the input information. That is, each time information is manually input to the character image information, information (coordinate information and image information) relating to the area in which the input information is represented is stored. Therefore, it can be determined whether or not the information has been added depending on whether or not the information regarding the area is newly stored. In this embodiment, an example in which the PDF format is adopted will be described, but the data in another format may be used as long as the added area can be specified.

情報処理装置10は、一般的なPC(Personal Computer;パーソナルコンピュータ)とすることができ、例えば、CPU、通信インターフェース、HDD(Hard Disk Drive)等で構成されている。また、情報処理装置10は、情報端末12と、外部装置20の双方との間で、文字画像情報の送受信が可能である。情報処理装置10は、情報端末12と同期するためのプログラムが格納されている。これにより、情報処理装置10は、情報端末12に対して文字画像情報の送信や、情報端末12から文字画像情報の受信を可能とする。文字画像情報の送受信は、どのようなタイミングでも良く、一定時間間隔でもよいし、情報端末12において文字画像情報の更新が行われたタイミングでもよい。 The information processing device 10 can be a general PC (Personal Computer), and is composed of, for example, a CPU, a communication interface, an HDD (Hard Disk Drive), and the like. Further, the information processing device 10 can transmit and receive character image information between both the information terminal 12 and the external device 20. The information processing device 10 stores a program for synchronizing with the information terminal 12. As a result, the information processing device 10 can transmit the character image information to the information terminal 12 and receive the character image information from the information terminal 12. The transmission / reception of the character image information may be performed at any timing, at regular time intervals, or at the timing when the character image information is updated on the information terminal 12.

また詳細は後述するが、情報処理装置10は、HDDに記憶されている文字画像情報と、情報端末12から受信した他の文字画像情報(例えば、文字や絵が追記された文字画像情報)とで異なる領域(例えば、文字や絵が追記された領域)があるか否かを判定する判定処理と、判定処理において異なる領域があると判定された場合に、異なる領域を表した画像情報および座標情報と、を他の文字画像情報から抽出する抽出処理を行うことが可能である。 Further, as will be described in detail later, the information processing apparatus 10 includes character image information stored in the HDD and other character image information (for example, character image information to which characters and pictures are added) received from the information terminal 12. The judgment process for determining whether or not there are different areas (for example, the area where characters and pictures are added) and the image information and coordinates representing the different areas when it is determined in the determination process that there are different areas. It is possible to perform an extraction process for extracting information and information from other character image information.

情報処理システム100は、例えばオンライン会議等において、外部装置20から配信された文字画像情報が、参加者の各々が使用する情報端末12の各々に配信される。これにより、参加者が、共通する文字画像情報を参照できる。 In the information processing system 100, for example, in an online conference or the like, the character image information distributed from the external device 20 is distributed to each of the information terminals 12 used by each of the participants. As a result, the participants can refer to the common character image information.

そして、情報処理システム100は、情報端末12上に共通して表示された文字画像情報に対し、参加者のうちの一人が情報を追加した場合、他の参加者の各々が使用する他の情報端末12上においても、当該追加された情報をリアルタイムで反映させる。このように、本実施形態の情報処理システム100は、複数の情報端末12で情報を共有したい場合に用いられる。 Then, when one of the participants adds information to the character image information commonly displayed on the information terminal 12, the information processing system 100 uses other information used by each of the other participants. The added information is reflected in real time also on the terminal 12. As described above, the information processing system 100 of the present embodiment is used when it is desired to share information among a plurality of information terminals 12.

なお、図1で示した情報処理システム100で示した情報処理装置10と情報端末12と外部装置20の数は、実施形態と同数に限られないものとされ、以下の説明においても同様とする。以下、情報処理システム100における情報処理装置10、情報端末12、外部装置20の詳細な構成について説明する。 The number of the information processing device 10, the information terminal 12, and the external device 20 shown in the information processing system 100 shown in FIG. 1 is not limited to the same as that of the embodiment, and the same applies to the following description. .. Hereinafter, detailed configurations of the information processing device 10, the information terminal 12, and the external device 20 in the information processing system 100 will be described.

図2は、本実施形態にかかる情報処理システム100を構成する、情報端末12、情報処理装置10、外部装置20のそれぞれの構成を示すブロック図である。情報端末12は、例えば、受信部12aと、表示部12bと、入力部12cと、生成部12dと、送信部12eと、記憶部12fと、を備える。本実施形態の情報端末12は、記憶部12fに格納されたプログラムを実行することで、受信部12aと、表示部12bと、入力部12cと、生成部12dと、送信部12eと、を実現する。 FIG. 2 is a block diagram showing the configurations of the information terminal 12, the information processing device 10, and the external device 20 that constitute the information processing system 100 according to the present embodiment. The information terminal 12 includes, for example, a receiving unit 12a, a display unit 12b, an input unit 12c, a generating unit 12d, a transmitting unit 12e, and a storage unit 12f. The information terminal 12 of the present embodiment realizes the receiving unit 12a, the display unit 12b, the input unit 12c, the generating unit 12d, and the transmitting unit 12e by executing the program stored in the storage unit 12f. do.

記憶部12fは、受信部12aで受信した文字画像情報や、生成部12dで生成された他の文字画像情報を記憶する。例えば記憶部12fは、ROM(Read Only Memory)、RAM(Read Access Memory)、フラッシュメモリやSSD(Solid State Drive)等である。 The storage unit 12f stores the character image information received by the reception unit 12a and other character image information generated by the generation unit 12d. For example, the storage unit 12f is a ROM (Read Only Memory), a RAM (Read Access Memory), a flash memory, an SSD (Solid State Drive), or the like.

受信部12aは、情報処理装置10から、通信インターフェースを介して、文字画像情報を受信する。 The receiving unit 12a receives the character image information from the information processing device 10 via the communication interface.

表示部12bは、表示装置12b1に対して、受信部12aで受信した文字画像情報を表示制御する。 The display unit 12b controls the display device 12b1 to display the character image information received by the reception unit 12a.

入力部12cは、表示装置12b1に表示された文字画像情報に対して、例えば電子ペン12p等から、タッチパネルを介した情報の入力を受け付ける。 The input unit 12c accepts input of information via the touch panel from, for example, an electronic pen 12p or the like with respect to the character image information displayed on the display device 12b1.

生成部12dは、文字画像情報に対して入力部12cで入力を受け付けた情報を異なる領域として合成することで、他の文字画像情報を生成する。本実施形態では、他の文字画像情報には、入力を受け付けた情報を示す領域を示した座標情報と、入力を受け付けた情報を表した画像情報と、が対応付けて格納される。そして、他の文字画像情報を表示する際には、文字画像情報に対して、新たに格納された画像情報を、当該画像情報に対応付けられた座標情報で示された位置に重畳して表示される。これにより、新たに追記された画像情報を含んだ他の文字画像情報が表示されることになる。なお、本実施形態は、このような生成手法に制限するものではなく、文字画像情報に、追記された情報を示した画像情報を、単に合成しても良い。 The generation unit 12d generates other character image information by synthesizing the information received by the input unit 12c with respect to the character image information as different regions. In the present embodiment, in the other character image information, the coordinate information indicating the area indicating the information for which the input has been accepted and the image information indicating the information for which the input has been accepted are stored in association with each other. Then, when displaying other character image information, the newly stored image information is superimposed on the character image information at the position indicated by the coordinate information associated with the image information and displayed. Will be done. As a result, other character image information including the newly added image information will be displayed. The present embodiment is not limited to such a generation method, and image information indicating the added information may be simply combined with the character image information.

送信部12eは、生成部12dで生成された、文字画像情報を情報処理装置10に送信する。 The transmission unit 12e transmits the character image information generated by the generation unit 12d to the information processing device 10.

外部装置20は、送信部20aと、受信部20bと、結合部20cと、記憶部20dと、管理部20eと、を備える。本実施形態の外部装置20は、記憶部20dに格納されたプログラムを実行することで、送信部20aと、受信部20bと、結合部20cと、管理部20eと、を実現する。 The external device 20 includes a transmission unit 20a, a reception unit 20b, a coupling unit 20c, a storage unit 20d, and a management unit 20e. The external device 20 of the present embodiment realizes the transmission unit 20a, the reception unit 20b, the coupling unit 20c, and the management unit 20e by executing the program stored in the storage unit 20d.

記憶部20dには、例えば、文字画像情報が記憶されている。記憶部20dは、ROM、RAM、フラッシュメモリやSSD等である。 For example, character image information is stored in the storage unit 20d. The storage unit 20d is a ROM, RAM, flash memory, SSD, or the like.

送信部20aは、記憶部20dに記憶された文字画像情報を、情報処理装置10に送信する。 The transmission unit 20a transmits the character image information stored in the storage unit 20d to the information processing device 10.

受信部20bは、情報処理装置10から、情報端末12で追記された情報を示した画像情報と、当該追記された情報が表された領域を示す座標情報と、を受信する。後述するように、本実施形態においては、情報処理装置10が、情報端末12で生成された他の文字画像情報から、当該領域を示す画像情報および座標情報を抽出し、外部装置20に送信している。 The receiving unit 20b receives from the information processing device 10 image information indicating the information added by the information terminal 12 and coordinate information indicating an area in which the added information is represented. As will be described later, in the present embodiment, the information processing device 10 extracts the image information and the coordinate information indicating the region from the other character image information generated by the information terminal 12, and transmits the image information and the coordinate information indicating the area to the external device 20. ing.

結合部20cは、記憶部20dに記憶された文字画像情報に対して、座標情報で示された位置に画像情報を結合して、他の文字画像情報を生成する。 The joining unit 20c combines the character image information stored in the storage unit 20d with the image information at the position indicated by the coordinate information to generate other character image information.

本実施形態では、情報端末12で追記された領域を結合して、他の文字画像情報を生成することとした。これにより、複数の情報端末12で追記された場合に、追記された情報を示した複数の領域を結合することで、複数の情報端末12で追記された内容を反映した、他の文字画像情報を生成できる。 In the present embodiment, the areas added by the information terminal 12 are combined to generate other character image information. As a result, when the information is added by the plurality of information terminals 12, other character image information reflecting the contents added by the plurality of information terminals 12 is reflected by combining the plurality of areas indicating the added information. Can be generated.

送信部20aは、結合部20cにより結合された他の文字画像情報を、情報処理装置10の各々に送信する。これにより、追記された情報が反映された文字画像情報を表示することができる。 The transmission unit 20a transmits other character image information coupled by the coupling unit 20c to each of the information processing devices 10. As a result, it is possible to display the character image information in which the added information is reflected.

管理部20eは、例えば複数の情報処理装置10の各々から画像情報および座標情報が送信される場合に、結合部20cにおける、文字画像情報に対して他の座標情報をもとに他の画像情報を結合する結合状態(結合中である、または、結合中でない)を管理する。後述するように、情報処理装置10は、画像情報および座標情報を送信する前に、外部装置20の結合部20cが、画像情報および座標情報を結合中であるか否か、の問い合わせを行う。当該問い合わせに対応して、管理部20eは、外部装置20の結合部20cにおける結合状況に応じて、結合中であるか否かを示した回答を、送信部20aを介して行う。 For example, when the image information and the coordinate information are transmitted from each of the plurality of information processing devices 10, the management unit 20e sets other image information based on the other coordinate information with respect to the character image information in the connecting unit 20c. Manage the binding state (in binding or not in binding). As will be described later, before transmitting the image information and the coordinate information, the information processing apparatus 10 inquires whether or not the coupling portion 20c of the external device 20 is combining the image information and the coordinate information. In response to the inquiry, the management unit 20e gives an answer indicating whether or not the coupling is in progress via the transmission unit 20a according to the coupling status in the coupling unit 20c of the external device 20.

情報処理装置10は、第1の受信部10aと、第2の受信部10bと、送信部10cと、判定部10dと、抽出部10eと、記憶部10fと、を備える。本実施形態の情報処理装置10の記憶部10fには、情報端末12と連携するためのプログラムが格納されている。そして、情報処理装置10のCPUが、当該プログラムを実行することで、第1の受信部10aと、第2の受信部10bと、送信部10cと、判定部10dと、抽出部10eと、を実現する。 The information processing device 10 includes a first receiving unit 10a, a second receiving unit 10b, a transmitting unit 10c, a determination unit 10d, an extraction unit 10e, and a storage unit 10f. A program for linking with the information terminal 12 is stored in the storage unit 10f of the information processing device 10 of the present embodiment. Then, when the CPU of the information processing device 10 executes the program, the first receiving unit 10a, the second receiving unit 10b, the transmitting unit 10c, the determination unit 10d, and the extracting unit 10e are combined. Realize.

記憶部10fは、第1の受信部10aが受信した文字画像情報と、第2の受信部10bが受信した他の文字画像情報と、抽出部10eが抽出した画像情報および座標情報と、を記憶する。記憶部10fは、ROM、RAM、フラッシュメモリやSSD等である。 The storage unit 10f stores the character image information received by the first receiving unit 10a, other character image information received by the second receiving unit 10b, and the image information and coordinate information extracted by the extracting unit 10e. do. The storage unit 10f is a ROM, RAM, flash memory, SSD, or the like.

第1の受信部10aは、外部装置20から送信された情報を受信する。受信する情報としては、例えば、文字画像情報がある。 The first receiving unit 10a receives the information transmitted from the external device 20. The information to be received includes, for example, character image information.

送信部10cは、第1の受信部10aで受信した文字画像情報を、情報端末12に送信する。 The transmission unit 10c transmits the character image information received by the first reception unit 10a to the information terminal 12.

第2の受信部10bは、送信部10cより情報端末12に送信された文字画像情報に対応する他の文字画像情報を、情報端末12より受信する。 The second receiving unit 10b receives other character image information corresponding to the character image information transmitted from the transmitting unit 10c to the information terminal 12 from the information terminal 12.

文字画像情報に対応する他の文字画像情報とは、送信部10cで情報端末12に送信した文字画像情報に対応する情報として、第2の受信部10bが受信した文字画像情報が考えられる。送信部10cが送信した文字画像情報に対して、情報が新たに追記されたものであってもよいし、情報が新たに追記されていなくても良い。文字画像情報と他の文字画像情報とが対応しているか否かの判断基準としては、例えば、ファイル名が一致しているか否か等が考えられる。 As the other character image information corresponding to the character image information, the character image information received by the second receiving unit 10b can be considered as the information corresponding to the character image information transmitted to the information terminal 12 by the transmitting unit 10c. The information may be newly added to the character image information transmitted by the transmission unit 10c, or the information may not be newly added. As a criterion for determining whether or not the character image information corresponds to other character image information, for example, whether or not the file names match can be considered.

判定部10dは、送信部10cが送信した文字画像情報と、第2の受信部10bが受信した他の文字画像情報とで異なる領域があるか否かを判定する。 The determination unit 10d determines whether or not there is a different region between the character image information transmitted by the transmission unit 10c and the other character image information received by the second reception unit 10b.

抽出部10eは、判定部10dで異なる領域があると判定された場合に、異なる領域を表した画像情報と、他の文字画像情報の表示領域内の異なる領域の位置を示す座標情報と、を他の文字画像情報から抽出する。例えば、PDFの注釈機能を使用して、当該異なる領域を抽出してもよい。 When the determination unit 10d determines that there are different regions, the extraction unit 10e provides image information representing the different regions and coordinate information indicating the positions of the different regions in the display region of other character image information. Extract from other text image information. For example, the annotation function of PDF may be used to extract the different regions.

図3は、本実施形態にかかる情報処理システム100において、手書き画像の入力状況と、画像情報および座標状況の抽出状況を示す説明図である。情報端末12の表示装置12b1に表示された第1の文字画像情報P1に対して、電子ペン12pを用いて花の絵の手書き画像Fを追加で入力する。これにより、第2の文字画像情報P2が生成される。情報端末12で生成された第2の文字画像情報P2が、情報処理装置10に送信され、記憶部10fに記憶されることにより、情報端末12と、情報処理装置10との間で第2の文字画像情報P2が同期する。 FIG. 3 is an explanatory diagram showing an input status of a handwritten image and an extraction status of image information and a coordinate status in the information processing system 100 according to the present embodiment. A handwritten image F of a flower picture is additionally input to the first character image information P1 displayed on the display device 12b1 of the information terminal 12 using the electronic pen 12p. As a result, the second character image information P2 is generated. The second character image information P2 generated by the information terminal 12 is transmitted to the information processing device 10 and stored in the storage unit 10f, so that the second character image information P2 is exchanged between the information terminal 12 and the information processing device 10. The character image information P2 is synchronized.

そして、抽出部10eが、第2の文字画像情報P2に含まれた花の絵の手書き画像Fを囲む矩形領域Eの内部の画像情報Ipと座標情報Icが、第2の文字画像情報P2から抽出する。例えば、矩形領域Eの対角線上の二点の座標であるX1,Y1とX2,Y2が座標情報Icとして、取得される。 Then, the extraction unit 10e obtains the image information Ip and the coordinate information Ic inside the rectangular region E surrounding the handwritten image F of the flower picture included in the second character image information P2 from the second character image information P2. Extract. For example, X1, Y1 and X2, Y2, which are the coordinates of two points on the diagonal of the rectangular region E, are acquired as the coordinate information Ic.

送信部10cは、抽出部10eにより抽出された異なる領域を表した画像情報と、他の文字画像情報の表示領域内の異なる領域の位置を示す座標情報と、を、外部装置20に送信する。これにより、外部装置20から、文字画像情報に当該異なる領域が合成された他の文字画像情報が、他の情報端末12に配信される。 The transmission unit 10c transmits image information representing different regions extracted by the extraction unit 10e and coordinate information indicating the positions of the different regions in the display region of other character image information to the external device 20. As a result, the external device 20 distributes the other character image information in which the different regions are combined with the character image information to the other information terminal 12.

図4は、本実施形態にかかる情報処理システム100において、第1の文字画像情報P1の送信状況を示す説明図である。図4に示されるように、外部装置20の送信部20aは、記憶部20dに記憶された第1の文字画像情報P1を、情報処理装置10−1,10−2に送信する。言い換えると、情報処理装置10の第1の受信部10aは、外部装置20より、第1の文字画像情報P1を受信する。なお、情報処理装置10の記憶部10fは、第1の受信部10aで受信した第1の文字画像情報P1を記憶する。 FIG. 4 is an explanatory diagram showing a transmission status of the first character image information P1 in the information processing system 100 according to the present embodiment. As shown in FIG. 4, the transmission unit 20a of the external device 20 transmits the first character image information P1 stored in the storage unit 20d to the information processing devices 10-1 and 10-2. In other words, the first receiving unit 10a of the information processing device 10 receives the first character image information P1 from the external device 20. The storage unit 10f of the information processing device 10 stores the first character image information P1 received by the first reception unit 10a.

情報処理装置10−1の送信部10cは、情報端末12−1に、第1の文字画像情報P1を送信する。言い換えると、情報端末12―1の受信部12aは、情報処理装置10−1より、第1の文字画像情報P1を受信する。同様に、情報処理装置10−2の送信部10cは、情報端末12−2に、第1の文字画像情報P1を送信する。なお、情報端末12の記憶部12fは、受信部12aで受信した第1の文字画像情報P1を記憶する。そして、情報端末12―1および情報端末12−2の各々は、表示装置12b1に、第1の文字画像情報P1を表示する。 The transmission unit 10c of the information processing device 10-1 transmits the first character image information P1 to the information terminal 12-1. In other words, the receiving unit 12a of the information terminal 12-1 receives the first character image information P1 from the information processing device 10-1. Similarly, the transmission unit 10c of the information processing apparatus 10-2 transmits the first character image information P1 to the information terminal 12-2. The storage unit 12f of the information terminal 12 stores the first character image information P1 received by the reception unit 12a. Then, each of the information terminal 12-1 and the information terminal 12-2 displays the first character image information P1 on the display device 12b1.

図5は、本実施形態にかかる情報処理システム100において、情報処理装置10と、情報端末12との間で、第2の文字画像情報P2が同期する状況を示す説明図である。図5に示されるように、情報端末12―1の表示部12bは、表示装置12b1に第1の文字画像情報P1を表示する。情報端末12―1の入力部12cは、表示装置12b1に表示された第1の文字画像情報P1に対する情報の入力を、タッチパネルを介して受け付ける。つまり、本実施形態の情報端末12―1は、外部装置20から配信された第1の文字画像情報P1に対して、ユーザーが所望のタイミングで情報の追加を可能としている。例えば、入力部12cは表示装置12b1に表示された第1の文字画像情報P1に対して、電子ペン12pからタッチパネルを介して花の絵の手書き画像Fの入力を受け付ける。記憶部12fは、入力部12cが受け付けた花の絵の手書き画像Fを記憶する。 FIG. 5 is an explanatory diagram showing a situation in which the second character image information P2 is synchronized between the information processing device 10 and the information terminal 12 in the information processing system 100 according to the present embodiment. As shown in FIG. 5, the display unit 12b of the information terminal 12-1 displays the first character image information P1 on the display device 12b1. The input unit 12c of the information terminal 12-1 receives the input of information to the first character image information P1 displayed on the display device 12b1 via the touch panel. That is, the information terminal 12-1 of the present embodiment enables the user to add information to the first character image information P1 distributed from the external device 20 at a desired timing. For example, the input unit 12c accepts the input of the handwritten image F of the flower picture from the electronic pen 12p via the touch panel to the first character image information P1 displayed on the display device 12b1. The storage unit 12f stores the handwritten image F of the flower picture received by the input unit 12c.

情報端末12―1の生成部12dは、第1の文字画像情報P1に対して入力を受け付けた情報である花の絵の手書き画像Fを異なる領域として合成することで、第2の文字画像情報P2を生成する。また、情報端末12−1の記憶部12fは、生成部12dで生成された第2の文字画像情報P2を記憶する。そして、情報端末12―1の送信部12eは、生成部12dで生成された、第2の文字画像情報P2を情報処理装置10−1に送信する。言い換えると、情報処理装置10−1の第2の受信部10bは、送信部10cより情報端末12−1に送信された第1の文字画像情報P1に対応する第2の文字画像情報P2を、情報端末12より受信する。情報処理装置10の記憶部10fは、第2の受信部10bが受信した第2の文字画像情報P2を記憶する。 The generation unit 12d of the information terminal 12-1 synthesizes the handwritten image F of the flower picture, which is the information received for the first character image information P1, as different regions, so that the second character image information Generate P2. Further, the storage unit 12f of the information terminal 12-1 stores the second character image information P2 generated by the generation unit 12d. Then, the transmission unit 12e of the information terminal 12-1 transmits the second character image information P2 generated by the generation unit 12d to the information processing device 10-1. In other words, the second receiving unit 10b of the information processing apparatus 10-1 receives the second character image information P2 corresponding to the first character image information P1 transmitted from the transmitting unit 10c to the information terminal 12-1. Received from the information terminal 12. The storage unit 10f of the information processing device 10 stores the second character image information P2 received by the second reception unit 10b.

情報処理装置10−1の判定部10dは、記憶部10fに記憶された第1の文字画像情報P1と、第2の受信部10bが受信した第2の文字画像情報P2とで異なる領域があるか否かを判定する。異なる領域が存在するか否かの判定手法は、上述した手法を問わず、どのような手法を用いても良い。 The determination unit 10d of the information processing device 10-1 has a region different between the first character image information P1 stored in the storage unit 10f and the second character image information P2 received by the second receiving unit 10b. Judge whether or not. As the method for determining whether or not different regions exist, any method may be used regardless of the method described above.

そして、情報処理装置10−1の抽出部10eは、判定部10dで異なる領域があると判定された場合に、異なる領域を表した画像情報Ipと、第2の文字画像情報P2の表示領域内の異なる領域の位置を示す座標情報Icと、を第2の文字画像情報P2から抽出する。そして、情報処理装置10−1の記憶部10fは、抽出部10eが抽出した画像情報Ipと、座標情報Icとを記憶する。 Then, when the determination unit 10d determines that the extraction unit 10e of the information processing apparatus 10-1 has different regions, the image information Ip representing the different regions and the display region of the second character image information P2 Coordinate information Ic indicating the positions of different regions and the second character image information P2 are extracted. Then, the storage unit 10f of the information processing device 10-1 stores the image information Ip extracted by the extraction unit 10e and the coordinate information Ic.

図6は、本実施形態にかかる情報処理システム100において、画像情報Ipおよび座標情報Icの抽出状況を示す説明図である。図6に示されるように例えば、第2の文字画像情報P2に含まれた花の絵の手書き画像Fを囲む矩形領域E(上記の異なる領域)の内部の画像情報Ipと座標情報Icが、第2の文字画像情報P2から抽出される。例えば、矩形領域Eの対角線上の二点の座標であるX1,Y1とX2,Y2が座標情報Icとして、取得される。 FIG. 6 is an explanatory diagram showing an extraction status of image information Ip and coordinate information Ic in the information processing system 100 according to the present embodiment. As shown in FIG. 6, for example, the image information Ip and the coordinate information Ic inside the rectangular region E (the above different regions) surrounding the handwritten image F of the flower picture included in the second character image information P2 are It is extracted from the second character image information P2. For example, X1, Y1 and X2, Y2, which are the coordinates of two points on the diagonal of the rectangular region E, are acquired as the coordinate information Ic.

図7は、本実施形態にかかる情報処理システム100において、抽出された画像情報Ipおよび座標情報Icの送信状況と、外部装置20の結合処理の状況と、他の情報処理装置および他の情報端末への第2の文字画像情報P2の送信状況を示す説明図である。図7に示されるように、情報処理装置10−1の送信部10cは、抽出部10eにより抽出された、矩形領域Eを示す画像情報Ipおよび座標情報Icを、外部装置20に送信する。言い換えると、外部装置20の受信部20bは、情報処理装置10−1から、矩形領域Eを示す画像情報Ipおよび座標情報Icを受信する。そして、外部装置20の記憶部20dは、情報処理装置10から受信した画像情報Ipおよび座標情報Icを記憶する。 FIG. 7 shows the transmission status of the extracted image information Ip and the coordinate information Ic in the information processing system 100 according to the present embodiment, the status of the coupling process of the external device 20, other information processing devices, and other information terminals. It is explanatory drawing which shows the transmission situation of the 2nd character image information P2 to. As shown in FIG. 7, the transmission unit 10c of the information processing device 10-1 transmits the image information Ip and the coordinate information Ic indicating the rectangular region E extracted by the extraction unit 10e to the external device 20. In other words, the receiving unit 20b of the external device 20 receives the image information Ip and the coordinate information Ic indicating the rectangular region E from the information processing device 10-1. Then, the storage unit 20d of the external device 20 stores the image information Ip and the coordinate information Ic received from the information processing device 10.

外部装置20の結合部20cは、記憶部20dに記憶された第1の文字画像情報P1に対して、座標情報Icで示された位置に画像情報Ipを結合して、第2の文字画像情報P2を生成する。また、記憶部20dは、結合部20cにより生成された第2の文字画像情報P2を記憶する。そして外部装置20の送信部20aは、他の情報処理装置である情報処理装置10−2に対して、結合部20cにより生成された第2の文字画像情報P2を送信する。言い換えると、情報処理装置10−2の第1の受信部10aは、外部装置20より、第2の文字画像情報P2を受信する。 The coupling unit 20c of the external device 20 combines the image information Ip at the position indicated by the coordinate information Ic with respect to the first character image information P1 stored in the storage unit 20d, and the second character image information. Generate P2. Further, the storage unit 20d stores the second character image information P2 generated by the coupling unit 20c. Then, the transmission unit 20a of the external device 20 transmits the second character image information P2 generated by the coupling unit 20c to the information processing device 10-2 which is another information processing device. In other words, the first receiving unit 10a of the information processing device 10-2 receives the second character image information P2 from the external device 20.

情報処理装置10−2の送信部10cは、情報端末12−2に、第2の文字画像情報P2を送信する。言い換えると、情報端末12−2の受信部12aは、情報処理装置10−2より、第2の文字画像情報P2を受信する。そして、情報端末12―2の表示部12bは、表示装置12b1に第2の文字画像情報P2を表示する。なお、情報端末12−2の記憶部12fは、受信部12aが受信した第2の文字画像情報P2を記憶する。 The transmission unit 10c of the information processing device 10-2 transmits the second character image information P2 to the information terminal 12-2. In other words, the receiving unit 12a of the information terminal 12-2 receives the second character image information P2 from the information processing device 10-2. Then, the display unit 12b of the information terminal 12-2 displays the second character image information P2 on the display device 12b1. The storage unit 12f of the information terminal 12-2 stores the second character image information P2 received by the reception unit 12a.

図8は、本実施形態にかかる情報処理システム100において、情報処理装置10が外部装置20へ問い合わせQを行った状況を示す説明図である。図8に示されるように、情報処理装置10の送信部10cは、外部装置20に対し、外部装置20の結合部20cが、第1の文字画像情報P1に対して他の座標情報をもとに他の画像情報を結合中であるか否かの問い合わせQを、外部装置20に送信する。 FIG. 8 is an explanatory diagram showing a situation in which the information processing device 10 makes an inquiry Q to the external device 20 in the information processing system 100 according to the present embodiment. As shown in FIG. 8, the transmission unit 10c of the information processing device 10 has the external device 20 and the coupling unit 20c of the external device 20 based on other coordinate information with respect to the first character image information P1. Inquiry Q as to whether or not other image information is being combined is transmitted to the external device 20.

外部装置20の受信部20bは、問い合わせQを受信し、記憶部20dは、問い合わせQを記憶する。外部装置20の管理部20eは、結合部20cにおける、第1の文字画像情報P1に対して他の座標情報をもとに他の画像情報を結合する結合状態(結合中である、または、結合中でない)を管理する。そして、管理部20eは、結合部20cが第1の文字画像情報P1に対して、他の座標情報をもとに他の画像情報を結合中であるか否かの回答Aを、送信部20aを介して情報処理装置10に送信する。 The receiving unit 20b of the external device 20 receives the inquiry Q, and the storage unit 20d stores the inquiry Q. The management unit 20e of the external device 20 combines the first character image information P1 with the other image information based on the other coordinate information in the coupling unit 20c (in the process of being combined or combined). Manage (not inside). Then, the management unit 20e gives an answer A as to whether or not the coupling unit 20c is combining other image information with respect to the first character image information P1 based on the other coordinate information. Is transmitted to the information processing device 10 via.

情報処理装置10の第1の受信部10aが、記憶部20dに記憶された第1の文字画像情報P1に対して他の座標情報をもとに他の画像情報を、外部装置20の結合部20cにおいて結合中である旨を示した情報を含む回答A2を外部装置20より受信した場合、情報処理装置10の送信部10cは、第1の文字画像情報P1に結合する、画像情報Ipおよび座標情報Icの送信を待機する。 The first receiving unit 10a of the information processing device 10 transfers other image information to the first character image information P1 stored in the storage unit 20d based on other coordinate information, and the coupling unit of the external device 20. When the response A2 including the information indicating that the information is being combined is received from the external device 20 in 20c, the transmission unit 10c of the information processing device 10 combines the image information Ip and the coordinates to be combined with the first character image information P1. Waits for the transmission of information Ic.

一方、情報処理装置10の第1の受信部10aが、外部装置20が記憶部20dに記憶された第1の文字画像情報P1に対して、他の座標情報をもとに他の画像情報を、外部装置20の結合部20cにおいて結合中でない旨を示した情報を含む回答A1を外部装置20より受信した場合、情報処理装置10―1の送信部10cは、第1の文字画像情報P1に結合する、画像情報Ipおよび座標情報Icの送信を外部装置20に行う。なお、外部装置20の記憶部20dは、送信された画像情報Ipおよび座標情報Icを記憶する。 On the other hand, the first receiving unit 10a of the information processing device 10 transmits other image information to the first character image information P1 stored in the storage unit 20d by the external device 20 based on other coordinate information. When the external device 20 receives the answer A1 including the information indicating that the coupling unit 20c of the external device 20 is not being coupled, the transmission unit 10c of the information processing device 10-1 sends the first character image information P1. The image information Ip and the coordinate information Ic to be combined are transmitted to the external device 20. The storage unit 20d of the external device 20 stores the transmitted image information Ip and coordinate information Ic.

図9は、本実施形態にかかる情報処理システム100において、外部装置20が結合中である場合に、外部装置20への問い合わせQが複数存在する状況を示す説明図である。図9に示されるように、情報処理装置10―1の送信部10cは、抽出部10eで抽出された矩形領域Eを示す画像情報Ip1及び座標情報Ic1の、外部装置20に対する送信を既に完了している。そして、外部装置20の結合部20cは、記憶部20dに記憶された第1の文字画像情報P1に対して、座標情報Ic1で示される位置に画像情報Ip1の結合処理を実行している(結合中)。 FIG. 9 is an explanatory diagram showing a situation in which a plurality of inquiries Q to the external device 20 exist when the external device 20 is being coupled in the information processing system 100 according to the present embodiment. As shown in FIG. 9, the transmission unit 10c of the information processing device 10-1 has already completed the transmission of the image information Ip1 and the coordinate information Ic1 indicating the rectangular region E extracted by the extraction unit 10e to the external device 20. ing. Then, the coupling unit 20c of the external device 20 executes the coupling process of the image information Ip1 at the position indicated by the coordinate information Ic1 with respect to the first character image information P1 stored in the storage unit 20d (combining). During).

情報処理装置10−2,10−3の各々の送信部10cは、画像情報Ipおよび座標情報Icを送信する前に、現在、外部装置20の結合部20cが文字画像情報に対して他の座標情報Icをもとに他の画像情報Ipを結合中であるか否か、を問い合わせる、問い合わせQをそれぞれ行う。本実施形態では、情報処理装置10−2による問い合わせQ2は、情報処理装置10−3の問い合わせQ3よりも先に行われる。そして、外部装置20の記憶部20dは、問い合わせQ2、Q3の順に問い合わせQを受けた事象を記憶する。外部装置20の管理部20eは、複数の情報処理装置10の各々から画像情報Ipおよび座標情報Icが送信される場合に、結合部20cにおける、第1の文字画像情報P1に対して他の座標情報をもとに他の画像情報を結合する結合状態(結合中である、または、結合中でない)を管理する。 Before the transmission units 10c of the information processing devices 10-2 and 10-3 transmit the image information Ip and the coordinate information Ic, the coupling unit 20c of the external device 20 currently has other coordinates with respect to the character image information. Inquires whether or not other image information Ip is being combined based on the information Ic, and inquires Q respectively. In the present embodiment, the inquiry Q2 by the information processing device 10-2 is performed before the inquiry Q3 of the information processing device 10-3. Then, the storage unit 20d of the external device 20 stores the event in which the inquiry Q is received in the order of the inquiry Q2 and Q3. When the image information Ip and the coordinate information Ic are transmitted from each of the plurality of information processing devices 10, the management unit 20e of the external device 20 has other coordinates with respect to the first character image information P1 in the coupling unit 20c. It manages the combined state (combining or not combining) that combines other image information based on the information.

そして、管理部20eは、結合部20cが第1の文字画像情報P1に対して、他の座標情報をもとに他の画像情報を結合中であるか否かの回答Aを、送信部20aを介して情報処理装置10に送信する。 Then, the management unit 20e gives an answer A as to whether or not the coupling unit 20c is combining other image information with respect to the first character image information P1 based on the other coordinate information. Is transmitted to the information processing device 10 via.

図9では、外部装置20は、画像情報Ip1を結合中である。よって、外部装置20の管理部20eは、情報処理装置10−2,10−3に対して、記憶部20dに記憶された第1の文字画像情報P1に対して他の座標情報Icをもとに他の画像情報Ipを、外部装置20の結合部20cにおいて結合中である旨を示した情報を含む回答A2を、送信部20aを介して情報処理装置10−2、10−3に送信する。情報処理装置10−2,10−3の各々の第1の受信部10aは、回答A2を受信し、情報処理装置10−2,10−3の各々の記憶部10fは、回答A2を記憶する。そして、情報処理装置10−2,10−3の各々の送信部10cは、画像情報Ipおよび座標情報Icの送信を待機する。 In FIG. 9, the external device 20 is combining the image information Ip1. Therefore, the management unit 20e of the external device 20 bases the information processing devices 10-2 and 10-3 on the other coordinate information Ic with respect to the first character image information P1 stored in the storage unit 20d. The answer A2 including the information indicating that the other image information Ip is being coupled at the coupling unit 20c of the external device 20 is transmitted to the information processing devices 10-2 and 10-3 via the transmission unit 20a. .. Each of the first receiving units 10a of the information processing devices 10-2 and 10-3 receives the answer A2, and each storage unit 10f of the information processing devices 10-2 and 10-3 stores the answer A2. .. Then, each of the transmission units 10c of the information processing devices 10-2 and 10-3 waits for the transmission of the image information Ip and the coordinate information Ic.

図10は、本実施形態にかかる情報処理システム100において、外部装置20が結合完了している場合に、外部装置20への問い合わせQが複数存在する状況を示す説明図である。図10に示されるように、外部装置20の結合部20cは、記憶部20dに記憶された第1の文字画像情報P1に対して、座標情報Ic1で示される位置に画像情報Ip1の結合を既に完了させている。そして、外部装置20の記憶部20dは、生成された第2の文字画像情報P2を記憶する。 FIG. 10 is an explanatory diagram showing a situation in which a plurality of inquiries Q to the external device 20 exist when the external device 20 has been coupled in the information processing system 100 according to the present embodiment. As shown in FIG. 10, the coupling unit 20c of the external device 20 has already coupled the image information Ip1 to the position indicated by the coordinate information Ic1 with respect to the first character image information P1 stored in the storage unit 20d. I have completed it. Then, the storage unit 20d of the external device 20 stores the generated second character image information P2.

ここで、上記のように問い合わせQ2が、問い合わせQ3よりも時間的に先に行われ、外部装置20の記憶部20dは、問い合わせQ2,Q3の順に問い合わせQを受けた事象を記憶している。よって、記憶部20dに問い合わせQを受けた事象が記憶された順番、すなわち問い合わせQを送信した順である情報処理装置10−2,10−3の順に、外部装置20の管理部20eは、結合部20cが第1の文字画像情報P1に対して、他の座標情報Icをもとに他の画像情報Ipを結合中でない旨の回答A1を、送信部20aを介して情報処理装置10−2,10−3に対して送信する。本実施形態では、先に記憶部20dに問い合わせQ2を受けた事象を記録したので、外部装置20の管理部20eは、まずは情報処理装置10―2に対してのみ、送信部20aを介して回答A1を行う。 Here, as described above, the inquiry Q2 is performed earlier than the inquiry Q3, and the storage unit 20d of the external device 20 stores the event in which the inquiry Q is received in the order of the inquiry Q2 and Q3. Therefore, the management units 20e of the external device 20 are combined in the order in which the events in which the inquiry Q is received in the storage unit 20d are stored, that is, in the order of the information processing devices 10-2 and 10-3 in which the inquiry Q is transmitted. The information processing device 10-2 receives an answer A1 to the first character image information P1 that the other image information Ip is not being combined based on the other coordinate information Ic via the transmission unit 20a. , 10-3. In the present embodiment, since the event in which the inquiry Q2 is received to the storage unit 20d is recorded first, the management unit 20e of the external device 20 first responds only to the information processing device 10-2 via the transmission unit 20a. Perform A1.

従って、情報処理装置10−2は、抽出部10eにより抽出された、矩形領域E2を示す画像情報Ip2および座標情報Ic2を、外部装置20に送信する、送信aを行う。そして、外部装置20の結合部20cは、記憶部20dに記憶された第2の文字画像情報P2に対して、座標情報Ic2をもとに画像情報Ip2を結合する。外部装置20の記憶部20dは、画像情報Ip2の結合処理により生成された文字画像情報を記憶する。 Therefore, the information processing device 10-2 performs the transmission a, which transmits the image information Ip2 and the coordinate information Ic2 indicating the rectangular region E2 extracted by the extraction unit 10e to the external device 20. Then, the coupling unit 20c of the external device 20 couples the image information Ip2 to the second character image information P2 stored in the storage unit 20d based on the coordinate information Ic2. The storage unit 20d of the external device 20 stores the character image information generated by the combination processing of the image information Ip2.

記憶部20dに当該文字画像情報が記憶された後、外部装置20の管理部20eは、情報処理装置10―3に対して、送信部20aを介して回答A1を行う。よって、情報処理装置10−3は、抽出部10eにより抽出された、矩形領域E3を示す画像情報Ip3および座標情報Ic3を、外部装置20に送信する、送信bを行う。 After the character image information is stored in the storage unit 20d, the management unit 20e of the external device 20 gives an answer A1 to the information processing device 10-3 via the transmission unit 20a. Therefore, the information processing device 10-3 performs the transmission b of transmitting the image information Ip3 and the coordinate information Ic3 indicating the rectangular region E3 extracted by the extraction unit 10e to the external device 20.

図11は、本実施形態にかかる情報処理システム100における処理の流れを説明するシーケンス図である。外部装置20の送信部20aは、情報処理装置10−1に、第1の文字画像情報P1を送信する(S1)。また、情報処理装置10−1の送信部10cは、情報端末12−1に、外部装置20より受信した第1の文字画像情報P1を送信する(S2)。 FIG. 11 is a sequence diagram illustrating a processing flow in the information processing system 100 according to the present embodiment. The transmission unit 20a of the external device 20 transmits the first character image information P1 to the information processing device 10-1 (S1). Further, the transmission unit 10c of the information processing device 10-1 transmits the first character image information P1 received from the external device 20 to the information terminal 12-1 (S2).

次に、情報端末12―1は、表示装置12b1に第1の文字画像情報P1を表示する(S3)。 Next, the information terminal 12-1 displays the first character image information P1 on the display device 12b1 (S3).

S1〜S3の処理と並列して、外部装置20の送信部20aは、情報処理装置10−2に、第1の文字画像情報P1を送信し(S1’)、情報処理装置10−2の送信部10cは、情報端末12−2に、外部装置20より受信した第1の文字画像情報P1を送信し(S2’)、情報端末12―2は、表示装置12b1に第1の文字画像情報P1を表示する(S3’)。 In parallel with the processing of S1 to S3, the transmission unit 20a of the external device 20 transmits the first character image information P1 to the information processing device 10-2 (S1'), and transmits the information processing device 10-2. The unit 10c transmits the first character image information P1 received from the external device 20 to the information terminal 12-2 (S2'), and the information terminal 12-2 sends the first character image information P1 to the display device 12b1. Is displayed (S3').

情報端末12―1の入力部12cは、表示装置12b1に表示された第1の文字画像情報P1に対する情報の入力を受け付ける。例えば、表示部12bに表示された第1の文字画像情報P1に対して、花の絵の手書き画像Fの入力を、電子ペン12pによって受け付ける(S4)。情報端末12―1の生成部12dは、第1の文字画像情報P1に対して入力を受け付けた花の絵の手書き画像Fを異なる領域として合成することで、第2の文字画像情報P2を生成する(S5)。情報端末12―1の送信部12eは、生成部12dで生成された、第2の文字画像情報P2を情報処理装置10に送信する(S6)。 The input unit 12c of the information terminal 12-1 accepts the input of information to the first character image information P1 displayed on the display device 12b1. For example, the electronic pen 12p accepts the input of the handwritten image F of the flower picture with respect to the first character image information P1 displayed on the display unit 12b (S4). The generation unit 12d of the information terminal 12-1 generates the second character image information P2 by synthesizing the handwritten image F of the flower picture that has received the input to the first character image information P1 as different regions. (S5). The transmission unit 12e of the information terminal 12-1 transmits the second character image information P2 generated by the generation unit 12d to the information processing device 10 (S6).

情報処理装置10−1の判定部10dは、情報処理装置10−1の記憶部10fに記憶された第1の文字画像情報P1と、第2の受信部10bが受信した第2の文字画像情報P2とで異なる領域があるか否かを判定する(S7)。図11で示す処理では、異なる領域があると判定された場合について説明する。 The determination unit 10d of the information processing device 10-1 has the first character image information P1 stored in the storage unit 10f of the information processing device 10-1 and the second character image information received by the second receiving unit 10b. It is determined whether or not there is a region different from that of P2 (S7). In the process shown in FIG. 11, a case where it is determined that there are different regions will be described.

情報処理装置10−1の抽出部10eは、判定部10dで異なる領域があると判定された場合に、異なる領域を表した画像情報Ipと、第2の文字画像情報P2の表示領域内の異なる領域の位置を示す座標情報Icと、を第2の文字画像情報P2から抽出する(S8)。例えば、第2の文字画像情報P2に含まれた花の絵の手書き画像Fを囲む矩形領域Eを示す画像情報Ipと座標情報Icが、第2の文字画像情報P2から抽出される。 When the determination unit 10d determines that there are different regions, the extraction unit 10e of the information processing device 10-1 differs between the image information Ip representing the different regions and the display region of the second character image information P2. The coordinate information Ic indicating the position of the region and the coordinate information Ic indicating the position of the region are extracted from the second character image information P2 (S8). For example, the image information Ip and the coordinate information Ic indicating the rectangular region E surrounding the handwritten image F of the flower picture included in the second character image information P2 are extracted from the second character image information P2.

ここで、情報処理装置10―1の送信部10cは、外部装置20の結合部20cが、第1の文字画像情報P1に対して他の座標情報Icをもとに他の画像情報Ipを結合中であるか否かの問い合わせQを、外部装置20に送信する(S9)。そして、外部装置20の送信部20aが、第1の文字画像情報P1に対して他の座標情報Icをもとに他の画像情報Ipを結合部20cにおいて結合中でない旨を示した情報を含む回答A1を送信した場合に(S10)、情報処理装置10―1の送信部10cは、第1の文字画像情報P1に結合する、画像情報Ipおよび座標情報Icの送信を外部装置20に行う(S11)。 Here, in the transmission unit 10c of the information processing device 10-1, the coupling unit 20c of the external device 20 combines the other image information Ip with the first character image information P1 based on the other coordinate information Ic. Inquiry Q as to whether or not it is inside is transmitted to the external device 20 (S9). Then, the transmission unit 20a of the external device 20 includes information indicating that the first character image information P1 is not being combined with the other image information Ip based on the other coordinate information Ic at the coupling unit 20c. When the answer A1 is transmitted (S10), the transmission unit 10c of the information processing device 10-1 transmits the image information Ip and the coordinate information Ic to be coupled to the first character image information P1 to the external device 20 ((S10). S11).

外部装置20の結合部20cは、記憶部10fに記憶された第1の文字画像情報P1に対して、座標情報Icで示された位置に画像情報Ipを結合して、第2の文字画像情報P2を生成する(S12)。そして、外部装置20の送信部20aは、他の情報処理装置10である情報処理装置10−2に対して、結合部20cにより生成された第2の文字画像情報P2を送信する(S13)。さらに、情報処理装置10−2の送信部10cは、情報端末12−2に、第2の文字画像情報P2を送信する(S14)。 The coupling unit 20c of the external device 20 combines the image information Ip at the position indicated by the coordinate information Ic with respect to the first character image information P1 stored in the storage unit 10f, and the second character image information. Generate P2 (S12). Then, the transmission unit 20a of the external device 20 transmits the second character image information P2 generated by the coupling unit 20c to the information processing device 10-2 which is another information processing device 10 (S13). Further, the transmission unit 10c of the information processing apparatus 10-2 transmits the second character image information P2 to the information terminal 12-2 (S14).

本実施形態においては、上述した処理を行うことで、情報端末12−1において手書きされた情報が、情報端末12−2の表示に反映される。 In the present embodiment, by performing the above-described processing, the information handwritten in the information terminal 12-1 is reflected in the display of the information terminal 12-2.

図12は、本実施形態にかかる情報処理装置10−1の処理フローを示すフローチャートである。図12に示す例では、情報処理装置10−1の処理フローを説明するが、情報処理装置10−2においても同様の処理が行われるものとして説明を省略する。 FIG. 12 is a flowchart showing a processing flow of the information processing apparatus 10-1 according to the present embodiment. In the example shown in FIG. 12, the processing flow of the information processing apparatus 10-1 will be described, but the description will be omitted assuming that the same processing is performed in the information processing apparatus 10-2.

情報処理装置10−1の第1の受信部10aは、外部装置20より、第1の文字画像情報P1を受信する(S100)。また、情報処理装置10−1の送信部10cは、情報端末12−1に、外部装置20より受信した第1の文字画像情報P1を送信する(S102)。 The first receiving unit 10a of the information processing device 10-1 receives the first character image information P1 from the external device 20 (S100). Further, the transmission unit 10c of the information processing device 10-1 transmits the first character image information P1 received from the external device 20 to the information terminal 12-1 (S102).

その後、情報処理装置10−1の第2の受信部10bが、情報端末12−1より、第2の文字画像情報P2を受信したか否かを判定する(S104)。情報処理装置10−1の第2の受信部10bが、情報端末12より、第2の文字画像情報P2を受信していないと判定した場合(S104のNo)、再びS104の処理を繰り返す。 After that, the second receiving unit 10b of the information processing apparatus 10-1 determines whether or not the second character image information P2 has been received from the information terminal 12-1 (S104). When the second receiving unit 10b of the information processing apparatus 10-1 determines that the second character image information P2 has not been received from the information terminal 12 (No in S104), the process of S104 is repeated again.

一方、情報処理装置10−1の第2の受信部10bが、情報端末12−1より、第2の文字画像情報P2を受信したと判定した場合(S104のYes)、情報処理装置10−1の判定部10dが、情報処理装置10−1の記憶部10fに記憶された第1の文字画像情報P1と、第2の受信部10bが受信した第2の文字画像情報P2とで異なる領域があるか否かを判定する(S106)。 On the other hand, when it is determined that the second receiving unit 10b of the information processing device 10-1 has received the second character image information P2 from the information terminal 12-1 (Yes in S104), the information processing device 10-1 The determination unit 10d of the information processing device 10-1 has a different region between the first character image information P1 stored in the storage unit 10f of the information processing device 10-1 and the second character image information P2 received by the second receiving unit 10b. It is determined whether or not there is (S106).

情報処理装置10−1の判定部10dが、第1の文字画像情報P1と、第2の文字画像情報P2とで異なる領域がないと判定した場合(S106のNо)、処理を終了する。 When the determination unit 10d of the information processing apparatus 10-1 determines that the first character image information P1 and the second character image information P2 do not have different regions (Nо in S106), the process ends.

一方、情報処理装置10−1の判定部10dが、第1の文字画像情報P1と、第2の文字画像情報P2とで異なる領域があると判定した場合(S106のYes)、異なる領域を表した画像情報Ipと、第2の文字画像情報P2の表示領域内の異なる領域の位置を示す座標情報Icと、を第2の文字画像情報P2から抽出する(S108)。そして、情報処理装置10―1の送信部10cは、外部装置20の結合部20cが、第1の文字画像情報P1に対して他の座標情報Icをもとに他の画像情報Ipを結合中であるか否かの問い合わせQを、外部装置20に送信する(S110)。 On the other hand, when the determination unit 10d of the information processing apparatus 10-1 determines that the first character image information P1 and the second character image information P2 have different regions (Yes in S106), the different regions are shown in the table. The image information Ip and the coordinate information Ic indicating the positions of different regions in the display area of the second character image information P2 are extracted from the second character image information P2 (S108). Then, in the transmission unit 10c of the information processing device 10-1, the coupling unit 20c of the external device 20 is coupling another image information Ip to the first character image information P1 based on the other coordinate information Ic. Inquiry Q as to whether or not is transmitted to the external device 20 (S110).

S110の処理の後、情報処理装置10−1の判定部10dが、外部装置20が第1の文字画像情報P1に対して、他の座標情報をもとに他の画像情報を、結合部20cにおいて結合中である旨を示した情報を含む回答A2を、情報処理装置10−1の第1の受信部10aが受信したか否か、を判定する(S112)。 After the processing of S110, the determination unit 10d of the information processing device 10-1 transfers other image information to the first character image information P1 by the external device 20 based on the other coordinate information, and the coupling unit 20c. It is determined whether or not the first receiving unit 10a of the information processing apparatus 10-1 has received the answer A2 including the information indicating that the information is being combined (S112).

情報処理装置10−1の第1の受信部10aが、外部装置20から、第1の文字画像情報P1に対して他の座標情報Icをもとに他の画像情報Ipを、結合部20cにおいて結合中である旨を示した情報を含む回答A2を受信した場合(S112のYes)、情報処理装置10―1の送信部10cは、第1の文字画像情報P1に結合する、画像情報Ipおよび座標情報Icの送信を待機する(S116)。そして、情報処理装置10―1の送信部10cは、外部装置20の結合部20cが、第1の文字画像情報P1に対して他の座標情報Icをもとに他の画像情報Ipを結合中であるか否かの問い合わせQを、外部装置20に送信し(S110)、S112の処理を繰り返し実行する。 The first receiving unit 10a of the information processing device 10-1 transmits another image information Ip from the external device 20 to the first character image information P1 based on the other coordinate information Ic in the connecting unit 20c. When the answer A2 including the information indicating that the information is being combined is received (Yes in S112), the transmission unit 10c of the information processing apparatus 10-1 combines the image information Ip and the image information Ip and the first character image information P1. It waits for the transmission of the coordinate information Ic (S116). Then, in the transmission unit 10c of the information processing device 10-1, the coupling unit 20c of the external device 20 is coupling another image information Ip to the first character image information P1 based on the other coordinate information Ic. The inquiry Q as to whether or not is is transmitted to the external device 20 (S110), and the process of S112 is repeatedly executed.

情報処理装置10―1の第1の受信部10aが、外部装置20から、第1の文字画像情報P1に対して他の座標情報をもとに他の画像情報を、結合部20cにおいて結合中でない旨を示した情報を含む回答A1を受信した場合(S112のNо)、情報処理装置10―1の送信部10cは、第1の文字画像情報P1に結合する、画像情報Ipおよび座標情報Icの送信を外部装置20に行い(S114)、処理を終了する。 The first receiving unit 10a of the information processing device 10-1 is combining other image information from the external device 20 with respect to the first character image information P1 based on other coordinate information at the connecting unit 20c. When the answer A1 including the information indicating that the information is not received is received (Nо of S112), the transmission unit 10c of the information processing apparatus 10-1 is coupled to the first character image information P1 to be combined with the image information Ip and the coordinate information Ic. Is transmitted to the external device 20 (S114), and the process is terminated.

図13は、本実施形態にかかる外部装置20における結合処理を示すフローチャートである。外部装置20の送信部20aは、第1の文字画像情報P1を、情報処理装置10に送信する(S200)。次に外部装置20の受信部20bは、矩形領域Eを示す画像情報Ipおよび座標情報Icを受信したか否かを判断する(S202)。外部装置20の受信部20bは、情報処理装置10から、矩形領域Eを示す画像情報Ipおよび座標情報Icを受信しなかった場合(S202のNо)、矩形領域Eを示す画像情報Ipおよび座標情報Icを受信するまで、処理を繰り返す。 FIG. 13 is a flowchart showing a coupling process in the external device 20 according to the present embodiment. The transmission unit 20a of the external device 20 transmits the first character image information P1 to the information processing device 10 (S200). Next, the receiving unit 20b of the external device 20 determines whether or not the image information Ip and the coordinate information Ic indicating the rectangular region E have been received (S202). When the receiving unit 20b of the external device 20 does not receive the image information Ip and the coordinate information Ic indicating the rectangular area E from the information processing device 10 (Nо of S202), the image information Ip and the coordinate information indicating the rectangular area E The process is repeated until Ic is received.

一方、外部装置20の受信部20bは、情報処理装置10から、矩形領域Eを示す画像情報Ipおよび座標情報Icを受信した場合(S202のYes)、外部装置20の結合部20cは、記憶部20dに記憶された第1の文字画像情報P1に対して、座標情報Icで示された位置に画像情報Ipを結合して、第2の文字画像情報P2を生成する(S204)。そして、外部装置20の送信部20aは、他の情報処理装置10である情報処理装置10−2に対して、結合部20cにより生成された第2の文字画像情報P2を送信する(S206)。 On the other hand, when the receiving unit 20b of the external device 20 receives the image information Ip and the coordinate information Ic indicating the rectangular region E from the information processing device 10 (Yes in S202), the connecting unit 20c of the external device 20 is a storage unit. The image information Ip is combined with the first character image information P1 stored in 20d at the position indicated by the coordinate information Ic to generate the second character image information P2 (S204). Then, the transmission unit 20a of the external device 20 transmits the second character image information P2 generated by the coupling unit 20c to the information processing device 10-2, which is another information processing device 10 (S206).

図14は、本実施形態にかかる外部装置20が問い合わせQを受信した際の処理を示すフローチャートである。外部装置20の受信部20bは、外部装置20の結合部20cが、第1の文字画像情報P1に対して他の座標情報Icをもとに他の画像情報Ipを結合中であるか否かの問い合わせQを、情報処理装置10―1から受信する(S300)。 FIG. 14 is a flowchart showing a process when the external device 20 according to the present embodiment receives the inquiry Q. The receiving unit 20b of the external device 20 determines whether or not the connecting unit 20c of the external device 20 is combining another image information Ip with respect to the first character image information P1 based on the other coordinate information Ic. Inquiry Q is received from the information processing apparatus 10-1 (S300).

外部装置20の管理部20eは、結合部20cが第1の文字画像情報P1に対して他の座標情報Icをもとに他の画像情報Ipを結合中であるか否かを判断する(S302)。外部装置20の結合部20cが、第1の文字画像情報P1に対して他の座標情報Icをもとに他の画像情報Ipを結合中である場合(S302のYes)、外部装置20の送信部20aが、第1の文字画像情報P1に対して他の座標情報Icをもとに他の画像情報Ipを結合部20cが結合中ある旨を示した情報を含む回答A2を送信して(S304)、処理を終了する。 The management unit 20e of the external device 20 determines whether or not the connecting unit 20c is combining the other image information Ip with respect to the first character image information P1 based on the other coordinate information Ic (S302). ). When the coupling portion 20c of the external device 20 is coupling another image information Ip to the first character image information P1 based on the other coordinate information Ic (Yes in S302), the transmission of the external device 20 The unit 20a transmits an answer A2 including information indicating that the unit 20c is combining the other image information Ip with the first character image information P1 based on the other coordinate information Ic (). S304), the process is terminated.

外部装置20の結合部20cが、第1の文字画像情報P1に対して他の座標情報Icをもとに他の画像情報Ipを結合中でない場合(S302のNo)、外部装置20の送信部20aが、第1の文字画像情報P1に対して他の座標情報Icをもとに他の画像情報Ipを結合部20cが結合中でない旨を示した情報を含む回答A1を送信して(S306)、処理を終了する。 When the coupling unit 20c of the external device 20 is not combining another image information Ip with respect to the first character image information P1 based on the other coordinate information Ic (No in S302), the transmission unit of the external device 20. 20a transmits an answer A1 including information indicating that the joining portion 20c is not joining the other image information Ip based on the other coordinate information Ic to the first character image information P1 (S306). ), End the process.

このように、本実施形態の情報処理装置10によれば、第1の受信部10aは、外部装置20から第1の文字画像情報P1を受信する。送信部10cは、外部装置20ら送信された第1の文字画像情報P1を情報端末12に送信する。第2の受信部10bは、第1の文字画像情報P1に対応する第2の文字画像情報P2を、情報端末12より受信する。判定部10dは、第1の文字画像情報P1と、第2の文字画像情報P2とで異なる領域があるか否かを判定し、異なる領域があると判定された場合に、抽出部10eは異なる領域を表した画像情報Ipと、第2の文字画像情報P2の表示領域内の異なる領域の位置を示す座標情報Icと、を第2の文字画像情報P2から抽出する。その結果、ユーザーにより情報端末12に手書き入力された画像情報Ipおよび座標情報Icの特定を容易にすることができる、情報処理装置10を得ることができる。 As described above, according to the information processing device 10 of the present embodiment, the first receiving unit 10a receives the first character image information P1 from the external device 20. The transmission unit 10c transmits the first character image information P1 transmitted from the external device 20 to the information terminal 12. The second receiving unit 10b receives the second character image information P2 corresponding to the first character image information P1 from the information terminal 12. The determination unit 10d determines whether or not the first character image information P1 and the second character image information P2 have different regions, and if it is determined that there are different regions, the extraction unit 10e is different. The image information Ip representing the region and the coordinate information Ic indicating the positions of different regions in the display region of the second character image information P2 are extracted from the second character image information P2. As a result, it is possible to obtain an information processing device 10 that can easily identify the image information Ip and the coordinate information Ic that are handwritten and input to the information terminal 12 by the user.

また、情報処理装置10の送信部10cは、抽出部10eで抽出された、画像情報Ipおよび座標情報Icを、外部装置20に送信する。その結果、外部装置20において、画像情報Ipおよび座標情報Icを受信することができ、ユーザーは外部装置20と通信することにより、画像情報Ipおよび座標情報Icを得ることができる。 Further, the transmission unit 10c of the information processing device 10 transmits the image information Ip and the coordinate information Ic extracted by the extraction unit 10e to the external device 20. As a result, the external device 20 can receive the image information Ip and the coordinate information Ic, and the user can obtain the image information Ip and the coordinate information Ic by communicating with the external device 20.

情報処理装置10と、情報端末12と、外部装置20と、を備える情報処理システム100によれば、外部装置20の送信部20aは、情報処理装置10に第1の文字画像情報P1を送信する。情報処理装置10の第1の受信部10aは、第1の文字画像情報P1を受信する。情報処理装置10の送信部10cは、外部装置20から送信された第1の文字画像情報P1を情報端末12に送信する。情報端末12の受信部12aは、第1の文字画像情報P1を受信する。情報端末12の表示部12bは、第1の文字画像情報P1を表示する。情報端末12の入力部12cは、表示装置12b1に表示された第1の文字画像情報P1に対する情報の入力を受け付ける。情報端末12の生成部12dは、第1の文字画像情報P1に対して入力を受け付けた情報である花の絵の手書き画像Fを異なる領域として合成することで、第2の文字画像情報P2を生成する。そして、情報端末12―1の送信部12eは、生成部12dで生成された、第2の文字画像情報P2を情報処理装置10に送信する。情報処理装置10の第2の受信部10bは、第1の文字画像情報P1に対応する第2の文字画像情報P2を、情報端末12より受信する。情報処理装置10の判定部10dは、第1の文字画像情報P1と、第2の文字画像情報P2とで異なる領域があるか否かを判定し、異なる領域があると判定された場合に、情報処理装置10の抽出部10eは異なる領域を表した画像情報Ipと、第2の文字画像情報P2の表示領域内の異なる領域の位置を示す座標情報Icと、を第2の文字画像情報P2から抽出する。したがって、ユーザーが情報端末12に手書き入力した画像情報Ipおよび座標情報Icの特定を容易にすることができる。 According to the information processing system 100 including the information processing device 10, the information terminal 12, and the external device 20, the transmission unit 20a of the external device 20 transmits the first character image information P1 to the information processing device 10. .. The first receiving unit 10a of the information processing device 10 receives the first character image information P1. The transmission unit 10c of the information processing device 10 transmits the first character image information P1 transmitted from the external device 20 to the information terminal 12. The receiving unit 12a of the information terminal 12 receives the first character image information P1. The display unit 12b of the information terminal 12 displays the first character image information P1. The input unit 12c of the information terminal 12 accepts the input of information to the first character image information P1 displayed on the display device 12b1. The generation unit 12d of the information terminal 12 synthesizes the handwritten image F of the flower picture, which is the information received for the first character image information P1, as different regions, thereby generating the second character image information P2. Generate. Then, the transmission unit 12e of the information terminal 12-1 transmits the second character image information P2 generated by the generation unit 12d to the information processing device 10. The second receiving unit 10b of the information processing apparatus 10 receives the second character image information P2 corresponding to the first character image information P1 from the information terminal 12. The determination unit 10d of the information processing device 10 determines whether or not the first character image information P1 and the second character image information P2 have different regions, and when it is determined that there are different regions, the determination unit 10d determines. The extraction unit 10e of the information processing apparatus 10 uses the image information Ip representing different regions and the coordinate information Ic indicating the positions of the different regions in the display region of the second character image information P2 as the second character image information P2. Extract from. Therefore, it is possible to easily identify the image information Ip and the coordinate information Ic that the user has handwritten in the information terminal 12.

また、上述した情報処理システム100は、情報処理装置10の送信部10cが、抽出部10eで抽出した、画像情報Ipおよび座標情報Icを外部装置20に送信し、外部装置20の受信部20bは、情報処理装置10から、画像情報Ipおよび座標情報Icを受信し、外部装置20の結合部20cは、第1の文字画像情報P1に対して、座標情報Icで示された位置に画像情報Ipを結合して、第2の文字画像情報P2を生成する。その結果、外部装置20において、第2の文字画像情報P2を得ることができ、ユーザーは外部装置20と通信することにより、第2の文字画像情報P2を得ることができる。 Further, in the above-mentioned information processing system 100, the transmission unit 10c of the information processing device 10 transmits the image information Ip and the coordinate information Ic extracted by the extraction unit 10e to the external device 20, and the reception unit 20b of the external device 20 sends the image information Ip and the coordinate information Ic to the external device 20. , Image information Ip and coordinate information Ic are received from the information processing device 10, and the coupling portion 20c of the external device 20 receives the image information Ip at the position indicated by the coordinate information Ic with respect to the first character image information P1. Is combined to generate the second character image information P2. As a result, the second character image information P2 can be obtained in the external device 20, and the user can obtain the second character image information P2 by communicating with the external device 20.

また、上述した情報処理システム100は、外部装置20の送信部20aが、他の情報処理装置10に対して、結合部20cにより生成された第2の文字画像情報P2を送信する。その結果、他の情報処理装置10が、第2の文字画像情報P2を得ることができ、ひいては複数のユーザーが、同期された第2の文字画像情報P2を共有することができる。 Further, in the above-mentioned information processing system 100, the transmission unit 20a of the external device 20 transmits the second character image information P2 generated by the coupling unit 20c to the other information processing device 10. As a result, the other information processing device 10 can obtain the second character image information P2, and thus a plurality of users can share the synchronized second character image information P2.

また、上述した情報処理システム100は、情報処理装置10の送信部10cは、外部装置20の結合部20cが、第1の文字画像情報P1に対して他の座標情報Icをもとに他の画像情報Ipを結合中であるか否かの問い合わせQを、外部装置20に送信する。情報処理装置10の第1の受信部10aは、外部装置20から、第1の文字画像情報P1に対して他の座標情報Icをもとに他の画像情報Ipを外部装置20の結合部20cにおいて結合中である旨を示した情報を含む回答Aを受信した場合、情報処理装置10の送信部10cは、第1の文字画像情報P1に結合する、画像情報Ipおよび座標情報Icの送信を待機する。これにより、外部装置20の結合処理と、情報処理装置10の送信処理とを別個の処理とすることができ、互いの処理が干渉しなくなる。 Further, in the information processing system 100 described above, in the transmission unit 10c of the information processing device 10, the coupling unit 20c of the external device 20 has another coordinate information Ic with respect to the first character image information P1. An inquiry Q as to whether or not the image information Ip is being combined is transmitted to the external device 20. The first receiving unit 10a of the information processing device 10 transmits other image information Ip from the external device 20 to the first character image information P1 based on the other coordinate information Ic, and the coupling unit 20c of the external device 20. When the answer A including the information indicating that the information is being combined is received, the transmission unit 10c of the information processing apparatus 10 transmits the image information Ip and the coordinate information Ic to be combined with the first character image information P1. stand by. As a result, the coupling process of the external device 20 and the transmission process of the information processing device 10 can be made separate processes, and the processes do not interfere with each other.

また、情報処理装置10による上述したような処理を実現する情報処理プログラムによれば、外部装置20より、第1の文字画像情報P1を受信する第1の受信処理と、第1の文字画像情報P1に情報の追加が可能な情報端末12に、第1の文字画像情報P1を送信する送信処理と、送信処理により情報端末12に送信された第1の文字画像情報P1に対応する第2の文字画像情報P2を、情報端末12より受信する第2の受信処理と、第1の文字画像情報P1と、第2の文字画像情報P2とで異なる領域があるか否かを判定する判定処理と、判定処理で異なる領域があると判定された場合に、異なる領域を表した画像情報Ipと、第2の文字画像情報P2の表示領域内の異なる領域の位置を示す座標情報Icと、を第2の文字画像情報P2から抽出する抽出処理と、をパーソナルコンピュータ上で容易に実現することができる。 Further, according to the information processing program that realizes the above-described processing by the information processing device 10, the first reception process of receiving the first character image information P1 from the external device 20 and the first character image information. A transmission process for transmitting the first character image information P1 to the information terminal 12 capable of adding information to the P1 and a second transmission process corresponding to the first character image information P1 transmitted to the information terminal 12 by the transmission process. A second reception process for receiving the character image information P2 from the information terminal 12, and a determination process for determining whether or not there is a different region between the first character image information P1 and the second character image information P2. , When it is determined by the determination process that there are different regions, the image information Ip representing the different regions and the coordinate information Ic indicating the positions of the different regions in the display area of the second character image information P2 are obtained. The extraction process of extracting from the character image information P2 of 2 can be easily realized on a personal computer.

なお、本実施形態の情報処理装置10のCPUで実行される情報処理プログラムは、インストール可能な形式又は実行可能な形式のファイルでCD−ROM、フレキシブルディスク(FD)、CD−R、DVD(Digital Versatile Disk)等のコンピュータで読み取り可能な記録媒体に記録して提供するように構成してもよい。 The information processing program executed by the CPU of the information processing apparatus 10 of the present embodiment is a file in an installable format or an executable format, and is a CD-ROM, a flexible disk (FD), a CD-R, or a DVD (Digital). It may be configured to be recorded and provided on a computer-readable recording medium such as Versatile Disk).

さらに、情報処理プログラムを、インターネット等のネットワークに接続されたコンピュータ上に格納し、ネットワーク経由でダウンロードさせることにより提供するように構成してもよい。また、本実施形態で実行される情報処理プログラムをインターネット等のネットワーク経由で提供または配布するように構成してもよい。 Further, the information processing program may be stored on a computer connected to a network such as the Internet and provided by downloading via the network. Further, the information processing program executed in the present embodiment may be configured to be provided or distributed via a network such as the Internet.

本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。 Although some embodiments of the present invention have been described, these embodiments are presented as examples and are not intended to limit the scope of the invention. These novel embodiments can be implemented in various other embodiments, and various omissions, replacements, and changes can be made without departing from the gist of the invention. These embodiments and modifications thereof are included in the scope and gist of the invention, and are also included in the scope of the invention described in the claims and the equivalent scope thereof.

10 情報処理装置、10a 第1の受信部、10b 第2の受信部、10c 送信部、10d 判定部、10e 抽出部、12 情報端末、12a 受信部、12b 表示部、12c 入力部、12d 生成部、20 外部装置、20a 送信部、20b 受信部、20c 結合部、P1 第1の文字画像情報、P2 第2の文字画像情報、Ip 画像情報、Ic 座標情報、Q 問い合わせ 10 Information processing device, 10a 1st receiving unit, 10b 2nd receiving unit, 10c transmitting unit, 10d judgment unit, 10e extracting unit, 12 information terminal, 12a receiving unit, 12b display unit, 12c input unit, 12d generating unit , 20 external device, 20a transmitter, 20b receiver, 20c coupling, P1 first character image information, P2 second character image information, Ip image information, Ic coordinate information, Q inquiry

Claims (6)

外部装置より、第1の文字画像情報を受信する第1の受信部と、
前記第1の文字画像情報に情報の追加が可能な情報端末に、前記第1の文字画像情報を送信する送信部と、
前記送信部より前記情報端末に送信された前記第1の文字画像情報に対応する第2の文字画像情報を、前記情報端末より受信する第2の受信部と、
前記第1の文字画像情報と、前記第2の文字画像情報とで異なる領域があるか否かを判定する判定部と、
前記判定部で前記異なる領域があると判定された場合に、前記異なる領域を表した画像情報と、前記第2の文字画像情報の表示領域内の前記異なる領域の位置を示す座標情報と、を前記第2の文字画像情報から抽出する抽出部と、
を備え
前記送信部は、前記抽出部により抽出された、前記画像情報および前記座標情報を、前記外部装置に送信する、情報処理装置。
A first receiving unit that receives the first character image information from an external device,
A transmission unit that transmits the first character image information to an information terminal capable of adding information to the first character image information.
A second receiving unit that receives the second character image information corresponding to the first character image information transmitted from the transmitting unit to the information terminal from the information terminal.
A determination unit that determines whether or not there is a different region between the first character image information and the second character image information.
When the determination unit determines that there are different regions, the image information representing the different regions and the coordinate information indicating the positions of the different regions in the display region of the second character image information are provided. An extraction unit that extracts from the second character image information,
Equipped with a,
The transmission unit is an information processing device that transmits the image information and the coordinate information extracted by the extraction unit to the external device.
情報処理装置と、情報端末と、外部装置と、を備えるシステムであって、
前記外部装置は、
前記情報処理装置に第1の文字画像情報を送信する送信部、
を備え、
前記情報処理装置は、
前記外部装置より、前記第1の文字画像情報を受信する第1の受信部と、
前記第1の文字画像情報に情報の追加が可能な前記情報端末に、前記第1の文字画像情報を送信する送信部と、
前記送信部より前記情報端末に送信された前記第1の文字画像情報に対応する第2の文字画像情報を、前記情報端末より受信する第2の受信部と、
前記第1の文字画像情報と、前記第2の文字画像情報とで異なる領域があるか否かを判定する判定部と、
前記判定部で前記異なる領域があると判定された場合に、前記異なる領域を表した画像情報と、前記第2の文字画像情報の表示領域内の前記異なる領域の位置を示す座標情報と、を前記第2の文字画像情報から抽出する抽出部と、
を備え、
前記情報端末は、
前記情報処理装置より、前記第1の文字画像情報を受信する受信部と、
前記第1の文字画像情報を表示する表示部と、
前記表示部に表示された前記第1の文字画像情報に対する情報の入力を受け付ける入力部と、
前記第1の文字画像情報に対して入力を受け付けた情報を前記異なる領域として合成することで生成された、前記第2の文字画像情報を前記情報処理装置に送信する送信部と、
を備え
前記情報処理装置の送信部は、前記抽出部により抽出された、前記画像情報および前記座標情報を、前記外部装置に送信する、情報処理システム。
A system including an information processing device, an information terminal, and an external device.
The external device is
A transmission unit that transmits the first character image information to the information processing device.
With
The information processing device
A first receiving unit that receives the first character image information from the external device, and
A transmission unit that transmits the first character image information to the information terminal capable of adding information to the first character image information.
A second receiving unit that receives the second character image information corresponding to the first character image information transmitted from the transmitting unit to the information terminal from the information terminal.
A determination unit that determines whether or not there is a different region between the first character image information and the second character image information.
When the determination unit determines that there are different regions, the image information representing the different regions and the coordinate information indicating the positions of the different regions in the display region of the second character image information are provided. An extraction unit that extracts from the second character image information,
With
The information terminal is
A receiving unit that receives the first character image information from the information processing device, and
A display unit that displays the first character image information, and
An input unit that accepts information input for the first character image information displayed on the display unit, and
A transmission unit that transmits the second character image information to the information processing apparatus, which is generated by synthesizing the information received for input with respect to the first character image information as the different regions.
Equipped with a,
The transmission unit of the information processing device is an information processing system that transmits the image information and the coordinate information extracted by the information processing unit to the external device.
前記情報処理装置は、
前記送信部が、前記抽出部で抽出した、前記画像情報および前記座標情報を前記外部装置に送信し、
前記外部装置は、
前記情報処理装置から、前記画像情報および前記座標情報を受信する受信部と、
前記第1の文字画像情報に対して、前記座標情報で示された位置に前記画像情報を結合して、前記第2の文字画像情報を生成する結合部と、をさらに備える、
請求項に記載の情報処理システム。
The information processing device
The transmission unit transmits the image information and the coordinate information extracted by the extraction unit to the external device.
The external device is
A receiving unit that receives the image information and the coordinate information from the information processing device, and
The first character image information is further provided with a connecting portion that combines the image information at a position indicated by the coordinate information to generate the second character image information.
The information processing system according to claim 2.
前記外部装置は、
前記送信部が、他の情報処理装置に対して、前記結合部により生成された前記第2の文字画像情報を送信する、
請求項に記載の情報処理システム。
The external device is
The transmission unit transmits the second character image information generated by the coupling unit to another information processing device.
The information processing system according to claim 3.
前記情報処理装置は、
前記送信部が、前記外部装置が、前記第1の文字画像情報に対して他の座標情報をもとに他の画像情報を結合中であるか否かの問い合わせを送信し、
前記第1の受信部が、前記外部装置から、前記第1の文字画像情報に対して前記他の座標情報をもとに前記他の画像情報を結合中である旨を示した情報を受信した場合に、前記送信部は、前記第1の文字画像情報に結合する、前記画像情報および前記座標情報の送信を待機する、
請求項または請求項に記載の情報処理システム。
The information processing device
The transmission unit transmits an inquiry as to whether or not the external device is combining other image information with respect to the first character image information based on the other coordinate information.
The first receiving unit receives information from the external device indicating that the other image information is being combined with the first character image information based on the other coordinate information. In this case, the transmission unit waits for the transmission of the image information and the coordinate information to be combined with the first character image information.
The information processing system according to claim 3 or 4.
外部装置より、第1の文字画像情報を受信する第1の受信処理と、
前記第1の文字画像情報に情報の追加が可能な情報端末に、前記第1の文字画像情報を送信する送信処理と、
前記送信処理より前記情報端末に送信された前記第1の文字画像情報に対応する第2の文字画像情報を、前記情報端末より受信する第2の受信処理と、
前記第1の文字画像情報と、前記第2の文字画像情報とで異なる領域があるか否かを判定する判定処理と、
前記判定処理で前記異なる領域があると判定された場合に、前記異なる領域を表した画像情報と、前記第2の文字画像情報の表示領域内の前記異なる領域の位置を示す座標情報と、を前記第2の文字画像情報から抽出する抽出処理と、
前記画像情報および前記座標情報を、前記外部装置に送信する第2の送信処理と、
をコンピュータに実行させる、情報処理プログラム。
The first reception process of receiving the first character image information from the external device, and
A transmission process for transmitting the first character image information to an information terminal capable of adding information to the first character image information, and
A second reception process of receiving the second character image information corresponding to the first character image information transmitted from the transmission process to the information terminal from the information terminal.
A determination process for determining whether or not there is a different region between the first character image information and the second character image information.
When it is determined by the determination process that there are the different regions, the image information representing the different regions and the coordinate information indicating the positions of the different regions in the display region of the second character image information are provided. Extraction processing for extracting from the second character image information and
A second transmission process for transmitting the image information and the coordinate information to the external device, and
An information processing program that causes a computer to execute.
JP2020181919A 2020-10-29 2020-10-29 Information processing equipment, information processing systems, and information processing programs Active JP6912749B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2020181919A JP6912749B1 (en) 2020-10-29 2020-10-29 Information processing equipment, information processing systems, and information processing programs

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2020181919A JP6912749B1 (en) 2020-10-29 2020-10-29 Information processing equipment, information processing systems, and information processing programs

Publications (2)

Publication Number Publication Date
JP6912749B1 true JP6912749B1 (en) 2021-08-04
JP2022072461A JP2022072461A (en) 2022-05-17

Family

ID=77057409

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020181919A Active JP6912749B1 (en) 2020-10-29 2020-10-29 Information processing equipment, information processing systems, and information processing programs

Country Status (1)

Country Link
JP (1) JP6912749B1 (en)

Also Published As

Publication number Publication date
JP2022072461A (en) 2022-05-17

Similar Documents

Publication Publication Date Title
US12008335B2 (en) Information processing system, information processing apparatus, and information processing method
CN107534704B (en) Information processing method, device and medium connected via communication network
EP3312801A1 (en) Method and system for providing augmented reality content using user-edited image
US20050114528A1 (en) System, server, method and program for providing communication service
US9692608B2 (en) Communication management apparatus, program, communication management method, and communication management system
US11348587B2 (en) Review system for online communication, method, and computer program
JP2008305104A (en) Comment distribution system, server, terminal equipment, comment distribution method, comment display method and program
JP2014182411A (en) Information processing device, network system, processing execution method, and processing execution program
EP3156895A1 (en) Image processing apparatus and image processing system
US11334706B2 (en) Information processing apparatus and non-transitory computer readable medium
US20120221947A1 (en) Information processing apparatus and method
KR102003221B1 (en) System for generating note data and method for generating note data using the system
CN102348031A (en) Image processing system, image processing apparatus, method for controlling display of function setting screen
EP2144178A2 (en) Data transmission system with image display apparatus
JP6912749B1 (en) Information processing equipment, information processing systems, and information processing programs
CN112463092A (en) Remote annotation method, smart phone and conference tablet
JP2004334721A (en) Device for providing content, and device for browsing provided content
US20150067056A1 (en) Information processing system, information processing apparatus, and information processing method
JP6256430B2 (en) Content providing server, content providing method, and computer program
CN112966480A (en) Teleconference annotation method and related equipment thereof
JP7509128B2 (en) Information processing device, information processing system, user terminal, program, and information processing method
JP5404593B2 (en) Address book server and data processing system having the same
JP6331777B2 (en) Augmented reality information providing system, augmented reality information providing method, and augmented reality information providing program
JP2007207027A (en) Information management device, terminal equipment, information management system and information management method
JP2017175590A (en) program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20201105

A871 Explanation of circumstances concerning accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A871

Effective date: 20201105

A975 Report on accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A971005

Effective date: 20201211

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210209

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210401

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210608

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210621

R150 Certificate of patent or registration of utility model

Ref document number: 6912749

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150