JP3169046U - Information distribution system - Google Patents

Abstract

【課題】電子ペンにより描画されたストロークを処理するシステムにおいて、描画されたストロークからの文字の認識及び翻訳の処理の負担を軽減することが可能になる情報配信システムを提供する。【解決手段】コンピュータ装置３は、電子ペンによって生成されたストローク情報により表わされる第１言語の文字列を、文字情報として認識する文字認識手段と、文字認識手段により認識された文字情報を端末４に送信する送信手段とを備える。端末４は、コンピュータ装置３から送信された文字情報を受信する受信手段４２と、受信手段４２において受信された文字情報により表わされる第１言語の文字列を、第２言語の文字列に翻訳する翻訳手段４４３と、翻訳手段４４３により第２言語に翻訳された文字列を表示させる表示制御手段４４４とを備える。【選択図】図７Provided is an information distribution system that can reduce a burden of processing of character recognition and translation from a drawn stroke in a system that processes a stroke drawn by an electronic pen. A computer device includes: a character recognition unit that recognizes a character string of a first language represented by stroke information generated by an electronic pen as character information; And transmission means for transmitting the data to the server. The terminal 4 receives the character information transmitted from the computer device 3, and translates the first language character string represented by the character information received by the receiving means 42 into a second language character string. It includes a translation unit 443 and a display control unit 444 that displays a character string translated into a second language by the translation unit 443. [Selection diagram] FIG.

Description

本考案は、電子ペンによりストロークを描画するシステムにおいて、描画されたストロークから文字列を文字情報として認識し、その文字情報を翻訳するための情報配信システムに関する。   The present invention relates to an information distribution system for recognizing a character string as character information from a drawn stroke and translating the character information in a system for drawing a stroke with an electronic pen.

記入した情報を電子化する電子ペンが開発されており、その代表的なものとしてスウェーデンのAnoto社が開発した「アノトペン（Anoto pen）」が知られている。アノトペンは、所定のドットパターンが印刷された専用紙とともに使用される。アノトペンは、ペン先部に、文字等を書くための通常のインクカートリッジに加えて、専用紙に印刷されたドットパターンを撮像するための小型カメラと、撮像したドットパターンから専用紙における位置座標を演算するプロセッサと、演算された位置座標等を外部機器へ送信するデータ通信ユニットとを搭載している。ユーザが専用紙上にアノトペンで文字等を書いたり、専用紙上に図案化されている画像にチェックマークを記入したりすると、ペンの移動に伴って小型カメラが専用紙に印刷されたドットパターンを撮像し、プロセッサによって演算された連続する位置座標から、ユーザが書き込んだ文字、画像等の記入情報が認識される。そして、この記入情報が、データ通信ユニットによりアノトペンから近くのパーソナルコンピュータや携帯電話等の端末装置に送信される（例えば、特許文献１参照）。また、ドットパターンに対向する電子ペン１の角度に起因するドットの画像上の配列を補正する回転補正処理機能については、同社の例えば特許文献２に記載されている。   An electronic pen that digitizes written information has been developed. A typical example is the “Anoto pen” developed by Swedish company Anoto. Anotopen is used together with special paper on which a predetermined dot pattern is printed. In addition to the usual ink cartridge for writing characters, etc., the anotopen has a small camera for imaging the dot pattern printed on the dedicated paper and the position coordinates on the dedicated paper from the captured dot pattern. A processor for calculation and a data communication unit for transmitting the calculated position coordinates and the like to an external device are mounted. When the user writes characters on the special paper with an anotopen or puts a check mark on the image designed on the special paper, the small camera captures the dot pattern printed on the special paper as the pen moves. Then, the entry information such as characters and images written by the user is recognized from the continuous position coordinates calculated by the processor. Then, the entry information is transmitted from the Anotopen to a nearby personal computer, a mobile phone or other terminal device by the data communication unit (see, for example, Patent Document 1). Further, a rotation correction processing function for correcting the arrangement of dots on the image due to the angle of the electronic pen 1 facing the dot pattern is described in, for example, Patent Document 2 of the same company.

このような電子ペンやコンピュータ等で構成されるシステムを用いて、ドットパターンが印刷された書き込みボードに対して、電子ペンで描画ストロークを記入する技術が、特許文献３に開示されている。   Patent Document 3 discloses a technique for writing a drawing stroke with an electronic pen on a writing board on which a dot pattern is printed using a system including such an electronic pen and a computer.

また、サーバから送信されたデータに基づき各端末において文字を認識し、認識した文字を翻訳する技術が特許文献４に開示されている。   Patent Document 4 discloses a technique for recognizing characters at each terminal based on data transmitted from a server and translating the recognized characters.

また、携帯端末の表示内容、コンテンツ内容、受信した配信データ等の各種情報の中に、予め設定されたキーワードが包含されているか否かを検出し、包含されている場合にはその旨をユーザに報知する技術が特許文献５〜７に開示されている。   In addition, it is detected whether or not a preset keyword is included in various information such as display contents of the mobile terminal, content contents, and received distribution data. Patent Documents 5 to 7 disclose techniques for informing the above.

特許第３８４２２８３号公報Japanese Patent No. 3842283 特表２００３−５２９８５３号公報Special table 2003-529853 gazette 特表２００３−５０８８３１号公報Special table 2003-508831 gazette 特開平６−２５９６００号公報JP-A-6-259600 特開２００１−３２５０６０号公報Japanese Patent Laid-Open No. 2001-325060 特開２００９−１５５９８号公報JP 2009-15598 A 特開２０１０−２２６２４５号公報JP 2010-226245 A

しかしながら、このような特許文献１〜７に記載の技術により構築しうるシステムでは、書き込みボード上の描画ストロークについての文字認識は各端末装置でそれぞれ別々に独立して行われることになり、システム全体として、文字認識の処理負担が大きくなってしまう。   However, in such a system that can be constructed by the techniques described in Patent Documents 1 to 7, character recognition for the drawing stroke on the writing board is performed independently by each terminal device, and the entire system As a result, the processing load for character recognition increases.

本考案は、このような状況に鑑みてなされたものであり、描画されたストロークを処理するシステムにおいて、描画されたストロークからの文字の認識及び翻訳にかかる処理負担を軽減することを目的とする。   The present invention has been made in view of such a situation, and an object of the present invention is to reduce a processing burden related to recognition and translation of characters from a drawn stroke in a system for processing the drawn stroke. .

本考案に係る情報配信システムは、コンピュータ装置から端末へ、電子ペンで書き込み媒体に記入されたストロークに関する情報を配信する情報配信システムであって、前記コンピュータ装置は、前記電子ペンによって生成されたストローク情報により表わされる第１言語の文字列を、文字情報として認識する文字認識手段と、前記文字認識手段により認識された前記文字情報を前記端末に送信する送信手段と、を備え、前記端末は、前記コンピュータ装置から送信された前記文字情報を受信する受信手段と、前記受信手段において受信された前記文字情報により表わされる前記第１言語の文字列を、第２言語の文字列に翻訳する翻訳手段と、前記翻訳手段により前記第２言語に翻訳された前記文字列を表示させる表示制御手段と、を備えることを特徴とする。   An information distribution system according to the present invention is an information distribution system that distributes information about a stroke written on a writing medium with an electronic pen from a computer device to a terminal, the computer device having a stroke generated by the electronic pen. A character recognition unit for recognizing a character string of a first language represented by information as character information; and a transmission unit for transmitting the character information recognized by the character recognition unit to the terminal. Receiving means for receiving the character information transmitted from the computer device; and translation means for translating the first language character string represented by the character information received by the receiving means into a second language character string. And display control means for displaying the character string translated into the second language by the translation means. And wherein the door.

この構成によれば、書き込み媒体に記入されたストロークにより表わされる第１言語の文字列を、文字情報としてコンピュータ装置により一括して認識することができる。したがって、文字情報の認識をコンピュータ装置の一カ所で一括して行うことができ、システム全体にかかる処理負担の軽減を行うことができる。さらに、端末側では、コンピュータ装置により一括して行われた文字の認識結果に基づいて、各端末において翻訳を行うことができる。したがって、各端末において行われる翻訳をコンピュータ装置で行う必要がなく、翻訳にかかる処理負担を軽減することができる。   According to this configuration, the first language character strings represented by the strokes written on the writing medium can be collectively recognized as character information by the computer device. Therefore, the character information can be recognized collectively at one place of the computer device, and the processing load on the entire system can be reduced. Furthermore, on the terminal side, translation can be performed in each terminal based on the recognition result of characters collectively performed by the computer device. Therefore, it is not necessary to perform translation performed in each terminal by a computer device, and the processing load related to translation can be reduced.

上記情報配信システムにおいて、前記コンピュータ装置は、前記翻訳手段により前記文字情報として認識された前記第１言語の文字列を表示する表示手段に表示させる表示制御手段をさらに有するとよい。
このように、書き込み媒体に記入したユーザは、表示制御手段により表示手段に表示された文字列を見ることにより、書き込み媒体に記入されたストロークからの文字列の認識が適切に行われたか否かを確認することができる。 In the information distribution system, the computer device may further include display control means for displaying on the display means for displaying the character string of the first language recognized as the character information by the translation means.
In this way, whether or not the user who entered the writing medium properly recognized the character string from the stroke entered on the writing medium by looking at the character string displayed on the display means by the display control means. Can be confirmed.

上記情報配信システムにおいて、前記端末は、前記翻訳手段により翻訳される前記第２言語として、所定言語を設定する翻訳言語設定手段をさらに有するとよい。
このように、各端末毎に翻訳される所定言語を翻訳言語設定手段により予め設定しておくことにより、コンピュータ装置は、設定された所定言語に基づいて翻訳することができる。したがって、各端末において必要であるか否か不確定の言語にまで予めコンピュータ装置において翻訳しておく必要がなく、各端末において設定された言語にのみ翻訳することで、処理負担を軽減することができる。 In the information distribution system, the terminal may further include a translation language setting unit that sets a predetermined language as the second language translated by the translation unit.
As described above, the predetermined language to be translated for each terminal is set in advance by the translation language setting means, so that the computer apparatus can translate based on the set predetermined language. Therefore, it is not necessary to translate in advance to the indefinite language in each terminal whether it is necessary or not in each terminal, and the processing burden can be reduced by translating only into the language set in each terminal. it can.

また、上記情報配信システムにおいて、前記端末は、キーワードを設定するキーワード設定手段と、前記翻訳手段により前記第２言語に翻訳された前記文字列を検索対象として、前記キーワード設定機能手段により設定された前記キーワードに関連するワードを検出するキーワード検出手段と、前記キーワード設定手段により前記検索対象が前記キーワードに関連するワードが検出された場合に、報知手段によって報知する報知制御手段をさらに有するとよい。
このように、各端末毎にキーワードを設定しておくことにより、翻訳された文字列の中にユーザが設定したキーワードに関連するワードが含まれている場合には、ユーザに所定の内容を報知することにより、設定されたキーワードに関連するワードが翻訳された文字列に含まれることをユーザに伝達することができる。また、各端末は、設定された必要最小限のキーワードに関連するワードのみを検索対象とすれば足りるので、処理の負担軽減を図ることができる。 Further, in the information distribution system, the terminal is set by the keyword setting function unit with a keyword setting unit for setting a keyword and the character string translated into the second language by the translation unit as a search target. It is preferable to further include a keyword detection unit that detects a word related to the keyword, and a notification control unit that notifies by a notification unit when the keyword setting unit detects a word related to the keyword as the search target.
In this way, by setting a keyword for each terminal, if a word related to the keyword set by the user is included in the translated character string, a predetermined content is notified to the user. By doing this, it is possible to inform the user that a word related to the set keyword is included in the translated character string. In addition, each terminal need only search for words related to the set minimum necessary keywords, so that the processing burden can be reduced.

また、上記情報配信システムにおいて、前記キーワード検出手段は、前記キーワードとその同義語ないし類義語を検出するとよい。
このように、翻訳された文字列の中にユーザが設定したキーワードのみならず、該キーワードと語形は異なるが意義はほぼ同じ言葉や意義が類似する言葉が含まれている場合には、設定されたキーワードのみならず、その同義語ないし類義語が翻訳された文字列に含まれることをユーザに伝達することができる。したがって、ユーザは、キーワードを設定するだけで、そのキーワードのみならず、そのキーワードに関連する幅広いワードを報知対象に含めることができるので、ユーザのキーワードの設定に対する負担軽減を図ることができる。 In the information distribution system, the keyword detection unit may detect the keyword and its synonyms or synonyms.
In this way, not only a keyword set by the user but also a word that is different from the keyword but has a word shape that is similar in meaning or similar in meaning is included in the translated character string. It is possible to convey to the user that not only the keyword but also its synonyms or synonyms are included in the translated character string. Therefore, the user can include not only the keyword but also a wide word related to the keyword in the notification target only by setting the keyword, so that the burden on the user's keyword setting can be reduced.

本考案によれば、描画されたストロークを処理するシステムにおいて、描画されたストロークからの文字の認識及び翻訳にかかる処理の負担を軽減することができる。   ADVANTAGE OF THE INVENTION According to this invention, in the system which processes the drawn stroke, the burden of the process concerning recognition and translation of the character from the drawn stroke can be reduced.

本実施形態における情報配信システムのシステム構成図である。It is a system configuration figure of the information distribution system in this embodiment. 本実施形態におけるホワイトボードの横断面を示す図であるIt is a figure which shows the cross section of the white board in this embodiment. ドットパターンにおけるドットの配置と変換される値との関係を示す説明図である。It is explanatory drawing which shows the relationship between the arrangement | positioning of the dot in a dot pattern, and the value converted. （ａ）は、ドットパターンを模式的に示し、（ｂ）は、それに対応する情報の例を示す図である。(A) shows a dot pattern typically, and (b) is a figure showing an example of information corresponding to it. 電子ペンの構造を示す概略図である。It is the schematic which shows the structure of an electronic pen. コンピュータ装置の機能ブロック図である。It is a functional block diagram of a computer apparatus. 端末の機能ブロック図である。It is a functional block diagram of a terminal. コンピュータ装置の処理フローを示すフローチャートである。It is a flowchart which shows the processing flow of a computer apparatus. 端末の処理フローを示すフローチャートである。It is a flowchart which shows the processing flow of a terminal.

以下、図面を参照しながら、本考案の実施形態について説明する。   Hereinafter, embodiments of the present invention will be described with reference to the drawings.

［情報配信システムの構成］
図１は、本実施形態に係る情報配信システムの構成を示す。
本実施形態の情報配信システムは、１人の講師が、１人又は複数人の聴講者に講義をする教室等に設置されているものとする。図１に示すように、本実施形態に係る情報配信システム１０は、電子ペン１と、ホワイトボード２（ドットパターンあり）と、コンピュータ装置３と、各聴講者に１台ずつ使用されるｎ台の端末４−１〜４−ｎとを有する。 [Configuration of information distribution system]
FIG. 1 shows a configuration of an information distribution system according to the present embodiment.
It is assumed that the information distribution system of this embodiment is installed in a classroom where one lecturer lectures one or more listeners. As shown in FIG. 1, an information distribution system 10 according to the present embodiment includes an electronic pen 1, a whiteboard 2 (with a dot pattern), a computer device 3, and n units used for each audience. Terminals 4-1 to 4-n.

講師は、ホワイトボード２に対して、電子ペン１で描画ストロークを記入したり、電子イレイサー（図示せず）で当該描画ストロークを消去したりすることによって講義を進める。電子ペン１からの記入情報は、Bluetooth（登録商標）により、コンピュータ装置３に無線送信される。   The lecturer advances the lecture on the whiteboard 2 by entering a drawing stroke with the electronic pen 1 or erasing the drawing stroke with an electronic eraser (not shown). The entry information from the electronic pen 1 is wirelessly transmitted to the computer device 3 by Bluetooth (registered trademark).

コンピュータ装置３は、パーソナルコンピュータ（Personal computer）等で構成されている。コンピュータ装置３は、電子ペン１からの記入情報を受信して、ホワイトボード２上に記入されている描画ストロークにより表わされる文字列（１文字含む）を文字情報として認識する。そして、コンピュータ装置３は、当該認識した文字情報に対応する文字列をディスプレイ（後述する図６の表示手段３５）に表示させるとともに、当該文字情報を、Wi-Fi（無線ＬＡＮの標準規格IEEE802.11シリーズに準拠していることを示す、業界団体による証明マーク。本実施形態では、Wi-Fiマークが付された無線ＬＡＮ機器間の無線通信方式を示すためにも用いる。）により、ｎ台の各端末４−１〜４−ｎに無線送信する。   The computer device 3 is composed of a personal computer or the like. The computer device 3 receives entry information from the electronic pen 1 and recognizes a character string (including one character) represented by a drawing stroke written on the whiteboard 2 as character information. Then, the computer device 3 displays a character string corresponding to the recognized character information on a display (display means 35 in FIG. 6 described later), and the character information is displayed on the Wi-Fi (wireless LAN standard IEEE802. A certification mark by an industry group indicating compliance with the 11 series.In this embodiment, it is also used to indicate a wireless communication system between wireless LAN devices with a Wi-Fi mark.) Wirelessly transmitted to each of the terminals 4-1 to 4-n.

図１のホワイトボード２上には、講師が電子ペン１を用いて手書きで記入した「おはよう」という描画ストロークが表示されている。なお本実施形態では、電子ペン１により記入される第１言語は日本語である。
コンピュータ装置３は、ホワイトボード２上に手書きで「おはよう」という描画ストロークが記入される際に電子ペン１から逐次送信されてくる記入情報を受信する。そして、コンピュータ装置３は、当該記入情報に基づいて、当該描画ストロークにより表わされる「おはよう」という日本語の文字列を、文字情報として認識する。
ここで、文字情報の認識手法としては、既存の手書き文字認識（Handwriting recognition）や光学文字認識（OCR:Optical Character Recognition）に基づく手法が採用可能である。
コンピュータ装置３は、描画ストロークを文字認識した結果の「おはよう」という日本語の文字列をコンピュータ装置３のディスプレイに表示するとともに、当該文字列を示す文字情報を、各端末４−１，４−２，４−３，・・・，４−ｎに送信する。 On the whiteboard 2 in FIG. 1, a drawing stroke “Good morning” written by the instructor by handwriting using the electronic pen 1 is displayed. In the present embodiment, the first language entered with the electronic pen 1 is Japanese.
The computer device 3 receives entry information sequentially transmitted from the electronic pen 1 when a drawing stroke of “Good morning” is entered on the whiteboard 2 by handwriting. Then, the computer device 3 recognizes a Japanese character string “Good morning” represented by the drawing stroke as character information based on the entry information.
Here, as a method for recognizing character information, a method based on existing handwriting recognition (Handwriting recognition) or optical character recognition (OCR) can be employed.
The computer device 3 displays a Japanese character string “Good morning” as a result of character recognition of the drawing stroke on the display of the computer device 3, and character information indicating the character string is displayed on each terminal 4-1, 4-. 2, 4-3,..., 4-n.

ｎ台の各端末４−１〜４−ｎは、スマートフォンで構成されており、ｎ人の各聴講者（ユーザ）に１台ずつ提供されている。なお、以下、端末４−１〜４−ｎを個々に区別する必要がない場合、これらをまとめて単に「端末４」と呼ぶ。なお、各端末は、iPad（登録商標）、ＰＤＡ等であってもよい。
端末４は、コンピュータ装置３から送信される第１言語の文字情報を受信して記憶させるとともに、当該文字情報に対応する文字列（原文）を、予め設定された第２言語（以下、「設定言語」という）に翻訳し、設定言語に翻訳された文字列（訳文）（以下、「翻訳文字列」という）をディスプレイに表示させる。 Each of the n terminals 4-1 to 4-n is configured by a smartphone, and one terminal is provided to each of n listeners (users). Hereinafter, when it is not necessary to individually distinguish the terminals 4-1 to 4-n, these are collectively referred to as “terminal 4”. Each terminal may be an iPad (registered trademark), a PDA, or the like.
The terminal 4 receives and stores character information in the first language transmitted from the computer device 3 and stores a character string (original text) corresponding to the character information in a preset second language (hereinafter referred to as “setting”). The character string (translated sentence) (hereinafter referred to as “translated character string”) is displayed on the display.

端末４−１には、設定言語として英語が設定されている。そこで、端末４−１は、例えば「おはよう」という日本語の文字列を示す文字情報をコンピュータ装置３から受信すると、この「おはよう」という日本語の文字列を、「Good morning」という英語の翻訳文字列に翻訳する。そして、端末４−１は、図１に示すように、「Good morning」という英語の翻訳文字列をディスプレイに表示させる。   In the terminal 4-1, English is set as a setting language. Therefore, when the terminal 4-1 receives, for example, character information indicating a Japanese character string “Good morning” from the computer device 3, the Japanese character string “Good morning” is translated into English as “Good morning”. Translate to string. Then, as illustrated in FIG. 1, the terminal 4-1 displays an English translation character string “Good morning” on the display.

端末４−２には、設定言語としてドイツ語が設定されている。そこで、端末４−２は、例えば「おはよう」という日本語の文字列を示す文字情報をコンピュータ装置３から受信すると、この「おはよう」という日本語の文字列を、「Guten morgen」というドイツ語の翻訳文字列に翻訳する。そして、端末４−２は、図１に示すように、「Guten morgen」というドイツ語の翻訳文字列をディスプレイに表示させる。   In the terminal 4-2, German is set as a setting language. Therefore, for example, when the terminal 4-2 receives character information indicating a Japanese character string “Good morning” from the computer device 3, the terminal 4-2 converts the Japanese character string “Good morning” into a German word “Guten morgen”. Translate to translated string. Then, as illustrated in FIG. 1, the terminal 4-2 displays a German translation character string “Guten morgen” on the display.

端末４−３には、設定言語として中国語が設定されている。そこで、端末４−３は、例えば「おはよう」という日本語の文字列を示す文字情報をコンピュータ装置３から受信すると、この「おはよう」という日本語の文字列を、「早上好」という中国語の翻訳文字列に翻訳する。そして、端末４−３は、図１に示すように、「早上好」という中国語の翻訳文字列をディスプレイに表示させる。   In the terminal 4-3, Chinese is set as the setting language. Therefore, when the terminal 4-3 receives the character information indicating the Japanese character string “Good morning” from the computer device 3, for example, the terminal 4-3 converts the Japanese character string “Good morning” into the Chinese character “Good morning”. Translate to translated string. Then, as shown in FIG. 1, the terminal 4-3 displays a Chinese translated character string “Yoshio Hayami” on the display.

端末４−４には、設定言語として日本語が設定されている。この場合、端末４−４は、例えば「おはよう」という日本語の文字列を示す文字情報をコンピュータ装置３から受信すると、この「おはよう」という日本語の文字列を、翻訳しない。そして、端末４−４は、図１に示すように、「おはよう」という日本語の文字列をディスプレイに表示させる。即ち、設定言語とコンピュータ装置３から受信した文字情報の言語とが同じ場合には、翻訳を行わずに、コンピュータ装置３から受信した文字情報の言語の文字列をディスプレイに表示させる。   Japanese is set as the setting language in the terminal 4-4. In this case, when the terminal 4-4 receives, for example, character information indicating a Japanese character string “Good morning” from the computer device 3, the terminal 4-4 does not translate the Japanese character string “Good morning”. Then, as shown in FIG. 1, the terminal 4-4 displays a Japanese character string “Good morning” on the display. That is, when the set language is the same as the language of the character information received from the computer device 3, the character string of the language of the character information received from the computer device 3 is displayed on the display without translation.

さらに、端末４は、コンピュータ装置３から送信された文字情報に対応する翻訳文字列を検索対象として、所定のキーワードがヒットするか否かを検出する。なお、キーワードそのものの同一検索のみならず、端末４の記憶手段４３に同義語辞書や類義語辞書を持たせ当該キーワードの同義語や類義語も検索するようにしてもよい。
端末４は、検索対象の文字列中から所定のキーワードがヒットした場合、当該キーワードに予め対応付けられている各種処理を実行する。
例えば、「重要」というキーワードに対して、バイブレータ機能をオンにする処理が対応付けられている場合、コンピュータ装置３から送信された文字情報内から「重要」というキーワードが含まれていることが検出されると、バイブレータ機能がオンになり、端末４が振動する。これにより、端末４を保持している聴講者は、端末４に今表示された翻訳文字列が重要なものであることを容易に認識することができる。
なお、キーワードは、端末４の聴講者（ユーザ）の便宜のためには翻訳後の設定言語であると好適であるが、特にこれに限定されず、コンピュータ装置３から送信された文字情報の言語（翻訳前の言語）であってもよい。 Further, the terminal 4 detects whether or not a predetermined keyword is hit by using the translated character string corresponding to the character information transmitted from the computer device 3 as a search target. In addition to the same search of the keyword itself, the storage unit 43 of the terminal 4 may be provided with a synonym dictionary and a synonym dictionary to search for synonyms and synonyms of the keyword.
When a predetermined keyword is hit from the search target character string, the terminal 4 executes various processes associated with the keyword in advance.
For example, when processing for turning on the vibrator function is associated with the keyword “important”, it is detected that the keyword “important” is included in the character information transmitted from the computer device 3. Then, the vibrator function is turned on and the terminal 4 vibrates. Thereby, the listener holding the terminal 4 can easily recognize that the translated character string currently displayed on the terminal 4 is important.
The keyword is preferably a set language after translation for the convenience of the listener (user) of the terminal 4, but is not particularly limited thereto, and the language of the character information transmitted from the computer device 3 is not limited thereto. (Language before translation) may be used.

図２は、このような情報配信システムのうち、ホワイトボード２の横断面を示す図である。図２に示すように、アノト方式のドットパターン（コード化パターン）を構成する各ドット２１は、白色のホワイトボード基板２２の全面に重畳して印刷されている。ここで、各ドット２１は、電子ペン１で読み取ることができるように、赤外線を吸収するカーボンを含有するインクで印刷されている。各ドット２１によるドットパターンが重畳して印刷されているホワイトボード基板２２の上には、ＥＢ（Electron Beam：電子線）硬化樹脂により形成されたＥＢ硬化樹脂保護層２３が積層されている。ＥＢ硬化樹脂保護層２３は、ホワイトボード基板２２上に印刷された各ドット２１を電子ペン１や電子イレイサーによる摩擦から保護し、ホワイトボード２の経年使用による劣化を防止する。   FIG. 2 is a diagram showing a cross section of the whiteboard 2 in such an information distribution system. As shown in FIG. 2, each dot 21 constituting an Anoto dot pattern (coded pattern) is printed so as to be superimposed on the entire surface of a white whiteboard substrate 22. Here, each dot 21 is printed with an ink containing carbon that absorbs infrared rays so that it can be read by the electronic pen 1. An EB cured resin protective layer 23 made of EB (Electron Beam) curable resin is laminated on a whiteboard substrate 22 on which a dot pattern of each dot 21 is printed in an overlapping manner. The EB cured resin protective layer 23 protects each dot 21 printed on the whiteboard substrate 22 from friction caused by the electronic pen 1 or the electronic eraser, and prevents the whiteboard 2 from being deteriorated due to aging.

［ドットパターン］
続いて、ホワイトボード２に形成されるアノト方式のドットパターン（コード化パターン）について説明する。図３は、ホワイトボード２に印刷されるドットパターンのドットとそのドットが変換される値との関係を説明する図である。図３に示すように、ドットパターンの各ドットは、その位置によって所定の値に対応付けられている。即ち、ドットの位置を格子の基準位置（縦線及び横線の交差点）から上下左右のどの方向にシフトするかによって、各ドットは、０〜３の値に対応付けられている。また、各ドットの値は、さらに、Ｘ座標用の第１ビット値及びＹ座標用の第２ビット値に変換できる。このようにして対応付けられた情報の組合せにより、ホワイトボード２上の位置座標が決定されるよう構成されている。 [Dot pattern]
Next, an Anoto dot pattern (coded pattern) formed on the whiteboard 2 will be described. FIG. 3 is a diagram for explaining the relationship between the dots of the dot pattern printed on the whiteboard 2 and the values to which the dots are converted. As shown in FIG. 3, each dot of the dot pattern is associated with a predetermined value depending on its position. That is, each dot is associated with a value of 0 to 3 depending on which direction the top, bottom, left, and right are shifted from the reference position of the grid (the intersection of the vertical and horizontal lines). The value of each dot can be further converted into a first bit value for the X coordinate and a second bit value for the Y coordinate. The position coordinates on the whiteboard 2 are determined by the combination of information thus associated.

図４（ａ）は、あるドットパターンの配列を示している。図４（ａ）に示すように、縦横約２ｍｍの範囲内に６×６個のドットが、ホワイトボード２上のどの部分から６×６ドットを取ってもユニークなパターンとなるように配置されている。これら３６個のドットにより形成されるドットパターンは位置座標（例えば、そのドットパターンがホワイトボード２上のどの位置にあるのか）を保持している。図４（ｂ）は、図４（ａ）に示す各ドットを、格子の基準位置からのシフト方向によって、図３に示す規則性に基づいて対応付けられた値に変換したものである。この変換は、ドットパターンの画像を撮影する電子ペン１によって行われる。   FIG. 4A shows an arrangement of a certain dot pattern. As shown in FIG. 4A, 6 × 6 dots are arranged in a range of about 2 mm in length and breadth so that a unique pattern can be obtained no matter where 6 × 6 dots are taken from any part on the whiteboard 2. ing. A dot pattern formed by these 36 dots holds position coordinates (for example, on which position on the whiteboard 2 the dot pattern is located). FIG. 4B is a diagram in which each dot shown in FIG. 4A is converted into a value associated with the regularity shown in FIG. 3 according to the shift direction from the reference position of the lattice. This conversion is performed by the electronic pen 1 that captures an image of a dot pattern.

［電子ペン］
次に電子ペン１について説明する。図５に示すように、電子ペン１は、その筐体１０１の内部に、マーカーペン１０４、ＬＥＤ１０５、ＣＭＯＳカメラ１０６、圧力センサ１０７、ＣＰＵ等により構成されるプロセッサ１０８、ＲＯＭやＲＡＭといったメモリ１０９、リアルタイムクロック１１０、アンテナ等により構成される通信ユニット１１１及びバッテリー１１２を備える。マーカーペン１０４の先端は、インクを備えるペン先部１０３となっており、講師（ユーザ）は、電子ペン１のペン先部１０３をホワイトボード２上に当接させて、文字等の描画ストローク（手書きストローク）を記入したり、タップ（ペン先部１０３によるホワイトボード２への軽叩）したりする。ここで、電子ペン１のペン先部１０３がホワイトボード２に最初に接触することをペンダウンと呼び、接触している（当接している）状態からペン先部１０３が離れることをペンアップと呼ぶ。電子ペン１のペンダウンからペンアップまでの間に記入される軌跡が１つの描画ストロークとなり、文字や図形等は、１つ又は複数個の描画ストロークからなる。また、電子ペン１をペンダウンすることでペン先部１０３からホワイトボード２上に流出するインクにより、描画ストロークと略同一軌道の軌跡がホワイトボード２上に表示される。 [Electronic pen]
Next, the electronic pen 1 will be described. As shown in FIG. 5, the electronic pen 1 includes a marker pen 104, an LED 105, a CMOS camera 106, a pressure sensor 107, a processor 108 including a CPU, a memory 109 such as a ROM and a RAM, A communication unit 111 including a real-time clock 110, an antenna, and the like, and a battery 112 are provided. The tip of the marker pen 104 is a pen tip portion 103 that includes ink, and a lecturer (user) brings the pen tip portion 103 of the electronic pen 1 into contact with the whiteboard 2 to draw a stroke (such as a character). (Handwritten stroke) is entered or tapped (tapping the whiteboard 2 with the pen tip 103). Here, the first contact of the pen tip portion 103 of the electronic pen 1 with the whiteboard 2 is referred to as pen-down, and the removal of the pen tip portion 103 from the contacted (contacted) state is referred to as pen-up. . A trajectory entered between the pen-down and pen-up of the electronic pen 1 is one drawing stroke, and characters, figures, and the like are made up of one or a plurality of drawing strokes. In addition, when the electronic pen 1 is pen-downed, the locus of substantially the same trajectory as the drawing stroke is displayed on the whiteboard 2 by the ink flowing out from the pen tip portion 103 onto the whiteboard 2.

バッテリー１１２は電子ペン１内の各部品に電力を供給するためのものであり、例えば電子ペン１のキャップ（図示せず）の脱着により電子ペン１自体の電源のオン／オフを行うよう構成させてもよい。リアルタイムクロック１１０は、現在時刻（タイムスタンプ）を示す時刻情報を発信し、プロセッサ１０８に供給する。圧力センサ１０７は、ユーザが電子ペン１によりホワイトボード２に文字やマークを書いたりタップしたりする際にペン先部１０３からマーカーペン１０４を通じて与えられる圧力、即ち筆圧を検出し、その値をプロセッサ１０８へ伝送する。   The battery 112 is for supplying electric power to each component in the electronic pen 1. For example, the battery 112 is configured to turn on / off the electronic pen 1 itself by attaching and detaching a cap (not shown) of the electronic pen 1. May be. The real time clock 110 transmits time information indicating the current time (time stamp) and supplies the time information to the processor 108. The pressure sensor 107 detects the pressure applied through the marker pen 104 from the pen tip portion 103 when the user writes or taps a character or mark on the whiteboard 2 with the electronic pen 1, that is, the writing pressure, and determines the value. Transmit to the processor 108.

プロセッサ１０８は、圧力センサ１０７から与えられる筆圧データに基づいて、ＬＥＤ１０５及びＣＭＯＳカメラ１０６のスイッチのオン／オフを切替える。即ち、ユーザが電子ペン１でホワイトボード２に文字等を書くと、ペン先部１０３に筆圧がかかり、圧力センサ１０７によって所定値以上の筆圧が検出されたときに、プロセッサ１０８は、ユーザが記入を開始したと判定して、ＬＥＤ１０５及びＣＭＯＳカメラ１０６を作動させる。そして、通信ユニット１１１が、圧力センサ１０７により検出されたペンダウン情報と、後述するペンＩＤとを関連付けて、記入情報としてコンピュータ装置３へ送信する。また、ユーザが１つの描画ストロークを記入し終えて電子ペン１をホワイトボード２から離すと、圧力センサ１０７は、所定値以上の筆圧が検出されなくなることでペンアップを検出する。すると、通信ユニット１１１が、圧力センサ１０７により検出されたペンアップ情報とペンＩＤとを関連付けて、記入情報としてコンピュータ装置３へ送信する。   The processor 108 switches on / off the switches of the LED 105 and the CMOS camera 106 based on the writing pressure data supplied from the pressure sensor 107. That is, when the user writes characters or the like on the whiteboard 2 with the electronic pen 1, the pen pressure is applied to the pen tip portion 103, and when the pressure sensor 107 detects a writing pressure higher than a predetermined value, the processor 108 Is started, the LED 105 and the CMOS camera 106 are operated. Then, the communication unit 111 associates pen down information detected by the pressure sensor 107 with a pen ID, which will be described later, and transmits it to the computer apparatus 3 as entry information. Further, when the user finishes entering one drawing stroke and releases the electronic pen 1 from the whiteboard 2, the pressure sensor 107 detects a pen-up because the writing pressure exceeding a predetermined value is not detected. Then, the communication unit 111 associates the pen-up information detected by the pressure sensor 107 with the pen ID, and transmits it as entry information to the computer apparatus 3.

ＬＥＤ１０５とＣＭＯＳカメラ１０６は、電子ペン１のペン先部１０３付近に取り付けられており、筐体１０１におけるＬＥＤ１０５及びＣＭＯＳカメラ１０６と対向する部分には、開口部１０２が形成されている。ＬＥＤ１０５は、ホワイトボード２上のペン先部１０３近傍に向けて赤外線を照明する。その領域は、ペン先部１０３がホワイトボード２に接触する位置とはわずかにずれている。ＣＭＯＳカメラ１０６には、赤外線を透過し赤外線以外を遮断する赤外線フィルタが設けられており、ＣＭＯＳカメラ１０６は、ＬＥＤ１０５によって照明された領域内におけるドットパターンを撮影し、そのドットパターンの画像データをプロセッサ１０８に供給する。ここで、ドットのインク素材は、赤外線を吸収するため、ＬＥＤ１０５によって照射された赤外線は、ドットによって吸収される。そのため、ドットの部分は、赤外線の反射量が比較的少なく、ドット以外の部分は赤外線の反射量が比較的多い。ＣＭＯＳカメラ１０６の撮影により、赤外線の反射量の違いから閾値を設けることによって、ドットの領域とそれ以外の領域を区別することができる。なお、ＣＭＯＳカメラ１０６による撮影領域は、図４（ａ）に示すような約２ｍｍ×約２ｍｍの大きさを含む範囲であり、ＣＭＯＳカメラ１０６の撮影は毎秒５０〜１００回程度の定間隔で行われる。また、ＣＭＯＳカメラ１０６は、ドットを鮮明に撮影するため、十分な被写界深度を有している。   The LED 105 and the CMOS camera 106 are attached near the pen tip portion 103 of the electronic pen 1, and an opening 102 is formed in a portion of the housing 101 that faces the LED 105 and the CMOS camera 106. The LED 105 illuminates infrared rays toward the vicinity of the pen tip portion 103 on the whiteboard 2. The area is slightly deviated from the position where the pen tip 103 contacts the whiteboard 2. The CMOS camera 106 is provided with an infrared filter that transmits infrared rays and blocks non-infrared rays. The CMOS camera 106 captures a dot pattern in an area illuminated by the LED 105 and processes image data of the dot pattern as a processor. 108. Here, since the ink material of dots absorbs infrared rays, the infrared rays irradiated by the LED 105 are absorbed by the dots. Therefore, the dot portion has a relatively small amount of infrared reflection, and the portion other than the dot has a relatively large amount of infrared reflection. By photographing with the CMOS camera 106, a dot area and other areas can be distinguished by providing a threshold value based on the difference in the amount of reflected infrared light. Note that the shooting area by the CMOS camera 106 is a range including a size of about 2 mm × about 2 mm as shown in FIG. 4A, and the shooting by the CMOS camera 106 is performed at regular intervals of about 50 to 100 times per second. Is called. Further, the CMOS camera 106 has a sufficient depth of field in order to photograph dots clearly.

プロセッサ１０８は、講師（ユーザ）の記入が行われる間、ＣＭＯＳカメラ１０６によって供給される画像データのドットパターンから、ユーザが記入する描画ストローク（筆跡）のホワイトボード２上におけるＸ，Ｙ座標（単に「位置座標」、「座標情報」とも呼ぶ）を連続的に演算していく。即ち、プロセッサ１０８は、ＣＭＯＳカメラ１０６によって供給される、図４（ａ）に示されるようなドットパターンの画像データを図４（ｂ）に示すデータ配列に変換し、さらに、Ｘ座標ビット値・Ｙ座標ビット値に変換して、そのデータ配列から所定の演算方法によりＸ，Ｙ座標データを演算する。なお、プロセッサ１０８は、ドットパターンに対向する電子ペン１の角度に起因するドットの画像上の配列を補正する回転補正処理機能を備えている。そして、プロセッサ１０８は、リアルタイムクロック１１０から発信される現在時刻（タイムスタンプ：記入された時刻情報）、筆圧データ及びＸ，Ｙ座標データを関連付ける。以後、これらの関連付けたデータを、まとめて「座標属性情報」と呼ぶ。なお、ホワイトボード２における６×６のドットパターンは、ホワイトボード２内で重複することはないため、ユーザが電子ペン１で文字等を記入すると、記入された位置がホワイトボード２のどの位置に当たるかを、プロセッサ１０８による座標演算により特定することができる。   While the instructor (user) is writing, the processor 108 uses the dot pattern of the image data supplied by the CMOS camera 106 to display the X and Y coordinates (simply on the whiteboard 2 of the drawing stroke (handwriting) to be written by the user. “Position coordinates” and “coordinate information”) are continuously calculated. That is, the processor 108 converts the image data of the dot pattern as shown in FIG. 4A supplied by the CMOS camera 106 into the data array shown in FIG. The data is converted into a Y coordinate bit value, and X, Y coordinate data is calculated from the data array by a predetermined calculation method. The processor 108 has a rotation correction processing function for correcting the arrangement of dots on the image due to the angle of the electronic pen 1 facing the dot pattern. Then, the processor 108 associates the current time (time stamp: entered time information) transmitted from the real-time clock 110, the pen pressure data, and the X and Y coordinate data. Hereinafter, these associated data are collectively referred to as “coordinate attribute information”. Since the 6 × 6 dot pattern on the whiteboard 2 does not overlap in the whiteboard 2, when the user enters characters or the like with the electronic pen 1, the written position corresponds to any position on the whiteboard 2. This can be specified by coordinate calculation by the processor 108.

メモリ１０９には、電子ペン１を識別するための「ｐｅｎ０１」といったペンＩＤ、ペン製造者番号、ペンソフトウェアのバージョン等のプロパティ情報が記憶されている。そして、通信ユニット１１１は、ペンＩＤと、座標属性情報（時刻情報と、筆圧データと、Ｘ、Ｙ座標データ）とを関連付けて、記入情報としてコンピュータ装置３へ送信する。通信ユニット１１１によるコンピュータ装置３への送信は、Bluetooth（登録商標）等の無線送信によって、即時的かつ逐次的に行われる。ここで、電子ペン１のペンダウンからペンアップまでの間に生成されてコンピュータ装置３に送信された１個又は複数個の記入情報（座標属性情報）は、コンピュータ装置３により描画ストローク情報として記憶される。換言すると、１つの描画ストロークは、１個又は複数個のＸ，Ｙ座標（座標点）からなり、コンピュータ装置３は、ペンダウン情報及びペンアップ情報によって、１つの描画ストロークを構成する１個又は複数個の座標属性情報を認識する。このように、ユーザの１つの描画ストロークの記入により、電子ペン１によって生成される座標属性情報の集合を「描画ストローク情報」と呼ぶ。また、ペン先部１０３は、筆圧をマーカーペン１０４を介して圧力センサ１０７に伝達する。   The memory 109 stores property information such as a pen ID such as “pen01” for identifying the electronic pen 1, a pen manufacturer number, and a pen software version. Then, the communication unit 111 associates the pen ID with the coordinate attribute information (time information, writing pressure data, and X and Y coordinate data), and transmits the information as entry information to the computer apparatus 3. Transmission to the computer apparatus 3 by the communication unit 111 is performed immediately and sequentially by wireless transmission such as Bluetooth (registered trademark). Here, one or more pieces of entry information (coordinate attribute information) generated between the pen-down and pen-up of the electronic pen 1 and transmitted to the computer device 3 are stored as drawing stroke information by the computer device 3. The In other words, one drawing stroke is composed of one or a plurality of X, Y coordinates (coordinate points), and the computer apparatus 3 is configured by one or more composing one drawing stroke by pen down information and pen up information. Recognize pieces of coordinate attribute information. As described above, a set of coordinate attribute information generated by the electronic pen 1 when the user enters one drawing stroke is referred to as “drawing stroke information”. The pen tip 103 transmits the writing pressure to the pressure sensor 107 via the marker pen 104.

［コンピュータ装置の構成］
次に、コンピュータ装置３の構成について説明する。
コンピュータ装置３は、ハードウェアとして、電子ペン１や端末４とのデータ通信が可能な通信部、ＣＰＵ等のプロセッサ、ＲＯＭやＲＡＭといったメモリ、ディスプレイ等の出力部、マウスやキーボード等の入力部を含むパーソナルコンピュータ等で構成される。 [Configuration of computer device]
Next, the configuration of the computer device 3 will be described.
The computer device 3 includes, as hardware, a communication unit capable of data communication with the electronic pen 1 and the terminal 4, a processor such as a CPU, a memory such as a ROM and a RAM, an output unit such as a display, and an input unit such as a mouse and a keyboard. Including a personal computer including

図６は、コンピュータ装置３の機能ブロック図である。コンピュータ装置３は、機能的には、入力手段３１、受信手段３２、記憶手段３３、処理手段３４、表示手段３５及び送信手段３６を備える。そして、コンピュータ装置３は、電子ペン１から受信した記入情報に基づいて所定の処理を行う。   FIG. 6 is a functional block diagram of the computer apparatus 3. Functionally, the computer apparatus 3 includes an input unit 31, a reception unit 32, a storage unit 33, a processing unit 34, a display unit 35, and a transmission unit 36. Then, the computer device 3 performs a predetermined process based on the entry information received from the electronic pen 1.

入力手段３１は、マウスやキーボード等により構成され、ユーザの操作に応じた各種情報を入力して、処理手段３４に供給する。
受信手段３２は、アンテナ受信回路等により構成され、電子ペン１からの記入情報を受信すると、処理手段３４に伝送する。
送信手段３６は、認識された文字情報を各端末４に送信する。なお、端末４へのデータ送信方式は、有線であっても無線であってもよいが、本実施形態ではWi-Fiによる無線通信方式が採用されている。
表示手段３５は、ディスプレイ等によって構成され、処理手段３４によって指示された内容を画像として表示する。 The input unit 31 includes a mouse, a keyboard, and the like, and inputs various types of information according to user operations and supplies the information to the processing unit 34.
The receiving means 32 is constituted by an antenna receiving circuit or the like, and transmits the entry information from the electronic pen 1 to the processing means 34.
The transmission means 36 transmits the recognized character information to each terminal 4. The data transmission method to the terminal 4 may be wired or wireless, but in this embodiment, a wireless communication method using Wi-Fi is adopted.
The display means 35 is composed of a display or the like, and displays the contents instructed by the processing means 34 as an image.

記憶手段３３は、ハードディスクやＲＯＭ、ＲＡＭといったメモリによって構成される。記憶手段３３は、処理手段３４の処理命令により、電子ペン１から受信した記入情報をペンＩＤ毎に記憶したり、認識された文字情報を記憶したりする。また、記憶手段３３は、本情報配信システム１０で使用するプログラムや辞書データベース、ホワイトボード２に形成されたドットパターンの位置座標に関する座標定義情報等を予め記憶している。   The storage means 33 is configured by a memory such as a hard disk, ROM, or RAM. The storage unit 33 stores entry information received from the electronic pen 1 for each pen ID or stores recognized character information in accordance with a processing instruction of the processing unit 34. The storage unit 33 stores in advance programs used in the information distribution system 10, a dictionary database, coordinate definition information related to the position coordinates of the dot pattern formed on the whiteboard 2, and the like.

処理手段３４は、主に、情報取得制御手段３４１、文字認識手段３４２、表示制御手段３４３、及びデータ送信手段３４４により構成される。処理手段３４は、ユーザの電子ペン１による入力に応じて、記入情報から描画ストロークを特定して、描画ストロークに基づいて認識した文字情報に対応する、翻訳文字列を各端末４に表示させるために必要となる、各種の処理を実行する。   The processing unit 34 mainly includes an information acquisition control unit 341, a character recognition unit 342, a display control unit 343, and a data transmission unit 344. The processing means 34 specifies a drawing stroke from the entry information in response to an input by the user with the electronic pen 1 and displays a translated character string corresponding to the character information recognized based on the drawing stroke on each terminal 4. Various processes necessary for the above are executed.

情報取得制御手段３４１は、電子ペン１から送信される記入情報を受信手段３２を介して受信し、受信した記入情報を記憶手段３３に記憶する制御を実行する。   The information acquisition control unit 341 receives the entry information transmitted from the electronic pen 1 via the reception unit 32 and executes control for storing the received entry information in the storage unit 33.

文字認識手段３４２は、情報取得制御手段３４１により取得された記入情報に含まれるＸ，Ｙ座標情報に基づいて、記憶手段３３に記憶された座標定義情報を参照して描画ストロークを特定し、当該描画ストロークにより表わされる文字列を文字情報（文字コード）として認識する。文字認識手段３４２は、認識した文字情報を表示制御手段３４３及びデータ送信手段３４４に供給したり、記憶手段３３に記憶させたりする。   Based on the X and Y coordinate information included in the entry information acquired by the information acquisition control unit 341, the character recognition unit 342 identifies the drawing stroke with reference to the coordinate definition information stored in the storage unit 33, and The character string represented by the drawing stroke is recognized as character information (character code). The character recognizing unit 342 supplies the recognized character information to the display control unit 343 and the data transmitting unit 344 or stores it in the storage unit 33.

表示制御手段３４３は、文字認識手段３４２により認識された文字情報に対応する文字列を表示手段３５に表示させる制御を実行する。   The display control unit 343 executes control for causing the display unit 35 to display a character string corresponding to the character information recognized by the character recognition unit 342.

データ送信手段３４４は、文字認識手段３４２により認識された文字情報を送信手段３６を制御して各端末４に送信する。   The data transmission unit 344 transmits the character information recognized by the character recognition unit 342 to each terminal 4 by controlling the transmission unit 36.

［端末の構成］
次に、端末４について説明する。端末４は、ハードウェアとして、コンピュータ装置３とのデータ通信が可能な通信部、ＣＰＵ等のプロセッサ、ＲＯＭやＲＡＭといったメモリ、ディスプレイ等の出力部、タッチパネル等の入力部を含むスマートフォン等で構成される。 [Terminal configuration]
Next, the terminal 4 will be described. The terminal 4 includes, as hardware, a communication unit capable of data communication with the computer device 3, a processor such as a CPU, a memory such as a ROM or a RAM, an output unit such as a display, and a smartphone including an input unit such as a touch panel. The

図７は、端末４の機能ブロック図である。端末４は、機能的には、入力手段４１、受信手段４２、記憶手段４３、処理手段４４、表示手段４５及び報知手段４６を備える。そして、端末４は、コンピュータ装置３から受信した文字情報を用いて、各種の処理を実行する。   FIG. 7 is a functional block diagram of the terminal 4. Functionally, the terminal 4 includes an input unit 41, a reception unit 42, a storage unit 43, a processing unit 44, a display unit 45, and a notification unit 46. And the terminal 4 performs various processes using the character information received from the computer apparatus 3.

入力手段４１は、いわゆるタッチパネル等により構成され、表示手段４５の表示面に聴講者（ユーザ）の指を接触させる操作に伴い、各種情報を入力し、処理手段４４に供給する。
受信手段４２は、アンテナ受信回路等により構成され、コンピュータ装置３からの文字情報を受信すると、処理手段４４に伝送する。なお、コンピュータ装置３とのデータ通信方式は、有線であっても無線であってもよいが、上述したように本実施形態ではWi-Fiによる無線通信方式が採用されている。
表示手段４５は、ディスプレイ等によって構成され、処理手段４４によって指示された内容を画像として表示する。 The input unit 41 is configured by a so-called touch panel or the like, and inputs various information and supplies it to the processing unit 44 in accordance with an operation of bringing a listener (user) finger into contact with the display surface of the display unit 45.
The receiving means 42 is constituted by an antenna receiving circuit or the like, and transmits character information from the computer apparatus 3 to the processing means 44 when received. Note that the data communication method with the computer apparatus 3 may be wired or wireless, but as described above, the wireless communication method using Wi-Fi is adopted in this embodiment.
The display means 45 is constituted by a display or the like, and displays the contents instructed by the processing means 44 as an image.

記憶手段４３は、ハードディスクやＲＯＭ、ＲＡＭといったメモリによって構成される。記憶手段４３は、処理手段４４の処理命令により、コンピュータ装置３から受信した文字情報、又は、後述の翻訳手段４４３による翻訳後の文字情報を記憶する。また、記憶手段４３は、後述の翻訳手段４４３が翻訳処理を実行するために必要な翻訳データを含む翻訳辞書を記憶する。   The storage means 43 is configured by a memory such as a hard disk, ROM, or RAM. The storage means 43 stores the character information received from the computer device 3 or the character information after translation by the translation means 443 described later, according to the processing instruction of the processing means 44. In addition, the storage unit 43 stores a translation dictionary including translation data necessary for the translation unit 443 described later to perform a translation process.

処理手段４４は、主に、情報取得制御手段４４１、翻訳言語設定手段４４２、翻訳手段４４３、表示制御手段４４４、キーワード設定手段４４５、キーワード検出手段４４６、及び報知制御手段４４７により構成される。処理手段４４は、コンピュータ装置３から送信された文字情報に対応する翻訳文字列を表示手段４５に表示させるために必要となる、各種の処理を実行する。   The processing unit 44 mainly includes an information acquisition control unit 441, a translation language setting unit 442, a translation unit 443, a display control unit 444, a keyword setting unit 445, a keyword detection unit 446, and a notification control unit 447. The processing unit 44 executes various processes necessary for displaying the translated character string corresponding to the character information transmitted from the computer apparatus 3 on the display unit 45.

情報取得制御手段４４１は、コンピュータ装置３から送信される文字情報を、受信手段４２を制御して受信し、受信した文字情報を記憶手段４３に記憶する制御を実行する。   The information acquisition control unit 441 executes control for receiving the character information transmitted from the computer device 3 by controlling the reception unit 42 and storing the received character information in the storage unit 43.

翻訳言語設定手段４４２は、情報取得制御手段４４１により取得された文字情報の言語（第１言語）が後述の翻訳手段４４３により翻訳される言語（第２言語）を、設定言語として予め設定する。具体的には、翻訳開始前に、端末４を使用する聴講者（ユーザ）が、入力手段４１を操作して、所望の言語（例えば、ユーザの母国語）を指示する。翻訳言語設定手段４４２は、この入力手段４１を介したユーザからの指示にしたがって、設定言語を設定する。そして、翻訳言語設定手段４４２は、設定した設定言語の情報を記憶手段４３に記憶する。   The translation language setting unit 442 presets a language (second language) in which the language (first language) of the character information acquired by the information acquisition control unit 441 is translated by the translation unit 443 described later as a setting language. Specifically, before the start of translation, a listener (user) who uses the terminal 4 operates the input unit 41 to instruct a desired language (for example, the user's native language). The translation language setting unit 442 sets a setting language in accordance with an instruction from the user via the input unit 41. Then, the translation language setting unit 442 stores the set language information in the storage unit 43.

翻訳手段４４３は、情報取得制御手段４４１により取得された文字情報に対応する文字列（原文）を設定言語に翻訳し、その結果得られる設定言語の翻訳文字列（訳文）の文字情報を表示制御手段４４４及びキーワード検出手段４４６へ供給する。
文字列の翻訳は、翻訳言語設定手段４４２により予め設定された設定言語に基づいて行われる。
なお、翻訳手段４４３は、情報取得制御手段４４１により取得された文字情報の言語が、設定言語と同一である場合には、取得された文字情報をそのまま表示制御手段４４４及びキーワード検出手段４４６に供給する。 The translation unit 443 translates the character string (original text) corresponding to the character information acquired by the information acquisition control unit 441 into the set language, and displays and controls the character information of the translation character string (translation) of the set language obtained as a result. Supplied to means 444 and keyword detection means 446.
The translation of the character string is performed based on a set language preset by the translation language setting unit 442.
When the language of the character information acquired by the information acquisition control unit 441 is the same as the set language, the translation unit 443 supplies the acquired character information as it is to the display control unit 444 and the keyword detection unit 446. To do.

表示制御手段４４４は、翻訳手段４４３から供給された文字情報に対応する文字列を表示手段４５に表示する制御を実行する。
即ち、情報取得制御手段４４１により設定言語以外の文字情報が取得された場合、設定言語に翻訳された翻訳文字列が表示手段４５に表示される。これに対して、情報取得制御手段４４１により設定言語と同一の言語の文字情報が取得された場合、当該文字情報に対応する文字列がそのまま表示手段４５に表示される。以降では、表示手段４５に表示される翻訳文字列に後者の場合も含むものとして説明する。 The display control unit 444 executes control to display a character string corresponding to the character information supplied from the translation unit 443 on the display unit 45.
That is, when character information other than the set language is acquired by the information acquisition control unit 441, the translated character string translated into the set language is displayed on the display unit 45. On the other hand, when the character information of the same language as the set language is acquired by the information acquisition control unit 441, the character string corresponding to the character information is displayed on the display unit 45 as it is. In the following description, it is assumed that the translated character string displayed on the display means 45 includes the latter case.

キーワード設定手段４４５は、翻訳手段４４３による翻訳後の翻訳文字列を検索対象として、どのようなキーワードを検索するか及び当該キーワードがヒットした場合にどのような処理を実行するかを予め設定して、記憶手段４３に記憶する。具体的には、端末４を使用するユーザ（聴講者）が、入力手段４１を操作して、所望のキーワード及び処理内容を指示する。キーワード設定手段４４５は、この入力手段４１を介したユーザからの指示にしたがって、キーワード及び処理内容を設定する。キーワード設定手段４４５により設定されるキーワードとしては、単語、句（フレーズ）、ユーザの名前、記号（☆印）等、ユーザの所望する文字列（１文字含む）であれば足りる。また、キーワードの数は、１つに限定されず、複数であっても構わない。また、キーワードに対応付ける処理内容は、ユーザからの指示によらずに、第１キーワード、第２キーワード・・・に対して予め設定されていてもよい。   The keyword setting unit 445 sets in advance what kind of keyword is searched for the translated character string translated by the translation unit 443 and what processing is executed when the keyword is hit. And stored in the storage means 43. Specifically, a user (listener) using the terminal 4 operates the input unit 41 to instruct a desired keyword and processing content. The keyword setting unit 445 sets keywords and processing contents in accordance with an instruction from the user via the input unit 41. The keyword set by the keyword setting unit 445 may be any character string (including one character) desired by the user, such as a word, a phrase (phrase), the user's name, and a symbol (☆ mark). Further, the number of keywords is not limited to one, and may be plural. Moreover, the processing content matched with a keyword may be preset with respect to the 1st keyword, the 2nd keyword ..., without depending on the instruction | indication from a user.

キーワード検出手段４４６は、翻訳手段４４３による翻訳後の翻訳文字列を検索対象として、キーワード設定手段４４５により設定された１以上のキーワードの何れかにヒットするか否かを検出する。キーワード検出手段４４６は、所定のキーワードにヒットした場合、当該所定のキーワードに対応付けられた処理内容を報知制御手段４４７に通知する。   The keyword detection unit 446 detects whether or not one or more keywords set by the keyword setting unit 445 are hit by using the translated character string after translation by the translation unit 443 as a search target. When a keyword is hit, the keyword detection unit 446 notifies the notification control unit 447 of the processing content associated with the predetermined keyword.

報知制御手段４４７は、キーワード検出手段４４６から所定のキーワードに対応付けられた処理内容が通知された場合、当該処理内容でユーザに報知する制御を実行する。
報知手段４６による報知としては、スピーカ（図示せず）による音声出力、バイブレータによる振動、ディスプレイ（表示手段４５）による画像表示等が行われる。
スピーカによる音声出力の例としては、「ピンポーン」と電子音を再生したり、キーワードが検出された旨等の所定の音声メッセージを設定言語で再生したりすることで実現可能である。
バイブレータによる振動の例としては、端末４に設定されたバイブレーション機能をオンにして、当該端末４を振動させることで実現可能である。
また、表示手段４５による画像表示の例としては、当該キーワードの文字列を線種や色を変更して表示したり、当該キーワードの文字列に下線や括弧を付加して表示したり、キーワードが検出されたことを示す所定の画像を表示させることで実現可能である。 When the processing content associated with the predetermined keyword is notified from the keyword detection unit 446, the notification control unit 447 executes control to notify the user with the processing content.
As notification by the notification means 46, sound output by a speaker (not shown), vibration by a vibrator, image display by a display (display means 45), and the like are performed.
As an example of the voice output by the speaker, it can be realized by playing an electronic sound such as “ping pong” or by playing a predetermined voice message such as a keyword detected in a set language.
An example of vibration by the vibrator can be realized by turning on the vibration function set in the terminal 4 and vibrating the terminal 4.
Further, as an example of image display by the display means 45, the character string of the keyword is displayed with the line type or color changed, or the character string of the keyword is displayed with an underscore or parenthesis, or the keyword is changed. This can be realized by displaying a predetermined image indicating that it has been detected.

［コンピュータ装置の処理フロー］
次に、図８を参照して電子ペン１を用いた情報配信システム１０によるコンピュータ装置３の処理フローについて説明する。 [Processing flow of computer device]
Next, a processing flow of the computer apparatus 3 by the information distribution system 10 using the electronic pen 1 will be described with reference to FIG.

初めに、コンピュータ装置３では、情報取得制御手段３４１が受信手段３２を制御して記入情報を受信し、記憶手段３３に記憶させる（Ｓ１０１）。
具体的には、講師（ユーザ）が、ホワイトボード２に対し電子ペン１で文字等を記入すると、電子ペン１は、記入情報をコンピュータ装置３へ逐次送信する。
より具体的には、電子ペン１は、ペンダウン時には、ペンダウン情報及びペンＩＤを関連付けた記入情報を生成して、当該記入情報をコンピュータ装置３へ送信する。また、電子ペン１は、描画ストロークの記入中は、当該描画ストロークに沿って撮影したドットパターンから演算した座標情報を含む座標属性情報と、ペンＩＤとを関連付けた記入情報を連続的に繰り返し生成してコンピュータ装置３へ逐次送信する。そして、電子ペン１は、ペンアップ時には、ペンアップ情報及びペンＩＤを関連付けた記入情報を生成してコンピュータ装置３へ送信する。
情報取得制御手段３４１は、このようにして逐次送信されてくる記入情報を、受信手段３２を制御し受信して記憶手段３３に記憶させる。そして、情報取得制御手段３４１は、ペンアップ情報を含む記入情報を受信すると、１本の描画ストロークが記入終了したと判断して、文字認識手段３４２に通知する。 First, in the computer apparatus 3, the information acquisition control unit 341 controls the reception unit 32 to receive the entry information and store it in the storage unit 33 (S101).
Specifically, when an instructor (user) enters characters or the like on the whiteboard 2 with the electronic pen 1, the electronic pen 1 sequentially transmits entry information to the computer device 3.
More specifically, at the time of pen-down, the electronic pen 1 generates entry information that associates the pen-down information and the pen ID, and transmits the entry information to the computer device 3. In addition, while the drawing pen is being filled in, the electronic pen 1 continuously and repeatedly generates entry information in which the coordinate attribute information including the coordinate information calculated from the dot pattern photographed along the drawing stroke is associated with the pen ID. Then, the data is sequentially transmitted to the computer apparatus 3. Then, at the time of pen-up, the electronic pen 1 generates entry information in which pen-up information and a pen ID are associated with each other and transmits the entry information to the computer device 3.
The information acquisition control unit 341 controls the reception unit 32 to receive and store the entry information sequentially transmitted in this manner in the storage unit 33. When the information acquisition control unit 341 receives the entry information including the pen-up information, the information acquisition control unit 341 determines that one drawing stroke has been completed, and notifies the character recognition unit 342 of it.

次に、文字認識手段３４２は、情報取得制御手段３４１により取得された記入情報に基づき描画ストロークを特定し、特定した描画ストロークにより表わされる文字列を文字情報として認識する（ステップＳ１０２）。   Next, the character recognition unit 342 specifies a drawing stroke based on the entry information acquired by the information acquisition control unit 341, and recognizes a character string represented by the specified drawing stroke as character information (step S102).

次に、表示制御手段３４３は、文字認識手段３４２が認識した文字情報に対応する文字列を表示手段３５に表示させる（ステップＳ１０３）。例えば、ホワイトボード２に電子ペン１で日本語の「お」「は」「よ」「う」という描画ストロークが記入されるにつれて、文字認識された日本語の「お」「は」「よ」「う」という文字列が表示手段３５に表示される。図１には、手書きの「おはよう」という描画ストロークがホワイトボード２に記入されて、文字認識された日本語の「おはよう」という文字列が表示手段３５に表示された状態が示されている。   Next, the display control unit 343 causes the display unit 35 to display a character string corresponding to the character information recognized by the character recognition unit 342 (step S103). For example, as the drawing strokes “O”, “ha”, “yo”, and “u” in Japanese are written on the whiteboard 2 with the electronic pen 1, the characters “o”, “ha”, and “yo” in which the characters are recognized. A character string “U” is displayed on the display means 35. FIG. 1 shows a state in which a handwritten drawing stroke of “Good morning” is entered on the whiteboard 2 and a character string of Japanese “Good morning” recognized as a character is displayed on the display means 35.

また、データ送信手段３４４は、文字認識手段３４２が認識した文字情報を、逐次、送信手段３６を制御して各端末４へ送信する（ステップＳ１０４）。これにより、コンピュータ装置３で一括して実行された文字認識の結果が、各端末４で共有可能になる。この処理が終了するとコンピュータ装置３の処理が終了する。   Further, the data transmission unit 344 sequentially transmits the character information recognized by the character recognition unit 342 to each terminal 4 by controlling the transmission unit 36 (step S104). As a result, the results of character recognition executed collectively by the computer device 3 can be shared by the terminals 4. When this process ends, the process of the computer apparatus 3 ends.

［端末の処理フロー］
次に、図９を参照して電子ペン１を用いた情報配信システム１０による端末４の処理フローについて説明する。 [Terminal processing flow]
Next, a processing flow of the terminal 4 by the information distribution system 10 using the electronic pen 1 will be described with reference to FIG.

端末４の処理は、翻訳言語設定手段４４２により設定言語が予め設定されていること及びキーワード設定手段４４５によりキーワードとそのキーワードに対応する処理内容とが予め設定されていることを前提として、文字情報がコンピュータ装置３から送信されてくると開始される。
即ち、講師が電子ペン１で描画ストロークをホワイトボード２に記入すると、コンピュータ装置３が、電子ペン１から逐次送信されてくる記入情報を受信する。そして、コンピュータ装置３は、記入情報に基づいて描画ストロークを特定し、当該描画ストロークにより表わされる文字列を、文字情報として認識して、各端末４に送信する。すると、各端末４において、次のような処理が実行される。 The processing of the terminal 4 is based on the assumption that the set language is preset by the translation language setting unit 442 and that the keyword and the processing content corresponding to the keyword are preset by the keyword setting unit 445. Is started from the computer apparatus 3.
That is, when the instructor enters the drawing stroke on the whiteboard 2 with the electronic pen 1, the computer device 3 receives the entry information sequentially transmitted from the electronic pen 1. Then, the computer device 3 specifies a drawing stroke based on the entry information, recognizes a character string represented by the drawing stroke as character information, and transmits it to each terminal 4. Then, the following processing is executed in each terminal 4.

初めに、情報取得制御手段４４１は、受信手段４２を制御して文字情報を受信し、記憶手段４３に記憶させるとともに、翻訳手段４４３に通知する（ステップＳ２０１）。   First, the information acquisition control unit 441 receives the character information by controlling the reception unit 42, stores it in the storage unit 43, and notifies the translation unit 443 (step S201).

次に、翻訳手段４４３は、翻訳言語設定手段４４２により設定された設定言語に基づいて、第１言語の文字列に対応する文字情報を翻訳し（ステップＳ２０２）、その結果得られる設定言語の翻訳文字列の文字情報を表示制御手段４４４及びキーワード検出手段４４６に供給する。翻訳処理にあたり、翻訳手段４４３は、情報取得制御手段４４１により取得された文字情報を逐次翻訳するが、句読点や時間間隔等に基づいて区切りを認識するまでは、文字情報の蓄積にあわせて文字列の頭から繰り返し翻訳をし直す。   Next, the translation unit 443 translates the character information corresponding to the character string of the first language based on the set language set by the translation language setting unit 442 (step S202), and translates the set language obtained as a result. The character information of the character string is supplied to the display control means 444 and the keyword detection means 446. In the translation processing, the translation unit 443 sequentially translates the character information acquired by the information acquisition control unit 441. The character string is matched with the accumulation of the character information until the delimiter is recognized based on punctuation marks, time intervals, and the like. Repeat the translation from the beginning of the.

次に、表示制御手段４４４は、翻訳手段４４３から供給された文字情報に対応する設定言語の翻訳文字列を表示手段４５に表示させる（ステップＳ２０３）。
また、キーワード検出手段４４６は、翻訳手段４４３によって翻訳された翻訳文字列の中に、キーワード設定手段４４５により予め設定されたキーワードが含まれているか否かを検出して、キーワード検出結果を出力する。即ちここではキーワードが検出されたか否かを判断する（ステップＳ２０４）。 Next, the display control unit 444 causes the display unit 45 to display a translated character string in a set language corresponding to the character information supplied from the translation unit 443 (step S203).
Further, the keyword detection unit 446 detects whether or not the keyword preset by the keyword setting unit 445 is included in the translated character string translated by the translation unit 443, and outputs the keyword detection result. . That is, it is determined here whether or not a keyword has been detected (step S204).

翻訳文字列の中にキーワードが包含されていない場合には、キーワード検出手段４４６は、キーワードが検出されなかったと判断する（ステップＳ２０４：ＮＯ）。この場合、端末４の処理は終了する。   When the keyword is not included in the translated character string, the keyword detecting unit 446 determines that the keyword has not been detected (step S204: NO). In this case, the process of the terminal 4 ends.

これに対して、翻訳された文字の中にキーワード設定手段４４５により設定した文字が含まれている場合には、キーワード検出手段４４６は、キーワードが検出されたと判断する（ステップＳ２０４：ＹＥＳ）。この場合、キーワード検出手段４４６は、検出したキーワードに対応する処理内容を、報知制御手段４４７に通知する。
すると、報知制御手段４４７は、通知された処理内容に応じて報知手段４６を制御して、設定したキーワードが含まれていることをユーザに報知する（ステップＳ２０５）。 On the other hand, when the character set by the keyword setting unit 445 is included in the translated characters, the keyword detection unit 446 determines that the keyword has been detected (step S204: YES). In this case, the keyword detection unit 446 notifies the notification control unit 447 of the processing content corresponding to the detected keyword.
Then, the notification control unit 447 controls the notification unit 46 according to the notified processing content to notify the user that the set keyword is included (step S205).

このように、キーワードが検出されて（ステップＳ２０４：ＹＥＳ）、ステップＳ２０５の処理が実行されることで、翻訳文字列が端末４に単に表示されるのみならず、端末４を使用するユーザに対して、興味をひくキーワードが講師によって記入されたことを報知することができる。各端末４を使用するユーザ自身の名前をキーワードとして設定すると、講師がマイク等を使用せずに、あるユーザを指名する方法として利用できる。すなわち、講師は、電子ペン１でユーザの名前を記入することによって、該当するユーザが使用する端末４からそのユーザに報知させることができる。また、名前とその役割分担等をホワイトボード２に記入したときにも、名前が記入されたユーザに、端末４によって注意喚起することもできる。
具体的には、各端末４を使用するユーザは、入力手段４１を操作することで、所望のキーワードの設定を指示することができる。設定可能なキーワードは特に限定されないため、ユーザは、自身にとって興味のある分野の単語やフレーズ等をキーワードとして設定することができる。このような指示を受けて、当該キーワードがキーワード設定手段４４５により設定された状態で、講師が、電子ペン１で当該キーワードの原文をホワイトボード２に記入した場合には、翻訳手段４４３により設定言語に翻訳されたキーワードがキーワード検出手段４４６により検出される。そして、キーワードが検出された旨が報知制御手段４４７の制御の下、報知手段４６を構成する、スピーカ、バイブレータ、ディスプレイ等により報知される。 Thus, the keyword is detected (step S204: YES), and the process of step S205 is executed, so that the translated character string is not only displayed on the terminal 4, but also for the user who uses the terminal 4. Thus, it is possible to notify that the instructor has entered a keyword of interest. If the name of the user who uses each terminal 4 is set as a keyword, the lecturer can use it as a method of nominating a certain user without using a microphone or the like. That is, the lecturer can notify the user from the terminal 4 used by the corresponding user by entering the user's name with the electronic pen 1. Also, when the name and its role assignment are entered on the whiteboard 2, the terminal 4 can alert the user who has entered the name.
Specifically, a user using each terminal 4 can instruct setting of a desired keyword by operating the input unit 41. Since keywords that can be set are not particularly limited, the user can set words, phrases, and the like in a field of interest to the user as keywords. In response to such an instruction, when the instructor enters the original text of the keyword on the whiteboard 2 with the electronic pen 1 with the keyword set by the keyword setting unit 445, the language set by the translation unit 443 is used. The keyword translated into the keyword is detected by the keyword detecting means 446. Then, the notification that the keyword has been detected is notified by a speaker, a vibrator, a display, or the like constituting the notification unit 46 under the control of the notification control unit 447.

［本実施形態による作用効果］
以上説明したように本実施形態によれば、情報配信システム１０は、コンピュータ装置３から端末４へ、電子ペン１でホワイトボード２に記入されたストロークにより構成される文字に関する情報を配信する。
コンピュータ装置３においては、文字認識手段３４２により、電子ペンで生成されたストローク情報により表わされる第１言語の文字列が、文字情報として文字認識され、文字認識手段３４２により認識された文字情報が、送信手段３６によって端末４へ送信される。
端末４は、コンピュータ装置３から送信された文字情報を受信手段４２によって受信し、受信手段４２によって受信された文字情報により表わされる第１言語の文字列を、翻訳手段４４３によって第２言語の文字列に翻訳する翻訳し、翻訳手段４４３により第２言語に翻訳された文字列を表示制御手段が表示手段に表示させる。
このように、電子ペン１により記入されたストロークにより表わされる第１言語の文字列を、文字情報としてコンピュータ装置のプロセッサにより一括して認識することができるため、従来は各端末で行っていた重複した処理を解消し、システム全体にかかる処理負担の軽減を行うことができる。
また、各端末４において、コンピュータ装置３により一括して行われた文字の認識結果に基づいて、各端末においてそれぞれ翻訳を行うことができるため、各端末４において必要であるか否か不確定の言語にまで予めコンピュータ装置３において翻訳しておく必要がなく、翻訳にかかる処理負担の軽減を図ることができる。 [Effects of this embodiment]
As described above, according to the present embodiment, the information distribution system 10 distributes information related to characters composed of strokes written on the whiteboard 2 with the electronic pen 1 from the computer device 3 to the terminal 4.
In the computer device 3, the character recognition unit 342 recognizes the character string of the first language represented by the stroke information generated by the electronic pen as character information, and the character information recognized by the character recognition unit 342 is The data is transmitted to the terminal 4 by the transmission means 36.
The terminal 4 receives the character information transmitted from the computer device 3 by the receiving unit 42, and converts the character string of the first language represented by the character information received by the receiving unit 42 into the character of the second language by the translating unit 443. The display control means causes the display means to display the character string translated into the sequence and translated into the second language by the translation means 443.
In this way, the first language character string represented by the strokes entered with the electronic pen 1 can be collectively recognized as character information by the processor of the computer device, so that duplication conventionally performed at each terminal is performed. The processing burden on the entire system can be reduced.
In addition, each terminal 4 can perform translation at each terminal based on the recognition result of characters collectively performed by the computer device 3, so it is uncertain whether or not it is necessary at each terminal 4. It is not necessary to translate the language into the computer device 3 in advance, and the processing burden for translation can be reduced.

［変形例］
なお、本考案は、上記実施形態に限られない。
例えば、端末４のキーワード検出手段４４６は、翻訳手段４４３から出力された翻訳文字列を検索対象として、キーワードが含まれるか否かを検出しているが、検索対象はこれに限られない。
例えば、キーワード検出手段４４６は、コンピュータ装置３のデータ送信手段３４４により送信された文字情報、即ち、翻訳前の言語の文字列を検索対象としてもよい。この場合、キーワード設定手段４４５は、翻訳前の言語でキーワードを設定する。講師側が聴講者に強調したいキーワードを設定する使い方をする場合に好適である。 [Modification]
The present invention is not limited to the above embodiment.
For example, the keyword detection unit 446 of the terminal 4 uses the translated character string output from the translation unit 443 as a search target to detect whether a keyword is included, but the search target is not limited to this.
For example, the keyword detection unit 446 may search for the character information transmitted by the data transmission unit 344 of the computer apparatus 3, that is, the character string in the language before translation. In this case, the keyword setting unit 445 sets a keyword in the language before translation. This is suitable when the instructor uses the keyword to be emphasized for the audience.

また、上記実施形態では、端末４は、翻訳言語設定手段４４２によって設定言語（第２言語）を設定しているが、予め各端末４に、第２言語を設定しておいてもよい。この場合、設定する第２言語用の辞書データベースのセットのみで各端末４をセットアップすればよく、端末４のメモリを節約できる。   Moreover, in the said embodiment, although the terminal 4 has set the setting language (2nd language) by the translation language setting means 442, you may set a 2nd language to each terminal 4 previously. In this case, each terminal 4 has only to be set up with only a set of dictionary databases for the second language to be set, and the memory of the terminal 4 can be saved.

また、上記実施形態では、電子ペン１を用いる対象は、ホワイトボード２とされたが、特にこれに限られず、アノト式のドットパターンが印刷された任意の書き込み媒体であればよい。   In the above-described embodiment, the target using the electronic pen 1 is the whiteboard 2. However, the present invention is not limited to this and may be any writing medium on which an Anoto dot pattern is printed.

また、上記実施形態では、コンピュータ装置３から端末４に送信される文字情報は、１文字単位の情報とされたが、特にこれに限られず、数文字の情報であってもよいし、文字列や文章単位の情報であってもよい。   In the above embodiment, the character information transmitted from the computer device 3 to the terminal 4 is information in units of one character. However, the character information is not limited to this, and may be information of several characters or a character string. Or information in sentence units.

上述した一連の処理は、ハードウェアにより実行させることもできるし、ソフトウェアにより実行させることもできる。   The series of processes described above can be executed by hardware or can be executed by software.

なお、本明細書において、記録媒体に記録されるプログラムを記述するステップは、その順序に沿って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的或いは個別に実行される処理をも含むものである。   In the present specification, the step of describing the program recorded on the recording medium is not limited to the processing performed in time series along the order, but is not necessarily performed in time series, either in parallel or individually. The process to be executed is also included.

１…電子ペン
２…ホワイトボード
３…コンピュータ装置
４…端末
１０…情報配信システム
３１…入力手段
３２…受信手段
３３…記憶手段
３４…処理手段
３５…表示手段
３６…送信手段
３４１…情報取得制御手段
３４２…文字認識手段
３４３…表示制御手段
３４４…データ送信手段
４１…入力手段
４２…受信手段
４３…記憶手段
４４…処理手段
４５…表示手段
４６…報知手段
４４１…情報取得制御手段
４４２…翻訳言語設定手段
４４３…翻訳手段
４４４…表示制御手段
４４５…キーワード設定手段
４４６…キーワード検出手段
４４７…報知制御手段 DESCRIPTION OF SYMBOLS 1 ... Electronic pen 2 ... White board 3 ... Computer apparatus 4 ... Terminal 10 ... Information distribution system 31 ... Input means 32 ... Reception means 33 ... Storage means 34 ... Processing means 35 ... Display means 36 ... Transmission means 341 ... Information acquisition control means 342 ... Character recognition means 343 ... Display control means 344 ... Data transmission means 41 ... Input means 42 ... Reception means 43 ... Storage means 44 ... Processing means 45 ... Display means 46 ... Notification means 441 ... Information acquisition control means 442 ... Translation language setting Means 443 ... Translation means 444 ... Display control means 445 ... Keyword setting means 446 ... Keyword detection means 447 ... Notification control means

Claims (5)

コンピュータ装置から端末へ、電子ペンで書き込み媒体に記入されたストロークに関する情報を配信する情報配信システムであって、
前記コンピュータ装置は、
前記電子ペンによって生成されたストローク情報により表わされる第１言語の文字列を、文字情報として認識する文字認識手段と、
前記文字認識手段により認識された前記文字情報を前記端末に送信する送信手段と、
を備え、
前記端末は、
前記コンピュータ装置から送信された前記文字情報を受信する受信手段と、
前記受信手段において受信された前記文字情報により表わされる前記第１言語の文字列を、第２言語の文字列に翻訳する翻訳手段と、
前記翻訳手段により前記第２言語に翻訳された前記文字列を表示させる表示制御手段と、
を備える
ことを特徴とする情報配信システム。 An information distribution system for distributing information on strokes written on a writing medium with an electronic pen from a computer device to a terminal,
The computer device includes:
Character recognition means for recognizing a character string in a first language represented by stroke information generated by the electronic pen as character information;
Transmitting means for transmitting the character information recognized by the character recognition means to the terminal;
With
The terminal
Receiving means for receiving the character information transmitted from the computer device;
Translation means for translating the first language character string represented by the character information received by the receiving means into a second language character string;
Display control means for displaying the character string translated into the second language by the translation means;
An information distribution system characterized by comprising: 前記コンピュータ装置は、
前記翻訳手段により前記文字情報として認識された前記第１言語の文字列を表示する表示手段に表示させる表示制御手段をさらに有する
ことを特徴とする請求項１に記載の情報配信システム。 The computer device includes:
The information distribution system according to claim 1, further comprising a display control unit that causes a display unit that displays the character string of the first language recognized as the character information by the translating unit to be displayed. 前記端末は、
前記翻訳手段により翻訳される前記第２言語として、所定言語を設定する翻訳言語設定手段をさらに有する
ことを特徴とする請求項１又は２に記載の情報配信システム。 The terminal
The information distribution system according to claim 1, further comprising a translation language setting unit that sets a predetermined language as the second language translated by the translation unit. 前記端末は、
キーワードを設定するキーワード設定手段と、
前記翻訳手段により前記第２言語に翻訳された前記文字列を検索対象として、前記キーワード設定機能手段により設定された前記キーワードに関連するワードを検出するキーワード検出手段と、
前記キーワード設定手段により前記検索対象が前記キーワードに関連するワードが検出された場合に、報知手段によって報知する報知制御手段をさらに有する
ことを特徴とする請求項１乃至３の何れか一項に記載の情報配信システム。 The terminal
Keyword setting means for setting keywords;
Keyword detection means for detecting a word related to the keyword set by the keyword setting function means, with the character string translated into the second language by the translation means as a search target;
The information control unit according to any one of claims 1 to 3, further comprising notification control means for notifying by a notification means when a word related to the keyword is detected as the search target by the keyword setting means. Information distribution system. 前記キーワード検出手段は、前記キーワードとその同義語ないし類義語を検出することを特徴とする請求項４に記載の情報配信システム。   The information distribution system according to claim 4, wherein the keyword detection unit detects the keyword and its synonyms or synonyms.

Images