JP7180940B1

JP7180940B1 - Communication system and communication program

Info

Publication number: JP7180940B1
Application number: JP2022088500A
Authority: JP
Inventors: 孝史四宮; 明男永瀬; ジュークイタン; 聖二石川; 哲哉当麻; 朗菜増田
Original assignee: 株式会社エヌアンドエヌ
Priority date: 2022-05-31
Filing date: 2022-05-31
Publication date: 2022-11-30
Anticipated expiration: 2042-05-31
Also published as: JP2023176292A

Abstract

【課題】ユーザへ多くの情報を即時かつ確実に伝達しうる情報伝達システム、及び本システムを制御するためのプログラムを提供する。【解決手段】上記課題を解決するため、振動情報に応じて、ユーザに装着された複数の円盤型振動モータａ２～ａ５，ｂ２～ｂ５，ｃ１～ｃ５，ｄ１を選択的に振動させる手袋２と、上記振動情報若しくは上記ユーザへ伝える伝達情報のいずれか一方を受信部６へ送信する送信装置３を備え、送信装置３が上記振動情報を送信する場合には送信装置３、上記伝達情報を送信する場合には受信部６が、上記伝達情報と、上記伝達情報を示す符号をデータセットとする教師データにより学習された第１の学習済ニューラルネットワークへ伝達情報を入力することにより、上記伝達情報に応じた符号を第１の学習済ニューラルネットワークに出力させ、出力された符号に対応する振動情報を生成する演算部３３を含む情報伝達システム１を提供する。【選択図】図１An information transmission system capable of immediately and reliably transmitting a large amount of information to a user and a program for controlling this system are provided. In order to solve the above problems, a glove 2 that selectively vibrates a plurality of disk-shaped vibration motors a2-a5, b2-b5, c1-c5, and d1 worn by a user according to vibration information. , a transmission device 3 for transmitting either the vibration information or the transmission information to be transmitted to the user to the reception unit 6, and when the transmission device 3 transmits the vibration information, the transmission device 3 transmits the transmission information In this case, the receiving unit 6 inputs the transmission information and the transmission information to the first trained neural network trained by the teacher data having the transmission information and the code indicating the transmission information as a data set, so that the transmission information is output to the first trained neural network, and an information transmission system 1 including a computing unit 33 that generates vibration information corresponding to the output code is provided. [Selection drawing] Fig. 1

Description

本発明は、ユーザへ情報を伝達する技術に関するものである。 The present invention relates to technology for transmitting information to users.

ユーザへ装着したデバイスを用いて当該ユーザへ情報を提供する技術は種々知られているが、例えば特許文献１には、ユーザが有する指の所定の位置に配置された複数の振動子を選択的に振動させることによって、当該ユーザへ情報を伝達するシステムが開示されている。 Various techniques are known for providing information to a user using a device worn by the user. A system is disclosed that conveys information to the user by vibrating the device.

特許第６８９０３５５号公報Japanese Patent No. 6890355

特許文献１の図４から図７及びそれらの説明部分においては、当該ユーザへ情報を伝達する方法の具体例が示されているが、本文献に示された情報伝達システムを社会実装する段階では、多くの情報を即時かつ確実に当該ユーザへ伝達する仕組みが必要になる。 4 to 7 of Patent Document 1 and their descriptions show specific examples of methods for transmitting information to the user. , a mechanism for transmitting a large amount of information to the user immediately and reliably is required.

本発明は、このような課題を解決するためになされたもので、ユーザへ多くの情報を即時かつ確実に伝達しうる情報伝達システム、及び本システムを制御するためのプログラムを提供することを目的とする。 SUMMARY OF THE INVENTION It is an object of the present invention to provide an information transmission system capable of immediately and reliably transmitting a large amount of information to a user, and a program for controlling this system. and

本発明は、上記課題を解決するため、振動情報に応じて、ユーザに装着された複数の振動子を選択的に振動させる情報伝達装置と、上記振動情報若しくは上記ユーザへ伝える伝達情報のいずれか一方を上記情報伝達装置へ送信する送信装置を備え、上記送信装置が上記振動情報を送信する場合には上記送信装置、上記送信装置が上記伝達情報を送信する場合には上記情報伝達装置が、上記伝達情報と、上記伝達情報を示す符号をデータセットとする教師データにより学習された第１の学習済ニューラルネットワークへ伝達情報を入力することにより、上記伝達情報に応じた符号を第１の学習済ニューラルネットワークに出力させ、出力された符号に対応する振動情報を生成する演算手段を含む情報伝達システムを提供する。 In order to solve the above problems, the present invention provides an information transmission device that selectively vibrates a plurality of vibrators worn by a user according to vibration information, and transmission information that is transmitted to the user or the vibration information. A transmission device for transmitting one to the information transmission device, the transmission device when the transmission device transmits the vibration information, and the information transmission device when the transmission device transmits the transmission information, By inputting the transmission information to a first trained neural network trained with teacher data having the transmission information and a code indicating the transmission information as a data set, the code corresponding to the transmission information is subjected to the first learning. Provided is an information transmission system including computing means for generating vibration information corresponding to an output code by outputting it to a neural network.

また、本発明は、上記課題を解決するため、振動情報に応じて、ユーザに装着された複数の振動子を選択的に振動させる情報伝達装置と、上記振動情報若しくは上記ユーザへ伝える伝達情報のいずれか一方を上記情報伝達装置へ送信する送信装置を備え、上記送信装置が上記振動情報を送信する場合には上記送信装置、上記送信装置が上記伝達情報を送信する場合には上記情報伝達装置が、演算手段を含む情報伝達システムを制御する情報伝達プログラムであって、上記演算手段に対し、上記伝達情報と、上記伝達情報を示す符号をデータセットとする教師データにより学習された第１の学習済ニューラルネットワークへ伝達情報を入力させ、第１の学習済ニューラルネットワークに対して上記伝達情報に応じた符号を出力させる第１のステップと、上記演算手段に対し、第１のステップで出力された符号に対応する振動情報を生成させる第２のステップを実行する情報伝達プログラムを提供する。 In order to solve the above problems, the present invention also provides an information transmission device for selectively vibrating a plurality of vibrators worn by a user according to vibration information, and transmission information to be transmitted to the vibration information or the user. A transmission device for transmitting either one to the information transmission device, the transmission device when the transmission device transmits the vibration information, and the information transmission device when the transmission device transmits the transmission information is an information transmission program for controlling an information transmission system including computing means, wherein the computing means is provided with the transmission information and the first data learned by teacher data having a data set of a code indicating the transmission information. a first step of inputting transmission information to a trained neural network and outputting a code corresponding to the transmission information to the first trained neural network; A communication program is provided for executing the second step of generating vibration information corresponding to the code.

本発明によれば、ユーザへ多くの情報を即時かつ確実に伝達しうる情報伝達システム及び情報伝達プログラムを提供することができる。 ADVANTAGE OF THE INVENTION According to this invention, the information transmission system and information transmission program which can transmit many information to a user immediately and reliably can be provided.

本発明の実施の形態に係る情報伝達システム１の構成を示す図である。It is a figure showing composition of information transmission system 1 concerning an embodiment of the invention. 図１に示された振動子ａ３，ｂ３，ｃ３の設置位置を示す斜視図である。2 is a perspective view showing the installation positions of vibrators a3, b3, and c3 shown in FIG. 1; FIG. 図１に示された手袋２に代替しうる指輪型発振子ｒの構成を示す斜視図である。FIG. 2 is a perspective view showing the configuration of a ring-shaped oscillator r that can replace the glove 2 shown in FIG. 1; 図１に示された送信装置３の構成を示すブロック図である。2 is a block diagram showing the configuration of a transmission device 3 shown in FIG. 1; FIG. 図４に示された演算部３３で実行される情報伝達プログラムのアルゴリズムを示すフローチャートである。FIG. 5 is a flow chart showing an algorithm of an information transfer program executed by a computing unit 33 shown in FIG. 4; FIG. 図５に示されたステップＳ１及びステップＳ２における演算部３３の動作の具体例を示す図である。6 is a diagram showing a specific example of the operation of a calculation unit 33 in steps S1 and S2 shown in FIG. 5; FIG. 図６に示された符号化により生成された符号に対応した振動情報による発振例を示す模式図である。FIG. 7 is a schematic diagram showing an oscillation example based on vibration information corresponding to a code generated by the encoding shown in FIG. 6; 図６に示された冗長化により生成された冗長符号に対応した振動情報による発振例を示す模式図である。FIG. 7 is a schematic diagram showing an example of oscillation based on vibration information corresponding to the redundant code generated by the redundancy shown in FIG. 6;

本発明の実施の形態を、図面を参照しつつ詳しく説明する。なお、図中同一符号は同一又は相等部分を示す。 Embodiments of the present invention will be described in detail with reference to the drawings. The same reference numerals in the drawings indicate the same or equivalent parts.

以下においては、ユーザへ伝える伝達情報を中央演算処理装置（ＣＰＵ）により振動情報へ変換し、上記ユーザが有する少なくとも片手の指に行列配置された複数振動子を上記振動情報に応じて振動させることによって、上記ユーザへ上記伝達情報を伝える情報伝達システムについて詳しく説明する。 In the following, transmission information to be transmitted to the user is converted into vibration information by a central processing unit (CPU), and a plurality of vibrators arranged in a matrix on at least one finger of the user is vibrated according to the vibration information. , an information transmission system for transmitting the transmission information to the user will be described in detail.

ここで、上記「伝達情報」は、音声情報、点字や筆跡を含む文字情報、スマートフォンやカメラ等で撮像された画像を処理することで取得される周囲の状況を示す現況情報等の視覚情報、対象物の大きさ、凹凸、高さ、深さ、速さ、遠近距離、連なり、拡がり、方位などの三次元空間情報、位置情報、誘導情報のうち少なくとも一つに基づいて生成された情報を意味する。 Here, the above-mentioned "transmission information" includes audio information, text information including braille and handwriting, visual information such as current situation information indicating the surrounding situation obtained by processing images captured by smartphones, cameras, etc. Information generated based on at least one of three-dimensional spatial information such as object size, unevenness, height, depth, speed, perspective, sequence, spread, and direction, position information, and guidance information means.

図１は、本発明の実施の形態に係る情報伝達システム１の構成を示す図である。図１に示されるように、情報伝達システム１は、ポケット４にそれぞれ格納されると共に、それぞれ独立して制御され、独立してユーザに識別知覚される複数の円盤型振動モータａ２～ａ５，ｂ２～ｂ５，ｃ１～ｃ５，ｄ１（以下「円盤型振動モータａ２等」と略す。）と、受信された情報に応じて上記複数の振動子を選択的に振動させる受信部６と、円盤型振動モータａ２等及び受信部６へ電力を供給する電源５を含む情報伝達装置としての手袋２と、受信部６へ上記情報を有線、若しくは無線で送信する送信装置３を備える。ここで、円盤型振動モータａ２等は、ユーザにおいて個々に振動が弁別、若しくは識別され、かつ、独立した制御がなされるものである。なお、上記振動子は、電気的な制御により起振可能な圧電（ピエゾ）素子などでも構わない。 FIG. 1 is a diagram showing the configuration of an information transmission system 1 according to an embodiment of the invention. As shown in FIG. 1, the information transmission system 1 includes a plurality of disk-shaped vibration motors a2 to a5, b2 which are stored in pockets 4, are independently controlled, and are independently identifiable and perceived by the user. ~ b5, c1 ~ c5, d1 (hereinafter abbreviated as "disk type vibration motor a2 etc."), a receiving unit 6 for selectively vibrating the plurality of vibrators according to the received information, and a disk type vibration A glove 2 as an information transmitting device including a power supply 5 for supplying power to a motor a2 and the like and a receiving section 6, and a transmitting device 3 for transmitting the above information to the receiving section 6 by wire or wirelessly. Here, the disk type vibration motor a2 and the like are individually discriminated or identified by the user and controlled independently. Note that the vibrator may be a piezoelectric (piezo) element or the like that can vibrate by electrical control.

また、全ての円盤型振動モータａ２等はそれぞれ、電源５及び受信部６に接続されるが、図１においては、このうち円盤型振動モータｃ５，ｄ１の配線のみが図示され、その他の円盤型振動モータａ２～ａ５，ｂ２～ｂ５，ｃ１～ｃ４の配線は省略されている。 All the disk-shaped vibration motors a2 and the like are connected to the power supply 5 and the receiving unit 6, respectively, but in FIG. Wiring of the vibration motors a2-a5, b2-b5, and c1-c4 is omitted.

また、ここでは、円盤型振動モータａ２～ａ５，ｂ２～ｂ５，ｃ１～ｃ５の３行、及び第１列から第５列までの５列、合計１４個の行列状に配置された振動子は、振動強度、発振長、及び振動変調により、立体空間上に位置する物体の高さや動き、それらの組み合わせ等を表現し、知覚情報としてユーザへ提示するものであるが、ユーザの手の甲における中手骨などへも振動子を設置して情報提示量を増やすこともできる。 Further, here, three rows of disk-type vibration motors a2 to a5, b2 to b5, and c1 to c5, and five columns of the first to fifth columns, a total of 14 vibrators arranged in a matrix are , vibration intensity, oscillation length, and vibration modulation to express the height and movement of an object located in a three-dimensional space, their combination, etc., and present them to the user as perceptual information. It is also possible to increase the amount of information presented by installing transducers on bones and the like.

円盤型振動モータａ２等は、図２に示されるように、ユーザの少なくとも片手における指の背側で、親指を構成する末節骨及び基節骨と、示指、中指、環指、及び小指を構成する末節骨と中節骨及び基節骨の直上にそれぞれ配置される。 As shown in FIG. 2, the disc-shaped vibration motor a2 and the like constitute the distal phalanx and proximal phalanx of the thumb, the index finger, the middle finger, the ring finger, and the little finger on the dorsal side of the fingers of at least one hand of the user. It is placed just above the distal phalanx and middle phalanx and proximal phalanx, respectively.

なお、用途によっては、ユーザへ提示する情報量が少ない活用方法もある。その場合には、片手の５指でなく、３指や２指だけに振動子を配置すれば良い。また、１指だけで済む場合などでは、電源、１～３個の振動子、無線通信受信端子、発振制御用ＣＰＵチップを内蔵したリストバンド型や時計ベルト型等の腕輪型発振子を使用しても良い。また、このような場合には、図３に示されるような、電力や制御信号を伝送する配線ｗ及び円形の振動面ｅを有してユーザの指に装着される指輪型発振子ｒなどを使用しても良い。 It should be noted that, depending on the application, there is also a utilization method in which the amount of information to be presented to the user is small. In that case, the vibrator may be placed only on the third finger or the second finger of one hand instead of the fifth finger. In addition, when only one finger is required, a wristband type or watch belt type or other wristband type oscillator with built-in power supply, 1 to 3 oscillators, a wireless communication receiving terminal, and a CPU chip for oscillation control is used. can be In such a case, as shown in FIG. 3, a ring-type oscillator r having a wiring w for transmitting electric power and control signals and a circular vibration surface e and worn on a user's finger may be used. May be used.

送信装置３は、上記ユーザ自身が所持する他、外部環境に置かれても良く、例えばスマートフォンの他、各種カメラや全地球測位システム（ＧＰＳ）、マイク機能等を有する携帯型コンピュータ端末等による無線通信等の手段により実現される。 The transmission device 3 may be owned by the user or placed in an external environment. It is realized by means such as communication.

図４は、図１に示された送信装置３の構成を示すブロック図である。図４に示されるように、送信装置３は、入出力ノード３１と、入出力ノード３１に接続されたバス３２と、それぞれバス３２に接続された演算部３３、送信部３４、及び記憶部３５を含む。 FIG. 4 is a block diagram showing the configuration of the transmitting device 3 shown in FIG. 1. As shown in FIG. As shown in FIG. 4, the transmission device 3 includes an input/output node 31, a bus 32 connected to the input/output node 31, an operation unit 33, a transmission unit 34, and a storage unit 35 each connected to the bus 32. including.

ここで、演算部３３は、上記ＣＰＵにより構成され、入出力ノード３１からバス３２を介して入力され、若しくは、後述する記憶部３５に記憶された上記伝達情報に応じた振動情報を生成するが、演算部３３の本動作については後に詳しく説明する。 Here, the calculation unit 33 is configured by the CPU and generates vibration information according to the transmission information input from the input/output node 31 via the bus 32 or stored in the storage unit 35, which will be described later. , and the actual operation of the calculation unit 33 will be described later in detail.

送信部３４は、上記のように、バス３２及び入力ノード３１を介した有線通信、又は無線通信によって、演算部３３により生成された振動情報を受信部６へ送信する。 The transmission unit 34 transmits the vibration information generated by the calculation unit 33 to the reception unit 6 by wired communication or wireless communication via the bus 32 and the input node 31 as described above.

記憶部３５は、送信装置３自身で取得し、又は入出力ノード３１及びバス３２を介した有線通信、若しくは無線通信により外部から入力された上記伝達情報や、演算部３３により実行されるプログラムの他、演算部３３により生成された振動情報や、後述するファイリング情報等を記憶する。 The storage unit 35 stores the transmission information acquired by the transmission device 3 itself, or input from the outside by wired communication or wireless communication via the input/output node 31 and the bus 32, and the program executed by the calculation unit 33. In addition, it stores vibration information generated by the calculation unit 33, filing information, which will be described later, and the like.

なお、演算部３３は、送信装置３の替わりに手袋２に含まれていても良い。この場合には、送信部３４から受信部６へ上記伝達情報が送信され、手袋２に内蔵された演算部３３により、図５に示されたステップＳ１からステップＳ３の動作が実行される。そして、円盤型振動モータａ２等は、手袋２に内蔵された演算部３３により生成された振動情報に応じて、選択的に起振される。 Note that the calculation unit 33 may be included in the glove 2 instead of the transmission device 3 . In this case, the transmission information is transmitted from the transmission section 34 to the reception section 6, and the operations from step S1 to step S3 shown in FIG. The disc-shaped vibration motor a2 and the like are selectively vibrated according to the vibration information generated by the calculation unit 33 built in the glove 2. FIG.

図５は、図４に示された演算部３３で実行される情報伝達プログラムのアルゴリズムを示すフローチャートである。図５に示されるように、本プログラムは、ステップＳ１において、演算部３３に対し、ユーザへ伝える伝達情報と、上記伝達情報を示す符号をデータセットとする教師データにより学習された第１の学習済ニューラルネットワークへ伝達情報を入力させ、上記第１の学習済ニューラルネットワークに対して上記伝達情報に応じた符号を出力させる。 FIG. 5 is a flow chart showing the algorithm of the information transmission program executed by the computing section 33 shown in FIG. 5. As shown in FIG. 5, in step S1, the program supplies the calculation unit 33 with transmission information to be transmitted to the user and a first learning learned by teacher data having a data set of codes indicating the transmission information. Transmission information is input to the trained neural network, and a code corresponding to the transmission information is output to the first trained neural network.

上記符号は、言語情報として冗長性が欠ける合図、暗号、略称などに簡略化したものや、人間の本能や経験、学習により取得している直感、体感、体現という経験を活用した最適な振動提示パターンを指定するものとされ、振動発振に関する規定に基づいて定められる。具体的には、例えば、基準となる標準発振の他、この方法を基に、振動強度を変えた発振、振動変調（周波数など）させた発振、複数種類の間欠発振、発振位置の移動知覚が得られる発振、同時複数発振等や、これらの組み合わせを指定するものとされる。 The above codes are simplified as cues, codes, abbreviations, etc. that lack redundancy as linguistic information, and optimal vibration presentations that utilize human instincts, experiences, and intuitions acquired through learning, bodily sensations, and embodying experiences. It shall specify the pattern and is determined based on the regulations for vibration oscillation. Specifically, for example, in addition to standard oscillation as a reference, based on this method, oscillation with different vibration intensity, oscillation with vibration modulation (frequency, etc.), intermittent oscillation of multiple types, and movement perception of the oscillation position. Oscillation to be obtained, simultaneous multiple oscillations, etc., and combinations thereof are specified.

また、上記伝達情報が言語情報である場合には、以下のファイリング情報とフィルタリング機能を用いて、類似情報の仕訳や、振動刺激の簡略表現を知覚や識別容易性に基づいて類別統合するなど、学習成果に基づく選択的な変換を行う。より具体的には、本プログラムは、演算部３３に対し、上記言語情報からフィルタリング処理を用いて体言や用言等の構成言語を抽出して記憶部３５等において利用頻度や簡略表現の周知度など知覚容易順にファイリングさせ、本ファイリングにより最も高くランクされている構成言語を、擬態表現を模した振動刺激提示表現や、衝撃的振動などを活用した緊張や弛緩の表現に変換して活用すべく、上記伝達情報を示す代表符号として採用すると好適である。 In addition, when the above-mentioned transmitted information is linguistic information, the following filing information and filtering function are used to classify and integrate similar information and simplified expressions of vibration stimuli based on perception and identifiability. Make selective conversions based on learning outcomes. More specifically, this program extracts constituent languages such as nominals and predicates from the above-described linguistic information to the computing unit 33, and stores them in the storage unit 35, etc. to store the frequency of use and the degree of familiarity of simplified expressions. , etc., and convert the language that ranks highest in this filing into vibration stimulus presentation expressions that imitate mimetic expressions and expressions of tension and relaxation that make use of impulsive vibrations. , is preferably adopted as a representative code indicating the transmission information.

ここで、演算部３３が本ファイルの参照時に、上記構成言語と上記代表符号をデータセットとした教師データにより学習された学習済ニューラルネットワークへ構成言語を入力することにより、出現頻度や類似性、関連性、近似性などを踏まえた代表符号を出力させ、その結果を統一的な表現として上記ファイルに追加してファイルの更新を行う。これにより、時代と共に移り変わる出現頻度の変化に応じて、本ファイルのバージョンアップを実現することができる。また、本ファイル更新の機能によれば、本システムに対するユーザ毎の利用状況を反映させることもできるため、個別最適な使い勝手の良さ（パーソナルユース）を実現することもできる。 Here, when the calculation unit 33 refers to this file, by inputting the configuration language to a trained neural network that has been trained using teacher data in which the configuration language and the representative code are set as a data set, appearance frequency, similarity, A representative code based on relevance, approximation, etc. is output, and the result is added to the above file as a unified expression and the file is updated. This makes it possible to upgrade the version of this file according to changes in appearance frequency that change with the times. In addition, according to this file update function, it is possible to reflect the usage status of each user for this system, so that individual optimum usability (personal use) can be realized.

次に、本プログラムは、ステップＳ２において、演算部３３に対し、上記符号とそれに応じた冗長符号をデータセットとする教師データにより学習された第２の学習済ニューラルネットワークへステップＳ１で出力された符号を入力させ、第２の学習済ニューラルネットワークに対してステップＳ１で出力された符号に応じた冗長符号を出力させる。 Next, in step S2, this program outputs to the calculation unit 33 the second trained neural network trained by the teacher data having the above code and redundant code corresponding to the code as a data set in step S1. A code is input, and a redundant code corresponding to the code output in step S1 is output to the second trained neural network.

上記冗長符号は、第１の学習済ニューラルネットワークから出力された符号を修飾することにより生成され、情報伝送路や受振容易性といったシステムの信頼性を高める役割を担う。具体的な修飾方法としては、同一位置での繰返し発振、複数位置の同時（並列）発振、三点あるいは、それ以上の複数位置への直列、若しくは単列での移動発振、そして複数位置の同時（並列）移動発振等が採用される。 The redundant code is generated by modifying the code output from the first trained neural network, and plays a role of enhancing the reliability of the system, such as the information transmission path and the ease of vibration reception. Specific modification methods include repeated oscillation at the same position, simultaneous (parallel) oscillation at multiple positions, serial or single row moving oscillation at three or more positions, and simultaneous multiple positions. A (parallel) moving oscillation or the like is employed.

なお、第１の学習済ニューラルネットワークから出力された符号が既に上記信頼性を有していると判断される場合には、第２の学習済ニューラルネットワークは、入力された符号と同じ符号を出力するようにしても良い。 If it is determined that the code output from the first trained neural network already has the above reliability, the second trained neural network outputs the same code as the input code. You can make it work.

次に、本プログラムは、ステップＳ３において、演算部３３に対し、ステップＳ２で出力された冗長符号に対応する振動情報を生成させる。記憶部３５には各種符号、及びそれらに対応する振動情報、すなわち振動パターンを規定した振動刺激規定ファイルが予め格納され、演算部３３は本ファイルを参照して、冗長符号に対応する振動情報を生成する。 Next, in step S3, the program causes the calculation unit 33 to generate vibration information corresponding to the redundant code output in step S2. Various codes and vibration information corresponding to them, that is, a vibration stimulus definition file that defines vibration patterns are stored in advance in the storage unit 35, and the calculation unit 33 refers to this file to obtain vibration information corresponding to the redundant code. Generate.

なお、振動情報は、円盤型振動モータａ２等に対して、発振する位置、時間、強度等につき、それらの組み合わせを規定する情報とされる。この振動情報の生成においては、単独発振ではユーザにおける振動刺激の識別能が基となる。そして、本振動情報により、周波数変調による識別、個々に独立した複数の振動子を連携使用する方法において、振動時間の長さや発振タイミングや間合など、常用的で汎用的な知覚容易性が高いと判断される最適な方法で時間差を設けることによって、容易に発振位置の移動知覚や識別を可能とし、また、独立した複数の振動子の同時並列起振や単列複数位置への移動発振の方法による欠落（飛び）チェック等が実行される。 The vibration information is defined as information defining a combination of vibration position, time, intensity, and the like for the disk type vibration motor a2 and the like. In the generation of this vibration information, the user's ability to discriminate the vibration stimulus is the basis for independent oscillation. And, with this vibration information, in the method of identification by frequency modulation, and the method of cooperatively using multiple independently independent transducers, the length of vibration time, oscillation timing, interval, etc. are highly common and versatile perceptibility. By providing a time difference in an optimal way, it is possible to easily perceive and identify the movement of the oscillation position. Missing (flying) checks and the like are performed according to the method.

振動情報の具体例としては、振動の有無とその長さにより規定される間欠発振、振動の強度、識別容易な発振位置、発振移動方向、同一手指を構成する骨部全てや、隣接する手指の骨部など同時複数位置での発振等の組み合せを活用した発振を規定する情報とすることができる。 Specific examples of vibration information include intermittent oscillation defined by the presence or absence of vibration and its length, intensity of vibration, easily identifiable oscillation position, oscillation movement direction, all bones that make up the same finger, and information on adjacent fingers. The information can be used to define oscillation that utilizes a combination of oscillations at a plurality of positions at the same time, such as a bone.

ここで、手指等に配した振動子を個別に独立してユーザへ知覚、若しくは認識させる方法としては、振動を発振する振動子を個々に識別可能な部位に配置する方法のほか、個々の振動子が個別に、また指毎に、そして各指を構成する骨毎に、体系的に異なる振動刺激を発振させるという振動発振の方法がある。具体的には、振動刺激の変調と発振位置の変調を組合せた方法によって識別を行う方法を用いる。例えば、五指それぞれの指毎に異なる特徴を持つ振動や変調振動による発振と、同一指内では、末節骨上、中節骨上、基節骨上など部位間で変調を行い、それぞれの変調の組合せにより個々の振動子を特定する方法によって、変調の有無を含めた発振方法を含めて、個々の振動子を独立して識別させることが可能である。 Here, as a method for individually and independently perceiving or recognizing vibrators placed on fingers or the like by a user, in addition to a method in which vibrators that oscillate vibration are placed in individually identifiable parts, individual vibration There is a method of vibratory oscillation in which the child individually, and for each finger, and for each bone that constitutes each finger, systematically oscillates different vibration stimuli. Specifically, a method of identifying by a method combining vibration stimulus modulation and oscillation position modulation is used. For example, oscillation by vibration or modulated vibration with different characteristics for each of the five fingers, and modulation between parts such as the distal phalanx, the middle phalanx, and the proximal phalanx in the same finger, and each modulation It is possible to independently identify each oscillator, including the oscillation method including the presence or absence of modulation, by the method of specifying each oscillator by combination.

このような方法によれば、発振部位を特定することを可能にするだけでなく、連携発振や協調発振、そして並列同時発振などの識別も容易となる。この発振部位の特定と識別の方法を基に、発振振動の有無や発振時間と休止時間の長短、発振の間欠提示、発振の強弱、協調発振や発振位置移動、発振位置に特定の意味を持たせる発振などを組合せた発振方法を用いて暗号や符号語などを規定することにより、信頼性の高い情報提示の方法を確立している。 According to such a method, it is possible not only to specify the oscillation site, but also to easily identify cooperative oscillation, cooperative oscillation, parallel simultaneous oscillation, and the like. Based on this method of specifying and identifying the oscillation site, the presence or absence of oscillation, the length of oscillation time and pause time, intermittent presentation of oscillation, strength of oscillation, coordinated oscillation, oscillation position movement, and oscillation position have specific meanings. We have established a highly reliable information presentation method by defining encryption and codewords using an oscillation method that combines oscillation with a single pulse.

次に、本プログラムは、ステップＳ４において、送信部３４に対し、ステップＳ３で生成された振動情報を受信部６へ送信させる。これにより、上記のように、受信部６は、受信した振動情報に応じて、ユーザに装着された円盤型振動モータａ２等を選択的に振動させる。 Next, in step S<b>4 , the program causes the transmission section 34 to transmit the vibration information generated in step S<b>3 to the reception section 6 . Accordingly, as described above, the receiving unit 6 selectively vibrates the disk-shaped vibration motor a2 or the like attached to the user according to the received vibration information.

以下においては、図６から図８を参照しつつ、演算部３３による上記動作の具体例について説明する。 A specific example of the above-described operation by the calculation unit 33 will be described below with reference to FIGS. 6 to 8. FIG.

例えば、上記伝達情報として、ＧＰＳを使った現在位置の確認情報や、ＲＧＢ－Ｄカメラを使ってカメラ前方の情景と奥行き距離の不連続や急変する部位の検出から、段差や路面の欠落や***を識別、特定して、階段や傾斜の規定された許容限度を超えているという障害情報をユーザへ瞬時に提供できる。この機能によって、路面の穴や障害物の存在を特定する。そして、鉄道駅ホーム端位置の特定（転落防止誘導）や、駐停車中の車両、カメラに向かってくる移動物に対し、画像の物体認識と物体像の重心の拡大や縮小を検出することにより、当該物体の移動方向を特定すること等が可能となる。この機能によって、ユーザを取り巻く状況や状態を示す情報に基づいて、ユーザへ回避や回避不要などの行動支援の情報を提供することができる。なお、スマートフォン等の情報端末を併用し、当該情報端末に内蔵される道案内アプリを活用したり、ＧＰＳを活用したりする方法によって情報を取得しても良い。 For example, as the transmission information, the current position confirmation information using GPS, the scene in front of the camera using the RGB-D camera and the detection of discontinuities and sudden changes in the depth distance are detected, and can be identified and located to provide instantaneous obstacle information to the user that a stair or incline exceeds the prescribed allowable limits. This feature identifies the presence of potholes and obstacles in the road. Then, by identifying the end position of the train station platform (fall prevention guidance), parked vehicles, and moving objects coming toward the camera, object recognition in the image and detection of expansion or contraction of the center of gravity of the object image , the moving direction of the object can be specified. With this function, it is possible to provide the user with action support information such as avoidance or no need to avoid, based on information indicating the circumstances and conditions surrounding the user. Information may also be obtained by using an information terminal such as a smart phone, utilizing a route guidance application built into the information terminal, or utilizing a GPS.

ここで、図６に示されるように、ユーザへ伝える伝達情報が「前方に障害物あり。危険、止まれ。右へ二歩進め。」という情報である場合、演算部３３は、上記ステップＳ１において本伝達情報を第１の学習済ニューラルネットワークへ入力することにより、「危険な障害物」に相当する符号「Ｄ」と、「（緊急）停止」に相当する符号「ＳＴ」と、「右へ二歩」に相当する「Ｒ２」を本順序で組み合わせた符号へ符号化する。 Here, as shown in FIG. 6, when the transmission information to be transmitted to the user is the information "There is an obstacle ahead. Danger, stop. Take two steps to the right." By inputting this transmission information to the first learned neural network, the code "D" corresponding to "dangerous obstacle", the code "ST" corresponding to "(emergency) stop", and "to the right ``R2'' corresponding to ``Nippo'' is encoded into a code that is combined in this order.

このとき、「危険な障害物」という伝達情報と「（緊急）停止」という伝達情報を合わせた情報に対して、一つの簡略化した組み合わせ暗号「ＤＳ」を対応させて上記ニューラルネットワークに学習させておけば、伝達情報から生成される符号を短縮化して情報提示量を削減することにより、情報伝送効率を高めることができる。 At this time, one simplified combined cipher "DS" is associated with the combined information of the transmission information "dangerous obstacle" and the transmission information "(emergency) stop", and the above neural network is made to learn. By doing so, the information transmission efficiency can be improved by shortening the code generated from the transmission information and reducing the information presentation amount.

次に、演算部３３は、上記ステップＳ２において上記の暗号「ＤＳ」と符号「Ｒ２」を組み合わせた符号を第２の学習済ニューラルネットワークへ入力することにより、符号「ＤＤＤ」、符号「ＤＳ」、及び符号「Ｒｒ２」を組み合わせた冗長符号へ冗長化する。ここで、符号「ＤＤＤ」は符号「Ｄ」を三回繰り返したものであり、ユーザにとって重要な「危険な障害物」という伝達情報が強調されたことになる。また、符号「Ｒｒ２」は符号「Ｒ２」に符号「ｒ」が付加されているが、符号「ｒ」は符号「Ｒ」に対応する発振を行う時に、隣接する発振子も同時（並列）に発振させることを意味する。 Next, in step S2, the calculation unit 33 inputs the code obtained by combining the code "DS" and the code "R2" into the second trained neural network, thereby obtaining the code "DDD" and the code "DS". , and the code “Rr2” are combined into a redundant code. Here, the code "DDD" is the code "D" repeated three times, which emphasizes the communication information "dangerous obstacle" that is important to the user. Also, the code "Rr2" is a code "R2" with the code "r" added. It means to oscillate.

次に、演算部３３は、上記ステップＳ３において、上記振動刺激規定ファイルを参照することにより、上記冗長符号、すなわち符号「ＤＤＤ」、符号「ＤＳ」、及び符号「Ｒｒ２」をこの順序で組み合わせた符号に対応する振動情報を生成する。 Next, in step S3, the calculation unit 33 combines the redundant codes, that is, the code "DDD", the code "DS", and the code "Rr2" in this order by referring to the vibration stimulation regulation file. Generate vibration information corresponding to the sign.

ここで、演算部３３が仮に、上記の符号「Ｄ」、符号「ＳＴ」、及び符号「Ｒ２」をこの順序で組み合わせた符号に対応する振動情報を生成した場合には、結果として、図７の白抜き矢印で示されるように、最初に符号「Ｄ」に対応する円盤型振動モータｂ２、符号「ＳＴ」に対応する円盤型振動モータｃ２の順で発振し、その後、同図のハッチング矢印で示されるように、符号「Ｒ２」に対応して円盤型振動モータｂ２，ｂ３，ｂ４の順で発振することになる。 Here, if the calculation unit 33 generates vibration information corresponding to a code obtained by combining the code "D", the code "ST", and the code "R2" in this order, as a result, as shown in FIG. , the disk-shaped vibration motor b2 corresponding to the symbol "D" and the disk-shaped vibration motor c2 corresponding to the symbol "ST" oscillate in this order, and then hatched arrows in the same figure. , the disk-shaped vibration motors b2, b3, and b4 oscillate in the order corresponding to the code "R2".

これに対し、演算部３３が上記冗長符号に対応する振動情報を生成した場合には、結果として、図８の三重丸に示されるように、最初に符号「ＤＤＤ」に対応して円盤型振動モータｂ２が三回繰り返して発振し、その後、符号「ＳＴ」に対応する円盤型振動モータｃ２が一回発振し、さらにその後、同図の破線及びハッチング矢印で示されるように、符号「Ｒｒ２」に対応して円盤型振動モータｂ２，ｃ２、円盤型振動モータｂ３，ｃ３、円盤型振動モータｂ４，ｃ４が順次、同時発振することになる。 On the other hand, when the calculation unit 33 generates the vibration information corresponding to the redundant code, as a result, as indicated by the triple circle in FIG. b2 repeatedly oscillates three times, then the disk-shaped vibration motor c2 corresponding to the symbol "ST" oscillates once, and then, as indicated by the dashed line and hatched arrow in the same figure, the symbol "Rr2" Correspondingly, the disk-shaped vibration motors b2 and c2, the disk-shaped vibration motors b3 and c3, and the disk-shaped vibration motors b4 and c4 are simultaneously oscillated in sequence.

このように、冗長符号を活用して円盤型振動モータａ２等を多点同時発振させることにより、ユーザへ振動の飛びや欠落、規定外の変調、振動間隔の異変等を知覚させることが容易になるため、単位時間当たりの情報伝送量や伝送速度を向上させつつ、情報伝達の信頼性を高めることができる。 In this way, by utilizing the redundant code to simultaneously oscillate the disc-type vibration motor a2 and the like at multiple points, it is easy for the user to perceive vibration jumps and omissions, irregular modulation, and abnormal vibration intervals. Therefore, it is possible to increase the reliability of information transmission while improving the information transmission amount and transmission speed per unit time.

また他の例としては、筆談時や片仮名など画数の少ない文字を伝達情報とする場合には、筆跡におけるトメ、ハネ、ハライ、湾曲表現を共調発振の手法によって体現的に表現することで、誰もが過去に経験したであろう学習成果を活用した意味理解を図ると共に、発振位置の複数箇所を使った移動発振方法（新たな伝送路の並列活用の方法）による発振欠落チェックなども含めて多重な機能を付した発振方法によって解読容易性を高めることでシステムの信頼性を高めながらも、暗号などの符号長を更に短縮化することができる。 As another example, when communicating in writing or using characters with a small number of strokes, such as katakana characters, as transmission information, the tome, wing, harai, and curving expressions in the handwriting can be embodied by the method of harmonic oscillation. In addition to trying to understand the meaning using the results of learning that everyone has probably experienced in the past, including checking for missing oscillations by the moving oscillation method using multiple oscillation positions (a new method of parallel use of transmission lines). It is possible to further shorten the code length of encryption and the like while improving the reliability of the system by increasing the ease of decipherment by the oscillation method with multiple functions.

また、点字情報をユーザへ伝達する例、すなわち、点字規定に従って４行３列の凹凸刺激を指でなぞる既存の方法を、手指に振動刺激を提示する方法に代替することが考えられる。この場合には、図１に示されるように、第二指から第五指の４本の指の各指に３個の円盤型振動モータａ２～ａ５，ｂ２～ｂ５，ｃ２～ｃ５を配して点字の凹凸を振動で表現する。具体的には、振動刺激の発振について、既存点字による点の有無に対して、凸の有には起振、凹の無には無起振として対応させる。 In addition, it is conceivable to replace the existing method of transmitting braille information to the user, that is, the existing method of tracing the uneven stimulation of 4 rows and 3 columns with the finger according to the braille regulations, with the method of presenting the vibration stimulation to the fingers. In this case, as shown in FIG. 1, three disk-shaped vibration motors a2 to a5, b2 to b5, and c2 to c5 are arranged for each of four fingers from the second finger to the fifth finger. The unevenness of braille is expressed by vibration. Specifically, with regard to the oscillation of the vibration stimulus, the presence or absence of points in the existing Braille characters is treated as excitation when there are projections, and as non-excitation when there are no depressions.

この例では、並列発振方式などを流用することにより、伝送する情報量を増大させることが可能となる。また、起振時と無振動時という振動刺激の有無を読取る方法も可能になる。このように、表現方法の多様化と単位時間当たりの情報伝送容量の増大が可能になると共に、ユーザにとっては、既存の点字読み取り方法のように手指を動かすことなく、振動の有無を感じ取るだけのパッシブ（受動的）な使い方が可能となる。 In this example, by using a parallel oscillation method or the like, it is possible to increase the amount of information to be transmitted. In addition, it becomes possible to read the presence or absence of vibration stimulation when vibration is generated and when there is no vibration. In this way, it becomes possible to diversify the expression method and increase the information transmission capacity per unit time. Passive usage is possible.

なお、点字は各国や地域によって規定が複数存在しているが、本システムで実行するプログラムを組み換えることにより、規定間での変換を含めて、各規定に準拠する方法に変換することが容易となる。 There are multiple regulations for braille in each country and region, but by recombining the program executed by this system, it is easy to convert to a method that complies with each regulation, including conversion between regulations. becomes.

これらのことから、点字情報の伝達の高速化と操作の容易化、そして高い情報伝達の信頼性を実現できるため、既存の点字機の機能を代替することも可能となる。 Because of these features, Braille information can be transmitted faster, easier to operate, and highly reliable in information transmission, making it possible to replace the functions of existing Braille machines.

なお、上記においては、ユーザが有する片手の指を使った振動刺激情報の提示方法について説明したが、情報提示量の拡大、微細な情報や表現が複雑で難解な情報を提示する場合など、必要に応じて左右の手の指を個別発振させたり、両手の指を協調的に発振させたりしても良い。 In the above description, a method for presenting vibration stimulation information using the fingers of one hand of the user has been described. The fingers of the left and right hands may be individually oscillated, or the fingers of both hands may be oscillated cooperatively.

以上のような振動刺激を活用した情報伝達方法を採用することにより、視聴覚障がい者の歩行誘導支援の他、健常者の野外に於ける走歩行誘導や視聴覚情報取得を補う手段として即時応答力の高いシステムを構築できる。 By adopting the information transmission method using vibration stimulation as described above, in addition to walking guidance support for visually impaired people, it is possible to improve immediate response power as a means to supplement running guidance and audiovisual information acquisition for healthy people outdoors. You can build a high system.

例えば、会議や面談などに於ける英訳や仏訳など、異言語の音声を即時変換提示するなど、音声の重複による混乱も無い同時通訳用途や、テレビの生字幕放送などの文字情報を更に振動刺激情報に変換提示することなどが可能な、即応性が求められる情報伝達手段としての活用が可能なシステムを実現できる。 For example, simultaneous interpretation without confusion due to duplication of voices, such as English or French translations in meetings and interviews, etc., can be converted and presented immediately. It is possible to realize a system that can be used as information transmission means that requires responsiveness, such as converting and presenting stimulus information.

また、進路情報などの現況、避難、誘導提示等の伝達情報を、音声や取得画像の処理解析結果に基づく振動刺激としてユーザへ情報提示することが可能となる。本情報提示は、手指への触覚刺激による直接的な提示方法であるため、合図や暗号などを用いた知覚容易で、即応性の高い音声による情報提示に一歩近づいた情報伝達速度での提示を実現できる。 In addition, it is possible to present the current situation such as route information, information to be transmitted such as evacuation, guidance presentation, etc. to the user as a vibration stimulus based on the processing analysis result of the voice and the acquired image. Since this information presentation is a direct presentation method by tactile stimulation of the fingers, it is easy to perceive using cues and codes, and presentation at an information transmission speed one step closer to information presentation by voice with high responsiveness. realizable.

以上のように、本発明の実施の形態に係る情報伝達システム１及び情報伝達プログラムによれば、人間の触覚受容器機構の特性を十分に活かし、同時発振や連携発振を活用した発振の仕組みによって、短時間で、より多くの伝達情報を即時かつ確実に伝える高速伝送（情報伝達速度の向上）が可能となる。 As described above, according to the information transmission system 1 and the information transmission program according to the embodiment of the present invention, the characteristics of the human tactile receptor mechanism are fully utilized, and by the oscillation mechanism utilizing simultaneous oscillation and cooperative oscillation, , high-speed transmission (increase in information transmission speed) is made possible for transmitting more information immediately and reliably in a short period of time.

より具体的には、一般的に情報伝送の原理として、電子を用いた古典ビット単位による伝送と処理方法の他に、電子や光子を用いて量子ビットに変換活用する並列や重ね合わせ処理の考え方が知られているが、上記情報伝達システム１や情報伝達プログラムでは、伝送路の受信者であるヒトの知覚能を効率的に活用すべく、振動刺激の変調を識別、若しくは知覚の1つの識別単位として位置付けていることを特徴としている。 More specifically, as the principle of information transmission in general, in addition to transmission and processing methods in classical bit units using electrons, the concept of parallel and superposition processing that converts and utilizes quantum bits using electrons and photons. However, in the information transmission system 1 and the information transmission program, in order to efficiently utilize the perceptual ability of the human who is the recipient of the transmission path, the modulation of the vibration stimulus is identified, or one of the perceptions is identified. It is characterized by being positioned as a unit.

そして、並列や重ね合わせ等の方法により変調させた振動刺激を与える振動発振と、その制御・処理を手段として、ユーザが取得する知覚や識別に対して振動による変調をもたらすことで、一般的なコンピュータでは０か１かなど２値の何れかの状態を表すビット表現でしか表せなかった情報提示の方法において、発振する位置、時間、強度による識別知覚だけでなく、これらを基にして上記のように並列や重ね合わせ等により変調させた振動刺激を新たな情報提示の識別単位（要素）として活用している。このような手法によって、ヒトの限られた振動知覚能（知覚弁別能）や情報処理能力を有効に使い、提示情報の識別に要する時間の短縮や伝送路に於ける通信容量の増大、そして伝送路の信頼性向上を達成していることになる。 Then, by using vibration oscillation that gives vibration stimulation modulated by methods such as parallel and superimposition, and its control and processing, by bringing about vibration modulation to the perception and identification acquired by the user, general In the method of information presentation that can only be represented by a bit representation representing either binary state such as 0 or 1 in a computer, not only identification perception by oscillation position, time and intensity, but also the above based on these Vibrational stimuli modulated by parallel or superimposition are used as identification units (elements) for new information presentation. Such a method makes effective use of the limited ability of humans to perceive vibration (perceptual discrimination) and information processing ability, shortens the time required to identify presented information, increases the communication capacity in the transmission line, and increases the transmission capacity. This means that road reliability improvement has been achieved.

１情報伝達システム、２手袋、３送信装置、３３演算部、３４送信部、ａ２～ａ５，ｂ２～ｂ５，ｃ１～ｃ５，ｄ１円盤型振動モータ、ｒ指輪型発振子、Ｂ１末節骨、Ｂ２中節骨、Ｂ３基節骨、Ｂ４中手骨、Ｊ１ＤＩＰ関節、Ｊ２ＰＩＰ関節、Ｊ３ＭＰ関節。 1 information transmission system, 2 gloves, 3 transmission device, 33 calculation unit, 34 transmission unit, a2 to a5, b2 to b5, c1 to c5, d1 disk type vibration motor, r ring type oscillator, B1 distal phalanx, B2 medium phalanx, B3 proximal phalanx, B4 metacarpal, J1 DIP joint, J2 PIP joint, J3 MP joint.

Claims

振動情報に応じて、ユーザに装着された複数の振動子を選択的に振動させる情報伝達装置と、
前記振動情報若しくは前記ユーザへ伝える伝達情報のいずれか一方を前記情報伝達装置へ送信する送信装置を備え、
前記送信装置が前記振動情報を送信する場合には前記送信装置、前記送信装置が前記伝達情報を送信する場合には前記情報伝達装置が演算手段を含み、
前記演算手段は、前記伝達情報と、前記伝達情報を示す符号をデータセットとする教師データにより学習された第１の学習済ニューラルネットワークへ伝達情報を入力することにより、前記伝達情報に応じた前記符号を前記第１の学習済ニューラルネットワークに出力させ、出力された前記符号を、前記符号と前記符号に応じた冗長符号をデータセットとする教師データにより学習された第２の学習済ニューラルネットワークへ入力することにより、前記第１の学習済ニューラルネットワークから出力された前記符号に応じた冗長符号を前記第２の学習済ニューラルネットワークに出力させ、出力された前記冗長符号に対応する前記振動情報を生成する情報伝達システム。 an information transmission device that selectively vibrates a plurality of vibrators worn by a user according to vibration information;
A transmission device for transmitting either the vibration information or the transmission information to be transmitted to the user to the information transmission device,
the transmission device when the transmission device transmits the vibration information, and the information transmission device when the transmission device transmits the transmission information,
The calculating means inputs the transmission information to a first trained neural network trained with teacher data having the transmission information and a code indicating the transmission information as a data set, thereby obtaining the transmission information according to the transmission information. A code is output to the first trained neural network, and the output code is sent to a second trained neural network trained with teacher data having a data set of the code and a redundant code corresponding to the code. By inputting, a redundant code corresponding to the code output from the first trained neural network is output to the second trained neural network, and the vibration information corresponding to the output redundant code is output Information transmission system to generate .

振動情報に応じて、ユーザに装着された複数の振動子を選択的に振動させる情報伝達装置と、
前記振動情報若しくは、言語情報により構成された前記ユーザへ伝える伝達情報のいずれか一方を前記情報伝達装置へ送信する送信装置を備え、
前記送信装置が前記振動情報を送信する場合には前記送信装置、前記送信装置が前記伝達情報を送信する場合には前記情報伝達装置が演算手段を含み、
前記演算手段は、前記言語情報から構成言語を抽出して知覚容易順にファイリングして、前記ファイリングにより最も高くランクされている前記構成言語を、前記伝達情報を示す符号として採用し、前記伝達情報と、前記伝達情報を示す符号をデータセットとする教師データにより学習された第１の学習済ニューラルネットワークへ伝達情報を入力することにより、前記伝達情報に応じた前記符号を前記第１の学習済ニューラルネットワークに出力させ、出力された前記符号に対応する前記振動情報を生成する情報伝達システム。 an information transmission device that selectively vibrates a plurality of vibrators worn by a user according to vibration information;
a transmission device for transmitting either the vibration information or transmission information to be transmitted to the user, which is composed of language information, to the information transmission device;
the transmission device when the transmission device transmits the vibration information, and the information transmission device when the transmission device transmits the transmission information,
The computing means extracts constituent languages from the linguistic information, files them in order of ease of perception, adopts the constituent language ranked highest in the filing as a code indicating the transmission information, and uses the constituent language as a code indicating the transmission information. inputting the transmission information to a first trained neural network trained with teacher data having a code indicating the transmission information as a data set, thereby transmitting the code corresponding to the transmission information to the first trained neural network; An information transmission system that causes a network to output and generates the vibration information corresponding to the output code.

前記演算手段は、前記構成言語と前記符号をデータセットとする教師データにより学習された第２の学習済ニューラルネットワークへ構成言語を入力することにより前記第２の学習済ニューラルネットワークから出力された符号を追加的にファイリングする、請求項２に記載の情報伝達システム。 The computing means inputs a configuration language to a second trained neural network trained with teacher data having the configuration language and the code as a data set, thereby outputting from the second trained neural network: 3. The information transmission system according to claim 2 , wherein the code is additionally filed.

ユーザの少なくとも片手における指の背側で、親指を構成する末節骨及び基節骨と、示指、中指、環指、及び小指を構成する末節骨と中節骨及び基節骨の直上にそれぞれ配置された複数の振動子を、振動情報に応じて選択的に振動させる情報伝達装置と、
前記振動情報若しくは前記ユーザへ伝える伝達情報のいずれか一方を前記情報伝達装置へ送信する送信装置を備え、
前記送信装置が前記振動情報を送信する場合には前記送信装置、前記送信装置が前記伝達情報を送信する場合には前記情報伝達装置が、前記伝達情報と、前記伝達情報を示す符号をデータセットとする教師データにより学習された第１の学習済ニューラルネットワークへ伝達情報を入力することにより、前記伝達情報に応じた前記符号を前記第１の学習済ニューラルネットワークに出力させ、出力された前記符号に対応する前記振動情報を生成する演算手段を含む情報伝達システム。 Arranged directly above the distal and proximal phalanxes of the thumb and the distal, middle, and proximal phalanxes of the index finger, middle finger, ring finger, and little finger, respectively, on the dorsal side of the fingers of at least one hand of the user. an information transmission device for selectively vibrating the plurality of vibrators according to vibration information;
A transmission device for transmitting either the vibration information or the transmission information to be transmitted to the user to the information transmission device,
The transmission device when the transmission device transmits the vibration information, and the information transmission device when the transmission device transmits the transmission information sets the transmission information and a code indicating the transmission information as a data set. By inputting the transmission information to the first trained neural network that has been trained by the teacher data, the code corresponding to the transmission information is output to the first trained neural network, and the output code an information transmission system including computing means for generating said vibration information corresponding to .

前記伝達情報は、音声情報、点字や筆跡を含む文字情報、画像情報、対象物を示す三次元空間情報、位置情報、誘導情報のうち少なくとも一つに基づいて生成された、請求項１、２、４のいずれか一項に記載の情報伝達システム。 2. The transmission information is generated based on at least one of voice information, character information including braille and handwriting, image information, three-dimensional space information indicating an object, position information, and guidance information. 5. The information transmission system according to any one of 4 .

前記振動情報は、前記振動子の発振位置及び振動の少なくとも一方に関する変調を規定する情報である、請求項１、２、４のいずれか一項に記載の情報伝達システム。 5. The information transmission system according to any one of claims 1, 2, and 4, wherein said vibration information is information defining modulation relating to at least one of an oscillation position and vibration of said vibrator.

前記振動情報は、前記振動子が発振する位置、時間、強度の組み合わせや、前記組み合わせに基づいて並列や重ね合わせにより変調させた振動刺激を規定する情報である、請求項６に記載の情報伝達システム。 7. Information transmission according to claim 6 , wherein said vibration information is information defining a combination of the position, time and intensity at which said vibrator oscillates, and a vibration stimulus modulated by parallel or superposition based on said combination. system.

振動情報に応じて、ユーザに装着された複数の振動子を選択的に振動させる情報伝達装置と、前記振動情報若しくは前記ユーザへ伝える伝達情報のいずれか一方を前記情報伝達装置へ送信する送信装置を備え、前記送信装置が前記振動情報を送信する場合には前記送信装置、前記送信装置が前記伝達情報を送信する場合には前記情報伝達装置が、演算手段を含む情報伝達システムを制御する情報伝達プログラムであって、
前記演算手段に対し、前記伝達情報と、前記伝達情報を示す符号をデータセットとする教師データにより学習された第１の学習済ニューラルネットワークへ伝達情報を入力させ、前記第１の学習済ニューラルネットワークに対して前記伝達情報に応じた前記符号を出力させる第１のステップと、
前記演算手段に対し、前記符号と前記符号に応じた冗長符号をデータセットとする教師データにより学習された第２の学習済ニューラルネットワークへ前記第１のステップで出力された前記符号を入力させ、前記第２の学習済ニューラルネットワークに対して前記第１のステップで出力された前記符号に応じた冗長符号を出力させる第２のステップと、
前記演算手段に対し、前記第２のステップで出力された前記冗長符号に対応する前記振動情報を生成させる第３のステップを有する情報伝達プログラム。 An information transmission device that selectively vibrates a plurality of vibrators worn by a user according to vibration information, and a transmission device that transmits either the vibration information or transmission information to be transmitted to the user to the information transmission device. wherein the transmitting device when the transmitting device transmits the vibration information, and the information transmitting device when the transmitting device transmits the transmission information controls an information transmission system including computing means a transmission program,
causing the calculating means to input the transmission information to a first trained neural network trained with teacher data having a data set of the transmission information and a code indicating the transmission information, and the transmission information being input to the first trained neural network; a first step of outputting the code corresponding to the transmission information to
causing the computing means to input the code output in the first step to a second trained neural network trained with teacher data having a data set of the code and a redundant code corresponding to the code; a second step of causing the second trained neural network to output a redundant code corresponding to the code output in the first step;
An information transmission program comprising a third step of causing the computing means to generate the vibration information corresponding to the redundant code output in the second step.

振動情報に応じて、ユーザに装着された複数の振動子を選択的に振動させる情報伝達装置と、前記振動情報若しくは、言語情報により構成された前記ユーザへ伝える伝達情報のいずれか一方を前記情報伝達装置へ送信する送信装置を備え、前記送信装置が前記振動情報を送信する場合には前記送信装置、前記送信装置が前記伝達情報を送信する場合には前記情報伝達装置が、演算手段を含む情報伝達システムを制御する情報伝達プログラムであって、前記演算手段に対し、
前記言語情報から構成言語を抽出して知覚容易順にファイリングさせる第１のステップと、
前記第１のステップにおけるファイリングにより最も高くランクされている前記構成言語を、前記伝達情報を示す符号として採用させる第２のステップと、
前記伝達情報と、前記伝達情報を示す符号をデータセットとする教師データにより学習された第１の学習済ニューラルネットワークへ伝達情報を入力させ、前記第１の学習済ニューラルネットワークに対して前記伝達情報に応じた前記符号を出力させる第３のステップと、
前記第３のステップで出力された前記符号に対応する前記振動情報を生成させる第４のステップを有する情報伝達プログラム。 an information transmission device that selectively vibrates a plurality of vibrators worn by a user according to vibration information; A transmission device for transmitting to a transmission device is provided, and when the transmission device transmits the vibration information, the transmission device, and when the transmission device transmits the transmission information, the information transmission device includes a calculation means. An information transmission program for controlling an information transmission system, comprising:
a first step of extracting constituent languages from the linguistic information and filing them in order of ease of perception;
a second step of adopting the constituent language ranked highest by filing in the first step as a code indicating the transmitted information;
inputting the transmission information to a first trained neural network trained with teacher data having a data set of the transmission information and a code indicating the transmission information, and sending the transmission information to the first trained neural network; a third step of outputting the code according to
An information transmission program having a fourth step of generating the vibration information corresponding to the code output in the third step .

前記演算手段に対し、さらに、前記構成言語と前記符号をデータセットとする教師データにより学習された第２の学習済ニューラルネットワークへ構成言語を入力させることにより前記第２の学習済ニューラルネットワークから出力された符号を追加的にファイリングさせる、請求項９に記載の情報伝達プログラム。 The second trained neural network is further input to the second trained neural network by causing the computing means to further input the constituent language to the second trained neural network trained by teacher data having the constituent language and the code as a data set. 10. The information transmission program according to claim 9 , wherein the code output from is additionally filed.

ユーザの少なくとも片手における指の背側で、親指を構成する末節骨及び基節骨と、示指、中指、環指、及び小指を構成する末節骨と中節骨及び基節骨の直上にそれぞれ配置された複数の振動子を、振動情報に応じて選択的に振動させる情報伝達装置と、前記振動情報若しくは前記ユーザへ伝える伝達情報のいずれか一方を前記情報伝達装置へ送信する送信装置を備え、前記送信装置が前記振動情報を送信する場合には前記送信装置、前記送信装置が前記伝達情報を送信する場合には前記情報伝達装置が、演算手段を含む情報伝達システムを制御する情報伝達プログラムであって、
前記演算手段に対し、前記伝達情報と、前記伝達情報を示す符号をデータセットとする教師データにより学習された第１の学習済ニューラルネットワークへ伝達情報を入力させ、前記第１の学習済ニューラルネットワークに対して前記伝達情報に応じた前記符号を出力させる第１のステップと、
前記演算手段に対し、前記第１のステップで出力された前記符号に対応する前記振動情報を生成させる第２のステップを有する情報伝達プログラム。 Arranged directly above the distal and proximal phalanxes of the thumb and the distal, middle, and proximal phalanxes of the index finger, middle finger, ring finger, and little finger, respectively, on the dorsal side of the fingers of at least one hand of the user. an information transmission device for selectively vibrating a plurality of vibrators that have been vibrated according to vibration information; and a transmission device for transmitting either the vibration information or transmission information to be transmitted to the user to the information transmission device. , an information transmission program for controlling an information transmission system including a computing means by the transmission device when the transmission device transmits the vibration information, and by the information transmission device when the transmission device transmits the transmission information and
causing the calculating means to input the transmission information to a first trained neural network trained with teacher data having a data set of the transmission information and a code indicating the transmission information, and the transmission information being input to the first trained neural network; a first step of outputting the code corresponding to the transmission information to
A program for transmitting information, comprising a second step of causing the computing means to generate the vibration information corresponding to the code output in the first step.

前記伝達情報は、音声情報、点字や筆跡を含む文字情報、画像情報、対象物を示す三次元空間情報、位置情報、誘導情報のうち少なくとも一つに基づいて生成された、請求項８、９、１１のいずれか一項に記載の情報伝達プログラム。 10. The transmission information is generated based on at least one of voice information, character information including braille and handwriting, image information, three-dimensional space information indicating an object, position information, and guidance information. 12. The information transmission program according to any one of 11 .

前記振動情報は、前記振動子の発振位置及び振動の少なくとも一方に関する変調を規定する情報である、請求項８、９、１１のいずれか一項に記載の情報伝達プログラム。 12. The information transfer program according to any one of claims 8, 9 and 11, wherein said vibration information is information defining modulation relating to at least one of an oscillation position and vibration of said vibrator.

前記振動情報は、前記振動子が発振する位置、時間、強度の組み合わせや、前記組み合わせに基づいて並列や重ね合わせにより変調させた振動刺激を規定する情報である、請求項１３に記載の情報伝達プログラム。 14. Information transmission according to claim 13 , wherein the vibration information is information defining a combination of the position, time, and intensity at which the vibrator oscillates, and a vibration stimulus modulated by parallel or superposition based on the combination. program.