JP2017151227A - Environmental sound learning support device, environmental sound learning support method, and program - Google Patents
Environmental sound learning support device, environmental sound learning support method, and program Download PDFInfo
- Publication number
- JP2017151227A JP2017151227A JP2016032430A JP2016032430A JP2017151227A JP 2017151227 A JP2017151227 A JP 2017151227A JP 2016032430 A JP2016032430 A JP 2016032430A JP 2016032430 A JP2016032430 A JP 2016032430A JP 2017151227 A JP2017151227 A JP 2017151227A
- Authority
- JP
- Japan
- Prior art keywords
- sound
- environmental sound
- environmental
- type information
- output
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Electrically Operated Instructional Devices (AREA)
Abstract
Description
本発明は、環境音の学習支援を行う環境音学習支援装置、環境音学習支援方法及びプログラムに関する。 The present invention relates to an environmental sound learning support apparatus, an environmental sound learning support method, and a program that support environmental sound learning.
健常者は日常生活において、様々な環境音を聴取し、それに対する行動を起こすことが多い。一方、聴覚障害者は、環境音を聴取する経験が十分にないことから、適切な行動をすることができない場合がある。このため、聴覚障害児童の音に関する訓練が行われている。 Healthy people often listen to various environmental sounds and take actions in response to them. On the other hand, hearing-impaired persons may not be able to take appropriate actions because they do not have sufficient experience of hearing environmental sounds. For this reason, training on the sound of hearing-impaired children is being conducted.
従来の聴覚障害児童の音に関する訓練は、音声の理解が中心となっており、環境音の理解を目的とする訓練は、聾学校などの教員に指導方法が任されている。例えば、予め録音された環境音を再生し、その音を児童が聞いて音当てをするといった指導が行われてきた。 Conventional training on sound for hearing-impaired children is centered on understanding speech, and training for the purpose of understanding environmental sound is entrusted to teachers such as certain schools. For example, an instruction has been given in which an environmental sound recorded in advance is reproduced, and the child listens to the sound and applies a sound.
一方、聴覚障害者のための環境音に関するアプリケーションとして、音の情報を視覚、触覚で認識可能な情報に変換して出力するものが多く開発されている（例えば、特許文献１、２、非特許文献１）。 On the other hand, many applications relating to environmental sounds for hearing impaired persons have been developed that convert sound information into information that can be recognized visually or tactilely (for example, Patent Documents 1 and 2, Non-Patent Documents). Reference 1).
特許文献１に記載の画像処理装置は、環境音をテキスト化して、ユーザに視覚的に提示するエフェクト画像を生成し、コンテンツ画像上にエフェクト画像をオーバーレイする。これにより、効果的にユーザに対して環境音を視覚的に提示できると説明している。 The image processing apparatus described in Patent Literature 1 converts environmental sound into text, generates an effect image visually presented to the user, and overlays the effect image on the content image. This explains that the environmental sound can be effectively presented to the user visually.
特許文献２に記載のシステムは、マイクロフォンから音声に関連したオーディオ信号を受信し、オーディオ信号の特徴を判断し、特徴の少なくとも一部に基づいたアクチュエータ信号を生成し、アクチュエータに触覚効果を出力させる。これにより、音声の情報を触覚により取得することができると説明している。 The system described in Patent Document 2 receives an audio signal related to sound from a microphone, determines a feature of the audio signal, generates an actuator signal based on at least a part of the feature, and causes the actuator to output a haptic effect. . Thus, it is described that the voice information can be acquired by tactile sense.
また、非特許文献１に記載の事前登録型生活音識別システムは、玄関のチャイムや火災報知機などの生活音を瞬時に識別して、スマートフォンの画面の文字やランプ点滅、振動によって知らせることができるスマートフォン用のアプリケーションである。処理・分析技術の工夫により、例えば、雑音がある場所でも知りたい音を検出し、また、利用者が登録した多数の生活音の中から、より重要性・緊急性・危険性のあるものを優先的に識別することも可能であると説明している。 In addition, the pre-registration type living sound identification system described in Non-Patent Document 1 can instantly identify living sounds such as entrance chimes and fire alarms, and notify them by characters on the smartphone screen, blinking lamps, and vibration. It is a smartphone application that can. For example, we can detect sounds that we want to know even in noisy places by processing / analyzing technologies, and select those that are more important, urgent, or dangerous from the many daily sounds registered by users. It is explained that it is possible to identify with priority.
聴覚障害者は、環境音を聴取し、環境音が発生する状況を正しく理解し、それに対する適切な行動ができるようになることが望ましい。しかし、従来の技術は音の情報を視覚又は触覚で提示するに過ぎず、環境音が発せられた状況の理解及びその状況に対する行動に結びつく学習効果は得られなかった。 It is desirable that a hearing-impaired person listens to environmental sounds, correctly understands the situation in which environmental sounds are generated, and can take appropriate actions. However, the conventional technology merely presents sound information visually or tactilely, and a learning effect related to understanding of the situation where the environmental sound is emitted and the action for the situation cannot be obtained.
本発明は、上記実情に鑑みてなされたものであり、環境音が発生する状況を理解し、その状況に対する行動を学習することのできる環境音学習支援装置等を提供することを目的とする。 The present invention has been made in view of the above circumstances, and an object of the present invention is to provide an environmental sound learning support device that can understand a situation in which an environmental sound is generated and learn an action for the situation.
上記目的を達成するため、本発明の第１の観点に係る環境音学習支援装置は、
複数の種類の環境音のデータと、各々の前記環境音が発生する状況又は当該状況に対する行動を示す複数の環境音関連情報と、を互いに対応づけて記憶する記憶部と、
前記環境音のデータに基づいて前記環境音を出力する音出力部と、
表示部と、
前記音出力部が任意の前記環境音を出力した後に、出力した当該環境音のデータと対応づけられた複数の前記環境音関連情報を前記表示部に表示させ、ユーザが選択した前記環境音関連情報が予め定めた正答であるか否かを判定し、判定結果を前記表示部に表示させる制御を行う制御部と、
を備えることを特徴とする。
In order to achieve the above object, an environmental sound learning support device according to the first aspect of the present invention provides:
A storage unit that stores a plurality of types of environmental sound data and a plurality of environmental sound related information indicating a situation in which each of the environmental sounds is generated or an action for the situation, in association with each other;
A sound output unit that outputs the environmental sound based on the environmental sound data;
A display unit;
After the sound output unit outputs an arbitrary environmental sound, the environmental sound related information selected by the user is displayed on the display unit by displaying a plurality of the environmental sound related information associated with the output environmental sound data. A control unit that determines whether or not the information is a predetermined correct answer, and performs control to display the determination result on the display unit;
It is characterized by providing.
前記記憶部は、前記環境音の種類を示す音種類情報を、前記環境音のデータと対応づけて記憶し、
前記制御部は、前記音出力部が任意の前記環境音を出力した後に、出力した当該環境音のデータと対応づけられた前記音種類情報を含む複数の音種類情報を前記表示部に表示させ、ユーザが選択した前記音種類情報が当該環境音に対応づけられた前記音種類情報であるか否かを判定し、判定結果を表示部に表示させるようにしてもよい。
The storage unit stores sound type information indicating the type of the environmental sound in association with the environmental sound data,
The control unit causes the display unit to display a plurality of sound type information including the sound type information associated with the output data of the environmental sound after the sound output unit outputs the arbitrary environmental sound. It may be determined whether the sound type information selected by the user is the sound type information associated with the environmental sound, and the determination result is displayed on the display unit.
前記記憶部に記憶する複数の種類の前記環境音のデータは、複数のグループに分類されて記憶されており、
前記音出力部は、ユーザが１の前記グループを選択している場合には、選択している前記グループに属する前記環境音からランダムに選択した前記環境音を出力してもよい。
A plurality of types of environmental sound data stored in the storage unit are classified and stored in a plurality of groups,
The sound output unit may output the environmental sound randomly selected from the environmental sounds belonging to the selected group when the user has selected one of the groups.
前記記憶部に記憶する複数の種類の前記環境音のデータ及び前記音種類情報は、複数のグループに分類されて記憶されており、
前記制御部は、ユーザが１の前記グループを選択している場合には、選択している前記グループに属する任意の前記環境音を前記音出力部が出力した後に、出力した当該環境音のデータと対応づけられた前記音種類情報を含む、選択している前記グループに属する複数の前記音種類情報を前記表示部に表示させ、ユーザが選択した前記音種類情報が当該環境音に対応づけられた前記音種類情報であるか否かを判定し、判定結果を表示部に表示させるようにしてもよい。
A plurality of types of environmental sound data and the sound type information stored in the storage unit are classified and stored in a plurality of groups,
When the user has selected one of the groups, the control unit outputs the environmental sound data that is output after the sound output unit outputs any of the environmental sounds belonging to the selected group. A plurality of the sound type information belonging to the selected group including the sound type information associated with the sound group information is displayed on the display unit, and the sound type information selected by the user is associated with the environmental sound. It is also possible to determine whether the sound type information is present and display the determination result on the display unit.
前記制御部は、ユーザが１の前記グループを選択している場合に、選択している前記グループに属する全種類の前記環境音のデータに対応づけられた前記音種類情報を表示させ、ユーザが表示されている前記音種類情報から１の前記音種類情報を選択した場合に、選択した前記音種類情報に対応づけられた前記環境音のデータに基づいて前記音出力部に前記環境音を出力させるようにしてもよい。 When the user has selected one group, the control unit displays the sound type information associated with all types of environmental sound data belonging to the selected group. When one sound type information is selected from the displayed sound type information, the environmental sound is output to the sound output unit based on the environmental sound data associated with the selected sound type information. You may make it make it.
また、本発明の第２の観点に係る環境音学習支援方法は、
複数の種類の環境音のデータと、各々の前記環境音が発生する状況又は当該状況に対する行動を示す複数の環境音関連情報と、を互いに対応づけて記憶する記憶ステップと、
前記環境音のデータに基づいて前記環境音を出力する音出力ステップと、
前記音出力ステップで任意の前記環境音を出力した後に、出力した当該環境音のデータと対応づけられた複数の前記環境音関連情報を表示部に表示させ、ユーザが選択した前記環境音関連情報が予め定めた正答であるか否かを判定した判定結果を表示する表示ステップと、
を有することを特徴とする。
Moreover, the environmental sound learning support method according to the second aspect of the present invention includes:
A storage step of storing a plurality of types of environmental sound data and a plurality of environmental sound related information indicating a situation in which each of the environmental sounds is generated or an action for the situation in association with each other,
A sound output step for outputting the environmental sound based on the environmental sound data;
After outputting the arbitrary environmental sound in the sound output step, the environmental sound related information selected by the user is displayed on the display unit by displaying a plurality of the environmental sound related information associated with the output environmental sound data. A display step for displaying a determination result for determining whether or not is a predetermined correct answer;
It is characterized by having.
また、本発明の第３の観点に係るプログラムは、
コンピュータを、
複数の種類の環境音のデータと、各々の前記環境音が発生する状況又は当該状況に対する行動を示す複数の環境音関連情報と、を互いに対応づけて記憶する記憶部、
前記環境音のデータに基づいて前記環境音を出力する音出力部、
表示部、
前記音出力部が任意の前記環境音を出力した後に、出力した当該環境音のデータと対応づけられた複数の前記環境音関連情報を前記表示部に表示させ、ユーザが選択した前記環境音関連情報が予め定めた正答であるか否かを判定し、判定結果を前記表示部に表示させる制御を行う制御部、
として機能させることを特徴とする。
A program according to the third aspect of the present invention is:
Computer
A storage unit that stores a plurality of types of environmental sound data and a plurality of environmental sound related information indicating a situation in which each of the environmental sounds is generated or an action for the situation, in association with each other,
A sound output unit that outputs the environmental sound based on the environmental sound data;
Display,
After the sound output unit outputs an arbitrary environmental sound, the environmental sound related information selected by the user is displayed on the display unit by displaying a plurality of the environmental sound related information associated with the output environmental sound data. A controller that performs control to determine whether the information is a predetermined correct answer and display the determination result on the display unit;
It is made to function as.
本発明によれば、環境音が発生する状況を理解し、その状況に対する行動を学習することが可能となる。 According to the present invention, it is possible to understand a situation where an environmental sound is generated and learn an action for the situation.
（実施形態）
本発明の実施形態について図面を参照して詳細に説明する。
(Embodiment)
Embodiments of the present invention will be described in detail with reference to the drawings.
環境音学習支援装置１００は、環境音学習支援処理のプログラムがインストールされたパソコン、スマートフォン、タブレット型端末等の任意の情報処理端末から構成される。 The environmental sound learning support apparatus 100 includes an arbitrary information processing terminal such as a personal computer, a smartphone, or a tablet terminal on which an environmental sound learning support processing program is installed.
本実施形態に係る環境音学習支援装置１００は、環境音を出力し、その音の種類及び環境音が発生する状況又はその状況に対する行動を学習するための情報処理装置である。図１に示すように、環境音学習支援装置１００は、制御部１１０と、記憶部１２０と、音出力部１３０と、表示部１４０と、操作部１５０と、バス１６０と、を備える。 The environmental sound learning support apparatus 100 according to the present embodiment is an information processing apparatus that outputs an environmental sound and learns the type of the sound and the situation in which the environmental sound is generated or the action for the situation. As shown in FIG. 1, the environmental sound learning support apparatus 100 includes a control unit 110, a storage unit 120, a sound output unit 130, a display unit 140, an operation unit 150, and a bus 160.
制御部１１０は、ＲＯＭ（Read Only Memory）と、ＲＡＭ（Random Access Memory）と、ＣＰＵ（Central Processing Unit）と、を備える。ＲＯＭは、各種初期設定、ハードウェアの検査、プログラムのロード等を行うための初期プログラム等を記憶する。ＲＡＭは、ＣＰＵが実行する各種ソフトウェアプログラム、これらのソフトウェアプログラムの実行に必要なデータ等を一時的に記憶するワークエリアとして機能する。ＣＰＵは、様々な処理及び演算を実行する中央演算処理部である。 The control unit 110 includes a ROM (Read Only Memory), a RAM (Random Access Memory), and a CPU (Central Processing Unit). The ROM stores an initial program for performing various initial settings, hardware inspection, program loading, and the like. The RAM functions as a work area for temporarily storing various software programs executed by the CPU and data necessary for executing these software programs. The CPU is a central processing unit that executes various processes and operations.
記憶部１２０は、例えばハードディスクドライブ又はフラッシュメモリ等のような不揮発性メモリを備える。記憶部１２０は、図２に示すように、環境音データ１２１、環境音の音種類情報１２２、環境音が発生する状況又はその状況に対する行動を示す環境音関連情報１２３を記憶する。また、本実施形態に係る環境音学習支援処理プログラム等の各種プログラムを記憶する。 The storage unit 120 includes a nonvolatile memory such as a hard disk drive or a flash memory. As shown in FIG. 2, the storage unit 120 stores environmental sound data 121, environmental sound type information 122, and environmental sound related information 123 that indicates a situation in which the environmental sound is generated or an action for the situation. In addition, various programs such as the environmental sound learning support processing program according to the present embodiment are stored.
記憶部１２０に記憶する環境音データ１２１、音種類情報１２２、環境音関連情報１２３は、互いに対応付けて記憶されている。本実施形態では、図３の表に示すように、これらのデータを複数のグループに分類して記憶している。 The environmental sound data 121, the sound type information 122, and the environmental sound related information 123 stored in the storage unit 120 are stored in association with each other. In this embodiment, as shown in the table of FIG. 3, these data are classified into a plurality of groups and stored.
例えば、図３に示すように「おうち」グループに属する環境音データ１２１「Data1.xxx」の音種類情報１２２は「インターホン」である。そして、これらに対応する環境音関連情報１２３は３つあり、正答の環境音関連情報１２３である「おうちの人に知らせる」「知らない人だからいないふりをする」の２つの情報と、誤答の環境音関連情報１２３である「げんかんのドアを開ける」の１つの情報からなる。本実施形態は、他に「がっこう」と「おそと」のグループに属する環境音データ１２１を記憶している。 For example, as shown in FIG. 3, the sound type information 122 of the environmental sound data 121 “Data1.xxx” belonging to the “home” group is “interphone”. And there are three environmental sound related information 123 corresponding to these, two information of the correct environmental sound related information 123 of “notify the person at home” and “pretend not to be an unknown person” and wrong answer 1 of the environmental sound related information 123 of “open the door of the epilepsy”. In the present embodiment, environmental sound data 121 belonging to the groups “Gakukou” and “Osoto” is stored.
ここで、環境音関連情報１２３は、環境音に関連する任意の情報であり、例えば、何が音を発生させたか、何故音が生じたのか、音が生じることで将来何が予想されるかといった、環境音が発生する状況を示した情報を含む。図３の例では、「家の人が掃除中」「救急車が通過する」等が該当する。 Here, the environmental sound related information 123 is arbitrary information related to the environmental sound. For example, what caused the sound, why the sound occurred, and what is expected in the future due to the sound. Information indicating the situation in which environmental sound is generated. In the example of FIG. 3, “a house person is cleaning”, “an ambulance passes”, and the like are applicable.
また、環境音関連情報１２３は、音を認識した時にどのような行動を取ることが期待されているのかといった、環境音が発生する状況に対する行動を示した情報も含む。図３の例では、「おうちの人に知らせる」「着席する」等が該当する。 In addition, the environmental sound related information 123 includes information indicating an action for a situation in which an environmental sound is generated, such as what kind of action is expected to be taken when a sound is recognized. In the example of FIG. 3, “notify the person at home”, “sit down”, and the like are applicable.
環境音関連情報１２３は、各環境音データ１２１及び各音種類情報１２２に対応しており、正答の情報と誤答の情報を少なくとも1ずつ含む２以上の情報を有する。 The environmental sound related information 123 corresponds to each environmental sound data 121 and each sound type information 122, and has two or more pieces of information including at least one correct answer information and one incorrect answer information.
音出力部１３０は、ＤＡ（Digital-Analog）コンバータとスピーカを備えており、記憶部１２０に記憶されている環境音データ１２１をＤＡコンバータでアナログの音信号に変換して増幅し、スピーカから音を出力する。 The sound output unit 130 includes a DA (Digital-Analog) converter and a speaker, converts the environmental sound data 121 stored in the storage unit 120 into an analog sound signal by the DA converter, amplifies the sound, and outputs the sound from the speaker. Is output.
表示部１４０は、例えば、液晶ディスプレイ又は有機ＥＬ（Electro Luminescence）ディスプレイ等のような表示デバイスを備える。表示部１４０は、制御部１１０からホーム画面等の表示情報を取得して表示デバイスの画面に出力する。 The display unit 140 includes a display device such as a liquid crystal display or an organic EL (Electro Luminescence) display. The display unit 140 acquires display information such as a home screen from the control unit 110 and outputs the display information to the display device screen.
操作部１５０は、画面上の位置を指定するポインティングデバイスからなり、操作部１５０に対するユーザの操作を取得し、当該操作に基づく操作信号を制御部１１０に出力する。操作部１５０をタッチパネルで構成し、タッチ操作により、表示部１４０の画面上の位置を指定するようにしてもよい。本実施形態では、表示部１４０に表示された複数の選択肢から１の選択肢を選択するユーザの操作等を取得する。 The operation unit 150 includes a pointing device that specifies a position on the screen, acquires a user operation on the operation unit 150, and outputs an operation signal based on the operation to the control unit 110. The operation unit 150 may be configured by a touch panel, and the position on the screen of the display unit 140 may be designated by a touch operation. In the present embodiment, a user operation or the like for selecting one option from a plurality of options displayed on the display unit 140 is acquired.
バス１６０は、制御部１１０と、記憶部１２０と、音出力部１３０と、表示部１４０と、操作部１５０と、を接続する。 The bus 160 connects the control unit 110, the storage unit 120, the sound output unit 130, the display unit 140, and the operation unit 150.
環境音学習支援装置１００の制御部１１０は、記憶部１２０に記憶している環境音学習支援処理プログラムを実行することにより、図２に示すように、音選択部１１１、音種類情報表示部１１２、解答選択肢生成部１１３、正誤判定部１１４として機能する。 The control unit 110 of the environmental sound learning support device 100 executes the environmental sound learning support processing program stored in the storage unit 120, thereby making the sound selection unit 111 and the sound type information display unit 112 as shown in FIG. , Function as an answer option generation unit 113 and a correctness determination unit 114.
音選択部１１１は、操作部１５０へのユーザの操作に応じて、複数の環境音データ１２１から１のデータを選択し、音出力部１３０に選択した環境音データ１２１を出力する。 The sound selection unit 111 selects one piece of data from the plurality of environmental sound data 121 in accordance with a user operation on the operation unit 150, and outputs the selected environmental sound data 121 to the sound output unit 130.
音種類情報表示部１１２は、操作部１５０へのユーザの操作に応じて、複数の音種類情報１２２のリスト、又は、複数の音種類情報１２２から選択した１〜３の音種類情報１２２を表示部１４０に出力する。 The sound type information display unit 112 displays a list of a plurality of sound type information 122 or 1 to 3 sound type information 122 selected from the plurality of sound type information 122 according to a user operation on the operation unit 150. Output to the unit 140.
解答選択肢生成部１１３は、音種類情報１２２や環境音関連情報１２３から予め定めた数の情報を選択し、解答の選択肢を生成して表示部１４０に表示する。 The answer option generation unit 113 selects a predetermined number of pieces of information from the sound type information 122 and the environmental sound related information 123, generates answer options, and displays them on the display unit 140.
正誤判定部１１４は、解答選択肢生成部１１３が生成した解答の選択肢に対する、操作部１５０へのユーザの操作を取得して、ユーザが選択した解答の正誤を判定し、判定結果を表示部１４０に表示する。 The correctness determination unit 114 acquires a user operation on the operation unit 150 with respect to the answer choices generated by the answer option generation unit 113, determines whether the answer selected by the user is correct, and displays the determination result on the display unit 140. indicate.
以上のように構成された環境音学習支援装置１００で実行する環境音学習支援処理について、図４、５に示すフローチャートに沿って説明する。 The environmental sound learning support process executed by the environmental sound learning support apparatus 100 configured as described above will be described with reference to the flowcharts shown in FIGS.
まず、制御部１１０は、ホーム画面を表示部１４０に表示させる（ステップＳ１０１）。ホーム画面は、図６（ａ）に示すような画面であり、環境音学習支援処理を行うアプリケーションの名称と、環境音の種類を分類したグループの名称を付した選択ボタンを表示する。本実施形態では、アプリケーションの名称「環境音学習システム」と、「おうち」「がっこう」「おそと」の３つのグループ名を付したボタンを配置している。このグループ名は、図３に示すように、環境音データ１２１、音種類情報１２２、環境音関連情報１２３と対応付けられて記憶部１２０に記憶されている。 First, the control part 110 displays a home screen on the display part 140 (step S101). The home screen is a screen as shown in FIG. 6A, and displays a selection button with the name of an application that performs environmental sound learning support processing and the name of a group that classifies the types of environmental sounds. In the present embodiment, buttons having three group names of an application name “environmental sound learning system”, “house”, “gakko”, and “soto” are arranged. As shown in FIG. 3, the group name is stored in the storage unit 120 in association with the environmental sound data 121, the sound type information 122, and the environmental sound related information 123.
次に、ホーム画面において、ユーザが選択したグループを取得する（ステップＳ１０２）。本実施形態では、「おうち」グループを選択した場合について説明する。その後、図６（ｂ）に示すようなグループ選択後のメニューであるグループメニューを表示部１４０に表示する（ステップＳ１０３）。なお、他のグループを選択した場合であっても、ステップＳ１０３以降の処理は同様である。 Next, the group selected by the user is acquired on the home screen (step S102). In the present embodiment, a case where the “house” group is selected will be described. Thereafter, a group menu, which is a menu after group selection as shown in FIG. 6B, is displayed on the display unit 140 (step S103). Even when another group is selected, the processing after step S103 is the same.
グループメニュー画面における選択ボタンは、環境音の音種類情報１２２のリストを表示させる処理を実行させる「音リストをみる」と、音の出題をする処理を実行させる「音を当てるチャレンジ！」の二つである。これらの選択ボタンは、ステップＳ１０２で取得したグループに寄らず同じであるが、どのグループを選択したかに応じて背景を変える。これにより、どのグループを選択中か容易に判別できる。なお、ステップＳ１０４以降の処理においても、背景は選択中のグループに応じた画像でもよいが、ここでは背景を省略した図面を用いて説明する。 The selection buttons on the group menu screen are “view sound list” for executing a process for displaying a list of sound type information 122 for environmental sounds, and “challenge for applying a sound!” For executing a process for giving a sound question. One. These selection buttons are the same regardless of the group acquired in step S102, but the background changes depending on which group is selected. This makes it easy to determine which group is being selected. In the processing from step S104 onward, the background may be an image corresponding to the selected group, but will be described with reference to the drawings in which the background is omitted.
ユーザが「音リストをみる」ボタンを選択する操作を操作部１５０が取得してリスト表示が選択された場合（ステップＳ１０４：リスト表示）、図７（ａ）に示すように、「おうち」グループに属する環境音のリストを表示する（ステップＳ１０５）。具体的には、音種類情報表示部１１２が、記憶部１２０に記憶されている音種類情報１２２のうち、「おうち」グループに属するものを読み出して表示部１４０に表示させる。 When the operation unit 150 acquires an operation for selecting the “view sound list” button by the user and the list display is selected (step S104: list display), as shown in FIG. A list of environmental sounds belonging to is displayed (step S105). Specifically, the sound type information display unit 112 reads out the sound type information 122 stored in the storage unit 120 and belongs to the “home” group, and displays the information on the display unit 140.
音選択部１１１は、ステップＳ１０５で表示された環境音リストから選択するユーザの操作を取得すると、選択された環境音データ１２１を記憶部１２０から読み出し、音出力部１３０に出力する（ステップＳ１０６）。音出力部１３０は、環境音データをアナログ信号に変換し、スピーカから出力する。 When the sound selection unit 111 obtains a user operation to be selected from the environmental sound list displayed in step S105, the sound selection unit 111 reads the selected environmental sound data 121 from the storage unit 120 and outputs it to the sound output unit 130 (step S106). . The sound output unit 130 converts environmental sound data into an analog signal and outputs it from a speaker.
ステップＳ１０４で、ユーザが「音を当てるチャレンジ！」ボタンを選択する操作を操作部１５０が取得して音の出題が選択された場合（ステップＳ１０４：音の出題）、音選択部１１１は、「おうち」グループに属する環境音データ１２１から１のデータをランダムに選択する（ステップＳ１０７）。そして図７（ｂ）に示すように、音を出力するための再生ボタンを表示する（ステップＳ１０８）。 In step S104, when the operation unit 150 obtains an operation for selecting the “challenge on sound!” Button by the user and the question of sound is selected (step S104: question of sound), the sound selector 111 reads “ One data is randomly selected from the environmental sound data 121 belonging to the “home” group (step S107). Then, as shown in FIG. 7B, a playback button for outputting a sound is displayed (step S108).
ユーザが図７（ｂ）の再生ボタンをクリックする操作を操作部１５０が取得すると、音選択部１１１は、選択した環境音データ１２１を音出力部１３０に出力する（ステップＳ１０９）。音出力部１３０は、環境音データ１２１をアナログ信号に変換し、スピーカから出力する。 When the operation unit 150 acquires an operation in which the user clicks the play button in FIG. 7B, the sound selection unit 111 outputs the selected environmental sound data 121 to the sound output unit 130 (step S109). The sound output unit 130 converts the environmental sound data 121 into an analog signal and outputs it from a speaker.
その後、解答選択肢生成部１１３は、音を出力した環境音データ１２１に対応付けられた音種類情報１２２とその他の１以上の音種類情報１２２を記憶部１２０から取得する。ここで、その他の１以上の音種類情報１２２は、選択されている「おうち」のグループに属する音種類情報１２２からランダムに選択したものである。そして、解答選択肢生成部１１３は、取得した音種類情報１２２を並べる順番もランダムに選択して解答選択肢を生成し、図８（ａ）に示すように、表示部１４０に表示する（ステップＳ１１０）。図８（ａ）においては、正答の「インターホン」の他、誤答の「せんたくき」「お皿を洗う音」を表示している。 Thereafter, the answer option generation unit 113 acquires the sound type information 122 associated with the environmental sound data 121 that has output the sound and one or more other sound type information 122 from the storage unit 120. Here, the other one or more sound type information 122 is randomly selected from the sound type information 122 belonging to the selected “house” group. Then, the answer option generation unit 113 generates answer options by randomly selecting the order in which the acquired sound type information 122 is arranged, and displays it on the display unit 140 as shown in FIG. 8A (step S110). . In FIG. 8A, in addition to the correct answer “interphone”, the incorrect answers “Sentoku” and “Sound of washing dishes” are displayed.
正誤判定部１１４は、表示部１４０に表示した解答選択肢に対する、ユーザの選択操作を取得し、正誤判定を行う（ステップＳ１１１）。ユーザが、ステップＳ１０８で出力した環境音データ１２１に対応付けられた音種類情報１２２を選択して、正答と判定した場合には（ステップＳ１１２：Ｙｅｓ）、正答である旨を表示して、図５のステップＳ１１３に進む。誤答と判定した場合には（ステップＳ１１２：Ｎｏ）、誤答である旨を表示して、ステップＳ１０８に戻る。 The correctness determination unit 114 acquires the user's selection operation for the answer choices displayed on the display unit 140, and performs correctness determination (step S111). If the user selects the sound type information 122 associated with the environmental sound data 121 output in step S108 and determines that the answer is correct (step S112: Yes), the fact that the answer is correct is displayed. The process proceeds to step S113 of step 5. If it is determined to be an incorrect answer (step S112: No), the fact that it is an incorrect answer is displayed, and the process returns to step S108.
ステップＳ１１３では、ステップＳ１１１の正誤判定で正答と判定された音種類情報１２２について、これに対応付けられた環境音関連情報１２３について出題をする。具体的には、解答選択肢生成部１１３が、正答と判定された音種類情報１２２に対応付けられた環境音関連情報１２３を記憶部１２０から取得する。 In step S113, the sound type information 122 determined as the correct answer in the correct / incorrect determination in step S111 is presented with respect to the environmental sound related information 123 associated therewith. Specifically, the answer option generation unit 113 acquires the environmental sound related information 123 associated with the sound type information 122 determined as the correct answer from the storage unit 120.
本実施形態では、図３の表に示すように、１の環境音データ１２１又は１の音種類情報１２２に対応付けられた環境音関連情報１２３は、正答のもの２つと、誤答のもの１つを有している。解答選択肢生成部１１３は、取得した環境音関連情報１２３を並べる順番をランダムに選択して解答選択肢を生成し、図８（ｂ）に示すように、表示部１４０に表示する（ステップＳ１１３）。図８（ｂ）においては、正答の「おうちの人に知らせる」「知らない人だからいないふりをする」と、誤答の「げんかんのドアを開ける」を表示している。 In the present embodiment, as shown in the table of FIG. 3, the environmental sound related information 123 associated with one environmental sound data 121 or one sound type information 122 is two of correct answers and one of incorrect answers. Have one. The answer option generation unit 113 generates answer options by randomly selecting the order in which the acquired environmental sound related information 123 is arranged, and displays it on the display unit 140 as shown in FIG. 8B (step S113). In FIG. 8B, the correct answers “notify the person at home”, “pretend not because you do not know” and the incorrect answer “open the door of the epilepsy” are displayed.
正誤判定部１１４は、表示部１４０に表示した解答選択肢に対する、ユーザの選択操作を取得し、正誤判定を行う（ステップＳ１１４）。具体的には、ステップＳ１１１で正答と判定された音種類情報１２２に対応付けられた正答の環境音関連情報１２３をユーザが選択して、正誤判定を行う。そして、正答と判定した場合には（ステップＳ１１５：Ｙｅｓ）、正答である旨を表示し、図９（ａ）に示すように正答の環境音関連情報１２３の詳細情報を表示する（ステップＳ１１６）。ここで、表示されている環境音関連情報１２３に対応付けられた環境音を再度聞くための再生ボタンを表示してもよい。 The correctness determination unit 114 acquires a user's selection operation for the answer option displayed on the display unit 140, and performs correctness determination (step S114). Specifically, the user selects the correct environmental sound related information 123 associated with the sound type information 122 determined to be correct in step S111, and performs correct / incorrect determination. If it is determined that the answer is correct (step S115: Yes), the fact that the answer is correct is displayed, and the detailed information of the environmental sound related information 123 of the correct answer is displayed as shown in FIG. 9A (step S116). . Here, a playback button for listening again to the environmental sound associated with the displayed environmental sound related information 123 may be displayed.
ステップＳ１１４の正誤判定で、誤答と判定した場合には（ステップＳ１１５：Ｎｏ）、誤答である旨を表示してステップＳ１１３に戻る。ステップＳ１１６で詳細情報を表示した後は、図９（ｂ）に示すように、次の処理を選択する画面を表示する（ステップＳ１１７）。 If it is determined in step S114 that the answer is incorrect (step S115: No), the fact that the answer is incorrect is displayed and the process returns to step S113. After the detailed information is displayed in step S116, a screen for selecting the next process is displayed as shown in FIG. 9B (step S117).
ユーザが「おうちのリストをみる」を選択する操作をして音リストを表示することが選択された場合には（ステップＳ１１８：Ｙｅｓ）、ステップＳ１０５に戻る。ユーザが「おうちのメニューをみる」を選択する操作をしてグループメニューを表示することが選択された場合には（ステップＳ１１９：Ｙｅｓ）、ステップＳ１０３に戻る。ユーザが「ホーム画面」を選択する操作をした場合には（ステップＳ１２０：Ｙｅｓ）ステップＳ１０１に戻る。ユーザが終了を選択する操作をした場合には（ステップＳ１２１：Ｙｅｓ）処理を終了し、ユーザの操作が終了でない場合は（ステップＳ１２１：Ｎｏ）、ステップＳ１１８に戻り、次のユーザの操作を待つ。 When the user selects “view my home list” and displays the sound list (step S118: Yes), the process returns to step S105. When the user selects to “view home menu” and displays the group menu (step S119: Yes), the process returns to step S103. When the user performs an operation of selecting the “home screen” (step S120: Yes), the process returns to step S101. If the user has performed an operation for selecting termination (step S121: Yes), the process is terminated. If the user operation is not terminated (step S121: No), the process returns to step S118 and waits for the next user operation. .
以上説明したように、本実施形態においては、予め記憶部１２０に環境音データ１２１と音種類情報１２２と環境音関連情報１２３とを互いに対応づけて記憶しておき、ユーザが音リストから１の音種類情報１２２を選択した場合には、当該音種類情報１２２と対応づけられた環境音データ１２１を出力して音を出力する。その後、出力した環境音データ１２１に対応づけられた複数の環境音関連情報１２３を表示部１４０に表示させ、それに対するユーザの選択操作を取得し、ユーザが選択した環境音関連情報１２３が正答であるか否かを判定し、判定結果を出力することとした。これにより、ユーザは、環境音とその環境音が発生する状況とそれに対する行動を容易に学習することできる。 As described above, in the present embodiment, the environmental sound data 121, the sound type information 122, and the environmental sound related information 123 are stored in the storage unit 120 in advance in association with each other. When the sound type information 122 is selected, the environmental sound data 121 associated with the sound type information 122 is output and a sound is output. Thereafter, a plurality of environmental sound related information 123 associated with the output environmental sound data 121 is displayed on the display unit 140, a user's selection operation is acquired for the information, and the environmental sound related information 123 selected by the user is a correct answer. It was determined whether or not there was, and the determination result was output. Thereby, the user can easily learn the environmental sound, the situation in which the environmental sound is generated, and the action for the situation.
このように本発明は、複数の種類の環境音のデータと、環境音が発生する状況又はそれに対する行動を示す環境音関連情報と、を互いに対応づけて記憶しておき、環境音のデータに基づいて音出力部が任意の環境音を出力した後に、当該環境音のデータと対応づけられた複数の環境音関連情報を表示部に表示させ、ユーザが操作して選択した環境音関連情報が正答の環境音関連情報であるか否かを判定し、判定結果を表示部に表示させることとした。これにより、環境音が発生する状況を理解し、それに対する行動を学習することができる。 As described above, the present invention stores a plurality of types of environmental sound data and environmental sound related information indicating a situation in which the environmental sound is generated or an action for the environmental sound in association with each other. After the sound output unit outputs any environmental sound based on the environmental sound related information, the environmental sound related information selected by the user is displayed by displaying a plurality of environmental sound related information associated with the environmental sound data on the display unit. It is determined whether or not the environmental sound related information is correct, and the determination result is displayed on the display unit. As a result, it is possible to understand the situation in which the environmental sound is generated and to learn the action for it.
なお、本発明は、上記実施形態に限定されず、本発明の要旨を逸脱しない範囲での種々の変更は勿論可能である。 In addition, this invention is not limited to the said embodiment, Of course, the various change in the range which does not deviate from the summary of this invention is possible.
例えば、実施形態において、環境音を音出力部１３０から出力した後に、音種類情報１２２の解答選択肢を生成して出題し、正答であった場合に環境音関連情報１２３の解答選択肢を生成して出題するとしたが、環境音を音出力部１３０から出力した後に、音種類情報１２２の出題なしに、環境音関連情報１２３の解答選択肢を生成して出題してもよい。 For example, in the embodiment, after the environmental sound is output from the sound output unit 130, the answer option of the sound type information 122 is generated and the question is given. If the answer is a correct answer, the answer option of the environmental sound related information 123 is generated. Although the question is given, after answering the environmental sound from the sound output unit 130, the answer choices of the environmental sound related information 123 may be generated and given without the question of the sound type information 122.
また、環境音学習支援装置１００は、予め記憶部１２０に記憶した環境音データ１２１、音種類情報１２２、環境音関連情報１２３に基づいて環境音の出力や解答選択肢の生成を行うとしたが、ユーザが環境音データ１２１、音種類情報１２２、環境音関連情報１２３を記憶部１２０に追加する機能を更に有してもよい。 In addition, the environmental sound learning support apparatus 100 outputs the environmental sound and generates answer options based on the environmental sound data 121, the sound type information 122, and the environmental sound related information 123 stored in advance in the storage unit 120. The user may further have a function of adding the environmental sound data 121, the sound type information 122, and the environmental sound related information 123 to the storage unit 120.
また、制御部１１０が実行した処理のプログラムを、既存のコンピュータ等の情報端末で実行させることにより、当該情報端末を本発明に係る環境音学習支援装置１００として機能させることも可能である。 In addition, by executing a program of processing executed by the control unit 110 on an existing information terminal such as a computer, the information terminal can also function as the environmental sound learning support device 100 according to the present invention.
このようなプログラムの配布方法は任意であり、例えば、ＣＤ−ＲＯＭ（Compact Disc Read-Only Memory）、ＤＶＤ（Digital Versatile Disc）、ＭＯ（Magneto Optical Disc）、メモリカード等のコンピュータ読み取り可能な記録媒体に格納して配布してもよいし、インターネット等の通信ネットワークを介して配布してもよい。 Such a program distribution method is arbitrary, for example, a computer-readable recording medium such as a CD-ROM (Compact Disc Read-Only Memory), a DVD (Digital Versatile Disc), an MO (Magneto Optical Disc), or a memory card. It may be stored and distributed in the network, or distributed via a communication network such as the Internet.
１００…環境音学習支援装置
１１０…制御部
１１１…音選択部
１１２…音種類情報表示部
１１３…解答選択肢生成部
１１４…正誤判定部
１２０…記憶部
１２１…環境音データ
１２２…音種類情報
１２３…環境音関連情報
１３０…音出力部
１４０…表示部
１５０…操作部
DESCRIPTION OF SYMBOLS 100 ... Environmental sound learning assistance apparatus 110 ... Control part 111 ... Sound selection part 112 ... Sound type information display part 113 ... Answer choice production | generation part 114 ... Correct / error determination part 120 ... Storage part 121 ... Environmental sound data 122 ... Sound type information 123 ... Environmental sound-related information 130 ... Sound output unit 140 ... Display unit 150 ... Operation unit
上記目的を達成するため、本発明の第１の観点に係る環境音学習支援装置は、
複数の種類の環境音のデータと、各々の前記環境音が発生する状況又は当該状況に対する行動を示す複数の環境音関連情報と、を互いに対応づけて記憶する記憶部と、
前記環境音のデータに基づいて前記環境音を出力する音出力部と、
表示部と、
前記音出力部が任意の前記環境音を出力した後に、出力した当該環境音のデータと対応づけられた複数の前記環境音関連情報を前記表示部に表示させ、ユーザが選択した前記環境音関連情報が予め定めた正答であるか否かを判定し、判定結果を前記表示部に表示させる制御を行う制御部と、
を備え、
前記記憶部に記憶する複数の種類の前記環境音のデータは、複数のグループに分類されて記憶されており、
ユーザが１の前記グループを選択している場合には、前記表示部は、選択中の前記グループに応じた画像を背景として表示し、前記音出力部は、選択中の前記グループに属する前記環境音からランダムに選択した前記環境音を出力することを特徴とする。
In order to achieve the above object, an environmental sound learning support device according to the first aspect of the present invention provides:
A storage unit that stores a plurality of types of environmental sound data and a plurality of environmental sound related information indicating a situation in which each of the environmental sounds is generated or an action for the situation, in association with each other;
A sound output unit that outputs the environmental sound based on the environmental sound data;
A display unit;
After the sound output unit outputs an arbitrary environmental sound, the environmental sound related information selected by the user is displayed on the display unit by displaying a plurality of the environmental sound related information associated with the output environmental sound data. A control unit that determines whether or not the information is a predetermined correct answer, and performs control to display the determination result on the display unit;
Equipped with a,
A plurality of types of environmental sound data stored in the storage unit are classified and stored in a plurality of groups,
When the user selects one of the groups, the display unit displays an image corresponding to the selected group as a background, and the sound output unit displays the environment belonging to the selected group. The environmental sound randomly selected from the sounds is output .
前記記憶部に記憶する前記音種類情報は、複数の前記グループに分類されて記憶されており、
前記制御部は、ユーザが１の前記グループを選択している場合には、選択している前記グループに属する任意の前記環境音を前記音出力部が出力した後に、出力した当該環境音のデータと対応づけられた前記音種類情報を含む、選択している前記グループに属する複数の前記音種類情報を前記表示部に表示させ、ユーザが選択した前記音種類情報が当該環境音に対応づけられた前記音種類情報であるか否かを判定し、判定結果を表示部に表示させるようにしてもよい。
Previous Kion type information you stored in the storage unit is stored are classified into a plurality of said groups,
When the user has selected one of the groups, the control unit outputs the environmental sound data that is output after the sound output unit outputs any of the environmental sounds belonging to the selected group. A plurality of the sound type information belonging to the selected group including the sound type information associated with the sound group information is displayed on the display unit, and the sound type information selected by the user is associated with the environmental sound. It is also possible to determine whether the sound type information is present and display the determination result on the display unit.
また、本発明の第２の観点に係る環境音学習支援方法は、
コンピュータが実行する環境音学習支援方法であって、
複数の種類の環境音のデータと、各々の前記環境音が発生する状況又は当該状況に対する行動を示す複数の環境音関連情報と、を互いに対応づけて記憶する記憶ステップと、
前記環境音のデータに基づいて前記環境音を出力する音出力ステップと、
前記音出力ステップで任意の前記環境音を出力した後に、出力した当該環境音のデータと対応づけられた複数の前記環境音関連情報を表示部に表示させ、ユーザが選択した前記環境音関連情報が予め定めた正答であるか否かを判定した判定結果を表示する表示ステップと、
を有し、
前記記憶ステップで記憶する複数の種類の前記環境音のデータは、複数のグループに分類されて記憶され、
ユーザが１の前記グループを選択している場合に、前記表示ステップでは、前記表示部に、選択中の前記グループに応じた画像を背景として表示させ、前記音出力ステップでは、選択中の前記グループに属する前記環境音からランダムに選択した前記環境音を出力することを特徴とする。
Moreover, the environmental sound learning support method according to the second aspect of the present invention includes:
An environmental sound learning support method executed by a computer,
A storage step of storing a plurality of types of environmental sound data and a plurality of environmental sound related information indicating a situation in which each of the environmental sounds is generated or an action for the situation in association with each other,
A sound output step for outputting the environmental sound based on the environmental sound data;
After outputting the arbitrary environmental sound in the sound output step, the environmental sound related information selected by the user is displayed on the display unit by displaying a plurality of the environmental sound related information associated with the output environmental sound data. A display step for displaying a determination result for determining whether or not is a predetermined correct answer;
I have a,
A plurality of types of environmental sound data stored in the storing step are classified into a plurality of groups and stored.
When the user has selected one of the groups, in the display step, an image corresponding to the selected group is displayed on the display unit as a background, and in the sound output step, the selected group The environmental sound selected at random from the environmental sounds belonging to is output .
また、本発明の第３の観点に係るプログラムは、
コンピュータを、
複数の種類の環境音のデータと、各々の前記環境音が発生する状況又は当該状況に対する行動を示す複数の環境音関連情報と、を互いに対応づけて記憶する記憶部、
前記環境音のデータに基づいて前記環境音を出力する音出力部、
表示部、
前記音出力部が任意の前記環境音を出力した後に、出力した当該環境音のデータと対応づけられた複数の前記環境音関連情報を前記表示部に表示させ、ユーザが選択した前記環境音関連情報が予め定めた正答であるか否かを判定し、判定結果を前記表示部に表示させる制御を行う制御部、
として機能させるためのプログラムであって、
前記記憶部に記憶する複数の種類の前記環境音のデータは、複数のグループに分類されて記憶されており、
ユーザが１の前記グループを選択している場合には、前記表示部は、選択中の前記グループに応じた画像を背景として表示し、前記音出力部は、選択中の前記グループに属する前記環境音からランダムに選択した前記環境音を出力することを特徴とする。
A program according to the third aspect of the present invention is:
Computer
A storage unit that stores a plurality of types of environmental sound data and a plurality of environmental sound related information indicating a situation in which each of the environmental sounds is generated or an action for the situation, in association with each other,
A sound output unit that outputs the environmental sound based on the environmental sound data;
Display,
After the sound output unit outputs an arbitrary environmental sound, the environmental sound related information selected by the user is displayed on the display unit by displaying a plurality of the environmental sound related information associated with the output environmental sound data. A controller that performs control to determine whether the information is a predetermined correct answer and display the determination result on the display unit;
Is a program for functioning as
A plurality of types of environmental sound data stored in the storage unit are classified and stored in a plurality of groups,
When the user selects one of the groups, the display unit displays an image corresponding to the selected group as a background, and the sound output unit displays the environment belonging to the selected group. The environmental sound randomly selected from the sounds is output .
Claims (7)
前記環境音のデータに基づいて前記環境音を出力する音出力部と、
表示部と、
前記音出力部が任意の前記環境音を出力した後に、出力した当該環境音のデータと対応づけられた複数の前記環境音関連情報を前記表示部に表示させ、ユーザが選択した前記環境音関連情報が予め定めた正答であるか否かを判定し、判定結果を前記表示部に表示させる制御を行う制御部と、
を備える環境音学習支援装置。 A storage unit that stores a plurality of types of environmental sound data and a plurality of environmental sound related information indicating a situation in which each of the environmental sounds is generated or an action for the situation, in association with each other;
A sound output unit that outputs the environmental sound based on the environmental sound data;
A display unit;
After the sound output unit outputs an arbitrary environmental sound, the environmental sound related information selected by the user is displayed on the display unit by displaying a plurality of the environmental sound related information associated with the output environmental sound data. A control unit that determines whether or not the information is a predetermined correct answer, and performs control to display the determination result on the display unit;
An environmental sound learning support device comprising:
前記制御部は、前記音出力部が任意の前記環境音を出力した後に、出力した当該環境音のデータと対応づけられた前記音種類情報を含む複数の音種類情報を前記表示部に表示させ、ユーザが選択した前記音種類情報が当該環境音に対応づけられた前記音種類情報であるか否かを判定し、判定結果を表示部に表示させる、
請求項１に記載の環境音学習支援装置。 The storage unit stores sound type information indicating the type of the environmental sound in association with the environmental sound data,
The control unit causes the display unit to display a plurality of sound type information including the sound type information associated with the output data of the environmental sound after the sound output unit outputs the arbitrary environmental sound. Determining whether the sound type information selected by the user is the sound type information associated with the environmental sound, and displaying the determination result on the display unit;
The environmental sound learning support apparatus according to claim 1.
前記音出力部は、ユーザが１の前記グループを選択している場合には、選択している前記グループに属する前記環境音からランダムに選択した前記環境音を出力する、
請求項１又は２に記載の環境音学習支援装置。 A plurality of types of environmental sound data stored in the storage unit are classified and stored in a plurality of groups,
The sound output unit outputs the environmental sound randomly selected from the environmental sounds belonging to the selected group when the user has selected the one group.
The environmental sound learning support apparatus according to claim 1 or 2.
前記制御部は、ユーザが１の前記グループを選択している場合には、選択している前記グループに属する任意の前記環境音を前記音出力部が出力した後に、出力した当該環境音のデータと対応づけられた前記音種類情報を含む、選択している前記グループに属する複数の前記音種類情報を前記表示部に表示させ、ユーザが選択した前記音種類情報が当該環境音に対応づけられた前記音種類情報であるか否かを判定し、判定結果を表示部に表示させる、
請求項２に記載の環境音学習支援装置。 A plurality of types of environmental sound data and the sound type information stored in the storage unit are classified and stored in a plurality of groups,
When the user has selected one of the groups, the control unit outputs the environmental sound data that is output after the sound output unit outputs any of the environmental sounds belonging to the selected group. A plurality of the sound type information belonging to the selected group including the sound type information associated with the sound group information is displayed on the display unit, and the sound type information selected by the user is associated with the environmental sound. Determining whether or not the sound type information, and displaying the determination result on the display unit,
The environmental sound learning support device according to claim 2.
請求項４に記載の環境音学習支援装置。 When the user has selected one group, the control unit displays the sound type information associated with all types of environmental sound data belonging to the selected group. When one sound type information is selected from the displayed sound type information, the environmental sound is output to the sound output unit based on the environmental sound data associated with the selected sound type information. Let
The environmental sound learning support device according to claim 4.
前記環境音のデータに基づいて前記環境音を出力する音出力ステップと、
前記音出力ステップで任意の前記環境音を出力した後に、出力した当該環境音のデータと対応づけられた複数の前記環境音関連情報を表示部に表示させ、ユーザが選択した前記環境音関連情報が予め定めた正答であるか否かを判定した判定結果を表示する表示ステップと、
を有する環境音学習支援方法。 A storage step of storing a plurality of types of environmental sound data and a plurality of environmental sound related information indicating a situation in which each of the environmental sounds is generated or an action for the situation in association with each other,
A sound output step for outputting the environmental sound based on the environmental sound data;
After outputting the arbitrary environmental sound in the sound output step, the environmental sound related information selected by the user is displayed on the display unit by displaying a plurality of the environmental sound related information associated with the output environmental sound data. A display step for displaying a determination result for determining whether or not is a predetermined correct answer;
A method for supporting environmental sound learning.
複数の種類の環境音のデータと、各々の前記環境音が発生する状況又は当該状況に対する行動を示す複数の環境音関連情報と、を互いに対応づけて記憶する記憶部、
前記環境音のデータに基づいて前記環境音を出力する音出力部、
表示部、
前記音出力部が任意の前記環境音を出力した後に、出力した当該環境音のデータと対応づけられた複数の前記環境音関連情報を前記表示部に表示させ、ユーザが選択した前記環境音関連情報が予め定めた正答であるか否かを判定し、判定結果を前記表示部に表示させる制御を行う制御部、
として機能させるためのプログラム。 Computer
A storage unit that stores a plurality of types of environmental sound data and a plurality of environmental sound related information indicating a situation in which each of the environmental sounds is generated or an action for the situation, in association with each other,
A sound output unit that outputs the environmental sound based on the environmental sound data;
Display,
After the sound output unit outputs an arbitrary environmental sound, the environmental sound related information selected by the user is displayed on the display unit by displaying a plurality of the environmental sound related information associated with the output environmental sound data. A controller that performs control to determine whether the information is a predetermined correct answer and display the determination result on the display unit;
Program to function as.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2016032430A JP2017151227A (en) | 2016-02-23 | 2016-02-23 | Environmental sound learning support device, environmental sound learning support method, and program |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2016032430A JP2017151227A (en) | 2016-02-23 | 2016-02-23 | Environmental sound learning support device, environmental sound learning support method, and program |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2017151227A true JP2017151227A (en) | 2017-08-31 |
Family
ID=59738975
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2016032430A Pending JP2017151227A (en) | 2016-02-23 | 2016-02-23 | Environmental sound learning support device, environmental sound learning support method, and program |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2017151227A (en) |
Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5692906A (en) * | 1992-04-01 | 1997-12-02 | Corder; Paul R. | Method of diagnosing and remediating a deficiency in communications skills |
| JP2000147986A (en) * | 1998-11-12 | 2000-05-26 | Umi Ogawa | Pronunciation practice device |
| WO2006007632A1 (en) * | 2004-07-16 | 2006-01-26 | Era Centre Pty Ltd | A method for diagnostic home testing of hearing impairment, and related developmental problems in infants, toddlers, and children |
| JP2006171674A (en) * | 2004-04-06 | 2006-06-29 | Next Education Think Co Ltd | Learning system and server |
| JP2006198279A (en) * | 2005-01-24 | 2006-08-03 | Taito Corp | Alternative type quiz game machine and its control method |
| JP2006208684A (en) * | 2005-01-27 | 2006-08-10 | Casio Comput Co Ltd | Information display controller and program |
| JP2014021273A (en) * | 2012-07-18 | 2014-02-03 | Precena Strategic Partners Co Ltd | Problem setup system, and computer program and method for realizing the system |
-
2016
- 2016-02-23 JP JP2016032430A patent/JP2017151227A/en active Pending
Patent Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5692906A (en) * | 1992-04-01 | 1997-12-02 | Corder; Paul R. | Method of diagnosing and remediating a deficiency in communications skills |
| JP2000147986A (en) * | 1998-11-12 | 2000-05-26 | Umi Ogawa | Pronunciation practice device |
| JP2006171674A (en) * | 2004-04-06 | 2006-06-29 | Next Education Think Co Ltd | Learning system and server |
| WO2006007632A1 (en) * | 2004-07-16 | 2006-01-26 | Era Centre Pty Ltd | A method for diagnostic home testing of hearing impairment, and related developmental problems in infants, toddlers, and children |
| JP2006198279A (en) * | 2005-01-24 | 2006-08-03 | Taito Corp | Alternative type quiz game machine and its control method |
| JP2006208684A (en) * | 2005-01-27 | 2006-08-10 | Casio Comput Co Ltd | Information display controller and program |
| JP2014021273A (en) * | 2012-07-18 | 2014-02-03 | Precena Strategic Partners Co Ltd | Problem setup system, and computer program and method for realizing the system |
Non-Patent Citations (8)
| Title |
|---|
| ELIF OZCAN AND RENE VAN EGMOND: "The effect of visual context on the identification of ambiguous environmental sounds", ACTA PSYCHOLOGICA, vol. 131, JPN6017023155, 28 April 2009 (2009-04-28), pages 110 - 119, ISSN: 0003760954 * |
| VALERLY SHAFIRO ET AL.: "Environmental Sound Training in Cochlear Implant Users", JOURNAL OF SPEECH, LANGUAGE, AND HEARING RESEARCH, vol. 58, JPN6017023156, April 2015 (2015-04-01), pages 509 - 519, ISSN: 0003584850 * |
| 加我 君孝: "環境音と認知障害", 医学のあゆみ, vol. 第２００巻，第２号, JPN6017008111, 12 January 2002 (2002-01-12), pages 169 - 174, ISSN: 0003760953 * |
| 大沼 直紀: "聴覚障害者の聴能", 知能と情報, vol. 第１６巻，第６号, JPN6017008115, 15 December 2004 (2004-12-15), pages 477 - 484, ISSN: 0003584846 * |
| 木村 淳子、中川 辰雄: "聴覚障害幼児に対するパーソナルコンピュータを用いた聴覚学習", 横浜国立大学教育人間科学部紀要 Ｉ．教育科学, vol. 第１１集, JPN6017008119, 28 February 2009 (2009-02-28), ISSN: 0003584848 * |
| 田原 敬、外３名: "難聴者の環境音認知に関する研究の展望", 障害科学研究, vol. 第３６巻, JPN6017008118, 30 March 2012 (2012-03-30), pages 187 - 196, ISSN: 0003584847 * |
| 高橋 信雄、高橋 真由美: "環境音受聴検査の基礎的検討(II)", AUDIOLOGY JAPAN, vol. 32, no. 5, JPN6017008120, 1989, pages 507 - 508, ISSN: 0003584849 * |
| 高橋 真由美、高橋 信雄: "環境音受聴検査の試作", AUDIOLOGY JAPAN, vol. 30, no. 5, JPN6017008108, 1987, pages 579 - 580, ISSN: 0003760952 * |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| Söderström et al. | The use and non‐use of assistive technologies from the world of information and communication technology by visually impaired young people: a walk on the tightrope of peer inclusion | |
| Patel et al. | A comparative study of speech and dialed input voice interfaces in rural India | |
| CN110020059B (en) | System and method for inclusive CAPTCHA | |
| WO2017168907A1 (en) | Information processing device, information processing method and program | |
| Nelson et al. | Classroom listening experiences of students who are deaf or hard of hearing using listening inventory for education–Revised | |
| Moll et al. | Two-and 3-year-olds know what others have and have not heard | |
| Avdic et al. | Intelligibility issues faced by smart speaker enthusiasts in understanding what their devices do and why | |
| Raff et al. | Perceived creepiness in response to smart home assistants: A multi-method study | |
| KR20070050518A (en) | Ubiquitous multi-purpose home-school studio system | |
| JP6166831B1 (en) | Word learning support device, word learning support program, and word learning support method | |
| JP2017151227A (en) | Environmental sound learning support device, environmental sound learning support method, and program | |
| JP2007108524A (en) | Voice input evaluation apparatus and method, and program | |
| McCarthy et al. | Exploration of head related transfer function and environmental sounds as a means to improve auditory scanning for children requiring augmentative and alternative communication | |
| JP2019070717A (en) | Electronic apparatus, method for controlling the same, and program | |
| JP6623575B2 (en) | Learning support device and program | |
| CN109545019B (en) | Learning support device and learning support method | |
| Volkmann et al. | Age-appropriate Participatory Design of a Storytelling Voice Input in the Context of Historytelling. | |
| Shahin et al. | Deaf and hard of hearing in the United Arab Emirates interacting with Alexa, an intelligent personal assistant | |
| JP2010231100A (en) | English-learning device, english-learning program, english text data, foreign language learning device and the like, recording medium, and server device | |
| Cheney | Best practices for supporting hearing-impaired law library patrons | |
| JP6225236B1 (en) | Information processing apparatus, program, and information processing method | |
| JP5833280B1 (en) | Learning support device, learning support system, and learning support method | |
| JP7338737B2 (en) | ELECTRONIC DEVICE, CONTROL METHOD THEREOF, AND PROGRAM | |
| Maguire | Interface Design and Usability Evaluation of Voice-Based User Interfaces | |
| Groarke | Making room for auditory argument |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20170627 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20180320 |