JP4127155B2 - Hearing aids - Google Patents

Hearing aids Download PDF

Info

Publication number
JP4127155B2
JP4127155B2 JP2003290685A JP2003290685A JP4127155B2 JP 4127155 B2 JP4127155 B2 JP 4127155B2 JP 2003290685 A JP2003290685 A JP 2003290685A JP 2003290685 A JP2003290685 A JP 2003290685A JP 4127155 B2 JP4127155 B2 JP 4127155B2
Authority
JP
Japan
Prior art keywords
sound
voice
hearing aid
data
external sound
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2003290685A
Other languages
Japanese (ja)
Other versions
JP2005064745A (en
Inventor
浩 大脇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Yamaha Corp
Original Assignee
Yamaha Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Yamaha Corp filed Critical Yamaha Corp
Priority to JP2003290685A priority Critical patent/JP4127155B2/en
Publication of JP2005064745A publication Critical patent/JP2005064745A/en
Application granted granted Critical
Publication of JP4127155B2 publication Critical patent/JP4127155B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • Circuit For Audible Band Transducer (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To provide a hearing aid device for preventing an environment sound from being heard excessively for non-voice periods almost without causing a sense of incongruity to a user due to deviation between a motion of a mouth of a talker and voice of the taker and properly amplifying the voice for voiced periods so as to enhance ease of hearing. <P>SOLUTION: The hearing aid device (hearing aid) 1 divides picked-up external sound data into data with a prescribed length, analyzes each of the data, and amplifies voice in a way of emphasizing only the voice when detecting the voice. Further, when the hearing aid 1 consecutively receives voice, the hearing aid 1 executes speech speed conversion for the initial part of the sound by time compression of received sound to increase output timings until a present input sound and the sound after the speech speed conversion are almost coincident. Thus, although the motion of the mouth of the talker is deviated from the voice from the talker at the beginning of voice detection, the hearing aid 1 completes the speech speed conversion after several seconds so as to make the motion of the mouth of the talker nearly coincident with the voice outputted from the hearing aid 1. Further, voice detection is finished, the speech speed conversion by time expansion is executed to restore the voice speed to an initial state after several seconds. <P>COPYRIGHT: (C)2005,JPO&amp;NCIPI

Description

本発明は、非音声区間での環境音の過大な聞こえを防止するとともに、音声区間での音声の聞き取り易さを向上させる聴覚補助装置に関する。   The present invention relates to a hearing aid apparatus that prevents excessive hearing of environmental sound in a non-speech section and improves the ease of hearing of a sound in a speech section.

音を聞き取りづらい人の聴覚を補助する装置として補聴器がある。従来の補聴器は、音声（人間が意思を伝えるために口から発する音。）と音声以外の音を一律に増幅して出力していた。しかし、補聴器の使用者は、相手の声（音声）だけでなく周囲の物音（環境音）も大きく聞こえるので不快感を抱くことがあった。例えば、食器を洗うときに食器同士が当たる音や皿を落としたときの音などは、補聴器の使用者にとって非常に耳障りであった。   Hearing aids are devices that assist the hearing of people who have difficulty hearing. Conventional hearing aids uniformly amplify and output sound (sound emitted from the mouth to convey a will by humans) and sound other than sound. However, users of hearing aids sometimes feel uncomfortable because they can hear not only the other party's voice (sound) but also surrounding sounds (environmental sounds). For example, the sound of the dishes hitting each other when washing the dishes, the sound of dropping the dishes, etc. were very harsh to the hearing aid user.

そこで、従来、音声が検出されたときだけ増幅率を上げて、音声を検出しないときには増幅率を上げないようにした補聴器が提案されている（例えば、特許文献１参照。）。この補聴器は、入力音のパワーレベルと無音声区間における音のパワーレベルとの比に基づいて、相対的な雑音レベルが高い場合には増幅器の利得を下げる。これにより、過度に増幅された雑音による不快な音が補聴器の使用者に加わらないようにすることができる。
特開平８−２９４１９７号公報（第４−１１頁、第１−７図） Therefore, conventionally, a hearing aid has been proposed in which the amplification factor is increased only when a voice is detected, and the amplification factor is not increased when no voice is detected (see, for example, Patent Document 1). This hearing aid reduces the gain of the amplifier when the relative noise level is high, based on the ratio between the power level of the input sound and the power level of the sound in the silent period. Thereby, it is possible to prevent an unpleasant sound due to excessively amplified noise from being added to the user of the hearing aid.
JP-A-8-294197 (pages 4-11, 1-7)

特許文献１に記載の補聴器は、短時間零交差数を取得して無音声区間であるか否かを検出しており、短時間零交差数の取得のために設定時間間隔で零交差を累積するという処理を行う。そのため、設定時間を短時間に設定しても、入力音の短時間零交差数取得、音声区間の判断、音声の増幅という一連の処理を実行して音声を出力するまでに、少なくとも３０〜１００ｍｓｅｃ程度の時間が、常に必要であった。   The hearing aid disclosed in Patent Document 1 acquires the number of short-time zero crossings to detect whether or not it is a silent section, and accumulates zero-crossings at set time intervals to acquire the number of short-time zero crossings. The process of doing. For this reason, even if the set time is set to a short time, at least 30 to 100 msec until a sound is output by executing a series of processes such as acquisition of the number of short-time zero crossings of the input sound, determination of the speech section, and amplification of the sound. A certain amount of time was always necessary.

しかし、人間は、発話者の口の動きと発話者の音声（発言内容）とに１５ｍｓｅｃ以上の差ができると違和感を抱いてしまうという性質を有している。また、補聴器の使用者は、通常、発話者の発言内容を把握するために発話者の口の動きを見ながら発話者の発言を聞くことが多い。そのため、特許文献１に記載された補聴器の使用者は、発話者の口の動きと発話者の音声とがずれているという違和感を常に抱きながら、発話者の話を聞かなければならないという問題があった。   However, humans have the property of feeling uncomfortable when there is a difference of 15 msec or more between the movement of the speaker's mouth and the voice of the speaker (the content of the speech). In addition, a user of a hearing aid usually listens to a speaker's speech while watching the movement of the speaker's mouth in order to grasp the content of the speaker's speech. Therefore, there is a problem that the user of the hearing aid described in Patent Document 1 must listen to the speaker's story while always feeling uncomfortable that the movement of the speaker's mouth and the voice of the speaker are out of sync. there were.

そこで、本発明は、上記の問題を解決するために、非音声区間で環境音が過大に聞こえるのが防止され、また、発話者の口の動きと発話者の音声とのずれによる違和感を使用者がほとんど抱くことなく、音声区間で音声が適切に増幅されて聞き取り易さが向上された聴覚補助装置を提供することを目的とする。   Therefore, in order to solve the above problem, the present invention prevents an environmental sound from being excessively heard in a non-voice section, and uses a sense of incongruity due to a difference between the movement of the speaker's mouth and the voice of the speaker. It is an object of the present invention to provide a hearing aid device in which the voice is appropriately amplified in the voice section and the ease of hearing is improved with little person holding.

この発明は、上記の課題を解決するための手段として、以下の構成を備えている。   The present invention has the following configuration as means for solving the above problems.

（１）外来音を集音する集音手段と、
前記集音手段が集音した外来音のデータを一時記憶するバッファ手段と、
前記集音手段が集音した外来音のデータを順次更新しながら前記バッファ手段に書き込む書込手段と、
前記バッファ手段に記憶されている一定期間分の外来音データ中に音声が有るか否かを判定する判定手段と、
前記判定手段が音声有りと判定しているとき、前記書込手段による書き込み直後の外来音データを前記バッファ手段から読み出し、前記判定手段が音声無しと判定しているとき、前記書込手段による書き込みから前記一定期間経過した前記判定手段による判定済みの外来音データを読み出し、前記判定手段の判定結果が音声無しから音声有りに変化したとき、前記バッファ手段から読み出す外来音データを前記判定済みのデータから書き込み直後のデータへ徐々にシフトしてゆく読出手段と、
前記判定手段が音声有りと判定している外来音データと、前記判定手段が音声無しと判定している外来音データと、を異なる増幅率で増幅して出力する増幅手段と、
を備え、
前記増幅手段は、前記判定手段の判定結果が音声有りから音声無しに変化したとき、音声無しと判定された外来音用の増幅率まで所定の割合で増幅率を下げながら外来音データを増幅することを特徴とする。 (1) sound collecting means for collecting foreign sounds;
Buffer means for temporarily storing foreign sound data collected by the sound collecting means;
Writing means for writing to the buffer means while sequentially updating the data of the external sound collected by the sound collecting means;
Determining means for determining whether or not there is sound in the external sound data for a predetermined period stored in the buffer means;
When the determination means determines that there is sound, the external sound data immediately after the writing by the writing means is read from the buffer means, and when the determination means determines that there is no sound, the writing by the writing means The external sound data that has been determined by the determination unit after a certain period of time is read out, and the external sound data that is read from the buffer unit when the determination result of the determination unit changes from no sound to presence of sound Reading means that gradually shifts from writing to data immediately after writing;
Amplifying means for amplifying and outputting the external sound data determined by the determining means with the sound and the external sound data determined by the determining means with no sound at different amplification rates;
With
The amplifying means amplifies the external sound data while reducing the amplification factor at a predetermined rate up to the amplification factor for the external sound determined to have no sound when the determination result of the determining means changes from the presence of the sound to the absence of the sound. It is characterized by that.

この構成においては、聴覚補助装置では、集音手段で集音した外来音を一旦バッファ手段に記憶させて、バッファに一定期間の外来音データが蓄積されると、その一定期間の外来音データを読み出して、音声（人間が意思を伝えるために口から発する音）のデータがこのデータ中に有るか否かの判定を行う。判定の結果、音声無しの判定があった場合には、判定済みの外来音データを読み出して、この外来音データを増幅してから出力する。また、音声無しの判定後に音声を検出して音声有りの判定となった場合には、バッファ手段から読み出した外来音データを書き込み直後のデータへ徐々にシフトする。そして、引き続き音声有りと判定された場合には、バッファ手段から書き込み直後の外来音データを読み出して、この外来音データを音声無しと判定された場合とは異なる増幅率で増幅してから出力する。
また、発話者が発言を終了して聴覚補助装置が集音する外来音に音声が含まれずに環境音のみになると、聴覚補助装置から出力される外来音の増幅率を、音声無しと判定された外来音用の増幅率に所定の割合で低下させることができる。したがって、聴覚補助装置は、音声を検出してから音声をしばらく検出しなくなったときには、環境音の音量を所定の割合で徐々に下げるので、聴覚補助装置の使用者は、発話者の音声が終了しても、聴覚補助装置が音声を検出しなくってからも、聴覚補助装置から出力される外来音の音量の変化に違和感を抱くことなく、外来音を聞くことができる。また、聴覚補助装置は、外来音の増幅率を所定の割合で低下させるので、発話者がしばらく休憩してから発言を再開した場合など音声区間に少し間が空いた直後に外来音が急に大きく増幅されても、聴覚補助装置の使用者がうるさく感じることがない。 In this configuration, in the hearing aid device, the external sound collected by the sound collecting means is temporarily stored in the buffer means, and when the external sound data for a certain period is accumulated in the buffer, the external sound data for the certain period is stored. It is read out and it is determined whether or not voice data (sound emitted from the mouth to convey the intention of human beings) is present in this data. If it is determined that there is no sound, the determined external sound data is read, and the external sound data is amplified and output. In addition, when it is determined that there is sound after the sound is detected and it is determined that there is sound, the external sound data read from the buffer means is gradually shifted to the data immediately after writing. If it is determined that there is still sound, the external sound data immediately after writing is read from the buffer means, and the external sound data is amplified with an amplification factor different from that when it is determined that there is no sound and then output. .
In addition, when the speaker finishes speaking and the external sound collected by the hearing aid device does not include any sound but only the environmental sound, the amplification factor of the external sound output from the hearing aid device is determined as no sound. In addition, the amplification factor for external sound can be reduced at a predetermined rate. Therefore, the hearing aid device gradually reduces the volume of the environmental sound at a predetermined rate when the sound is not detected for a while after detecting the sound, so that the user of the hearing aid device ends the voice of the speaker. Even if the hearing assistance device does not detect the sound, the foreign sound can be heard without feeling uncomfortable with the change in the volume of the external sound output from the hearing assistance device. In addition, the hearing aid device decreases the amplification rate of the external sound by a predetermined rate, so that the external sound suddenly starts immediately after a short interval in the voice interval, such as when the speaker resumes after a break for a while. Even if greatly amplified, the user of the hearing aid device does not feel noisy.

したがって、聴覚補助装置は、集音した外来音に音声が含まれているか否かを判定して、その判定結果に応じて異なる増幅率で外来音を増幅して出力するので、前記判定手段が音声有りと判定した場合には外来音データに含まれる音声を強調して出力するように増幅手段の増幅率を設定しておくことで、聴覚補助装置の使用者は、音声を容易に聞き取ることができる。また、音声無しの判定後に音声を検出して音声有りの判定となった場合には、バッファ手段から読み出す外来音データを判定済みのデータから書き込み直後のデータへ徐々にシフトしてゆくので、聴覚補助装置の使用者は、データのシフトが完了すると、発話者の口の動きと音声がずれていることによる違和感を抱くことなく、増幅された音声を聞くことができる。また、聴覚補助装置の外来音データのシフトが速やかに完了するように設定しておくことで、聴覚補助装置の使用者は、発話者の口の動きと音声がずれていることによる違和感をほとんど抱くことがない。   Therefore, the hearing aid apparatus determines whether or not the collected external sound includes sound, and amplifies the external sound with a different amplification factor according to the determination result, so that the determination means includes By setting the amplification factor of the amplification means so as to emphasize and output the sound included in the external sound data when it is determined that there is sound, the hearing aid device user can easily hear the sound. Can do. In addition, when the sound is detected after the determination of the absence of sound and the sound is determined to be present, the external sound data read from the buffer means is gradually shifted from the determined data to the data immediately after the writing. When the data shift is completed, the user of the assisting device can hear the amplified voice without feeling uncomfortable due to the movement of the mouth of the speaker and the voice. In addition, by setting so that the shift of the external sound data of the hearing aid device is completed quickly, the user of the hearing aid device feels uncomfortable due to the fact that the voice of the speaker's mouth is misaligned with the voice. I don't hold you.

（２）前記読出手段が前記バッファ手段から読み出す外来音データをシフトしているとき、そのシフトに合わせて外来音データの話速を変化する話速変換手段を備えたことを特徴とする。   (2) When the reading means shifts the external sound data read from the buffer means, the reading means includes speech speed conversion means for changing the speaking speed of the external sound data in accordance with the shift.

この構成においては、聴覚補助装置は、音声無しの判定後に音声を検出して音声有りの判定となって、バッファ手段から読み出す外来音データを判定済みのデータから書き込み直後のデータへ徐々にシフトしてゆく際に、外来音データの話速を変化するので、発話者の音声ピッチを変化させずに出力することが可能となる。したがって、聴覚補助装置の使用者は、違和感を抱くことなく増幅された音声を聞くことができる。   In this configuration, the hearing aid apparatus detects the sound after determining the absence of sound and determines the presence of the sound, and gradually shifts the external sound data read from the buffer means from the determined data to the data immediately after writing. Since the speech speed of the external sound data is changed during the course, it is possible to output without changing the voice pitch of the speaker. Therefore, the user of the hearing aid apparatus can hear the amplified voice without feeling uncomfortable.

（３）前記読出手段は、前記判定手段の判定結果が音声有りから音声無しに変化したとき、前記バッファ手段から読み出す外来音データを書き込み直後のデータから前記判定済みのデータへ徐々にシフトすることを特徴とする。   (3) The reading means gradually shifts the external sound data read from the buffer means from the data immediately after writing to the determined data when the determination result of the determining means changes from the presence of sound to the absence of sound. It is characterized by.

この構成においては、音声有りの判定後に音声区間が終了して環境音だけになって音声無しの判定となった場合には、バッファ手段から読み出す外来音データを音声の有無を判定済みのデータへ徐々にシフトする。したがって、聴覚補助装置がしばらく音声を検出しないときには、集音手段で集音した外来音を一旦バッファ手段に記憶させてこの外来音データ中に音声データが有るか否かを判定する状態に戻すことができる。   In this configuration, when it is determined that there is no sound after the determination of the presence of sound and the sound section ends and only the environmental sound results in no sound, the external sound data read from the buffer means is converted to data for which sound has been determined. Shift gradually. Therefore, when the hearing aid apparatus does not detect the sound for a while, the external sound collected by the sound collecting means is temporarily stored in the buffer means, and the state is returned to a state where it is determined whether or not there is sound data in the external sound data. Can do.

（４） 前記話速変換手段は、前記読出手段が前記バッファ手段から読み出す外来音データをシフトしているとき、そのシフトに合わせて外来音データの話速を変化することを特徴とする。   (4) When the reading means shifts the external sound data read from the buffer means, the speaking speed conversion means changes the speaking speed of the external sound data in accordance with the shift.

この構成においては、音声有りの判定後に音声区間が終了して環境音だけになって音声無しの判定となった場合には、バッファ手段から読み出した外来音データに対して話速変換を行って、バッファ手段から読み出す外来音データを音声の有無を判定済みのものにシフトする。したがって、聴覚補助装置がしばらく音声を検出しないときには、話速変換として時間伸長を行うことで、処理音の聞こえ方が自然となり、聴覚補助装置の使用者は違和感を感じることがない。   In this configuration, when it is determined that there is no sound due to the end of the sound section after the determination of the presence of sound and only the environmental sound is determined, the speech speed conversion is performed on the external sound data read from the buffer means. Then, the external sound data read out from the buffer means is shifted to a sound whose presence or absence of sound has been determined. Therefore, when the hearing aid device does not detect the voice for a while, the time extension is performed as the speech speed conversion, so that the processed sound is heard naturally and the user of the hearing aid device does not feel uncomfortable.

（５）前記判定手段が音声有りと判定すると、その旨を報知する報知手段を備えたことを特徴とする。 ( 5 ) When the determination means determines that there is a voice, it has a notification means for notifying that effect.

この構成においては、聴覚補助装置の使用者は、聴覚補助装置から音声が出力されることを把握できるので、発話者の音声を最初から集中して聞くことができる。なお、報知手段としては、聴覚補助装置の使用者に対して、音声で報知するスピーカ、光で報知するＬＥＤ、振動で報知する振動モータなどが好適である。   In this configuration, the user of the hearing assistance device can grasp that the sound is output from the hearing assistance device, so that the voice of the speaker can be heard from the beginning. Note that, as the notification means, a speaker that notifies the user of the hearing assistance device by sound, an LED that notifies by light, a vibration motor that notifies by vibration, and the like are suitable.

本発明の聴覚補助装置は、非音声区間で環境音が過大に聞こえることがなく、また、発話者の口の動きと発話者の音声とのずれによる違和感がほとんどなく、音声区間で音声が適切に増幅されて音声を容易に聞き取ることができるという利点がある。   The hearing aid apparatus according to the present invention does not allow excessive environmental sounds to be heard in non-speech intervals, and there is almost no sense of incongruity due to the difference between the mouth movement of the speaker and the speech of the speaker. There is an advantage that the sound can be easily heard after being amplified.

以下、聴覚補助装置の一実施形態として補聴器を例に挙げて説明する。図１は、補聴器の概略構成を示したブロック図である。ここで、以下の説明では、音声とは人間が意思を伝えるために口から発する音のことを指し、環境音とは音声を含まない音のことを指すものとする。   Hereinafter, a hearing aid will be described as an example of a hearing aid apparatus. FIG. 1 is a block diagram showing a schematic configuration of a hearing aid. Here, in the following description, the voice refers to a sound emitted from the mouth in order to convey a will, and the environmental sound refers to a sound that does not include the voice.

補聴器１は、マイク２、信号処理部３、及びスピーカ４から成る。また、信号処理部３は、Ａ／Ｄコンバータ１１、ＤＳＰ１２、ＣＰＵ１３、操作部１４、Ｄ／Ａコンバータ１５、メモリ１６、及び入出力インタフェース１７を備えている。   The hearing aid 1 includes a microphone 2, a signal processing unit 3, and a speaker 4. The signal processing unit 3 includes an A / D converter 11, a DSP 12, a CPU 13, an operation unit 14, a D / A converter 15, a memory 16, and an input / output interface 17.

マイク２は、補聴器１の使用者の周囲における外来音を集音して、集音したアナログ音信号を信号処理部３へ出力する。信号処理部３は、音声の話速変換や増幅などの信号処理を行い、スピーカ４へ出力する。スピーカ４は、信号処理部３で信号処理された音声信号を空気振動に変換して、使用者の外耳道に放出する。   The microphone 2 collects the external sound around the user of the hearing aid 1 and outputs the collected analog sound signal to the signal processing unit 3. The signal processing unit 3 performs signal processing such as speech speed conversion and amplification, and outputs the result to the speaker 4. The speaker 4 converts the audio signal signal-processed by the signal processing unit 3 into air vibration and emits it to the user's ear canal.

信号処理部３において、Ａ／Ｄコンバータ１１は、マイク２が出力したアナログ音信号をディジタル音信号に変換する。ＤＳＰ１２は、Ａ／Ｄコンバータ１１が出力したディジタル音信号に対して話速変換処理や増幅処理などの音処理を行う。ＣＰＵ１３は、補聴器１の各部を制御する。操作部１４は、補聴器１の音量設定や時間設定など各種の設定を行うためのものである。Ｄ／Ａコンバータ１５は、ＤＳＰ１２で信号処理されたディジタル音信号をアナログ音信号に変換する。メモリ１６は、ユーザが設定した補聴器１の設定値などを記憶する。入出力インタフェース１７は、パソコン８と信号をやりとりするためのインタフェースである。   In the signal processing unit 3, the A / D converter 11 converts the analog sound signal output from the microphone 2 into a digital sound signal. The DSP 12 performs sound processing such as speech speed conversion processing and amplification processing on the digital sound signal output from the A / D converter 11. The CPU 13 controls each part of the hearing aid 1. The operation unit 14 is for performing various settings such as volume setting and time setting of the hearing aid 1. The D / A converter 15 converts the digital sound signal processed by the DSP 12 into an analog sound signal. The memory 16 stores a setting value of the hearing aid 1 set by the user. The input / output interface 17 is an interface for exchanging signals with the personal computer 8.

次に、ＤＳＰ１２の構成について説明する。図２は、補聴器が内蔵するＤＳＰの概略構成を示したブロック図である。ＤＳＰ１２は、ライトコントローラ２１、リングバッファ２２、リードコントローラ２３、音声区間検出部２４、リードコントローラ２５、話速変換部２６、ゲインコントローラ２７、及び報知音発生部２８を備えている。   Next, the configuration of the DSP 12 will be described. FIG. 2 is a block diagram showing a schematic configuration of a DSP built in the hearing aid. The DSP 12 includes a write controller 21, a ring buffer 22, a read controller 23, a voice section detection unit 24, a read controller 25, a speech speed conversion unit 26, a gain controller 27, and a notification sound generation unit 28.

ライトコントローラ２１は、サンプリング周期で歩進するポインタが示す書き込みアドレスに従ってＡ／Ｄコンバータ１１から送られてきたディジタル音信号をリングバッファ２２へ順番に記録する。   The write controller 21 sequentially records the digital sound signal sent from the A / D converter 11 in the ring buffer 22 in accordance with the write address indicated by the pointer that advances in the sampling cycle.

リングバッファ２２は、ライトコントローラ２１が出力したディジタル音データを順番に記憶し、メモリ領域が記憶データでいっぱいになると、最も古いデータから順に、新しいデータを上書きして古いデータを削除する。なお、リングバッファに代えて、シフトレジスタやＦＩＦＯメモリを使用しても良い。   The ring buffer 22 sequentially stores the digital sound data output from the write controller 21, and when the memory area is filled with stored data, the old data is overwritten in order from the oldest data to delete the old data. In place of the ring buffer, a shift register or a FIFO memory may be used.

リードコントローラ２３は、環境音のみを検出している非音声区間において、リングバッファ２２が記憶するディジタル音データの５０ｍｓｅｃ分を順次読み出して、音声区間検出部２４へ出力する。ここで、リードコントローラ２３がリングバッファ２２から読み出す５０ｍｓｅｃ分のディジタル音データ、または、その５０ｍｓｅｃの時間を、以下、フレームとも称する。   The read controller 23 sequentially reads out 50 msec of the digital sound data stored in the ring buffer 22 in the non-speech section in which only the environmental sound is detected, and outputs the digital sound data to the speech section detection unit 24. Here, the digital sound data for 50 msec read from the ring buffer 22 by the read controller 23 or the time of 50 msec is also referred to as a frame hereinafter.

音声区間検出部２４は、リングバッファ２２から読み出したディジタル音データを分析して、このディジタル音データ中に音声が含まれているか否かを判定する。なお、この分析には５０ｍｓｅｃの時間を要する。音声区間検出部２４は、音声が含まれていると判定した場合には、話速変換部２６・ゲインコントローラ２７・報知音発生部２８へ音声検出信号を出力する。また、音声が含まれていないと判定した場合には、話速変換部２６・ゲインコントローラ２７・報知音発生部２８へ未検出信号を出力する。なお、音声区間検出部２４は、周知技術であるＶＡＤ（Voice Activity Detection：音声アクティビティ検出）、ＬＰＣ分析、ケプストラム法などを用いて、音声が含まれているか否かの分析を行う。   The voice section detection unit 24 analyzes the digital sound data read from the ring buffer 22 and determines whether or not voice is included in the digital sound data. This analysis takes 50 msec. When it is determined that the voice is included, the voice section detection unit 24 outputs a voice detection signal to the speech speed conversion unit 26, the gain controller 27, and the notification sound generation unit 28. If it is determined that no voice is included, an undetected signal is output to the speech speed conversion unit 26, the gain controller 27, and the notification sound generation unit 28. Note that the voice section detection unit 24 analyzes whether or not a voice is included by using well-known techniques such as VAD (Voice Activity Detection), LPC analysis, and cepstrum method.

リードコントローラ２５は、スピーカ４から出力する環境音や音声のデータをリングバッファ２２から読み出す。すなわち、リードコントローラ２５は、非音声区間においては、ライトコントローラ２１同様、サンプリング周期で歩進するポインタが示す読み出しアドレスに従ってディジタル音データを読み出し、このディジタル音データを話速変換部２６へ出力する。ここで、非音声区間においては、このリードコントローラ２５で読み出されるディジタル音データは、ライトコントローラ２１で書き込まれるディジタル音データに対して１００ｍｓｅｃ遅れている。   The read controller 25 reads environmental sound and audio data output from the speaker 4 from the ring buffer 22. That is, the read controller 25 reads the digital sound data in accordance with the read address indicated by the pointer that advances at the sampling period in the non-voice section, and outputs the digital sound data to the speech speed conversion unit 26 in the non-voice section. Here, in the non-voice section, the digital sound data read by the read controller 25 is delayed by 100 msec from the digital sound data written by the write controller 21.

話速変換部２６は、音声区間検出部２４が音声区間の開始または終了を検出したときから所定時間の間、リードコントローラ２５に対して読み出しアドレスの歩進速度を変更する指示を出す。話速変換部２６が歩進速度を単純に変更する場合には、音声の周波数が変動して入力音（外来音）と出力音との高さや音声スピードが異なったものになる。すなわち、話速変換部２６が歩進速度を上げると、スピーカ４から出力される音声のピッチが上がるとともに音声スピードが速くなる。一方、話速変換部２６が歩進速度を下げると、スピーカ４から出力される音声のピッチが下がるとともに音声スピードが遅くなる。なお、話速変換部２６は、周知の可変速再生機能を備えるようにすれば、歩進速度を変更する際に音程（キー）を変えないでスピードのみを変えることができる。また、話速変換部２６は、歩進速度を変更する際に、リードコントローラ２５から出力される音声（外来音）データに対して、無音区間や長時間母音区間などの時間圧縮や時間伸長を行って話速を変換する方式のものであっても良い。この場合、話速変換部２６は、音声の周波数が変動して入力音（外来音）と出力音との高さが異なったり音声スピードが変化したりして音声が聞き取りにくくなることのないように音声データを処理することができる。   The speech speed conversion unit 26 instructs the read controller 25 to change the stepping speed of the read address for a predetermined time after the voice segment detection unit 24 detects the start or end of the voice segment. When the speech speed conversion unit 26 simply changes the stepping speed, the voice frequency fluctuates and the input sound (foreign sound) and the output sound have different pitches and voice speeds. That is, when the speech speed conversion unit 26 increases the stepping speed, the voice pitch output from the speaker 4 increases and the voice speed increases. On the other hand, when the speech speed conversion unit 26 decreases the stepping speed, the voice pitch output from the speaker 4 decreases and the voice speed decreases. If the speech speed conversion unit 26 is provided with a known variable speed playback function, it is possible to change only the speed without changing the pitch (key) when changing the stepping speed. In addition, when changing the stepping speed, the speech speed conversion unit 26 performs time compression or time expansion on a voice (foreign sound) data output from the read controller 25 such as a silent section or a long vowel section. It may be of a system that goes and converts the speech speed. In this case, the speech speed conversion unit 26 does not make it difficult to hear the voice because the frequency of the voice fluctuates and the input sound (foreign sound) differs from the output sound or the voice speed changes. Audio data can be processed.

ゲインコントローラ２７は、音声区間検出部２４から送られてきた信号に応じて増幅率を変更して、話速変換部２６から送られてきたディジタル音データを増幅する。すなわち、ゲインコントローラ２７は、音声区間検出部２４から未検出信号が送られてくると、環境音用に設定された増幅率に変更して、話速変換部２６から送られてきたディジタル音データを増幅する。また、ゲインコントローラ２７は、音声区間検出部２４から音声検出信号が送られてくると、音声用に設定された増幅率に変更して、音声が強調されるように、話速変換部２６から送られてきたディジタル音データ（音声データ）を増幅する。ここで、環境音の増幅率及び音声の増幅率は、使用者の使用環境に応じて設定することができる。例えば、ゲインコントローラ２７の環境音の増幅率は、使用者が大きな物音を気づくことができる程度に設定し、音声の増幅率は、使用者が音声を容易に聞き取ることができる程度の値に設定すると良い。   The gain controller 27 changes the amplification factor in accordance with the signal sent from the voice section detector 24 and amplifies the digital sound data sent from the speech speed converter 26. That is, when an undetected signal is sent from the voice section detection unit 24, the gain controller 27 changes the amplification factor set for the environmental sound to the digital sound data sent from the speech speed conversion unit 26. Amplify. In addition, when a voice detection signal is sent from the voice section detection unit 24, the gain controller 27 changes the amplification factor set for voice to enhance the voice so that the voice is emphasized. The digital sound data (sound data) sent is amplified. Here, the amplification factor of the environmental sound and the amplification factor of the sound can be set according to the use environment of the user. For example, the gain of the environmental sound of the gain controller 27 is set to such a level that the user can notice a loud sound, and the gain of the sound is set to a value that allows the user to easily hear the sound. Good.

報知音発生部２８は、音声区間検出部２４から音声検出信号が送られてくると、音声が出力されることを補聴器１の使用者に報知する音を生成してＤ／Ａコンバータ１５に出力する。報知音の音色や再生時間は、使用者の好みに応じて予め設定することができる。   When the sound detection signal is sent from the sound section detection unit 24, the notification sound generation unit 28 generates a sound for notifying the user of the hearing aid 1 that the sound is output and outputs the sound to the D / A converter 15. To do. The tone color and playback time of the notification sound can be set in advance according to the user's preference.

次に、補聴器１の全般の動作について説明する。図３は、補聴器の動作を説明するためのタイミングチャートである。図４は、補聴器における外来音データの音声検出動作を説明するための図である。図５は、図３に示した各タイミングにおけるリングバッファの入力ポインタ及び出力ポインタの関係を示した図である。なお、補聴器１の動作中には、リングバッファ２２の入力ポインタ及び出力ポインタは順次移動するが、リングバッファ２２の動作を容易に理解できるように、図５には入力ポインタの位置を固定して示している。   Next, the overall operation of the hearing aid 1 will be described. FIG. 3 is a timing chart for explaining the operation of the hearing aid. FIG. 4 is a diagram for explaining the sound detection operation of the external sound data in the hearing aid. FIG. 5 is a diagram showing the relationship between the input pointer and the output pointer of the ring buffer at each timing shown in FIG. During the operation of the hearing aid 1, the input pointer and the output pointer of the ring buffer 22 move sequentially, but the position of the input pointer is fixed in FIG. 5 so that the operation of the ring buffer 22 can be easily understood. Show.

補聴器１は、マイク２で集音した外来音をリングバッファに常時書き込んでおり、リングバッファ２２が記憶する外来音データから一定期間分（５０ｍｓｅｃ分）の外来音データを読み出して音声の有無を判定する。そして、その判定結果に応じて、外来音データの読み出し位置や増幅率を変更して外来音をスピーカ４から出力する。   The hearing aid 1 constantly writes the external sound collected by the microphone 2 in the ring buffer, and reads the external sound data for a certain period (50 msec) from the external sound data stored in the ring buffer 22 to determine the presence or absence of sound. To do. Then, according to the determination result, the external sound data is read from the speaker 4 by changing the reading position and amplification factor of the external sound data.

（１）補聴器１は、しばらくの間音声を検出していない状態や初期状態（非音声区間）では、外来音に音声が含まれているか否かを分析・判定してから外来音を出力している。例えば、図４に示すように、補聴器１は、非音声区間では、リングバッファ２２に入力音データ（外来音データ）をディジタル音データとして順次蓄積しており、リングバッファ２２に１フレーム（５０ｍｓｅｃ）分の外来音データ（第１フレーム）が蓄積されると、リードコントローラ２３はこの第１フレームの外来音データを読み出して音声区間検出部２４に出力する。音声区間検出部２４は、第１フレームの外来音データ中に音声が含まれているかどうかを約５０ｍｓｅｃの間分析する。音声区間検出部２４は、分析が終了して外来音データに音声が含まれていないと判定した場合には、話速変換部２６及びゲインコントローラ２７へ未検出信号を出力する。これにより、話速変換部２６は話速変換を行わずに外来音のデータをゲインコントローラ２７へ出力し、ゲインコントローラ２７は増幅率を変更せずに環境音用の増幅率で外来音を増幅する。   (1) The hearing aid 1 outputs the external sound after analyzing / determining whether the external sound includes the sound in a state where the sound has not been detected for a while or in an initial state (non-speech period). ing. For example, as shown in FIG. 4, the hearing aid 1 sequentially stores input sound data (foreign sound data) as digital sound data in the ring buffer 22 during the non-sound period, and 1 frame (50 msec) in the ring buffer 22. When the amount of extraneous sound data (first frame) is accumulated, the read controller 23 reads out the extraneous sound data of the first frame and outputs it to the audio section detection unit 24. The voice section detection unit 24 analyzes for about 50 msec whether or not voice is included in the external sound data of the first frame. The voice section detection unit 24 outputs an undetected signal to the speech speed conversion unit 26 and the gain controller 27 when the analysis is completed and it is determined that the external sound data does not include voice. As a result, the speech speed conversion unit 26 outputs the external sound data to the gain controller 27 without performing the speech speed conversion, and the gain controller 27 amplifies the external sound with the amplification factor for the environmental sound without changing the amplification factor. To do.

このとき、リングバッファ２２では、図５（１）に示すように、入力ポインタ（ライトコントローラ２１用）が出力ポインタ（リードコントローラ２５用）よりもディジタル音データの１００ｍｓｅｃ分進んだアドレスに位置する。すなわち、リードコントローラ２５は、音声区間検出部２４の判定後にリングバッファ２２から外来音データを読み出すので、ライトコントローラ２１によってリングバッファ２２に書き込まれてから１００ｍｓｅｃ経過した外来音データを読み出している。したがって、補聴器１では、マイク２で外来音を集音してから約１００ｍｓｅｃ後に、スピーカ４から外来音が増幅されて出力される。   At this time, in the ring buffer 22, as shown in FIG. 5A, the input pointer (for the write controller 21) is positioned at an address advanced by 100 msec of the digital sound data from the output pointer (for the read controller 25). That is, since the read controller 25 reads the external sound data from the ring buffer 22 after the determination by the voice section detection unit 24, the read controller 25 reads the external sound data after 100 msec from being written to the ring buffer 22 by the write controller 21. Therefore, in the hearing aid 1, the external sound is amplified and output from the speaker 4 about 100 msec after the external sound is collected by the microphone 2.

また、補聴器１は、外来音データの蓄積、音声の有無分析・判定、及び音声出力を並行に行っている。すなわち、図４に示すように、第１フレームの外来音データを分析中には第２フレームの外来音データを蓄積している。また、第１フレームの外来音データを出力中には、第２フレームの外来音データを分析するとともに、第３フレームの外来音データを蓄積している。さらに、第２フレームの外来音データを出力中には、第３フレームの外来音データを分析するとともに、第４フレームの外来音データを蓄積している。   In addition, the hearing aid 1 performs storage of external sound data, analysis / determination of sound presence / absence, and sound output in parallel. That is, as shown in FIG. 4, during the analysis of the external sound data of the first frame, the external sound data of the second frame is accumulated. During the output of the external sound data of the first frame, the external sound data of the second frame is analyzed and the external sound data of the third frame is accumulated. Further, while the external sound data of the second frame is being output, the external sound data of the third frame is analyzed and the external sound data of the fourth frame is accumulated.

続いて、図３に示すように、発話者が時刻ｔ１から時刻ｔ３まで発話した場合、補聴器１は以下のような動作を行う。   Subsequently, as shown in FIG. 3, when the speaker speaks from time t1 to time t3, the hearing aid 1 performs the following operation.

（２）補聴器１のリードコントローラ２３は、時刻ｔ１からの外来音データを含む５０ｍｓｅｃの間の外来音データ（フレーム）がリングバッファ２２に蓄積されると、このフレームを読み出して音声区間検出部２４に出力する。音声区間検出部２４は、このフレーム中に音声が含まれているかどうかを約５０ｍｓｅｃの間分析する。そして、音声区間検出部２４は、分析を終了して外来音データに音声が含まれていると判定した場合には、話速変換部２６及びゲインコントローラ２７へ音声検出信号を出力する。これにより、話速変換部２６は音声の時間圧縮（話速変換）を開始し、ゲインコントローラ２７は音声を強調するために音声用の増幅率に変更して音声の増幅を直ちに行う。   (2) When the external sound data (frame) for 50 msec including the external sound data from time t 1 is accumulated in the ring buffer 22, the read controller 23 of the hearing aid 1 reads this frame and reads the audio section detection unit 24. Output to. The voice section detection unit 24 analyzes whether or not voice is included in this frame for about 50 msec. When the voice section detection unit 24 finishes the analysis and determines that the foreign sound data includes voice, the voice section detection unit 24 outputs a voice detection signal to the speech speed conversion unit 26 and the gain controller 27. As a result, the speech speed conversion unit 26 starts time compression (speech speed conversion) of the voice, and the gain controller 27 immediately changes the amplification factor for voice in order to emphasize the voice and immediately amplifies the voice.

また、発話者の発言がしばらく続き、外来音に音声が含まれている状態が連続するので、補聴器１は、引き続き音声の時間圧縮による話速変換を行いながら、音声が途切れないようにリングバッファ２２から音声データの読み出しを続ける。そのため、図５（２）に示すように、リングバッファ２２では、音声データの読み出しが早まり、出力ポインタが徐々に入力ポインタに近づいていく（シフトする）。   In addition, since the speaker's speech continues for a while and the state in which the sound is included in the external sound continues, the hearing aid 1 continues to perform the speech speed conversion by the time compression of the sound, and the ring buffer so that the sound is not interrupted. 22 continues to read the audio data. Therefore, as shown in FIG. 5 (2), in the ring buffer 22, the audio data is quickly read, and the output pointer gradually approaches (shifts) the input pointer.

（３）話速変換部２６は、話速変換の開始から１ｓｅｃ〜５ｓｅｃ経過して、スピーカ４から出力する音声とマイク２で集音した音声とがほぼ一致すると、音声の時間圧縮（話速変換）を停止する（時刻ｔ５）。このとき、リングバッファ２２では、図５（３）に示すように、出力ポインタが入力ポインタに追いつき、リードコントローラ２５は、ライトコントローラ２１がリングバッファ２２に書き込んだ直後の外来音データを読み出している。   (3) The speech speed conversion unit 26 performs time compression (speech speed) when the sound output from the speaker 4 and the sound collected by the microphone 2 substantially coincide with each other after 1 sec to 5 sec have elapsed from the start of the speech speed conversion. (Conversion) is stopped (time t5). At this time, in the ring buffer 22, as shown in FIG. 5 (3), the output pointer catches up with the input pointer, and the read controller 25 reads the external sound data immediately after the write controller 21 writes it in the ring buffer 22. .

（４）発話者の発言が続いて、外来音に音声が含まれている状態が連続すると、補聴器１のスピーカ４から出力する音声がマイク２で集音した音声とほぼ一致した状態が続き、音声区間検出部２４はスピーカ４から出力後の音データに対して音声が含まれているか否かを分析・判定する処理を続ける。このとき、リングバッファ２２では、図５（４）に示すように、出力ポインタと入力ポインタとは同一速度で移動し、補聴器１ではリングバッファ２２に書き込み直後の外来音データを読み出して、音声用の増幅率で増幅してスピーカ４から出力する。   (4) When the speaker continues to speak and the state in which the sound is included in the external sound continues, the state in which the sound output from the speaker 4 of the hearing aid 1 substantially matches the sound collected by the microphone 2 continues. The voice section detection unit 24 continues the process of analyzing and determining whether or not voice is included in the sound data output from the speaker 4. At this time, in the ring buffer 22, as shown in FIG. 5 (4), the output pointer and the input pointer move at the same speed, and the hearing aid 1 reads out the external sound data immediately after writing to the ring buffer 22, And output from the speaker 4.

（５）音声区間検出部２４は、発話者の発言停止により外来音データに音声が含まれていないことを、発話者の発言停止（時刻ｔ３）から１００ｍｓｅｃ後（時刻ｔ４）に検出すると、未検出信号を話速変換部２６及びゲインコントローラ２７へ出力する。話速変換部２６は、未検出信号を検出すると、音声の時間伸長による話速変換を開始する。   (5) When the voice section detection unit 24 detects that the voice is not included in the external sound data due to the stop of the speaker's speech after 100 msec (time t4) from the stop of the speaker's speech (time t3), The detection signal is output to the speech speed conversion unit 26 and the gain controller 27. When the speech speed conversion unit 26 detects an undetected signal, the speech speed conversion unit 26 starts speech speed conversion based on time extension of speech.

（６）補聴器１において、発話者の発言が停止した状態がしばらく続き、外来音に音声が含まれていない状態が連続すると、話速変換部２６は引き続き音声の時間伸長（話速変換）を行いながら、音声が途切れないようにリングバッファ２２から音声データの読み出しを続ける。このとき、リングバッファ２２では、時間伸長により話速が変換されるので、データの読み出しが遅くなるため、図５（６）に示すように、出力ポインタが徐々に入力ポインタから離れていく（シフトされる）。   (6) In the hearing aid 1, when the state where the speech of the speaker is stopped continues for a while and the state where no sound is included in the external sound continues, the speech speed conversion unit 26 continues to expand the speech time (speech speed conversion). While performing, the audio data is continuously read from the ring buffer 22 so that the audio is not interrupted. At this time, since the speech speed is converted by the time expansion in the ring buffer 22, the data reading is slowed down, so that the output pointer gradually moves away from the input pointer as shown in FIG. )

（７）話速変換の開始から約１ｓｅｃ〜５ｓｅｃ経過して、スピーカ４から出力する音声とマイク２で集音した音声とのずれが初期値である約１００ｍｓｅｃになると（時刻ｔ６）、話速変換部２６は音声の時間伸長による話速変換を停止する。このとき、リングバッファ２２では、図５（７）に示すように、入力ポインタが出力ポインタよりも１００ｍｓｅｃのディジタル音データ分進んだアドレスに位置する。   (7) When about 1 to 5 seconds have elapsed from the start of the speech speed conversion and the difference between the sound output from the speaker 4 and the sound collected by the microphone 2 reaches the initial value of about 100 msec (time t6), the speech speed The conversion unit 26 stops the speech speed conversion by the time expansion of the voice. At this time, in the ring buffer 22, as shown in FIG. 5 (7), the input pointer is located at an address advanced by 100 msec of digital sound data from the output pointer.

（８）次の音声区間を検出するまで（１）の状態と同様に、マイク２で外来音を集音してから約１００ｍｓｅｃ後に、環境音の増幅率の設定値に基づいて環境音を増幅してスピーカ４から音を出力する。このとき、図５（８）に示すように、（７）と同様、リングバッファ２２では、入力ポインタが出力ポインタよりも１００ｍｓｅｃのディジタル音データ分進んだアドレスに位置する。   (8) Until the next voice section is detected, the ambient sound is amplified based on the set value of the environmental sound amplification factor approximately 100 msec after the external sound is collected by the microphone 2 as in the state of (1). Then, sound is output from the speaker 4. At this time, as shown in FIG. 5 (8), as in (7), in the ring buffer 22, the input pointer is positioned at an address advanced by 100 msec of digital sound data from the output pointer.

また、ゲインコントローラ２７は、未検出信号を検出してから外来音に音声が含まれていない状態が１分間続くと、増幅率を２０％低下させる。また、外来音に音声が含まれていない状態が続くと、増幅率が環境音の増幅率になるまで、１分毎に２０％ずつ増幅率を低下させる。なお、増幅率は、上記のように段階的に低下させるようにしても良いし、所定の割合で直線的に低下させるようにしても良く、また、低下率は任意の値に設定できる。   Further, the gain controller 27 decreases the amplification factor by 20% when a state in which no sound is included in the external sound continues for 1 minute after detecting the undetected signal. Further, when a state where no sound is included in the external sound continues, the amplification factor is reduced by 20% every minute until the amplification factor becomes the amplification factor of the environmental sound. The amplification factor may be decreased stepwise as described above, or may be decreased linearly at a predetermined rate, and the decrease rate can be set to an arbitrary value.

さらに、音声区間検出部２４は、音声の時間伸長による話速変換中や増幅率の低下中に、発話者が発言を再開したことにより、外来音データに音声が含まれていることを検出すると音声検出信号を出力して、音声の時間圧縮による話速変換を話速変換部２６に、音声を強調するための増幅をゲインコントローラ２７に、直ちに開始させる。   Furthermore, when the speech section detection unit 24 detects that speech is included in the external sound data when the speaker resumes speaking during the conversion of the speech speed due to the time expansion of the speech or the decrease in the amplification factor, A voice detection signal is output, and the voice speed conversion unit 26 performs voice speed conversion by voice time compression, and the gain controller 27 immediately starts amplification for enhancing the voice.

補聴器１は上記のような処理を行うので、外来音を分析して音声を検出して、音声を強調するように増幅することができる。また、音声を検出すると時間圧縮による話速変換を行うので、１〜５秒後には補聴器１の入力音と出力音とをほぼ一致させることができ、その際には、使用者は音声のずれを感じることなく音声を聞くことができる。さらに、音声の検出が終了すると、時間伸長による話速変換を行うので、１〜５秒後には補聴器１の入力音と出力音との関係を初期状態に戻すことができるので、外来音に音声が含まれているか否かの判定を確実に行うことができる。加えて、音声の検出が終了すると、音声の増幅率を徐々に低下させるので、発話者が一呼吸おいて発言を続けた場合などに、音声の増幅率が大きく変動することがなく、使用者は違和感なく音声を聞くことができる。   Since the hearing aid 1 performs the processing as described above, it can analyze the external sound, detect the sound, and amplify the sound so as to enhance the sound. In addition, since the speech speed is converted by time compression when the voice is detected, the input sound and the output sound of the hearing aid 1 can be substantially matched after 1 to 5 seconds. You can listen to the sound without feeling. Further, when the voice detection is completed, the speech speed conversion is performed by extending the time, so that the relationship between the input sound and the output sound of the hearing aid 1 can be returned to the initial state after 1 to 5 seconds. Can be reliably determined. In addition, when the detection of the voice is completed, the amplification factor of the voice is gradually lowered. Therefore, when the speaker continues speaking after taking a breath, the amplification factor of the voice does not fluctuate greatly. Can hear the sound without any sense of incongruity.

ここで、上記の（２）で説明したように音声区間検出部２４が分析を終了して外来音データに音声が含まれていると判定した場合には、音声区間検出部２４から報知音発生部２８に信号を出力させて、報知音発生部２８で報知音を発生させるように設定することもできる。このように設定した場合、報知音発生部２８は、この音声検出信号を検出すると、報知音信号を生成してＤ／Ａコンバータ１５へ例えば約５０ｍｓｅｃの間この信号を出力して、スピーカ４から報知音を出力させる。また、この場合、話速変換部２６は、報知音発生部２８が報知音の信号を出力後にリングバッファ２２から音声が含まれている外来音データを読み出すようにすると良い。   Here, as described in the above (2), when the voice section detecting unit 24 finishes the analysis and determines that the sound is included in the external sound data, the voice section detecting unit 24 generates a notification sound. It is also possible to set so that the notification sound is generated by the notification sound generation unit 28 by outputting a signal to the unit 28. In this case, when the sound detection signal is detected, the notification sound generator 28 generates a notification sound signal and outputs this signal to the D / A converter 15 for about 50 msec, for example, from the speaker 4. A notification sound is output. In this case, the speech speed conversion unit 26 may read the external sound data including the sound from the ring buffer 22 after the notification sound generation unit 28 outputs the notification sound signal.

また、上記の説明では、音声が出力されることを報知する報知手段として、報知音発生部を例に挙げて説明したが、本発明はこれに限るものではなく、他の形態であっても良い。例えば、メガネ型の補聴器などの場合、補聴器の使用者が容易に確認できる位置にＬＥＤを設けて、このＬＥＤを点滅させることで音声が出力されることを報知するようにしても良い。また、耳かけ形やポケット形の補聴器の場合、振動用モータを設けて、振動により音声が出力されることを報知するようにしても良い。   In the above description, the notification sound generation unit has been described as an example of notification means for notifying that sound is output. However, the present invention is not limited to this, and may be in other forms. good. For example, in the case of a glasses-type hearing aid or the like, an LED may be provided at a position where the user of the hearing aid can easily check, and this LED may blink to notify that a sound is output. In the case of an ear-hook type or pocket-type hearing aid, a vibration motor may be provided to notify that sound is output by vibration.

なお、補聴器１において、音声の有無を分析・検出する時間や、音声の増幅率を低下させる時間や、話速変換を行う時間などは、補聴器１の使用者の好みに応じて変更することができる。また、補聴器１の環境音の増幅率や音声の増幅率も使用者の聴力や好みに応じて変更することができる。   In the hearing aid 1, the time for analyzing / detecting the presence / absence of speech, the time for reducing the amplification factor of speech, the time for performing speech speed conversion, and the like can be changed according to the preference of the user of the hearing aid 1. it can. Further, the environmental sound amplification factor and the sound amplification factor of the hearing aid 1 can also be changed according to the hearing ability and preference of the user.

また、補聴器１では、各種設定の調整などを行うために、補聴器１の入出力インタフェース１７をパソコン８と接続してデータをやりとり可能にしているので、補聴器１の使用者はパソコン８を使用して、ゲインコントローラ２７の環境音や音声の増幅率の設定など各種設定の調整や変更を容易に行うことができる。   Further, in the hearing aid 1, the user of the hearing aid 1 uses the personal computer 8 because the input / output interface 17 of the hearing aid 1 is connected to the personal computer 8 in order to adjust various settings. Thus, it is possible to easily adjust and change various settings such as setting of the environmental sound and the gain of the sound of the gain controller 27.

なお、以上の説明では、聴覚補助装置の一実施形態として補聴器を例に挙げて説明したが、本発明はこれに限定するものではない。例えば、テレビ電話のように発話者の画像と音声とを同時に出力する装置に、本発明の聴覚補助装置を内蔵させるようにして、この装置から出力する音が音声か否かに応じて、音の増幅率を変化させたり、話速変換を行ったりする構成にすると良い。これにより、発話者の音声を強調させることができ、難聴者が容易にこの装置を使用することができる。   In the above description, a hearing aid has been described as an example of an embodiment of a hearing aid, but the present invention is not limited to this. For example, a device that outputs an image and sound of a speaker at the same time, such as a video phone, is built in with the hearing aid device of the present invention, and the sound is output depending on whether the sound output from this device is sound or not. It is preferable to adopt a configuration in which the gain of the voice is changed or the speech speed is converted. Thereby, the voice of the speaker can be emphasized, and the hearing impaired person can easily use this apparatus.

補聴器の概略構成を示したブロック図である。It is the block diagram which showed schematic structure of the hearing aid. 補聴器が内蔵するＤＳＰの概略構成を示したブロック図である。It is the block diagram which showed schematic structure of DSP which a hearing aid contains. 補聴器の動作を説明するためのタイミングチャートである。It is a timing chart for demonstrating operation | movement of a hearing aid. 補聴器における外来音データの音声検出動作を説明するための図である。It is a figure for demonstrating the audio | voice detection operation | movement of the external sound data in a hearing aid. 図３に示した各タイミングにおけるリングバッファの入力ポインタ及び出力ポインタの関係を示した図である。It is the figure which showed the relationship between the input pointer and output pointer of a ring buffer in each timing shown in FIG.

符号の説明Explanation of symbols

１−補聴器１、２−マイク、３−信号処理部、４−スピーカ、
１１−Ａ／Ｄコンバータ、１２−ＤＳＰ、１３−ＣＰＵ、１４−操作部、
１５−Ｄ／Ａコンバータ、１６−メモリ、１７−入出力インタフェース 1- hearing aid 1, 2-microphone, 3-signal processing unit, 4-speaker,
11-A / D converter, 12-DSP, 13-CPU, 14-operation unit,
15-D / A converter, 16-memory, 17-input / output interface

Claims (5)

外来音を集音する集音手段と、
前記集音手段が集音した外来音のデータを一時記憶するバッファ手段と、
前記集音手段が集音した外来音のデータを順次更新しながら前記バッファ手段に書き込む書込手段と、
前記バッファ手段に記憶されている一定期間分の外来音データ中に音声が有るか否かを判定する判定手段と、
前記判定手段が音声有りと判定しているとき、前記書込手段による書き込み直後の外来音データを前記バッファ手段から読み出し、前記判定手段が音声無しと判定しているとき、前記書込手段による書き込みから前記一定期間経過した前記判定手段による判定済みの外来音データを読み出し、前記判定手段の判定結果が音声無しから音声有りに変化したとき、前記バッファ手段から読み出す外来音データを前記判定済みのデータから書き込み直後のデータへ徐々にシフトしてゆく読出手段と、
前記判定手段が音声有りと判定している外来音データと、前記判定手段が音声無しと判定している外来音データと、を異なる増幅率で増幅して出力する増幅手段と、
を備え、
前記増幅手段は、前記判定手段の判定結果が音声有りから音声無しに変化したとき、音声無しと判定された外来音用の増幅率まで所定の割合で増幅率を下げながら外来音データを増幅する聴覚補助装置。 Sound collecting means for collecting foreign sounds;
Buffer means for temporarily storing foreign sound data collected by the sound collecting means;
Writing means for writing to the buffer means while sequentially updating the data of the external sound collected by the sound collecting means;
Determining means for determining whether or not there is sound in the external sound data for a predetermined period stored in the buffer means;
When the determination means determines that there is sound, the external sound data immediately after the writing by the writing means is read from the buffer means, and when the determination means determines that there is no sound, the writing by the writing means The external sound data that has been determined by the determination unit after a certain period of time is read out, and the external sound data that is read from the buffer unit when the determination result of the determination unit changes from no sound to presence of sound Reading means that gradually shifts from writing to data immediately after writing;
Amplifying means for amplifying and outputting the external sound data determined by the determining means with the sound and the external sound data determined by the determining means with no sound at different amplification rates;
With
The amplification means amplifies the external sound data while decreasing the amplification factor at a predetermined rate to the amplification factor for the external sound determined to have no sound when the determination result of the determination means changes from the presence of the sound to the absence of the sound. Hearing aid device. 前記読出手段が前記バッファ手段から読み出す外来音データをシフトしているとき、そのシフトに合わせて外来音データの話速を変化する話速変換手段を備えた請求項１に記載の聴覚補助装置。   The hearing aid apparatus according to claim 1, further comprising: speech speed conversion means for changing the speech speed of the external sound data in accordance with the shift when the reading means shifts the external sound data read from the buffer means. 前記読出手段は、前記判定手段の判定結果が音声有りから音声無しに変化したとき、前記バッファ手段から読み出す外来音データを書き込み直後のデータから前記判定済みのデータへ徐々にシフトする請求項１または２に記載の聴覚補助装置。   The reading means gradually shifts the external sound data read from the buffer means from the data immediately after writing to the determined data when the determination result of the determining means changes from the presence of sound to the absence of sound. The hearing aid apparatus according to 2. 前記話速変換手段は、前記読出手段が前記バッファ手段から読み出す外来音データをシフトしているとき、そのシフトに合わせて外来音データの話速を変化する請求項３に記載の聴覚補助装置。   4. The hearing assistance apparatus according to claim 3, wherein when the reading means shifts the external sound data read from the buffer means, the speech speed converting means changes the speaking speed of the external sound data in accordance with the shift. 前記判定手段が音声有りと判定すると、その旨を報知する報知手段を備えた請求項１乃至４のいずれかに記載の聴覚補助装置。 The hearing aid apparatus according to any one of claims 1 to 4 , further comprising an informing means for informing that when the judging means judges that there is sound.
JP2003290685A 2003-08-08 2003-08-08 Hearing aids Expired - Fee Related JP4127155B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2003290685A JP4127155B2 (en) 2003-08-08 2003-08-08 Hearing aids

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2003290685A JP4127155B2 (en) 2003-08-08 2003-08-08 Hearing aids

Publications (2)

Publication Number Publication Date
JP2005064745A JP2005064745A (en) 2005-03-10
JP4127155B2 true JP4127155B2 (en) 2008-07-30

Family

ID=34368643

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2003290685A Expired - Fee Related JP4127155B2 (en) 2003-08-08 2003-08-08 Hearing aids

Country Status (1)

Country Link
JP (1) JP4127155B2 (en)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008145841A (en) * 2006-12-12 2008-06-26 Sony Corp Reproduction device, reproduction method, signal processing device and signal processing method
JP5054477B2 (en) * 2007-09-26 2012-10-24 日本放送協会 Hearing aid
CN102362510A (en) * 2009-03-24 2012-02-22 松下电器产业株式会社 Sound and image reproduction system, hearing aid, and sound and image processing device
WO2011055489A1 (en) * 2009-11-04 2011-05-12 パナソニック株式会社 Hearing aid
US20130234826A1 (en) * 2011-01-13 2013-09-12 Nikon Corporation Electronic device and electronic device control program
JP5771998B2 (en) * 2011-01-13 2015-09-02 株式会社ニコン Electronic device and electronic device control program

Also Published As

Publication number Publication date
JP2005064745A (en) 2005-03-10

Similar Documents

Publication Publication Date Title
JP2955247B2 (en) Speech speed conversion method and apparatus
JP2009178783A (en) Communication robot and its control method
JPWO2008007616A1 (en) Non-voice utterance input warning device, method and program
JP4127155B2 (en) Hearing aids
JP2000152394A (en) Hearing aid for moderately hard of hearing, transmission system having provision for the moderately hard of hearing, recording and reproducing device for the moderately hard of hearing and reproducing device having provision for the moderately hard of hearing
JP3553828B2 (en) Voice storage and playback method and voice storage and playback device
JP3961616B2 (en) Speech speed conversion method and hearing aid with speech speed conversion function
JP4134844B2 (en) Hearing aids
JP2012208218A (en) Electronic apparatus
JPS6257040B2 (en)
JP2007267331A (en) Combination microphone system for speaking voice collection
JPH0916193A (en) Speech-rate conversion device
JP3284968B2 (en) Hearing aid with speech speed conversion function
JP2959468B2 (en) Speech rate conversion method and hearing aid with speech rate conversion function
JP2008042740A (en) Non-audible murmur pickup microphone
JP2905112B2 (en) Environmental sound analyzer
JP3632384B2 (en) Hearing aids
JP4381108B2 (en) Time signal processor in speech speed converter
JPH0772896A (en) Device for compressing/expanding sound
JP3257379B2 (en) Hearing aid with speech speed conversion function
JP4005166B2 (en) Audio signal processing circuit
JP2870421B2 (en) Hearing aid with speech speed conversion function
JPH086594A (en) Noise eliminating device for bone transmitted voice
JP4882152B2 (en) Speech speed detection method and audio signal processing apparatus
JP3085237B2 (en) Speech speed converter

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20060323

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20070628

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20070807

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20071009

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20080422

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20080505

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110523

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130523

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140523

Year of fee payment: 6

LAPS Cancellation because of no payment of annual fees