JP2021047436A - Voice input output device, hearing aid, voice input output method and voice input output program - Google Patents

Voice input output device, hearing aid, voice input output method and voice input output program Download PDF

Info

Publication number
JP2021047436A
JP2021047436A JP2020200610A JP2020200610A JP2021047436A JP 2021047436 A JP2021047436 A JP 2021047436A JP 2020200610 A JP2020200610 A JP 2020200610A JP 2020200610 A JP2020200610 A JP 2020200610A JP 2021047436 A JP2021047436 A JP 2021047436A
Authority
JP
Japan
Prior art keywords
voice
noise
output
audio
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2020200610A
Other languages
Japanese (ja)
Other versions
JP7214704B2 (en
Inventor
孝司 大杉
Koji Osugi
孝司 大杉
隆行 荒川
Takayuki Arakawa
隆行 荒川
昭彦 杉山
Akihiko Sugiyama
昭彦 杉山
良次 宮原
Ryoji Miyahara
良次 宮原
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Platforms Ltd
NEC Corp
Original Assignee
NEC Platforms Ltd
NEC Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Platforms Ltd, NEC Corp filed Critical NEC Platforms Ltd
Priority to JP2020200610A priority Critical patent/JP7214704B2/en
Publication of JP2021047436A publication Critical patent/JP2021047436A/en
Priority to JP2023003670A priority patent/JP2023040244A/en
Application granted granted Critical
Publication of JP7214704B2 publication Critical patent/JP7214704B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Circuit For Audible Band Transducer (AREA)
  • Soundproofing, Sound Blocking, And Sound Damping (AREA)

Abstract

To provide a voice input output device, a hearing aid, a voice input output method, and a voice input output program which perform noise cancellation and generate a high-quality main voice signal.SOLUTION: A voice input output device 100 includes: a noise acquisition unit 102 for acquiring an external noise 121 coming from the outside of a user 120; a voice output unit 103 which receives an input of a voice signal 132, and outputs an output voice 131 to an external auditory canal 110 of the user 120; a main voice acquisition unit 101 which acquires a mixed voice in which the external noise 121, the output voice 131, and a main voice 111 coming from the inside of the user 120 are mixed, and outputs a mixed voice signal 112; and a noise cancellation unit 104 which processes the mixed voice signal using a noise signal based on the external noise 121.SELECTED DRAWING: Figure 1

Description

本発明は、音声入出力装置、補聴器、音声入出力方法および音声入出力プログラムに関する。 The present invention relates to a voice input / output device, a hearing aid, a voice input / output method, and a voice input / output program.

上記技術分野において、特許文献1には、マイク部の不使用時に第1スピーカおよび第2スピーカから音声を出力し、マイク部の使用時に第1スピーカの音声出力を停止して第2スピーカから音声を出力する音声入出力装置が開示されている。特許文献2には、環境騒音に対して装着部の筐体の遮音性能により発話収音信号のS/Nを確保した上で、NC処理により内部空間におけるノイズを抑制することで、発話収音信号のS/N向上を図る技術が開示されている。 In the above technical field, Patent Document 1 states that when the microphone unit is not used, sound is output from the first speaker and the second speaker, and when the microphone unit is used, the sound output of the first speaker is stopped and the sound is output from the second speaker. A voice input / output device that outputs a speaker is disclosed. In Patent Document 2, the sound insulation performance of the housing of the mounting portion is used to secure the S / N of the utterance sound collection signal against environmental noise, and then the noise in the internal space is suppressed by NC processing to suppress the utterance sound collection. A technique for improving signal S / N is disclosed.

特開2015−61115号公報Japanese Unexamined Patent Publication No. 2015-61115 特開2017−11754号公報Japanese Unexamined Patent Publication No. 2017-11754

しかしながら、上記特許文献1に記載の技術では、エコーが生じないためエコーキャンセルを行う必要がなかった。また、上記特許文献2に記載の技術では、内部マイクロホンに環境騒音が入らないため内部マイクロホンに入力された音声信号から外部ノイズをキャンセルする必要がなかったため、高品質な主音声信号を生成できなかった。 However, in the technique described in Patent Document 1, it is not necessary to perform echo cancellation because echo does not occur. Further, in the technique described in Patent Document 2, since environmental noise does not enter the internal microphone, it is not necessary to cancel the external noise from the audio signal input to the internal microphone, so that a high-quality main audio signal cannot be generated. It was.

本発明の目的は、上述の課題を解決する技術を提供することにある。 An object of the present invention is to provide a technique for solving the above-mentioned problems.

上記目的を達成するため、本発明に係る音声入出力装置は、
ユーザの外部から到来する外部雑音を取得するための雑音取得部と、
音声信号の入力を受け付け、前記ユーザの外耳道に対して出力音声を出力する音声出力部と、
前記外部雑音と前記出力音声と前記ユーザの内部から到来する主音声とが混合された混合音声を取得して、混合音声信号を出力する主音声取得部と、
前記外部雑音に基づく雑音信号を用いて、前記混合音声信号を処理するノイズキャンセル部と、
を備える。
In order to achieve the above object, the audio input / output device according to the present invention
A noise acquisition unit for acquiring external noise coming from outside the user,
An audio output unit that accepts audio signal input and outputs output audio to the user's ear canal.
A main voice acquisition unit that acquires a mixed voice in which the external noise, the output voice, and the main voice coming from inside the user are mixed, and outputs the mixed voice signal.
A noise canceling unit that processes the mixed audio signal using the noise signal based on the external noise, and
To be equipped.

上記目的を達成するため、本発明に係る補聴器は、
ユーザの外部から到来する外部雑音を取得するための雑音取得部と、
音声信号の入力を受け付け、前記ユーザの外耳道に対して出力音声を出力する音声出力部と、
前記外部雑音と前記出力音声と前記ユーザの内部から到来する主音声とが混合された混合音声を取得して、混合音声信号を出力する主音声取得部と、
前記外部雑音に基づく雑音信号を用いて、前記混合音声信号を処理するノイズキャンセル部と、
を備えた。
In order to achieve the above object, the hearing aid according to the present invention
A noise acquisition unit for acquiring external noise coming from outside the user,
An audio output unit that accepts audio signal input and outputs output audio to the user's ear canal.
A main voice acquisition unit that acquires a mixed voice in which the external noise, the output voice, and the main voice coming from inside the user are mixed, and outputs the mixed voice signal.
A noise canceling unit that processes the mixed audio signal using the noise signal based on the external noise, and
Equipped with.

上記目的を達成するため、本発明に係る音声入出力方法は、
ユーザの外部から到来する外部雑音を取得するための雑音取得ステップと、
音声信号の入力を受け付け、前記ユーザの外耳道に対して出力音声を出力する音声出力ステップと、
前記外部雑音と前記出力音声と前記ユーザの内部から到来する主音声とが混合された混合音声を取得して、混合音声信号を出力する主音声取得ステップと、
前記外部雑音に基づく雑音信号を用いて、前記混合音声信号を処理するノイズキャンセルステップと、
を含む。
In order to achieve the above object, the audio input / output method according to the present invention is used.
A noise acquisition step for acquiring external noise coming from outside the user,
An audio output step that accepts an input of an audio signal and outputs an output audio to the user's ear canal.
A main voice acquisition step of acquiring a mixed voice in which the external noise, the output voice, and the main voice coming from the inside of the user are mixed and outputting the mixed voice signal.
A noise canceling step of processing the mixed audio signal using the noise signal based on the external noise, and
including.

上記目的を達成するため、本発明に係る音声入出力プログラムは、
ユーザの外部から到来する外部雑音を取得するための雑音取得ステップと、
音声信号の入力を受け付け、前記ユーザの外耳道に対して出力音声を出力する音声出力ステップと、
前記外部雑音と前記出力音声と前記ユーザの内部から到来する主音声とが混合された混合音声を取得して、混合音声信号を出力する主音声取得ステップと、
前記外部雑音に基づく雑音信号を用いて、前記混合音声信号を処理するノイズキャンセルステップと、
をコンピュータに実行させる。
In order to achieve the above object, the voice input / output program according to the present invention
A noise acquisition step for acquiring external noise coming from outside the user,
An audio output step that accepts an input of an audio signal and outputs an output audio to the user's ear canal.
A main voice acquisition step of acquiring a mixed voice in which the external noise, the output voice, and the main voice coming from the inside of the user are mixed and outputting the mixed voice signal.
A noise canceling step of processing the mixed audio signal using the noise signal based on the external noise, and
Let the computer run.

本発明によれば、ノイズキャンセルを行って高品質な主音声信号を生成することができる。 According to the present invention, noise cancellation can be performed to generate a high-quality main audio signal.

本発明の第1実施形態に係る音声入出力装置の構成を示すブロック図である。It is a block diagram which shows the structure of the audio input / output device which concerns on 1st Embodiment of this invention. 本発明の第2実施形態に係る音声入出力装置の構成を示す図である。It is a figure which shows the structure of the audio input / output device which concerns on 2nd Embodiment of this invention. 本発明の第2実施形態に係る音声入出力装置の音声処理部の詳しい構成を示す図である。It is a figure which shows the detailed structure of the voice processing part of the voice input / output device which concerns on 2nd Embodiment of this invention. 本発明の第2実施形態に係る音声入出力装置の制御部の係数処理を説明する図である。It is a figure explaining the coefficient processing of the control part of the voice input / output device which concerns on 2nd Embodiment of this invention. 本発明の第3実施形態に係る音声入出力装置の構成を示す図である。It is a figure which shows the structure of the audio input / output device which concerns on 3rd Embodiment of this invention. 本発明の第4実施形態に係る音声入出力装置の構成を示す図である。It is a figure which shows the structure of the audio input / output device which concerns on 4th Embodiment of this invention. 本発明の第5実施形態に係る補聴器の構成を示す図である。It is a figure which shows the structure of the hearing aid which concerns on 5th Embodiment of this invention. 本発明の第5実施形態に係る補聴器の構成を示す図である。It is a figure which shows the structure of the hearing aid which concerns on 5th Embodiment of this invention. 本発明の第5実施形態に係る補聴器の構成を示す図である。It is a figure which shows the structure of the hearing aid which concerns on 5th Embodiment of this invention. 本発明の第6実施形態に係る音声入出力装置の構成を示す図である。It is a figure which shows the structure of the audio input / output device which concerns on 6th Embodiment of this invention. 本発明の第7実施形態に係る音声入出力装置の構成を示す図である。It is a figure which shows the structure of the audio input / output device which concerns on 7th Embodiment of this invention. 第2実施形態を信号処理プログラムにより構成する場合に、その信号処理プログラムを実行するコンピュータの構成図である。It is a block diagram of the computer which executes the signal processing program when the 2nd Embodiment is configured by the signal processing program. CPU820が実行する処理の流れを示すフローチャートである。It is a flowchart which shows the flow of the process which CPU 820 executes. CPU820が実行する処理の流れを示すフローチャートである。It is a flowchart which shows the flow of the process which CPU 820 executes. CPU820が実行する処理の流れを示すフローチャートである。It is a flowchart which shows the flow of the process which CPU 820 executes.

以下に、本発明を実施するための形態について、図面を参照して、例示的に詳しく説明記載する。ただし、以下の実施の形態に記載されている、構成、数値、処理の流れ、機能要素などは一例に過ぎず、その変形や変更は自由であって、本発明の技術範囲を以下の記載に限定する趣旨のものではない。また、下記図面において、一方向性の矢印は、ある信号の流れの方向を端的に示したものであり、双方向性を排除するものではない。なお、以下の説明中における「音声信号」とは、音声その他の音響に従って生ずる直接的の電気的変化であって、音声その他の音響を伝送するためのものをいい、音声に限定されない。 Hereinafter, embodiments for carrying out the present invention will be described in detail exemplarily with reference to the drawings. However, the configuration, numerical values, processing flow, functional elements, etc. described in the following embodiments are merely examples, and modifications and changes thereof are free, and the technical scope of the present invention is described below. It is not intended to be limited. Further, in the drawings below, the unidirectional arrow simply indicates the direction of the flow of a certain signal, and does not exclude bidirectionality. The "voice signal" in the following description refers to a direct electrical change caused by voice or other sound, and is used to transmit voice or other sound, and is not limited to voice.

[第1実施形態]
本発明の第1実施形態としての音声入出力装置100について、図1を用いて説明する。
[First Embodiment]
The voice input / output device 100 as the first embodiment of the present invention will be described with reference to FIG.

図1に示すように、音声入出力装置100は、主音声取得部101、雑音取得部102、音声出力部103、ノイズキャンセル部104およびエコーキャンセル部105を含む。雑音取得部102は、ユーザ120の体の外側に向けて配置され、ユーザ120の外部から到来する外部雑音121を取得(捕捉)する。音声出力部103は、音声信号132の入力を受け付け、ユーザ120の外耳道110に対して出力音声131を出力する。主音声取得部101は、外部雑音121と出力音声131とユーザ120の声帯から外耳道内を伝わってきたユーザ120の主音声111とが混合された混合音声を取得(捕捉)して、混合音声信号112を出力する。ノイズキャンセル部104は、外部雑音121に基づく雑音信号を用いて、混合音声信号112を処理する。エコーキャンセル部105は、音声信号132を用いて、混合音声信号112を処理する。 As shown in FIG. 1, the voice input / output device 100 includes a main voice acquisition unit 101, a noise acquisition unit 102, a voice output unit 103, a noise canceling unit 104, and an echo canceling unit 105. The noise acquisition unit 102 is arranged toward the outside of the body of the user 120, and acquires (captures) the external noise 121 coming from the outside of the user 120. The voice output unit 103 receives the input of the voice signal 132 and outputs the output voice 131 to the ear canal 110 of the user 120. The main voice acquisition unit 101 acquires (captures) a mixed voice in which the external noise 121, the output voice 131, and the main voice 111 of the user 120 transmitted through the ear canal from the vocal cords of the user 120 are mixed, and the mixed voice signal. Outputs 112. The noise canceling unit 104 processes the mixed audio signal 112 by using the noise signal based on the external noise 121. The echo canceling unit 105 processes the mixed voice signal 112 using the voice signal 132.

本実施形態によれば、ノイズキャンセルとエコーキャンセルとの両方を行って高品質な主音声信号を生成することができる。 According to this embodiment, it is possible to generate a high-quality main audio signal by performing both noise cancellation and echo cancellation.

[第2実施形態]
次に本発明の第2実施形態に係る音声入出力装置について、図2A乃至図3を用いて説明する。図2Aは、本実施形態に係る音声入出力装置の構成を示す図である。音声入出力装置200は、主音声取得部としての内部マイク201、雑音取得部としての外部マイク202、音声出力部としてのスピーカ203、音声処理部290を有する。音声処理部290は、ノイズキャンセル部204およびエコーキャンセル部205を有する。音声入出力装置200は、インナーイヤー型のヘッドホン、カナル型のヘッドホン、両耳型のヘッドホン、片耳型のヘッドホン、モノラル型のヘッドホンであってもよいが、これらには限定されない。また、音声入出力装置200は、ヘッドホンには限られず、イヤホン、ヘッドセットであってもよい。
[Second Embodiment]
Next, the audio input / output device according to the second embodiment of the present invention will be described with reference to FIGS. 2A to 3. FIG. 2A is a diagram showing a configuration of an audio input / output device according to the present embodiment. The voice input / output device 200 includes an internal microphone 201 as a main voice acquisition unit, an external microphone 202 as a noise acquisition unit, a speaker 203 as a voice output unit, and a voice processing unit 290. The voice processing unit 290 has a noise canceling unit 204 and an echo canceling unit 205. The audio input / output device 200 may be, but is not limited to, earbud headphones, canal headphones, binaural headphones, one-ear headphones, and monaural headphones. Further, the audio input / output device 200 is not limited to headphones, but may be earphones or headsets.

内部マイク201は、ユーザ270の外耳道210に向けられた内部マイクである。内部マイク201で捕捉されたユーザ270の主音声211は、送信信号250として所定の送信先に送信される。 The internal microphone 201 is an internal microphone directed at the ear canal 210 of the user 270. The main voice 211 of the user 270 captured by the internal microphone 201 is transmitted as a transmission signal 250 to a predetermined transmission destination.

内部マイク201は、外部雑音221と出力音声231と主音声211とが混合された混合音声を捕捉して、混合音声信号212を出力する。内部マイク201は、密閉空間である外耳道210に配置されていても、外部雑音221の音量が大きい場合には、ユーザ270の頭部を通過して外耳道内に伝播された外部雑音221の一部を捕捉してしまう。さらに、スピーカ203から音声が出力されている場合には、内部マイク201は、その音声も捕捉してしまう。 The internal microphone 201 captures the mixed voice in which the external noise 221 and the output voice 231 and the main voice 211 are mixed, and outputs the mixed voice signal 212. Even if the internal microphone 201 is arranged in the ear canal 210, which is a closed space, when the volume of the external noise 221 is loud, a part of the external noise 221 that has passed through the head of the user 270 and propagated into the ear canal. Will be captured. Further, when the sound is output from the speaker 203, the internal microphone 201 also captures the sound.

外部マイク202は、ユーザ270の体の外側に向けて配置され、外部マイク202は、ユーザ270の外部から到来する外部雑音221を捕捉する。例えば、外部マイク202は、ユーザ270の周辺からの外部雑音221を捕捉する外部マイクである。外部マイク202は、外部雑音221を捕捉して、雑音信号222を生成する。 The external microphone 202 is arranged toward the outside of the body of the user 270, and the external microphone 202 captures the external noise 221 coming from the outside of the user 270. For example, the external microphone 202 is an external microphone that captures the external noise 221 from the periphery of the user 270. The external microphone 202 captures the external noise 221 and generates a noise signal 222.

通信部260が、受信した受信信号240は、出力音声信号232に変換され、スピーカ203に入力される。スピーカ203は、出力音声信号232の入力を受け付け、ユーザ270の外耳道210に対して出力音声231を出力する。 The received signal 240 received by the communication unit 260 is converted into an output voice signal 232 and input to the speaker 203. The speaker 203 receives the input of the output voice signal 232 and outputs the output voice 231 to the ear canal 210 of the user 270.

ノイズキャンセル部204は、外部マイク202が捕捉した外部雑音221に基づく雑音信号を用いて、内部マイク201が捕捉した混合音声から出力された混合音声信号212を処理する。ユーザ270の主音声211に外部雑音221が混ざった混合音声を内部マイク201が捕捉する。 The noise canceling unit 204 processes the mixed voice signal 212 output from the mixed voice captured by the internal microphone 201 by using the noise signal based on the external noise 221 captured by the external microphone 202. The internal microphone 201 captures the mixed voice in which the main voice 211 of the user 270 is mixed with the external noise 221.

エコーキャンセル部205は、スピーカ203に入力される出力音声信号232を用いて、内部マイク201が出力した混合音声信号212にエコーキャンセル処理を加える。 The echo canceling unit 205 applies an echo canceling process to the mixed audio signal 212 output by the internal microphone 201 by using the output audio signal 232 input to the speaker 203.

通信部260は、受信信号240を受信し、出力音声信号232をスピーカ203に送る。また、通信部260は、音声処理部290で生成された音声信号を受け取り、外部に送信信号250として送信する。 The communication unit 260 receives the received signal 240 and sends the output voice signal 232 to the speaker 203. Further, the communication unit 260 receives the voice signal generated by the voice processing unit 290 and transmits it to the outside as a transmission signal 250.

図2Bは、本実施形態に係る音声入出力装置の音声処理部の詳しい構成を示す図である。ノイズキャンセル部204は、適応フィルタ241と加算器220とを有する。ノイズキャンセル部204には、外部マイク202で生成した外部雑音信号222が入力される。ノイズキャンセル部204は、入力された外部雑音221に基づく外部雑音信号222を用いて、混合音声信号212を処理する。ノイズキャンセル部204は、適応フィルタ241を駆動して、混合音声信号に含まれる雑音信号の擬似信号(擬似雑音信号242)を生成する。加算器220は、擬似雑音信号242を内部マイク201の混合音声信号212から減算することで、雑音の抑圧を行う。加算器220から出力された擬似主音声信号291は、残留雑音を含み、適応フィルタ241の係数更新に利用される。 FIG. 2B is a diagram showing a detailed configuration of a voice processing unit of the voice input / output device according to the present embodiment. The noise canceling unit 204 has an adaptive filter 241 and an adder 220. The external noise signal 222 generated by the external microphone 202 is input to the noise canceling unit 204. The noise canceling unit 204 processes the mixed audio signal 212 by using the external noise signal 222 based on the input external noise 221. The noise canceling unit 204 drives the adaptive filter 241 to generate a pseudo signal (pseudo noise signal 242) of the noise signal included in the mixed audio signal. The adder 220 suppresses noise by subtracting the pseudo noise signal 242 from the mixed audio signal 212 of the internal microphone 201. The pseudo main audio signal 291 output from the adder 220 contains residual noise and is used for updating the coefficients of the adaptive filter 241.

外部マイク202が捕捉した外部雑音信号222は、制御部280にも入力される。制御部280は、入力された外部雑音信号222に基づいて、ノイズキャンセル部204による処理を制御する。制御部280には、外部雑音信号222、擬似雑音信号242、擬似主音声信号291が入力され、制御部280は、これらに基づいて適応フィルタ241の係数を生成して、係数の更新のタイミングを制御する。 The external noise signal 222 captured by the external microphone 202 is also input to the control unit 280. The control unit 280 controls the processing by the noise canceling unit 204 based on the input external noise signal 222. An external noise signal 222, a pseudo noise signal 242, and a pseudo main audio signal 291 are input to the control unit 280, and the control unit 280 generates a coefficient of the adaptive filter 241 based on these to determine the timing of updating the coefficient. Control.

擬似主音声信号291は、エコーキャンセル部205に入力される。エコーキャンセル部205は、スピーカ203に入力される出力音声信号232を用いて、内部マイク201が出力した混合音声信号212に対してエコーキャンセル処理を加える。エコーキャンセル部205は、適応フィルタ251と加算器230とを有する。適応フィルタ251は、出力音声信号232を用いて、擬似エコー信号252を生成する。加算器230は、擬似主音声信号291から擬似エコー信号252を減算して、擬似主音声信号292を生成する。制御部280には、出力音声信号232、擬似主音声信号291,292が入力され、制御部280は、これらに基づいて適応フィルタ251の係数を生成して、係数の更新のタイミングを制御する。 The pseudo main voice signal 291 is input to the echo canceling unit 205. The echo canceling unit 205 applies an echo canceling process to the mixed audio signal 212 output by the internal microphone 201 by using the output audio signal 232 input to the speaker 203. The echo canceling unit 205 has an adaptive filter 251 and an adder 230. The adaptive filter 251 uses the output audio signal 232 to generate a pseudo-echo signal 252. The adder 230 subtracts the pseudo echo signal 252 from the pseudo main audio signal 291 to generate the pseudo main audio signal 292. The output audio signal 232 and the pseudo main audio signal 291,292 are input to the control unit 280, and the control unit 280 generates a coefficient of the adaptive filter 251 based on these to control the timing of updating the coefficient.

内部マイク201が捕捉した混合音声信号212に混ざり込んだ出力音声信号232の一部を取り除くために、エコーキャンセル部205は、入力された音声信号を用いて、混合音声信号212にエコーキャンセル処理を施す。 In order to remove a part of the output audio signal 232 mixed in the mixed audio signal 212 captured by the internal microphone 201, the echo canceling unit 205 uses the input audio signal to perform echo cancel processing on the mixed audio signal 212. Give.

このように、エコーキャンセル部205は、ノイズキャンセル処理後の音声信号に対して、エコーキャンセル処理を施す。エコーキャンセル部205は、例えば、スピーカ203から音楽が流れている状態で、ユーザが発声した場合にも、内部マイク201で捕捉した混合音声信号からユーザの声をクリアに抽出できる。 In this way, the echo canceling unit 205 performs the echo canceling process on the audio signal after the noise canceling process. For example, the echo canceling unit 205 can clearly extract the user's voice from the mixed voice signal captured by the internal microphone 201 even when the user utters while music is flowing from the speaker 203.

通信部260は、ノイズキャンセル部およびエコーキャンセル部で処理された擬似主音声信号292を受け取り、外部へ送信信号250として送信する。 The communication unit 260 receives the pseudo main voice signal 292 processed by the noise canceling unit and the echo canceling unit, and transmits the pseudo main voice signal 292 to the outside as a transmission signal 250.

図2Cは、本実施形態に係る音声入出力装置200の制御部280の係数処理を説明する図である。上述したように、ノイズキャンセル部204およびエコーキャンセル部205はそれぞれ、適応フィルタ241,251を用いてノイズキャンセル処理およびエコーキャンセル処理を行う。図2Cにおいて、縦軸は更新量(学習量)を表し、横軸はS/N(信号対雑音比)を表している。グラフ208は、ノイズキャンセル部204の適応フィルタ241の係数の更新量を示している。グラフ209は、エコーキャンセル部205の適応フィルタ251の係数の更新量を示している。グラフ208およびグラフ209に示したように、制御部280は、適応フィルタ241の更新処理を行い、適応フィルタ241の更新処理が収束するまでの間は、適応フィルタ251の更新は行わない。つまり、制御部280は、適応フィルタ241の更新処理が収束してから、適応フィルタ251の更新処理を行う。すなわち、制御部280は、どちらか一方の適応フィルタの更新を行っている場合には、他方の適応フィルタの更新は行わず、両方の適応フィルタ241,251が同時に更新されることはない。ノイズキャンセル部204およびエコーキャンセル部205がON/OFFされるのではなく、適応フィルタ241,251の更新(学習)がON/OFFされ、シーソーのように適応フィルタ241,251の更新が行われる。適応フィルタ241,251は、ある程度更新が進むと、ほとんどフィルタ係数が変わらない状態となる。このような状態となると、適応フィルタ241,251のフィルタ係数が決まるので、原則として、制御部280は、適応フィルタ241,251の再更新は行わない。 FIG. 2C is a diagram illustrating coefficient processing of the control unit 280 of the voice input / output device 200 according to the present embodiment. As described above, the noise canceling unit 204 and the echo canceling unit 205 perform the noise canceling process and the echo canceling process using the adaptive filters 241,251, respectively. In FIG. 2C, the vertical axis represents the update amount (learning amount), and the horizontal axis represents the S / N (signal-to-noise ratio). Graph 208 shows the update amount of the coefficient of the adaptive filter 241 of the noise canceling unit 204. Graph 209 shows the update amount of the coefficient of the adaptive filter 251 of the echo canceling unit 205. As shown in Graph 208 and Graph 209, the control unit 280 updates the adaptive filter 241 and does not update the adaptive filter 251 until the update process of the adaptive filter 241 converges. That is, the control unit 280 performs the update process of the adaptive filter 251 after the update process of the adaptive filter 241 has converged. That is, when one of the adaptive filters is updated, the control unit 280 does not update the other adaptive filter, and both adaptive filters 241,251 are not updated at the same time. The noise canceling unit 204 and the echo canceling unit 205 are not turned ON / OFF, but the update (learning) of the adaptive filters 241,251 is turned ON / OFF, and the adaptive filters 241,251 are updated like a seesaw. When the adaptive filters 241,251 are updated to some extent, the filter coefficients are almost unchanged. In such a state, the filter coefficient of the adaptive filter 241,251 is determined. Therefore, in principle, the control unit 280 does not re-update the adaptive filter 241,251.

また、制御部280が、適応フィルタ241の更新を行うタイミングは、内部マイク201が主音声211を捕捉せず、スピーカ203から出力音声231を出力していないタイミングである。また、制御部280が、適応フィルタ251の更新を行うタイミングは、スピーカ203が出力音声231を出力しているタイミングである。 Further, the timing at which the control unit 280 updates the adaptive filter 241 is the timing at which the internal microphone 201 does not capture the main voice 211 and the output voice 231 is not output from the speaker 203. Further, the timing at which the control unit 280 updates the adaptive filter 251 is the timing at which the speaker 203 outputs the output voice 231.

また、制御部280は、内部マイク201が主音声211を捕捉し、スピーカ203から出力音声231を出力しているタイミングでは、適応フィルタ241,251の更新を行わない。 Further, the control unit 280 does not update the adaptive filters 241,251 at the timing when the internal microphone 201 captures the main voice 211 and outputs the output voice 231 from the speaker 203.

本実施形態によれば、ノイズキャンセルとエコーキャンセルとの両方を行って高品質の主音声信号を送信できる。つまり、ユーザの声をクリアに相手に届けることができる。また、適応フィルタの更新を行うので、外部雑音の変化、スピーカから出ている音声の変化に対応できる。また、例えば、ユーザの音声をスマートフォンに送信してAI(Artificial Intelligence)アシスタントに音声認識をさせる場合にも、認識精度が高くなるため、外部雑音が大きい屋外においてもAIアシスタントの誤認識を減らすことができる。さらに、ユーザがヘッドホンを使って音楽を聴きながらでも音声通話やAIアシスタントの使用を実現できる。 According to this embodiment, it is possible to transmit a high quality main audio signal by performing both noise cancellation and echo cancellation. That is, the user's voice can be clearly delivered to the other party. In addition, since the adaptive filter is updated, it is possible to respond to changes in external noise and changes in the sound emitted from the speaker. Further, for example, when the user's voice is transmitted to a smartphone and the AI (Artificial Intelligence) assistant is made to perform voice recognition, the recognition accuracy is high, so that the false recognition of the AI assistant can be reduced even outdoors where external noise is large. Can be done. Furthermore, the user can realize a voice call and use of the AI assistant while listening to music using headphones.

[第3実施形態]
次に本発明の第3実施形態に係る音声入出力装置について、図3を用いて説明する。図3は、本実施形態に係る音声入出力装置の構成を示す図である。本実施形態に係る音声入出力装置は、上記第2実施形態と比べると、音声処理部320の構成が異なる。その他の構成および動作は、第2実施形態と同様であるため、同じ構成および動作については同じ符号を付してその詳しい説明を省略する。
[Third Embodiment]
Next, the audio input / output device according to the third embodiment of the present invention will be described with reference to FIG. FIG. 3 is a diagram showing a configuration of an audio input / output device according to the present embodiment. The audio input / output device according to the present embodiment has a different configuration of the audio processing unit 320 as compared with the second embodiment. Since other configurations and operations are the same as those in the second embodiment, the same configurations and operations are designated by the same reference numerals and detailed description thereof will be omitted.

音声処理部320は、第2実施形態の音声処理部290の構成に加えてノイズキャンセル部301、エコーキャンセル部303および制御部310を有する。エコーキャンセル部303は、加算器330と適応フィルタ331とを有する。エコーキャンセル部303は、スピーカ203の出力音声信号232を適応フィルタ331で生成した擬似出力音声332を加算器330で外部マイク202で捕捉した外部雑音信号222から減算する。これにより、スピーカ203からの音漏れをキャンセルして、高品質な擬似外部雑音信号322を得ることができる。 The voice processing unit 320 includes a noise canceling unit 301, an echo canceling unit 303, and a control unit 310 in addition to the configuration of the voice processing unit 290 of the second embodiment. The echo canceling unit 303 has an adder 330 and an adaptive filter 331. The echo canceling unit 303 subtracts the pseudo output sound 332 generated by the adaptive filter 331 from the output sound signal 232 of the speaker 203 from the external noise signal 222 captured by the external microphone 202 by the adder 330. As a result, the sound leakage from the speaker 203 can be canceled and a high-quality pseudo external noise signal 322 can be obtained.

制御部310は、外部雑音信号222と、エコーキャンセル処理を施された外部雑音信号222と、出力音声信号232とを入力して、適応フィルタ331の係数を生成して、更新を制御する。 The control unit 310 inputs the external noise signal 222, the external noise signal 222 that has undergone echo cancellation processing, and the output audio signal 232, generates a coefficient of the adaptive filter 331, and controls the update.

ノイズキャンセル部301は、加算器312と適応フィルタ311とを有する。ノイズキャンセル部301は、擬似外部雑音信号322から生成した擬似雑音信号323を受信信号240に基づいて生成された音声信号324から加算器312で減算する。 The noise canceling unit 301 has an adder 312 and an adaptive filter 311. The noise canceling unit 301 subtracts the pseudo noise signal 323 generated from the pseudo external noise signal 322 from the audio signal 324 generated based on the received signal 240 by the adder 312.

本実施形態によれば、ノイズキャンセルとエコーキャンセルとの両方を行って高品質の主音声信号を送信できる。また、スピーカから出力される音漏れが外部マイクに混入する影響を排除できる。 According to this embodiment, it is possible to transmit a high quality main audio signal by performing both noise cancellation and echo cancellation. In addition, it is possible to eliminate the effect of sound leakage output from the speaker being mixed into the external microphone.

[第4実施形態]
次に本発明の第4実施形態に係る音声入出力装置について、図4を用いて説明する。図4は、本実施形態に係る音声入出力装置400の構成を説明するための図である。本実施形態に係る音声入出力装置400は、上記第3実施形態と比べると、制御部310を存在しない点で異なる。他の構成および動作は、第2実施形態および第3実施形態と同様であるため、同じ構成および動作については同じ符号を付してその詳しい説明を省略する。
[Fourth Embodiment]
Next, the audio input / output device according to the fourth embodiment of the present invention will be described with reference to FIG. FIG. 4 is a diagram for explaining the configuration of the audio input / output device 400 according to the present embodiment. The voice input / output device 400 according to the present embodiment is different from the third embodiment in that the control unit 310 does not exist. Since other configurations and operations are the same as those of the second embodiment and the third embodiment, the same configurations and operations are designated by the same reference numerals and detailed description thereof will be omitted.

適応フィルタ421は、エコーキャンセルを施された似外部雑音信号322から擬似雑音信号422を生成し、加算器312は、受信信号240から生成された音声信号324から擬似雑音信号422を減算する。 The adaptive filter 421 generates a pseudo noise signal 422 from the echo-canceled similar external noise signal 322, and the adder 312 subtracts the pseudo noise signal 422 from the audio signal 324 generated from the received signal 240.

エコーキャンセル部403は、適応フィルタ431と加算器330とを有する。適応フィルタ431は、擬似出力音声信号432を生成する。加算器330は、外部雑音信号222から擬似出力音声信号432を減算する。 The echo canceling unit 403 has an adaptive filter 431 and an adder 330. The adaptive filter 431 generates a pseudo output audio signal 432. The adder 330 subtracts the pseudo output audio signal 432 from the external noise signal 222.

本実施形態によれば、よりシンプルな構成で第3実施形態と同様の効果を得られる。 According to the present embodiment, the same effect as that of the third embodiment can be obtained with a simpler configuration.

[第5実施形態]
次に本発明の第5実施形態に係る補聴器について、図5A乃至図5Cを用いて説明する。図5A乃至図5Cは、本実施形態に係る補聴器の構成を示す図である。本実施形態に係る補聴器は、上記第4実施形態と比べると、補聴器機能とスイッチとを追加した点で異なる。その他の構成および動作は、第4実施形態と同様であるため、同じ構成および動作については同じ符号を付してその詳しい説明を省略する。
[Fifth Embodiment]
Next, the hearing aid according to the fifth embodiment of the present invention will be described with reference to FIGS. 5A to 5C. 5A to 5C are diagrams showing the configuration of a hearing aid according to the present embodiment. The hearing aid according to the present embodiment is different from the fourth embodiment in that a hearing aid function and a switch are added. Since other configurations and operations are the same as those in the fourth embodiment, the same configurations and operations are designated by the same reference numerals and detailed description thereof will be omitted.

図5Aは、相手の声を聴きつつ外部雑音の漏れこみを許容する場合を表す。図5Aに示したように、補聴器500は、内部マイク201、外部マイク202、スピーカ203、通信部260および音声処理部560を有する。音声処理部560は、増幅部501、スイッチ521,503および加算器520をさらに有する。通信部260を介して入力した受信信号240に対応する音声信号324は、増幅部501で増幅され、スピーカ203に入力され、出力音声として出力される。補聴器500においては、スピーカ203から出力される出力音声が大きいので、混合音声における出力音声の混合比率が大きくなる。そのため、内部マイク201が捕捉する出力音声のキャンセリングを行うことの効果が大きい。また、増幅された出力音声が補聴器500からユーザの外部に漏れやすくなるので、エコーキャンセル部403の重要性が高い。ユーザは、通話相手の声を大きな音量で聞くことができる。補聴器500であっても高品質な主音声を捕捉できる。一方、増幅された出力された音声を内部マイク201が捕捉し易くなるが、エコーキャンセル部205の働きによって、高品質な擬似主音声信号を生成できる。 FIG. 5A shows a case where the leakage of external noise is allowed while listening to the voice of the other party. As shown in FIG. 5A, the hearing aid 500 includes an internal microphone 201, an external microphone 202, a speaker 203, a communication unit 260, and a voice processing unit 560. The audio processing unit 560 further includes an amplification unit 501, switches 521 and 503, and an adder 520. The voice signal 324 corresponding to the received signal 240 input via the communication unit 260 is amplified by the amplification unit 501, input to the speaker 203, and output as output voice. In the hearing aid 500, since the output sound output from the speaker 203 is large, the mixing ratio of the output sound in the mixed sound becomes large. Therefore, the effect of canceling the output voice captured by the internal microphone 201 is great. Further, since the amplified output voice is likely to leak from the hearing aid 500 to the outside of the user, the echo canceling unit 403 is highly important. The user can hear the other party's voice at a loud volume. Even the hearing aid 500 can capture high quality main audio. On the other hand, the internal microphone 201 can easily capture the amplified output voice, but the echo canceling unit 205 can generate a high-quality pseudo main voice signal.

図5Bは、外部雑音をキャンセルしつつ、自分の声と相手の声とを大きく聞く場合を表す。この場合、スイッチ521を適応フィルタ421側の接点へ接続する。また、スイッチ521の動きと連携して、スイッチ503が閉じる。適応フィルタ421と加算器312は、図4を用いて説明した動作を行う。これにより、ユーザは、外部音声をキャンセルした音を聞くことができる。また、スイッチ503が閉じることにより、加算器520は、擬似主音声信号と受信信号240から生成した音声信号324とを加算する。これにより、ユーザ270は、側音と呼ばれる自発生音声を聞くことができる。 FIG. 5B shows a case where one's own voice and the other party's voice are heard loudly while canceling external noise. In this case, the switch 521 is connected to the contact on the adaptive filter 421 side. Further, the switch 503 closes in cooperation with the movement of the switch 521. The adaptive filter 421 and the adder 312 perform the operations described with reference to FIG. As a result, the user can hear the sound in which the external voice is canceled. Further, when the switch 503 is closed, the adder 520 adds the pseudo main voice signal and the voice signal 324 generated from the received signal 240. As a result, the user 270 can hear a spontaneous voice called a side sound.

図5Cは、外部雑音と相手の声との両方を大きく聞く場合を表す。この場合、スイッチ502をノイズキャンセル部302とは反対側の接点へ接続する。また、スイッチ503は、スイッチ502の動きと連動して開く。エコーキャンセル部403が、音漏れの影響をキャンセルする。加算器312は、綺麗な外部雑音と受信した相手の声とを加算する。増幅部501は、加算器312で加算された音声信号を増幅して、出力音声信号232を生成する。これにより、ユーザは、外部の音と通話相手の声とを大きな音量で聞くことができる。 FIG. 5C shows a case where both external noise and the voice of the other party are heard loudly. In this case, the switch 502 is connected to the contact on the side opposite to the noise canceling unit 302. Further, the switch 503 opens in conjunction with the movement of the switch 502. The echo canceling unit 403 cancels the influence of sound leakage. The adder 312 adds the clean external noise and the received voice of the other party. The amplification unit 501 amplifies the audio signal added by the adder 312 to generate an output audio signal 232. As a result, the user can hear the external sound and the voice of the other party at a loud volume.

[第6実施形態]
次に本発明の第6実施形態に係る音声入出力装置について、図6を用いて説明する。図6は、本実施形態に係る音声入出力装置の構成を示す図である。本実施形態に係る音声入出力装置は、上記第2実施形態と比べると、着脱検知部601を有する点で異なる。その他の構成および動作は、第2実施形態と同様であるため、同じ構成および動作については同じ符号を付してその詳しい説明を省略する。
[Sixth Embodiment]
Next, the audio input / output device according to the sixth embodiment of the present invention will be described with reference to FIG. FIG. 6 is a diagram showing a configuration of an audio input / output device according to the present embodiment. The voice input / output device according to the present embodiment is different from the second embodiment in that it has the attachment / detachment detection unit 601. Since other configurations and operations are the same as those in the second embodiment, the same configurations and operations are designated by the same reference numerals and detailed description thereof will be omitted.

着脱検知部601は、例えば、内部マイク201が捕捉した血液の流れる音や心拍音を用いて音声入出力装置600の耳への着脱を検知する。また、着脱検知部601は、例えば、人間が聞こえない超音波を発振して、当該超音波の反射波の有無により着脱を検知してもよい。また、赤外線センサや加速度センサなどを用いて着脱を検知してもよい。なお、着脱検知方法は、これらには限定されない。 The attachment / detachment detection unit 601 detects attachment / detachment of the voice input / output device 600 to the ear by using, for example, the sound of blood flowing or the heartbeat sound captured by the internal microphone 201. Further, the attachment / detachment detection unit 601 may, for example, oscillate an ultrasonic wave inaudible to humans and detect attachment / detachment depending on the presence or absence of a reflected wave of the ultrasonic wave. Further, attachment / detachment may be detected by using an infrared sensor, an acceleration sensor, or the like. The attachment / detachment detection method is not limited to these.

そして、着脱検知部601で音声入出力装置600の装着を検知した場合に、ノイズキャンセル部204は、適応フィルタ241を用いてノイズキャンセル処理を行い、エコーキャンセル部205は適応フィルタ251を用いてエコーキャンセル処理を行う。エコーの状態は、音声入出力装置600を装着するユーザごとに異なるため、制御部280は、音声入出力装置600の装着を検知する度に適応フィルタ251の更新を行う。一方、ノイズの状態も、装着した状況(場所や時間)ごとに異なるため、制御部280は、装着ごとに適応フィルタ241の更新を行う。本実施形態によれば、着脱検知部を設けたので、音声入出力装置を使用するユーザが変わったり、ユーザが音声入出力装置を付け替えたりしても送信信号の品質を高めることができる。なお、音声入出力装置600は、着脱検知部601で音声入出力装置600が外されたことを検知した場合に、音声入出力装置600の全機能を停止させてもよい。 Then, when the attachment / detachment detection unit 601 detects that the audio input / output device 600 is attached, the noise canceling unit 204 performs noise canceling processing using the adaptive filter 241 and the echo canceling unit 205 echoes using the adaptive filter 251. Perform cancellation processing. Since the echo state differs for each user who wears the voice input / output device 600, the control unit 280 updates the adaptive filter 251 every time it detects that the voice input / output device 600 is worn. On the other hand, since the noise state also differs depending on the mounting situation (place and time), the control unit 280 updates the adaptive filter 241 for each mounting. According to the present embodiment, since the attachment / detachment detection unit is provided, the quality of the transmission signal can be improved even if the user who uses the voice input / output device changes or the user replaces the voice input / output device. The voice input / output device 600 may stop all the functions of the voice input / output device 600 when the attachment / detachment detection unit 601 detects that the voice input / output device 600 has been removed.

[第7実施形態]
次に本発明の第7実施形態に係る音声入出力装置について、図7を用いて説明する。図7は、本実施形態に係る音声入出力装置の構成を示す図である。本実施形態に係る音声入出力装置は、上記第2実施形態と比べると、遮音部を有する点で異なる。その他の構成および動作は、第2実施形態と同様であるため、同じ構成および動作については同じ符号を付してその詳しい説明を省略する。
[7th Embodiment]
Next, the audio input / output device according to the seventh embodiment of the present invention will be described with reference to FIG. 7. FIG. 7 is a diagram showing a configuration of an audio input / output device according to the present embodiment. The audio input / output device according to the present embodiment is different from the second embodiment in that it has a sound insulating portion. Since other configurations and operations are the same as those in the second embodiment, the same configurations and operations are designated by the same reference numerals and detailed description thereof will be omitted.

遮音部701は、内部マイク201に対する外部雑音221の侵入経路を制限する。遮音部は、例えば、内部マイク201の周囲を取り囲むような円筒形状の部材である。ユーザ270の外耳道210を伝わって到来する主音声211を遮音しないように、ユーザ270の外耳道210に向いている側は、開放されている。なお、遮音部701の形状は、ここに示した形状には限定されず、ユーザ270の体や音声入出力装置700を伝わってくる外部雑音221を遮音できる形状であれば、どのような形状であってもよい。また、遮音部701の材質は、外部雑音221を遮音できる部材であれば、どのような部材であってもよいが、例えば、ゴムや樹脂、ガラスなどを採用することができる。本実施形態によれば、ノイズキャンセル部204とエコーキャンセル部205と遮音部701とを設けたので、高品質な擬似主音声信号を生成することができる。 The sound insulation unit 701 limits the intrusion route of the external noise 221 to the internal microphone 201. The sound insulation portion is, for example, a cylindrical member that surrounds the circumference of the internal microphone 201. The side of the user 270 facing the ear canal 210 is open so as not to insulate the main voice 211 that arrives through the ear canal 210 of the user 270. The shape of the sound insulation unit 701 is not limited to the shape shown here, and any shape can be used as long as it can insulate the external noise 221 transmitted through the body of the user 270 and the voice input / output device 700. There may be. Further, the material of the sound insulating portion 701 may be any member as long as it can insulate the external noise 221. For example, rubber, resin, glass or the like can be adopted. According to the present embodiment, since the noise canceling unit 204, the echo canceling unit 205, and the sound insulating unit 701 are provided, a high-quality pseudo main audio signal can be generated.

[他の実施形態]
以上、実施形態を参照して本願発明を説明したが、本願発明は上記実施形態に限定されるものではない。本願発明の構成や詳細には、本願発明のスコープ内で当業者が理解し得る様々な変更をすることができる。また、それぞれの実施形態に含まれる別々の特徴を如何様に組み合わせたシステムまたは装置も、本発明の範疇に含まれる。
[Other Embodiments]
Although the invention of the present application has been described above with reference to the embodiment, the invention of the present application is not limited to the above embodiment. Various changes that can be understood by those skilled in the art can be made within the scope of the present invention in terms of the structure and details of the present invention. Also included in the scope of the present invention are systems or devices in any combination of the different features contained in each embodiment.

また、本発明は、複数の機器から構成されるシステムに適用されてもよいし、単体の装置に適用されてもよい。さらに、本発明は、実施形態の機能を実現する情報処理プログラムが、システムあるいは装置に直接あるいは遠隔から供給される場合にも適用可能である。したがって、本発明の機能をコンピュータで実現するために、コンピュータにインストールされるプログラム、あるいはそのプログラムを格納した媒体、そのプログラムをダウンロードさせるWWW(World Wide Web)サーバも、本発明の範疇に含まれる。特に、少なくとも、上述した実施形態に含まれる処理ステップをコンピュータに実行させるプログラムを格納した非一時的コンピュータ可読媒体(non-transitory computer readable medium)は本発明の範疇に含まれる。 Further, the present invention may be applied to a system composed of a plurality of devices, or may be applied to a single device. Furthermore, the present invention is also applicable when the information processing program that realizes the functions of the embodiment is supplied directly or remotely to the system or device. Therefore, in order to realize the functions of the present invention on a computer, a program installed on the computer, a medium containing the program, and a WWW (World Wide Web) server for downloading the program are also included in the scope of the present invention. .. In particular, at least a non-transitory computer readable medium containing a program that causes a computer to execute the processing steps included in the above-described embodiment is included in the scope of the present invention.

図8Aは、第2実施形態を信号処理プログラムにより構成する場合に、その信号処理プログラムを実行するコンピュータ800の構成図である。コンピュータ800は、入力部810と、CPU(Central Processing Unit)820と、出力部830と、メモリ840とを含む。 FIG. 8A is a configuration diagram of a computer 800 that executes the signal processing program when the second embodiment is configured by the signal processing program. The computer 800 includes an input unit 810, a CPU (Central Processing Unit) 820, an output unit 830, and a memory 840.

CPU820は、メモリ840に記憶された信号処理プログラムを読み込むことにより、コンピュータ800の動作を制御する。すなわち、信号処理プログラムを実行したCPU820は、ステップS801において、入力部810からユーザの外部雑音221を捕捉する。ステップS803において、CPU820は、出力部830から音声信号を出力する。ステップS805において、CPU820は、入力部810から、外部雑音221と主音声211と音声出力部からの出力音声231とが混合された混合音声信号212を捕捉する。ステップS807において、CPU820は、捕捉した混合音声信号212に対してノイズキャンセル処理を行う。ステップS809において、CPU820は、スピーカ203に入力される音声信号を用いて、捕捉した混合音声信号212に対してエコーキャンセル処理を行う。ステップS811において、CPU820は、音声信号を送信する。 The CPU 820 controls the operation of the computer 800 by reading the signal processing program stored in the memory 840. That is, the CPU 820 that has executed the signal processing program captures the user's external noise 221 from the input unit 810 in step S801. In step S803, the CPU 820 outputs an audio signal from the output unit 830. In step S805, the CPU 820 captures the mixed audio signal 212 in which the external noise 221 and the main audio 211 and the output audio 231 from the audio output unit are mixed from the input unit 810. In step S807, the CPU 820 performs noise canceling processing on the captured mixed audio signal 212. In step S809, the CPU 820 performs echo cancellation processing on the captured mixed audio signal 212 using the audio signal input to the speaker 203. In step S811, the CPU 820 transmits an audio signal.

図8Bは、CPU820が実行する処理の流れを示すフローチャートである。ステップS821において、CPU820は、内部マイク201で混合音声信号212を捕捉しているか否かを判断する。混合音声信号212を捕捉していると判断した場合(ステップS821のYES)、CPU820は、処理を終了する。混合音声信号212を捕捉していないと判断した場合(ステップS921のNO)、CPU820は、ステップS823へ進む。ステップS823において、CPU820は、スピーカ203からの出力音声231を出力しているか否かを判断する。出力音声231を出力していると判断した場合(ステップS823のYES)、CPU820は、処理を終了する。出力音声231を出力していないと判断した場合(ステップS823のNO)、CPU820は、ステップS825へ進む。ステップS825において、CPU820は、ノイズキャンセル部204の適応フィルタ241の更新を行う。 FIG. 8B is a flowchart showing the flow of processing executed by the CPU 820. In step S821, the CPU 820 determines whether or not the mixed audio signal 212 is captured by the internal microphone 201. When it is determined that the mixed audio signal 212 is being captured (YES in step S821), the CPU 820 ends the process. If it is determined that the mixed audio signal 212 has not been captured (NO in step S921), the CPU 820 proceeds to step S823. In step S823, the CPU 820 determines whether or not the output voice 231 from the speaker 203 is being output. When it is determined that the output voice 231 is being output (YES in step S823), the CPU 820 ends the process. If it is determined that the output audio 231 is not being output (NO in step S823), the CPU 820 proceeds to step S825. In step S825, the CPU 820 updates the adaptive filter 241 of the noise canceling unit 204.

図8Cは、CPU820が実行する処理の流れを示すフローチャートである。ステップS831において、CPU820は、スピーカ203からの出力音声231を出力しているか否かを判断する。出力音声231を出力していないと判断した場合(ステップS831のNO)、CPU820は、処理を終了する。出力音声231を出力していると判断した場合(ステップS831のYES)、CPU820は、ステップS832へ進む。ステップ832において、CPU820は、主音声を捕捉したか否かを判断する。主音声を捕捉していると判断した場合(ステップS832のYES)、CPU820は、処理を終了する。主音声を捕捉していないと判断した場合(ステップS832のNO)、CPU820は、ステップS833へ進む。ステップS833において、CPU820は、エコーキャンセル部205の適応フィルタ(251)の更新を行う。 FIG. 8C is a flowchart showing the flow of processing executed by the CPU 820. In step S831, the CPU 820 determines whether or not the output voice 231 from the speaker 203 is being output. When it is determined that the output voice 231 is not output (NO in step S831), the CPU 820 ends the process. If it is determined that the output voice 231 is being output (YES in step S831), the CPU 820 proceeds to step S832. In step 832, the CPU 820 determines whether or not the main voice has been captured. If it is determined that the main voice is being captured (YES in step S832), the CPU 820 ends the process. If it is determined that the main voice has not been captured (NO in step S832), the CPU 820 proceeds to step S833. In step S833, the CPU 820 updates the adaptive filter (251) of the echo canceling unit 205.

図8Dは、CPU820が実行する処理の流れを示すフローチャートである。ステップS841において、CPU820は、音声入出力装置600の装着があったか否かを判断する。装着がないと判断した場合(ステップS841のNO)、CPU820は、処理を終了する。装着があると判断した場合(ステップS841のYES)、CPU820は、ステップS843へ進む。ステップS843において、CPU820は、エコーキャンセル部205の適応フィルタ251の更新を行う。 FIG. 8D is a flowchart showing the flow of processing executed by the CPU 820. In step S841, the CPU 820 determines whether or not the audio input / output device 600 is attached. If it is determined that there is no mounting (NO in step S841), the CPU 820 ends the process. If it is determined that there is mounting (YES in step S841), the CPU 820 proceeds to step S843. In step S843, the CPU 820 updates the adaptive filter 251 of the echo canceling unit 205.

[実施形態の他の表現]
上記の実施形態の一部または全部は、以下の付記のようにも記載されうるが、以下には限られない。

(付記1)
ユーザの体の外側に向けて配置され、前記ユーザの外部から到来する外部雑音を取得するための雑音取得部と、
音声信号の入力を受け付け、前記ユーザの外耳道に対して出力音声を出力する音声出力部と、
前記外部雑音と前記出力音声と前記ユーザの声帯から前記外耳道内を伝わってきた前記ユーザの主音声とが混合された混合音声を取得して、混合音声信号を出力する主音声取得部と、
前記外部雑音に基づく雑音信号を用いて、前記混合音声信号を処理するノイズキャンセル部と、
前記音声信号を用いて、前記混合音声信号を処理するエコーキャンセル部と、を備える音声入出力装置。
(付記2)
前記エコーキャンセル部は、前記ノイズキャンセル部においてノイズキャンセル処理が施された後の音声信号に対して、エコーキャンセル処理を施す付記1に記載の音声入出力装置。
(付記3)
前記ノイズキャンセル部は、第1適応フィルタを用いて、ノイズキャンセル処理を行い、前記エコーキャンセル部は、第2適応フィルタを用いて、エコーキャンセル処理を行い、前記第1適応フィルタの更新を行う場合には前記第2適応フィルタの更新を行わず、前記第2適応フィルタの更新を行う場合には前記第1適応フィルタの更新を行わない付記1または2に記載の音声入出力装置。
(付記4)
前記ノイズキャンセル部は、
前記主音声取得部が前記主音声を取得しておらず、前記音声出力部が出力音声を出力していないタイミングで、前記第1適応フィルタの更新を行う付記3に記載の音声入出力装置。
(付記5)
前記エコーキャンセル部は、
前記音声出力部が出力音声を出力しているタイミングで、前記第2適応フィルタの更新を行う付記3または4に記載の音声入出力装置。
(付記6)
前記ノイズキャンセル部および前記エコーキャンセル部は、前記主音声取得部が前記主音声を取得し、前記音声出力部が出力音声を出力しているタイミングでは、前記第1、第2適応フィルタの更新を行わない付記4または5に記載の音声入出力装置。
(付記7)
前記ノイズキャンセル部は、前記エコーキャンセル部においてエコーキャンセル処理が施された後の音声信号に対して、前記雑音取得部で取得した前記外部雑音を用いてノイズキャンセル処理を施す付記1に記載の音声入出力装置。
(付記8)
前記主音声取得部に対する前記外部雑音の進入経路を制限する遮音部をさらに備えた付記1乃至7のいずれか1項に記載の音声入出力装置。
(付記9)
前記音声入出力装置の着脱を検知する着脱検知部をさらに有し、
前記ノイズキャンセル部は、第1適応フィルタを用いてノイズキャンセル処理を行い、前記エコーキャンセル部は、第2適応フィルタを用いてエコーキャンセル処理を行い、
前記着脱検知部で前記音声入出力装置の装着を検知した場合に、前記第1適応フィルタおよび前記第2適応フィルタのうち少なくとも一方の更新を行う付記1乃至8のいずれか1項に記載の音声入出力装置。
(付記10)
前記ノイズキャンセル部および前記エコーキャンセル部の両方によって処理した音声信号を送信する通信部をさらに備えた付記1乃至8のいずれか1項に記載の音声入出力装置。
(付記11)
ユーザの体の外側に向けて配置され、前記ユーザの外部から到来する外部雑音を取得するための雑音取得部と、
音声信号の入力を受け付け、前記ユーザの外耳道に対して出力音声を出力する音声出力部と、
前記外部雑音と前記出力音声と前記ユーザの声帯から前記外耳道内を伝わってきた前記ユーザの主音声とが混合された混合音声を取得して、混合音声信号を出力する主音声取得部と、
前記外部雑音に基づく雑音信号を用いて、前記混合音声信号を処理するノイズキャンセル部と、
前記音声信号を用いて、前記混合音声信号を処理するエコーキャンセル部と、
前記音声出力部に入力される音声信号を増幅する増幅部と、
を備えた補聴器。
(付記12)
ユーザの体の外側に向けて配置され、前記ユーザの外部から到来する外部雑音を取得するための雑音取得ステップと、
音声の入力を受け付け、前記ユーザの外耳道に対して出力音声を出力する音声出力ステップと、
前記外部雑音と前記出力音声と前記ユーザの声帯から前記外耳道内を伝わってきた前記ユーザの主音声とが混合された混合音声を取得する主音声取得ステップと、
前記外部雑音に基づく雑音信号を用いて、前記混合音声を処理するノイズキャンセルステップと、
前記音声信号を用いて、前記混合音声を処理するエコーキャンセルステップと、
を含む音声入出力方法。
(付記13)
ユーザの体の外側に向けて配置され、前記ユーザの外部から到来する外部雑音を取得するための雑音取得ステップと、
音声の入力を受け付け、前記ユーザの外耳道に対して出力音声を出力する音声出力ステップと、
前記外部雑音と前記出力音声と前記ユーザの声帯から前記外耳道内を伝わってきた前記ユーザの主音声とが混合された混合音声を取得する主音声取得ステップと、
前記外部雑音に基づく雑音信号を用いて、前記混合音声を処理するノイズキャンセルステップと、
前記音声信号を用いて、前記混合音声を処理するエコーキャンセルステップと、
をコンピュータに実行させる音声入出力プログラム。
[Other expressions of the embodiment]
Some or all of the above embodiments may also be described, but not limited to:

(Appendix 1)
A noise acquisition unit, which is arranged toward the outside of the user's body and for acquiring external noise coming from the outside of the user,
An audio output unit that accepts audio signal input and outputs output audio to the user's ear canal.
A main voice acquisition unit that acquires a mixed voice obtained by mixing the external noise, the output voice, and the main voice of the user transmitted through the ear canal from the vocal cords of the user, and outputs the mixed voice signal.
A noise canceling unit that processes the mixed audio signal using the noise signal based on the external noise, and
An audio input / output device including an echo canceling unit that processes the mixed audio signal using the audio signal.
(Appendix 2)
The audio input / output device according to Appendix 1, wherein the echo canceling unit performs an echo canceling process on an audio signal after the noise canceling process is performed in the noise canceling unit.
(Appendix 3)
When the noise canceling unit performs noise canceling processing using the first adaptive filter, and the echo canceling unit performs echo canceling processing using the second adaptive filter to update the first adaptive filter. The audio input / output device according to Appendix 1 or 2, wherein the second adaptive filter is not updated, and the first adaptive filter is not updated when the second adaptive filter is updated.
(Appendix 4)
The noise canceling unit is
The audio input / output device according to Appendix 3, wherein the first adaptive filter is updated at a timing when the main audio acquisition unit has not acquired the main audio and the audio output unit has not output the output audio.
(Appendix 5)
The echo canceling unit is
The audio input / output device according to Appendix 3 or 4, wherein the second adaptive filter is updated at the timing when the audio output unit outputs the output audio.
(Appendix 6)
The noise canceling unit and the echo canceling unit update the first and second adaptive filters at the timing when the main voice acquisition unit acquires the main voice and the voice output unit outputs the output voice. The audio input / output device according to Appendix 4 or 5, which is not performed.
(Appendix 7)
The voice according to Appendix 1, wherein the noise canceling unit performs noise canceling processing on the voice signal after the echo canceling process is performed by the echo canceling unit using the external noise acquired by the noise acquiring unit. Input / output device.
(Appendix 8)
The audio input / output device according to any one of Supplementary note 1 to 7, further comprising a sound insulation unit that limits an entry path of the external noise to the main audio acquisition unit.
(Appendix 9)
It also has a detachable detection unit that detects the detachment of the audio input / output device.
The noise canceling unit performs noise canceling processing using the first adaptive filter, and the echo canceling unit performs echo canceling processing using the second adaptive filter.
The voice according to any one of Appendix 1 to 8, which updates at least one of the first adaptive filter and the second adaptive filter when the attachment / detachment detection unit detects the attachment of the voice input / output device. Input / output device.
(Appendix 10)
The audio input / output device according to any one of Appendix 1 to 8, further comprising a communication unit that transmits an audio signal processed by both the noise canceling unit and the echo canceling unit.
(Appendix 11)
A noise acquisition unit, which is arranged toward the outside of the user's body and for acquiring external noise coming from the outside of the user,
An audio output unit that accepts audio signal input and outputs output audio to the user's ear canal.
A main voice acquisition unit that acquires a mixed voice obtained by mixing the external noise, the output voice, and the main voice of the user transmitted through the ear canal from the vocal cords of the user, and outputs the mixed voice signal.
A noise canceling unit that processes the mixed audio signal using the noise signal based on the external noise, and
An echo canceling unit that processes the mixed audio signal using the audio signal,
An amplification unit that amplifies the audio signal input to the audio output unit, and
Hearing aid with.
(Appendix 12)
A noise acquisition step for acquiring external noise coming from the outside of the user, which is arranged toward the outside of the user's body, and
A voice output step that accepts voice input and outputs the output voice to the user's ear canal.
A main voice acquisition step of acquiring a mixed voice obtained by mixing the external noise, the output voice, and the user's main voice transmitted from the user's vocal cords in the ear canal.
A noise canceling step of processing the mixed voice using a noise signal based on the external noise, and
An echo canceling step of processing the mixed voice using the voice signal, and
Audio input / output methods including.
(Appendix 13)
A noise acquisition step for acquiring external noise coming from the outside of the user, which is arranged toward the outside of the user's body, and
A voice output step that accepts voice input and outputs the output voice to the user's ear canal.
A main voice acquisition step of acquiring a mixed voice obtained by mixing the external noise, the output voice, and the user's main voice transmitted from the user's vocal cords in the ear canal.
A noise canceling step of processing the mixed voice using a noise signal based on the external noise, and
An echo canceling step of processing the mixed voice using the voice signal, and
A voice input / output program that causes a computer to execute.

Claims (11)

ユーザの外部から到来する外部雑音を取得するための雑音取得部と、
音声信号の入力を受け付け、前記ユーザの外耳道に対して出力音声を出力する音声出力部と、
前記外部雑音と前記出力音声と前記ユーザの内部から到来する主音声とが混合された混合音声を取得して、混合音声信号を出力する主音声取得部と、
前記外部雑音に基づく雑音信号を用いて、前記混合音声信号を処理するノイズキャンセル部と、
を備える音声入出力装置。
A noise acquisition unit for acquiring external noise coming from outside the user,
An audio output unit that accepts audio signal input and outputs output audio to the user's ear canal.
A main voice acquisition unit that acquires a mixed voice in which the external noise, the output voice, and the main voice coming from inside the user are mixed, and outputs the mixed voice signal.
A noise canceling unit that processes the mixed audio signal using the noise signal based on the external noise, and
Audio input / output device equipped with.
前記音声信号を用いて、前記混合音声信号を処理するエコーキャンセル部をさらに備えた請求項1に記載の音声入出力装置。 The voice input / output device according to claim 1, further comprising an echo canceling unit that processes the mixed voice signal using the voice signal. 前記ノイズキャンセル部は、第1適応フィルタを用いて、ノイズキャンセル処理を行い、前記エコーキャンセル部は、第2適応フィルタを用いて、エコーキャンセル処理を行い、
前記第1適応フィルタの係数の更新量及び前記第2適応フィルタの係数の更新量を、信号対雑音比に応じて制御する制御部を更に備えた請求項2に記載の音声入出力装置。
The noise canceling unit performs noise canceling processing using the first adaptive filter, and the echo canceling unit performs echo canceling processing using the second adaptive filter.
The voice input / output device according to claim 2, further comprising a control unit that controls the update amount of the coefficient of the first adaptive filter and the update amount of the coefficient of the second adaptive filter according to the signal-to-noise ratio.
前記第1適応フィルタの更新を行う場合には前記第2適応フィルタの更新を行わず、前記第2適応フィルタの更新を行う場合には前記第1適応フィルタの更新を行わない請求項3に記載の音声入出力装置。 The third aspect of claim 3 is that the second adaptive filter is not updated when the first adaptive filter is updated, and the first adaptive filter is not updated when the second adaptive filter is updated. Audio input / output device. 前記ノイズキャンセル部および前記エコーキャンセル部は、前記主音声取得部が前記主音声を取得し、前記音声出力部が出力音声を出力しているタイミングでは、前記第1、第2適応フィルタの更新を行わない請求項4に記載の音声入出力装置。 The noise canceling unit and the echo canceling unit update the first and second adaptive filters at the timing when the main voice acquisition unit acquires the main voice and the voice output unit outputs the output voice. The audio input / output device according to claim 4, wherein the audio input / output device is not performed. 前記ノイズキャンセル部は、第1適応フィルタを用いて、ノイズキャンセル処理を行い、前記エコーキャンセル部は、第2適応フィルタを用いて、エコーキャンセル処理を行い、
前記音声入出力装置の着脱を検知する着脱検知部と、
前記着脱検知部で前記音声入出力装置の装着を検知した場合に、前記第1適応フィルタおよび前記第2適応フィルタのうち少なくとも一方の更新を行う制御部と、
を更に備えた請求項2に記載の音声入出力装置。
The noise canceling unit performs noise canceling processing using the first adaptive filter, and the echo canceling unit performs echo canceling processing using the second adaptive filter.
A detachment detection unit that detects the attachment / detachment of the audio input / output device, and
A control unit that updates at least one of the first adaptive filter and the second adaptive filter when the attachment / detachment detection unit detects that the audio input / output device is attached.
2. The audio input / output device according to claim 2.
前記主音声取得部に対する前記外部雑音の進入経路を制限する遮音部をさらに備えた請求項1乃至6のいずれか1項に記載の音声入出力装置。 The voice input / output device according to any one of claims 1 to 6, further comprising a sound insulation unit that limits an entry path of the external noise to the main voice acquisition unit. 前記音声信号を用いて、前記外部雑音に混ざり込んだ音漏れをキャンセル処理する音漏れキャンセル部を更に備えた請求項1乃至7のいずれか1項に記載の音声入出力装置。 The voice input / output device according to any one of claims 1 to 7, further comprising a sound leakage canceling unit that cancels a sound leakage mixed with the external noise by using the voice signal. ユーザの外部から到来する外部雑音を取得するための雑音取得部と、
音声信号の入力を受け付け、前記ユーザの外耳道に対して出力音声を出力する音声出力部と、
前記外部雑音と前記出力音声と前記ユーザの内部から到来する主音声とが混合された混合音声を取得して、混合音声信号を出力する主音声取得部と、
前記外部雑音に基づく雑音信号を用いて、前記混合音声信号を処理するノイズキャンセル部と、
を備えた補聴器。
A noise acquisition unit for acquiring external noise coming from outside the user,
An audio output unit that accepts audio signal input and outputs output audio to the user's ear canal.
A main voice acquisition unit that acquires a mixed voice in which the external noise, the output voice, and the main voice coming from inside the user are mixed, and outputs the mixed voice signal.
A noise canceling unit that processes the mixed audio signal using the noise signal based on the external noise, and
Hearing aid with.
ユーザの外部から到来する外部雑音を取得するための雑音取得ステップと、
音声信号の入力を受け付け、前記ユーザの外耳道に対して出力音声を出力する音声出力ステップと、
前記外部雑音と前記出力音声と前記ユーザの内部から到来する主音声とが混合された混合音声を取得して、混合音声信号を出力する主音声取得ステップと、
前記外部雑音に基づく雑音信号を用いて、前記混合音声信号を処理するノイズキャンセルステップと、
を含む音声入出力方法。
A noise acquisition step for acquiring external noise coming from outside the user,
An audio output step that accepts an input of an audio signal and outputs an output audio to the user's ear canal.
A main voice acquisition step of acquiring a mixed voice in which the external noise, the output voice, and the main voice coming from the inside of the user are mixed and outputting the mixed voice signal.
A noise canceling step of processing the mixed audio signal using the noise signal based on the external noise, and
Audio input / output methods including.
ユーザの外部から到来する外部雑音を取得するための雑音取得ステップと、
音声信号の入力を受け付け、前記ユーザの外耳道に対して出力音声を出力する音声出力ステップと、
前記外部雑音と前記出力音声と前記ユーザの内部から到来する主音声とが混合された混合音声を取得して、混合音声信号を出力する主音声取得ステップと、
前記外部雑音に基づく雑音信号を用いて、前記混合音声信号を処理するノイズキャンセルステップと、
をコンピュータに実行させる音声入出力プログラム。
A noise acquisition step for acquiring external noise coming from outside the user,
An audio output step that accepts an input of an audio signal and outputs an output audio to the user's ear canal.
A main voice acquisition step of acquiring a mixed voice in which the external noise, the output voice, and the main voice coming from the inside of the user are mixed and outputting the mixed voice signal.
A noise canceling step of processing the mixed audio signal using the noise signal based on the external noise, and
A voice input / output program that causes a computer to execute.
JP2020200610A 2020-12-02 2020-12-02 Audio input/output device, hearing aid, audio input/output method and audio input/output program Active JP7214704B2 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2020200610A JP7214704B2 (en) 2020-12-02 2020-12-02 Audio input/output device, hearing aid, audio input/output method and audio input/output program
JP2023003670A JP2023040244A (en) 2020-12-02 2023-01-13 Earphone, voice processing method, and voice processing program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2020200610A JP7214704B2 (en) 2020-12-02 2020-12-02 Audio input/output device, hearing aid, audio input/output method and audio input/output program

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2018248765A Division JP6807134B2 (en) 2018-12-28 2018-12-28 Audio input / output device, hearing aid, audio input / output method and audio input / output program

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2023003670A Division JP2023040244A (en) 2020-12-02 2023-01-13 Earphone, voice processing method, and voice processing program

Publications (2)

Publication Number Publication Date
JP2021047436A true JP2021047436A (en) 2021-03-25
JP7214704B2 JP7214704B2 (en) 2023-01-30

Family

ID=74876322

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2020200610A Active JP7214704B2 (en) 2020-12-02 2020-12-02 Audio input/output device, hearing aid, audio input/output method and audio input/output program
JP2023003670A Pending JP2023040244A (en) 2020-12-02 2023-01-13 Earphone, voice processing method, and voice processing program

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2023003670A Pending JP2023040244A (en) 2020-12-02 2023-01-13 Earphone, voice processing method, and voice processing program

Country Status (1)

Country Link
JP (2) JP7214704B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117740950A (en) * 2024-02-20 2024-03-22 四川名人居门窗有限公司 System and method for determining and feeding back sound insulation coefficient of glass

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0614101A (en) * 1992-06-26 1994-01-21 Oki Electric Ind Co Ltd Hand-free telephone set
JPH07240989A (en) * 1994-02-25 1995-09-12 Sony Corp Noise reduction headphone device
JPH0918291A (en) * 1995-06-30 1997-01-17 Nec Corp Method and device for noise elimination
JP2006295533A (en) * 2005-04-11 2006-10-26 Nappu Enterprise Kk Soundproof device for call apparatus
JP2018137735A (en) * 2015-12-30 2018-08-30 ジーエヌ ヒアリング エー/エスGN Hearing A/S Method and device for streaming communication with hearing aid device

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0614101A (en) * 1992-06-26 1994-01-21 Oki Electric Ind Co Ltd Hand-free telephone set
JPH07240989A (en) * 1994-02-25 1995-09-12 Sony Corp Noise reduction headphone device
JPH0918291A (en) * 1995-06-30 1997-01-17 Nec Corp Method and device for noise elimination
JP2006295533A (en) * 2005-04-11 2006-10-26 Nappu Enterprise Kk Soundproof device for call apparatus
JP2018137735A (en) * 2015-12-30 2018-08-30 ジーエヌ ヒアリング エー/エスGN Hearing A/S Method and device for streaming communication with hearing aid device

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117740950A (en) * 2024-02-20 2024-03-22 四川名人居门窗有限公司 System and method for determining and feeding back sound insulation coefficient of glass
CN117740950B (en) * 2024-02-20 2024-05-14 四川名人居门窗有限公司 System and method for determining and feeding back sound insulation coefficient of glass

Also Published As

Publication number Publication date
JP7214704B2 (en) 2023-01-30
JP2023040244A (en) 2023-03-22

Similar Documents

Publication Publication Date Title
JP6807134B2 (en) Audio input / output device, hearing aid, audio input / output method and audio input / output program
JP4530051B2 (en) Audio signal transmitter / receiver
Liebich et al. Signal processing challenges for active noise cancellation headphones
CN104106112B (en) Silencing apparatus
US20190215621A1 (en) Audio device with contextually actuated valve
US11102576B2 (en) Audio device with audio signal processing based on acoustic valve state
CN111149369A (en) On-ear state detection for a headset
CN109218882B (en) Earphone and ambient sound monitoring method thereof
US11553286B2 (en) Wearable hearing assist device with artifact remediation
JP2020506634A (en) Method for detecting user voice activity in a communication assembly, the communication assembly
US10529358B2 (en) Method and system for reducing background sounds in a noisy environment
JPH10294989A (en) Noise control head set
EP2701143A1 (en) Model selection of acoustic conditions for active noise control
JP2023040244A (en) Earphone, voice processing method, and voice processing program
WO2020196796A1 (en) Audio output device, audio output method, and audio output program
EP4300992A1 (en) A hearing aid comprising a combined feedback and active noise cancellation system
JP4941579B2 (en) Audio signal transmitter / receiver
CN115039418A (en) System and method for on-ear detection of a headset
US11671767B2 (en) Hearing aid comprising a feedback control system
JP2009015209A (en) Speech articulation improving system and speech articulation improving method
JP7211658B2 (en) Audio output device, audio output method and audio output program
JP2019205124A (en) headphone
US20230026002A1 (en) Non-acoustic sensor for active noise cancellation
WO2021229670A1 (en) Conversation aiding device, conversation aiding method, conversation aiding program
CN115914927A (en) Call noise reduction method and device and noise reduction earphone

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20201202

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20211015

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20211130

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220126

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220621

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220822

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20221220

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230118

R150 Certificate of patent or registration of utility model

Ref document number: 7214704

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150