JP7373947B2 - 音響エコーキャンセル装置、音響エコーキャンセル方法及び音響エコーキャンセルプログラム - Google Patents

音響エコーキャンセル装置、音響エコーキャンセル方法及び音響エコーキャンセルプログラム Download PDF

Info

Publication number
JP7373947B2
JP7373947B2 JP2019163681A JP2019163681A JP7373947B2 JP 7373947 B2 JP7373947 B2 JP 7373947B2 JP 2019163681 A JP2019163681 A JP 2019163681A JP 2019163681 A JP2019163681 A JP 2019163681A JP 7373947 B2 JP7373947 B2 JP 7373947B2
Authority
JP
Japan
Prior art keywords
signal
echo
input signal
pseudo
component
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2019163681A
Other languages
English (en)
Other versions
JP2020171006A (ja
Inventor
慎一 杠
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Intellectual Property Corp of America
Original Assignee
Panasonic Intellectual Property Corp of America
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Intellectual Property Corp of America filed Critical Panasonic Intellectual Property Corp of America
Priority to EP19213522.6A priority Critical patent/EP3667662B1/en
Priority to CN201911254834.4A priority patent/CN111312268B/zh
Priority to US16/711,736 priority patent/US10999444B2/en
Publication of JP2020171006A publication Critical patent/JP2020171006A/ja
Application granted granted Critical
Publication of JP7373947B2 publication Critical patent/JP7373947B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Circuit For Audible Band Transducer (AREA)
  • Cable Transmission Systems, Equalization Of Radio And Reduction Of Echo (AREA)
  • Telephonic Communication Services (AREA)

Description

本開示は、マイクから出力される入力信号の音響エコー成分をキャンセルする音響エコーキャンセル装置、音響エコーキャンセル方法及び音響エコーキャンセルプログラムに関するものである。
従来、マイクとスピーカとを用いた拡声型の双方向通話システムが存在している。このような拡声型の双方向通話システムにおいて、送話側の話者が話した音声は、送話側のマイクに入力され、送話信号として通信回線を介して受話側の機器へ送信され、受話側のスピーカで再生される。受話側のスピーカで再生された音声は、受話側の空間を伝搬し受話側のマイクに入力され、送話側に送信される。このとき、送話側のスピーカからは、通信回線を通過した時間と受話側の空間を伝搬した時間とを経過した自身の発話した声が再生される。このように、受話側のスピーカからマイクの間で伝搬する音声は音響エコーと呼ばれ、通話品質の劣化に繋がる。
そのため、拡声型の双方向通話システムでは、音響エコーを抑制するエコーキャンセラが用いられる。
また、近年、より自然な通話環境を提供するために複数のマイクを用いた拡声型の双方向通話システムの開発が進められている(例えば、特許文献1参照)。
特許第5826712号明細書
しかしながら、上記従来の技術では、通話性能を維持するとともに、音響エコーを除去するための演算量を削減することが困難であり、更なる改善が必要とされていた。
本開示は、上記の問題を解決するためになされたもので、通話性能を維持することができるとともに、音響エコーを除去するための演算量を削減することができる音響エコーキャンセル装置、音響エコーキャンセル方法及び音響エコーキャンセルプログラムを提供することを目的とするものである。
本開示の一態様に係る音響エコーキャンセル装置は、少なくとも2つのマイクから得られる入力信号と、スピーカへ出力される再生信号とを用いて、前記入力信号に含まれる前記再生信号の成分を示す第1の擬似エコー信号を生成する第1のエコーキャンセラと、前記少なくとも2つのマイクから出力される少なくとも1つの入力信号と、前記第1のエコーキャンセラによって生成された前記第1の擬似エコー信号とを用いて、前記少なくとも1つの入力信号に含まれる前記第1の擬似エコー信号の成分を示す第2の擬似エコー信号を生成し、生成した前記第2の擬似エコー信号を用いて前記少なくとも1つの入力信号の音響エコー成分をキャンセルする第2のエコーキャンセラと、を備える。
本開示によれば、通話性能を維持することができるとともに、音響エコーを除去するための演算量を削減することができる。
本開示の実施の形態1における通話装置の構成を示す図である。 本開示の実施の形態1における音響エコーキャンセル装置の動作を説明するためのフローチャートである。 本開示の実施の形態1の変形例1における通話装置の構成を示す図である。 本開示の実施の形態2における通話装置の構成を示す図である。 本開示の実施の形態2における音響エコーキャンセル装置の動作を説明するためのフローチャートである。 本開示の実施の形態2の変形例における通話装置の構成を示す図である。 本開示の実施の形態3における通話装置の構成を示す図である。 本開示の実施の形態3における音響エコーキャンセル装置の動作を説明するためのフローチャートである。 本開示の実施の形態3の変形例における通話装置の構成を示す図である。 本開示の実施の形態1の変形例2における通話装置の構成を示す図である。
(本開示の基礎となった知見)
複数のマイクが用いられる拡声通話システムでは、マイク毎にエコーキャンセラが必要となるため、マイクの数に応じてエコーキャンセラの数も増加し、複数のエコーキャンセラ全体の演算量が多くなってしまう。
上記の従来のマルチチャネルエコー消去装置は、マイクと同じ数のエコーレプリカ生成部を備えており、各エコーレプリカ生成部の構成は同じである。そのため、マイクの数が増加するにつれて、エコーレプリカ生成部の数も増加し、音響エコーを除去するための演算量も増加するおそれがある。
また、上記の従来のマルチチャネルエコー消去装置では、エコーレプリカの生成処理と適応フィルタ係数の更新処理とを有効な波数領域に限定することにより、多数のスピーカとマイクロホンとからなるマルチチャネル拡声通話システムにおいて全体としての演算量を削減している。
しかしながら、従来のマルチチャネルエコー消去装置では、エコーレプリカ生成部の波数領域を限定するため、学習されない波数領域が発生し、波数領域の限定が通話性能の劣化の要因となるおそれがある。
以上の課題を解決するために、本開示の一態様に係る音響エコーキャンセル装置は、少なくとも2つのマイクから得られる入力信号と、スピーカへ出力される再生信号とを用いて、前記入力信号に含まれる前記再生信号の成分を示す第1の擬似エコー信号を生成する第1のエコーキャンセラと、前記少なくとも2つのマイクから出力される少なくとも1つの入力信号と、前記第1のエコーキャンセラによって生成された前記第1の擬似エコー信号とを用いて、前記少なくとも1つの入力信号に含まれる前記第1の擬似エコー信号の成分を示す第2の擬似エコー信号を生成し、生成した前記第2の擬似エコー信号を用いて前記少なくとも1つの入力信号の音響エコー成分をキャンセルする第2のエコーキャンセラと、を備える。
この構成によれば、第2の擬似エコー信号は、既に生成された第1の擬似エコー信号を用いて生成されるので、第2の擬似エコー信号を生成する際に用いられる適応フィルタのフィルタ長(タップ長)を短くすることができ、通話性能を維持することができるとともに、音響エコーを除去するための演算量を削減することができる。
また、上記の音響エコーキャンセル装置において、前記少なくとも2つのマイクから出力される少なくとも1つの入力信号を遅延させる遅延部をさらに備え、前記第2のエコーキャンセラは、遅延させた前記少なくとも1つの入力信号と、前記第1のエコーキャンセラによって生成された前記第1の擬似エコー信号とを用いて、遅延させた前記少なくとも1つの入力信号に含まれる前記第1の擬似エコー信号の成分を示す第2の擬似エコー信号を生成し、生成した前記第2の擬似エコー信号を用いて、遅延させた前記少なくとも1つの入力信号の音響エコー成分をキャンセルしてもよい。
この構成によれば、第2のエコーキャンセラに入力する少なくとも1つの入力信号を遅延させることにより、第1のエコーキャンセラによって生成された第1の擬似エコー信号と少なくとも1つの入力信号との時間差がなくなり、確実に第2の擬似エコー信号を生成することができる。
また、上記の音響エコーキャンセル装置において、前記少なくとも2つのマイクは、第1の入力信号を出力する第1のマイクと、第2の入力信号を出力する第2のマイクとを含み、前記遅延部は、前記第1の入力信号を遅延させる第1の遅延部と、前記第2の入力信号を遅延させる第2の遅延部とを含み、前記第1の入力信号と前記第2の入力信号とを加算する加算部をさらに備え、前記第1のエコーキャンセラは、前記加算部からの加算信号と前記再生信号とを用いて、前記加算信号に含まれる前記再生信号の成分を示す前記第1の擬似エコー信号を生成し、前記第2のエコーキャンセラは、遅延させた前記第1の入力信号と、前記第1のエコーキャンセラによって生成された前記第1の擬似エコー信号とを用いて、遅延させた前記第1の入力信号に含まれる前記第1の擬似エコー信号の成分を示す第3の擬似エコー信号を生成し、生成した前記第3の擬似エコー信号を用いて、遅延させた前記第1の入力信号の音響エコー成分をキャンセルする第3のエコーキャンセラと、遅延させた前記第2の入力信号と、前記第1のエコーキャンセラによって生成された前記第1の擬似エコー信号とを用いて、遅延させた前記第2の入力信号に含まれる前記第1の擬似エコー信号の成分を示す第4の擬似エコー信号を生成し、生成した前記第4の擬似エコー信号を用いて、遅延させた前記第2の入力信号の音響エコー成分をキャンセルする第4のエコーキャンセラと、を含んでもよい。
この構成によれば、第3のエコーキャンセラに入力する第1の入力信号を遅延させるとともに、第4のエコーキャンセラに入力する第2の入力信号を遅延させることにより、第1のエコーキャンセラによって生成された第1の擬似エコー信号と第1の入力信号との時間差がなくなるとともに、第1の擬似エコー信号と第2の入力信号との時間差がなくなり、確実に第3の擬似エコー信号及び第4の擬似エコー信号を生成することができる。
また、上記の音響エコーキャンセル装置において、前記少なくとも2つのマイクは、第1の入力信号を出力する第1のマイクと、第2の入力信号を出力する第2のマイクとを含み、前記第1の入力信号と前記第2の入力信号とを加算する加算部をさらに備え、前記第1のエコーキャンセラは、前記加算部からの加算信号と前記再生信号とを用いて、前記加算信号に含まれる前記再生信号の成分を示す前記第1の擬似エコー信号を生成し、前記第2のエコーキャンセラは、前記第1の入力信号と、前記第1のエコーキャンセラによって生成された前記第1の擬似エコー信号とを用いて、前記第1の入力信号に含まれる前記第1の擬似エコー信号の成分を示す第3の擬似エコー信号を生成し、生成した前記第3の擬似エコー信号を用いて前記第1の入力信号の音響エコー成分をキャンセルする第3のエコーキャンセラと、前記第2の入力信号と、前記第1のエコーキャンセラによって生成された前記第1の擬似エコー信号とを用いて、前記第2の入力信号に含まれる前記第1の擬似エコー信号の成分を示す第4の擬似エコー信号を生成し、生成した前記第4の擬似エコー信号を用いて前記第2の入力信号の音響エコー成分をキャンセルする第4のエコーキャンセラと、を含んでもよい。
この構成によれば、少なくとも2つのマイクはそれぞれ配置位置が異なる。そのため、音響エコーとして入力される反射波(エコー信号)の波形はマイク毎に異なる。エコー信号の位相が、話者の音声である入力信号とは逆位相である場合、エコー信号が入力信号に加算されることで、入力信号が消えてしまい、入力信号の音響エコーをキャンセルすることが困難となる。しかしながら、少なくとも2つのマイクからの第1の入力信号と第2の入力信号とが加算されるので、音響エコーの干渉による信号の欠落の影響を低減することができる。
また、上記の音響エコーキャンセル装置において、前記少なくとも2つのマイクは、第1の入力信号を出力する第1のマイクと、第2の入力信号を出力する第2のマイクとを含み、前記第1のエコーキャンセラは、前記第1の入力信号と前記再生信号とを用いて、前記第1の入力信号に含まれる前記再生信号の成分を示す前記第1の擬似エコー信号を生成し、生成した前記第1の擬似エコー信号を用いて前記第1の入力信号の音響エコー成分をキャンセルし、前記第2のエコーキャンセラは、前記第2の入力信号と、前記第1のエコーキャンセラによって生成された前記第1の擬似エコー信号とを用いて、前記第2の入力信号に含まれる前記第1の擬似エコー信号の成分を示す第2の擬似エコー信号を生成し、生成した前記第2の擬似エコー信号を用いて前記第2の入力信号の音響エコー成分をキャンセルしてもよい。
この構成によれば、第2の擬似エコー信号は、既に生成された第1の擬似エコー信号を用いて生成されるので、第2の擬似エコー信号を生成する際に用いられる適応フィルタのフィルタ長(タップ長)を短くすることができ、通話性能を維持することができるとともに、音響エコーを除去するための演算量を削減することができる。
また、上記の音響エコーキャンセル装置において、前記少なくとも2つのマイクは、第1の入力信号を出力する第1のマイクと、第2の入力信号を出力する第2のマイクとを含み、前記第1のエコーキャンセラは、前記第1の入力信号と前記第1の擬似エコー信号との誤差を示す第1の誤差信号を算出する第1の算出部と、前記第2の入力信号と前記第1の擬似エコー信号との誤差を示す第2の誤差信号を算出する第2の算出部と、前記第1の誤差信号と前記第2の誤差信号とを加算した加算信号を平均化する平均処理部と、前記平均処理部からの平均信号と前記再生信号とを用いて、前記平均信号に含まれる前記再生信号の成分を示す前記第1の擬似エコー信号を生成する生成部と、を含み、前記第2のエコーキャンセラは、前記第1の入力信号と、前記第1のエコーキャンセラによって生成された前記第1の擬似エコー信号とを用いて、前記第1の入力信号に含まれる前記第1の擬似エコー信号の成分を示す第3の擬似エコー信号を生成し、生成した前記第3の擬似エコー信号を用いて前記第1の入力信号の音響エコー成分をキャンセルする第3のエコーキャンセラと、前記第2の入力信号と、前記第1のエコーキャンセラによって生成された前記第1の擬似エコー信号とを用いて、前記第2の入力信号に含まれる前記第1の擬似エコー信号の成分を示す第4の擬似エコー信号を生成し、生成した前記第4の擬似エコー信号を用いて前記第2の入力信号の音響エコー成分をキャンセルする第4のエコーキャンセラと、を含んでもよい。
この構成によれば、少なくとも2つのマイクはそれぞれ配置位置が異なる。そのため、音響エコーとして入力される反射波(エコー信号)の波形はマイク毎に異なる。エコー信号の位相が、話者の音声である入力信号とは逆位相である場合、エコー信号が入力信号に加算されることで、入力信号が消えてしまい、入力信号の音響エコーをキャンセルすることが困難となる。しかしながら、少なくとも2つのマイクからの第1の入力信号及び第2の入力信号のそれぞれの誤差信号が加算及び平均化されるので、音響エコーの干渉による信号の欠落の影響を低減することができる。
また、上記の音響エコーキャンセル装置において、時間領域の前記入力信号を周波数領域の入力信号に変換する第1の変換部と、時間領域の前記再生信号を周波数領域の再生信号に変換する第2の変換部と、時間領域の前記少なくとも1つの入力信号を周波数領域の少なくとも1つの入力信号に変換する第3の変換部と、時間領域の前記第1の擬似エコー信号を周波数領域の第1の擬似エコー信号に変換する第4の変換部と、をさらに備えてもよい。
この構成によれば、第1のエコーキャンセラ及び第2のエコーキャンセラは、周波数領域の適応アルゴリズムを用いて第1の擬似エコー信号及び第2の擬似エコー信号を生成することができ、畳み込み演算がかけ算により実行することができるので、演算量をさらに削減することができる。
また、上記の音響エコーキャンセル装置において、前記第2のエコーキャンセラのフィルタ長は、前記第1のエコーキャンセラのフィルタ長より短くてもよい。
この構成によれば、第2のエコーキャンセラにおける音響エコーを除去するための演算量を削減することができる。
また、上記の音響エコーキャンセル装置において、前記第1のエコーキャンセラは、前記スピーカから最も近い位置のマイクに対して、前記第1の擬似エコー信号を生成してもよい。
この構成によれば、スピーカから最も近い位置のマイクから出力される入力信号と再生信号とを用いて、入力信号に含まれる再生信号の成分を示す第1の擬似エコー信号が生成され、生成された第1の擬似エコー信号を用いて第2の擬似エコー信号が生成されるので、第2の擬似エコー信号を生成する際に用いられる適応フィルタのフィルタ長(タップ長)を短くすることができる。
本開示の他の態様に係る音響エコーキャンセル方法は、マイクから出力される入力信号の音響エコー成分をキャンセルする音響エコーキャンセル装置における音響エコーキャンセル方法であって、前記少なくとも2つのマイクから得られる入力信号と、スピーカへ出力される再生信号とを用いて、前記入力信号に含まれる前記再生信号の成分を示す第1の擬似エコー信号を生成し、前記少なくとも2つのマイクから出力される少なくとも1つの入力信号と、前記第1のエコーキャンセラによって生成された前記第1の擬似エコー信号とを用いて、前記少なくとも1つの入力信号に含まれる前記第1の擬似エコー信号の成分を示す第2の擬似エコー信号を生成し、生成した前記第2の擬似エコー信号を用いて前記少なくとも1つの入力信号の音響エコー成分をキャンセルする。
この構成によれば、第2の擬似エコー信号は、既に生成された第1の擬似エコー信号を用いて生成されるので、第2の擬似エコー信号を生成する際に用いられる適応フィルタのフィルタ長(タップ長)を短くすることができ、通話性能を維持することができるとともに、音響エコーを除去するための演算量を削減することができる。
本開示の他の態様に係る音響エコーキャンセルプログラムは、少なくとも2つのマイクから得られる入力信号と、スピーカへ出力される再生信号とを用いて、前記入力信号に含まれる前記再生信号の成分を示す第1の擬似エコー信号を生成する第1のエコーキャンセラと、前記少なくとも2つのマイクから出力される少なくとも1つの入力信号と、前記第1のエコーキャンセラによって生成された前記第1の擬似エコー信号とを用いて、前記少なくとも1つの入力信号に含まれる前記第1の擬似エコー信号の成分を示す第2の擬似エコー信号を生成し、生成した前記第2の擬似エコー信号を用いて前記少なくとも1つの入力信号の音響エコー成分をキャンセルする第2のエコーキャンセラとしてコンピュータを機能させる。
この構成によれば、第2の擬似エコー信号は、既に生成された第1の擬似エコー信号を用いて生成されるので、第2の擬似エコー信号を生成する際に用いられる適応フィルタのフィルタ長(タップ長)を短くすることができ、通話性能を維持することができるとともに、音響エコーを除去するための演算量を削減することができる。
以下添付図面を参照しながら、本開示の実施の形態について説明する。なお、以下の実施の形態は、本開示を具体化した一例であって、本開示の技術的範囲を限定するものではない。
(実施の形態1)
図1は、本開示の実施の形態1における通話装置の構成を示す図である。なお、通話装置は、自動車等に搭載される拡声型のハンズフリー通話システム、拡声型の双方向通信会議システム及びインターホンシステムなどに利用される。
図1に示す通話装置は、音響エコーキャンセル装置1、第1のマイク11、第2のマイク12、入力端子14、スピーカ15、第1の出力端子20及び第2の出力端子21を備える。
第1のマイク11及び第2のマイク12は、送話者がいる空間内に配置され、送話者の音声を収音する。第1のマイク11は、収音した音声を示す第1の入力信号を音響エコーキャンセル装置1に出力する。第2のマイク12は、収音した音声を示す第2の入力信号を音響エコーキャンセル装置1に出力する。
入力端子14は、受話側の通話装置(不図示)から受信した再生信号を音響エコーキャンセル装置1及びスピーカ15へ出力する。
スピーカ15は、入力された再生信号を外部へ出力する。ここで、スピーカ15から出力された音声が、第1のマイク11及び第2のマイク12によって収音された場合、受話側のスピーカからは、受話側の話者の発話した音声が遅れて再生されることになり、いわゆる音響エコーが発生する。そこで、音響エコーキャンセル装置1は、第1のマイク11及び第2のマイク12から出力される第1の入力信号及び第2の入力信号の音響エコー成分をキャンセルする。
第1の出力端子20は、音響エコーキャンセル装置1によって音響エコー成分がキャンセルされた第1の入力信号を出力する。第2の出力端子21は、音響エコーキャンセル装置1によって音響エコー成分がキャンセルされた第2の入力信号を出力する。
なお、入力端子14、第1の出力端子20及び第2の出力端子21は、通信部(不図示)に接続されている。通信部は、ネットワークを介して受話側の通話装置(不図示)へ第1の入力信号及び第2の入力信号を送信するとともに、ネットワークを介して受話側の通話装置(不図示)から再生信号を受信する。ネットワークは、例えば、インターネットである。
音響エコーキャンセル装置1は、加算部13、第1のエコーキャンセラ16及び第2のエコーキャンセラ17を備える。
加算部13は、第1のマイク11からの第1の入力信号と第2のマイク12からの第2の入力信号とを加算する。
第1のエコーキャンセラ16は、少なくとも2つのマイクから得られる入力信号と、スピーカへ出力される再生信号とを用いて、入力信号に含まれる再生信号の成分を示す第1の擬似エコー信号を生成する。
本実施の形態1において、少なくとも2つのマイクから得られる入力信号は、第1のマイク11からの第1の入力信号と第2のマイク12からの第2の入力信号とを加算した加算信号である。すなわち、第1のエコーキャンセラ16は、加算部13からの加算信号と再生信号とを用いて、加算信号に含まれる再生信号の成分を示す第1の擬似エコー信号を生成する。
第1のエコーキャンセラ16は、適応フィルタ161及び誤差算出部162を備える。
適応フィルタ161は、フィルタ係数と再生信号とを畳み込むことにより、加算信号に含まれる再生信号の成分を示す第1の擬似エコー信号を生成する。
誤差算出部162は、加算部13からの加算信号と適応フィルタ161からの第1の擬似エコー信号との誤差信号を算出し、算出した誤差信号を適応フィルタ161へ出力する。適応フィルタ161は、入力された誤差信号に基づいてフィルタ係数を修正し、修正したフィルタ係数と再生信号とを畳み込むことにより第1の擬似エコー信号を生成する。適応フィルタ161は、適応アルゴリズムを用いて、誤差信号が最小となるようにフィルタ係数を修正する。適応アルゴリズムとしては、例えば、学習同定法(NLMS(Normarized Least Mean Square)法)、アフィン射影法又は再帰的最小2乗法(RLS(Recursive Least Square)法)が用いられる。
第2のエコーキャンセラ17は、少なくとも2つのマイクから出力される少なくとも1つの入力信号と、第1のエコーキャンセラ16によって生成された第1の擬似エコー信号とを用いて、少なくとも1つの入力信号に含まれる第1の擬似エコー信号の成分を示す第2の擬似エコー信号を生成し、生成した第2の擬似エコー信号を用いて少なくとも1つの入力信号の音響エコー成分をキャンセルする。
第2のエコーキャンセラ17は、第1の入力信号の音響エコー成分をキャンセルする第3のエコーキャンセラ18及び第2の入力信号の音響エコー成分をキャンセルする第4のエコーキャンセラ19を備える。第1のエコーキャンセラ16によって生成された第1の擬似エコー信号は、第3のエコーキャンセラ18及び第4のエコーキャンセラ19に出力される。
第3のエコーキャンセラ18は、第1の入力信号と、第1のエコーキャンセラ16によって生成された第1の擬似エコー信号とを用いて、第1の入力信号に含まれる第1の擬似エコー信号の成分を示す第3の擬似エコー信号を生成し、生成した第3の擬似エコー信号を用いて第1の入力信号の音響エコー成分をキャンセルする。
第3のエコーキャンセラ18は、適応フィルタ181及び誤差算出部182を備える。
適応フィルタ181は、フィルタ係数と第1の擬似エコー信号とを畳み込むことにより、第1の入力信号に含まれる第1の擬似エコー信号の成分を示す第3の擬似エコー信号を生成する。
誤差算出部182は、第1のマイク11からの第1の入力信号と適応フィルタ181からの第3の擬似エコー信号との誤差信号を算出し、算出した誤差信号を適応フィルタ181へ出力する。適応フィルタ181は、入力された誤差信号に基づいてフィルタ係数を修正し、修正したフィルタ係数と第1の擬似エコー信号とを畳み込むことにより第3の擬似エコー信号を生成する。適応フィルタ181は、適応アルゴリズムを用いて、誤差信号が最小となるようにフィルタ係数を修正する。適応アルゴリズムとしては、例えば、学習同定法、アフィン射影法又は再帰的最小2乗法が用いられる。
また、誤差算出部182は、第1のマイク11からの第1の入力信号から、適応フィルタ181からの第3の擬似エコー信号を減算することにより、第1の入力信号から音響エコー成分をキャンセルする。そのため、誤差算出部182は、音響エコー成分をキャンセルした第1の入力信号を第1の出力端子20へ出力する。
第4のエコーキャンセラ19は、第2の入力信号と、第1のエコーキャンセラ16によって生成された第1の擬似エコー信号とを用いて、第2の入力信号に含まれる第1の擬似エコー信号の成分を示す第4の擬似エコー信号を生成し、生成した第4の擬似エコー信号を用いて第2の入力信号の音響エコー成分をキャンセルする。
第4のエコーキャンセラ19は、適応フィルタ191及び誤差算出部192を備える。
適応フィルタ191は、フィルタ係数と第1の擬似エコー信号とを畳み込むことにより、第2の入力信号に含まれる第1の擬似エコー信号の成分を示す第4の擬似エコー信号を生成する。
誤差算出部192は、第2のマイク12からの第2の入力信号と適応フィルタ191からの第4の擬似エコー信号との誤差信号を算出し、算出した誤差信号を適応フィルタ191へ出力する。適応フィルタ191は、入力された誤差信号に基づいてフィルタ係数を修正し、修正したフィルタ係数と第1の擬似エコー信号とを畳み込むことにより第4の擬似エコー信号を生成する。適応フィルタ191は、適応アルゴリズムを用いて、誤差信号が最小となるようにフィルタ係数を修正する。適応アルゴリズムとしては、例えば、学習同定法、アフィン射影法又は再帰的最小2乗法が用いられる。
また、誤差算出部192は、第2のマイク12からの第2の入力信号から、適応フィルタ191からの第4の擬似エコー信号を減算することにより、第2の入力信号から音響エコー成分をキャンセルする。そのため、誤差算出部192は、音響エコー成分をキャンセルした第2の入力信号を第2の出力端子21へ出力する。
なお、本実施の形態1において、第2のエコーキャンセラ17のフィルタ長は、第1のエコーキャンセラ16のフィルタ長より短い。すなわち、第3のエコーキャンセラ18の適応フィルタ181のフィルタ長は、第1のエコーキャンセラ16の適応フィルタ161のフィルタ長より短く、第4のエコーキャンセラ19の適応フィルタ191のフィルタ長は、第1のエコーキャンセラ16の適応フィルタ161のフィルタ長より短い。
なお、本実施の形態1において、通話装置は、2つのマイクを備えているが、本開示は特にこれに限定されず、3つ以上のマイクを備えてもよい。通話装置が3つ以上のマイクを備える場合、加算部13は、3つ以上のマイクからの各入力信号を加算し、第1のエコーキャンセラ16は、3つ以上のマイクのそれぞれに対して設けられたエコーキャンセラへ第1の擬似エコー信号を出力する。
また、本実施の形態1において、通話装置は、1つのスピーカを備えているが、本開示は特にこれに限定されず、2つ以上のスピーカを備えてもよい。通話装置が複数のスピーカを備える場合、通話装置は、複数のスピーカと同じ数の音響エコーキャンセル装置1を備える必要がある。
次に、本開示の実施の形態1における音響エコーキャンセル装置1の動作について説明する。
図2は、本開示の実施の形態1における音響エコーキャンセル装置の動作を説明するためのフローチャートである。
まず、ステップS1において、加算部13は、第1のマイク11からの第1の入力信号と第2のマイク12からの第2の入力信号とを加算する。このとき、加算部13には、第1のマイク11からの第1の入力信号と第2のマイク12からの第2の入力信号とが入力される。
次に、ステップS2において、第1のエコーキャンセラ16の適応フィルタ161は、フィルタ係数と再生信号とを畳み込むことにより、加算信号に含まれる再生信号の成分を示す第1の擬似エコー信号を生成する。
次に、ステップS3において、誤差算出部162は、加算部13からの加算信号から、適応フィルタ161からの第1の擬似エコー信号を減算することにより、加算信号と第1の擬似エコー信号との誤差信号を算出する。誤差算出部162は、算出した誤差信号を適応フィルタ161へ出力する。
次に、ステップS4において、適応フィルタ161は、誤差算出部162から入力された誤差信号に基づいてフィルタ係数を修正する。適応フィルタ161は、修正したフィルタ係数と再生信号とを畳み込むことにより第1の擬似エコー信号を生成する。
次に、ステップS5において、適応フィルタ161は、生成した第1の擬似エコー信号を第3のエコーキャンセラ18及び第4のエコーキャンセラ19へ出力する。
次に、ステップS6において、第3のエコーキャンセラ18の適応フィルタ181は、フィルタ係数と第1の擬似エコー信号とを畳み込むことにより、第1の入力信号に含まれる第1の擬似エコー信号の成分を示す第3の擬似エコー信号を生成する。
次に、ステップS7において、誤差算出部182は、第1のマイク11からの第1の入力信号から、適応フィルタ181からの第3の擬似エコー信号を減算することにより、第1の入力信号と第3の擬似エコー信号との誤差信号を算出する。誤差算出部182は、算出した誤差信号を適応フィルタ181へ出力する。
次に、ステップS8において、適応フィルタ181は、誤差算出部182から入力された誤差信号に基づいてフィルタ係数を修正する。適応フィルタ181は、修正したフィルタ係数と第1の擬似エコー信号とを畳み込むことにより第3の擬似エコー信号を生成する。
次に、ステップS9において、誤差算出部182は、音響エコー成分をキャンセルした第1の入力信号を第1の出力端子20へ出力する。すなわち、誤差算出部182は、第1のマイク11からの第1の入力信号から、適応フィルタ181からの第3の擬似エコー信号を減算することにより、第1の入力信号から音響エコー成分をキャンセルする。
次に、ステップS10において、第4のエコーキャンセラ19の適応フィルタ191は、フィルタ係数と第1の擬似エコー信号とを畳み込むことにより、第2の入力信号に含まれる第1の擬似エコー信号の成分を示す第4の擬似エコー信号を生成する。
次に、ステップS11において、誤差算出部192は、第2のマイク12からの第2の入力信号から、適応フィルタ191からの第4の擬似エコー信号を減算することにより、第2の入力信号と第4の擬似エコー信号との誤差信号を算出する。誤差算出部192は、算出した誤差信号を適応フィルタ191へ出力する。
次に、ステップS12において、適応フィルタ191は、誤差算出部192から入力された誤差信号に基づいてフィルタ係数を修正する。適応フィルタ191は、修正したフィルタ係数と第1の擬似エコー信号とを畳み込むことにより第4の擬似エコー信号を生成する。
次に、ステップS13において、誤差算出部192は、音響エコー成分をキャンセルした第2の入力信号を第2の出力端子21へ出力する。すなわち、誤差算出部192は、第2のマイク12からの第2の入力信号から、適応フィルタ191からの第4の擬似エコー信号を減算することにより、第2の入力信号から音響エコー成分をキャンセルする。
なお、音響エコーキャンセル装置1が動作を開始した初期段階では、フィルタ係数が充分に修正されていないため、第1の入力信号及び第2の入力信号から音響エコー成分を充分にキャンセルすることができないが、ステップS1~ステップS13の処理が繰り返し実行されることで、フィルタ係数が充分に修正され、第1の入力信号及び第2の入力信号から音響エコー成分を充分にキャンセルすることができるようになる。
このように、第1のエコーキャンセラ16によって、少なくとも2つのマイクから得られる入力信号に含まれる再生信号の成分を示す第1の擬似エコー信号が生成され、第2のエコーキャンセラ17によって、少なくとも1つの入力信号に含まれる第1の擬似エコー信号の成分を示す第2の擬似エコー信号が生成され、生成された第2の擬似エコー信号を用いて少なくとも1つの入力信号の音響エコー成分がキャンセルされる。
したがって、第2の擬似エコー信号は、既に生成された第1の擬似エコー信号を用いて生成されるので、第2の擬似エコー信号を生成する際に用いられる適応フィルタのフィルタ長(タップ長)を短くすることができ、通話性能を維持することができるとともに、音響エコーを除去するための演算量を削減することができる。
特に、第1段目のエコーキャンセラ(第1のエコーキャンセラ16)によるエコーキャンセル処理は、従来と同じ程度のフィルタ長(演算量)であるが、第2段目以降のエコーキャンセラ(第3のエコーキャンセラ18及び第4のエコーキャンセラ19)によるエコーキャンセル処理は、既に生成された第1の擬似エコー信号が用いられるので、従来よりもフィルタ長を短くすることができ、その結果、従来よりも演算量を削減することができる。そのため、マイクの数が増えるほど、従来に比べて演算量をより削減すことができる。
本実施の形態1において、第1のエコーキャンセラ16は、第1のマイク11からの第1の入力信号と第2のマイク12からの第2の入力信号とを加算した加算信号と、スピーカ15への再生信号とを用いて、第1の擬似エコー信号を生成している。これは、スピーカ15から、第1のマイク11と第2のマイク12との中間位置に配置される仮想的なマイクに入力される音響エコーを推定していると言える。そして、第3のエコーキャンセラ18は、第1のエコーキャンセラ16によって生成された第1の擬似エコー信号を用いて第3の擬似エコー信号を生成している。これは、仮想的なマイクの位置と第1のマイク11の位置との差分に相当する音響エコーを推定していると言える。そのため、第3のエコーキャンセラ18の適応フィルタ181のフィルタ長は、第1のエコーキャンセラ16の適応フィルタ161のフィルタ長よりも大幅に短くすることができる。同様に、第4のエコーキャンセラ19の適応フィルタ191のフィルタ長は、第1のエコーキャンセラ16の適応フィルタ161のフィルタ長よりも大幅に短くすることができる。
例えば、第3のエコーキャンセラ18及び第4のエコーキャンセラ19の演算量は、第1のエコーキャンセラ16の演算量の10分の1程度に低減することができる。そのため、第1のエコーキャンセラ16、第3のエコーキャンセラ18及び第4のエコーキャンセラ19の総演算量は、第1のマイク11及び第2のマイク12のそれぞれに第1のエコーキャンセラ16と同じ演算量の2つのエコーキャンセラを設けた場合の総演算量よりも、充分に少なくすることができる。
また、複数のマイクはそれぞれ配置位置が異なる。そのため、音響エコーとして入力される反射波(エコー信号)の波形は複数のマイク毎に異なる。エコー信号の位相が、話者の音声である入力信号とは逆位相である場合、エコー信号が入力信号に加算されることで、入力信号が消えてしまい、入力信号の音響エコーをキャンセルすることが困難となる。しかしながら、本実施の形態1では、少なくとも2つのマイクからの第1の入力信号と第2の入力信号とが加算されるので、音響エコーの干渉による信号の欠落の影響を低減することができる。
なお、本実施の形態1では、第1のエコーキャンセラ16には、時間領域の再生信号及び時間領域の加算信号が入力され、第2のエコーキャンセラ17には、時間領域の第1の入力信号、時間領域の第2の入力信号及び時間領域の第1の擬似エコー信号が入力されるが、本開示は特にこれに限定されず、第1のエコーキャンセラ16には、周波数領域の再生信号及び周波数領域の加算信号が入力され、第2のエコーキャンセラ17には、周波数領域の第1の入力信号、周波数領域の第2の入力信号及び周波数領域の第1の擬似エコー信号が入力されてもよい。以下、この実施の形態1の変形例1について説明する。
図3は、本開示の実施の形態1の変形例1における通話装置の構成を示す図である。
図3に示す通話装置は、音響エコーキャンセル装置1A、第1のマイク11、第2のマイク12、入力端子14、スピーカ15、第1の出力端子20及び第2の出力端子21を備える。なお、実施の形態1の変形例1において、実施の形態1と同じ構成については同じ符号を付し、説明を省略する。
音響エコーキャンセル装置1Aは、加算部13、第1のエコーキャンセラ16、第2のエコーキャンセラ17、高速フーリエ変換部24,25,28,29及び逆高速フーリエ変換部30,31を備える。
高速フーリエ変換部24,25,28,29は、離散フーリエ変換を高速に行う。高速フーリエ変換部24は、第1のエコーキャンセラ16に入力される時間領域の再生信号を周波数領域の再生信号に変換する。高速フーリエ変換部25は、加算部13から第1のエコーキャンセラ16に入力される時間領域の加算信号(入力信号)を周波数領域の加算信号(入力信号)に変換する。
高速フーリエ変換部28は、第1のマイク11から第3のエコーキャンセラ18に入力される時間領域の第1の入力信号(少なくとも1つの入力信号)を周波数領域の第1の入力信号(少なくとも1つの入力信号)に変換する。高速フーリエ変換部29は、第2のマイク12から第4のエコーキャンセラ19に入力される時間領域の第2の入力信号(少なくとも1つの入力信号)を周波数領域の第2の入力信号(少なくとも1つの入力信号)に変換する。
逆高速フーリエ変換部30,31は、逆離散フーリエ変換を高速に行う。逆高速フーリエ変換部30は、第3のエコーキャンセラ18から第1の出力端子20に入力される周波数領域の第1の入力信号を時間領域の第1の入力信号に変換する。逆高速フーリエ変換部31は、第4のエコーキャンセラ19から第2の出力端子21に入力される周波数領域の第2の入力信号を時間領域の第2の入力信号に変換する。
第1のエコーキャンセラ16は、周波数領域の加算信号と周波数領域の再生信号とを用いて、周波数領域の第1の擬似エコー信号を生成する。
第3のエコーキャンセラ18は、周波数領域の第1の入力信号と、周波数領域の第1の擬似エコー信号とを用いて、周波数領域の第3の擬似エコー信号を生成し、生成した周波数領域の第3の擬似エコー信号を用いて周波数領域の第1の入力信号の音響エコー成分をキャンセルする。
第4のエコーキャンセラ19は、周波数領域の第2の入力信号と、周波数領域の第1の擬似エコー信号とを用いて、周波数領域の第4の擬似エコー信号を生成し、生成した周波数領域の第4の擬似エコー信号を用いて周波数領域の第2の入力信号の音響エコー成分をキャンセルする。
本実施の形態1の変形例1では、適応フィルタ161,181,191が周波数領域の適応アルゴリズムを用いることができ、畳み込み演算がかけ算により実行することができるので、演算量をさらに削減することができる。
なお、本実施の形態1では、第1のマイク11の配置位置によっては、第1のマイク11からの第1の入力信号と、第1のエコーキャンセラ16によって生成された第1の擬似エコー信号とに時間差が発生するおそれがある。例えば、スピーカ15からの音が第1のマイク11に入力される場合、第1のマイク11からの第1の入力信号には、第1のエコーキャンセラ16によって生成された第1の擬似エコー信号よりも時間的に速いエコー信号が含まれるおそれがある。この場合、理論的に、第3のエコーキャンセラ18は、第1の擬似エコー信号を用いて、第1の入力信号に含まれるエコー信号を推定することができないおそれがある。そこで、音響エコーキャンセル装置は、少なくとも2つのマイクから出力される少なくとも1つの入力信号を遅延させる遅延部をさらに備えてもよい。以下、この実施の形態1の変形例2について説明する。
図10は、本開示の実施の形態1の変形例2における通話装置の構成を示す図である。
図10に示す通話装置は、音響エコーキャンセル装置1F、第1のマイク11、第2のマイク12、入力端子14、スピーカ15、第1の出力端子20及び第2の出力端子21を備える。なお、実施の形態1の変形例2において、実施の形態1と同じ構成については同じ符号を付し、説明を省略する。
音響エコーキャンセル装置1Fは、加算部13、第1のエコーキャンセラ16、第2のエコーキャンセラ17及び遅延部80を備える。
遅延部80は、少なくとも2つのマイクから出力される少なくとも1つの入力信号を遅延させる。遅延部80は、第1の遅延部81及び第2の遅延部82を備える。
第1の遅延部81は、第1のマイク11と第3のエコーキャンセラ18との間に配置される。第1の遅延部81は、第1のマイク11からの第1の入力信号を遅延させる。
第2の遅延部82は、第2のマイク12と第4のエコーキャンセラ19との間に配置される。第2の遅延部82は、第2のマイク12からの第2の入力信号を遅延させる。
第2のエコーキャンセラ17は、遅延させた少なくとも1つの入力信号と、第1のエコーキャンセラ16によって生成された第1の擬似エコー信号とを用いて、遅延させた少なくとも1つの入力信号に含まれる第1の擬似エコー信号の成分を示す第2の擬似エコー信号を生成し、生成した第2の擬似エコー信号を用いて、遅延させた少なくとも1つの入力信号の音響エコー成分をキャンセルする。
第3のエコーキャンセラ18は、遅延させた第1の入力信号と、第1のエコーキャンセラ16によって生成された第1の擬似エコー信号とを用いて、遅延させた第1の入力信号に含まれる第1の擬似エコー信号の成分を示す第3の擬似エコー信号を生成し、生成した第3の擬似エコー信号を用いて、遅延させた第1の入力信号の音響エコー成分をキャンセルする。
第4のエコーキャンセラ19は、遅延させた第2の入力信号と、第1のエコーキャンセラ16によって生成された第1の擬似エコー信号とを用いて、遅延させた第2の入力信号に含まれる第1の擬似エコー信号の成分を示す第4の擬似エコー信号を生成し、生成した第4の擬似エコー信号を用いて、遅延させた第2の入力信号の音響エコー成分をキャンセルする。
本実施の形態1の変形例2では、第1の遅延部81によって遅延させた第1の入力信号が第3のエコーキャンセラ18に入力され、第2の遅延部82によって遅延させた第2の入力信号が第4のエコーキャンセラ19に入力されるので、第1のエコーキャンセラ16によって生成された第1の擬似エコー信号と第1の入力信号との時間差がなくなるとともに、第1の擬似エコー信号と第2の入力信号との時間差がなくなり、確実に第3の擬似エコー信号及び第4の擬似エコー信号を生成することができる。
なお、本実施の形態1の変形例1において、音響エコーキャンセル装置1Aは、第1のマイク11と高速フーリエ変換部28との間に第1の遅延部81を備えてもよく、第2のマイク12と高速フーリエ変換部29との間に第2の遅延部82を備えてもよい。
また、本実施の形態1では、加算部13が第1のマイク11からの第1の入力信号と第2のマイク12からの第2の入力信号とを加算し、第1のエコーキャンセラ16は、加算信号と再生信号とを用いて、加算信号に含まれる再生信号の成分を示す第1の擬似エコー信号を生成しているが、本開示は特にこれに限定されず、音響エコーキャンセル装置1は、加算部13からの加算信号を平均化する平均処理部をさらに備えてもよい。この場合、第1のエコーキャンセラ16は、平均処理部からの平均化信号と再生信号とを用いて、平均化信号に含まれる再生信号の成分を示す第1の擬似エコー信号を生成してもよい。
(実施の形態2)
実施の形態1では、第1のエコーキャンセラによって生成された第1の擬似エコー信号が第3のエコーキャンセラ及び第4のエコーキャンセラに出力され、第3のエコーキャンセラが第1の擬似エコー信号を用いて第1の入力信号の音響エコー成分をキャンセルし、第4のエコーキャンセラが第1の擬似エコー信号を用いて第2の入力信号の音響エコー成分をキャンセルしているが、実施の形態2では、第1のエコーキャンセラが、第1の擬似エコー信号を生成するとともに、第1の擬似エコー信号を用いて第1の入力信号の音響エコー成分をキャンセルし、第2のエコーキャンセラが、第1の擬似エコー信号を用いて第2の入力信号の音響エコー成分をキャンセルする。
図4は、本開示の実施の形態2における通話装置の構成を示す図である。
図4に示す通話装置は、音響エコーキャンセル装置1B、第1のマイク11、第2のマイク12、入力端子14、スピーカ15、第1の出力端子20及び第2の出力端子21を備える。なお、実施の形態2において、実施の形態1と同じ構成については同じ符号を付し、説明を省略する。
音響エコーキャンセル装置1Bは、第1のエコーキャンセラ41及び第2のエコーキャンセラ42を備える。
第1のエコーキャンセラ41は、少なくとも2つのマイクから得られる入力信号と、スピーカへ出力される再生信号とを用いて、入力信号に含まれる再生信号の成分を示す第1の擬似エコー信号を生成する。
第1のエコーキャンセラ41は、スピーカ15から最も近い位置のマイクに対して、第1の擬似エコー信号を生成することが好ましい。この場合、第1のエコーキャンセラ41は、スピーカ15から最も近い位置のマイクから出力される入力信号と再生信号とを用いて、入力信号に含まれる再生信号の成分を示す第1の擬似エコー信号を生成する。本実施の形態2において、スピーカ15から最も近い位置のマイクは、第1のマイク11である。
本実施の形態2において、少なくとも2つのマイクから得られる入力信号は、第1のマイク11からの第1の入力信号である。すなわち、第1のエコーキャンセラ41は、第1の入力信号と再生信号とを用いて、第1の入力信号に含まれる再生信号の成分を示す第1の擬似エコー信号を生成する。また、第1のエコーキャンセラ41は、生成した第1の擬似エコー信号を用いて第1の入力信号の音響エコー成分をキャンセルする。
第1のエコーキャンセラ41は、適応フィルタ411及び誤差算出部412を備える。
適応フィルタ411は、フィルタ係数と再生信号とを畳み込むことにより、第1の入力信号に含まれる再生信号の成分を示す第1の擬似エコー信号を生成する。
誤差算出部412は、第1のマイク11からの第1の入力信号と適応フィルタ411からの第1の擬似エコー信号との誤差信号を算出し、算出した誤差信号を適応フィルタ411へ出力する。適応フィルタ411は、入力された誤差信号に基づいてフィルタ係数を修正し、修正したフィルタ係数と再生信号とを畳み込むことにより第1の擬似エコー信号を生成する。適応フィルタ411は、適応アルゴリズムを用いて、誤差信号が最小となるようにフィルタ係数を修正する。適応アルゴリズムとしては、例えば、学習同定法、アフィン射影法又は再帰的最小2乗法が用いられる。
また、誤差算出部412は、第1のマイク11からの第1の入力信号から、適応フィルタ411からの第1の擬似エコー信号を減算することにより、第1の入力信号から音響エコー成分をキャンセルする。そのため、誤差算出部412は、音響エコー成分をキャンセルした第1の入力信号を第1の出力端子20へ出力する。
第1のエコーキャンセラ41によって生成された第1の擬似エコー信号は、第2のエコーキャンセラ42に出力される。
第2のエコーキャンセラ42は、第2の入力信号と、第1のエコーキャンセラ41によって生成された第1の擬似エコー信号とを用いて、第2の入力信号に含まれる第1の擬似エコー信号の成分を示す第2の擬似エコー信号を生成し、生成した第2の擬似エコー信号を用いて第2の入力信号の音響エコー成分をキャンセルする。
第2のエコーキャンセラ42は、適応フィルタ421及び誤差算出部422を備える。
適応フィルタ421は、フィルタ係数と第1の擬似エコー信号とを畳み込むことにより、第2の入力信号に含まれる第1の擬似エコー信号の成分を示す第2の擬似エコー信号を生成する。
誤差算出部422は、第2のマイク12からの第2の入力信号と適応フィルタ421からの第2の擬似エコー信号との誤差信号を算出し、算出した誤差信号を適応フィルタ421へ出力する。適応フィルタ421は、入力された誤差信号に基づいてフィルタ係数を修正し、修正したフィルタ係数と第1の擬似エコー信号とを畳み込むことにより第2の擬似エコー信号を生成する。適応フィルタ421は、適応アルゴリズムを用いて、誤差信号が最小となるようにフィルタ係数を修正する。適応アルゴリズムとしては、例えば、学習同定法、アフィン射影法又は再帰的最小2乗法が用いられる。
また、誤差算出部422は、第2のマイク12からの第2の入力信号から、適応フィルタ421からの第2の擬似エコー信号を減算することにより、第2の入力信号から音響エコー成分をキャンセルする。そのため、誤差算出部422は、音響エコー成分をキャンセルした第2の入力信号を第2の出力端子21へ出力する。
なお、本実施の形態2において、通話装置は、2つのマイクを備えているが、本開示は特にこれに限定されず、3つ以上のマイクを備えてもよい。通話装置が3つ以上のマイクを備える場合、第1のエコーキャンセラ41は、第1のマイク11以外の他のマイクのそれぞれに対して設けられたエコーキャンセラへ第1の擬似エコー信号を出力する。
また、本実施の形態2において、通話装置は、1つのスピーカを備えているが、本開示は特にこれに限定されず、2つ以上のスピーカを備えてもよい。通話装置が複数のスピーカを備える場合、通話装置は、複数のスピーカと同じ数の音響エコーキャンセル装置1Bを備える必要がある。
次に、本開示の実施の形態2における音響エコーキャンセル装置1Bの動作について説明する。
図5は、本開示の実施の形態2における音響エコーキャンセル装置の動作を説明するためのフローチャートである。
まず、ステップS21において、第1のエコーキャンセラ41の適応フィルタ411は、フィルタ係数と再生信号とを畳み込むことにより、第1の入力信号に含まれる再生信号の成分を示す第1の擬似エコー信号を生成する。
次に、ステップS22において、誤差算出部412は、第1のマイク11からの第1の入力信号から、適応フィルタ411からの第1の擬似エコー信号を減算することにより、第1の入力信号と第1の擬似エコー信号との誤差信号を算出する。誤差算出部412は、算出した誤差信号を適応フィルタ411へ出力する。
次に、ステップS23において、適応フィルタ411は、誤差算出部412から入力された誤差信号に基づいてフィルタ係数を修正する。適応フィルタ411は、修正したフィルタ係数と再生信号とを畳み込むことにより第1の擬似エコー信号を生成する。
次に、ステップS24において、誤差算出部412は、音響エコー成分をキャンセルした第1の入力信号を第1の出力端子20へ出力する。すなわち、誤差算出部412は、第1のマイク11からの第1の入力信号から、適応フィルタ411からの第1の擬似エコー信号を減算することにより、第1の入力信号から音響エコー成分をキャンセルする。
次に、ステップS25において、適応フィルタ411は、生成した第1の擬似エコー信号を第2のエコーキャンセラ42へ出力する。
次に、ステップS26において、第2のエコーキャンセラ42の適応フィルタ421は、フィルタ係数と第1の擬似エコー信号とを畳み込むことにより、第2の入力信号に含まれる第1の擬似エコー信号の成分を示す第2の擬似エコー信号を生成する。
次に、ステップS27において、誤差算出部422は、第2のマイク12からの第2の入力信号から、適応フィルタ421からの第2の擬似エコー信号を減算することにより、第2の入力信号と第2の擬似エコー信号との誤差信号を算出する。誤差算出部422は、算出した誤差信号を適応フィルタ421へ出力する。
次に、ステップS28において、適応フィルタ421は、誤差算出部422から入力された誤差信号に基づいてフィルタ係数を修正する。適応フィルタ421は、修正したフィルタ係数と第1の擬似エコー信号とを畳み込むことにより第2の擬似エコー信号を生成する。
次に、ステップS29において、誤差算出部422は、音響エコー成分をキャンセルした第2の入力信号を第2の出力端子21へ出力する。すなわち、誤差算出部422は、第2のマイク12からの第2の入力信号から、適応フィルタ421からの第2の擬似エコー信号を減算することにより、第2の入力信号から音響エコー成分をキャンセルする。
なお、音響エコーキャンセル装置1Bが動作を開始した初期段階では、フィルタ係数が充分に修正されていないため、第1の入力信号及び第2の入力信号から音響エコー成分を充分にキャンセルすることができないが、ステップS21~ステップS29の処理が繰り返し実行されることで、フィルタ係数が充分に修正され、第1の入力信号及び第2の入力信号から音響エコー成分を充分にキャンセルすることができるようになる。
このように、第1のエコーキャンセラ41によって、第1のマイク11から得られる第1の入力信号に含まれる再生信号の成分を示す第1の擬似エコー信号が生成され、生成された第1の擬似エコー信号を用いて第1の入力信号の音響エコー成分がキャンセルされ、第2のエコーキャンセラ42によって、第2の入力信号に含まれる第1の擬似エコー信号の成分を示す第2の擬似エコー信号が生成され、生成された第2の擬似エコー信号を用いて第2の入力信号の音響エコー成分がキャンセルされる。
したがって、第2の擬似エコー信号は、既に生成された第1の擬似エコー信号を用いて生成されるので、第2の擬似エコー信号を生成する際に用いられる適応フィルタのフィルタ長(タップ長)を短くすることができ、通話性能を維持することができるとともに、音響エコーを除去するための演算量を削減することができる。
特に、第1段目のエコーキャンセラ(第1のエコーキャンセラ41)によるエコーキャンセル処理は、従来と同じ程度のフィルタ長(演算量)であるが、第2段目以降のエコーキャンセラ(第2のエコーキャンセラ42)によるエコーキャンセル処理は、既に生成された第1の擬似エコー信号が用いられるので、従来よりもフィルタ長を短くすることができ、その結果、従来よりも演算量を削減することができる。そのため、マイクの数が増えるほど、従来に比べて演算量をより削減すことができる。
本実施の形態2において、第1のエコーキャンセラ41は、第1のマイク11からの第1の入力信号と、スピーカ15への再生信号とを用いて、第1の擬似エコー信号を生成している。これは、スピーカ15から、第1のマイク11に入力される音響エコーを推定していると言える。そして、第2のエコーキャンセラ42は、第1のエコーキャンセラ16によって生成された第1の擬似エコー信号を用いて第2の擬似エコー信号を生成している。これは、第1のマイク11の位置と第2のマイク12の位置との差分に相当する音響エコーを推定していると言える。そのため、第2のエコーキャンセラ42の適応フィルタ421のフィルタ長は、第1のエコーキャンセラ41の適応フィルタ411のフィルタ長よりも大幅に短くすることができる。
例えば、第2のエコーキャンセラ42の演算量は、第1のエコーキャンセラ41の演算量の10分の1程度に低減することができる。そのため、第1のエコーキャンセラ41及び第2のエコーキャンセラ42の総演算量は、第1のマイク11及び第2のマイク12のそれぞれに第1のエコーキャンセラ41と同じ演算量の2つのエコーキャンセラを設けた場合の総演算量よりも、充分に少なくすることができる。
なお、本実施の形態2において、音響エコーキャンセル装置1Bは、第2のマイク12と第2のエコーキャンセラ42との間に遅延部を備えてもよい。
なお、本実施の形態2では、第1のエコーキャンセラ41には、時間領域の再生信号及び時間領域の第1の入力信号が入力され、第2のエコーキャンセラ42には、時間領域の第2の入力信号及び時間領域の第1の擬似エコー信号が入力されるが、本開示は特にこれに限定されず、第1のエコーキャンセラ41には、周波数領域の再生信号及び周波数領域の第1の入力信号が入力され、第2のエコーキャンセラ42には、周波数領域の第2の入力信号及び周波数領域の第1の擬似エコー信号が入力されてもよい。以下、この実施の形態2の変形例について説明する。
図6は、本開示の実施の形態2の変形例における通話装置の構成を示す図である。
図6に示す通話装置は、音響エコーキャンセル装置1C、第1のマイク11、第2のマイク12、入力端子14、スピーカ15、第1の出力端子20及び第2の出力端子21を備える。なお、実施の形態2の変形例において、実施の形態2と同じ構成については同じ符号を付し、説明を省略する。
音響エコーキャンセル装置1Cは、第1のエコーキャンセラ41、第2のエコーキャンセラ42、高速フーリエ変換部45,46,49及び逆高速フーリエ変換部50,51を備える。
高速フーリエ変換部45,46,49は、離散フーリエ変換を高速に行う。高速フーリエ変換部45は、第1のエコーキャンセラ41に入力される時間領域の再生信号を周波数領域の再生信号に変換する。高速フーリエ変換部46は、第1のマイク11から第1のエコーキャンセラ41に入力される時間領域の第1の入力信号を周波数領域の第1の入力信号に変換する。高速フーリエ変換部49は、第2のマイク12から第2のエコーキャンセラ42に入力される時間領域の第2の入力信号を周波数領域の第2の入力信号に変換する。
逆高速フーリエ変換部50,51は、逆離散フーリエ変換を高速に行う。逆高速フーリエ変換部50は、第1のエコーキャンセラ41から第1の出力端子20に入力される周波数領域の第1の入力信号を時間領域の第1の入力信号に変換する。逆高速フーリエ変換部51は、第2のエコーキャンセラ42から第2の出力端子21に入力される周波数領域の第2の入力信号を時間領域の第2の入力信号に変換する。
第1のエコーキャンセラ41は、周波数領域の第1の入力信号と周波数領域の再生信号とを用いて、周波数領域の第1の擬似エコー信号を生成し、生成した周波数領域の第1の擬似エコー信号を用いて周波数領域の第1の入力信号の音響エコー成分をキャンセルする。
第2のエコーキャンセラ42は、周波数領域の第2の入力信号と、周波数領域の第1の擬似エコー信号とを用いて、周波数領域の第2の擬似エコー信号を生成し、生成した周波数領域の第2の擬似エコー信号を用いて周波数領域の第2の入力信号の音響エコー成分をキャンセルする。
本実施の形態2の変形例では、適応フィルタ411,421が周波数領域の適応アルゴリズムを用いることができ、畳み込み演算がかけ算により実行することができるので、演算量をさらに削減することができる。
なお、本実施の形態2の変形例において、音響エコーキャンセル装置1Cは、第2のマイク12と高速フーリエ変換部49との間に遅延部を備えてもよい。
(実施の形態3)
実施の形態1では、第1のエコーキャンセラは、加算部からの加算信号と再生信号とを用いて、加算信号に含まれる再生信号の成分を示す第1の擬似エコー信号を生成しているが、実施の形態3では、第1のエコーキャンセラは、第1の入力信号と第1の擬似エコー信号との誤差を示す第1の誤差信号を算出し、第2の入力信号と第1の擬似エコー信号との誤差を示す第2の誤差信号を算出し、第1の誤差信号と第2の誤差信号とを加算した加算信号を平均化し、平均信号と再生信号とを用いて、平均信号に含まれる再生信号の成分を示す第1の擬似エコー信号を生成する。
図7は、本開示の実施の形態3における通話装置の構成を示す図である。
図7に示す通話装置は、音響エコーキャンセル装置1D、第1のマイク11、第2のマイク12、入力端子14、スピーカ15、第1の出力端子20及び第2の出力端子21を備える。なお、実施の形態3において、実施の形態1と同じ構成については同じ符号を付し、説明を省略する。
音響エコーキャンセル装置1Dは、第1のエコーキャンセラ61及び第2のエコーキャンセラ17を備える。
第1のエコーキャンセラ61は、少なくとも2つのマイクから得られる入力信号と、スピーカへ出力される再生信号とを用いて、入力信号に含まれる再生信号の成分を示す第1の擬似エコー信号を生成する。
本実施の形態3において、少なくとも2つのマイクから得られる入力信号は、第1の入力信号と第1の擬似エコー信号との誤差を示す第1の誤差信号と、第2の入力信号と第1の擬似エコー信号との誤差を示す第2の誤差信号とを加算した加算信号を平均化した平均信号である。すなわち、第1のエコーキャンセラ61は、平均信号と再生信号とを用いて、平均信号に含まれる再生信号の成分を示す第1の擬似エコー信号を生成する。
第1のエコーキャンセラ61は、適応フィルタ611、第1の誤差算出部612、第2の誤差算出部613及び平均処理部614を備える。
適応フィルタ611は、フィルタ係数と再生信号とを畳み込むことにより、平均信号に含まれる再生信号の成分を示す第1の擬似エコー信号を生成する。
第1の誤差算出部612は、第1の入力信号と第1の擬似エコー信号との誤差を示す第1の誤差信号を算出する。第1の誤差算出部612は、算出した第1の誤差信号を第2の誤差算出部613へ出力する。
第2の誤差算出部613は、第2の入力信号と第1の擬似エコー信号との誤差を示す第2の誤差信号を算出するとともに、第1の誤差信号と第2の誤差信号とを加算する。第2の誤差算出部613は、第1の誤差信号と第2の誤差信号とを加算した加算信号を平均処理部614へ出力する。
平均処理部614は、第1の誤差信号と第2の誤差信号とを加算した加算信号を平均化する。平均処理部614は、第1の誤差信号と第2の誤差信号とを加算した加算信号を平均化した平均信号を適応フィルタ611へ出力する。
適応フィルタ611は、平均処理部614からの平均信号と再生信号とを用いて、平均信号に含まれる再生信号の成分を示す第1の擬似エコー信号を生成する。適応フィルタ611は、入力された平均信号に基づいてフィルタ係数を修正し、修正したフィルタ係数と再生信号とを畳み込むことにより第1の擬似エコー信号を生成する。適応フィルタ611は、適応アルゴリズムを用いて、平均信号が最小となるようにフィルタ係数を修正する。適応アルゴリズムとしては、例えば、学習同定法、アフィン射影法又は再帰的最小2乗法が用いられる。
第1のエコーキャンセラ61によって生成された第1の擬似エコー信号は、第3のエコーキャンセラ18及び第4のエコーキャンセラ19に出力される。
なお、本実施の形態3において、通話装置は、2つのマイクを備えているが、本開示は特にこれに限定されず、3つ以上のマイクを備えてもよい。通話装置が3つ以上のマイクを備える場合、第1のエコーキャンセラ61は、3つ以上のマイクからの各入力信号と第1の擬似エコー信号との各誤差信号を加算及び平均化し、3つ以上のマイクのそれぞれに対して設けられたエコーキャンセラへ第1の擬似エコー信号を出力する。
また、本実施の形態3において、通話装置は、1つのスピーカを備えているが、本開示は特にこれに限定されず、2つ以上のスピーカを備えてもよい。通話装置が複数のスピーカを備える場合、通話装置は、複数のスピーカと同じ数の音響エコーキャンセル装置1Dを備える必要がある。
次に、本開示の実施の形態3における音響エコーキャンセル装置1Dの動作について説明する。
図8は、本開示の実施の形態3における音響エコーキャンセル装置の動作を説明するためのフローチャートである。
まず、ステップS41において、第1のエコーキャンセラ61の適応フィルタ611は、フィルタ係数と再生信号とを畳み込むことにより、平均信号に含まれる再生信号の成分を示す第1の擬似エコー信号を生成する。
次に、ステップS42において、第1の誤差算出部612は、第1のマイク11からの第1の入力信号から、適応フィルタ611からの第1の擬似エコー信号を減算することにより、第1の入力信号と第1の擬似エコー信号との差分である第1の誤差信号を算出する。第1の誤差算出部612は、算出した第1の誤差信号を第2の誤差算出部613へ出力する。
次に、ステップS43において、第2の誤差算出部613は、第2のマイク12からの第2の入力信号から、適応フィルタ611からの第1の擬似エコー信号を減算することにより、第2の入力信号と第1の擬似エコー信号との差分である第2の誤差信号を算出する。
次に、ステップS44において、第2の誤差算出部613は、第1の誤差信号と第2の誤差信号とを加算する。第2の誤差算出部613は、算出した第1の誤差信号と第2の誤差信号との加算信号を平均処理部614へ出力する。
次に、ステップS45において、平均処理部614は、第1の誤差信号と第2の誤差信号との加算信号を平均化する。平均処理部614は、加算信号を平均化した平均信号を適応フィルタ611へ出力する。
次に、ステップS46において、適応フィルタ611は、平均処理部614から入力された平均信号に基づいてフィルタ係数を修正する。適応フィルタ611は、修正したフィルタ係数と再生信号とを畳み込むことにより第1の擬似エコー信号を生成する。
次に、ステップS47において、適応フィルタ611は、生成した第1の擬似エコー信号を第3のエコーキャンセラ18及び第4のエコーキャンセラ19へ出力する。
次に、ステップS48において、第3のエコーキャンセラ18の適応フィルタ181は、フィルタ係数と第1の擬似エコー信号とを畳み込むことにより、第1の入力信号に含まれる第1の擬似エコー信号の成分を示す第3の擬似エコー信号を生成する。
次に、ステップS49において、誤差算出部182は、第1のマイク11からの第1の入力信号から、適応フィルタ181からの第3の擬似エコー信号を減算することにより、第1の入力信号と第3の擬似エコー信号との第3の誤差信号を算出する。誤差算出部182は、算出した第3の誤差信号を適応フィルタ181へ出力する。
次に、ステップS50において、適応フィルタ181は、誤差算出部182から入力された第3の誤差信号に基づいてフィルタ係数を修正する。適応フィルタ181は、修正したフィルタ係数と第1の擬似エコー信号とを畳み込むことにより第3の擬似エコー信号を生成する。
次に、ステップS51において、誤差算出部182は、音響エコー成分をキャンセルした第1の入力信号を第1の出力端子20へ出力する。すなわち、誤差算出部182は、第1のマイク11からの第1の入力信号から、適応フィルタ181からの第3の擬似エコー信号を減算することにより、第1の入力信号から音響エコー成分をキャンセルする。
次に、ステップS52において、第4のエコーキャンセラ19の適応フィルタ191は、フィルタ係数と第1の擬似エコー信号とを畳み込むことにより、第2の入力信号に含まれる第1の擬似エコー信号の成分を示す第4の擬似エコー信号を生成する。
次に、ステップS53において、誤差算出部192は、第2のマイク12からの第2の入力信号から、適応フィルタ191からの第4の擬似エコー信号を減算することにより、第2の入力信号と第4の擬似エコー信号との第4の誤差信号を算出する。誤差算出部192は、算出した第4の誤差信号を適応フィルタ191へ出力する。
次に、ステップS54において、適応フィルタ191は、誤差算出部192から入力された第4の誤差信号に基づいてフィルタ係数を修正する。適応フィルタ191は、修正したフィルタ係数と第1の擬似エコー信号とを畳み込むことにより第4の擬似エコー信号を生成する。
次に、ステップS55において、誤差算出部192は、音響エコー成分をキャンセルした第2の入力信号を第2の出力端子21へ出力する。すなわち、誤差算出部192は、第2のマイク12からの第2の入力信号から、適応フィルタ191からの第4の擬似エコー信号を減算することにより、第2の入力信号から音響エコー成分をキャンセルする。
なお、音響エコーキャンセル装置1Dが動作を開始した初期段階では、フィルタ係数が充分に修正されていないため、第1の入力信号及び第2の入力信号から音響エコー成分を充分にキャンセルすることができないが、ステップS41~ステップS55の処理が繰り返し実行されることで、フィルタ係数が充分に修正され、第1の入力信号及び第2の入力信号から音響エコー成分を充分にキャンセルすることができるようになる。
このように、第1のエコーキャンセラ61によって、少なくとも2つのマイクから得られる入力信号に含まれる再生信号の成分を示す第1の擬似エコー信号が生成され、第2のエコーキャンセラ17によって、少なくとも1つの入力信号に含まれる第1の擬似エコー信号の成分を示す第2の擬似エコー信号が生成され、生成された第2の擬似エコー信号を用いて少なくとも1つの入力信号の音響エコー成分がキャンセルされる。
したがって、第2の擬似エコー信号は、既に生成された第1の擬似エコー信号を用いて生成されるので、第2の擬似エコー信号を生成する際に用いられる適応フィルタのフィルタ長(タップ長)を短くすることができ、通話性能を維持することができるとともに、音響エコーを除去するための演算量を削減することができる。
特に、第1段目のエコーキャンセラ(第1のエコーキャンセラ61)によるエコーキャンセル処理は、従来と同じ程度のフィルタ長(演算量)であるが、第2段目以降のエコーキャンセラ(第3のエコーキャンセラ18及び第4のエコーキャンセラ19)によるエコーキャンセル処理は、既に生成された第1の擬似エコー信号が用いられるので、従来よりもフィルタ長を短くすることができ、その結果、従来よりも演算量を削減することができる。そのため、マイクの数が増えるほど、従来に比べて演算量をより削減することができる。
また、複数のマイクはそれぞれ配置位置が異なる。そのため、音響エコーとして入力される反射波(エコー信号)の波形は複数のマイク毎に異なる。エコー信号の位相が、話者の音声である入力信号とは逆位相である場合、エコー信号が入力信号に加算されることで、入力信号が消えてしまい、入力信号の音響エコーをキャンセルすることが困難となる。しかしながら、本実施の形態3では、少なくとも2つのマイクからの第1の入力信号及び第2の入力信号のそれぞれの誤差信号が加算及び平均化されるので、音響エコーの干渉による信号の欠落の影響を低減することができる。
なお、本実施の形態3において、音響エコーキャンセル装置1Dは、第1のマイク11と第3のエコーキャンセラ18との間に第1の遅延部81を備えてもよく、第2のマイク12と第4のエコーキャンセラ19との間に第2の遅延部82を備えてもよい。
なお、本実施の形態3では、第1のエコーキャンセラ61には、時間領域の再生信号、時間領域の第1の入力信号及び時間領域の第2の入力信号が入力され、第2のエコーキャンセラ17には、時間領域の第1の入力信号、時間領域の第2の入力信号及び時間領域の第1の擬似エコー信号が入力されるが、本開示は特にこれに限定されず、第1のエコーキャンセラ61には、周波数領域の再生信号、周波数領域の第1の入力信号及び周波数領域の第2の入力信号が入力され、第2のエコーキャンセラ17には、周波数領域の第1の入力信号、周波数領域の第2の入力信号及び周波数領域の第1の擬似エコー信号が入力されてもよい。以下、この実施の形態3の変形例について説明する。
図9は、本開示の実施の形態3の変形例における通話装置の構成を示す図である。
図9に示す通話装置は、音響エコーキャンセル装置1E、第1のマイク11、第2のマイク12、入力端子14、スピーカ15、第1の出力端子20及び第2の出力端子21を備える。なお、実施の形態3の変形例において、実施の形態3と同じ構成については同じ符号を付し、説明を省略する。
音響エコーキャンセル装置1Eは、第1のエコーキャンセラ61、第2のエコーキャンセラ17、高速フーリエ変換部64,65,66及び逆高速フーリエ変換部69,70を備える。
高速フーリエ変換部64,65,66は、離散フーリエ変換を高速に行う。高速フーリエ変換部64は、第1のエコーキャンセラ61に入力される時間領域の再生信号を周波数領域の再生信号に変換する。高速フーリエ変換部65は、第1のマイク11から出力される時間領域の第1の入力信号を周波数領域の第1の入力信号に変換する。高速フーリエ変換部66は、第2のマイク12から出力される時間領域の第2の入力信号を周波数領域の第2の入力信号に変換する。
逆高速フーリエ変換部69,70は、逆離散フーリエ変換を高速に行う。逆高速フーリエ変換部69は、第3のエコーキャンセラ18から第1の出力端子20に入力される周波数領域の第1の入力信号を時間領域の第1の入力信号に変換する。逆高速フーリエ変換部70は、第4のエコーキャンセラ19から第2の出力端子21に入力される周波数領域の第2の入力信号を時間領域の第2の入力信号に変換する。
第1のエコーキャンセラ61は、周波数領域の第1の入力信号と周波数領域の第2の入力信号と周波数領域の再生信号とを用いて、周波数領域の第1の擬似エコー信号を生成する。
第3のエコーキャンセラ18は、周波数領域の第1の入力信号と、周波数領域の第1の擬似エコー信号とを用いて、周波数領域の第3の擬似エコー信号を生成し、生成した周波数領域の第3の擬似エコー信号を用いて周波数領域の第1の入力信号の音響エコー成分をキャンセルする。
第4のエコーキャンセラ19は、周波数領域の第2の入力信号と、周波数領域の第1の擬似エコー信号とを用いて、周波数領域の第4の擬似エコー信号を生成し、生成した周波数領域の第4の擬似エコー信号を用いて周波数領域の第2の入力信号の音響エコー成分をキャンセルする。
本実施の形態3の変形例では、適応フィルタ611,181,191が周波数領域の適応アルゴリズムを用いることができ、畳み込み演算がかけ算により実行することができるので、演算量をさらに削減することができる。
なお、本実施の形態3の変形例において、音響エコーキャンセル装置1Eは、第1のマイク11と第3のエコーキャンセラ18との間に第1の遅延部81を備えてもよく、第2のマイク12と第4のエコーキャンセラ19との間に第2の遅延部82を備えてもよい。この場合、第1のマイク11と誤差算出部182との間の分岐点と、第1の誤差算出部612との間に高速フーリエ変換部65が配置され、分岐点と誤差算出部182との間に第1の遅延部81及び高速フーリエ変換部が配置される。また、第2のマイク12と誤差算出部192との間の分岐点と、第2の誤差算出部613との間に高速フーリエ変換部66が配置され、分岐点と誤差算出部192との間に第2の遅延部82及び高速フーリエ変換部が配置される。
なお、上記各実施の形態において、各構成要素は、専用のハードウェアで構成されるか、各構成要素に適したソフトウェアプログラムを実行することによって実現されてもよい。各構成要素は、CPUまたはプロセッサなどのプログラム実行部が、ハードディスクまたは半導体メモリなどの記録媒体に記録されたソフトウェアプログラムを読み出して実行することによって実現されてもよい。
本開示の実施の形態に係る装置の機能の一部又は全ては典型的には集積回路であるLSI(Large Scale Integration)として実現される。これらは個別に1チップ化されてもよいし、一部又は全てを含むように1チップ化されてもよい。また、集積回路化はLSIに限るものではなく、専用回路又は汎用プロセッサで実現してもよい。LSI製造後にプログラムすることが可能なFPGA(Field Programmable Gate Array)、又はLSI内部の回路セルの接続や設定を再構成可能なリコンフィギュラブル・プロセッサを利用してもよい。
また、本開示の実施の形態に係る装置の機能の一部又は全てを、CPU等のプロセッサがプログラムを実行することにより実現してもよい。
また、上記で用いた数字は、全て本開示を具体的に説明するために例示するものであり、本開示は例示された数字に制限されない。
また、上記フローチャートに示す各ステップが実行される順序は、本開示を具体的に説明するために例示するためのものであり、同様の効果が得られる範囲で上記以外の順序であってもよい。また、上記ステップの一部が、他のステップと同時(並列)に実行されてもよい。
本開示に係る音響エコーキャンセル装置、音響エコーキャンセル方法及び音響エコーキャンセルプログラムは、通話性能を維持することができるとともに、音響エコーを除去するための演算量を削減することができるので、マイクから出力される入力信号の音響エコー成分をキャンセルする音響エコーキャンセル装置、音響エコーキャンセル方法及び音響エコーキャンセルプログラムとして有用である。
1,1A,1B,1C,1D,1E,1F 音響エコーキャンセル装置
11 第1のマイク
12 第2のマイク
13 加算部
14 入力端子
15 スピーカ
16,41,61 第1のエコーキャンセラ
17,42 第2のエコーキャンセラ
18 第3のエコーキャンセラ
19 第4のエコーキャンセラ
20 第1の出力端子
21 第2の出力端子
24,25,28,29,45,46,49,64,65,66 高速フーリエ変換部
30,31,50,51,69,70 逆高速フーリエ変換部
80 遅延部
81 第1の遅延部
82 第2の遅延部
161,181,191,411,421,611 適応フィルタ
162,182,192,412,422 誤差算出部
612 第1の誤差算出部
613 第2の誤差算出部
614 平均処理部

Claims (11)

  1. 少なくとも2つのマイクから得られる入力信号と、スピーカへ出力される再生信号とを用いて、前記入力信号に含まれる前記再生信号の成分を示す第1の擬似エコー信号を生成する第1のエコーキャンセラと、
    前記少なくとも2つのマイクから出力される少なくとも1つの入力信号と、前記第1のエコーキャンセラによって生成された前記第1の擬似エコー信号とを用いて、前記少なくとも1つの入力信号に含まれる前記第1の擬似エコー信号の成分を示す第2の擬似エコー信号を生成し、生成した前記第2の擬似エコー信号を用いて前記少なくとも1つの入力信号の音響エコー成分をキャンセルする第2のエコーキャンセラと、
    を備える音響エコーキャンセル装置。
  2. 前記少なくとも2つのマイクから出力される少なくとも1つの入力信号を遅延させる遅延部をさらに備え、
    前記第2のエコーキャンセラは、遅延させた前記少なくとも1つの入力信号と、前記第1のエコーキャンセラによって生成された前記第1の擬似エコー信号とを用いて、遅延させた前記少なくとも1つの入力信号に含まれる前記第1の擬似エコー信号の成分を示す第2の擬似エコー信号を生成し、生成した前記第2の擬似エコー信号を用いて、遅延させた前記少なくとも1つの入力信号の音響エコー成分をキャンセルする、
    請求項1記載の音響エコーキャンセル装置。
  3. 前記少なくとも2つのマイクは、第1の入力信号を出力する第1のマイクと、第2の入力信号を出力する第2のマイクとを含み、
    前記遅延部は、前記第1の入力信号を遅延させる第1の遅延部と、前記第2の入力信号を遅延させる第2の遅延部とを含み、
    前記第1の入力信号と前記第2の入力信号とを加算する加算部をさらに備え、
    前記第1のエコーキャンセラは、前記加算部からの加算信号と前記再生信号とを用いて、前記加算信号に含まれる前記再生信号の成分を示す前記第1の擬似エコー信号を生成し、
    前記第2のエコーキャンセラは、
    遅延させた前記第1の入力信号と、前記第1のエコーキャンセラによって生成された前記第1の擬似エコー信号とを用いて、遅延させた前記第1の入力信号に含まれる前記第1の擬似エコー信号の成分を示す第3の擬似エコー信号を生成し、生成した前記第3の擬似エコー信号を用いて、遅延させた前記第1の入力信号の音響エコー成分をキャンセルする第3のエコーキャンセラと、
    遅延させた前記第2の入力信号と、前記第1のエコーキャンセラによって生成された前記第1の擬似エコー信号とを用いて、遅延させた前記第2の入力信号に含まれる前記第1の擬似エコー信号の成分を示す第4の擬似エコー信号を生成し、生成した前記第4の擬似エコー信号を用いて、遅延させた前記第2の入力信号の音響エコー成分をキャンセルする第4のエコーキャンセラと、
    を含む、
    請求項2記載の音響エコーキャンセル装置。
  4. 前記少なくとも2つのマイクは、第1の入力信号を出力する第1のマイクと、第2の入力信号を出力する第2のマイクとを含み、
    前記第1の入力信号と前記第2の入力信号とを加算する加算部をさらに備え、
    前記第1のエコーキャンセラは、前記加算部からの加算信号と前記再生信号とを用いて、前記加算信号に含まれる前記再生信号の成分を示す前記第1の擬似エコー信号を生成し、
    前記第2のエコーキャンセラは、
    前記第1の入力信号と、前記第1のエコーキャンセラによって生成された前記第1の擬似エコー信号とを用いて、前記第1の入力信号に含まれる前記第1の擬似エコー信号の成分を示す第3の擬似エコー信号を生成し、生成した前記第3の擬似エコー信号を用いて前記第1の入力信号の音響エコー成分をキャンセルする第3のエコーキャンセラと、
    前記第2の入力信号と、前記第1のエコーキャンセラによって生成された前記第1の擬似エコー信号とを用いて、前記第2の入力信号に含まれる前記第1の擬似エコー信号の成分を示す第4の擬似エコー信号を生成し、生成した前記第4の擬似エコー信号を用いて前記第2の入力信号の音響エコー成分をキャンセルする第4のエコーキャンセラと、
    を含む、
    請求項1記載の音響エコーキャンセル装置。
  5. 前記少なくとも2つのマイクは、第1の入力信号を出力する第1のマイクと、第2の入力信号を出力する第2のマイクとを含み、
    前記第1のエコーキャンセラは、前記第1の入力信号と前記再生信号とを用いて、前記第1の入力信号に含まれる前記再生信号の成分を示す前記第1の擬似エコー信号を生成し、生成した前記第1の擬似エコー信号を用いて前記第1の入力信号の音響エコー成分をキャンセルし、
    前記第2のエコーキャンセラは、前記第2の入力信号と、前記第1のエコーキャンセラによって生成された前記第1の擬似エコー信号とを用いて、前記第2の入力信号に含まれる前記第1の擬似エコー信号の成分を示す第2の擬似エコー信号を生成し、生成した前記第2の擬似エコー信号を用いて前記第2の入力信号の音響エコー成分をキャンセルする、
    請求項1記載の音響エコーキャンセル装置。
  6. 前記少なくとも2つのマイクは、第1の入力信号を出力する第1のマイクと、第2の入力信号を出力する第2のマイクとを含み、
    前記第1のエコーキャンセラは、
    前記第1の入力信号と前記第1の擬似エコー信号との誤差を示す第1の誤差信号を算出する第1の算出部と、
    前記第2の入力信号と前記第1の擬似エコー信号との誤差を示す第2の誤差信号を算出する第2の算出部と、
    前記第1の誤差信号と前記第2の誤差信号とを加算した加算信号を平均化する平均処理部と、
    前記平均処理部からの平均信号と前記再生信号とを用いて、前記平均信号に含まれる前記再生信号の成分を示す前記第1の擬似エコー信号を生成する生成部と、
    を含み、
    前記第2のエコーキャンセラは、
    前記第1の入力信号と、前記第1のエコーキャンセラによって生成された前記第1の擬似エコー信号とを用いて、前記第1の入力信号に含まれる前記第1の擬似エコー信号の成分を示す第3の擬似エコー信号を生成し、生成した前記第3の擬似エコー信号を用いて前記第1の入力信号の音響エコー成分をキャンセルする第3のエコーキャンセラと、
    前記第2の入力信号と、前記第1のエコーキャンセラによって生成された前記第1の擬似エコー信号とを用いて、前記第2の入力信号に含まれる前記第1の擬似エコー信号の成分を示す第4の擬似エコー信号を生成し、生成した前記第4の擬似エコー信号を用いて前記第2の入力信号の音響エコー成分をキャンセルする第4のエコーキャンセラと、
    を含む、
    請求項1記載の音響エコーキャンセル装置。
  7. 時間領域の前記入力信号を周波数領域の入力信号に変換する第1の変換部と、
    時間領域の前記再生信号を周波数領域の再生信号に変換する第2の変換部と、
    時間領域の前記少なくとも1つの入力信号を周波数領域の少なくとも1つの入力信号に変換する第3の変換部と、
    時間領域の前記第1の擬似エコー信号を周波数領域の第1の擬似エコー信号に変換する第4の変換部と、
    をさらに備える、
    請求項1~6のいずれか1項に記載の音響エコーキャンセル装置。
  8. 前記第2のエコーキャンセラのフィルタ長は、前記第1のエコーキャンセラのフィルタ長より短い、
    請求項1~7のいずれか1項に記載の音響エコーキャンセル装置。
  9. 前記第1のエコーキャンセラは、前記スピーカから最も近い位置のマイクに対して、前記第1の擬似エコー信号を生成する、
    請求項1~8のいずれか1項に記載の音響エコーキャンセル装置。
  10. マイクから出力される入力信号の音響エコー成分をキャンセルする音響エコーキャンセル装置における音響エコーキャンセル方法であって、
    なくとも2つのマイクから得られる入力信号と、スピーカへ出力される再生信号とを用いて、前記入力信号に含まれる前記再生信号の成分を示す第1の擬似エコー信号を生成し、
    前記少なくとも2つのマイクから出力される少なくとも1つの入力信号と、生成された前記第1の擬似エコー信号とを用いて、前記少なくとも1つの入力信号に含まれる前記第1の擬似エコー信号の成分を示す第2の擬似エコー信号を生成し、
    生成した前記第2の擬似エコー信号を用いて前記少なくとも1つの入力信号の音響エコー成分をキャンセルする、
    音響エコーキャンセル方法。
  11. 少なくとも2つのマイクから得られる入力信号と、スピーカへ出力される再生信号とを用いて、前記入力信号に含まれる前記再生信号の成分を示す第1の擬似エコー信号を生成する第1のエコーキャンセラと、
    前記少なくとも2つのマイクから出力される少なくとも1つの入力信号と、前記第1のエコーキャンセラによって生成された前記第1の擬似エコー信号とを用いて、前記少なくとも1つの入力信号に含まれる前記第1の擬似エコー信号の成分を示す第2の擬似エコー信号を生成し、生成した前記第2の擬似エコー信号を用いて前記少なくとも1つの入力信号の音響エコー成分をキャンセルする第2のエコーキャンセラとしてコンピュータを機能させる音響エコーキャンセルプログラム。
JP2019163681A 2018-12-12 2019-09-09 音響エコーキャンセル装置、音響エコーキャンセル方法及び音響エコーキャンセルプログラム Active JP7373947B2 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
EP19213522.6A EP3667662B1 (en) 2018-12-12 2019-12-04 Acoustic echo cancellation device, acoustic echo cancellation method and acoustic echo cancellation program
CN201911254834.4A CN111312268B (zh) 2018-12-12 2019-12-09 声学回声消除装置和声学回声消除方法以及记录介质
US16/711,736 US10999444B2 (en) 2018-12-12 2019-12-12 Acoustic echo cancellation device, acoustic echo cancellation method and non-transitory computer readable recording medium recording acoustic echo cancellation program

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US201862778684P 2018-12-12 2018-12-12
US62/778,684 2018-12-12
JP2019073738 2019-04-08
JP2019073738 2019-04-08

Publications (2)

Publication Number Publication Date
JP2020171006A JP2020171006A (ja) 2020-10-15
JP7373947B2 true JP7373947B2 (ja) 2023-11-06

Family

ID=72746083

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019163681A Active JP7373947B2 (ja) 2018-12-12 2019-09-09 音響エコーキャンセル装置、音響エコーキャンセル方法及び音響エコーキャンセルプログラム

Country Status (1)

Country Link
JP (1) JP7373947B2 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20220102451A (ko) * 2021-01-13 2022-07-20 삼성전자주식회사 외부 장치에 의해 유입되는 에코를 제거하는 방법 및 전자 장치

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001144655A (ja) 1999-11-15 2001-05-25 Oki Electric Ind Co Ltd エコーキャンセラ装置
JP2003060530A (ja) 2001-08-13 2003-02-28 Fujitsu Ltd エコー抑制処理システム
JP2007096389A (ja) 2005-09-27 2007-04-12 Yamaha Corp 回帰音除去装置
JP2009212945A (ja) 2008-03-05 2009-09-17 Mitsubishi Electric Corp エコー消去装置
JP5060631B1 (ja) 2011-03-31 2012-10-31 株式会社東芝 信号処理装置及び信号処理方法
JP2014116932A (ja) 2012-11-12 2014-06-26 Yamaha Corp 収音システム

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001144655A (ja) 1999-11-15 2001-05-25 Oki Electric Ind Co Ltd エコーキャンセラ装置
JP2003060530A (ja) 2001-08-13 2003-02-28 Fujitsu Ltd エコー抑制処理システム
JP2007096389A (ja) 2005-09-27 2007-04-12 Yamaha Corp 回帰音除去装置
JP2009212945A (ja) 2008-03-05 2009-09-17 Mitsubishi Electric Corp エコー消去装置
JP5060631B1 (ja) 2011-03-31 2012-10-31 株式会社東芝 信号処理装置及び信号処理方法
JP2014116932A (ja) 2012-11-12 2014-06-26 Yamaha Corp 収音システム

Also Published As

Publication number Publication date
JP2020171006A (ja) 2020-10-15

Similar Documents

Publication Publication Date Title
JP5102371B2 (ja) エコー抑制フィルタの制御情報を演算する装置および方法、並びに、ディレイ値を演算する装置および方法
JP3727258B2 (ja) エコー抑制処理システム
JP4161628B2 (ja) エコー抑圧方法及び装置
JP2007129736A (ja) 音声信号中の暗騒音を抑制する方法及び装置、並びに反響消去を伴う対応する装置
US20110019832A1 (en) Sound processor, sound processing method and recording medium storing sound processing program
JP5422054B2 (ja) 時間領域・周波数領域統合反響消去装置及び方法
JP2004088647A (ja) エコー抑制システム及び方法
JP7373947B2 (ja) 音響エコーキャンセル装置、音響エコーキャンセル方法及び音響エコーキャンセルプログラム
JP3756839B2 (ja) 反響低減方法、反響低減装置、反響低減プログラム
JP5908170B2 (ja) エコー消去装置
JP3756828B2 (ja) 反響消去方法、この方法を実施する装置、プログラムおよびその記録媒体
EP3667662B1 (en) Acoustic echo cancellation device, acoustic echo cancellation method and acoustic echo cancellation program
JP5524316B2 (ja) パラメータ推定装置、エコー消去装置、パラメータ推定方法、及びプログラム
JP4041770B2 (ja) 音響エコー消去方法、その装置、プログラム及びその記録媒体
US11197093B2 (en) Echo suppression device, echo suppression method, and non-transitory computer-readable recording medium which records echo suppression program
JP3616341B2 (ja) 多チャネルエコーキャンセル方法、その装置、そのプログラム及び記録媒体
JP5925149B2 (ja) 音響結合量推定装置、エコー消去装置、その方法及びプログラム
WO2023188661A1 (ja) 妨害音抑圧装置、妨害音抑圧方法及び妨害音抑圧プログラム
US11967304B2 (en) Sound pick-up device, sound pick-up method and non-transitory computer-readable recording medium recording sound pick-up program
JP5631523B2 (ja) エコー消去装置
JP2012205161A (ja) 音声通話装置
EP4016977A1 (en) Apparatus and method for filtered-reference acoustic echo cancellation
JPWO2023276424A5 (ja)
JP5889233B2 (ja) 音響結合量推定装置、エコー消去装置、その方法及びプログラム
JPWO2022195955A5 (ja)

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220623

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230718

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230914

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230926

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20231024

R150 Certificate of patent or registration of utility model

Ref document number: 7373947

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150