JPWO2018167921A1 - 信号処理装置 - Google Patents
信号処理装置 Download PDFInfo
- Publication number
- JPWO2018167921A1 JPWO2018167921A1 JP2019505628A JP2019505628A JPWO2018167921A1 JP WO2018167921 A1 JPWO2018167921 A1 JP WO2018167921A1 JP 2019505628 A JP2019505628 A JP 2019505628A JP 2019505628 A JP2019505628 A JP 2019505628A JP WO2018167921 A1 JPWO2018167921 A1 JP WO2018167921A1
- Authority
- JP
- Japan
- Prior art keywords
- filter coefficient
- coefficient vector
- generation unit
- signal processing
- directivity
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012545 processing Methods 0.000 title claims description 54
- 239000013598 vector Substances 0.000 claims abstract description 131
- 238000000354 decomposition reaction Methods 0.000 claims description 10
- 238000000034 method Methods 0.000 description 20
- 239000011159 matrix material Substances 0.000 description 12
- 238000010586 diagram Methods 0.000 description 6
- 230000006866 deterioration Effects 0.000 description 4
- 238000001228 spectrum Methods 0.000 description 4
- 238000004364 calculation method Methods 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 238000004519 manufacturing process Methods 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 230000002452 interceptive effect Effects 0.000 description 2
- 238000012544 monitoring process Methods 0.000 description 2
- 230000005236 sound signal Effects 0.000 description 2
- 241000282412 Homo Species 0.000 description 1
- 230000002159 abnormal effect Effects 0.000 description 1
- 230000002411 adverse Effects 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000002708 enhancing effect Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000002265 prevention Effects 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
- 230000017105 transposition Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
- G10K11/00—Methods or devices for transmitting, conducting or directing sound in general; Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
- G10K11/18—Methods or devices for transmitting, conducting or directing sound
- G10K11/26—Sound-focusing or directing, e.g. scanning
- G10K11/34—Sound-focusing or directing, e.g. scanning using electrical steering of transducer arrays, e.g. beam steering
- G10K11/341—Circuits therefor
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/20—Arrangements for obtaining desired frequency or directional characteristics
- H04R1/32—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only
- H04R1/40—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/20—Arrangements for obtaining desired frequency or directional characteristics
- H04R1/32—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only
- H04R1/40—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers
- H04R1/406—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers microphones
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R3/00—Circuits for transducers, loudspeakers or microphones
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R3/00—Circuits for transducers, loudspeakers or microphones
- H04R3/005—Circuits for transducers, loudspeakers or microphones for combining the signals of two or more microphones
Landscapes
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Acoustics & Sound (AREA)
- Health & Medical Sciences (AREA)
- Otolaryngology (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- General Health & Medical Sciences (AREA)
- Circuit For Audible Band Transducer (AREA)
- Obtaining Desirable Characteristics In Audible-Bandwidth Transducers (AREA)
Abstract
Description
図1は、本実施の形態による信号処理装置の構成図である。
図示の信号処理装置1は、複数のマイクロホンによって構成されるマイクロホンアレイ2と、フィルタ係数ベクトル生成部3と、ビームフォーミング部4を備える。マイクロホンアレイ2は、複数のマイクロホン2−1〜2−mによって観測されたアナログ音声信号に対してA/D変換を施し、得られたデジタル信号を観測信号として出力するよう構成されている。フィルタ係数ベクトル生成部3は、ビームフォーミングによって、ユーザが所望する方向の指向性を形成するためのフィルタ係数ベクトルを生成する処理部である。なお、以下、ユーザが所望する方向を目的方向とする。また、目的方向の情報は、信号処理装置1の外部よりフィルタ係数ベクトル生成部3に与えられるとする。フィルタ係数ベクトルは、マイクロホンアレイ2を構成する各マイクロホンの観測信号に対して与える利得や遅延に関する情報を含んでいる。このとき、フィルタ係数ベクトル生成部3は、生成されるフィルタ係数ベクトルが各マイクロホンの観測信号に与える利得が過大とならないようにフィルタ係数ベクトルの大きさを抑制する。ビームフォーミング部4は、マイクロホンアレイ2を構成する各マイクロホンから得られる観測信号と、フィルタ係数ベクトル生成部3から得られるフィルタ係数ベクトルに基づき、目的方向から到来する音声を強調した音声信号を出力する処理部である。なお、この処理の詳細については後述する。
図示のように、ビームフォーミング部4は、DFT部41、観測信号ベクトル生成部42、内積部43、IDFT部44を備える。DFT部41は、マイクロホンアレイ2におけるそれぞれのマイクロホンに対応して設けられ、離散フーリエ変換(DFT:discrete fourier transform)を行う回路である。観測信号ベクトル生成部42は、それぞれのDFT部41から出力された周波数スペクトルを一つの複素ベクトルに統合して出力する回路である。内積部43は、観測信号ベクトル生成部42からの出力と、フィルタ係数ベクトル生成部3からの出力の内積を計算する回路である。IDFT部44は、内積部43からの出力に対して逆フーリエ変換(IDFT:inverse discrete Fourier transform)を行う回路である。
フィルタ係数ベクトル生成部3は、複素ベクトルx(τ,ω)と同じ要素数(M)の複素ベクトルであるフィルタ係数ベクトルw(ω)を出力する。フィルタ係数ベクトルw(ω)のm番目の要素である複素数は、その絶対値がm番目のマイクロホンの観測信号に与える利得を表し、偏角が観測信号に与える遅延を表す。フィルタ係数ベクトル生成部3における目的方向の指向性から適切なw(ω)を生成する方法については後述する。
ここで、マイクロホンアレイ2を中心としマイクロホンアレイの大きさよりも十分に大きい円の円周をN等分するN個の点を考える。このとき、マイクロホンアレイ2から見たn番目の点に対するステアリングベクトル(要素数はM)をaω,nとする。また、N個のステアリングベクトルを以下のように並べて作成した行列をA(ω)とする。
フィルタ係数ベクトル生成部3では、先ず、目的方向の指向性(r)を読み込む(ステップST1)。これは上式(4)で示すrを読み込むことに相当する。また、フィルタ係数ベクトル生成部3では、上式(3)に示すように、行列A(ω)を計算する(ステップST2)。次に、フィルタ係数ベクトル生成部3は、ステップST2で得られた行列A(ω)を特異値分解し、閾値以下の特異値を0に置換する(ステップST3)。そして、行列A(ω)のMoore‐Penrose型疑似逆行列を求め、式(6)の計算を行う(ステップST4)。最後に、式(6)で得られたフィルタ係数ベクトルw(ω)を出力する(ステップST5)。
また、多くの場合、疑似逆行列を計算する処理は特異値分解を利用して実装されているが、小さな特異値を0に置換した上で疑似逆行列を求める手法は、特異値分解を利用した実装においては非常に小さな実装の変更だけで実現可能である。従って、実装や試験に要する時間を削減することができるので、装置の低コスト化が期待できる。
実施の形態2は、フィルタ係数ベクトル生成部3が、L2正則化によりフィルタ係数ベクトルを生成するよう構成したものである。他の各構成は図1に示した実施の形態1と同様であるため、ここでの説明は省略する。
実施の形態1における式(5)の誤差eは、実施の形態2では、次式(7)のように書き換えられる。ただし、λはペナルティの寄与度を調整するパラメータである。
式(7)のeをw(ω)で微分して0とおくと、次式(8)のようにeを最小化するフィルタ係数ベクトルw(ω)が求められる。ただし、Hはエルミート転置、Iは単位行列を表す。
実施の形態3は、フィルタ係数ベクトルのノルムの閾値をフィルタ係数ベクトル生成部3に与え、フィルタ係数ベクトル生成部3は、この閾値以内の値を実現するフィルタ係数ベクトルを生成するよう構成したものである。他の各構成は図1に示した実施の形態1と同様であるため、ここでの説明は省略する。
Claims (5)
- 複数の音響センサと、
ビームフォーミングによって目的方向の指向性を形成するためのフィルタ係数ベクトルを設定値以内に抑制して生成するフィルタ係数ベクトル生成部と、
前記複数の音響センサから得られる観測信号と前記フィルタ係数ベクトル生成部で生成されたフィルタ係数ベクトルに基づき前記ビームフォーミングを行い、前記目的方向の指向性を形成し、当該形成した指向性の音声を強調した信号を出力するビームフォーミング部とを備えた信号処理装置。 - 前記フィルタ係数ベクトル生成部は、
特異値分解により前記フィルタ係数ベクトルのノルムが設定値以内となるフィルタ係数ベクトルを生成することを特徴とする請求項1記載の信号処理装置。 - 前記フィルタ係数ベクトル生成部は、
L2正則化によりフィルタ係数ベクトルを生成することを特徴とする請求項1記載の信号処理装置。 - 前記フィルタ係数ベクトル生成部は、
前記フィルタ係数ベクトルのノルムが閾値として与えられ、かつ、当該閾値以内のノルムを実現するフィルタ係数ベクトルを生成することを特徴とする請求項1記載の信号処理装置。 - 前記フィルタ係数ベクトル生成部は、
前記フィルタ係数ベクトルのノルムを閾値以下とする制約下で、前記目的方向の指向性と、前記ビームフォーミング部によって形成される指向性との誤差を設定値以内とするフィルタ係数ベクトルを生成することを特徴とする請求項4記載の信号処理装置。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/JP2017/010714 WO2018167921A1 (ja) | 2017-03-16 | 2017-03-16 | 信号処理装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP6567216B2 JP6567216B2 (ja) | 2019-08-28 |
JPWO2018167921A1 true JPWO2018167921A1 (ja) | 2019-11-07 |
Family
ID=63521983
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019505628A Active JP6567216B2 (ja) | 2017-03-16 | 2017-03-16 | 信号処理装置 |
Country Status (6)
Country | Link |
---|---|
US (1) | US20200035214A1 (ja) |
JP (1) | JP6567216B2 (ja) |
CN (1) | CN110419228B (ja) |
DE (1) | DE112017007051B4 (ja) |
TW (1) | TW201835900A (ja) |
WO (1) | WO2018167921A1 (ja) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10938994B2 (en) * | 2018-06-25 | 2021-03-02 | Cypress Semiconductor Corporation | Beamformer and acoustic echo canceller (AEC) system |
CN115088207B (zh) * | 2020-02-29 | 2023-03-31 | 华为技术有限公司 | 一种滤波器系数的确定方法及装置 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008141593A (ja) * | 2006-12-04 | 2008-06-19 | Nippon Telegr & Teleph Corp <Ntt> | 音声収音装置、その方法、そのプログラム、およびその記録媒体 |
JP2012523731A (ja) * | 2009-04-09 | 2012-10-04 | エヌティーエヌユー テクノロジー トランスファー エーエス | センサーアレイに最適なモーダルビームフォーマ |
JP2013546247A (ja) * | 2010-10-29 | 2013-12-26 | マイティワークス | マルチビーム音響システム |
JP2014128013A (ja) * | 2012-12-27 | 2014-07-07 | Canon Inc | 雑音除去装置及びその制御方法 |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3377178B2 (ja) * | 1998-11-20 | 2003-02-17 | 松下電器産業株式会社 | 音響拡声装置とその明瞭度改善方法 |
CN100578622C (zh) * | 2006-05-30 | 2010-01-06 | 北京中星微电子有限公司 | 一种自适应麦克阵列***及其语音信号处理方法 |
CN101466055A (zh) * | 2008-12-31 | 2009-06-24 | 瑞声声学科技(常州)有限公司 | 小型麦克风阵列装置及其波束形成方法 |
CN101763858A (zh) * | 2009-10-19 | 2010-06-30 | 瑞声声学科技(深圳)有限公司 | 双麦克风信号处理方法 |
CN101719368B (zh) * | 2009-11-04 | 2011-12-07 | 中国科学院声学研究所 | 高声强定向声波发射装置 |
JP5967571B2 (ja) | 2012-07-26 | 2016-08-10 | 本田技研工業株式会社 | 音響信号処理装置、音響信号処理方法、及び音響信号処理プログラム |
CA2954601C (en) * | 2014-08-14 | 2023-04-18 | Memed Diagnostics Ltd. | Computational analysis of biological data using manifold and a hyperplane |
JP2016042132A (ja) * | 2014-08-18 | 2016-03-31 | ソニー株式会社 | 音声処理装置、音声処理方法、並びにプログラム |
-
2017
- 2017-03-16 US US16/482,396 patent/US20200035214A1/en not_active Abandoned
- 2017-03-16 DE DE112017007051.1T patent/DE112017007051B4/de active Active
- 2017-03-16 CN CN201780088262.XA patent/CN110419228B/zh active Active
- 2017-03-16 JP JP2019505628A patent/JP6567216B2/ja active Active
- 2017-03-16 WO PCT/JP2017/010714 patent/WO2018167921A1/ja active Application Filing
- 2017-09-20 TW TW106132227A patent/TW201835900A/zh unknown
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008141593A (ja) * | 2006-12-04 | 2008-06-19 | Nippon Telegr & Teleph Corp <Ntt> | 音声収音装置、その方法、そのプログラム、およびその記録媒体 |
JP2012523731A (ja) * | 2009-04-09 | 2012-10-04 | エヌティーエヌユー テクノロジー トランスファー エーエス | センサーアレイに最適なモーダルビームフォーマ |
JP2013546247A (ja) * | 2010-10-29 | 2013-12-26 | マイティワークス | マルチビーム音響システム |
JP2014128013A (ja) * | 2012-12-27 | 2014-07-07 | Canon Inc | 雑音除去装置及びその制御方法 |
Also Published As
Publication number | Publication date |
---|---|
WO2018167921A1 (ja) | 2018-09-20 |
JP6567216B2 (ja) | 2019-08-28 |
US20200035214A1 (en) | 2020-01-30 |
DE112017007051T5 (de) | 2019-10-31 |
CN110419228B (zh) | 2020-12-29 |
TW201835900A (zh) | 2018-10-01 |
CN110419228A (zh) | 2019-11-05 |
DE112017007051B4 (de) | 2022-04-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10382849B2 (en) | Spatial audio processing apparatus | |
US10657981B1 (en) | Acoustic echo cancellation with loudspeaker canceling beamformer | |
JP6644197B2 (ja) | 雑音除去装置および雑音除去方法 | |
JP6389259B2 (ja) | マイクロホンアレイを使用した残響音の抽出 | |
US20120082322A1 (en) | Sound scene manipulation | |
WO2009110574A1 (ja) | 信号強調装置、その方法、プログラム及び記録媒体 | |
US7991166B2 (en) | Microphone apparatus | |
EP3576426A1 (en) | Low compexity multi-channel smart loudspeaker with voice control | |
JP2017503388A5 (ja) | ||
KR102191736B1 (ko) | 인공신경망을 이용한 음성향상방법 및 장치 | |
JP6724905B2 (ja) | 信号処理装置、信号処理方法、およびプログラム | |
CN110111802B (zh) | 基于卡尔曼滤波的自适应去混响方法 | |
JP4448464B2 (ja) | 雑音低減方法、装置、プログラム及び記録媒体 | |
US11483646B1 (en) | Beamforming using filter coefficients corresponding to virtual microphones | |
JP4928382B2 (ja) | 特定方向収音装置、特定方向収音方法、特定方向収音プログラム、記録媒体 | |
JP6567216B2 (ja) | 信号処理装置 | |
JP5240026B2 (ja) | マイクロホンアレイにおけるマイクロホンの感度を補正する装置、この装置を含んだマイクロホンアレイシステム、およびプログラム | |
JP6840302B2 (ja) | 情報処理装置、プログラム及び情報処理方法 | |
WO2020085117A1 (ja) | 信号処理装置および方法、並びにプログラム | |
EP3225037B1 (en) | Method and apparatus for generating a directional sound signal from first and second sound signals | |
EP3787311A1 (en) | Sound image reproduction device, sound image reproduction method and sound image reproduction program | |
JP2017152857A (ja) | フィルタ係数決定装置、フィルタ係数決定方法、プログラム、および再生システム | |
US20230319469A1 (en) | Suppressing Spatial Noise in Multi-Microphone Devices | |
JP5105336B2 (ja) | 音源分離装置、プログラム及び方法 | |
JP2016092562A (ja) | 音声処理装置および方法、並びにプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190412 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20190412 |
|
A975 | Report on accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A971005 Effective date: 20190508 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20190702 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20190730 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6567216 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |