JP6604376B2 - 信号処理装置、信号処理方法、及びプログラム - Google Patents
信号処理装置、信号処理方法、及びプログラム Download PDFInfo
- Publication number
- JP6604376B2 JP6604376B2 JP2017512224A JP2017512224A JP6604376B2 JP 6604376 B2 JP6604376 B2 JP 6604376B2 JP 2017512224 A JP2017512224 A JP 2017512224A JP 2017512224 A JP2017512224 A JP 2017512224A JP 6604376 B2 JP6604376 B2 JP 6604376B2
- Authority
- JP
- Japan
- Prior art keywords
- signal
- sound
- acoustic
- unit
- signal processing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012545 processing Methods 0.000 title claims description 285
- 238000003672 processing method Methods 0.000 title claims description 7
- 210000000613 ear canal Anatomy 0.000 claims description 52
- 230000001902 propagating effect Effects 0.000 claims description 47
- 230000009467 reduction Effects 0.000 claims description 46
- 238000005070 sampling Methods 0.000 claims description 37
- 230000005236 sound signal Effects 0.000 claims description 34
- 238000012546 transfer Methods 0.000 claims description 15
- 230000004044 response Effects 0.000 claims description 7
- 238000001914 filtration Methods 0.000 claims description 2
- 238000000034 method Methods 0.000 description 44
- 230000000694 effects Effects 0.000 description 41
- 230000007613 environmental effect Effects 0.000 description 37
- 230000008569 process Effects 0.000 description 37
- 230000006870 function Effects 0.000 description 34
- 238000010586 diagram Methods 0.000 description 20
- 238000004458 analytical method Methods 0.000 description 16
- 230000010365 information processing Effects 0.000 description 16
- 238000004891 communication Methods 0.000 description 11
- 238000005516 engineering process Methods 0.000 description 11
- 210000003128 head Anatomy 0.000 description 9
- 238000003058 natural language processing Methods 0.000 description 9
- 230000000644 propagated effect Effects 0.000 description 8
- 230000014509 gene expression Effects 0.000 description 7
- 230000007246 mechanism Effects 0.000 description 7
- 238000012986 modification Methods 0.000 description 7
- 230000004048 modification Effects 0.000 description 7
- 238000007789 sealing Methods 0.000 description 7
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 6
- 238000006243 chemical reaction Methods 0.000 description 6
- 210000000988 bone and bone Anatomy 0.000 description 5
- 238000004364 calculation method Methods 0.000 description 5
- 235000013372 meat Nutrition 0.000 description 5
- 238000002474 experimental method Methods 0.000 description 4
- 210000003454 tympanic membrane Anatomy 0.000 description 4
- 238000005259 measurement Methods 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 2
- 230000015572 biosynthetic process Effects 0.000 description 2
- 238000003780 insertion Methods 0.000 description 2
- 230000037431 insertion Effects 0.000 description 2
- 238000009434 installation Methods 0.000 description 2
- 238000009413 insulation Methods 0.000 description 2
- 230000001151 other effect Effects 0.000 description 2
- 238000003786 synthesis reaction Methods 0.000 description 2
- 230000004397 blinking Effects 0.000 description 1
- 238000012790 confirmation Methods 0.000 description 1
- 230000002349 favourable effect Effects 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000010363 phase shift Effects 0.000 description 1
- 230000005855 radiation Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000001629 suppression Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones
- H04R1/1091—Details not provided for in groups H04R1/1008 - H04R1/1083
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
- G10K11/00—Methods or devices for transmitting, conducting or directing sound in general; Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
- G10K11/16—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
- G10K11/175—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound
- G10K11/178—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase
- G10K11/1783—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase handling or detecting of non-standard events or conditions, e.g. changing operating modes under specific operating conditions
- G10K11/17837—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase handling or detecting of non-standard events or conditions, e.g. changing operating modes under specific operating conditions by retaining part of the ambient acoustic environment, e.g. speech or alarm signals that the user needs to hear
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
- G10K11/00—Methods or devices for transmitting, conducting or directing sound in general; Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
- G10K11/16—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
- G10K11/175—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound
- G10K11/178—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase
- G10K11/1787—General system configurations
- G10K11/17879—General system configurations using both a reference signal and an error signal
- G10K11/17881—General system configurations using both a reference signal and an error signal the reference signal being an acoustic signal, e.g. recorded with a microphone
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
- G10L21/0208—Noise filtering
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones
- H04R1/1083—Reduction of ambient noise
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/20—Arrangements for obtaining desired frequency or directional characteristics
- H04R1/22—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired frequency characteristic only
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R3/00—Circuits for transducers, loudspeakers or microphones
- H04R3/04—Circuits for transducers, loudspeakers or microphones for correcting frequency response
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
- G10K2210/00—Details of active noise control [ANC] covered by G10K11/178 but not provided for in any of its subgroups
- G10K2210/10—Applications
- G10K2210/108—Communication systems, e.g. where useful sound is kept and noise is cancelled
- G10K2210/1081—Earphones, e.g. for telephones, ear protectors or headsets
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
- G10K2210/00—Details of active noise control [ANC] covered by G10K11/178 but not provided for in any of its subgroups
- G10K2210/30—Means
- G10K2210/301—Computational
- G10K2210/3014—Adaptive noise equalizers [ANE], i.e. where part of the unwanted sound is retained
Landscapes
- Engineering & Computer Science (AREA)
- Acoustics & Sound (AREA)
- Physics & Mathematics (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- General Health & Medical Sciences (AREA)
- Quality & Reliability (AREA)
- Human Computer Interaction (AREA)
- Computational Linguistics (AREA)
- Otolaryngology (AREA)
- Headphones And Earphones (AREA)
- Soundproofing, Sound Blocking, And Sound Damping (AREA)
- Circuit For Audible Band Transducer (AREA)
Description
1.概要
2.ヒアスルー効果を実現するための原理
2.1.概要
2.2.基本的な機能構成
3.第1の実施形態
4.第2の実施形態
4.1.概略的な機能構成
4.2.遅延量を低減するための構成例
4.3.変形例
4.4.まとめ
5.第3の実施形態
6.ハードウェア構成
7.まとめ
まず、本開示に係る信号処理装置の特徴をよりわかりやすくするために、当該信号処理装置を適用し得る、イヤフォンやヘッドフォンのような頭部装着型音響デバイスの適用例について説明したうえで、本開示に係る信号処理装置の課題について整理する。
[2.1.概要]
まず、ヒアスルー効果を実現するための原理の一例について、所謂、FF(Feed-Forward)型のNC(Noise Canceling)イヤフォン(もしくは、ヘッドフォン)の例と比較して説明する。例えば、図2は、ヒアスルー効果を実現するための原理の一例について説明するための説明図であり、頭部装着型音響デバイス51を、所謂FF型のNCイヤフォンとして構成する場合における、当該頭部装着型音響デバイス51の概略的な機能構成の一例を示している。
次に、図5を参照して、ヒアスルー効果を実現するための信号処理装置の基本的な機能構成の一例について説明する。図5は、本開示の一実施形態に係る信号処理装置80の基本的な機能構成の一例を示したブロック図である。なお、前述の通り、信号処理装置80は、各音響信号をデジタル信号に変換して各種フィルタ処理を施すため、実際にはDAC及びADCを含むが、図5に示す例では、説明をよりわかりやすくするために、DAC及びADCの記載を省略している。
まず、図7を参照して、本開示の第1の実施形態に係る信号処理装置の機能構成の一例について説明する。図7は、本実施形態に係る信号処理装置の機能構成の一例について示したブロック図である。なお、以降の説明では、本実施形態に係る信号処理装置を、前述した信号処理装置80(図5参照)と区別するために、「信号処理装置11」と称する場合がある。また、図7に示す機能構成は、図5に示した例と同様に、説明をよりわかりやすくするために、DAC及びADCの記載を省略している。
次に、本開示の第2の実施形態に係る信号処理装置について説明する。前述した第1の実施形態では、オキュリュージョンキャンセラ161を設けることにより、ユーザUが聴取される自身の声に違和感を覚えない態様で、ヒアスルー効果を実現していた。一方で、前述した第1の実施形態に係る信号処理装置11では、オキュリュージョンキャンセラ161が処理対象とする音響信号には、頭部装着型音響デバイス51のスピーカから出力された差分信号の成分が含まれている。そのため、オキュリュージョンキャンセラ161によって当該音響信号に基づき生成されるノイズ低減信号により、差分信号の成分が抑制され、ヒアスルー効果が十分に得られない(もしくは、ユーザUに特性の異なる環境音が聴取される)場合がある。
まず、図9を参照して、本実施形態に係る信号処理装置12の機能構成の一例について説明する。図9は、本実施形態に係る信号処理装置の機能構成の一例について示したブロック図である。なお、図9に示す機能構成は、図5及び図7に示した例と同様に、説明をよりわかりやすくするために、DAC及びADCの記載を省略している。
次に、本実施形態に係る信号処理装置12において、外部マイクロフォン513による集音結果に基づく差分信号や、内部マイクロフォン515による集音結果に基づくノイズ低減信号が、音響入力に加算され、スピーカから出力されるまでの遅延量を低減する仕組みの一例について説明する。
次に、図12を参照して、本実施形態に係る信号処理装置12の変形例について説明する。図12は、本実施形態の変形例に係る信号処理装置の機能構成の一例について示したブロック図である。なお、変形例に係る信号処理装置を、図9及び図10を参照して説明した本実施形態に係る信号処理装置12と区別するために、「信号処理装置13」と称する場合がある。なお、図12に示す例では、図10と同様に、アナログ信号とデジタル信号との間の変換処理を行うためのADC及びDACと、デジタル信号のサンプリングレートを変換するフィルタとが明示的に示されている。
以上、説明したように、本実施形態に係る信号処理装置12は、内部マイクロフォン515の集音結果に基づく音響信号から、音響入力の成分に加えて差分信号に相当する成分を減算している。このような構成により、本実施位形態に係る信号処理装置12では、オキュリュージョンキャンセラ161がノイズ低減信号を生成するための処理対象から、差分信号の成分を除外することが可能となる。即ち、本実施位形態に係る信号処理装置12では、ノイズ低減信号により、差分信号の成分が抑制されるといった事態を防止することが可能となる。そのため、本実施形態に係る信号処理装置12は、前述した第1の実施形態に係る信号処理装置11に比べて、より自然な態様(即ち、ユーザUがより違和感を覚えない態様)で、ヒアスルー効果を実現することが可能となる。
次に、本開示の第3の実施形態に係る信号処理装置について説明する。前述したように、本開示の各実施形態に係る信号処理装置では、内部マイクロフォン515による内部空間を伝搬する音響の集音結果を利用して、外耳道UAに伝搬するユーザの声の成分を抑制するためのノイズ低減信号を生成している。このような構成のため、内部マイクロフォン515の集音結果に基づく音響信号(即ち、内部空間を伝搬する音響)には、前述したように声の成分(即ち、ユーザUの頭部の骨や肉を介して外耳道UAに伝搬する当該ユーザUの声の成分)が含まれていることは前述した通りである。
次に、図16を参照して、本開示の各実施形態に係る信号処理装置10(即ち、上述した信号処理装置11〜14)のハードウェア構成の一例について説明する。図16は、本開示の各実施形態に係る信号処理装置10のハードウェア構成の一例を示した図である。
以上、説明したように、本開示の各実施形態に係る信号処理装置10(即ち、上述した信号処理装置11〜14)は、頭部装着型音響デバイス51の装着部510の外側の外部空間を伝搬する環境音の集音結果に基づき、差分信号を生成する。また、信号処理装置10は、装着部510の内側の内部空間に伝搬する音響の集音結果に基づき、当該内部空間に伝搬する声の成分を抑制するためのノイズ低減信号を生成する。そして、信号処理装置10は、入力される音響入力に対して、生成した差分信号とノイズ低減信号とを加算し、当該加算結果に基づき生成される音響信号を頭部装着型音響デバイス51のドライバ511に出力する。これにより、当該音響信号によりドライバ511が駆動され、当該音響信号に基づく音響が内部空間に放射される。
(1)
聴取者の耳に対して装着される装着部の外側の外部空間を伝搬する第1の音響の集音結果を取得する第1の取得部と、
前記装着部の内側において外耳道と連接する内部空間を伝搬する第2の音響の集音結果を取得する第2の取得部と、
前記第1の音響の集音結果に基づき、前記外部空間から前記外耳道内に向けて直接伝搬する前記第1の音響と、前記外部空間から前記装着部を介して前記内部空間に伝搬する前記第1の音響との差分に略等しい差分信号を生成する第1のフィルタ処理部と、
前記第2の音響の集音結果から、前記第1の音響の集音結果に基づく第1の信号成分と、前記装着部の内側から前記内部空間に向けて音響デバイスから出力させる入力音響信号に基づく第2の信号成分とが減算された減算信号を生成する減算部と、
前記減算信号に基づき、当該減算信号を低減するためのノイズ低減信号を生成する第2のフィルタ処理部と、
前記入力音響信号に対して、前記差分信号と、前記ノイズ低減信号とを加算することで、前記音響デバイスを駆動するための駆動信号を生成する加算部と、
を備える、信号処理装置。
(2)
前記第1の音響の集音結果に基づく音響信号に対して、少なくとも、前記音響デバイスから出力される音響信号が、前記内部空間を介して前記第2の音響として集音されるまでの系の伝達関数に応じた特性を付与し、前記第1の信号成分として出力する第3のフィルタ処理部を備える、前記(1)に記載の信号処理装置。
(3)
前記第3のフィルタ処理部は、前記第1の音響の集音結果を入力信号として、前記第1の信号成分を生成する、前記(2)に記載の信号処理装置。
(4)
前記第3のフィルタ処理部は、前記第1のフィルタ処理部から出力される前記差分信号を入力信号として、前記第1の信号成分を生成する、前記(2)に記載の信号処理装置。
(5)
前記第3のフィルタ処理部は、入力された前記前記第1の音響の集音結果に基づく音響信号のうち、遅延成分を処理するための第4のフィルタ処理部と、周波数成分を処理するための第5のフィルタ処理部とを備える、前記(2)〜(4)のいずれか一項に記載の信号処理装置。
(6)
前記第4のフィルタ処理部は、無限インパルス応答フィルタを含む、前記(5)に記載の信号処理装置。
(7)
前記第5のフィルタ処理部は、有限インパルス応答フィルタを含む、前記(5)または(6)に記載の信号処理装置。
(8)
前記入力音響信号を第1の目標特性に等化して前記加算部に出力する第1の等化処理部と、
当該入力音響信号を第2の目標特性に等化して、前記第2の信号成分として前記減算部に出力する第2の等化処理部と、
を備える、前記(1)〜(7)のいずれか一項に記載の信号処理装置。
(9)
前記第2の音響の集音結果からの前記第1の信号成分の減算結果に基づく信号成分を、音声信号として出力する音声信号出力部を備える、前記(1)〜(8)のいずれか一項に記載の信号処理装置。
(10)
音声信号出力部は、前記減算信号を前記音声信号として出力する、前記(9)に記載の信号処理装置。
(11)
前記第1の音響を集音する第1の集音部と、前記第2の音響を集音する第2の集音部とのうち、少なくともいずれかを含む、前記(1)〜(10)のいずれか一項に記載の信号処理装置。
(12)
前記音響デバイスを含む、前記(1)〜(11)のいずれか一項に記載の信号処理装置。
(13)
聴取者の耳に対して装着される装着部の外側の外部空間を伝搬する音響の集音結果を取得する取得部と、
前記音響の集音結果に基づき、前記外部空間から外耳道内に向けて直接伝搬する前記音響と、前記外部空間から前記装着部を介して前記外耳道内に伝搬する前記音響との差分に略等しい差分信号を生成するフィルタ処理部と、
前記装着部の内側から前記外耳道内に向けて音響デバイスから出力させる入力音響信号に対して、前記差分信号を加算することで、前記音響デバイスを駆動するための駆動信号を生成する加算部と、
を備え、
前記外部空間を伝搬する音響が集音されてから、当該音響に基づく前記差分信号が加算された前記駆動信号に基づく音響が、前記音響デバイスから出力されるまでの遅延量が100μ秒以下である、
信号処理装置。
(14)
前前記外部空間を伝搬する音響の集音結果を、第1のサンプリングレートで第1のデジタル信号にAD変換するAD変換部と、
前記第1のデジタル信号を、前記第1のサンプリングレートよりも低く、前記入力音響信号を標本化するための第2のサンプリングレートよりも高い、第3のサンプリングレートにダウンサンプリングすることで第2のデジタル信号を生成する、デシメーションフィルタと、
前記第3のサンプリングレートで標本化されたデジタル信号を、第1のサンプリングレートにアップサンプリングするインターポレーションフィルタと、
前記インターポレーションフィルタの出力結果をアナログの音響信号にDA変換するDA変換部と、
を備え、
前記フィルタ処理部は、前記第2のデジタル信号を入力信号として、前記差分信号を生成する、
前記(13)に記載の信号処理装置。
(15)
プロセッサが、
聴取者の耳に対して装着される装着部の外側の外部空間を伝搬する第1の音響の集音結果を取得することと、
前記装着部の内側の外耳道と連接する内部空間を伝搬する第2の音響の集音結果を取得することと、
前記第1の音響の集音結果に基づき、前記外部空間から前記外耳道内に向けて直接伝搬する前記第1の音響と、前記外部空間から前記装着部を介して前記内部空間に伝搬する前記第1の音響との差分に略等しい差分信号を生成することと、
前記第2の音響の集音結果から、前記第1の音響の集音結果に基づく第1の信号成分と、前記装着部の内側から前記内部空間に向けて音響デバイスから出力させる入力音響信号に基づく第2の信号成分とが減算された減算信号を生成することと、
前記減算信号に基づき、当該減算信号を低減するためのノイズ低減信号を生成することと、
前記入力音響信号に対して、前記差分信号と、前記ノイズ低減信号とを加算することで、前記音響デバイスを駆動するための駆動信号を生成することと、
を含む、信号処理方法。
(16)
コンピュータに、
聴取者の耳に対して装着される装着部の外側の外部空間を伝搬する第1の音響の集音結果を取得することと、
前記装着部の内側の外耳道と連接する内部空間を伝搬する第2の音響の集音結果を取得することと、
前記第1の音響の集音結果に基づき、前記外部空間から前記外耳道内に向けて直接伝搬する前記第1の音響と、前記外部空間から前記装着部を介して前記内部空間に伝搬する前記第1の音響との差分に略等しい差分信号を生成することと、
前記第2の音響の集音結果から、前記第1の音響の集音結果に基づく第1の信号成分と、前記装着部の内側から前記内部空間に向けて音響デバイスから出力させる入力音響信号に基づく第2の信号成分とが減算された減算信号を生成することと、
前記減算信号に基づき、当該減算信号を低減するためのノイズ低減信号を生成することと、
前記入力音響信号に対して、前記差分信号と、前記ノイズ低減信号とを加算することで、前記音響デバイスを駆動するための駆動信号を生成することと、
を実行させる、プログラム。
111 マイクアンプ
113 デシメーションフィルタ
121 HTフィルタ
123 加算部
133 インターポレーションフィルタ
134 インターポレーションフィルタ
141 パワーアンプ
143 インターポレーションフィルタ
151 マイクアンプ
153 デシメーションフィルタ
161 オキュリュージョンキャンセラ
171 減算部
181 モニターキャンセラ
183 デシメーションフィルタ
184 IIRフィルタ
185 FIRフィルタ
186 インターポレーションフィルタ
191 減算部
411 ノイズゲート
412 EQ
413 コンプレッサ
51 頭部装着型音響デバイス
510 装着部
511 ドライバ
513 外部マイクロフォン
515 内部マイクロフォン
61 解析部
611 音声認識部
613 自然言語処理部
63 制御部
65 処理実行部
Claims (16)
- 聴取者の耳に対して装着される装着部の外側の外部空間を伝搬する第1の音響の集音結果を取得する第1の取得部と、
前記装着部の内側において外耳道と連接する内部空間を伝搬する第2の音響の集音結果を取得する第2の取得部と、
前記第1の音響の集音結果に基づき、前記外部空間から前記外耳道内に向けて直接伝搬する前記第1の音響と、前記外部空間から前記装着部を介して前記内部空間に伝搬する前記第1の音響との差分に略等しい差分信号を生成する第1のフィルタ処理部と、
前記第2の音響の集音結果から、前記第1の音響の集音結果に基づく第1の信号成分と、前記装着部の内側から前記内部空間に向けて音響デバイスから出力させる入力音響信号に基づく第2の信号成分とが減算された減算信号を生成する減算部と、
前記減算信号に基づき、当該減算信号を低減するためのノイズ低減信号を生成する第2のフィルタ処理部と、
前記入力音響信号に対して、前記差分信号と、前記ノイズ低減信号とを加算することで、前記音響デバイスを駆動するための駆動信号を生成する加算部と、
を備える、信号処理装置。 - 前記第1の音響の集音結果に基づく音響信号に対して、少なくとも、前記音響デバイスから出力される音響信号が、前記内部空間を介して前記第2の音響として集音されるまでの系の伝達関数に応じた特性を付与し、前記第1の信号成分として出力する第3のフィルタ処理部を備える、請求項1に記載の信号処理装置。
- 前記第3のフィルタ処理部は、前記第1の音響の集音結果を入力信号として、前記第1の信号成分を生成する、請求項2に記載の信号処理装置。
- 前記第3のフィルタ処理部は、前記第1のフィルタ処理部から出力される前記差分信号を入力信号として、前記第1の信号成分を生成する、請求項2に記載の信号処理装置。
- 前記第3のフィルタ処理部は、入力された前記第1の音響の集音結果に基づく音響信号のうち、遅延成分を処理するための第4のフィルタ処理部と、周波数成分を処理するための第5のフィルタ処理部とを備える、請求項2〜4のいずれか一項に記載の信号処理装置。
- 前記第4のフィルタ処理部は、無限インパルス応答フィルタを含む、請求項5に記載の信号処理装置。
- 前記第5のフィルタ処理部は、有限インパルス応答フィルタを含む、請求項5に記載の信号処理装置。
- 前記入力音響信号を第1の目標特性に等化して前記加算部に出力する第1の等化処理部と、
当該入力音響信号を第2の目標特性に等化して、前記第2の信号成分として前記減算部に出力する第2の等化処理部と、
を備える、請求項1〜7のいずれか一項に記載の信号処理装置。 - 前記第2の音響の集音結果からの前記第1の信号成分の減算結果に基づく信号成分を、音声信号として出力する音声信号出力部を備える、請求項1〜8のいずれか一項に記載の信号処理装置。
- 音声信号出力部は、前記減算信号を前記音声信号として出力する、請求項9に記載の信号処理装置。
- 前記第1の音響を集音する第1の集音部と、前記第2の音響を集音する第2の集音部とのうち、少なくともいずれかを含む、請求項1〜10のいずれか一項に記載の信号処理装置。
- 前記音響デバイスを含む、請求項1〜11のいずれか一項に記載の信号処理装置。
- 聴取者の耳に対して装着される装着部の外側の外部空間を伝搬する音響の集音結果を取得する取得部と、
前記音響の集音結果に基づき、前記外部空間から外耳道内に向けて直接伝搬する前記音響と、前記外部空間から前記装着部を介して前記外耳道内に伝搬する前記音響との差分に略等しい差分信号を生成するフィルタ処理部と、
前記装着部の内側から前記外耳道内に向けて音響デバイスから出力させる入力音響信号に対して、前記差分信号を加算することで、前記音響デバイスを駆動するための駆動信号を生成する加算部と、
を備え、
前記外部空間を伝搬する音響が集音されてから、当該音響に基づく前記差分信号が加算された前記駆動信号に基づく音響が、前記音響デバイスから出力されるまでの遅延量が100μ秒以下である、
信号処理装置。 - 前記外部空間を伝搬する音響の集音結果を、第1のサンプリングレートで第1のデジタル信号にAD変換するAD変換部と、
前記第1のデジタル信号を、前記第1のサンプリングレートよりも低く、前記入力音響信号を標本化するための第2のサンプリングレートよりも高い、第3のサンプリングレートにダウンサンプリングすることで第2のデジタル信号を生成する、デシメーションフィルタと、
前記第3のサンプリングレートで標本化されたデジタル信号を、第1のサンプリングレートにアップサンプリングするインターポレーションフィルタと、
前記インターポレーションフィルタの出力結果をアナログの音響信号にDA変換するDA変換部と、
を備え、
前記フィルタ処理部は、前記第2のデジタル信号を入力信号として、前記差分信号を生成する、
請求項13に記載の信号処理装置。 - プロセッサが、
聴取者の耳に対して装着される装着部の外側の外部空間を伝搬する第1の音響の集音結果を取得することと、
前記装着部の内側の外耳道と連接する内部空間を伝搬する第2の音響の集音結果を取得することと、
前記第1の音響の集音結果に基づき、前記外部空間から前記外耳道内に向けて直接伝搬する前記第1の音響と、前記外部空間から前記装着部を介して前記内部空間に伝搬する前記第1の音響との差分に略等しい差分信号を生成することと、
前記第2の音響の集音結果から、前記第1の音響の集音結果に基づく第1の信号成分と、前記装着部の内側から前記内部空間に向けて音響デバイスから出力させる入力音響信号に基づく第2の信号成分とが減算された減算信号を生成することと、
前記減算信号に基づき、当該減算信号を低減するためのノイズ低減信号を生成することと、
前記入力音響信号に対して、前記差分信号と、前記ノイズ低減信号とを加算することで、前記音響デバイスを駆動するための駆動信号を生成することと、
を含む、信号処理方法。 - コンピュータに、
聴取者の耳に対して装着される装着部の外側の外部空間を伝搬する第1の音響の集音結果を取得することと、
前記装着部の内側の外耳道と連接する内部空間を伝搬する第2の音響の集音結果を取得することと、
前記第1の音響の集音結果に基づき、前記外部空間から前記外耳道内に向けて直接伝搬する前記第1の音響と、前記外部空間から前記装着部を介して前記内部空間に伝搬する前記第1の音響との差分に略等しい差分信号を生成することと、
前記第2の音響の集音結果から、前記第1の音響の集音結果に基づく第1の信号成分と、前記装着部の内側から前記内部空間に向けて音響デバイスから出力させる入力音響信号に基づく第2の信号成分とが減算された減算信号を生成することと、
前記減算信号に基づき、当該減算信号を低減するためのノイズ低減信号を生成することと、
前記入力音響信号に対して、前記差分信号と、前記ノイズ低減信号とを加算することで、前記音響デバイスを駆動するための駆動信号を生成することと、
を実行させる、プログラム。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015084817 | 2015-04-17 | ||
JP2015084817 | 2015-04-17 | ||
PCT/JP2016/056504 WO2016167040A1 (ja) | 2015-04-17 | 2016-03-02 | 信号処理装置、信号処理方法、及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2016167040A1 JPWO2016167040A1 (ja) | 2018-02-08 |
JP6604376B2 true JP6604376B2 (ja) | 2019-11-13 |
Family
ID=57126748
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017512224A Active JP6604376B2 (ja) | 2015-04-17 | 2016-03-02 | 信号処理装置、信号処理方法、及びプログラム |
Country Status (5)
Country | Link |
---|---|
US (2) | US10349163B2 (ja) |
EP (2) | EP3285497B1 (ja) |
JP (1) | JP6604376B2 (ja) |
CN (1) | CN107431852B (ja) |
WO (1) | WO2016167040A1 (ja) |
Families Citing this family (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107431852B (zh) | 2015-04-17 | 2019-10-01 | 索尼公司 | 信号处理装置、信号处理方法及计算机可读存储介质 |
KR20190128669A (ko) * | 2017-03-09 | 2019-11-18 | 아브네라 코포레이션 | 실시간 음향 프로세서 |
WO2018163423A1 (ja) | 2017-03-10 | 2018-09-13 | ヤマハ株式会社 | ヘッドフォン |
US10483931B2 (en) * | 2017-03-23 | 2019-11-19 | Yamaha Corporation | Audio device, speaker device, and audio signal processing method |
TWI648731B (zh) * | 2017-07-24 | 2019-01-21 | 驊訊電子企業股份有限公司 | 主動式降噪系統 |
CN111801727B (zh) * | 2018-02-01 | 2024-07-23 | 思睿逻辑国际半导体有限公司 | 具有可选择采样率的主动噪声消除(anc)*** |
CN108206023A (zh) * | 2018-04-10 | 2018-06-26 | 南京地平线机器人技术有限公司 | 声音处理设备和声音处理方法 |
US10149786B1 (en) * | 2018-06-08 | 2018-12-11 | Alvin J. Halfaker | Noise reduction earmuffs system and method |
US20220093120A1 (en) * | 2019-01-15 | 2022-03-24 | Nec Corporation | Information processing device, wearable device, information processing method, and storage medium |
CN111836147B (zh) | 2019-04-16 | 2022-04-12 | 华为技术有限公司 | 一种降噪的装置和方法 |
EP3960259A4 (en) * | 2019-04-26 | 2023-05-17 | Sony Interactive Entertainment Inc. | INFORMATION PROCESSING SYSTEM, INFORMATION PROCESSING DEVICE, INFORMATION PROCESSING DEVICE CONTROL METHOD, AND PROGRAM |
US11223891B2 (en) * | 2020-02-19 | 2022-01-11 | xMEMS Labs, Inc. | System and method thereof |
EP4097714A1 (en) | 2021-04-22 | 2022-12-07 | Google LLC | Reduced complexity implementation for acoustic noise canceling |
WO2022264535A1 (ja) | 2021-06-18 | 2022-12-22 | ソニーグループ株式会社 | 情報処理方法および情報処理システム |
EP4358542A1 (en) | 2021-06-18 | 2024-04-24 | Sony Group Corporation | Information processing method, information processing system, data collection method, and data collection system |
WO2023107426A2 (en) * | 2021-12-07 | 2023-06-15 | Bose Corporation | Audio device having aware mode auto-leveler |
Family Cites Families (24)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7072476B2 (en) * | 1997-02-18 | 2006-07-04 | Matech, Inc. | Audio headset |
WO2006049260A1 (ja) * | 2004-11-08 | 2006-05-11 | Nec Corporation | 信号処理の方法、信号処理の装置および信号処理用プログラム |
GB2434708B (en) * | 2006-01-26 | 2008-02-27 | Sonaptic Ltd | Ambient noise reduction arrangements |
GB2446966B (en) * | 2006-04-12 | 2010-07-07 | Wolfson Microelectronics Plc | Digital circuit arrangements for ambient noise-reduction |
US8208644B2 (en) * | 2006-06-01 | 2012-06-26 | Personics Holdings Inc. | Earhealth monitoring system and method III |
JP5194434B2 (ja) * | 2006-11-07 | 2013-05-08 | ソニー株式会社 | ノイズキャンセリングシステムおよびノイズキャンセル方法 |
WO2008091874A2 (en) * | 2007-01-22 | 2008-07-31 | Personics Holdings Inc. | Method and device for acute sound detection and reproduction |
JP4882773B2 (ja) | 2007-02-05 | 2012-02-22 | ソニー株式会社 | 信号処理装置、信号処理方法 |
JP2008258878A (ja) * | 2007-04-04 | 2008-10-23 | Matsushita Electric Ind Co Ltd | マイクを有する音声出力装置 |
US9191740B2 (en) * | 2007-05-04 | 2015-11-17 | Personics Holdings, Llc | Method and apparatus for in-ear canal sound suppression |
WO2009006418A1 (en) * | 2007-06-28 | 2009-01-08 | Personics Holdings Inc. | Method and device for background noise mitigation |
JP4631939B2 (ja) * | 2008-06-27 | 2011-02-16 | ソニー株式会社 | ノイズ低減音声再生装置およびノイズ低減音声再生方法 |
CN201303410Y (zh) * | 2008-11-12 | 2009-09-02 | 中北大学 | 新型耳机 |
US8526628B1 (en) * | 2009-12-14 | 2013-09-03 | Audience, Inc. | Low latency active noise cancellation system |
WO2011161487A1 (en) * | 2010-06-21 | 2011-12-29 | Nokia Corporation | Apparatus, method and computer program for adjustable noise cancellation |
GB2492983B (en) * | 2011-07-18 | 2013-09-18 | Incus Lab Ltd | Digital noise-cancellation |
US8798283B2 (en) * | 2012-11-02 | 2014-08-05 | Bose Corporation | Providing ambient naturalness in ANR headphones |
US20140126733A1 (en) * | 2012-11-02 | 2014-05-08 | Daniel M. Gauger, Jr. | User Interface for ANR Headphones with Active Hear-Through |
US9050212B2 (en) | 2012-11-02 | 2015-06-09 | Bose Corporation | Binaural telepresence |
US20140126736A1 (en) | 2012-11-02 | 2014-05-08 | Daniel M. Gauger, Jr. | Providing Audio and Ambient Sound simultaneously in ANR Headphones |
KR101382553B1 (ko) * | 2013-02-27 | 2014-04-07 | 한밭대학교 산학협력단 | 외부상황 인지 리시버 |
CN103200480A (zh) * | 2013-03-27 | 2013-07-10 | 北京昆腾微电子有限公司 | 耳麦及其工作方法 |
CN103269465B (zh) * | 2013-05-22 | 2016-09-07 | 歌尔股份有限公司 | 一种强噪声环境下的耳机通讯方法和一种耳机 |
CN107431852B (zh) | 2015-04-17 | 2019-10-01 | 索尼公司 | 信号处理装置、信号处理方法及计算机可读存储介质 |
-
2016
- 2016-03-02 CN CN201680021159.9A patent/CN107431852B/zh active Active
- 2016-03-02 JP JP2017512224A patent/JP6604376B2/ja active Active
- 2016-03-02 US US15/565,524 patent/US10349163B2/en active Active
- 2016-03-02 EP EP16779832.1A patent/EP3285497B1/en active Active
- 2016-03-02 WO PCT/JP2016/056504 patent/WO2016167040A1/ja active Application Filing
- 2016-03-02 EP EP19196604.3A patent/EP3614690A1/en not_active Withdrawn
-
2019
- 2019-03-15 US US16/354,710 patent/US10667034B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
JPWO2016167040A1 (ja) | 2018-02-08 |
EP3285497B1 (en) | 2021-10-27 |
EP3285497A4 (en) | 2019-03-27 |
US10349163B2 (en) | 2019-07-09 |
CN107431852A (zh) | 2017-12-01 |
EP3285497A1 (en) | 2018-02-21 |
US20190215598A1 (en) | 2019-07-11 |
US20180115818A1 (en) | 2018-04-26 |
CN107431852B (zh) | 2019-10-01 |
WO2016167040A1 (ja) | 2016-10-20 |
EP3614690A1 (en) | 2020-02-26 |
US10667034B2 (en) | 2020-05-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6604376B2 (ja) | 信号処理装置、信号処理方法、及びプログラム | |
CN110473567B (zh) | 基于深度神经网络的音频处理方法、装置及存储介质 | |
JP5352952B2 (ja) | デジタルフィルタ回路、デジタルフィルタプログラムおよびノイズキャンセリングシステム | |
CN103959813B (zh) | 耳孔可佩戴式声音收集设备,信号处理设备和声音收集方法 | |
JP2009272946A (ja) | 信号処理装置、信号処理方法 | |
CN107889007B (zh) | 消除降噪通路对播放声音影响的主动降噪方法及*** | |
CN112399301B (zh) | 耳机及降噪方法 | |
US10034087B2 (en) | Audio signal processing for listening devices | |
JP6197930B2 (ja) | 耳孔装着型収音装置、信号処理装置、収音方法 | |
JP6999187B2 (ja) | ヘッドホンのためのアクティブノイズ消去システム | |
JP2010091897A (ja) | 音声信号強調装置 | |
CN115706909A (zh) | 包括反馈控制***的听力装置 | |
EP4300992A1 (en) | A hearing aid comprising a combined feedback and active noise cancellation system | |
JPWO2016059878A1 (ja) | 信号処理装置、信号処理方法及びコンピュータプログラム | |
Zhuang et al. | A constrained optimal hear-through filter design approach for earphones | |
EP4099724A1 (en) | A low latency hearing aid | |
JP4458269B2 (ja) | ノイズキャンセルヘッドフォン | |
CN114501211A (zh) | 具有丽音通透性的主动降噪电路、方法、设备及存储介质 | |
US11812224B2 (en) | Hearing device comprising a delayless adaptive filter | |
US11950057B2 (en) | Hearing device comprising a speech intelligibility estimator | |
US20220406328A1 (en) | Hearing device comprising an adaptive filter bank | |
JP2009232204A (ja) | 信号処理装置、信号処理方法 | |
KR20160143118A (ko) | 심박 및 음성 전송 시스템 및 그 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190122 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190122 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20190208 |
|
RD03 | Notification of appointment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7423 Effective date: 20190214 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20190222 |
|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20190515 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20190522 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20190917 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20190930 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6604376 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |