CN112153553A - 用于具有集成麦克风的头枕的音频***、相关头枕以及车辆 - Google Patents
用于具有集成麦克风的头枕的音频***、相关头枕以及车辆 Download PDFInfo
- Publication number
- CN112153553A CN112153553A CN202010587706.8A CN202010587706A CN112153553A CN 112153553 A CN112153553 A CN 112153553A CN 202010587706 A CN202010587706 A CN 202010587706A CN 112153553 A CN112153553 A CN 112153553A
- Authority
- CN
- China
- Prior art keywords
- headrest
- microphone
- audio system
- module
- audio
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
- G10K11/00—Methods or devices for transmitting, conducting or directing sound in general; Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
- G10K11/16—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
- G10K11/175—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound
- G10K11/178—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase
- G10K11/1781—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase characterised by the analysis of input or output signals, e.g. frequency range, modes, transfer functions
- G10K11/17821—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase characterised by the analysis of input or output signals, e.g. frequency range, modes, transfer functions characterised by the analysis of the input signals only
- G10K11/17827—Desired external signals, e.g. pass-through audio such as music or speech
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
- H04S7/30—Control circuits for electronic adaptation of the sound field
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60N—SEATS SPECIALLY ADAPTED FOR VEHICLES; VEHICLE PASSENGER ACCOMMODATION NOT OTHERWISE PROVIDED FOR
- B60N2/00—Seats specially adapted for vehicles; Arrangement or mounting of seats in vehicles
- B60N2/80—Head-rests
- B60N2/806—Head-rests movable or adjustable
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60N—SEATS SPECIALLY ADAPTED FOR VEHICLES; VEHICLE PASSENGER ACCOMMODATION NOT OTHERWISE PROVIDED FOR
- B60N2/00—Seats specially adapted for vehicles; Arrangement or mounting of seats in vehicles
- B60N2/80—Head-rests
- B60N2/879—Head-rests with additional features not related to head-rest positioning, e.g. heating or cooling devices or loudspeakers
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60N—SEATS SPECIALLY ADAPTED FOR VEHICLES; VEHICLE PASSENGER ACCOMMODATION NOT OTHERWISE PROVIDED FOR
- B60N2/00—Seats specially adapted for vehicles; Arrangement or mounting of seats in vehicles
- B60N2/80—Head-rests
- B60N2/885—Head-rests provided with side-rests
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
- G10K11/00—Methods or devices for transmitting, conducting or directing sound in general; Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
- G10K11/16—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
- G10K11/00—Methods or devices for transmitting, conducting or directing sound in general; Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
- G10K11/16—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
- G10K11/175—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound
- G10K11/178—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase
- G10K11/1787—General system configurations
- G10K11/17879—General system configurations using both a reference signal and an error signal
- G10K11/17881—General system configurations using both a reference signal and an error signal the reference signal being an acoustic signal, e.g. recorded with a microphone
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M9/00—Arrangements for interconnection not involving centralised switching
- H04M9/08—Two-way loud-speaking telephone systems with means for conditioning the signal, e.g. for suppressing echoes for one or both directions of traffic
- H04M9/082—Two-way loud-speaking telephone systems with means for conditioning the signal, e.g. for suppressing echoes for one or both directions of traffic using echo cancellers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R3/00—Circuits for transducers, loudspeakers or microphones
- H04R3/04—Circuits for transducers, loudspeakers or microphones for correcting frequency response
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R5/00—Stereophonic arrangements
- H04R5/02—Spatial or constructional arrangements of loudspeakers
- H04R5/023—Spatial or constructional arrangements of loudspeakers in a chair, pillow
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S1/00—Two-channel systems
- H04S1/007—Two-channel systems in which the audio signals are in digital form
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S5/00—Pseudo-stereo systems, e.g. in which additional channel signals are derived from monophonic signals by means of phase shifting, time delay or reverberation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
- H04S7/30—Control circuits for electronic adaptation of the sound field
- H04S7/302—Electronic adaptation of stereophonic sound system to listener position or orientation
- H04S7/303—Tracking of listener position or orientation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R2499/00—Aspects covered by H04R or H04S not otherwise provided for in their subgroups
- H04R2499/10—General applications
- H04R2499/13—Acoustic transducers and sound field adaptation in vehicles
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Transportation (AREA)
- Aviation & Aerospace Engineering (AREA)
- Mechanical Engineering (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- General Health & Medical Sciences (AREA)
- Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
- Circuit For Audible Band Transducer (AREA)
- Seats For Vehicles (AREA)
- Details Of Audible-Bandwidth Transducers (AREA)
Abstract
用于座椅头枕的音频***(30),包括:N个扬声器(32),每个扬声器被配置为集成到座椅头枕中,N是大于或等于1的整数;以及音频处理装置(36),该音频处理装置包括电子发送通道(60),该电子发送通道连接到扬声器(32),并且被配置为经由扬声器(32)传输至少一个音频流。所述音频***(30)包括P个麦克风(34),每个麦克风被配置为集成到头枕中,P是大于或等于1的整数,并且所述音频处理装置(36)还包括电子接收通道(62),该电子接收通道连接到麦克风(34)并被配置为经由P个麦克风(34)接收至少一个声音信号。
Description
技术领域
本发明涉及一种用于座椅头枕的音频***,该音频***包括:N个扬声器(speaker),每个扬声器被配置为集成到座椅头枕中,N是大于或等于1的整数;以及音频处理装置,该音频处理装置包括电子发送(transmission)通道,该电子发送通道连接到扬声器,并且被配置为经由扬声器发送至少一个音频流。
本发明还涉及这种音频处理装置。
本发明还涉及一种被设计成联接到座椅的靠背的座椅头枕,该头枕配备有这种音频***,扬声器和麦克风(microphone)集成到头枕中。
本发明还涉及一种客运车辆,具体是机动车辆,该车辆包括一个或几个座椅,至少一个座椅配备有这种头枕。
本发明涉及用于客运车辆、特别是用于机动车辆的音频***的领域。
背景技术
文献EP2987341B1和EP3094114B1示教了上述类型的音频***。然而,该音频***限于音乐应用,并且用户与这种音频***的交互并不总是最佳的。
发明内容
因此,本发明的目的是提出一种用于座椅头枕的音频***,该音频***使得可以改善与坐在配备有所述头枕的座椅中的用户的交互、以及与由经由电话通信装置与用户通信的对话者使用的远程终端的交互,从而向用户和对话者提供更好的音频体验。
为此,本发明涉及一种用于座椅头枕的音频***,该音频***包括:N个扬声器,每个扬声器被配置为集成到座椅头枕中,N是大于或等于1的整数;以及音频处理装置,该音频处理装置包括电子发送通道,该电子发送通道连接到扬声器,并且被配置为经由扬声器发送至少一个音频流,
该音频***包括P个麦克风,每个麦克风被配置为集成到头枕中,P是大于或等于1的整数,并且所述音频处理装置包括电子接收(receiving)通道,该电子接收通道连接到麦克风并被配置为经由P个麦克风接收至少一个声音信号。
利用根据本发明的音频***,由于麦克风被配置为集成到头枕中(这尤其是为用户提供了在免提模式下进行电话交谈的可能性),并且电子接收通道连接到麦克风并且被配置为经由P个麦克风接收至少一个声音信号,因此与用户的交互更好。
于是,显著地改善了提供给用户的音频体验,特别是当用户希望在免提模式下经由音频***进行电话交谈时或者希望通过音频***向话音识别***发送话音指令时。
作为可选的补充,当电子接收通道还包括与麦克风相关的至少一个回声消除模块时,这使得可以减少由于集成到头枕中的扬声器以及包括所述音频***的客运车辆的乘客舱内部的任意其它扬声器产生的回声。
根据本发明的其他有利方面,音频***包括以下特征中的一个或多个,这些特征单独考虑或根据所有技术上可能的组合来考虑:
-N和P各自大于或等于2;
-音频***包括两个通道,每个通道包括至少一个扬声器和至少一个麦克风,
诸如右通道且相应地和左通道,这两个通道被配置为在用于用户头部的支承区域的右边且相应地和左边分别集成到头枕中;
-电子接收通道包括至少一个回声消除模块,该至少一个回声消除模块与麦克风相关并且被配置为减少由于扬声器产生的回声,
优选地,一个回声消除模块用于每个麦克风,每个回声消除模块然后连接到相应的麦克风,
然后,回声消除模块的数量优选地也等于M和P的乘积,其中,M表示能够经由扬声器同时发出的音频流的数量;
-所述回声消除模块或每个回声消除模块被配置为进一步减少由于一个或几个附加扬声器产生的回声,每个附加扬声器被配置为安装在距座椅头枕一定距离处并且在包括所述座椅头枕的车辆内部;
-电子接收通道包括模块,该模块用于降低与麦克风有关的噪声,并且被配置为降低经由麦克风接收的信号中的噪声;
-P大于或等于2,电子接收通道包括选择模块,该选择模块被配置为选择从P个麦克风接收的信号中的最佳信号,
选择模块优选地被配置为根据从麦克风接收的各个信号的信噪比选择最佳信号;以及
-电子接收通道包括自动增益控制模块,该自动增益控制模块连接到麦克风,并且被配置为调节由经由麦克风接收的信号产生的信号的增益。
本发明还涉及一种用于如上限定的音频***的音频处理装置,所述音频处理装置包括:
-电子发送通道,该电子发送通道连接到扬声器并且被配置为经由扬声器发送至少一个音频流;和
-电子接收通道,该电子接收通道连接到麦克风并且被配置为经由P个麦克风接收至少一个声音信号,
所述电子接收通道包括至少一个回声消除模块,该回声消除模块连接到麦克风并且被配置为减少由于扬声器产生的回声,回声消除模块的数量等于M和P的乘积,其中,M表示能够经由扬声器发出的音频流的数量。
本发明还涉及一种被设计成联接到座椅的靠背的座椅头枕,该头枕配备有如上限定的音频***,扬声器和麦克风集成到头枕中。
根据本发明的其他有利方面,座椅头枕包括以下特征中的一个或多个,这些特征单独考虑或根据任意技术上可能的组合来考虑:
-头枕包括中心主体和可相对于中心主体移动的至少一个侧翼片,至少一个扬声器和至少一个麦克风集成到相应的侧翼片中;以及
-头枕包括中心主体和布置在中心主体的两侧上的两个侧翼片,每个侧翼片可相对于中心主体移动,至少一个扬声器和至少一个麦克风优选地还集成到每个侧翼片中。
本发明还涉及一种客运车辆,具体是机动车辆,该运输车辆包括一个或几个座位,至少一个座位包括如上限定的头枕。
附图说明
本发明的这些特征和优点将在阅读以下描述时更清楚地显现,该以下描述仅被提供为非限制性示例,并且参照附图来进行,附图中:
图1是客运车辆的示意图,该客运车辆包括具有配备有根据本发明的音频***的头枕的至少一个座椅,用于座椅头枕的音频***包括集成到座椅头枕中的一个或几个扬声器、用于经由所述扬声器发送音频流的电子通道、以及集成到头枕中的一个或几个麦克风和用于经由所述麦克风接收至少一个声音信号的接收通道;以及
图2是图1的音频***的示意图。
具体实施方式
在图1中,客运车辆10包括一个或几个未示出的座椅,至少一个座椅包括头枕12。运输车辆10优选地包括分布成一排或几排的若干座椅。
运输车辆10例如是通常包括若干座椅的机动车辆,优选地,这些座椅分布成一排、两排或三排座椅。当运输车辆10包括若干排座椅时,位于车辆10的沿所述车辆的移动方向上的前部的那排座椅被称为前排,位于车辆10的后部的那排座椅被称为后排,并且位于前排与后排之间的任何排座椅被称为中间排。
运输车辆10包括其中布置座椅的乘客舱14,该乘客舱14由图1中的虚线矩形示意性地示出。
每个头枕12旨在机械地联接到相应座椅的靠背(未示出)。每个头枕12包括中心主体16,该中心主体通常形成用于用户22的头部20的支承区域18。
作为可选的补充,至少一个头枕12包括至少一个侧翼片24,该至少一个侧翼片相对于中心主体16侧向布置,也就是说,相对于所述头枕联接到的座椅的靠背的延伸方向布置在中心主体16的一侧上。
在图1的示例中,头枕12包括布置在中心主体16的两侧上的两个侧翼片24,即,右侧翼片和左侧翼片,右和左相对于所述车辆的移动方向限定。每个侧翼片24优选地可相对于中心主体16移动,并且例如可相对于基本上平行于座椅靠背的延伸轴线的轴线旋转。座椅的靠背的延伸轴线基本上竖直地延伸。每个侧翼片24例如相对于中心主体16铰接。
在变型中,两个侧翼片24相对于头枕12的中心主体16是固定的。两个侧翼片24与头枕12的中心主体16形成凹空间。
根据本发明,至少一个头枕12配备有用于座椅头枕的音频***30,该音频***30包括一个或几个扬声器32以及一个或几个麦克风34。扬声器32和麦克风34然后集成到头枕12中,也就是说,接收在为此设置的头枕12的壳体中。
作为可选的补充,当头枕12包括至少一个侧翼片24时,至少一个扬声器32和至少一个麦克风34优选地集成到相应的侧翼片24中。
作为另一可选的补充,当头枕12包括布置在中心主体16的两侧上的两个侧翼片24并且音频***30包括至少两个扬声器32和至少两个麦克风34时,至少一个扬声器32和至少一个麦克风34优选地集成到每个相应的侧翼片24中。
在图1和图2的示例中,音频***30包括:N个扬声器32,每个扬声器被配置为集成到相应座椅头枕12中,N为大于或等于1的整数;P个麦克风34,每个麦克风被配置为集成到头枕12中,P为大于或等于1的整数;以及音频处理装置36,该音频处理装置经由相应连接38(优选地为有线的)连接到N个扬声器32和P个麦克风34。
作为可选的补充,音频***30包括一个或几个附加扬声器40,这些附加扬声器被配置为布置在车辆10的乘客舱14内部并与扬声器12相距一定距离。根据该可选的补充,扬声器32于是也被称为头枕扬声器,附加扬声器40于是也被称为乘客舱扬声器。
在图1的示例中,在免提移动电话应用中例示了音频***30,并且音频***30的处理装置36例如连接到无线电通信模块42,诸如短距离无线电通信模块,例如根据蓝牙标准的无线电通信模块。然后,无线电通信模块42经由无线电链路46(诸如根据蓝牙标准的链路)或者经由有线连接(诸如电缆)连接到用户终端44。无线电通信模块42通常布置在乘客舱14内部。用户终端44例如是用户22的移动电话,并且能够经由通信网络50与远程电子设备项48(诸如远程终端)通信。远程电子设备项48例如是与用户22通信的对话者的移动电话。
在图2的示例中,扬声器32的数量N和麦克风34的数量P各自大于或等于2。数量P优选地等于2,一个麦克风34用于每个侧翼片24。数量N例如等于2,一个扬声器32用于每个侧翼片24;或等于4,两个扬声器32用于每个侧翼片24;或等于3,一个扬声器32用于每个侧翼片24,而且一个扬声器32用于头枕12的中心主体16。
在图1的示例中,音频***30具体包括两个通道,诸如右通道D且相应地和左通道G,它们被配置为在用户22的头部20的支承区域18的右边且相应地和左边集成到头枕12中,如图1所示。每个通道D、G包括至少一个扬声器32和至少一个麦克风34。
每个扬声器32优选地布置在头枕12的上部中并且靠近用户22的对应耳朵或双耳的估计位置。每个扬声器32被定向为朝向对应耳朵的估计位置。
每个扬声器32优选地被移动得尽可能远离对应的麦克风34,同时使扬声器32和麦克风34布置在头枕12内。
每个麦克风34优选地定位在头枕12的一端处,在头枕12的下部中,还优选地定位在相应翼片24的一端处,同时定向为朝向用户22的嘴的估计位置。
作为示例,每个麦克风34沿着与最近的扬声器32的发送方向垂直的方向定向。扬声器32的发送方向指的是扬声器32发送声音将沿着的主方向,该方向例如对应于与扬声器32的音膜(membrane)关联的磁铁的移动方向。
麦克风34的该方向垂直于对应扬声器32的发送方向,使得可以减小来自该扬声器32的声学回声的影响,从而增加信号回声比。
在变型中,每个麦克风34沿着与最近的扬声器32的发送方向基本上平行的方向定向。
麦克风34朝向用户22的嘴的估计位置的定向使得可以增加所捕获信号的强度,尤其是由于用户22的语音(图2中的箭头F1)而导致的信号的强度,尤其是在高音范围中。
作为可选的补充,扬声器32的接收壳体与对应麦克风34的接收壳体隔离,以便限制所述扬声器32与所述麦克风34之间的机械(鉴于声音的结构传播传输)和声学(鉴于声音的空中传输)耦合。例如,为所述扬声器32和所述麦克风34提供相对于彼此分离且密封的腔(鉴于声音的空中传输)。
而且作为可选的补充,并且为了进一步减少扬声器32与麦克风34之间的机械耦合,扬声器32和麦克风34各自被集成到相应的翼片24中,包括扬声器32的翼片24于是与包括麦克风34的翼片24分离。
作为另一个可选的补充,头枕12且优选地和翼片24包括布置在一方面的扬声器32的接收壳体与另一方面的麦克风34的接收壳体之间的一种或几种声学材料。这种或这些声学材料使得可以使扬声器32与麦克风34之间的振动在与话音对应的带宽中的传输最小化,特别是对于移动电话和话音识别应用,例如在50Hz至8kHz之间的带宽中。声学材料例如是弹性体。
音频处理装置36包括电子发送通道60,该电子发送通道连接到扬声器32、40并且被配置为经由扬声器32、40发送至少一个音频流,如图2所示。
音频处理装置36还包括电子接收通道62,该电子接收通道连接到麦克风34并且被配置为经由麦克风34接收至少一个声音信号。
音频处理装置36例如为电子板的形式,该电子板仅包括电子发送通道60和电子接收通道62。在变型中,音频处理装置36被集成到电子板中,该电子板包括电子发送通道60和电子接收通道62以及其他功能,例如无线电通信模块42。
发送通道60适于连接到:第一源S1,诸如与用户终端44通信的远程电子设备项48,用户终端44然后形成远程电子设备项48与音频处理装置36或话音识别模块(未示出)之间的通信网关;而且以可选补充的方式连接到第二源S2,诸如车辆10内部的音乐读取装置(通常是汽车收音机)、或导航装置、或声音动画装置。
从源S1、S2朝向扬声器32,发送通道60包括连接到第一源S1的第一混合器和衰减器模块64(也表示为MIX/FAD)、连接到第一混合器和衰减器模块64的输出的第一均衡器模块66(也表示为EQ)、连接到第一均衡器模块66的输出的第一限制器模块68,第一限制器模块68也表示为LIM。
另外,发送通道60包括连接到第一限制器模块68的输出的数模转换器70(也表示为DAC)和连接到数模转换器70的输出的放大器72(也表示为AMP)。放大器72连接到扬声器32的输入,而且以可选补充的方式连接到附加扬声器40的输入。
当以可选补充的方式,音频***30包括一个或几个附加扬声器40时,发送通道60包括连接到第二源S2的第二混合器和衰减器模块74(也表示为MIX/FAD)、连接到第二混合器和衰减器模块74的输出的第二均衡器模块76(也表示为EQ)、连接到第二均衡器模块76的输出的第二限制器模块78(也表示为LIM)。根据该可选的补充,第二限制器模块78连接到数模转换器70的输入。
在未示出的变型中,发送通道60包括两个单独的数模转换器(代替数模转换器70),即,连接到第一限制器模块68的输出的第一数模转换器和连接到第二限制器模块78的输出的第二数模转换器。
在未示出的变型中,发送通道60包括两个单独的放大器(代替放大器72),即,第一放大器,该第一放大器连接到数模转换器70的输出,或者根据上述变型,连接到第一数模转换器的输出;以及第二放大器,该第二放大器连接到数模转换器70的输出,或者根据上述变型,连接到第二数模转换器的输出。
在未示出的变型中,发送通道60包括相同的混合器和衰减器模块64、74、相同的均衡器模块66、76以及相同的限制器模块68、78,但是从源S1、S2朝向扬声器32、40以不同的顺序排列。作为示例,在变型中,第一均衡器模块66连接到第一源S1,然后第一混合器和衰减器模块64连接到第一均衡器模块66的输出,第一限制器模块68连接到第一混合器和衰减器模块64的输出,第一限制器模块68又连接到数模转换器70的输入。根据该变型,第二均衡器模块76类似地连接到第二源S2,第二混合器和衰减器模块74连接到第二均衡器模块76的输出,并且第二限制器模块78连接到第二混合器和衰减器模块74的输出,第二限制器模块78连接到数模转换器70的输入。
当存在第二源S2时,本领域技术人员理解,第一混合器和衰减器模块64优选地连接到第一源S1和第二源S2两者,以便能够通过头枕扬声器32广播来自第一源S1和第二源S2两者的音频流。
当第一源S1是远程电子设备项48或话音识别模块时,音频处理装置36通常连接到无线电通信模块42,如图1的示例中。当第二源S2是音乐读取装置、或导航装置、或声音动画装置时,本领域技术人员当然将理解,音频处理装置36然后分别连接到音乐读取装置、导航装置或声音动画装置。
本领域技术人员还将理解,每个源S1、S2能够传输一个或几个音频流。
从麦克风34朝向在接收通道62的输出处连接到音频处理装置36的模块或装置(例如,无线电通信模块42),接收通道62包括:模数转换器80(也表示为ADC),该模数转换器80连接到每个麦克风34;一个或几个加法器82,每个加法器能够将一方面来自模数转换器80或来自接收通道62的前一加法器82的信号与另一方面来自声学回声消除模块84(也表示为AEC)的信号相加。
接收通道62包括用于每个麦克风34的至少一个回声消除模块84,并且还优选地包括用于每个麦克风34且用于能够经由扬声器32、40同时传输的每个音频流的回声消除模块84。于是,包含在接收通道62中的回声消除模块84的数量优选地等于M×P,其中,M表示能够经由扬声器32、40同时发送的音频流的数量,并且P表示麦克风34的数量,如前所述。在图2的示例中,能够经由扬声器32、40同时发送的音频流的数量M等于二,即,右音频流和左音频流,以便具有立体声,并且麦克风34的数量P等于二,使得回声消除模块84的数量在该示例中等于四。
本领域技术人员还将理解,如果通过两个单独的扬声器32、40广播相同的音频流,那么该音频流被计数为单个音频流,包括如果该音频流在两个扬声器32、40之间具有延迟地广播,或者如果在通过两个扬声器32、40中的一个广播该流之前向该流应用线性滤波。
接收通道62还包括连接到加法器82的输出的选择模块86,也表示为AMS(自动麦克风选择),如果存在一个接一个连续连接的多个加法器82,则选择模块86连接到接收通道62的最后一个加法器82的输出。
接收通道62还包括:降噪模块88(也表示为NR),该降噪模块连接到选择模块86的输出;自动增益控制模块90(也表示为AGC),该自动增益控制模块连接到降噪模块88的输出;以及第三均衡器模块92(也表示为EQ),该第三均衡器模块连接到自动增益控制模块90的输出,第三均衡器模块92然后连接到在接收通道62的输出处连接到音频处理装置36的模块或装置(诸如无线电通信模块42)的输入。
在未示出的变型中,接收通道62包括相同的加法器82、回声消除模块84、选择模块86、降噪模块88、自动增益控制模块90以及第三均衡器模块92,但是从麦克风34朝向在接收通道62的输出处连接到音频处理装置36的模块或装置以不同顺序布置。作为示例,降噪模块88连接在加法器82的输出处,接收通道62于是优选地包括用于每个麦克风34的降噪模块88,然后选择模块86连接到每个降噪模块88的输出,自动增益控制模块90连接到选择模块86的输出,最后第三均衡器模块92连接到自动增益控制模块90的输出。
第一混合器和衰减器模块64被配置为在音频处理装置36的输入处的多个音频源的情况下,混合来自若干音频源的信号,和/或根据与各个源关联的增益来衰减不同源的声级(sound level)。
第一混合器和衰减器模块74例如被配置为根据每个源的预定衰减增益获得不同输入源的加权和。第一混合器和衰减器模块74例如包括衰减器,该衰减器连接到这些不同源并且适于根据相应的预定衰减增益对各个源进行加权,其后是混合器,该混合器适于混合来自混合器的不同信号,并且通常用于将来自混合器的不同信号相加。
然后,第一混合器和衰减器64通常被配置为将来自远程电子设备项48的电话话音消息或话音识别消息与诸如音乐、导航或铃声源的其他音频源混合。
第一混合器和衰减器模块64还被配置为在一个或几个其它源应当通过扬声器32广播的情况下衰减或切断每个源的声音。另外,第一混合器和衰减器模块64使得可以在电话和话音识别中获得将在回声消除模块84的输入处提供的参考信号的整个音频流,由此消除将同时通过扬声器32广播的任何其它音频流。
第一均衡器模块66本身已知,并且使得可以将频率滤波器应用于在输入处接收的信号,以便在输出处获得具有取决于所考虑的频率的不同电平的修改信号。
第一均衡器模块66特别使得可以通过例如使用一个或几个参考滤波器来改进集成到头枕12中的扬声器32的频率响应,这使得可以校正通过扬声器播放的话音的音色并且给予其更多热情(warmth)、清晰度以及精度。实际上,扬声器32集成到头枕12中修改各个扬声器32的频率响应。作为示例,各个扬声器32的频率响应必须优选地具有不平坦的形状和/或由于各个扬声器32的较小尺寸而在低频方面可能非常有限。
第一均衡器模块66例如被配置成为能够通过扬声器32同时广播的各个音频流(例如左音频流和右音频流)应用一个或几个连续的双二阶滤波器。双二阶滤波器本身已知,并且是包含两个极点和两个零点的二阶递归线性滤波器。这种双二阶滤波器的传递函数是两个二次函数之间的比。
第一限制器模块68被配置为限制音频流的增益,以便避免削波失真,特别是在均衡和混合之后。
数模转换器70和放大器72本身已知。
第二混合器和衰减器模块74与第一混合器和衰减器模块64类似,第二均衡器模块76与第一均衡器模块66类似,最后,第二限制器模块78与第一限制器模块68类似。
每个加法器82和每个关联的回声消除模块84例如经由模数转换器80连接到麦克风34,并且被配置为减少由于扬声器32、40引起的回声(由图2中的箭头F3和F4例示),也就是说,由于头枕扬声器32和/或乘客舱扬声器40引起的回声。
在图2的示例中,每个加法器82和每个关联的回声消除模块84被配置为针对相应麦克风34和能够通过相应扬声器32、40传输的音频流减少回声。然后,每个加法器82被配置为将一方面经由模数转换器80来自相应麦克风34的信号与另一方面来自相应回声消除模块84的信号相加,来自相应回声消除模块84的信号旨在减少或者甚至消除包含在来自麦克风34的信号中并且对应于回声消除模块84所关联的扬声器流的回声。回声消除模块84例如连接到与回声消除模块84所关联的音频流对应的相应限制器模块68、78的输出,并且还连接到回声消除模块84所关联的加法器82的输出,到加法器82的输出的该连接形成反馈回路。
回声消除模块84例如被配置为根据以下方程经由实施仿射投影算法(APA)的自适应滤波来执行回声消除:
【公式1】
其中,项X(n)·(XT(n)·X(n)+Δ)-1·e(n)通过使用二分法坐标下降(DCD)来计算,
y(n)表示来自麦克风34的信号,该信号的形式为大小向量(size vector)NAPA*1,
x(n)表示通过扬声器32、40广播的信号,该信号的形式为大小向量LAPA*1,
e(n)表示来自回声消除模块84的信号,该信号的形式为大小向量NAPA*1,
h(n)表示对扬声器32、40与麦克风34之间的声学路径进行建模的自适应滤波器,该滤波器的形式为大小向量LAPA*1,
μ表示使得可以调制自适应滤波器的更新速度的自适应音高,
X(n)是矩阵,该矩阵验证:
【公式2】
X(n)=[x(n)x(n-1)...x(n-NAPA+1)]
Δ表示矩阵X(n)的正则因子,该正则因子使得可以控制其调理并因此控制自适应滤波器的更新的稳定性,
n表示整数迭代指数,并且
XT是X的矩阵转置。
与加法器82关联的回声消除模块84然后使得可以减少甚至消除来自扬声器32、40的任何信号,以便典型地在电话呼叫期间或者在话音指令的传输期间,仅将与用户22的话音对应的部分保持在由麦克风34捕获的信号内。
当麦克风34的数量P大于或等于二时,选择模块86被配置为选择从P个麦克风34接收的信号中的最佳信号。选择模块86例如被配置为根据从麦克风34接收的各个信号的信噪比SNR选择最佳信号,例如以文献FR2945696B1中特别是在第6页第20行到第12页第30行描述的方式。
然后,选择模块86使得可以从来自麦克风34的信号中选择具有最高语音电平的信号。当用户22向右或向左转动他的头部20时,也就是说,执行沿着图1中的箭头R的旋转移动时,该选择模块86特别有用。实际上,用户22的头部20的这种运动引起用户22的嘴与相应的麦克风34之间的距离的增加或相应的减少,这然后引起信噪比和对应的信号回声比的减少或相应的增加。换言之,选择模块86使得尽管用户22的头部沿着箭头R旋转,也可以保持最佳信号,并且使得可以在捕获用户22的话音时限制头部20的旋转移动的效果。
降噪模块88例如经由模数转换器80、加法器82以及选择模块86连接到麦克风34,并且被配置为降低经由所述麦克风34接收的信号中的噪声。
在传输用户22的话音指令的电话呼叫或话音识别命令期间,麦克风34不仅捕获用户22沿着箭头F1的话音,而且还捕获沿着图2中的箭头F2的环境噪声。然后降噪模块88使得可以降低在该电话呼叫或该话音识别期间由麦克风34捕获的信号中的环境噪声,然后提高呼叫质量或话音识别性能。然后,根据不同的准则,特别是呼叫的更好的可理解性、例如由于减少的噪声而引起的更少的音频打扰、或更自然的话音质量(音色、热情、清晰度、精度),可感知到对音频质量的该提高。
自动增益控制模块90例如经由模数转换器80、加法器82、选择模块86以及降噪模块88连接到麦克风34,并且被配置为将增益应用于从经由麦克风34接收的信号产生的信号。
增益的值根据用户22的语音电平随时间变化。该值被计算为使得离开自动增益控制模块90的语音电平随时间是恒定的,与用户22的话音无关,与用户的头部20在头枕12上的位置或方位无关。
该自动增益控制模块90使得可以具有基本恒定电平的信号作为输出,这使得可以进一步提高电话呼叫的质量或话音识别性能。该自动增益控制模块90在用户22的头部20移动的情况下,例如在沿着图1中的箭头R旋转的情况下,特别有用。
第三均衡器模块92被配置为将频率滤波器应用于来自自动增益控制模块90的信号,以便改善要发送到离开音频处理装置36的模块或装置(诸如无线电通信模块42)的信号的频率响应。第三均衡器模块92使得可以进一步改善在电话呼叫的情况下发送到用户22的对话者的语音的质量,或者改善发送到话音识别模块的话音指令的质量。
作为可选的补充,接收通道62还包括连接到第三均衡器模块92的输出的限制器模块(未示出)。
由此,利用根据本发明的音频***30,由于麦克风34被配置为集成到头枕12中并且接收通道62连接到麦克风34并被配置为经由麦克风34接收至少一个声音信号,与用户22的交互确实更好。于是,特别地,在麦克风34集成到头枕12中的情况下,话音的质量或话音指令的质量好得多,特别是当用户22希望经由音频***30进行电话交谈或者发送话音命令或指令时。
作为可选的补充,当接收通道62还包括回声消除模块84时,根据本发明的音频***30使得可以减少或甚至消除由头枕扬声器32(图2中的箭头F3)和/或乘客舱扬声器40(图2中的箭头F4)引起的回声,例如当用户22在进行电话交谈的同时收听音乐时。由此,利用根据本发明的音频***30,车辆10中的其他乘客可以在用户22拨打电话的同时继续收听音乐。另外,与用户22进行电话交谈的对话者由于回声消除模块84而听不到或听到非常少的在车辆10内部广播的音乐。类似地,回声消除模块84使得可以显著提高在用户22在通过扬声器32、40广播音乐的同时发送话音指令的情况下的话音识别性能。此外,由于对话者的话音经由头枕12的扬声器32而不是经由附加扬声器40到达用户22,所以用户22将更好且更清楚地听到远程对话者。
作为另一个可选的补充,降噪模块88使得可以降低由麦克风34检测到的噪声(图2中的箭头F2)。
作为另一个可选的补充,选择模块86和/或自动增益控制模块90使得可以限制或各自完全抵消头部20的移动(诸如沿着箭头R的旋转)对由麦克风34检测到的声音信号的影响。
由此,可以看出,根据本发明的音频***30使得可以改善与用户22以及与对话者所使用的远程电子设备48的交互,从而为他们提供更好的音频体验。
Claims (18)
1.一种用于座椅头枕(12)的音频***(30),所述音频***(30)包括:N个扬声器(32),每个扬声器被配置为集成到座椅头枕(12)中,N是大于或等于1的整数;以及音频处理装置(36),该音频处理装置包括电子发送通道(60),该电子发送通道连接到所述扬声器(32),并且被配置为经由所述扬声器(32)发送至少一个音频流,
其特征在于:所述音频***(30)包括P个麦克风(34),每个麦克风被配置为集成到所述头枕(12)中,P是大于或等于1的整数,并且在于:所述音频处理装置(36)还包括电子接收通道(62),该电子接收通道连接到所述麦克风(34)并被配置为经由所述P个麦克风(34)接收至少一个声音信号。
2.根据权利要求1所述的音频***(30),其中,N和P各自大于或等于2。
3.根据权利要求1所述的音频***(30),其中,所述音频***(30)包括两个通道(D、G),每个通道(D、G)包括至少一个扬声器(32)和至少一个麦克风(34)。
4.根据权利要求3所述的音频***(30),其中,所述两个通道(D、G)是右通道(D)且相应地和左通道(G),它们被配置为在用户(22)的头部(20)的支承区域(18)的右边且相应地和左边集成到所述头枕(12)中。
5.根据权利要求1所述的音频***(30),其中,所述电子接收通道(62)包括至少一个回声消除模块(84),该至少一个回声消除模块与所述麦克风(34)相关并且被配置为减少由于所述扬声器(32)产生的回声。
6.根据权利要求5所述的音频***(30),其中,所述电子接收通道(62)包括用于每个麦克风(34)的一个回声消除模块(84),每个回声消除模块(84)然后连接到相应的麦克风(34)。
7.根据权利要求5所述的音频***(30),其中,回声消除模块(84)的数量等于M和P的乘积,其中,M表示能够经由所述扬声器(32)同时发出的音频流的数量。
8.根据权利要求5所述的音频***(30),其中,所述回声消除模块(84)或每个回声消除模块(84)被配置为进一步减少由于所述一个或几个附加扬声器(40)产生的所述回声,每个附加扬声器(40)被配置为远离所述座椅头枕(12)安装并且在包括所述座椅头枕(12)的车辆内部。
9.根据权利要求1所述的音频***(30),其中,所述电子接收通道(62)包括模块(88),该模块用于降低与所述麦克风(34)相关的所述噪声,并且被配置为降低经由所述麦克风(34)接收的所述信号中的所述噪声。
10.根据权利要求1所述的音频***(30),其中,P大于或等于2,所述电子接收通道(62)包括选择模块(86),该选择模块被配置为选择从所述P个麦克风(34)接收的所述信号中的最佳信号。
11.根据权利要求10所述的音频***(30),其中,所述选择模块(86)被配置为根据从所述麦克风(34)接收的各个所述信号的信噪比(SNR)选择所述最佳信号。
12.根据权利要求1所述的音频***(30),其中,所述电子接收通道(62)包括自动增益控制模块(90),该自动增益控制模块连接到所述麦克风(34),并且被配置为调节由经由所述麦克风(34)接收的所述信号产生的信号的增益。
13.一种用于根据权利要求1的音频***(30)的音频处理装置(36),所述音频处理装置(36)包括:
-电子发送通道(60),该电子发送通道连接到所述扬声器(32)并且被配置为经由所述扬声器(32)发送至少一个音频流;和
-电子接收通道(62),该电子接收通道连接到所述麦克风(34)并且被配置为经由所述P个麦克风(34)接收至少一个声音信号,
其特征在于:所述电子接收通道(62)包括至少一个回声消除模块(84),该回声消除模块连接到所述麦克风(34)并且被配置为减少由于所述扬声器(32)产生的所述回声,回声消除模块(84)的数量等于M和P的乘积,其中,M表示能够经由所述扬声器(32)发出的音频流的数量。
14.一种被设计为联接到座椅的靠背的座椅头枕(12),
其特征在于:所述头枕(12)配备有根据权利要求1的音频***(30),所述扬声器(32)和所述麦克风(34)集成到所述头枕(12)中。
15.根据权利要求14所述的头枕(12),其中,所述头枕(12)包括中心主体(16)和可相对于所述中心主体(16)移动的至少一个侧翼片(24),至少一个扬声器(32)和至少一个麦克风(34)集成到相应的侧翼片(24)中。
16.根据权利要求15所述的头枕(12),其中,所述头枕(12)包括所述中心主体(16)和布置在所述中心主体(16)的两侧上的两个侧翼片(24),每个侧翼片(24)可相对于所述中心主体(16)移动。
17.根据权利要求16所述的头枕(12),其中,至少一个扬声器(32)和至少一个麦克风(34)集成到每个侧翼片(24)中。
18.一种客运车辆(10),所述客运车辆(10)包括一个或几个座椅,
其特征在于:至少一个座椅包括根据权利要求14的头枕(12)。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
FR1906982A FR3098076B1 (fr) | 2019-06-26 | 2019-06-26 | Système audio pour appui-tête avec microphone(s) intégré(s), appui-tête et véhicule associés |
FR1906982 | 2019-06-26 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN112153553A true CN112153553A (zh) | 2020-12-29 |
Family
ID=68425025
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010587706.8A Pending CN112153553A (zh) | 2019-06-26 | 2020-06-24 | 用于具有集成麦克风的头枕的音频***、相关头枕以及车辆 |
Country Status (5)
Country | Link |
---|---|
US (1) | US11523217B2 (zh) |
EP (1) | EP3758349A1 (zh) |
JP (1) | JP2021005869A (zh) |
CN (1) | CN112153553A (zh) |
FR (1) | FR3098076B1 (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20230217167A1 (en) * | 2022-01-05 | 2023-07-06 | Ford Global Technologies, Llc | Vehicle audio enhancement system |
Family Cites Families (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001056693A (ja) * | 1999-08-20 | 2001-02-27 | Matsushita Electric Ind Co Ltd | 騒音低減装置 |
JP3506138B2 (ja) * | 2001-07-11 | 2004-03-15 | ヤマハ株式会社 | 複数チャンネルエコーキャンセル方法、複数チャンネル音声伝送方法、ステレオエコーキャンセラ、ステレオ音声伝送装置および伝達関数演算装置 |
KR100774519B1 (ko) * | 2006-03-20 | 2007-11-08 | 엘지전자 주식회사 | 통신장치 및 그 통화방법 |
US8325938B2 (en) * | 2008-08-12 | 2012-12-04 | Sony Corporation | Handsfree call apparatus, acoustic reproducing apparatus with handsfree call function, and handsfree call method |
FR2945696B1 (fr) | 2009-05-14 | 2012-02-24 | Parrot | Procede de selection d'un microphone parmi deux microphones ou plus, pour un systeme de traitement de la parole tel qu'un dispositif telephonique "mains libres" operant dans un environnement bruite. |
JP5267601B2 (ja) | 2011-03-08 | 2013-08-21 | 株式会社豊田自動織機 | 電動圧縮機 |
US9210505B2 (en) * | 2013-01-29 | 2015-12-08 | 2236008 Ontario Inc. | Maintaining spatial stability utilizing common gain coefficient |
US9215545B2 (en) | 2013-05-31 | 2015-12-15 | Bose Corporation | Sound stage controller for a near-field speaker-based audio system |
US9767826B2 (en) * | 2013-09-27 | 2017-09-19 | Nuance Communications, Inc. | Methods and apparatus for robust speaker activity detection |
US9352701B2 (en) | 2014-03-06 | 2016-05-31 | Bose Corporation | Managing telephony and entertainment audio in a vehicle audio platform |
US20160100250A1 (en) * | 2014-10-02 | 2016-04-07 | AISIN Technical Center of America, Inc. | Noise-cancelation apparatus for a vehicle headrest |
US9554210B1 (en) * | 2015-06-25 | 2017-01-24 | Amazon Technologies, Inc. | Multichannel acoustic echo cancellation with unique individual channel estimations |
JP2017116909A (ja) * | 2015-12-27 | 2017-06-29 | パナソニックIpマネジメント株式会社 | 騒音低減装置 |
US10049686B1 (en) * | 2017-02-13 | 2018-08-14 | Bose Corporation | Audio systems and method for perturbing signal compensation |
-
2019
- 2019-06-26 FR FR1906982A patent/FR3098076B1/fr active Active
-
2020
- 2020-06-24 JP JP2020108864A patent/JP2021005869A/ja active Pending
- 2020-06-24 CN CN202010587706.8A patent/CN112153553A/zh active Pending
- 2020-06-25 EP EP20182304.4A patent/EP3758349A1/fr active Pending
- 2020-06-25 US US16/912,036 patent/US11523217B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
US20200413194A1 (en) | 2020-12-31 |
JP2021005869A (ja) | 2021-01-14 |
FR3098076B1 (fr) | 2022-06-17 |
EP3758349A1 (fr) | 2020-12-30 |
US11523217B2 (en) | 2022-12-06 |
FR3098076A1 (fr) | 2021-01-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP1858295B1 (en) | Equalization in acoustic signal processing | |
EP1748636B1 (en) | Improved communication in passenger compartments | |
US8351618B2 (en) | Dereverberation and noise reduction method for microphone array and apparatus using the same | |
US20100041443A1 (en) | Handsfree call apparatus, acoustic reproducing apparatus with handsfree call function, and handsfree call method | |
JP2017509186A (ja) | 状況に応じた音声チューニング | |
US10601998B2 (en) | Efficient reutilization of acoustic echo canceler channels | |
US9549257B2 (en) | Feedback cancellation for vehicle communications system | |
EP0882353A2 (en) | Method and apparatus for adaptive volume control for a radiotelephone | |
US20200372926A1 (en) | Acoustical in-cabin noise cancellation system for far-end telecommunications | |
US11146887B2 (en) | Acoustical in-cabin noise cancellation system for far-end telecommunications | |
KR20210086556A (ko) | 차량 오디오 시스템을 위한 공간 음성 분리 기능을 갖는 보이스 더킹 | |
CN112153553A (zh) | 用于具有集成麦克风的头枕的音频***、相关头枕以及车辆 | |
CN107833580B (zh) | 基于输入噪声特性动态增加的噪声抑制 | |
CN101297538B (zh) | 具有用于无线设备的对讲装置的驾驶员信息*** | |
US11438695B1 (en) | Beamforming techniques for acoustic interference cancellation | |
JP2000196737A (ja) | 車両用のハンズフリー通話装置 | |
EP1678926B1 (en) | Audio block | |
CN114786106A (zh) | 一种蓝牙助听器及其音频分配方法 | |
CN112075095A (zh) | 用于车辆的信息娱乐***的主单元、***和方法 | |
JPH04330832A (ja) | 車両用音響装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |