JP2003004521A

JP2003004521A - Identification device for sound outside vehicle

Info

Publication number: JP2003004521A
Application number: JP2001194267A
Authority: JP
Inventors: Masami Nakamura; 真巳中村
Original assignee: Kenwood KK
Current assignee: Kenwood KK
Priority date: 2001-06-27
Filing date: 2001-06-27
Publication date: 2003-01-08

Abstract

PROBLEM TO BE SOLVED: To provide an identification device for sound outside a vehicle automatically determining whether an external sound is necessary for a driver or not without troubling him and, if determined necessary, surely informing the driver of its content by voice and/or image. SOLUTION: In the identification device, outputs of both a video equipment 10 and an audiovisual apparatus 14 installed inside a vehicle are optionally input to an amplifier 13, image signals are supplied to an image monitor 12 via an interrupt circuitry 11, and audio signals are input to a speaker 16 via an interrupt circuitry 15. Signals obtained from a microphone 17 are amplified by an amplifier 18, input to a speech recognition part 21 after the external sound component of which is extracted by a differential circuitry 20, converted into speech pattern data, and then input to a coincidence determination part 22 to be compared with the data of a specific identification parameter memory 23. When the data is determined necessary speech data, speech and image messages associated with the data are input to both the interrupt circuitry 11 and the interrupt circuitry 15 via an image conversion part 24 and a speech conversion part 25.

Description

【発明の詳細な説明】Detailed Description of the Invention

【０００１】[0001]

【発明の属する技術分野】本発明は、車載型音響機器の
音源出力信号に対応して放音部から放音される主音声と
車外音とが混在している車内環境に用いて有用な車外音
の識別装置に関する。BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to an exterior of a vehicle useful for an in-vehicle environment in which a main sound emitted from a sound emitting unit and a sound outside the vehicle corresponding to a sound source output signal of a vehicle-mounted audio device are mixed. The present invention relates to a sound identification device.

【０００２】[0002]

【従来の技術】ラジオ受信、カセットテープ再生、ＣＤ
再生等々を行う車載型音響機器を車両に設置して音楽等
を聞きながら車両を運転することが広く行われていて、
車両の乗車中に車外音が聞こえると、この車外音が緊急
車両等のユーザーにとって何らかの対応をしなければな
らない情報であるのか、不必要なノイズ等の不必要情報
であるかをユーザーが判断をし、車外音が必要情報であ
る場合には、運転者が車載型音響機器の出力を低下させ
るような手動操作を行ったり、スピーカ音のミュート操
作を手動で行うことによって車外音に対する充分な対応
が取れるようにし、緊急車両のサイレン鳴動や当該車両
からの警告音声、例えば「緊急車両が通過するので進路
を左側に変更してください」等の警告音声が充分に聞こ
えるようにしている。2. Description of the Related Art Radio reception, cassette tape reproduction, CD
It is widely practiced to install a vehicle-mounted audio device for playing and so on in a vehicle and driving the vehicle while listening to music and the like.
When the outside sound is heard while the vehicle is in the vehicle, the user determines whether the outside sound is the information that the user of the emergency vehicle or the like needs to take some action or unnecessary information such as unnecessary noise. However, when the outside sound is the necessary information, the driver can perform a sufficient manual operation to reduce the output of the on-vehicle audio equipment, or manually mute the speaker sound to sufficiently cope with the outside sound. The sound of the siren of an emergency vehicle and a warning sound from the vehicle, for example, a warning sound such as "Please change the course to the left because the emergency vehicle passes" are heard.

【０００３】しかし、このような対応操作は全くの手動
でもって行われているので、車載型音響機器から発せら
れる音声レベルが大きい場合には、車外音の存在を認識
することが難しく、また運転操作を中断して手動操作を
行えない状況があるという難点を解消するために、当該
の対応操作を手動操作で行わずに自動判断で行えるよう
にした車外音の識別装置がある。However, since such a corresponding operation is performed entirely by hand, it is difficult to recognize the presence of outside sound when the sound level emitted from the vehicle-mounted audio equipment is high, and the operation is not possible. In order to solve the problem that there is a situation in which an operation is interrupted and a manual operation cannot be performed, there is a vehicle outside sound identification device that can perform the corresponding operation by automatic determination without performing the manual operation.

【０００４】これは、例えば特開平６−１９４２１８に
開示されている「音響認識装置」のように、車外音をマ
イクロフォンで採取し、予め格納されている複数の音声
パターンと比較することによって車外音が何であるの
か、即ちロードノイズであるのか緊急車両のサイレンで
あるのか踏切の警告音であるのか等々を判定し、運転者
の対応が不必要な車外音、例えばロードノイズであった
場合にはそのままとし、必要な車外音、例えば緊急車両
のサイレン鳴動であったときには、車載型音響機器で車
内に放音されるレベルを下げたりミュートすることによ
って、当該の車外音を聞き取り易くしている。This is because, for example, as in the "acoustic recognition device" disclosed in Japanese Patent Laid-Open No. 6-194218, the sound outside the vehicle is sampled by a microphone and compared with a plurality of prestored sound patterns, and the sound outside the vehicle is detected. Is, that is, whether it is road noise, a siren of an emergency vehicle, a warning sound of a railroad crossing, etc. When the vehicle outside sound is left as it is, for example, when the siren sounds of an emergency vehicle, the vehicle outside sound is easily heard by lowering or muting the level emitted by the vehicle-mounted audio device.

【０００５】また、図５に示すように構成された車外音
の識別装置がある。即ち、車内に設置されたビデオ機器
１とオーディオ機器４を有し、ビデオ機器１は、ＤＶＤ
対応のカーナビゲーション装置やＴＶチューナ等で構成
され、オーディオ機器４は、ラジオチューナ、カセット
テーププレーヤ、ＣＤプレーヤ等で構成され、ビデオ機
器１から出力される映像信号を画像モニタ２に供給し、
このビデオ機器１から出力される音声信号と、オーディ
オ機器４から出力される音声信号を補正部３に入力して
いる。Further, there is a vehicle outside sound identification device constructed as shown in FIG. That is, it has a video device 1 and an audio device 4 installed in the vehicle, and the video device 1 is a DVD.
The audio device 4 is composed of a compatible car navigation device, TV tuner, etc., the audio device 4 is composed of a radio tuner, a cassette tape player, a CD player, etc., and supplies a video signal output from the video device 1 to the image monitor 2.
The audio signal output from the video device 1 and the audio signal output from the audio device 4 are input to the correction unit 3.

【０００６】補正部３の出力は、アンプ５によって増幅
された後にスピーカ６に供給され所定の放音がなされ
る。この場合の補正部３は、車外の音声を採取するため
に設けられたマイクロフォン７の出力を、特性／レベル
解析部８によって音声の周波数分布やレベルが分析さ
れ、車外音がサイレン鳴動等の必要音声であった場合に
は、「自動補正」でもってスピーカ６からの放音レベル
を下げたりミュートすることによって、当該の車外音を
聞き取り易くしている。The output of the correction unit 3 is amplified by the amplifier 5 and then supplied to the speaker 6 to emit a predetermined sound. In this case, the correction unit 3 analyzes the output of the microphone 7 provided for collecting the sound outside the vehicle by the characteristic / level analysis unit 8 for the frequency distribution and level of the sound, and the outside sound needs to be siren ringing or the like. In the case of voice, the level of sound emitted from the speaker 6 is lowered or muted by "automatic correction" so that the outside sound of the vehicle can be easily heard.

【０００７】また、補正部３にはユーザーインターフェ
イス９が接続され、「手動補正」でもって放音レベルを
調整したり周波数特性を補正することによって必要音声
を確実に聞けるようにし、車外音に確実に対応できるよ
うにしている。Further, a user interface 9 is connected to the correction unit 3 so that the necessary sound can be heard reliably by adjusting the sound emission level and the frequency characteristic by "manual correction" to ensure the sound outside the vehicle. I am able to deal with.

【０００８】[0008]

【発明が解決しようとする課題】従来の車外音の識別装
置は、「手動補正」でもって車外音を聞きやすくする場
合には、集中力を必要とする運転状況下では、放音の特
性を補正したり音声ミュートするためにハンドルから手
を離したり各種計器から目を離す等の行為によって運転
に集中できず、快適運転を行えなくなる虞があり、ま
た、手動操作しなければならないことが解っていても、
現実の運転状態を変更することができず、手が離せない
状況である場合にはこれらの補正を行うことができず、
車外音が必要音声であってもその情報を正確に得ること
が難しくなる。In the conventional vehicle exterior sound identification device, in order to make the exterior sound easier to hear by "manual correction", the characteristic of the sound emission is determined under the driving condition that requires concentration. It has been found that the driver may not be able to concentrate on driving due to actions such as removing his / her hand from the steering wheel or taking a look away from various instruments in order to correct or mute the sound, and it may not be possible to drive comfortably. Even if
If you can not change the actual driving state and you can not release your hand, you can not make these corrections,
It becomes difficult to obtain the information accurately even if the outside sound is a required sound.

【０００９】一方、車外音を自動検知して自動補正する
場合には、車外音を打ち消すような放音特性を与えたり
音量を補正しているために、ユーザーに取って当該の車
外音が必要音声であるか不必要音声であるかを判断する
ことなく無条件に自動補正してしまうので、車外音が運
転者に取って欲しい必要情報である場合には、前述の補
正によって逆に聞こえ難くなってしまい、必要とされる
車外音の情報を聞き逃してしまう虞がある。On the other hand, when the external sound is automatically detected and automatically corrected, the external sound is required for the user because the sound emission characteristic for canceling the external sound is given and the volume is corrected. It automatically corrects unconditionally without judging whether it is voice or unnecessary voice, so if the external sound is the necessary information that the driver wants to be taken, the above correction makes it difficult to hear in reverse. Therefore, there is a possibility that the user may miss the necessary information about the outside sound of the vehicle.

【００１０】そこで、本発明の目的は、運転者にとって
必要とされる車外音であるか不必要な車外音であるかの
判断を、運転者の手を煩わせずに自動で判定し、必要と
される車外音であった場合にはその内容を確実に音声お
よび／または映像でもって運転者に報知することができ
る車外音の識別装置を提供することにある。Therefore, an object of the present invention is to automatically determine whether the vehicle exterior sound is a vehicle exterior sound that is necessary or unnecessary and that the vehicle exterior sound is unnecessary and does not require the driver's hand. It is an object of the present invention to provide a vehicle exterior sound identification device capable of reliably notifying the driver of the content of the vehicle exterior sound with a sound and / or video when the vehicle exterior sound is generated.

【００１１】[0011]

【課題を解決するための手段】前記課題を解決するため
に、本発明による車外音の識別装置は、次に記載するよ
うな特徴的な構成を採用している。In order to solve the above problems, the vehicle exterior sound identification apparatus according to the present invention employs a characteristic configuration as described below.

【００１２】（１）車載型音響機器の音源出力信号に対
応して放音部から放音される主音声と車外音とが混在し
ている車内環境で音声を採取する採取手段と、緊急車両
のサイレン鳴動音やロードノイズ等の複数の音声パター
ンデータが格納されている音声パターン格納手段と、前
記採取手段で採取された採取音声データの内の前記主音
声に対応する成分を前記音響機器からの前記音源出力信
号に基づいて除去して得られた車外音の成分を得る車外
音抽出手段と、前記車外音抽出手段で抽出された車外音
成分と前記複数の音声パターンデータとを比較して、必
要音声であるか否かを判定する判定手段と、前記判定手
段によって必要音声であると判定されたときに、該必要
音声のデータに対応する音声および／または画像のメッ
セージを報知する報知手段とを具備する車外音の識別装
置。(1) Sampling means for sampling a sound in an in-vehicle environment in which a main sound emitted from a sound emission unit and a sound outside the vehicle are mixed in correspondence with a sound source output signal of an on-vehicle audio equipment, and an emergency vehicle. From the audio device, a voice pattern storage unit that stores a plurality of voice pattern data such as a siren ringing sound and road noise, and a component corresponding to the main voice in the collected voice data collected by the collection unit. The vehicle exterior sound extraction means for obtaining the vehicle exterior sound component obtained by removing the vehicle exterior sound component based on the sound source output signal, and comparing the vehicle exterior sound component extracted by the vehicle exterior sound extraction means with the plurality of voice pattern data. , A judgment means for judging whether or not the sound is necessary sound, and when the judgment means judges that the sound is necessary sound, a message of sound and / or image corresponding to the data of the necessary sound is notified. Identifying device outside the vehicle sounds and a knowledge unit.

【００１３】（２）車載型音響機器の音源出力信号に対
応して放音部から放音される主音声と車外音とが混在し
ている車内環境で音声を採取する採取手段と、緊急車両
のサイレン鳴動音やロードノイズ等の複数の音声パター
ンデータが格納されている音声パターン格納手段と、前
記採取手段で採取された採取音声データの内の前記主音
声に対応する成分を前記音響機器からの前記音源出力信
号に基づいて除去して得られた車外音の成分を得る車外
音抽出手段と、前記車外音抽出手段で抽出された車外音
成分と前記複数の音声パターンデータとを比較して、必
要音声であるか否かを判定する判定手段と、前記判定手
段によって必要音声であると判定されたときに、該必要
音声のデータに対応する音声および／または画像のメッ
セージを報知する報知手段と、前記音源出力信号に対応
する放音部からの放音特性を、前記車外音抽出手段で抽
出された車外音成分を聞き易くする音響特性に変換する
特性補正手段とを具備する車外音の識別装置。(2) Sampling means for sampling a sound in an in-vehicle environment in which a main sound emitted from a sound emitting unit and a sound outside the vehicle corresponding to a sound source output signal of an on-vehicle audio device are mixed, and an emergency vehicle. From the audio device, a voice pattern storage unit that stores a plurality of voice pattern data such as a siren ringing sound and road noise, and a component corresponding to the main voice in the collected voice data collected by the collection unit. The vehicle exterior sound extraction means for obtaining the vehicle exterior sound component obtained by removing the vehicle exterior sound component based on the sound source output signal, and comparing the vehicle exterior sound component extracted by the vehicle exterior sound extraction means with the plurality of voice pattern data. , A judgment means for judging whether or not the sound is necessary sound, and when the judgment means judges that the sound is necessary sound, a message of sound and / or image corresponding to the data of the necessary sound is notified. An exterior of the vehicle, which comprises a learning means and a characteristic correction means for converting a sound emission characteristic from the sound emission portion corresponding to the sound source output signal into an acoustic characteristic for making the exterior sound component extracted by the exterior sound extraction means easy to hear. Sound identification device.

【００１４】（３）前記（１）または（２）の音声パタ
ーン格納手段は、前記採取手段で採取された音声データ
の学習機能を有するように構成する車外音の識別装置。(3) The vehicle outside sound identification device, wherein the voice pattern storage means of (1) or (2) is configured to have a learning function of the voice data collected by the collection means.

【００１５】（４）前記（１）または（２）の採取手段
は、複数か所に設けられた音声検知部材で複数の採取デ
ータを得ると共に、該複数の採取データの相関を加味し
た相関データを得るように構成した車外音の識別装置。(4) The sampling means of the above (1) or (2) obtains a plurality of sampled data by voice detection members provided at a plurality of locations, and correlates data in which the correlation of the plurality of sampled data is added. A vehicle outside sound identification device configured to obtain.

【００１６】（５）前記（４）の採取手段は、車内と車
外のそれぞれに音声検知部材を設けるように構成する車
外音の識別装置。(5) A vehicle outside sound identification device in which the sampling means of the above (4) is provided with a voice detection member inside and outside the vehicle.

【００１７】（６）前記（１）ないし前記（５）のいず
れかの構成に、車外の画像の検出出力データと予め格納
された複数の画像データとを比較して車外の近傍状況を
音声および／または画像のメッセージを報知する車外環
境報知手段を付加して設けた車外音の識別装置。(6) In the configuration of any one of the above (1) to (5), the detected output data of the image outside the vehicle is compared with a plurality of image data stored in advance, and the situation near the outside of the vehicle is voiced. And / or an exterior sound identification device provided with an exterior environment informing means for informing a message of an image.

【００１８】[0018]

【発明の実施の形態】以下、本発明の実施の形態につい
て図１ないし図４を用いて詳細に説明する。先ず、本発
明の第１の実施の形態について図１を用いて説明する。
車内に設置されたビデオ機器１０とオーディオ機器１４
を有し、ビデオ機器１０は、ＤＶＤ対応のカーナビゲー
ション装置やＴＶチューナ等で構成され、オーディオ機
器１４は、ラジオチューナ、カセットテーププレーヤ、
ＣＤプレーヤ等で構成され、ビデオ機器１０から出力さ
れるビデオ信号SVは、割込回路１１を介して画像モニタ
１２に供給され、このビデオ機器１０から出力される音
声信号と、オーディオ機器１４から出力される音声信号
は、選択的にアンプ１３に入力されてその出力がオーデ
ィオ信号SAとして割込回路１５を介してスピーカ１６に
入力される。BEST MODE FOR CARRYING OUT THE INVENTION Embodiments of the present invention will be described in detail below with reference to FIGS. First, a first embodiment of the present invention will be described with reference to FIG.
Video device 10 and audio device 14 installed in the car
The video device 10 includes a DVD-compatible car navigation device, a TV tuner, and the like, and the audio device 14 includes a radio tuner, a cassette tape player, and the like.
The video signal SV which is composed of a CD player or the like and is output from the video device 10 is supplied to the image monitor 12 via the interrupt circuit 11, and is output from the audio signal output from the video device 10 and the audio device 14. The generated audio signal is selectively input to the amplifier 13, and its output is input to the speaker 16 via the interrupt circuit 15 as the audio signal SA.

【００１９】アンプ１３から出力されるオーディオ信号
SAは回路部ａに入力され、割込回路１１と割込回路１５
のそれぞれには回路部ｂからのビデオ割込信号Ｖと音声
割込信号Ａのそれぞれが入力される。この回路部ａは、
車内あるいは車上に設けられたマイクロフォン１７を有
し、その出力がアンプ１８で増幅され、差分回路２０の
片方の入力端に入力され、その他方の入力端にはアンプ
１３の出力にディレイ回路１９を介在した信号が入力さ
れる。このディレイ回路１９は、ビデオ機器１０または
オーディオ機器１４からのオーディオ信号SAとマイクロ
フォン１７からの信号の時間軸での整合を取るためのも
のである。Audio signal output from the amplifier 13
SA is input to the circuit section a, and the interrupt circuit 11 and the interrupt circuit 15
The video interrupt signal V and the audio interrupt signal A from the circuit section b are input to each of the above. This circuit part a is
It has a microphone 17 provided in or on the vehicle, the output of which is amplified by an amplifier 18 and input to one input end of a difference circuit 20, and the delay circuit 19 to the output of the amplifier 13 at the other input end. The signal intervening is input. The delay circuit 19 is for matching the audio signal SA from the video device 10 or the audio device 14 with the signal from the microphone 17 on the time axis.

【００２０】差分回路２０の出力は、音声認識部２１に
入力され、所定方式の適合する形態の音声パターンデー
タに変換され、回路部ａの出力として回路部ｂの一致度
判断部２２に入力され特定識別パラメータ記憶装置２３
から呼び出される音声パターンデータとの一致度が判断
されるThe output of the difference circuit 20 is input to the voice recognition unit 21, converted into voice pattern data of a form conforming to a predetermined method, and input to the coincidence determination unit 22 of the circuit unit b as the output of the circuit unit a. Specific identification parameter storage device 23
The degree of agreement with the voice pattern data called from

【００２１】そして、一致度判断部２２から出力される
「音声および／または画像のメッセージを報知」するた
めの報知信号は、画像変換部２４と音声変換部２５に入
力され、画像変換部２４によってビデオ割込信号Ｖに変
換されて割込回路１１に供給され、音声変換部２５によ
って音声割込信号Ａに変換されて割込回路１５に供給さ
れる。The notification signal for notifying the voice and / or image message output from the coincidence determination unit 22 is input to the image conversion unit 24 and the audio conversion unit 25, and the image conversion unit 24 outputs the notification signal. It is converted into a video interrupt signal V and supplied to the interrupt circuit 11, and converted into an audio interrupt signal A by the audio converter 25 and supplied to the interrupt circuit 15.

【００２２】また、ビデオ機器１０またはオーディオ機
器１４からの音声信号がアンプ１３と割込回路１５を介
してスピーカ１６から放音される主音声と車外音とが混
在している車内環境で音声を採取する採取手段が、マイ
クロフォン１７等で構成され、緊急車両のサイレン鳴動
音やロードノイズ等の複数の音声パターンデータが格納
されている音声パターン格納手段が特定識別パラメータ
記憶装置２３によって構成され、マイクロフォン１７で
採取された採取音声データの内の主音声に対応する成分
をオーディオ信号SA（音源出力信号）に基づいて差分回
路２０によって除去して得られた車外音の成分を得る車
外音抽出手段が、音声認識部２１によって構成される。Further, the audio signal from the video device 10 or the audio device 14 is mixed with the main sound emitted from the speaker 16 via the amplifier 13 and the interrupt circuit 15 and the sound outside the vehicle to produce a sound in the vehicle interior environment. The sampling means for sampling is constituted by the microphone 17 or the like, and the speech pattern storage means for storing plural speech pattern data such as siren ringing noise or road noise of the emergency vehicle is constituted by the specific identification parameter storage device 23, and the microphone. A vehicle exterior sound extraction unit that obtains a vehicle exterior sound component obtained by removing the component corresponding to the main voice in the sampled voice data sampled at 17 based on the audio signal SA (sound source output signal) by the difference circuit 20. , Voice recognition unit 21.

【００２３】車外音抽出手段で抽出された車外音成分と
特定識別パラメータ記憶装置２３の複数の音声パターン
データとを比較して、必要音声であるか否かを判定する
判定手段が一致度判断部２２で構成され、一致度判断部
２２によって必要音声であると判定されたときに、当該
のデータに対応する音声および画像のメッセージを報知
する報知手段が画像変換部２４と音声変換部２５によっ
て構成される。The determination means for comparing the exterior sound component extracted by the exterior sound extraction means with a plurality of voice pattern data in the specific identification parameter storage device 23 to determine whether or not the voice is a necessary voice is a coincidence degree determination part. The image conversion unit 24 and the audio conversion unit 25 constitute an informing unit configured to include an audio message and an image message corresponding to the data when the coincidence determination unit 22 determines that the audio is a necessary audio. To be done.

【００２４】従って、スピーカ１６からの主音声と車外
音が混在する車内環境の音がマイクロフォン１７によっ
て検出され、主音声の成分、即ち、スピーカ１６からの
放音成分（オーディオ信号SA）が差分回路２０によって
車外音から分離して抽出され、この成分の振幅、波長、
スペクトル、フレーム信号等々の情報を元に既存の音声
認識手段を用いて車外からの音声成分を解析し一致度判
断部２２によって特定識別パラメータ記憶装置２３のデ
ータとの一致度を求め、一致している場合には、車外音
がユーザーの欲している必要音声と判断する。Therefore, the sound of the in-vehicle environment in which the main sound from the speaker 16 and the sound outside the vehicle are mixed is detected by the microphone 17, and the component of the main sound, that is, the sound emission component (audio signal SA) from the speaker 16 is difference circuit. 20 is separated from the external sound and extracted, and the amplitude, wavelength, and
Based on the information such as the spectrum and the frame signal, the existing voice recognition means is used to analyze the voice component from the outside of the vehicle, and the coincidence degree determination unit 22 obtains the coincidence degree with the data of the specific identification parameter storage device 23, and the coincidence is obtained. If the sound is outside the vehicle, it is determined that the sound outside the vehicle is the required sound desired by the user.

【００２５】また、一致度判断部２２で一致していない
と判断された場合には車外音がユーザーにとって不要な
不必要音声であると認識し、この場合にはビデオ割込信
号Ｖと音声割込信号Ａを発生させないので別段の報知は
行わず、一致度判断部２２で必要音声であると判定され
た場合には、その情報に基づいてビデオ割込信号Ｖと音
声割込信号Ａが生成されることによってユーザーに対し
て音声と画像の両方による報知が行われる。If the matching degree judging unit 22 judges that they do not match, the outside sound is recognized as unnecessary sound unnecessary for the user. In this case, the video interrupt signal V and the sound interrupt are recognized. Since the interruption signal A is not generated, no further notification is given, and when the coincidence determination unit 22 determines that the voice is necessary voice, the video interruption signal V and the voice interruption signal A are generated based on the information. As a result, the user is notified by both voice and image.

【００２６】車外音の中から抽出された音声が緊急車両
のサイレンであった場合には、「緊急車両が近付いてい
ます」という音声と、ビデオ機器１０からのビデオ信号
SVによって画像モニタ１２に表示されているカーナビゲ
ーションの表示に「緊急車両接近中！」という文字画像
を割り込ませ、または本来の画像を消した状態で割り込
ませることによって音声と画像の両方による報知を行う
ことができ、この報知に基づいてユーザーがサイレン等
の車外音に確実な運転対応、例えば進路を緊急車両に譲
ったり減速や一時停止等の対応を行うことができる。When the voice extracted from the outside sound is the siren of the emergency vehicle, the voice "the emergency vehicle is approaching" and the video signal from the video device 10
The car navigation display displayed on the image monitor 12 by the SV is interrupted by a character image "Emergency vehicle is approaching!", Or by interrupting with the original image erased to notify by both voice and image. Based on this notification, the user can take a reliable driving response to the outside sound of the siren or the like, for example, give up the route to the emergency vehicle, decelerate or temporarily stop.

【００２７】以上のような第１の形態は、車外音の内容
がユーザーにとって必要なものであった場合に、ビデオ
機器１０とオーディオ機器１４による画像と音声に割り
込みを掛けてその旨を報知するもので、この音声報知の
間には本来のオーディオ機器１４の出力がそのままの状
態となる例であるが、車外音の必要／不必要に対応して
音声報知される間にオーディオ信号SAの出力を補正する
例を第２の実施の形態として次に図２を用いて説明す
る。In the first mode as described above, when the content of the vehicle exterior sound is necessary for the user, the image and the sound by the video device 10 and the audio device 14 are interrupted to notify that effect. In this example, the output of the original audio device 14 remains unchanged during the voice notification, but the output of the audio signal SA is output during the voice notification in response to the necessity / unnecessity of the external sound. An example of correcting the above will be described as a second embodiment with reference to FIG.

【００２８】この第２の実施の形態は、前述の第１の実
施の形態による車外音の識別装置の概略回路を表す図１
に示す構成の一部を変更したもので、その変更点は、図
１に示す回路部ｂを除去し、その代わりに図２に示す回
路部ｃを設けたものである。また、アンプ１３の出力端
と割込回路１５の間に特性補正部２６が新たに介挿され
ている。The second embodiment is a schematic circuit diagram of a vehicle outside sound identification apparatus according to the first embodiment described above with reference to FIG.
A part of the configuration shown in FIG. 2 is modified. The modification is that the circuit part b shown in FIG. 1 is removed and the circuit part c shown in FIG. 2 is provided instead. Further, a characteristic correction unit 26 is newly inserted between the output end of the amplifier 13 and the interrupt circuit 15.

【００２９】特性補正部２６は、ビデオ機器１０または
オーディオ機器１４からの音源出力信号に対応するスピ
ーカ１６からの放音特性を、回路部ａで抽出された車外
音成分を実質的に打ち消すような音響特性に変換する特
性補正手段の要部を構成する。The characteristic correction unit 26 substantially cancels the sound emission characteristic from the speaker 16 corresponding to the sound source output signal from the video device 10 or the audio device 14 so as to substantially cancel the outside vehicle sound component extracted by the circuit unit a. It constitutes a main part of a characteristic correction means for converting into acoustic characteristics.

【００３０】音声認識部２１の出力端が一致度判断部２
７の入力端に接続され、この一致度判断部２７によって
特定識別パラメータ記憶装置２８の格納データと音声認
識部２１の出力データが比較され、その一致度が判断さ
れる。The output end of the voice recognition unit 21 is the coincidence determination unit 2
7 is connected to the input end, and the coincidence determination unit 27 compares the stored data of the specific identification parameter storage device 28 and the output data of the voice recognition unit 21 to determine the coincidence.

【００３１】車外音抽出手段（回路部ａ）で抽出された
車外音成分と特定識別パラメータ記憶装置２８の複数の
音声パターンデータとを比較して、必要音声であるか否
かを判定する判定手段が一致度判断部２７で構成され、
一致度判断部２７によって必要音声であると判定された
ときに、当該のデータに対応する音声および画像のメッ
セージを報知する報知手段が画像変換部２９と音声変換
部３０によって構成される。A judging means for judging whether or not the sound is a necessary sound by comparing the outside sound component extracted by the outside sound extracting means (circuit part a) with a plurality of sound pattern data in the specific identification parameter storage device 28. Is configured by the coincidence determination unit 27,
The image conversion unit 29 and the audio conversion unit 30 constitute an informing unit that notifies an audio and image message corresponding to the data when the coincidence determination unit 27 determines that the audio is a required audio.

【００３２】また、一致度判断部２７によって必要音声
であると判定されたときには、その出力が特性・レベル
解析部３１に入力され、最終的にスピーカ１６から放音
される音声の特性が、車外音を良く聞けるような特性と
するに適正な解析が行われ、不必要音声であると判定さ
れたときには、その出力が特性・レベル解析部３１に入
力され、最終的にスピーカ１６から放音される音声の特
性が、車外音を打ち消すような特性とするに適正な解析
が行われ、その出力で特性補正部２６が制御される。When the matching degree judging section 27 judges that the sound is a necessary sound, the output thereof is inputted to the characteristic / level analyzing section 31, and finally the characteristic of the sound emitted from the speaker 16 is outside the vehicle. When proper analysis is performed to obtain a characteristic that allows the sound to be heard well, and when it is determined that the sound is unnecessary, its output is input to the characteristic / level analysis unit 31, and finally the speaker 16 outputs the sound. An appropriate analysis is performed so that the characteristic of the voice that is generated is a characteristic that cancels the external sound, and the characteristic correction unit 26 is controlled by the output.

【００３３】従って、スピーカ１６からの主音声と車外
音が混在する車内環境の音がマイクロフォン１７によっ
て検出され、主音声の成分、即ち、スピーカ１６からの
放音成分（オーディオ信号SA）が差分回路２０によって
車外音から分離して抽出され、この成分の振幅、波長、
スペクトル、フレーム信号等々の情報を元に既存の音声
認識手段である音声認識部２１を用いて外来からの音声
成分を解析し一致度判断部２７によって特定識別パラメ
ータ記憶装置２８のデータとの一致度を求め、一致して
いる場合には、車外音がユーザーの欲している必要音声
と判断する。Therefore, the sound of the in-vehicle environment in which the main sound from the speaker 16 and the sound outside the vehicle are mixed is detected by the microphone 17, and the component of the main sound, that is, the sound emission component (audio signal SA) from the speaker 16 is difference circuit. 20 is separated from the external sound and extracted, and the amplitude, wavelength, and
Based on the information such as the spectrum and the frame signal, the voice recognition unit 21 which is an existing voice recognition means is used to analyze the voice component from the outside, and the coincidence degree determination unit 27 causes the coincidence degree with the data of the specific identification parameter storage device 28 to be determined. If they match, it is determined that the external sound is the necessary voice desired by the user.

【００３４】また、一致度判断部２７で一致していない
と判断された場合には車外音がユーザーにとって不要な
不必要音声であると認識し、この場合にはビデオ割込信
号Ｖと音声割込信号Ａを発生させないので別段の報知は
行わず、車外音を打ち消すような放音特性にされる。ま
た、一致度判断部２７で必要音声であると判定された場
合には、その情報に基づいてビデオ割込信号Ｖと音声割
込信号Ａが生成されて割込回路１１と割込回路１５に割
込入力されることによってユーザーに対して音声と画像
の両方による報知が行われる。If the matching degree judging section 27 judges that they do not match, the outside sound is recognized as unnecessary sound unnecessary for the user. In this case, the video interrupt signal V and the sound interrupt are recognized. Since the built-in signal A is not generated, no special notification is given, and the sound emission characteristic is set to cancel the external sound. If the coincidence determination unit 27 determines that the voice is a required voice, the video interrupt signal V and the voice interrupt signal A are generated based on the information and the interrupt circuit 11 and the interrupt circuit 15 are generated. By the interrupt input, the user is notified by both voice and image.

【００３５】このような報知と同時に、特性・レベル解
析部３１で制御される特性補正部２６によって、最終的
にスピーカ１６から放音される音声が車外音を良く聞け
るような特性とされる。Simultaneously with such notification, the characteristic correction unit 26 controlled by the characteristic / level analysis unit 31 makes the sound finally emitted from the speaker 16 a characteristic that allows the outside sound to be heard well.

【００３６】従って、車外音の中から抽出された音声が
緊急車両のサイレンであった場合には、「緊急車両が近
付いています」という音声と、ビデオ機器１０からのビ
デオ信号SVによって画像モニタ１２に表示されているカ
ーナビゲーションの表示に「緊急車両接近中！」という
文字画像を割り込ませ、または本来の画像を消した状態
で割り込ませることによって音声と画像の両方による報
知を行うことができ、この報知に基づいてユーザーがサ
イレン等の車外音に対する確実な運転対応、例えば進路
を緊急車両に譲ったり、減速や一時停止等の対応を行う
ことができ、これと同時にスピーカ１６から放音される
音声が車外音を良く聞けるような特性とされるので、車
外音を明瞭に聞き取ることができる。Therefore, when the sound extracted from the sound outside the vehicle is the siren of the emergency vehicle, the sound "the emergency vehicle is approaching" and the video signal SV from the video device 10 cause the image monitor 12 to display. It is possible to notify by both voice and image by interrupting the text image "Emergency vehicle is approaching!" To the car navigation display displayed in, or by interrupting with the original image erased, Based on this notification, the user can take a reliable driving response to the outside sound of the siren or the like, for example, give the course to an emergency vehicle, decelerate or temporarily stop, and at the same time, emit sound from the speaker 16. Since the sound has a characteristic that the outside sound can be heard well, the outside sound can be clearly heard.

【００３７】以上のような第１または第２の実施の形態
に用いられている特定識別パラメータ記憶装置２３また
は特定識別パラメータ記憶装置２８は、緊急車両のサイ
レン鳴動音やロードノイズ等の複数の音声パターンデー
タが格納されている音声パターン格納手段を構成してい
るが、当該の音声パターン格納手段を、採取手段で採取
された音声データの学習機能を有するように構成しても
よく、また、図１または図２に示す回路部ａによって構
成される採取手段は、車内の１か所に設けられたマイク
ロフォン１７等で構成されているが、複数か所に設けら
れた音声検知部材（マイクロフォン）で複数の採取デー
タを得ると共に、該複数の採取データの相関を加味した
相関データを得るように構成してもよい。The specific identification parameter storage device 23 or the specific identification parameter storage device 28 used in the first or second embodiment as described above is provided with a plurality of voices such as siren ringing noise and road noise of an emergency vehicle. Although the voice pattern storage means for storing the pattern data is configured, the voice pattern storage means may be configured to have a learning function of the voice data sampled by the sampling means. The sampling means constituted by the circuit section a shown in FIG. 1 or FIG. 2 is composed of a microphone 17 or the like provided at one place in the vehicle, but is a voice detection member (microphone) provided at a plurality of places. It may be configured to obtain a plurality of collected data and obtain correlation data in which the correlation of the plurality of collected data is added.

【００３８】この形態を第３の実施の形態として図３を
用いて次に説明する。図３において第１回路部ａ１と第
２回路部ａ２のそれぞれは回路部ａ（図１または図２参
照）におけると同様のマイクロフォン１７、アンプ１
８、ディレイ回路１９、差分回路２０によって構成さ
れ、第１回路部ａ１と第２回路部ａ２のそれぞれのマイ
クロフォン１７の設置箇所を車両の前部と後部のそれぞ
れとし、差分回路２０からの２系統出力のそれぞれを音
声認識部３２に入力し、車外からの音声成分の振幅、波
長、スペクトル、フレーム信号等々の情報を元にして車
外からの音声成分を「車外音の方向まで加味した」状態
で解析し、次段の一致度／方向判断部３３によって特定
識別パラメータ学習記憶装置３４のデータとの一致度を
求め、一致している場合には、車外音がユーザーの欲し
ている必要音声と判断する。This embodiment will be described below as a third embodiment with reference to FIG. In FIG. 3, each of the first circuit portion a1 and the second circuit portion a2 has the same microphone 17 and amplifier 1 as in the circuit portion a (see FIG. 1 or 2).
8, a delay circuit 19 and a difference circuit 20. The microphones 17 of the first circuit portion a1 and the second circuit portion a2 are installed at the front portion and the rear portion of the vehicle, respectively. Each of the outputs is input to the voice recognition unit 32, and the voice component from the outside of the vehicle is “incorporated into the direction of the outside voice” based on the information such as the amplitude, wavelength, spectrum, and frame signal of the voice component from the outside of the vehicle. The degree of coincidence with the data of the specific identification parameter learning storage device 34 is analyzed by the degree of coincidence / direction determination unit 33 in the next stage, and if they coincide, it is determined that the outside sound is a necessary voice desired by the user. To do.

【００３９】特定識別パラメータ学習記憶装置３４は、
判断させる複数の音データが学習機能を有して格納され
たもので、例えば線路を横断しようとしたときに、車外
音、即ち踏切の警報音を注意して聞くことになる。ここ
で、踏切音を予め記憶しておき、第１回路部ａ１または
第２回路部ａ２によって抽出された車外音の成分によっ
て学習させることによってより確実にかつ現実音に即し
た一致度判定を行なわせることができる。サイレン音や
踏切音のみならずこれ以外の音、例えば電話の着信音を
学習させることもでき、様々な電話着信音やメロディで
あっても認識させることができる。The specific identification parameter learning storage device 34 is
A plurality of sound data to be judged are stored with a learning function, and when an attempt is made to cross a railroad track, for example, the outside sound of the vehicle, that is, the warning sound of the railroad crossing, will be listened carefully. Here, the level crossing sound is stored in advance and learned by the component of the vehicle exterior sound extracted by the first circuit unit a1 or the second circuit unit a2, so that the degree of matching can be determined more reliably and in accordance with the actual sound. Can be made. It is possible to learn not only the siren sound and the leveling sound but also other sounds, for example, the ringing tone of the telephone, and it is possible to recognize various telephone ringing tones and melodies.

【００４０】従って、スピーカ１６からの主音声と車外
音が混在する車内環境の音が２つのマイクロフォン１７
によって検出され、主音声の成分、即ち、スピーカ１６
からの放音成分（オーディオ信号SA）が差分回路２０に
よって車外音から分離して抽出され、この２系統の信号
成分の振幅、波長、スペクトル、フレーム信号等々の情
報を元に既存の音声認識手段である音声認識部３２を用
いて外来からの音声成分を解析し、一致度／方向判断部
３３によって特定識別パラメータ学習記憶装置３４から
取り出される学習機能を有するデータとの一致度を音の
方向までも加味した状態で求め、両者が一致している場
合には、車外音がユーザーの欲している必要音声と判断
する。Therefore, the sound of the in-vehicle environment in which the main sound from the speaker 16 and the sound outside the vehicle are mixed is the two microphones 17.
Detected by the main voice component, that is, the speaker 16
The sound emission component (audio signal SA) from the vehicle is separated and extracted from the vehicle exterior sound by the difference circuit 20, and the existing voice recognition means is based on the information of the amplitude, wavelength, spectrum, frame signal, etc. of the signal components of these two systems. The voice component from the outside is analyzed by using the voice recognition unit 32, and the matching degree with the data having the learning function extracted from the specific identification parameter learning storage device 34 by the matching degree / direction determination unit 33 is determined in the direction of the sound. The sound outside the vehicle is determined to be the necessary voice desired by the user when both are in agreement.

【００４１】また、一致度／方向判断部３３で一致して
いないと判断された場合には車外音がユーザーにとって
不要な不必要音声であると認識し、この場合には画像変
換部３５と音声変換部３６を介してビデオ割込信号Ｖと
音声割込信号Ａを発生させないので別段の報知は行わな
い。また、一致度／方向判断部３３で必要音声であると
判定された場合には、その情報に基づいてビデオ割込信
号Ｖと音声割込信号Ａが生成されて割込回路１１と割込
回路１５に割込入力されることによってユーザーに対し
て音声と画像の両方による報知が行われる。If the coincidence / direction determining unit 33 determines that they do not match, the outside sound is recognized as unnecessary sound unnecessary for the user. In this case, the image converting unit 35 and the sound are recognized. Since the video interrupt signal V and the audio interrupt signal A are not generated via the conversion unit 36, no special notification is given. If the coincidence / direction determination unit 33 determines that the voice is required voice, the video interrupt signal V and the voice interrupt signal A are generated based on the information, and the interrupt circuit 11 and the interrupt circuit are generated. The interrupt input to 15 notifies the user by both voice and image.

【００４２】従って、車外音の中から抽出された音声が
緊急車両のサイレンであった場合には、「緊急車両が後
方から近付いています」という音声と、ビデオ機器１０
からのビデオ信号SVによって画像モニタ１２に表示され
ているカーナビゲーションの表示に「後方から緊急車両
接近中！」という文字画像を割り込ませ、または本来の
画像を消した状態で割り込ませることによって音声と画
像の両方による報知を行うことができ、この報知に基づ
いてユーザーがサイレン等の車外音に対する確実な運転
対応、例えば進路を緊急車両に譲ったり減速や一時停止
等の対応を行うことができ、しかも車外音の方向、この
場合には後方であるが前方や側方からという音声と画像
の両方による報知も行うこととができる。Therefore, when the sound extracted from the vehicle exterior sound is the siren of the emergency vehicle, the sound "the emergency vehicle is approaching from behind" and the video device 10
A video signal SV from the car navigation display displayed on the image monitor 12 is interrupted by the text image "Emergency vehicle approaching from behind!" It is possible to perform notification by both of the images, and based on this notification, the user can perform reliable driving response to external noise such as siren, for example, transfer the route to an emergency vehicle or respond to deceleration or temporary stop, In addition, it is possible to notify by the direction of the sound outside the vehicle, in this case, the rear, but from the front or the side by both the voice and the image.

【００４３】以上のような第１ないし第３の実施の形態
による車外音の識別装置は、車外音を検出し必要音声で
あった場合に適宜の音声と画像でもって報知する例であ
るが、このような装置に、車外の画像の検出出力データ
と予め格納された複数の画像データとを比較して車外の
近傍状況を音声および／または画像のメッセージを報知
する車外環境報知手段を付加して設けてもよく、これを
第４の実施の形態として図４を用いて説明する。The vehicle exterior sound identification apparatus according to the first to third embodiments as described above is an example of detecting the vehicle exterior sound and notifying the vehicle with appropriate voice and image when the required voice is detected. To such a device, an outside-vehicle environment notifying means for comparing the detected output data of the outside-vehicle image with a plurality of pre-stored image data and notifying the vicinity situation outside the vehicle of a voice and / or image message is added. It may be provided, which will be described as a fourth embodiment with reference to FIG.

【００４４】なお、図４に示すマイクロホン４４と音声
認識処理部４５は、前述の第１ないし第３のいずれかの
実施の形態における「車外音の識別装置」と同様の構成
と動作を行うものであるのでその説明は省略し、異なる
部分について説明する。本形態で付加された部分は回路
部ｅであって、車外の画像を検出する赤外線カメラ３７
の出力がアンプ３８で増幅されて画像認識部３９を介し
て一致度判断部４０に入力される。この一致度判断部４
０は、検出された画像出力データと特定識別パラメータ
記憶装置４１に予め格納された複数の画像データとを比
較して車外の近傍状況の一致度を判断するものである。The microphone 44 and the voice recognition processing section 45 shown in FIG. 4 have the same configuration and operation as the "vehicle outside sound identification device" in any of the first to third embodiments. Therefore, the description thereof will be omitted and only different parts will be described. The portion added in this embodiment is the circuit portion e, which is an infrared camera 37 for detecting an image outside the vehicle.
Is amplified by the amplifier 38 and input to the coincidence determination unit 40 via the image recognition unit 39. This coincidence determination unit 4
0 is for comparing the detected image output data with a plurality of image data stored in advance in the specific identification parameter storage device 41 to determine the degree of coincidence of the proximity situation outside the vehicle.

【００４５】例えば車両近傍に別車両が接近しているこ
とや前方に塀等の障害物がある等の状況を判断すること
ができ、一致度判断部４０によって報知が必要と判断さ
れたときには、画像変換部４２と音声変換部４３に報知
データが出力され、画像変換部４２と音声変換部４３の
それぞれによって生成されたビデオ割込信号V1と音声割
込信号A1が生成されて割込回路１１と割込回路１５に入
力され車両の近傍状況が音声と画像で報知される。For example, it is possible to judge the situation where another vehicle is approaching in the vicinity of the vehicle, there is an obstacle such as a fence in the front, and when the coincidence judging section 40 judges that the notification is necessary, The notification data is output to the image conversion unit 42 and the audio conversion unit 43, and the video interrupt signal V1 and the audio interrupt signal A1 generated by the image conversion unit 42 and the audio conversion unit 43 are generated to generate the interrupt circuit 11. Is input to the interrupt circuit 15, and the situation near the vehicle is notified by voice and image.

【００４６】従って、前述の形態におけると同様にして
音声と画像による報知がなされると共に、赤外線カメラ
３７で得られた画像が接近車両であった場合には、「車
両が接近しています」という音声が割込回路１５を介し
てスピーカ１６から放音され、これと同時に、「車両接
近中！」という文字画像が割込回路１１を介して画像モ
ニタ１２に表示される。Therefore, in the same manner as in the above-mentioned embodiment, the notification by the voice and the image is given, and when the image obtained by the infrared camera 37 is the approaching vehicle, it is said that the vehicle is approaching. The sound is emitted from the speaker 16 via the interrupt circuit 15, and at the same time, a character image "Vehicle approaching!" Is displayed on the image monitor 12 via the interrupt circuit 11.

【００４７】なお、前述の４つの実施の形態において
は、「車外音」がサイレンや踏切警報音等の、車両の外
部から発せられた音であるが、本明細書に記載の「車外
音」とは、「ビデオ機器１０やオーディオ機器１４から
の出力によって放音されるスピーカ１６」以外の音を総
称していて、例えば、車内電話の音、車両に搭乗してい
る乳幼児の泣き声等を意味する。従って、後部座席で寝
ている乳幼児が泣いたことを音声認識し、その内容を運
転者に報知することもできる。In the four embodiments described above, the "outside vehicle sound" is a sound emitted from the outside of the vehicle, such as a siren or a railroad crossing warning sound. The sound is a generic term for sounds other than the “speaker 16 that is emitted by the output from the video device 10 or the audio device 14,” and means, for example, the sound of an in-car telephone, the crying sound of an infant on board the vehicle, and the like. To do. Therefore, it is possible to voice-recognize that the infant sleeping in the back seat cries and to inform the driver of the content.

【００４８】また、画像認識の結果に基づいて行われる
報知は、音声と画像の両方、音声のみ、画像のみのいず
れであってもよいことは勿論であり、報知される音声と
画像の態様は全くの任意である。Further, it goes without saying that the notification made based on the result of the image recognition may be both voice and image, only voice, or only image. Totally optional.

【００４９】[0049]

【発明の効果】以上の説明で明らかなように、本発明に
よる車外音の識別装置は、運転者にとって必要とされる
車外音であるか不必要な車外音であるかの判断を、運転
者の手を煩わせずに自動で判定し、緊急車両のサイレン
や警告音等の必要とされる車外音であった場合にはその
内容を確実に音声および／または映像でもって運転者に
報知することができる車外音の識別装置を提供すること
ができ、重要な車外音を聞き逃すことが防止され、当該
情報に対して安全に対応することができる。As is clear from the above description, the vehicle exterior sound identification apparatus according to the present invention determines whether the vehicle exterior sound is a vehicle exterior sound that is necessary or unnecessary for the driver. The automatic judgment is performed without bothering the user, and when the required external sound such as the siren of an emergency vehicle or a warning sound, the content is surely notified to the driver by voice and / or video. It is possible to provide a device for identifying a vehicle exterior sound that can be heard, prevent an important vehicle exterior sound from being missed, and safely handle the information.

【図面の簡単な説明】[Brief description of drawings]

【図１】本発明の第１の実施の形態による車外音の識別
装置の概略回路構成を示すブロック回路図である。FIG. 1 is a block circuit diagram showing a schematic circuit configuration of a vehicle outside sound identification apparatus according to a first embodiment of the present invention.

【図２】本発明の第２の実施の形態による車外音の識別
装置の概略回路構成を示すブロック回路図である。FIG. 2 is a block circuit diagram showing a schematic circuit configuration of a vehicle exterior sound identification apparatus according to a second embodiment of the present invention.

【図３】本発明の第３の実施の形態による車外音の識別
装置の概略回路構成を示すブロック回路図である。FIG. 3 is a block circuit diagram showing a schematic circuit configuration of a vehicle exterior sound identification apparatus according to a third embodiment of the present invention.

【図４】本発明の第４の実施の形態による車外音の識別
装置の概略回路構成を示すブロック回路図である。FIG. 4 is a block circuit diagram showing a schematic circuit configuration of a vehicle exterior sound identification apparatus according to a fourth embodiment of the present invention.

【図５】従来の車外音の識別装置の一例の概略回路構成
を示すブロック回路図である。FIG. 5 is a block circuit diagram showing a schematic circuit configuration of an example of a conventional vehicle exterior sound identification device.

【符号の説明】[Explanation of symbols]

１０ビデオ機器１１，１５割込回路１２画像モニタ１３，１８アンプ１４オーディオ機器１６スピーカ１７マイクロフォン１９ディレイ回路２０差分回路２１音声認識部２２一致度判断部２３特定識別パラメータ記憶装置２４画像変換部２５音声変換部 10 Video equipment 11,15 Interrupt circuit 12 image monitor 13,18 amp 14 audio equipment 16 speakers 17 microphone 19 Delay circuit 20 Difference circuit 21 Speech recognition unit 22 Consistency judgment unit 23 Specific identification parameter storage device 24 Image converter 25 voice converter

フロントページの続き (51)Int.Cl.⁷ 識別記号ＦＩテーマコート゛(参考）Ｇ１０Ｌ 21/02 Continuation of front page (51) Int.Cl. ⁷ Identification code FI theme code (reference) G10L 21/02

Claims

【特許請求の範囲】[Claims]

【請求項１】車載型音響機器の音源出力信号に対応して
放音部から放音される主音声と車外音とが混在している
車内環境で音声を採取する採取手段と、緊急車両のサイレン鳴動音やロードノイズ等の複数の音
声パターンデータが格納されている音声パターン格納手
段と、前記採取手段で採取された採取音声データの内の前記主
音声に対応する成分を前記音響機器からの前記音源出力
信号に基づいて除去して得られた車外音の成分を得る車
外音抽出手段と、前記車外音抽出手段で抽出された車外音成分と前記複数
の音声パターンデータとを比較して、必要音声であるか
否かを判定する判定手段と、前記判定手段によって必要音声であると判定されたとき
に、該必要音声のデータに対応する音声および／または
画像のメッセージを報知する報知手段とを具備すること
を特徴とする車外音の識別装置。1. A sampling means for sampling a sound in an in-vehicle environment in which a main sound emitted from a sound emitting portion and a sound outside the vehicle corresponding to a sound source output signal of an on-vehicle audio device are mixed, and an emergency vehicle. A voice pattern storage unit that stores a plurality of voice pattern data such as a siren ringing sound or road noise, and a component corresponding to the main voice in the sampled voice data sampled by the sampling unit from the acoustic device. Exterior sound extraction means for obtaining a vehicle exterior sound component obtained by removing based on the sound source output signal, comparing the vehicle exterior sound component extracted by the vehicle exterior sound extraction means and the plurality of voice pattern data, Determining means for determining whether or not the voice is necessary voice; and a notification for notifying a voice and / or image message corresponding to the data of the voice when the voice is required voice by the determining means. A vehicle exterior sound identification device comprising:

【請求項２】車載型音響機器の音源出力信号に対応して
放音部から放音される主音声と車外外音声とが混在して
いる車内環境で音声を採取する採取手段と、緊急車両のサイレン鳴動音やロードノイズ等の複数の音
声パターンデータが格納されている音声パターン格納手
段と、前記採取手段で採取された採取音声データの内の前記主
音声に対応する成分を前記音響機器からの前記音源出力
信号に基づいて除去して得られた車外音の成分を得る車
外音抽出手段と、前記車外音抽出手段で抽出された車外音成分と前記複数
の音声パターンデータとを比較して、必要音声であるか
否かを判定する判定手段と、前記判定手段によって必要音声であると判定されたとき
に、該必要音声のデータに対応する音声および／または
画像のメッセージを報知する報知手段と、前記音源出力信号に対応する放音部からの放音特性を、
前記車外音抽出手段で抽出された車外音成分を聞き易く
する音響特性に変換する特性補正手段とを具備すること
を特徴とする車外音の識別装置。2. A sampling means for sampling a sound in an in-vehicle environment in which a main sound emitted from a sound emitting section and a sound outside the vehicle are mixed in response to a sound source output signal of an on-vehicle audio device, and an emergency vehicle. A voice pattern storing means for storing a plurality of voice pattern data such as a siren ringing sound or road noise, and a component corresponding to the main voice in the collected voice data collected by the collecting means from the acoustic device. The vehicle exterior sound extraction means for obtaining the vehicle exterior sound component obtained by removing the vehicle exterior sound component based on the sound source output signal, and comparing the vehicle exterior sound component extracted by the vehicle exterior sound extraction means with the plurality of voice pattern data. A determination unit for determining whether or not the voice is a required voice, and when the determination unit determines that the voice is the required voice, a voice and / or image message corresponding to the data of the required voice is notified. An informing unit, and a sound emission characteristic from the sound emission unit corresponding to the sound source output signal,
An exterior sound identification device, comprising: a characteristic correction means for converting the exterior sound component extracted by the exterior sound extraction means into an acoustic characteristic that makes it easier to hear.

【請求項３】前記音声パターン格納手段は、前記採取手
段で採取された音声データの学習機能を有するように構
成することを特徴とする請求項１または請求項２に記載
の車外音の識別装置。3. The vehicle exterior sound identification device according to claim 1, wherein the voice pattern storage means is configured to have a learning function of the voice data collected by the collection means. .

【請求項４】前記採取手段は、複数か所に設けられた音
声検知部材で複数の採取データを得ると共に、該複数の
採取データの相関を加味した相関データを得るように構
成したことを特徴とする請求項１または請求項２に記載
の車外音の識別装置。4. The collecting means is configured to obtain a plurality of collected data by voice detection members provided at a plurality of locations and to obtain correlation data in which a correlation of the plurality of collected data is taken into consideration. The vehicle exterior sound identification device according to claim 1 or 2.

【請求項５】前記採取手段は、車内と車外のそれぞれに
音声検知部材を設けるように構成することを特徴とする
請求項４に記載の車外音の識別装置。5. The vehicle exterior sound identification device according to claim 4, wherein the sampling means is provided with voice detection members inside and outside the vehicle.

【請求項６】車外の画像の検出出力データと予め格納さ
れた複数の画像データとを比較して車外の近傍状況を音
声および／または画像のメッセージを報知する車外環境
報知手段を付加して設けることを特徴とする請求項１な
いし請求項５のいずれかに記載の車外音の識別装置。6. A vehicle outside environment informing means is additionally provided for comparing detected output data of an image outside the vehicle with a plurality of image data stored in advance to inform the vicinity of the vehicle outside by a voice and / or image message. The vehicle outside sound identification device according to any one of claims 1 to 5.