JP2007298592A - Speech processing apparatus - Google Patents
Speech processing apparatus Download PDFInfo
- Publication number
- JP2007298592A JP2007298592A JP2006124780A JP2006124780A JP2007298592A JP 2007298592 A JP2007298592 A JP 2007298592A JP 2006124780 A JP2006124780 A JP 2006124780A JP 2006124780 A JP2006124780 A JP 2006124780A JP 2007298592 A JP2007298592 A JP 2007298592A
- Authority
- JP
- Japan
- Prior art keywords
- state
- speech
- unit
- vehicle
- input means
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
Images
Abstract
Description
本発明は、音声認識に基づいて車両設備における各種操作を行なう際に用いて好適の、音声処理装置に
関するものである。
The present invention relates to a speech processing apparatus suitable for performing various operations in vehicle equipment based on speech recognition.
近年、車両設備について操作を行なう場合に、操作者が発した音声を、操作についての言語命令として認識するとともに、認識した言語命令に応じた操作がなされるようにして、利用者の操作作業を削減するシステムについての開発が進められている。
たとえば、以下の特許文献１においては、マイクロフォンからの音声信号をもとにドアの施錠・解錠等のコマンドを認識して車両制御を行なう技術について記載されている。そして、この特許文献１にて記載された技術においては、利用者の使い勝手のため、車室内・外にそれぞれ１又は複数のマイクロフォンをそなえることで、使用者が車両の外からでも中からでも音声を入力できるようにしている。
For example, Patent Document 1 below describes a technique for performing vehicle control by recognizing a command for locking / unlocking a door based on an audio signal from a microphone. In the technique described in Patent Document 1, for the convenience of the user, by providing one or a plurality of microphones inside and outside the vehicle, the user can hear voice from outside or inside the vehicle. Can be entered.
しかしながら、上述の特許文献１に記載された技術においては、複数のマイクロフォンを同時使用する場合には、利用者がいる位置からの集音効率（又は集音の感度）の良好な位置に搭載されたマイクロフォンだけでなく、利用者の位置からの集音効率の比較的低い位置に搭載されたマイクロフォンからの音声信号を入力されるようになる。この場合においては音声認識を行なう機能部においては、入力される音声信号の信号対雑音比（Ｓ／Ｎ比）を向上させることに支障を来たし、結果として音声信号の認識性能の向上に支障を来すことになるという課題がある。 However, in the technique described in Patent Document 1 described above, when a plurality of microphones are used at the same time, the microphone is mounted at a position with good sound collection efficiency (or sound collection sensitivity) from the position where the user is present. In addition to the microphone, the sound signal from the microphone mounted on the position where the sound collection efficiency from the user's position is relatively low is input. In this case, the function unit that performs speech recognition has a problem in improving the signal-to-noise ratio (S / N ratio) of the input speech signal, and as a result, it has a problem in improving the speech signal recognition performance. There is a problem of coming.
また、この特許文献１には、スイッチ操作によりマイクロフォンを動作させる技術についても記載されているが、音声入力手段自身の動作のために操作が必要となるものであり、利用者の操作作業を増やしてしまうという課題もある。
本発明は、このような課題に鑑み創案されたもので、利用者の操作作業を介在させずに、複数の音声入力手段が搭載された車両において、音声認識の感度を従来技術よりも向上させることを目的とする。
In addition, this Patent Document 1 also describes a technique for operating a microphone by a switch operation. However, the operation is necessary for the operation of the voice input means itself, which increases the user's operation work. There is also a problem that it ends up.
The present invention has been devised in view of such problems, and improves the sensitivity of voice recognition over a conventional technique in a vehicle equipped with a plurality of voice input means without intervention by a user. For the purpose.
このため、本発明の音声処理装置は、車両における複数箇所にそれぞれ搭載される複数の音声入力手段と、音声信号に対する言語情報について保持する音声辞書部と、該音声入力手段を通じて入力された音声信号についての音声認識を、該音声辞書部を参照することにより行なう音声認識部と、上記車両内における乗員又は該車両外部の人員の状態、又は上記車両の状態について検出する状態検出部と、該状態検出部における検出結果に応じて、該複数の音声入力手段の動作状態および該音声辞書部における認識候補の設定状態のうちのいずれか一方又は双方を切り替える切り替え制御部と、をそなえて構成されたことを特徴としている。 For this reason, the speech processing apparatus of the present invention includes a plurality of speech input means respectively mounted at a plurality of locations in a vehicle, a speech dictionary unit that holds language information for speech signals, and a speech signal input through the speech input means. A speech recognition unit that performs speech recognition with reference to the speech dictionary unit, a state detection unit that detects a state of an occupant in the vehicle or a person outside the vehicle, or a state of the vehicle, and the state A switching control unit configured to switch one or both of an operation state of the plurality of voice input units and a recognition candidate setting state in the voice dictionary unit according to a detection result in the detection unit. It is characterized by that.
この場合においては、好ましくは、該複数の音声入力手段として、上記車両の外部における音声を集音する外部音声入力手段と、上記車両の室内における音声を集音する室内音声入力手段と、をそなえるとともに、該状態検出部が、上記車両のシートへの乗員の着座を検出する着座検出部をそなえ、かつ、該切り替え制御部が、該着座検出部からの検出結果に基づき、該着座検出部において上記乗員の着座を検出するまでは、該外部音声入力手段および該室内音声入力手段のうちで該外部音声入力手段からの音声信号を該音声認識部へ出力する一方、該着座検出部において上記乗員の着座を検出すると、該外部音声入力手段および該室内音声入力手段のうちで該室内音声入力手段からの音声信号を該音声認識部へ出力すべく、該複数の音声入力手段の動作状態を切り替えるとともに、該音声入力手段の切り替え制御に連動して、該音声辞書部における認識候補の設定状態を切り替えることとしてもよい。 In this case, preferably, as the plurality of sound input means, an external sound input means for collecting sound outside the vehicle and an indoor sound input means for collecting sound inside the vehicle are provided. In addition, the state detection unit includes a seating detection unit that detects the seating of an occupant on the seat of the vehicle, and the switching control unit is configured to detect the seating detection unit based on a detection result from the seating detection unit. Until the seating of the occupant is detected, a voice signal from the external voice input means is output to the voice recognition unit among the external voice input means and the room voice input means, while the occupant is detected by the seating detection unit. Of the external voice input means and the room voice input means, the voice input from the room voice input means is output to the voice recognition unit. Switches the operating state of the unit, in conjunction with the switching control of the speech input means, it is also possible to change the setting state of the recognition candidates in the voice dictionary unit.
また、該状態検出部が、該車両の施錠および施錠解除の状態を検出する施錠状態検出部を更にそなえ、かつ、該切り替え制御部が、該施錠状態検出部での検出結果に基づいて、該車両の施錠状態においては、車両外部のいたずら検知用の言語群を優先して認識候補とする一方、該施錠状態検出部および該着座検出部での検出結果に基づいて、該車両の施錠解除状態であって該着座検出部において上記乗員の着座を検出するまでは、該音声辞書部における認識候補の設定状態を、乗車サポートのための言語群を優先して認識候補とし、該着座検出部において上記乗員の着座を検出すると、車載機器操作用の言語群を優先して認識候補とすべく、該音声辞書部における認識候補の設定状態を切り替えることもできる。 Further, the state detection unit further includes a lock state detection unit that detects the lock and unlock state of the vehicle, and the switching control unit is configured to detect the lock state detection unit based on the detection result of the lock state detection unit. In the locked state of the vehicle, the language group for detecting tampering outside the vehicle is given priority as a recognition candidate, while the unlocked state of the vehicle is determined based on the detection results of the locked state detection unit and the seating detection unit. Until the seating detection unit detects the seating of the occupant, the recognition candidate setting state in the speech dictionary unit is set as a recognition candidate with priority given to a language group for boarding support, and the seating detection unit When the seating of the occupant is detected, the setting state of the recognition candidate in the speech dictionary unit can be switched so that the language group for in-vehicle device operation is given priority as a recognition candidate.
さらに、該切り替え制御部は、上記車両内における乗員又は該車両外部の人員の状態、又は上記車両の状態に応じて、認識候補とすべき言語群に優先度の重み付けの付与により、該音声辞書部における認識候補の設定状態を切り替えることとしてもよい。
また、該音声辞書部は、上記車両内における乗員又は該車両外部の人員の状態、又は上記車両の状態に応じて、認識候補とすべき言語群をそれぞれ記憶する複数種類の辞書部をそなえ、該切り替え制御部は、該状態検出部での検出結果に基づいて、該複数種類の辞書部のうちで、該音声認識部での音声認識において参照すべき辞書部を切り替えることにより、該音声辞書部における認識候補の設定状態を切り替えることもできる。
Furthermore, the switching control unit is configured to assign a priority weight to a language group to be a recognition candidate in accordance with a state of an occupant in the vehicle, a person outside the vehicle, or a state of the vehicle. It is good also as switching the setting state of the recognition candidate in a part.
In addition, the speech dictionary unit includes a plurality of types of dictionary units that respectively store language groups to be recognized as recognition candidates according to the state of the passengers inside the vehicle or the personnel outside the vehicle, or the state of the vehicle. The switching control unit switches the dictionary to be referred to in speech recognition at the speech recognition unit among the plurality of types of dictionary units based on the detection result at the state detection unit. It is also possible to switch the setting state of recognition candidates in the section.
さらに、上記車両の室内の複数箇所に該音声入力手段がそなえられるとともに、該状態検出部が、上記車両のシートに着座した乗員の顔向きを検出する顔向き検出部をそなえ、かつ、該切り替え制御部が、該状態検出部における検出結果に応じて、該複数の音声入力手段の動作状態および該音声辞書部における認識候補の設定状態のうちの双方を切り替えるべく、該顔向き検出部での検出結果に基づいて、該室内に複数箇所そなえられた音声入力手段の動作状態を切り替えるとともに、該音声入力手段の切り替え制御に連動して、該音声辞書部における認識候補の設定状態を切り替えることとしてもよい。 Further, the voice input means is provided at a plurality of locations in the vehicle interior, and the state detection unit includes a face direction detection unit for detecting the face direction of an occupant seated on the vehicle seat, and the switching is performed. In response to the detection result in the state detection unit, the control unit switches the operation state of the plurality of voice input means and the recognition candidate setting state in the voice dictionary unit in the face direction detection unit. Based on the detection result, the operation state of the voice input means provided in a plurality of places in the room is switched, and the setting state of the recognition candidate in the voice dictionary unit is switched in conjunction with the switching control of the voice input means. Also good.
また、上記車両の室内の複数箇所に該音声入力手段がそなえられるとともに、該状態検出部が、上記車両のシートに着座した乗員の体重を検出する体重検出部をそなえ、かつ、該切り替え制御部が、該体重検出部での検出結果に基づいて、該音声入力手段の動作状態を切り替えるとともに、該音声入力手段の切り替え制御に連動して、該音声辞書部における認識候補の設定状態を切り替えることもできる。 The voice input means is provided at a plurality of locations in the vehicle interior, and the state detection unit includes a weight detection unit for detecting the weight of an occupant seated on the vehicle seat, and the switching control unit. Switching the operation state of the voice input unit based on the detection result of the weight detection unit and switching the setting state of the recognition candidate in the voice dictionary unit in conjunction with the switching control of the voice input unit. You can also.
さらに、上記車両の室内の複数箇所に該音声入力手段がそなえられるとともに、該状態検出部が、上記車両の車速を検出する車速検出部をそなえ、かつ、該切り替え制御部が、該状態検出部における検出結果に応じて、該複数の音声入力手段の動作状態および該音声辞書部における認識候補の設定状態のうちの双方を切り替えるべく、該車速検出部での検出結果に基づいて、該音声入力手段の動作状態を切り替えるとともに、該音声入力手段の切り替え制御に連動して、該音声辞書部における認識候補の設定状態を切り替えることとしてもよい。 Further, the voice input means is provided at a plurality of locations in the vehicle interior, the state detection unit includes a vehicle speed detection unit that detects the vehicle speed of the vehicle, and the switching control unit includes the state detection unit. Based on the detection result in the vehicle speed detection unit, the voice input is performed so as to switch both the operation state of the plurality of voice input means and the recognition candidate setting state in the voice dictionary unit according to the detection result in The operation state of the means may be switched, and the setting state of the recognition candidate in the speech dictionary unit may be switched in conjunction with the switching control of the speech input means.
また、上記車両の室内の複数箇所に該音声入力手段がそなえられるとともに、該状態検出部が、上記乗員が着座しているシートの向きを検出するシート向き検出部をそなえ、かつ、該切り替え制御部が、該状態検出部における検出結果に応じて、該複数の音声入力手段の動作状態および該音声辞書部における認識候補の設定状態のうちの双方を切り替えるべく、該シート向き検出部での検出結果に基づいて、該音声入力手段の動作状態を切り替えるとともに、該音声入力手段の切り替え制御に連動して、該音声辞書部における認識候補の設定状態を切り替えることもできる。 The voice input means is provided at a plurality of locations in the vehicle interior, and the state detection unit includes a seat direction detection unit for detecting the direction of the seat on which the occupant is seated, and the switching control. Detection by the sheet orientation detection unit so as to switch both the operation state of the plurality of speech input means and the recognition candidate setting state in the speech dictionary unit according to the detection result in the state detection unit. Based on the result, the operating state of the voice input unit can be switched, and the recognition candidate setting state in the voice dictionary unit can be switched in conjunction with the switching control of the voice input unit.
さらに、上記車両の室内の複数箇所に該音声入力手段がそなえられるとともに、該状態検出部が、上記乗員の口が動いたことを検出する口動き検出部をそなえ、かつ、該切り替え制御部が、該状態検出部における検出結果に応じて、該複数の音声入力手段の動作状態および該音声辞書部における認識候補の設定状態のうちの双方を切り替えるべく、該口動き検出部での検出結果に基づいて、該口が動いたことが検出された乗員の乗車位置に応じて、該室内に複数箇所にそなえられた音声入力手段の動作状態を切り替えるとともに、該音声入力手段の切り替え制御に連動して、該音声辞書部における認識候補の設定状態を切り替えることとしてもよい。 Furthermore, the voice input means is provided at a plurality of locations in the vehicle interior, the state detection unit includes a mouth movement detection unit that detects that the passenger's mouth has moved, and the switching control unit includes In accordance with the detection result in the state detection unit, the detection result in the mouth movement detection unit is switched to switch between the operation state of the plurality of voice input units and the recognition candidate setting state in the voice dictionary unit. Based on the boarding position of the occupant who detected that the mouth has moved, the operation state of the voice input means provided in a plurality of locations in the room is switched and linked to the switching control of the voice input means. Thus, the recognition candidate setting state in the speech dictionary unit may be switched.
上述したように、本発明によれば、切り替え制御部により、センサ情報判定部における検出結果に応じて、マイクの動作状態および音声辞書部における認識候補の設定状態を切り替えることができるので、利用者の操作作業を介在させずに、複数のマイクが搭載された車両において、音声認識の感度を従来技術よりも向上させることができる利点がある。 As described above, according to the present invention, the switching control unit can switch the operation state of the microphone and the recognition candidate setting state in the speech dictionary unit according to the detection result in the sensor information determination unit. There is an advantage that the sensitivity of voice recognition can be improved compared to the prior art in a vehicle equipped with a plurality of microphones without interposing the above operation work.
以下、図面を参照することにより、本発明の実施の形態について説明する。
なお、上述の本願発明の目的のほか、他の技術的課題，その技術的課題を解決する手段及び作用効果についても、以下の実施の形態による開示によって明らかとなる。
〔Ａ〕本発明の一実施形態の説明
図１は本発明の一実施形態にかかる音声処理装置１０を示すブロック図である。この図１に示す音声処理装置１０は、車両９に搭載されて、車両９の利用者の発した音声信号を取り込むとともに、この音声により、車両９の設備を操作するためのコマンドを認識することができるようになっている。即ち、認識された音声によるコマンド（音声コマンド）に応じて、車両９についての各種設備の制御を行なうことができるようになっている。
Hereinafter, embodiments of the present invention will be described with reference to the drawings.
In addition to the above-described object of the present invention, other technical problems, means for solving the technical problems, and operational effects will become apparent from the disclosure of the following embodiments.
[A] Description of an Embodiment of the Present Invention FIG. 1 is a block diagram showing an
ここで、この図１に示す音声処理装置１０は、車両９における複数箇所にそれぞれ搭載される複数の（図１中では２個の）音声入力手段としてのマイク１，２とともに、センサ部３，センサ情報判定部４，切り替え制御部５，音声認識エンジン６および音声辞書部７をそなえている。
ここで、マイク１は、車両９の外部における音声を集音する外部音声入力手段としての車外用マイクであり、マイク２は、車両９の室内における音声を集音する室内音声入力手段としての車内用マイクである。図１中においては、これらのマイク１，２は１個ずつそなえられているが、本発明によれば、適宜複数箇所にそれぞれ搭載することとしてもよい。例えば、車内用のマイク１については、例えば図８に示すマイク１−１，１−２のように、座席位置ごとに設けることとしたり、図９に示すマイク１１〜１３のように、同一座席内でも高さ等が異なる位置に分けて配置したりして、乗員の座席位置、座高や顔の向き等によらずに音声認識に必要なレベルの音声を集音できるようにしてもよい。
Here, the
Here, the microphone 1 is an external microphone as an external audio input unit that collects sound outside the
なお、本実施形態においては、車両９の外部におけるマイク１は、車両９内に人員が乗っていない状態においては、常時電源が供給されて、車両９の外部音声を集音することができるようになっている。
また、カメラ８は、車両９の室内における各座席に座っている乗員ごとに口の動きを監視するものであって、乗員の口が動いたことを検出する口動き検出部を構成する。例えば図８に示すように、車両９における各座席に対応して複数個設置することができるようになっている。尚、図８中、８−１は運転席用のカメラ、８−２は後部右側座席用のカメラ、１−１は運転席用のマイク、１−２は後部右側座席用のマイクである。
In the present embodiment, the microphone 1 outside the
The camera 8 monitors the movement of the mouth for each occupant sitting in each seat in the
また、センサ部３は、車両９にそなえられたシートごとに乗員の着座による荷重を検出するための信号を出力する荷重センサ３ａ，車両９における施錠状態および解錠状態を検出するための信号を出力する施錠／解錠センサ３ｂ，車両９におけるドアの開状態および閉状態を検出するための信号を出力するドア開閉センサ３ｃ，その他図示しないブレーキ、エンジンの作動状態や走行状態等を検出するための信号を出力するセンサをそなえている。特に、荷重センサ３ａは、車両９のシートへの乗員の着座を検出する着座検出部であり、施錠／解錠センサ３ｃは、車両９の施錠および施錠解除の状態を検出する施錠状態検出部である。
In addition, the sensor unit 3 outputs a signal for detecting a load due to the seating of an occupant for each seat provided in the
また、センサ情報判定部４は、人員が音声コマンドにより各種操作を行なう際の当該利用シチュエーション（利用シーン）を、センサ部３から入力される信号や、マイク１，２からの音声信号や、車両９の室内における座席ごとの乗員の口の動きを監視するカメラ８からの監視情報に基づいて判定するものである。
具体的には、センサ情報判定部４においては、荷重センサ３ａで検出された各シートの荷重検出結果をもとに、着座している乗員位置について検出するようになっている。そして、上述の施錠／解錠センサ３ｂおよびドア開閉センサ３ｃからの各検出情報とともに、マイク１，２からの音声信号およびカメラ８からの監視情報についても入力されて、これらのセンサ３ａ〜３ｃ，マイク１，２からの音声信号およびカメラ８からの監視情報をもとに、車両９の状態について検出する。
In addition, the sensor information determination unit 4 indicates the usage situations (usage scenes) when personnel perform various operations by voice commands, signals input from the sensor unit 3, audio signals from the microphones 1 and 2, The determination is made based on monitoring information from the camera 8 that monitors the movement of the passenger's mouth for each seat in the nine rooms.
Specifically, the sensor information determination unit 4 detects the seated occupant position based on the load detection result of each seat detected by the load sensor 3a. In addition to the detection information from the above-described locking / unlocking
すなわち、センサ情報判定部４においては、施錠／解錠センサ３ｂ，ドア開閉センサ３ｃ，その他のセンサからの信号に基づいて、車両９の状態についても検出するようになっている。更に、荷重センサ３ａ，施錠／解錠センサ３ｂおよびドア開閉センサ３ｃからの検出信号に基づいて、車両９内に乗っている人員の有無について検出するとともに、車両９内に人員が乗っていない場合には、マイク１からの音声信号をもとに車両９外部の人員の状態を検出するようになっている。
That is, the sensor information determination unit 4 detects the state of the
加えて、車両９に人員が乗っている場合には、荷重センサ３ａからの検出信号をもとに乗員の着座位置状態について検出し、カメラ８の監視情報に基づいて各乗員の口の動き、即ち発声動作を検出することができる。
したがって、上述のセンサ情報判定部４により、車両９内における乗員又は車両９外部の人員の状態、又は上記車両の状態について検出する状態検出部を構成する。
In addition, when a person is on the
Therefore, the above-described sensor information determination unit 4 constitutes a state detection unit that detects the state of an occupant in the
また、音声辞書部７は、音声コマンドの音声波形モデルに対するテキスト情報等の言語（語彙）データを保持するものであり、音声認識エンジン６は、マイク１，２を通じて入力された音声信号についての音声認識を、音声辞書部７の内容を参照することにより行なうものであり、音声認識部として機能する。換言すれば、音声辞書部７は、音声認識エンジン６において認識可能な語彙を蓄積するものである。
The
たとえば、利用者により車外から「開け」等の言葉が発声された場合において、マイク１においてこれを集音した音声信号が音声認識エンジン６に入力される。そして、音声認識エンジン６では、音声辞書部７に入力されている語彙のうちで、利用者から発声された言葉「開け」をなす音声信号波形に最も近い音声信号波形を検索し、検索結果を音声認識結果として出力する。
For example, when a word such as “open” is uttered by the user from outside the vehicle, a voice signal collected by the microphone 1 is input to the
すなわち、入力された音声信号波形と、音声辞書部７に記憶されている語彙についての音声波形モデルと、の近似度合いを距離として算出し、算出した距離が所定距離より小さいものについて認識結果として出力する。この音声認識処理においては、算出した距離が最小のものを認識結果として出力することとしてもよいし、算出した距離があらかじめ設定された所定距離よりも小さいいくつかの候補を出力するとともに、これらのうちのいずれかを操作コマンドとして利用者に選択させるようにしてもよい。
In other words, the degree of approximation between the input speech signal waveform and the speech waveform model for the vocabulary stored in the
さらに、切り替え制御部５は、状態検出部をなすセンサ情報判定部４における検出結果に応じて、複数のマイク１，２の動作状態および音声辞書部７における認識候補の設定状態のうちのいずれか一方又は双方を切り替えるものである。具体的には、荷重センサ３ａからの検出結果に基づき、荷重センサ３ａにおいて上記乗員の着座を検出するまでは、マイク１からの音声信号を音声認識エンジン６へ出力する一方、荷重センサ３ａにおいて乗員の着座を検出すると、マイク２からの音声信号を音声認識エンジン６へ出力すべく、マイク１，２の動作状態を切り替えるようになっている。
Furthermore, the switching
すなわち、集音対象となる人員が存在する位置をセンサ情報判定部４において検出した上で、当該人員が存在する位置からの集音効率が良好なマイク１，２のみを動作状態とし、他のマイクについては動作停止状態とすることができる。即ち、利用シーンに合わせて自動で入力対象のマイク１，２を切り替えることで、使用するマイクを利用者に意識させることなく、音声認識エンジン６への音声信号のＳ／Ｎ比を向上させることができるので、音声認識エンジン６においては高い認識性能を確保することができる。
That is, after detecting the position where the person who is the target of sound collection exists in the sensor information determination unit 4, only the microphones 1 and 2 having good sound collection efficiency from the position where the person is present are set in an operating state. The microphone can be stopped. That is, by automatically switching the input microphones 1 and 2 according to the usage scene, the S / N ratio of the voice signal to the
さらに、切り替え制御部５においては、音声辞書部７における認識候補の設定状態について切り替え制御を行なう行なうことができるようになっている。即ち、切り替え制御部５において、音声辞書部７に記憶されている音声コマンドのうちで、センサ情報判定部４において検出した人員が存在する位置から、当該位置の人員が発する可能性の高い音声コマンドを、優先度の高い認識候補として設定すべく音声認識エンジン６を制御することができるようになっている。
Further, the switching
また、上述のマイク１，２の切り替え制御に連動して、音声辞書部７における認識候補の設定状態について切り替えることもできるようになっている。
前述したように、音声認識エンジン６においては、マイク１又はマイク２で集音された音声信号を切り替え制御部５を介して入力されると、この音声信号の波形と、音声辞書部７において記憶されている各音声信号波形モデルとの近似度を距離として算出し、最も近似度の高い言語データを認識結果として出力するようになっている。このとき、切り替え制御部５においては、センサ情報判定部４において検出される車両９の状態および人員の状態に応じて、音声認識エンジン６に切り替え制御信号を出力することにより、音声認識エンジン６において参照する音声辞書部７における語彙範囲の設定を切り替えることができるようになっている。
Further, in conjunction with the above-described switching control of the microphones 1 and 2, the setting of recognition candidates in the
As described above, in the
すなわち、音声認識エンジン６においては、切り替え制御部５からの切り替え制御信号をもとに、（センサ情報判定部４において検出される）人員または車両９の状態に応じて、当該人員が発声する可能性の高い音声コマンドについては、算出される距離の値が少なくなる重みを付与しておくことができる。このような重み付けを付与しておくことで、当該状況において人員から発せられる可能性の高い音声コマンドに対する認識精度を向上させることができる。
That is, in the
この重み付けとしては、例えば、音声認識エンジン６において、上述の入力音声信号の波形と、当該人員が発する可能性の高い音声コマンドをあらわす音声信号波形モデルとの近似度を表す距離の算出に際して、あらかじめ算出結果となる距離を減らすような値を設定しておくことにより行なう。
たとえば、車両９の車内に人員が存在しないような場合には、車外の人員からの音声コマンドが認識対象に限定される場面であり、このような場合には、ドアを開けること等の、主として車両９への乗車サポートを目的とした音声コマンドが車外の人員から発せられる可能性が高い反面、車内のナビゲーション装置や、オーディオ機器等の、車内の機器の操作を目的とした音声コマンドについては発せられる可能性が低い。
As the weighting, for example, in the
For example, when there is no person in the
したがって、このような場面においては、切り替え制御部５からの切り替え制御信号により、音声辞書部７に格納する語彙のうちで、車外の人員から発せられる可能性の高い乗車サポートを目的とした音声コマンドをあらわす語彙を検索対象となるように音声認識エンジン６が設定される。
また、車両９の車内に人員が存在し走行中にあるような場合には、乗車サポートを目的とした音声コマンドが発せられる可能性は低く、車内の機器の操作を目的とした音声コマンドが発せられる可能性が高い。このような場合には、切り替え制御部５からの切り替え制御信号により、音声辞書部７に格納する語彙のうちで、車内の人員から発せられる可能性の高い車内の機器の操作を目的とした音声コマンドをあらわす語彙を検索対象となるように音声認識エンジン６が設定される。
Therefore, in such a situation, a voice command for the purpose of boarding support, which is likely to be issued by a person outside the vehicle, out of the vocabulary stored in the
In addition, when there is a person in the
さらに、車内に乗車している人員の位置によっても、上述の重み付け等により、検索対象となる語彙を切り替えて設定することも可能である。例えば、運転席に人員が乗車している場合には、ナビゲーション装置についての操作を目的とする音声コマンドを他のカテゴリのコマンドに優先して検索するようにしたり、助手席に人員が乗車している場合には、テレビジョンその他オーディオ機器についての操作を目的とした音声コマンドを表す語彙を他のカテゴリのコマンドに優先して検索するようにしたり、後部座席に人員が乗車している場合には、空調設備についての操作を目的とする音声コマンドを他のカテゴリのコマンドに優先して検索したりしてもよい。 Further, the vocabulary to be searched can be switched and set by the above-described weighting or the like depending on the position of the person in the vehicle. For example, if there are people in the driver's seat, search for voice commands intended for navigation device operations prior to other categories of commands, or people in the passenger seat If you are searching for a vocabulary that represents a voice command intended for operation on a television or other audio device, you can search for it prior to other categories of commands, or if there are people on the back seat. The voice command for the purpose of operating the air conditioning equipment may be searched in preference to the commands of other categories.
これにより、音声認識エンジン６においては、センサ情報判定部４において検出される利用シチュエーションに応じて、人員から発せられる可能性の高い音声コマンド群を音声辞書部７の検索対象言語群としてあらかじめ設定しておくことで、認識精度を格段に向上させることができるようになる。
なお、音声認識エンジン６においては、当該人員が発する可能性の高い音声コマンドについての辞書データ群を、センサ情報判定部４からの判定結果に応じてアドレスにより管理することで、切り替え制御部５からの切り替え制御信号に応じて検索対象の切り替えを行なうこととしてもよい。
Thereby, in the
The
この場合においては、音声辞書部７は、上記車両９内における乗員又は車両９外部の人員の状態、又は車両９の状態に応じて、認識候補とすべき言語群をそれぞれ記憶する複数種類の辞書部により構成されて、切り替え制御部５は、センサ情報判定部４での検出結果に基づいて、複数種類の辞書部のうちで、音声認識エンジン６での音声認識において参照すべき辞書部を切り替えることにより、音声辞書部７における認識候補の設定状態を切り替える。
In this case, the
上述のごとく構成された音声処理装置１０の動作を、図２，図３および図５に示すフローチャートを用いて説明する。図２は、切り替え制御部５において、入力音声信号を音声認識エンジン６へ供給するためのマイク１，２の切り替えとともに、音声辞書部７における認識候補の設定状態を切り替える動作について説明するための図である。
まず、車両９が駐車状態にあり、内部において人員が乗車しておらず、施錠がされている場合においては（図７のシーン［１］参照）、切り替え制御部５により、車内用マイク２についてはオフとされる一方車外用マイク１についてはオンとされて必要最小限の電力消費とするとともに、音声認識エンジン６においては、車外において発生される音声についての音声認識を行なうようになっている。このとき、音声認識エンジン６においては、切り替え制御部５からの切り替え制御信号に基づいて、辞書データについての重み付け等の設定を切り替えることにより、音声辞書部７において記憶されるデータのうちで、前述のいたずら等の不正検知用の言語群である辞書データを検索対照として用いる（ステップＡ１）。
The operation of the
First, in the case where the
これにより、音声認識エンジン６においては、車両９に対してなされるいたずら等の不正が行われている場合に、これを車外マイク２の音声信号から認識することができるようになっている。そして、この音声認識エンジン６においていたずら等の不正が行われていることを認識した場合には（ステップＡ２のＹＥＳルート）、図示しない通信機能により車両９の所有者の携帯電話等に連絡をとることができる（ステップＡ３）。これにより、所有者不在時においても車両９の監視を行なうことができるので、車両のセキュリティの向上を図ることができる。
As a result, the
また、駐車状態にある車両９の施錠が解除されたことを施錠／解錠センサ３ｃからの信号を通じセンサ情報判定部４で検出すると（ステップＡ２のＮＯルートからステップＡ４のＹＥＳルート）、解錠操作を行なった人員からは続いて乗車サポート用の音声コマンドを表す言葉が発せられる可能性が高い。そこで、切り替え制御部５では、音声認識エンジン６に対して切り替え制御信号を出力することにより、音声認識エンジン６において検索を行なう対象となる辞書データを、乗車サポートを目的とするコマンドをあらわす語彙群のデータ、即ち乗車サポート用の辞書データを検索対象としている（ステップＡ５）。
If the sensor information determination unit 4 detects that the
そして、車外の人員から例えば言葉「ドアＯＰＥＮ」等のドアを開けるための音声コマンドが発声された場合には、音声辞書部７における検索対象語彙が絞られているので、音声認識エンジン６においては高い認識精度で音声コマンドを認識することができる。これにより、図示しないドア開閉機構を通じて自動でドアを開けることができる（ステップＡ６のＹＥＳルートからステップＡ７）。
When a voice command for opening a door such as the word “door OPEN” is uttered from a person outside the vehicle, the search target vocabulary in the
また、上述のごとく音声コマンドによりドアを開けた場合、または車外の人員が音声コマンドによらずに手動でドアを開けた場合においては、センサ情報判定部４においては、荷重センサ３ａからの検出信号に基づいて、座席に人員が着座したか否かを判定する（ステップＡ７から、またはステップＡ６のＮＯルートからステップＡ８）。そして、切り替え制御部５においては、センサ情報判定部４からの上述の判定結果を受けて、マイク１，２および音声辞書部７における検索対象となるデータを切り替えている。
When the door is opened by a voice command as described above, or when a person outside the vehicle manually opens the door without using a voice command, the sensor information determination unit 4 detects a detection signal from the load sensor 3a. Based on the above, it is determined whether or not a person is seated on the seat (from step A7 or from the NO route of step A6 to step A8). In the
すなわち、座席に人員が座るまでは、音声認識エンジン６では上述の乗車サポート用の辞書データを検索対象としているが（ステップＡ８のＮＯルート）、座席に人員が座ったあとは（図７のシーン［２］参照）、切り替え制御部５ではマイク１，２の状態を切り替えるとともに、音声認識エンジン６において検索を行なう対象となる辞書データを切り替える（ステップＡ８のＹＥＳルートからステップＡ９）。
That is, until the person is seated in the seat, the
具体的には、切り替え制御部５では、車外用マイク１をオンとし車内用マイク２をオフとしている設定から、車外用マイク１をオフとし車内用マイク２をオンとする設定に切り替えるとともに、音声認識エンジン６に切り替え制御信号を出力することにより、ナビゲーション装置等の車載機器操作用のコマンドをあらわす語彙データを検索対象の辞書データに切り替える。
Specifically, the switching
換言すれば、施錠／解錠センサ３ｃおよび荷重センサ３ａでの検出結果たる信号に基づいて、センサ情報判定部４で車両９の施錠解除状態であって乗員の着座を検出するまでは、音声辞書部７における認識候補の設定状態を、乗車サポートのための言語群を優先して認識候補とし、センサ情報判定部４で乗員の着座を検出すると、車載機器操作用の言語群を優先して認識候補とすべく、音声辞書部７における認識候補の設定状態を切り替える。
In other words, based on the signals that are the detection results of the lock /
上述したように、乗員が車外にいる場合と車内にいる場合とで、重み付けの付与により、音声辞書部７での検索対象の辞書データを切り替えているが、音声辞書部７に付与されているアドレス等によって切り替える構成とすれば、車内用と車外用とで独立した音声辞書部を構成することができ、このようにすれば、同一の語彙によっても操作の異なるコマンドとすることも可能になる。例えば、車外にいるときに「オープン」と発声した場合にはドアが開くようにする一方、車内にいるときに「オープン」と発声した場合には窓が開くようにすることができるようになる。
As described above, the dictionary data to be searched in the
ところで、音声コマンドを発声する乗員の着座位置に応じて、さらに図３に示すように検索対象の辞書データを切り替えることができる。即ち、カメラ８による車内の乗員の口の動きについての監視情報に基づいて、車内の座席のいずれかに座っている乗員が音声コマンドを発声した場合においては（ステップＢ１のＹＥＳルート）、センサ情報判定部４において音声コマンドを発した乗員の座席位置を特定するとともに、切り替え制御部５では、その乗員が座っている座席位置に応じて検索対象の辞書データを切り替える（ステップＢ２〜Ｂ６）。
By the way, according to the seating position of the occupant who utters the voice command, the dictionary data to be searched can be switched as shown in FIG. That is, when the occupant sitting in one of the seats in the vehicle utters a voice command based on the monitoring information on the movement of the occupant's mouth in the vehicle by the camera 8 (YES route of step B1), the sensor information The determination unit 4 specifies the seat position of the occupant who issued the voice command, and the switching
このとき、センサ情報判定部４においては、発声を行なった乗員の座席位置の特定を行なうには、上述のカメラ８からの監視情報とともに、座席ごとに設置されているマイク１からの音圧レベルについても併用することもできる。このような乗員の口の動きがない場合においては、音声認識エンジン６では動作を止めておくこともできるので、リソース消費あるいは電力消費を抑制させることができる。
At this time, in order to specify the seat position of the occupant who made the utterance, the sensor information determination unit 4 together with the monitoring information from the camera 8 described above, the sound pressure level from the microphone 1 installed for each seat. Can also be used together. When there is no movement of the passenger's mouth, the
ここで、発声した乗員の座席位置が運転席である場合には（ステップＢ２の“運手席”ルート）、切り替え制御部５では、マイク１をオンとしマイク２をオフとする。特に座席ごとにマイク１が設置されている場合には、運転席の乗員の発声を集音するために設置されたマイク１からの音声信号を音声認識エンジン６に供給する（ステップＢ３）。
そして、運転席からの音声コマンドとして可能性の高いカテゴリのものを優先して検索対象とすべく切り替え制御信号を音声認識エンジン６に出力する。このとき、例えば図４に示すように、「目的地設定」、「住所」あるいは「電話番号」などのナビゲーション装置の操作のためのコマンド等を、運転席優先とすべき認識語彙として重みを付与するため、パラメータを音声認識エンジン６に設定する（ステップＢ３）。これにより、音声認識エンジン６による認識結果としては（ステップＢ４）、重みが付与された認識語彙に検索対象を絞ることができるので、認識の確からしさを向上させている。
Here, when the seat position of the occupant who spoke is the driver's seat (the “driver's seat” route in step B2), the switching
Then, a switching control signal is output to the
同様に、発声した乗員の座席位置が助手席である場合には（ステップＢ２の“助手席”ルート）、切り替え制御部５では、マイク１をオンとしマイク２をオフとする。特に座席ごとにマイク１が設置されている場合には、助手席の乗員の発声を集音するために設置されたマイク１からの音声信号を音声認識エンジン６に供給する。
そして、助手席からの音声コマンドとして可能性の高いカテゴリのものを優先して検索対象とすべく切り替え制御信号を音声認識エンジン６に出力する。このとき、例えば図４に示すように、「４チャンネル」、「６チャンネル」あるいは「シークアップ」などのテレビジョン装置の操作のためのコマンド等を、助手席優先とすべき認識語彙として重みを付与するため、パラメータを音声認識エンジン６に設定する（ステップＢ５）。
Similarly, when the seat position of the occupant who spoke is the passenger seat (the “passenger seat” route in step B2), the switching
Then, a switching control signal is output to the
さらに、発声した乗員の座席位置が後部座席である場合には（ステップＢ２の“後部座席”ルート）、切り替え制御部５では、マイク１をオンとしマイク２をオフとする。特に座席ごとにマイク１が設置されている場合には、後部座席の乗員の発声を集音するために設置されたマイク１からの音声信号を音声認識エンジン６に供給する。
そして、後部座席からの音声コマンドとして可能性の高いカテゴリのものを優先して検索対象とすべく切り替え制御信号を音声認識エンジン６に出力する。このとき、例えば図４に示すように、「２５度」、「２８度」あるいは「風量アップ」などのテレビジョン装置の操作のためのコマンド等を、助手席優先とすべき認識語彙として重みを付与するため、パラメータを音声認識エンジン６に設定する（ステップＢ６）。
Furthermore, when the seat position of the occupant who spoke is the rear seat (the “rear seat” route of step B2), the switching
Then, a switching control signal is output to the
ここで、上述の音声認識エンジン６においては、優先度の高い音声コマンドに対して図５に示すように重み付けが付与される。即ち、マイク１を通じて入力された音声信号が切り替え制御部５から入力されて、このマイク１からの音声信号についての音声認識を行なう旨の指示を受けると（ステップＣ１のＹＥＳルート）、音声認識エンジン６での音声認識処理が行なわれる。
Here, in the
このとき、当該切り替え制御部５からの切り替え制御信号による重み付け設定指示がある場合には、その内容に応じて検索対象とする辞書データを切り替える（ステップＣ２のＹＥＳルートからステップＣ３）。即ち、切り替え制御部５からの切り替え制御信号には、重み付け設定指示をすべき辞書データを構成する認識語彙についてのＩＤ（Identifier）情報とともに、重みとなる値についての情報（例えば図６に示す「−１００」等）を含めることができる。
At this time, when there is a weighting setting instruction by the switching control signal from the switching
この場合においては、切り替え制御部５では、図６に示すように、座席位置の乗員に対応して、優先すべき認識語彙群のＩＤおよび重みとなる値についての情報をパラメータ設定ファイルとして管理しておくことができる。そして、切り替え制御部５では、センサ情報判定部４からの信号により、音声コマンドを発した乗員の座席位置が特定された場合には、該当座席位置の乗員からの発声に対する音声認識処理のために、対応するパラメータ設定ファイルの情報を切り替え制御信号に含めて音声認識エンジン６に出力する。
In this case, the switching
そして、音声認識エンジン６においては、切り替え制御信号をパラメータ設定ファイルとして入力されて、このパラメータ設定ファイルに含まれる認識語彙についてのＩＤ情報および重みとなる値に従って、入力音声信号波形と検索対象語彙についての波形モデルとの近似度を示す距離の算出を行ない、近似度の高い（即ち距離の値の小さい）認識語彙を認識結果として出力するのである（ステップＣ４）。
Then, in the
また、当該切り替え制御部５からの切り替え制御信号による重み付け設定指示がない場合には、音声認識エンジン６においては、音声辞書部７における辞書データには重み付けを付与せずに、辞書データをなす全ての検索対象語彙についての波形モデルと、入力音声信号波形との距離の算出を通じて、認識結果を出力する（ステップＣ２のＮＯルートからステップＣ４）。
Further, when there is no weighting setting instruction by the switching control signal from the switching
このように、本発明の一実施形態にかかる音声処理装置１０によれば、切り替え制御部５により、センサ情報判定部４における検出結果に応じて、マイク１，２の動作状態および音声辞書部７における認識候補の設定状態を切り替えることができるので、利用者の操作作業を介在させずに、複数のマイク１，２が搭載された車両９において、音声認識の感度を従来技術よりも向上させることができる利点がある。
As described above, according to the
〔Ｂ〕その他
上述した実施形態にかかわらず、本発明の趣旨を逸脱しない範囲において種々変形して実施することができる。
たとえば、図９に示すようにマイク１１〜１３のように、同一座席内でも高さ等が異なる位置に分けて配置する場合においても、カメラ８での監視情報を通じセンサ情報判定部４において乗員の顔向き判定することで、切り替え制御部５では、マイク１１〜１３のうちの動作状態とするのに最適なマイクを選択することができる。さらには、顔の向きに応じて、音声認識エンジン６での認識候補を切り替えることで、顔向きから注意が向けられている操作対象機器についての音声コマンドに検索対象を絞ることもできる。この場合においては、カメラ８は、車両９のシートに着座した乗員の顔向きを検出する顔向き検出部を構成する。
[B] Others Regardless of the embodiment described above, various modifications can be made without departing from the spirit of the present invention.
For example, as shown in FIG. 9, even when the microphones 11 to 13 are arranged separately at different heights in the same seat, the sensor information determination unit 4 uses the monitoring information from the camera 8 to monitor the occupant. By determining the face orientation, the switching
また、この図９に示すようなマイク１１〜１３の配置とする場合において、センサ情報判定部４では、図１０に示すように、荷重センサ３ａで検出される荷重値に応じて、乗員の身長を推定することで、切り替え制御部５では、この荷重値に応じて動作状態とすべきマイク１１〜１３を選択的に切り替えることもできる。
さらに、センサ部３として上記車両の車速を検出する車速センサ（車速検出部）を備えることとし、切り替え制御部５において、車速センサでの検出信号に基づくセンサ情報判定部４からの検出結果に基づいて、マイク１，２の動作状態を切り替えるとともに、マイク１，２の切り替え制御に連動して、音声辞書部７における認識候補の設定状態を切り替えることとしてもよい。このようにすれば、走行中は車外のマイク２をオフとし車内のマイク１をオンとするとともに、停止中は車外のマイク２をオンとして、省電力化を図ることができる。
When the microphones 11 to 13 are arranged as shown in FIG. 9, the sensor information determination unit 4, as shown in FIG. 10, determines the height of the occupant according to the load value detected by the load sensor 3 a. Therefore, the switching
Further, the sensor unit 3 includes a vehicle speed sensor (vehicle speed detection unit) that detects the vehicle speed of the vehicle. Based on the detection result from the sensor information determination unit 4 based on the detection signal from the vehicle speed sensor in the switching
また、上記乗員が着座しているシートの向きを検出するシート向き検出部としてのセンサをそなえることとすれば、切り替え制御部５においては、シート向き検出部としてのセンサでの検出結果に基づいて、室内に複数備えられたマイク１の動作状態を切り替えるとともに、マイク１の切り替え制御に連動して、音声辞書部における認識候補の設定状態を切り替えることとしてもよい。
Further, if a sensor as a seat direction detecting unit for detecting the direction of the seat on which the occupant is seated is provided, the switching
この場合においては、例えばシートがドアの向きを向いている場合には、乗員の注意はセンターコンソールにある車載機器、例えばナビゲーション装置等には向いていないと想定できるので、ナビゲーション装置の操作のための音声コマンドについては検索対象から除外し、シートやドアの制御のための音声コマンドについて優先的に検索対象とする。これにより検索対象の語彙を絞ることができるので、上述の本実施形態の場合と同様の利点がある。 In this case, for example, when the seat is facing the door, it can be assumed that the occupant's attention is not suitable for in-vehicle devices such as a navigation device in the center console. Are excluded from search targets, and voice commands for seat and door control are preferentially searched. As a result, the vocabulary to be searched can be narrowed down, and there is an advantage similar to that of the above-described embodiment.
さらに、上述の本実施形態においては、解錠するまでの音声認識エンジン６の処理は適宜省略することもできる。このようにすれば、リソースの消費、電力消費を抑制させることができる。
また、窓の開閉中を検出するセンサをそなえることとすれば、開閉中の任意の発生により窓の開閉動作を停止させることができ、乗員の保護を更に厚くすることができる。
Furthermore, in the above-described embodiment, the processing of the
Further, if a sensor for detecting whether the window is opened or closed is provided, the window opening / closing operation can be stopped by any occurrence during opening and closing, thereby further protecting the passenger.
また、上述した実施形態の開示により、本発明の装置を製造することは可能である。 In addition, the device of the present invention can be manufactured based on the disclosure of the above-described embodiment.
１，１−１，１−２，２，１１〜１３ マイク（音声入力手段）
３ センサ部（状態検出部）
３ａ 荷重センサ
３ｂ 施錠／解錠センサ
３ｃ ドア開閉センサ
４ センサ情報判定部（状態検出部）
５ 切り替え制御部
６ 音声認識エンジン（音声認識部）
７ 音声辞書部
８，８−１，８−２ カメラ
９ 車両
１０ 音声処理装置
1,1-1,1-2,2,11-13 Microphone (voice input means)
3 Sensor unit (state detection unit)
5
7 Voice dictionary part 8,8-1,8-2
Claims (10)
音声信号に対する言語情報について保持する音声辞書部と、
該音声入力手段を通じて入力された音声信号についての音声認識を、該音声辞書部を参照することにより行なう音声認識部と、
上記車両内における乗員又は該車両外部の人員の状態、又は上記車両の状態について検出する状態検出部と、
該状態検出部における検出結果に応じて、該複数の音声入力手段の動作状態および該音声辞書部における認識候補の設定状態のうちのいずれか一方又は双方を切り替える切り替え制御部と、をそなえて構成されたことを特徴とする、音声処理装置。 A plurality of voice input means mounted respectively at a plurality of locations in the vehicle;
A speech dictionary part that holds language information for speech signals;
A voice recognition unit that performs voice recognition on a voice signal input through the voice input unit by referring to the voice dictionary unit;
A state detection unit for detecting the state of an occupant in the vehicle or a person outside the vehicle, or the state of the vehicle;
A switching control unit configured to switch one or both of an operation state of the plurality of voice input units and a recognition candidate setting state in the voice dictionary unit according to a detection result in the state detection unit. A speech processing apparatus, characterized in that
該状態検出部が、上記車両のシートへの乗員の着座を検出する着座検出部をそなえ、
かつ、該切り替え制御部が、
該着座検出部からの検出結果に基づき、該着座検出部において上記乗員の着座を検出するまでは、該外部音声入力手段および該室内音声入力手段のうちで該外部音声入力手段からの音声信号を該音声認識部へ出力する一方、該着座検出部において上記乗員の着座を検出すると、該外部音声入力手段および該室内音声入力手段のうちで該室内音声入力手段からの音声信号を該音声認識部へ出力すべく、該複数の音声入力手段の動作状態を切り替えるとともに、
該音声入力手段の切り替え制御に連動して、該音声辞書部における認識候補の設定状態を切り替えることを特徴とする、請求項１記載の音声処理装置。 As the plurality of sound input means, an external sound input means for collecting sound outside the vehicle and an indoor sound input means for collecting sound inside the vehicle are provided.
The state detection unit includes a seating detection unit that detects the seating of an occupant on the seat of the vehicle,
And the switching control unit
Based on the detection result from the seating detection unit, an audio signal from the external audio input unit is output from the external audio input unit and the room audio input unit until the seating detection unit detects the seating of the occupant. When the seating detection unit detects the seating of the occupant while outputting to the voice recognition unit, the voice recognition unit outputs a voice signal from the room voice input unit among the external voice input unit and the room voice input unit. To switch the operating state of the plurality of voice input means,
2. The speech processing apparatus according to claim 1, wherein the setting of recognition candidates in the speech dictionary unit is switched in conjunction with the switching control of the speech input means.
かつ、該切り替え制御部が、
該施錠状態検出部での検出結果に基づいて、該車両の施錠状態においては、車両外部のいたずら検知用の言語群を優先して認識候補とする一方、
該施錠状態検出部および該着座検出部での検出結果に基づいて、該車両の施錠解除状態であって該着座検出部において上記乗員の着座を検出するまでは、該音声辞書部における認識候補の設定状態を、乗車サポートのための言語群を優先して認識候補とし、該着座検出部において上記乗員の着座を検出すると、車載機器操作用の言語群を優先して認識候補とすべく、該音声辞書部における認識候補の設定状態を切り替えることを特徴とする、請求項２記載の音声処理装置。 The state detection unit further includes a locking state detection unit for detecting the locking and unlocking states of the vehicle;
And the switching control unit
Based on the detection result of the locking state detection unit, in the locking state of the vehicle, the language group for tampering detection outside the vehicle is given priority as a recognition candidate,
Based on the detection results of the locking state detection unit and the seating detection unit, recognition candidates in the speech dictionary unit are detected until the seating detection unit detects the seating of the occupant in the unlocking state of the vehicle. The set state is set as a recognition candidate by giving priority to a language group for boarding support, and when the seating detection unit detects the seating of the occupant, the language group for in-vehicle device operation is given a priority as a recognition candidate. The speech processing apparatus according to claim 2, wherein a setting state of recognition candidates in the speech dictionary unit is switched.
該切り替え制御部は、該状態検出部での検出結果に基づいて、該複数種類の辞書部のうちで、該音声認識部での音声認識において参照すべき辞書部を切り替えることにより、該音声辞書部における認識候補の設定状態を切り替えることを特徴とする、請求項１〜３のいずれか１項記載の音声処理装置。 The speech dictionary unit includes a plurality of types of dictionary units for storing language groups to be recognized as recognition candidates in accordance with the state of passengers inside the vehicle or personnel outside the vehicle, or the state of the vehicle,
The switching control unit switches the dictionary to be referred to in speech recognition at the speech recognition unit among the plurality of types of dictionary units based on the detection result at the state detection unit. The speech processing apparatus according to any one of claims 1 to 3, wherein a setting state of recognition candidates in the unit is switched.
該状態検出部が、上記車両のシートに着座した乗員の顔向きを検出する顔向き検出部をそなえ、
かつ、該切り替え制御部が、該状態検出部における検出結果に応じて、該複数の音声入力手段の動作状態および該音声辞書部における認識候補の設定状態のうちの双方を切り替えるべく、
該顔向き検出部での検出結果に基づいて、該室内に複数箇所そなえられた音声入力手段の動作状態を切り替えるとともに、
該音声入力手段の切り替え制御に連動して、該音声辞書部における認識候補の設定状態を切り替えることを特徴とする、請求項１〜５のいずれか１項記載の音声処理装置。 The voice input means is provided at a plurality of locations in the vehicle interior,
The state detection unit includes a face direction detection unit that detects a face direction of an occupant seated on the vehicle seat,
And the switching control unit switches between the operation state of the plurality of speech input means and the recognition candidate setting state in the speech dictionary unit according to the detection result in the state detection unit.
Based on the detection result in the face direction detection unit, the operation state of the voice input means provided in a plurality of locations in the room is switched,
The speech processing apparatus according to claim 1, wherein the setting state of recognition candidates in the speech dictionary unit is switched in conjunction with the switching control of the speech input means.
該状態検出部が、上記車両のシートに着座した乗員の体重を検出する体重検出部をそなえ、
かつ、該切り替え制御部が、該状態検出部における検出結果に応じて、該複数の音声入力手段の動作状態および該音声辞書部における認識候補の設定状態のうちの双方を切り替えるべく、
該体重検出部での検出結果に基づいて、該音声入力手段の動作状態を切り替えるとともに、
該音声入力手段の切り替え制御に連動して、該音声辞書部における認識候補の設定状態を切り替えることを特徴とする、請求項１〜５のいずれか１項記載の音声処理装置。 The voice input means is provided at a plurality of locations in the vehicle interior,
The state detection unit includes a weight detection unit that detects the weight of an occupant seated on the vehicle seat,
And the switching control unit switches between the operation state of the plurality of speech input means and the recognition candidate setting state in the speech dictionary unit according to the detection result in the state detection unit.
Based on the detection result in the weight detection unit, the operation state of the voice input means is switched,
The speech processing apparatus according to claim 1, wherein the setting state of recognition candidates in the speech dictionary unit is switched in conjunction with the switching control of the speech input means.
該状態検出部が、上記車両の車速を検出する車速検出部をそなえ、
かつ、該切り替え制御部が、該状態検出部における検出結果に応じて、該複数の音声入力手段の動作状態および該音声辞書部における認識候補の設定状態のうちの双方を切り替えるべく、
該車速検出部での検出結果に基づいて、該音声入力手段の動作状態を切り替えるとともに、
該音声入力手段の切り替え制御に連動して、該音声辞書部における認識候補の設定状態を切り替えることを特徴とする、請求項１〜５のいずれか１項記載の音声処理装置。 The voice input means is provided at a plurality of locations in the vehicle interior,
The state detection unit includes a vehicle speed detection unit that detects the vehicle speed of the vehicle,
And the switching control unit switches between the operation state of the plurality of speech input means and the recognition candidate setting state in the speech dictionary unit according to the detection result in the state detection unit.
Based on the detection result in the vehicle speed detector, the operation state of the voice input means is switched,
The speech processing apparatus according to claim 1, wherein the setting state of recognition candidates in the speech dictionary unit is switched in conjunction with the switching control of the speech input means.
該状態検出部が、上記乗員が着座しているシートの向きを検出するシート向き検出部をそなえ、
かつ、該切り替え制御部が、該状態検出部における検出結果に応じて、該複数の音声入力手段の動作状態および該音声辞書部における認識候補の設定状態のうちの双方を切り替えるべく、
該シート向き検出部での検出結果に基づいて、該音声入力手段の動作状態を切り替えるとともに、
該音声入力手段の切り替え制御に連動して、該音声辞書部における認識候補の設定状態を切り替えることを特徴とする、請求項１〜５のいずれか１項記載の音声処理装置。 The voice input means is provided at a plurality of locations in the vehicle interior,
The state detection unit includes a seat direction detection unit that detects the direction of the seat on which the occupant is seated,
And the switching control unit switches between the operation state of the plurality of speech input means and the recognition candidate setting state in the speech dictionary unit according to the detection result in the state detection unit.
Based on the detection result in the sheet orientation detection unit, the operation state of the voice input means is switched,
The speech processing apparatus according to claim 1, wherein the setting state of recognition candidates in the speech dictionary unit is switched in conjunction with the switching control of the speech input means.
該状態検出部が、上記乗員の口が動いたことを検出する口動き検出部をそなえ、
かつ、該切り替え制御部が、該状態検出部における検出結果に応じて、該複数の音声入力手段の動作状態および該音声辞書部における認識候補の設定状態のうちの双方を切り替えるべく、
該口動き検出部での検出結果に基づいて、該口が動いたことが検出された乗員の乗車位置に応じて、該室内に複数箇所にそなえられた音声入力手段の動作状態を切り替えるとともに、
該音声入力手段の切り替え制御に連動して、該音声辞書部における認識候補の設定状態を切り替えることを特徴とする、請求項１〜５のいずれか１項記載の音声処理装置。 The voice input means is provided at a plurality of locations in the vehicle interior,
The state detection unit includes a mouth movement detection unit that detects that the passenger's mouth has moved,
And the switching control unit switches between the operation state of the plurality of speech input means and the recognition candidate setting state in the speech dictionary unit according to the detection result in the state detection unit.
Based on the detection result in the mouth movement detection unit, the operation state of the voice input means provided in a plurality of locations in the room is switched according to the boarding position of the occupant where the mouth has been detected, and
The speech processing apparatus according to claim 1, wherein the setting state of recognition candidates in the speech dictionary unit is switched in conjunction with the switching control of the speech input means.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2006124780A JP2007298592A (en) | 2006-04-28 | 2006-04-28 | Speech processing apparatus |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2006124780A JP2007298592A (en) | 2006-04-28 | 2006-04-28 | Speech processing apparatus |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2007298592A true JP2007298592A (en) | 2007-11-15 |
Family
ID=38768154
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2006124780A Withdrawn JP2007298592A (en) | 2006-04-28 | 2006-04-28 | Speech processing apparatus |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2007298592A (en) |
Cited By (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2009223170A (en) * | 2008-03-18 | 2009-10-01 | Advanced Telecommunication Research Institute International | Speech recognition system |
| WO2017081960A1 (en) * | 2015-11-09 | 2017-05-18 | 三菱自動車工業株式会社 | Voice recognition control system |
| JP2017090612A (en) * | 2015-11-09 | 2017-05-25 | 三菱自動車工業株式会社 | Voice recognition control system |
| JP2017090615A (en) * | 2015-11-09 | 2017-05-25 | 三菱自動車工業株式会社 | Voice recognition control system |
| CN111033611A (en) * | 2017-03-23 | 2020-04-17 | 乔伊森安全***收购有限责任公司 | System and method for associating mouth images with input instructions |
| CN111559317A (en) * | 2019-02-14 | 2020-08-21 | 本田技研工业株式会社 | Agent device, control method for agent device, and storage medium |
| CN113393687A (en) * | 2020-03-12 | 2021-09-14 | 奥迪股份公司 | Driving assistance device, driving assistance method, vehicle, and medium |
-
2006
- 2006-04-28 JP JP2006124780A patent/JP2007298592A/en not_active Withdrawn
Cited By (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2009223170A (en) * | 2008-03-18 | 2009-10-01 | Advanced Telecommunication Research Institute International | Speech recognition system |
| WO2017081960A1 (en) * | 2015-11-09 | 2017-05-18 | 三菱自動車工業株式会社 | Voice recognition control system |
| JP2017090611A (en) * | 2015-11-09 | 2017-05-25 | 三菱自動車工業株式会社 | Voice recognition control system |
| JP2017090612A (en) * | 2015-11-09 | 2017-05-25 | 三菱自動車工業株式会社 | Voice recognition control system |
| JP2017090615A (en) * | 2015-11-09 | 2017-05-25 | 三菱自動車工業株式会社 | Voice recognition control system |
| CN111033611A (en) * | 2017-03-23 | 2020-04-17 | 乔伊森安全***收购有限责任公司 | System and method for associating mouth images with input instructions |
| JP2020518844A (en) * | 2017-03-23 | 2020-06-25 | ジョイソン セイフティ システムズ アクイジション エルエルシー | System and method for correlating mouth images with input commands |
| JP7337699B2 (en) | 2017-03-23 | 2023-09-04 | ジョイソン セイフティ システムズ アクイジション エルエルシー | Systems and methods for correlating mouth images with input commands |
| CN111559317A (en) * | 2019-02-14 | 2020-08-21 | 本田技研工业株式会社 | Agent device, control method for agent device, and storage medium |
| CN111559317B (en) * | 2019-02-14 | 2024-03-19 | 本田技研工业株式会社 | Agent device, method for controlling agent device, and storage medium |
| CN113393687A (en) * | 2020-03-12 | 2021-09-14 | 奥迪股份公司 | Driving assistance device, driving assistance method, vehicle, and medium |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP2007298592A (en) | Speech processing apparatus | |
| CN107656465A (en) | Expansible Vehicular system | |
| WO2017081960A1 (en) | Voice recognition control system | |
| US8005681B2 (en) | Speech dialog control module | |
| JP4859982B2 (en) | Voice recognition device | |
| JP6604151B2 (en) | Speech recognition control system | |
| JP2006030447A (en) | Voice recognition system and moving body and vehicle having the system | |
| CN112397065A (en) | Voice interaction method and device, computer readable storage medium and electronic equipment | |
| US10431221B2 (en) | Apparatus for selecting at least one task based on voice command, vehicle including the same, and method thereof | |
| JP2022028772A (en) | In-vehicle device for analyzing voice production based on audio data and image data, method for processing voice production, and program | |
| JP2007216920A (en) | Seat controller for automobile, seat control program and on-vehicle navigation device | |
| JP2008105608A (en) | Voice responding control device for vehicle | |
| JP2018027731A (en) | On-vehicle device, control method of on-vehicle device, and content providing system | |
| KR20180119929A (en) | A voice detection apparatus, a method thereof and a vehicle including the same | |
| JP2004354930A (en) | Speech recognition system | |
| JP2006039267A (en) | Voice input device | |
| JP2007147962A (en) | On-vehicle use voice recognition device, open-close body control device, and voice recognition method | |
| CN110211579A (en) | A kind of voice instruction recognition method, apparatus and system | |
| JP4561222B2 (en) | Voice input device | |
| JP2020157944A (en) | Vehicle equipment controller, vehicle equipment control method, and program | |
| US11580958B2 (en) | Method and device for recognizing speech in vehicle | |
| JP4649905B2 (en) | Voice input device | |
| CN113382892B (en) | Space management system, mobile body, computer-readable storage medium, and space management method | |
| WO2020240789A1 (en) | Speech interaction control device and speech interaction control method | |
| JP2006215418A (en) | Voice input device and voice input method |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A300 | Application deemed to be withdrawn because no request for examination was validly filed |
Free format text: JAPANESE INTERMEDIATE CODE: A300 Effective date: 20090707 |