JPS6184694A - 認識用辞書学習方法 - Google Patents
認識用辞書学習方法Info
- Publication number
- JPS6184694A JPS6184694A JP59206656A JP20665684A JPS6184694A JP S6184694 A JPS6184694 A JP S6184694A JP 59206656 A JP59206656 A JP 59206656A JP 20665684 A JP20665684 A JP 20665684A JP S6184694 A JPS6184694 A JP S6184694A
- Authority
- JP
- Japan
- Prior art keywords
- speech
- speech recognition
- feature
- dictionary
- recognition
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 239000013598 vector Substances 0.000 claims description 63
- 238000000034 method Methods 0.000 claims description 30
- 230000000694 effects Effects 0.000 claims description 5
- 239000011159 matrix material Substances 0.000 claims description 4
- 239000000284 extract Substances 0.000 claims description 3
- 238000007619 statistical method Methods 0.000 claims 1
- 238000004458 analytical method Methods 0.000 description 9
- 238000001228 spectrum Methods 0.000 description 7
- 230000008569 process Effects 0.000 description 6
- 238000000605 extraction Methods 0.000 description 5
- 239000002131 composite material Substances 0.000 description 4
- 238000010586 diagram Methods 0.000 description 3
- 238000003909 pattern recognition Methods 0.000 description 3
- 230000005856 abnormality Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000002123 temporal effect Effects 0.000 description 2
- 238000007476 Maximum Likelihood Methods 0.000 description 1
- 230000003321 amplification Effects 0.000 description 1
- 239000003990 capacitor Substances 0.000 description 1
- 230000008602 contraction Effects 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- BTCSSZJGUNDROE-UHFFFAOYSA-N gamma-aminobutyric acid Chemical compound NCCCC(O)=O BTCSSZJGUNDROE-UHFFFAOYSA-N 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000003199 nucleic acid amplification method Methods 0.000 description 1
- 238000012567 pattern recognition method Methods 0.000 description 1
- 230000008685 targeting Effects 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
- 210000001260 vocal cord Anatomy 0.000 description 1
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/06—Creation of reference templates; Training of speech recognition systems, e.g. adaptation to the characteristics of the speaker's voice
- G10L15/063—Training
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/20—Speech recognition techniques specially adapted for robustness in adverse environments, e.g. in noise, of stress induced speech
Landscapes
- Engineering & Computer Science (AREA)
- Computational Linguistics (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- Artificial Intelligence (AREA)
- Image Analysis (AREA)
Abstract
(57)【要約】本公報は電子出願前の出願データであるた
め要約のデータは記録されません。
め要約のデータは記録されません。
Description
【発明の詳細な説明】
〔発明の技術分野〕
本発明は、音声認識装置における認識率の向上を効果的
に図り得る音声認識用辞書学習方式に関する。
に図り得る音声認識用辞書学習方式に関する。
近時、文字認識や音声認識等のパターン認識技術の発達
が目覚ましく、音声の分野でも単語音声認識装置等が実
用化されつつある。しかして、種々提唱されている音声
認識装置の大部分は、動的計画法(DPマツチング法)
を用いて入力音声パターンの時間軸伸縮を行い、この時
間軸伸縮されて正規化された入力音声パターンと予め準
備された認識辞書パターン(標準パターン)との照合を
行う如く構成されている。
が目覚ましく、音声の分野でも単語音声認識装置等が実
用化されつつある。しかして、種々提唱されている音声
認識装置の大部分は、動的計画法(DPマツチング法)
を用いて入力音声パターンの時間軸伸縮を行い、この時
間軸伸縮されて正規化された入力音声パターンと予め準
備された認識辞書パターン(標準パターン)との照合を
行う如く構成されている。
ところが上記認識辞書パターンには音声パターンの変動
に対する統計的情報が全く含まれていない為、雑音の影
響を受は易く、また不特定話者を対象とした認識やその
高性能化の上で限界があった。従って、不特定多数の話
者を対象とする電話単語音声認識や認識対象カテゴリの
数が多い単語音声認識装置、更には音素・音節の認識に
あっては、未だに認識率が低く、音声認識技術における
大きな課題となっている。
に対する統計的情報が全く含まれていない為、雑音の影
響を受は易く、また不特定話者を対象とした認識やその
高性能化の上で限界があった。従って、不特定多数の話
者を対象とする電話単語音声認識や認識対象カテゴリの
数が多い単語音声認識装置、更には音素・音節の認識に
あっては、未だに認識率が低く、音声認識技術における
大きな課題となっている。
ところで、予め多数の音声パターンを収集し、これらの
音声パターンを用いて音声認識用辞書の学習を行って、
その認識性能(認識率)を高めることが、統計的パター
ン認識理論の立場から良く知られている。しかし、認識
対象とするカテゴリーの数の多い音声認識装置や、実用
に際して認識対象とする語雷の変更がしばしば要求され
る単語音声認識装置では、上述したように多数の音声パ
ターンを予め収集することが甚だ困難である。
音声パターンを用いて音声認識用辞書の学習を行って、
その認識性能(認識率)を高めることが、統計的パター
ン認識理論の立場から良く知られている。しかし、認識
対象とするカテゴリーの数の多い音声認識装置や、実用
に際して認識対象とする語雷の変更がしばしば要求され
る単語音声認識装置では、上述したように多数の音声パ
ターンを予め収集することが甚だ困難である。
また特定話者用の音声認識i置や、話者適応型の音声認
識装置では、同一話者が同じカテゴリを多数回発声して
その音声パターンを入力することが必要であり、利用者
にとって多大な負担となっている。更には不特定話者用
の音声認識装置においても、少数の音声パターンからだ
けでは良好な辞書が設計できないという問題がある。こ
の為、!i垂の変更あるいはコストの面でも、更には時
間的な面でも音声認識用辞書の充実化が困難であり、音
声認識装置普及の大きな妨げなっていた。
識装置では、同一話者が同じカテゴリを多数回発声して
その音声パターンを入力することが必要であり、利用者
にとって多大な負担となっている。更には不特定話者用
の音声認識装置においても、少数の音声パターンからだ
けでは良好な辞書が設計できないという問題がある。こ
の為、!i垂の変更あるいはコストの面でも、更には時
間的な面でも音声認識用辞書の充実化が困難であり、音
声認識装置普及の大きな妨げなっていた。
本発明はこのような事情を考慮してなされたもので、そ
の目的とするところは、音声認識に供する音声認識用辞
書を少数の音声パターンを効果的、に用いて学習し、そ
の認識率の向上を図り得る実用性の高い音声認識用辞書
学習方式を提供することにある。
の目的とするところは、音声認識に供する音声認識用辞
書を少数の音声パターンを効果的、に用いて学習し、そ
の認識率の向上を図り得る実用性の高い音声認識用辞書
学習方式を提供することにある。
本発明は入力音声パターンを分析して得られる音声特徴
パラメータの時系列の一部から音声認識用辞書の作成に
必要な音声特徴ベクトルを抽出する際に、7上記入力音
声のレベル変動、発話速度の変動、話者による変動、電
話回線による変動、ピッチによる変動、騒°音による変
動など種々の音声特徴ベクトルの変動傾向を考慮して、
前記音声特徴パラメータの一時系列から複数の音声特徴
ベクトルを抽出し、これらの音声特徴ベクトルを用いて
音声認識用辞書を学習するようにしたものである。
パラメータの時系列の一部から音声認識用辞書の作成に
必要な音声特徴ベクトルを抽出する際に、7上記入力音
声のレベル変動、発話速度の変動、話者による変動、電
話回線による変動、ピッチによる変動、騒°音による変
動など種々の音声特徴ベクトルの変動傾向を考慮して、
前記音声特徴パラメータの一時系列から複数の音声特徴
ベクトルを抽出し、これらの音声特徴ベクトルを用いて
音声認識用辞書を学習するようにしたものである。
つまり、入力音声パターンに関するパターン変動の要因
に関する知識を利用して、実際に認識処理に使用する音
声特徴ベクトル以外の音声特徴ベクトルをも入力音声の
特徴パラメータの時系列から抽出し、これらの音声特徴
ベクトルを用いて音声認識用辞書の学習を行わしめるこ
とにより、比較的少数の入力音声データから、上記音声
認識技術の性能向上、充実化等を簡易に、且つ効率良く
行うようにしたものである。
に関する知識を利用して、実際に認識処理に使用する音
声特徴ベクトル以外の音声特徴ベクトルをも入力音声の
特徴パラメータの時系列から抽出し、これらの音声特徴
ベクトルを用いて音声認識用辞書の学習を行わしめるこ
とにより、比較的少数の入力音声データから、上記音声
認識技術の性能向上、充実化等を簡易に、且つ効率良く
行うようにしたものである。
かくして本発明によれば、音声パターンの変動傾向に関
する知識を考慮して、入力音声パターンの音声特徴パラ
メータの時系列から複数の音声特徴ベクトルを生成−し
、これらの音声特徴ベクトルを用いて音声認識用辞書の
学習(作成)が行うので、少数の音声パターンから、容
易に信頼性の高い辞書を作成することが可能となり、音
声認識率の向上を図ることが可能となる。つまり、比較
的少ない入力音声パターンを有効に利用して上記辞書の
充実化を容易に図ることが可能となる。
する知識を考慮して、入力音声パターンの音声特徴パラ
メータの時系列から複数の音声特徴ベクトルを生成−し
、これらの音声特徴ベクトルを用いて音声認識用辞書の
学習(作成)が行うので、少数の音声パターンから、容
易に信頼性の高い辞書を作成することが可能となり、音
声認識率の向上を図ることが可能となる。つまり、比較
的少ない入力音声パターンを有効に利用して上記辞書の
充実化を容易に図ることが可能となる。
特に、本発明は音声パターンの広範な変動を吸収できる
統計的パターン認識方式と組合せると効果的である。例
えば文字認識の分野で提案され・、漢字認識でその有効
性が確認されている複合類似度法をそのまま単語・音声
認識に適用すると、その単i;i認識用辞書設計の際に
多数の音声パターンを必要とするが、本発明を適用する
ことによって良好な音声認識用辞書を非常に効率的に得
ることが可能となる等の多大なる効果が奏せられる。
統計的パターン認識方式と組合せると効果的である。例
えば文字認識の分野で提案され・、漢字認識でその有効
性が確認されている複合類似度法をそのまま単語・音声
認識に適用すると、その単i;i認識用辞書設計の際に
多数の音声パターンを必要とするが、本発明を適用する
ことによって良好な音声認識用辞書を非常に効率的に得
ることが可能となる等の多大なる効果が奏せられる。
以下、図面を参照して本発明の実施例につき説明する。
第1図は、本発明による音声認識用辞書学習方式を組込
んだ音声認識装置の概略構成図である。
んだ音声認識装置の概略構成図である。
マイクロフォン等を介して入力された入力音声は、例え
ば8チヤンネルのフィルタバンクからなる音響分析部1
に入力され、一定の分析フレーム周期、例えば1011
8毎に分析されてその音声特徴パラメータとして時系列
に出力される。尚、音声特徴パラメータとしては、上記
8チヤンネルのフィルタバンクの各出力を2乗検波して
得られる周波数スペクトルや、ケブヌトラム係数、LP
G係数、或いは離数的フーリエ変換等のディジタル信号
処理により得られるものや、更にはスイッチド・キャパ
シタフィルタやアナログフィルタ等のアナログ分析によ
り得られるもの等であっても良い。そして音声認識処理
や!!識辞書の作成(学習)は、通常これらの特徴パラ
メータの幾つかを用いて行われる。尚、上記音響分析処
理については本発明の要旨とは直接関係ないので、ここ
では上記音響分析部1が8チヤンネルのフィルタバンク
にて構成されるものとして以下の説明を行う。
ば8チヤンネルのフィルタバンクからなる音響分析部1
に入力され、一定の分析フレーム周期、例えば1011
8毎に分析されてその音声特徴パラメータとして時系列
に出力される。尚、音声特徴パラメータとしては、上記
8チヤンネルのフィルタバンクの各出力を2乗検波して
得られる周波数スペクトルや、ケブヌトラム係数、LP
G係数、或いは離数的フーリエ変換等のディジタル信号
処理により得られるものや、更にはスイッチド・キャパ
シタフィルタやアナログフィルタ等のアナログ分析によ
り得られるもの等であっても良い。そして音声認識処理
や!!識辞書の作成(学習)は、通常これらの特徴パラ
メータの幾つかを用いて行われる。尚、上記音響分析処
理については本発明の要旨とは直接関係ないので、ここ
では上記音響分析部1が8チヤンネルのフィルタバンク
にて構成されるものとして以下の説明を行う。
しかして入力音声のvt識処理は、上記分析部゛1の8
チヤンネルのフィルタバンク出力である短時間周波数ス
ペクトルの時系列から、その一部を入力音声特徴ベクト
ルとして抽出して行われる。この場合、認識対象とする
音声の単位が、例えば単語、音節、音素等として異なれ
ば、その特徴ベクトルの抽出法も異なったものとなる。
チヤンネルのフィルタバンク出力である短時間周波数ス
ペクトルの時系列から、その一部を入力音声特徴ベクト
ルとして抽出して行われる。この場合、認識対象とする
音声の単位が、例えば単語、音節、音素等として異なれ
ば、その特徴ベクトルの抽出法も異なったものとなる。
今、単語音声認識を例に説明すると、音声特徴ベクトル
抽出部2では、例えば先ず入力音声の始端Sおよび終端
Eを、音声パワーのレベル変化や、その持続時間等を用
いて決定する。このようにして決定された入力音声の始
端Sから終端Eまでの時間区間を、例えば第2図に示す
−ように等間隔に7分割し、その始終端を含めた8点を
選択して各時点における前記フィルタバンク出力を選択
的に抽出して、時間軸方向8点、周波数軸方向8チヤン
ネルの64 (8x8)次元のベクトルを前記入力音声
の単語特徴ベクトルXとして抽出している。
抽出部2では、例えば先ず入力音声の始端Sおよび終端
Eを、音声パワーのレベル変化や、その持続時間等を用
いて決定する。このようにして決定された入力音声の始
端Sから終端Eまでの時間区間を、例えば第2図に示す
−ように等間隔に7分割し、その始終端を含めた8点を
選択して各時点における前記フィルタバンク出力を選択
的に抽出して、時間軸方向8点、周波数軸方向8チヤン
ネルの64 (8x8)次元のベクトルを前記入力音声
の単語特徴ベクトルXとして抽出している。
尚、認識対象が上記単語以外の場合には、他の手法を用
いてその特徴ベクトルが抽出されることは云うまでもな
い。
いてその特徴ベクトルが抽出されることは云うまでもな
い。
パターン照合部3は、予め音声認識用辞書メモリ4に記
憶されている音声認識用辞書と、上記の如く抽出された
単語特徴ベクトルとの間のパターン照合を、例えば複合
類似度法を用いて行う。即ち、パターン照合部3では、
辞書メモリ4に予め認識対象単語毎に用意された辞書と
、上記音声特徴ベクトルXとの複合類似度値を次式で計
算して、そのパターン照合を行もている。
憶されている音声認識用辞書と、上記の如く抽出された
単語特徴ベクトルとの間のパターン照合を、例えば複合
類似度法を用いて行う。即ち、パターン照合部3では、
辞書メモリ4に予め認識対象単語毎に用意された辞書と
、上記音声特徴ベクトルXとの複合類似度値を次式で計
算して、そのパターン照合を行もている。
但し゛、上式において単H!λの音声認識用辞書は、a
Ill(4を定数、vl(L)を固有ベクトルとして与
えられる。パターン照合部3は、入力音声特徴ベクトル
Xと、辞書メモリ4に登録された各I!!識対象単語の
辞書との類似度値3(L)をそれぞれ計算し、その中で
最大の類似度値S(4を得る単語2を認識結果として出
力している。このような過程を経て前記入力音声が単語
認識される。
Ill(4を定数、vl(L)を固有ベクトルとして与
えられる。パターン照合部3は、入力音声特徴ベクトル
Xと、辞書メモリ4に登録された各I!!識対象単語の
辞書との類似度値3(L)をそれぞれ計算し、その中で
最大の類似度値S(4を得る単語2を認識結果として出
力している。このような過程を経て前記入力音声が単語
認識される。
さて本発明方式は、上述したようにしてパターン照合に
用いられる音声認識用辞書を効率良く学習し、改良し、
高性能化するものである。
用いられる音声認識用辞書を効率良く学習し、改良し、
高性能化するものである。
しかして前記音声認識用辞書の学習時には、学画用特徴
ベクトル抽出部5は、前記音響分析部1からの、8チヤ
ンネルのフィルタバンク出力を得て、前述したg識時に
用いる特徴ベクトルを抽出すると共に、その特徴ベクト
ルの変動傾向を考慮した学習処理の為の他の特徴ベクト
ルをも抽出している。つまりこの特徴ベクトル抽出部5
では前記音響分析部1が入力音声を分析して求めた1つ
の特徴パラメータの時系列から、前記認識処理に供せら
れる特徴ベクトルを含む複数の学習用音声特徴ベクトル
を抽出している。
ベクトル抽出部5は、前記音響分析部1からの、8チヤ
ンネルのフィルタバンク出力を得て、前述したg識時に
用いる特徴ベクトルを抽出すると共に、その特徴ベクト
ルの変動傾向を考慮した学習処理の為の他の特徴ベクト
ルをも抽出している。つまりこの特徴ベクトル抽出部5
では前記音響分析部1が入力音声を分析して求めた1つ
の特徴パラメータの時系列から、前記認識処理に供せら
れる特徴ベクトルを含む複数の学習用音声特徴ベクトル
を抽出している。
例えば前述したように単語音声!!!!!識を対象とす
る場合には、先ず入力音声パワーのレベル変動を考慮し
て、入力音声パワーのレベルを意図的に増加、減少をさ
せる。つまり、前記8チヤンネルフイルタバンクの出力
値を数段階に、例えば±10田の範囲で適当に3段階に
変化させて複数種の前記特徴パラメータの時系列を、例
えば第2因中I。
る場合には、先ず入力音声パワーのレベル変動を考慮し
て、入力音声パワーのレベルを意図的に増加、減少をさ
せる。つまり、前記8チヤンネルフイルタバンクの出力
値を数段階に、例えば±10田の範囲で適当に3段階に
変化させて複数種の前記特徴パラメータの時系列を、例
えば第2因中I。
1’、I“の如く得ている。これらの時系列1. I
Zl”に関して、先に述べように音声の始終端S。
Zl”に関して、先に述べように音声の始終端S。
Eをそれぞれ検出し、その特徴ベクトルx、x’。
X nを抽出して、学習部6に与えている。学習部6で
は、このようにして求められた入力音声の複数の学習用
特徴ベクトルからその共分散行列を求め、この共分散行
列をKL展開する等して音声認識用辞書を計算している
。このようにして求められた辞書が前記音声認識用辞書
メモリー4に与えられ、辞書メモリー4に格納された辞
書に追加、或いはその辞書の更新が行われる。
は、このようにして求められた入力音声の複数の学習用
特徴ベクトルからその共分散行列を求め、この共分散行
列をKL展開する等して音声認識用辞書を計算している
。このようにして求められた辞書が前記音声認識用辞書
メモリー4に与えられ、辞書メモリー4に格納された辞
書に追加、或いはその辞書の更新が行われる。
以上の説明は複合類似度法を適用する際の音声認識用辞
書の学習処理であるが、他の識別法、例えばマハラノビ
ス距離、最尤法等、各種の識別法に応じて、辞書学習の
処理が異なることは云うまでもない。換言すれば、認識
処理の識別法に係わりなく、入力音声を分析して得られ
た1つの特徴パラメータの時系列から、認識時に抽出す
る音声特徴ベクトルと、それ以外の学習用音声特徴ベク
トルとを、例えば音声パターンの変動傾向を考慮して複
数抽出し、これらの特徴ベクトルを用いてIll辞書の
学習を行うようにすれば良い。
書の学習処理であるが、他の識別法、例えばマハラノビ
ス距離、最尤法等、各種の識別法に応じて、辞書学習の
処理が異なることは云うまでもない。換言すれば、認識
処理の識別法に係わりなく、入力音声を分析して得られ
た1つの特徴パラメータの時系列から、認識時に抽出す
る音声特徴ベクトルと、それ以外の学習用音声特徴ベク
トルとを、例えば音声パターンの変動傾向を考慮して複
数抽出し、これらの特徴ベクトルを用いてIll辞書の
学習を行うようにすれば良い。
かくして本方式によれば、入力音声に関する先験的知識
を利用して該入力音声から複数の特徴ベクトルを抽出す
るので、少ない入力音声情報から多数の学習用情報を得
ることができ、これらを用いて認識辞書の学習ま効果的
に行うことが可能となる。例えば入力音声のレベルに関
する先験的知識として、発話の大きさや話者とマイクロ
ホンとの距離の差異、あるいは増幅率の変動等に起因す
る上記入力音声のレベル変動が生じることが一般的に知
られている。従ってこの場合には、本来の音声パターン
から単語音声の始終端S、Eを検出し、その単語音声区
間を7等分して得られる単語音声の特徴ベクトルXを得
ると共に、例えば上記入力音声レベルを±108変動さ
せた音声パターンの始終端S’、E’および3 tp、
E nをそれぞれ求め、これらの始終端S’、E’
およびS 、E ITに基いて前記特徴ベクトルXとは
異なる単語特徴ベクトルx’、x“を得る。
を利用して該入力音声から複数の特徴ベクトルを抽出す
るので、少ない入力音声情報から多数の学習用情報を得
ることができ、これらを用いて認識辞書の学習ま効果的
に行うことが可能となる。例えば入力音声のレベルに関
する先験的知識として、発話の大きさや話者とマイクロ
ホンとの距離の差異、あるいは増幅率の変動等に起因す
る上記入力音声のレベル変動が生じることが一般的に知
られている。従ってこの場合には、本来の音声パターン
から単語音声の始終端S、Eを検出し、その単語音声区
間を7等分して得られる単語音声の特徴ベクトルXを得
ると共に、例えば上記入力音声レベルを±108変動さ
せた音声パターンの始終端S’、E’および3 tp、
E nをそれぞれ求め、これらの始終端S’、E’
およびS 、E ITに基いて前記特徴ベクトルXとは
異なる単語特徴ベクトルx’、x“を得る。
このようにして学習の際に用いる特徴ベクトルのデータ
量を増加基せて前記!!!!!識辞書の学習を行うこと
ができる。また上記レベル変動の他に、発話速度の変化
や伸縮に関する先験的知識を利用すれば、発話の時間的
変動傾向を考慮して音声特徴ベクトルのりサンプル点を
変えることにより、複数の学習用単語特徴ベクトルを作
成して認識辞書の学習に用いる特徴べ゛クトルのデータ
mの増加を図ることが可能となる。
量を増加基せて前記!!!!!識辞書の学習を行うこと
ができる。また上記レベル変動の他に、発話速度の変化
や伸縮に関する先験的知識を利用すれば、発話の時間的
変動傾向を考慮して音声特徴ベクトルのりサンプル点を
変えることにより、複数の学習用単語特徴ベクトルを作
成して認識辞書の学習に用いる特徴べ゛クトルのデータ
mの増加を図ることが可能となる。
更には入力音声パターンの時間軸方向の変動の他に、不
特定話者を対象とした場合に生じる話者の変動や電話回
線の周波数特性の変動等、周波数軸方向の変動に関する
知識も同様に利用することができる。具体的には、例え
ば前記8チヤンネルのフィルタ出力、つまり周波数スペ
クトルの傾きや、フォルマント周波数の変動、或いはピ
ッチ周波数の影響に関する知識も積極的に取り入れ、学
習用特徴ベクトルの抽出を行えば効果的である。
特定話者を対象とした場合に生じる話者の変動や電話回
線の周波数特性の変動等、周波数軸方向の変動に関する
知識も同様に利用することができる。具体的には、例え
ば前記8チヤンネルのフィルタ出力、つまり周波数スペ
クトルの傾きや、フォルマント周波数の変動、或いはピ
ッチ周波数の影響に関する知識も積極的に取り入れ、学
習用特徴ベクトルの抽出を行えば効果的である。
尚、本発明は詳述した実施例に限定されるものではない
。例えば上述した単語音声認識以外にも、音素認識、音
節認識、連続単語認識、母音認識等にも適用することが
できる。また1フレ一ム分の音声パラメータを用いる母
音認識でも、前述したレベル変動やフォルマントの変動
スペクトルの傾きに変形を与えて複数の学習用特徴ベク
トルを作成するようにすれば、その認識辞書の学習を効
果的に行い得る。
。例えば上述した単語音声認識以外にも、音素認識、音
節認識、連続単語認識、母音認識等にも適用することが
できる。また1フレ一ム分の音声パラメータを用いる母
音認識でも、前述したレベル変動やフォルマントの変動
スペクトルの傾きに変形を与えて複数の学習用特徴ベク
トルを作成するようにすれば、その認識辞書の学習を効
果的に行い得る。
また、連続単語認識にあっても、例えば単語境界を?!
2数点として変化させて単語特徴ベクトルの抽出を行え
ば、少数パターンで効率の良い辞書学習が可能となる。
2数点として変化させて単語特徴ベクトルの抽出を行え
ば、少数パターンで効率の良い辞書学習が可能となる。
また単音節認識や子音r!l識についても、特徴ベクト
ルの時間方向の移動を考慮してその時間軸を移動させて
複数の時間周波数スペクトルを抽出するようにすれば良
い。
ルの時間方向の移動を考慮してその時間軸を移動させて
複数の時間周波数スペクトルを抽出するようにすれば良
い。
また音声パターンの変形としては、背景騒音(ノイズ)
による影響が大きい。従ってこのような場合には、例え
ば第3図に示すようにノイズ発生器7を用いて音声入力
部8における入力音声波形に、或いは音響分析部1にお
ける音声特徴パラメータに、更には特徴ベクトル抽出部
5において、予め準備した幾つかの騒音を適当なレベル
で付加して学習用特徴ベクトルを作成するようにすれば
良い。このようにすればノイズの影響を考慮した辞書を
簡易に作成することができ、実用的利点が絶大である。
による影響が大きい。従ってこのような場合には、例え
ば第3図に示すようにノイズ発生器7を用いて音声入力
部8における入力音声波形に、或いは音響分析部1にお
ける音声特徴パラメータに、更には特徴ベクトル抽出部
5において、予め準備した幾つかの騒音を適当なレベル
で付加して学習用特徴ベクトルを作成するようにすれば
良い。このようにすればノイズの影響を考慮した辞書を
簡易に作成することができ、実用的利点が絶大である。
また本発明に係る辞書学習方式は、音声以外の音響信号
や振動信号のパターン認識にも適用可能である。例えば
ボール′ベアリングの異常を音響振動信号で診断する場
合やエンジンの故障の発見、更には声帯の異常の診断、
話者認識や話者照合にも適用できる。このように本発明
では、認識用特徴ベクトルを先験的知識を用いて変形さ
せて?!!数の学習用特徴ベクトルを得るものであるか
ら、その変形の傾向については認識対象とする音声や音
響信号の性質に応じて、その適用分野毎に設定すれば良
い。要するに本発明はその要旨を逸脱しない範囲で種々
変形して実施することができる。
や振動信号のパターン認識にも適用可能である。例えば
ボール′ベアリングの異常を音響振動信号で診断する場
合やエンジンの故障の発見、更には声帯の異常の診断、
話者認識や話者照合にも適用できる。このように本発明
では、認識用特徴ベクトルを先験的知識を用いて変形さ
せて?!!数の学習用特徴ベクトルを得るものであるか
ら、その変形の傾向については認識対象とする音声や音
響信号の性質に応じて、その適用分野毎に設定すれば良
い。要するに本発明はその要旨を逸脱しない範囲で種々
変形して実施することができる。
このように本発明は少数の入カバターンを有効に用いて
、高性能で且つ効率的に辞書を作成するので、種々の分
野での経済的波及効果は多大である。特に、多数のデー
タの収集が困難な場合における効果は絶大である。
、高性能で且つ効率的に辞書を作成するので、種々の分
野での経済的波及効果は多大である。特に、多数のデー
タの収集が困難な場合における効果は絶大である。
第1図は本発明の一実施例方式を適用した単語音声認識
装冨の概略構成図、第2図は学習用5ft徴ベクトルの
生成概念を示す図、第3図は雑音を考慮した特徴ベクト
ルの生成を行う為の装置構成例を示す因である。 1・・・音響分析部、2・・・認識用特徴ベクトル抽出
部、3・・・パターン照合部、4・・・音声認識用辞書
メモリ、5・・・学習用特徴ベクトル抽出部、6・・・
学習部、1・・・ノイズ発生器、8・・・音声入力部。 出顆人代理人 弁理士 鈴江武彦 第1図 第3に
装冨の概略構成図、第2図は学習用5ft徴ベクトルの
生成概念を示す図、第3図は雑音を考慮した特徴ベクト
ルの生成を行う為の装置構成例を示す因である。 1・・・音響分析部、2・・・認識用特徴ベクトル抽出
部、3・・・パターン照合部、4・・・音声認識用辞書
メモリ、5・・・学習用特徴ベクトル抽出部、6・・・
学習部、1・・・ノイズ発生器、8・・・音声入力部。 出顆人代理人 弁理士 鈴江武彦 第1図 第3に
Claims (6)
- (1)入力音声を分析して該入力音声の特徴パラメータ
の時系列を求め、この特徴パラメータの時系列の一部か
ら音声特徴ベクトルを抽出し、予め登録された音声認識
用辞書と上記入力音声特徴ベクトルとをパターン照合し
て前記入力音声を認識する音声認識装置における上記音
声認識用辞書を学習するに際し、前記入力音声を分析し
て得られる特徴パラメータの時系列から、認識処理に用
いられ音声特徴ベクトルを含む複数の音声特徴ベクトル
を求め、これらの音声特徴ベクトルを利用して前記音声
認識用辞書を学習してなることを特徴とする音声認識用
辞書学習方式。 - (2)音声認識処理における音声特徴ベクトルと音声認
識用辞書とのパターン照合は、統計的方法により行われ
るものである特許請求の範囲第1項記載の音声認識用辞
書学習方式。 - (3)音声認識用辞書は、入力音声を分析して得られる
特徴パラメータの時系列から抽出される複数の音声特徴
ベクトルの共分散行列を求め、この共分散行列を展開し
て計算されるものである特許請求の範囲第1項記載の音
声認識用辞書学習方式。 - (4)音声特徴ベクトルは、単語、音節、音素、または
これらの複数の特徴を表現してなるものである特許請求
の範囲第1項記載の音声認識用辞書学習方式。 - (5)音声認識用辞書の学習に用いられる音声特徴ベク
トルは、入力音声を分析して得られる特徴パラメータの
時系列から抽出される複数の音声特徴ベクトル、および
その音声特徴ベクトルに騒音による影響を加えたベクト
ルからなるものである特許請求の範囲第1項記載の音声
認識用辞書学習方式。 - (6)騒音の影響は、入力音声、この入力音声を分析し
てなる特徴パラメータの時系列、またはこの特徴パラメ
ータの時系列から抽出される音声特徴ベクトルに加えら
れる雑音として与えられるものである特許請求の範囲第
5項記載の音声認識用辞書学習方式。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP59206656A JPH0792673B2 (ja) | 1984-10-02 | 1984-10-02 | 認識用辞書学習方法 |
US06/775,398 US4783802A (en) | 1984-10-02 | 1985-09-12 | Learning system of dictionary for speech recognition |
DE8585112174T DE3579662D1 (de) | 1984-10-02 | 1985-09-25 | System zum lernen von referenzmustern fuer spracherkennung. |
EP85112174A EP0178509B1 (en) | 1984-10-02 | 1985-09-25 | Dictionary learning system for speech recognition |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP59206656A JPH0792673B2 (ja) | 1984-10-02 | 1984-10-02 | 認識用辞書学習方法 |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP6042389A Division JPH0786759B2 (ja) | 1994-03-14 | 1994-03-14 | 音声認識用辞書学習方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JPS6184694A true JPS6184694A (ja) | 1986-04-30 |
JPH0792673B2 JPH0792673B2 (ja) | 1995-10-09 |
Family
ID=16526959
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP59206656A Expired - Lifetime JPH0792673B2 (ja) | 1984-10-02 | 1984-10-02 | 認識用辞書学習方法 |
Country Status (4)
Country | Link |
---|---|
US (1) | US4783802A (ja) |
EP (1) | EP0178509B1 (ja) |
JP (1) | JPH0792673B2 (ja) |
DE (1) | DE3579662D1 (ja) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2016122110A (ja) * | 2014-12-25 | 2016-07-07 | 日本電信電話株式会社 | 音響スコア算出装置、その方法及びプログラム |
JPWO2020084741A1 (ja) * | 2018-10-25 | 2021-09-09 | 日本電気株式会社 | 音声処理装置、音声処理方法、及びプログラム |
US12051424B2 (en) | 2018-10-25 | 2024-07-30 | Nec Corporation | Audio processing apparatus, audio processing method, and computer-readable recording medium |
Families Citing this family (44)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS6273391A (ja) * | 1985-09-27 | 1987-04-04 | Toshiba Corp | パタ−ン認識学習装置 |
CA1311059C (en) * | 1986-03-25 | 1992-12-01 | Bruce Allen Dautrich | Speaker-trained speech recognizer having the capability of detecting confusingly similar vocabulary words |
US5129000A (en) * | 1986-04-05 | 1992-07-07 | Sharp Kabushiki Kaisha | Voice recognition method by analyzing syllables |
US5347612A (en) * | 1986-07-30 | 1994-09-13 | Ricoh Company, Ltd. | Voice recognition system and method involving registered voice patterns formed from superposition of a plurality of other voice patterns |
US4916743A (en) * | 1987-04-30 | 1990-04-10 | Oki Electric Industry Co., Ltd. | Pattern matching system |
US5129002A (en) * | 1987-12-16 | 1992-07-07 | Matsushita Electric Industrial Co., Ltd. | Pattern recognition apparatus |
US5255342A (en) * | 1988-12-20 | 1993-10-19 | Kabushiki Kaisha Toshiba | Pattern recognition system and method using neural network |
JP3002204B2 (ja) * | 1989-03-13 | 2000-01-24 | 株式会社東芝 | 時系列信号認識装置 |
US5761639A (en) * | 1989-03-13 | 1998-06-02 | Kabushiki Kaisha Toshiba | Method and apparatus for time series signal recognition with signal variation proof learning |
US5222147A (en) * | 1989-04-13 | 1993-06-22 | Kabushiki Kaisha Toshiba | Speech recognition LSI system including recording/reproduction device |
JPH02272495A (ja) * | 1989-04-13 | 1990-11-07 | Toshiba Corp | 音声認識装置 |
US5794194A (en) * | 1989-11-28 | 1998-08-11 | Kabushiki Kaisha Toshiba | Word spotting in a variable noise level environment |
JP3045510B2 (ja) * | 1989-12-06 | 2000-05-29 | 富士通株式会社 | 音声認識処理装置 |
DE4024890A1 (de) * | 1990-08-06 | 1992-02-13 | Standard Elektrik Lorenz Ag | Anpassung von referenzsprachmustern an umgebungsbedingte aussprachevarianten |
EP0474496B1 (en) * | 1990-09-07 | 1998-03-04 | Kabushiki Kaisha Toshiba | Speech recognition apparatus |
JPH04182700A (ja) * | 1990-11-19 | 1992-06-30 | Nec Corp | 音声認識装置 |
US5182773A (en) * | 1991-03-22 | 1993-01-26 | International Business Machines Corporation | Speaker-independent label coding apparatus |
US5325445A (en) * | 1992-05-29 | 1994-06-28 | Eastman Kodak Company | Feature classification using supervised statistical pattern recognition |
JP3114468B2 (ja) * | 1993-11-25 | 2000-12-04 | 松下電器産業株式会社 | 音声認識方法 |
JP2692581B2 (ja) * | 1994-06-07 | 1997-12-17 | 日本電気株式会社 | 音響カテゴリ平均値計算装置及び適応化装置 |
US5617855A (en) * | 1994-09-01 | 1997-04-08 | Waletzky; Jeremy P. | Medical testing device and associated method |
JP2690027B2 (ja) * | 1994-10-05 | 1997-12-10 | 株式会社エイ・ティ・アール音声翻訳通信研究所 | パターン認識方法及び装置 |
US5845246A (en) * | 1995-02-28 | 1998-12-01 | Voice Control Systems, Inc. | Method for reducing database requirements for speech recognition systems |
JP3092491B2 (ja) * | 1995-08-30 | 2000-09-25 | 日本電気株式会社 | 記述長最小基準を用いたパターン適応化方式 |
JP3039623B2 (ja) * | 1996-10-28 | 2000-05-08 | 日本電気株式会社 | 音声認識装置 |
GB2319379A (en) * | 1996-11-18 | 1998-05-20 | Secr Defence | Speech processing system |
GB2331827B (en) * | 1996-11-18 | 2000-12-06 | Secr Defence | Speech processing system |
EP1161098B1 (en) * | 2000-04-27 | 2011-06-22 | Nippon Telegraph And Telephone Corporation | Signal detection method and apparatus |
KR100406307B1 (ko) * | 2001-08-09 | 2003-11-19 | 삼성전자주식회사 | 음성등록방법 및 음성등록시스템과 이에 기초한음성인식방법 및 음성인식시스템 |
US7177803B2 (en) * | 2001-10-22 | 2007-02-13 | Motorola, Inc. | Method and apparatus for enhancing loudness of an audio signal |
US7177816B2 (en) * | 2002-07-05 | 2007-02-13 | At&T Corp. | System and method of handling problematic input during context-sensitive help for multi-modal dialog systems |
US7302389B2 (en) * | 2003-05-14 | 2007-11-27 | Lucent Technologies Inc. | Automatic assessment of phonological processes |
US20040230431A1 (en) * | 2003-05-14 | 2004-11-18 | Gupta Sunil K. | Automatic assessment of phonological processes for speech therapy and language instruction |
US7373294B2 (en) * | 2003-05-15 | 2008-05-13 | Lucent Technologies Inc. | Intonation transformation for speech therapy and the like |
US20040243412A1 (en) * | 2003-05-29 | 2004-12-02 | Gupta Sunil K. | Adaptation of speech models in speech recognition |
US7676362B2 (en) * | 2004-12-31 | 2010-03-09 | Motorola, Inc. | Method and apparatus for enhancing loudness of a speech signal |
US8280730B2 (en) | 2005-05-25 | 2012-10-02 | Motorola Mobility Llc | Method and apparatus of increasing speech intelligibility in noisy environments |
CN101154380B (zh) * | 2006-09-29 | 2011-01-26 | 株式会社东芝 | 说话人认证的注册及验证的方法和装置 |
US20140207456A1 (en) * | 2010-09-23 | 2014-07-24 | Waveform Communications, Llc | Waveform analysis of speech |
US20120109563A1 (en) * | 2010-10-29 | 2012-05-03 | President And Fellows Of Harvard College | Method and apparatus for quantifying a best match between series of time uncertain measurements |
US9324323B1 (en) | 2012-01-13 | 2016-04-26 | Google Inc. | Speech recognition using topic-specific language models |
US8775177B1 (en) | 2012-03-08 | 2014-07-08 | Google Inc. | Speech recognition process |
CN109215679A (zh) * | 2018-08-06 | 2019-01-15 | 百度在线网络技术(北京)有限公司 | 基于用户情绪的对话方法和装置 |
CN112141837A (zh) * | 2020-09-08 | 2020-12-29 | 金陵科技学院 | 一种基于多层字典学习的智能语音电梯*** |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS58219600A (ja) * | 1982-06-15 | 1983-12-21 | オムロン株式会社 | 話者照合方法 |
JPS5915993A (ja) * | 1982-07-19 | 1984-01-27 | 株式会社東芝 | 音声認識装置 |
JPS59137999A (ja) * | 1983-01-27 | 1984-08-08 | 松下電器産業株式会社 | 音声認識装置 |
Family Cites Families (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4059725A (en) * | 1975-03-12 | 1977-11-22 | Nippon Electric Company, Ltd. | Automatic continuous speech recognition system employing dynamic programming |
JPS5688199A (en) * | 1979-12-21 | 1981-07-17 | Hitachi Ltd | Pattern pretreatment method in voice identifier |
US4394538A (en) * | 1981-03-04 | 1983-07-19 | Threshold Technology, Inc. | Speech recognition system and method |
JPS5862699A (ja) * | 1981-10-09 | 1983-04-14 | シャープ株式会社 | 音声認識装置 |
JPS5870287A (ja) * | 1981-10-22 | 1983-04-26 | 日産自動車株式会社 | 音声認識装置 |
JPS5876893A (ja) * | 1981-10-30 | 1983-05-10 | 日本電気株式会社 | 音声認識装置 |
JPS58111989A (ja) * | 1981-12-25 | 1983-07-04 | シャープ株式会社 | 音声認識装置 |
JPS58130393A (ja) * | 1982-01-29 | 1983-08-03 | 株式会社東芝 | 音声認識装置 |
JPS58132298A (ja) * | 1982-02-01 | 1983-08-06 | 日本電気株式会社 | 窓制限付パタンマツチング装置 |
US4618984A (en) * | 1983-06-08 | 1986-10-21 | International Business Machines Corporation | Adaptive automatic discrete utterance recognition |
-
1984
- 1984-10-02 JP JP59206656A patent/JPH0792673B2/ja not_active Expired - Lifetime
-
1985
- 1985-09-12 US US06/775,398 patent/US4783802A/en not_active Expired - Fee Related
- 1985-09-25 DE DE8585112174T patent/DE3579662D1/de not_active Expired - Lifetime
- 1985-09-25 EP EP85112174A patent/EP0178509B1/en not_active Expired
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS58219600A (ja) * | 1982-06-15 | 1983-12-21 | オムロン株式会社 | 話者照合方法 |
JPS5915993A (ja) * | 1982-07-19 | 1984-01-27 | 株式会社東芝 | 音声認識装置 |
JPS59137999A (ja) * | 1983-01-27 | 1984-08-08 | 松下電器産業株式会社 | 音声認識装置 |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2016122110A (ja) * | 2014-12-25 | 2016-07-07 | 日本電信電話株式会社 | 音響スコア算出装置、その方法及びプログラム |
JPWO2020084741A1 (ja) * | 2018-10-25 | 2021-09-09 | 日本電気株式会社 | 音声処理装置、音声処理方法、及びプログラム |
US12051424B2 (en) | 2018-10-25 | 2024-07-30 | Nec Corporation | Audio processing apparatus, audio processing method, and computer-readable recording medium |
Also Published As
Publication number | Publication date |
---|---|
EP0178509A1 (en) | 1986-04-23 |
EP0178509B1 (en) | 1990-09-12 |
DE3579662D1 (de) | 1990-10-18 |
JPH0792673B2 (ja) | 1995-10-09 |
US4783802A (en) | 1988-11-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JPS6184694A (ja) | 認識用辞書学習方法 | |
CN109147796B (zh) | 语音识别方法、装置、计算机设备及计算机可读存储介质 | |
JPH0352640B2 (ja) | ||
Aggarwal et al. | Performance evaluation of sequentially combined heterogeneous feature streams for Hindi speech recognition system | |
Mansour et al. | Voice recognition using dynamic time warping and mel-frequency cepstral coefficients algorithms | |
EP1675102A2 (en) | Method for extracting feature vectors for speech recognition | |
Imtiaz et al. | Isolated word automatic speech recognition (ASR) system using MFCC, DTW & KNN | |
Nanavare et al. | Recognition of human emotions from speech processing | |
Afrillia et al. | Performance measurement of mel frequency ceptral coefficient (MFCC) method in learning system Of Al-Qur’an based in Nagham pattern recognition | |
Besbes et al. | Multi-class SVM for stressed speech recognition | |
Pao et al. | Combining acoustic features for improved emotion recognition in mandarin speech | |
Patel et al. | Optimize approach to voice recognition using iot | |
Yavuz et al. | A Phoneme-Based Approach for Eliminating Out-of-vocabulary Problem Turkish Speech Recognition Using Hidden Markov Model. | |
Zailan et al. | Comparative analysis of LPC and MFCC for male speaker recognition in text-independent context | |
Bansod et al. | Speaker Recognition using Marathi (Varhadi) Language | |
Zhang et al. | Recognition of Score Word in Freestyle Kayaking | |
Besbes et al. | Wavelet packet energy and entropy features for classification of stressed speech | |
Ramesh et al. | Hybrid artificial neural network and hidden Markov model (ANN/HMM) for speech and speaker recognition | |
Qudsi et al. | Best wavelet decomposition channel determination for speech processing application using two-way ANOVA | |
JP2792709B2 (ja) | 音声認識装置 | |
Müller et al. | On using the auditory image model and invariant-integration for noise robust automatic speech recognition | |
Joshi et al. | Mfcc-based voice recognition system for home automation using dynamic programming | |
JPH0786759B2 (ja) | 音声認識用辞書学習方法 | |
JP2752981B2 (ja) | 音声認識装置 | |
Kailashnath et al. | Kannada speaker recognition using mel frequency cepstral coefficients (MFCC) and artificial neural network (ANN) |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
EXPY | Cancellation because of completion of term |