JP3468337B2 - 補間音色合成方法 - Google Patents
補間音色合成方法Info
- Publication number
- JP3468337B2 JP3468337B2 JP03491497A JP3491497A JP3468337B2 JP 3468337 B2 JP3468337 B2 JP 3468337B2 JP 03491497 A JP03491497 A JP 03491497A JP 3491497 A JP3491497 A JP 3491497A JP 3468337 B2 JP3468337 B2 JP 3468337B2
- Authority
- JP
- Japan
- Prior art keywords
- interpolated
- original
- original sounds
- tone color
- synthesized
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Landscapes
- Electrophonic Musical Instruments (AREA)
Description
【０００１】
【発明の属する技術分野】この発明は音声、音楽を含む
あらゆる音の中から二種類の原音の合成音色を、その二
つの原音自体を両端とし、これらの任意の割合での補間
音色を合成する補間音色合成方法に関する。
あらゆる音の中から二種類の原音の合成音色を、その二
つの原音自体を両端とし、これらの任意の割合での補間
音色を合成する補間音色合成方法に関する。
【０００２】
【従来の技術】従来の電子楽器において、使用者はさま
ざまな音色を、（１）ＰＣＭ音源、ＦＭ音源などの各種
方式によるプリセット、（２）使用者が音を新たに収録
することによる付加（サンプリング）、（３）ＦＭ音源
などモデルによるパラメータ表現されたものを修正編集
した再合成、（４）各種フィルタ処理、歪付加などによ
る加工などの方法により作成してきた。
ざまな音色を、（１）ＰＣＭ音源、ＦＭ音源などの各種
方式によるプリセット、（２）使用者が音を新たに収録
することによる付加（サンプリング）、（３）ＦＭ音源
などモデルによるパラメータ表現されたものを修正編集
した再合成、（４）各種フィルタ処理、歪付加などによ
る加工などの方法により作成してきた。
【０００３】また音色の連続的処理、微妙な処理といっ
たものはフィルタ処理、歪付加などによる加工処理によ
ってある程度実現できた。しかし、これらは、あるひと
つの音色を崩し、変形させることであり、目標とする具
体的音色を与えてその音色に向けて補間するというより
高度な音色の制御はできなかった。
たものはフィルタ処理、歪付加などによる加工処理によ
ってある程度実現できた。しかし、これらは、あるひと
つの音色を崩し、変形させることであり、目標とする具
体的音色を与えてその音色に向けて補間するというより
高度な音色の制御はできなかった。
【０００４】
【発明が解決しようとする課題】この発明の目的は与え
られた二つの音色の両端を含む任意の知覚的内分点とな
る音色を合成することができ、また与えられた二つの音
色の一端から他端までを連続的に変化させる音色の合成
を実現させることができる補間音色合成方法を提供する
ことにある。
られた二つの音色の両端を含む任意の知覚的内分点とな
る音色を合成することができ、また与えられた二つの音
色の一端から他端までを連続的に変化させる音色の合成
を実現させることができる補間音色合成方法を提供する
ことにある。
【０００５】
【課題を解決するための手段】この発明によれば、二つ
の原音（互いに音色が異なるもの）について、原音をモ
デル表現するパラメータを、一定時間ごとにそれぞれ推
定し、これら推定された二つの原音のパラメータ間の対
応する時点を抽出し、これら抽出された対応する時点に
おける二つの原音の各推定パラメータ間の対応するもの
を見い出し、これら見い出した対応するパラメータを、
合成音色の上記二原音への所望の近さの程度に応じて補
間する。
の原音（互いに音色が異なるもの）について、原音をモ
デル表現するパラメータを、一定時間ごとにそれぞれ推
定し、これら推定された二つの原音のパラメータ間の対
応する時点を抽出し、これら抽出された対応する時点に
おける二つの原音の各推定パラメータ間の対応するもの
を見い出し、これら見い出した対応するパラメータを、
合成音色の上記二原音への所望の近さの程度に応じて補
間する。
【０００６】
【発明の実施の形態】実施例１
この発明方法が適用される補間音色合成装置の機能構成
を図１に示す。二つの原音波形ｘ，ｙについて、原音を
信号モデルで表現するために用いられるパラメータ、例
えば部分音が、部分音分解部１１で推定される。原音
ｘ，ｙはこの例ではそれぞれ、例えば５ｍｓｅｃ程度の
フレーム毎に区切られた波形であって、これら波形は下
記のように表わされる。
を図１に示す。二つの原音波形ｘ，ｙについて、原音を
信号モデルで表現するために用いられるパラメータ、例
えば部分音が、部分音分解部１１で推定される。原音
ｘ，ｙはこの例ではそれぞれ、例えば５ｍｓｅｃ程度の
フレーム毎に区切られた波形であって、これら波形は下
記のように表わされる。
【０００７】
ｘ＝｛ｘn ｜ｎ＝０，１，…，Ｎx −１｝ （１）
ｙ＝｛ｙn ｜ｎ＝０，１，…，Ｎy −１｝ （２）
ここでＮx ，Ｎy はそれぞれ原音波形ｘ，ｙの総フレー
ム数である。部分音分解部１１は、この例では原音波形
を、正弦波重畳モデル表現による合成に必要なスペクト
ル分析および整理を行ない、部分音（正弦波）への分解
を行う。正弦波重畳モデルは下記のように表わされる。
ム数である。部分音分解部１１は、この例では原音波形
を、正弦波重畳モデル表現による合成に必要なスペクト
ル分析および整理を行ない、部分音（正弦波）への分解
を行う。正弦波重畳モデルは下記のように表わされる。
【０００８】
ｘ(m) ＝ΣＡp (m) cos （θp (m) ） （３）
Σはｐ＝０からＰ−１まで、ｘ(m) はフレーム内のｍ番
目のサンプルの信号、ｐは部分音番号、Ｐは部分音の
数、θp (m) はｍ番目のサンプルの部分音ｐの瞬時位
相、Ａp (m) は部分音ｐの瞬時振幅をそれぞれ表わす。
（３）式ではフレーム番号ｎを省略している。Ａ，θの
他、Ｐも分析フレームにより異なる値をとる。
目のサンプルの信号、ｐは部分音番号、Ｐは部分音の
数、θp (m) はｍ番目のサンプルの部分音ｐの瞬時位
相、Ａp (m) は部分音ｐの瞬時振幅をそれぞれ表わす。
（３）式ではフレーム番号ｎを省略している。Ａ，θの
他、Ｐも分析フレームにより異なる値をとる。
【０００９】（３）式の表現に必要な情報は、フレーム
毎の境界の部分音のスペクトル情報であり、瞬時（サン
プル毎：添字ｍ）の情報は合成時の補間などで算出で
き、ここでは不用である。これより原音波形ｘのスペク
トルパラメータについては下記が出力される。 Ｘ＝｛Ｘn ｜ｎ＝０，１，…，Ｎx −１｝ （４） Ｘn ＝｛（ｆxp n ，Ａxp n ，θxp n ）｜ｐ＝0,1,…，Ｐx (n) −１｝（５） ｆは瞬時周波数であって、θの時間微分であり、ここで
はｆ，Ａ，θはそれぞれ境界値であり、 ｆxp n ＝ｆxp n （ｍ＝０）、Ａxp n ＝Ａxp n （ｍ＝
０），θxp n ＝θxp n （ｍ＝０） を意味する。同様に原音波形ｙのスペクトルパラメータ
についても以下で表わされるＹが算出される。
毎の境界の部分音のスペクトル情報であり、瞬時（サン
プル毎：添字ｍ）の情報は合成時の補間などで算出で
き、ここでは不用である。これより原音波形ｘのスペク
トルパラメータについては下記が出力される。 Ｘ＝｛Ｘn ｜ｎ＝０，１，…，Ｎx −１｝ （４） Ｘn ＝｛（ｆxp n ，Ａxp n ，θxp n ）｜ｐ＝0,1,…，Ｐx (n) −１｝（５） ｆは瞬時周波数であって、θの時間微分であり、ここで
はｆ，Ａ，θはそれぞれ境界値であり、 ｆxp n ＝ｆxp n （ｍ＝０）、Ａxp n ＝Ａxp n （ｍ＝
０），θxp n ＝θxp n （ｍ＝０） を意味する。同様に原音波形ｙのスペクトルパラメータ
についても以下で表わされるＹが算出される。
【００１０】
Ｙ＝｛Ｙn ｜ｎ＝０，１，…，Ｎy −１｝ （６）
Ｙn ＝｛（ｆyp n ，Ａyp n ，θyp n ）｜ｐ＝0,1,…，Ｐy (n) −１｝（７）
（４）〜（７）式のパラメータ推定はＭｏｏｒｅｒのア
ルゴリズム（１９７７）以来いくつか提案されている。
代表的なものとして、ＦＦＴから得られるローカルピー
ク（雑音成分以外の各ピーク）の周波数、振幅および位
相を検出してＸ，Ｙを求めるＭｃＡｕｌａｙおよびＱｕ
ａｔｉｅｒｉによるアルゴリズム（ＭＱアルゴリズム、
１９８６）がある。
ルゴリズム（１９７７）以来いくつか提案されている。
代表的なものとして、ＦＦＴから得られるローカルピー
ク（雑音成分以外の各ピーク）の周波数、振幅および位
相を検出してＸ，Ｙを求めるＭｃＡｕｌａｙおよびＱｕ
ａｔｉｅｒｉによるアルゴリズム（ＭＱアルゴリズム、
１９８６）がある。
【００１１】次にこのようにして得られた原音波形のス
ペクトルパラメータＸ，Ｙ間の対応する時点を、時点対
応抽出部１２で抽出する。ここでは原音波形ｘ，ｙは同
一音韻（文章）の発声音、同一メロディ音、同一リズム
音、同一演奏法による楽音などであるが、音色が互いに
異なっているものを対象とし、この原音波形ｘ，ｙの知
覚的に同一事象が生起している時点の対応を求める。
ペクトルパラメータＸ，Ｙ間の対応する時点を、時点対
応抽出部１２で抽出する。ここでは原音波形ｘ，ｙは同
一音韻（文章）の発声音、同一メロディ音、同一リズム
音、同一演奏法による楽音などであるが、音色が互いに
異なっているものを対象とし、この原音波形ｘ，ｙの知
覚的に同一事象が生起している時点の対応を求める。
【００１２】図２にパラメータＸ，Ｙの時点の対応を取
った後に得られた結果を示す。横軸はフレーム番号で時
間を表わしている。この例ではＮx ＝９，Ｎy ＝１１で
あり、２番目（ｋ＝２）の対応データとしてＸ2 とＹ1
が対応し、３番目（ｋ＝３）の対応データとしてＸ3 と
Ｙ1 が対応している。パラメータＸとＹの対応は時間の
非線形伸縮によるマッチングであり、従来から知られて
いるＤＴＷ（DynamicTime Worping）の手法を用いて実
現できる。この結果、時点の対応を表す情報Ｃ(k) が求
まる。
った後に得られた結果を示す。横軸はフレーム番号で時
間を表わしている。この例ではＮx ＝９，Ｎy ＝１１で
あり、２番目（ｋ＝２）の対応データとしてＸ2 とＹ1
が対応し、３番目（ｋ＝３）の対応データとしてＸ3 と
Ｙ1 が対応している。パラメータＸとＹの対応は時間の
非線形伸縮によるマッチングであり、従来から知られて
いるＤＴＷ（DynamicTime Worping）の手法を用いて実
現できる。この結果、時点の対応を表す情報Ｃ(k) が求
まる。
【００１３】
Ｃ(k) ＝（Ｃx (k),Ｃy (k))，ｋ＝０，１，…，Ｋ−１ （８）
Ｃx (k) ∈｛ｉ｜ｉ＝０，１，…，Ｎx −１｝ （９）
Ｃy (k) ∈｛ｊ｜ｊ＝０，１，…，Ｎy −１｝ （10）
図２の例では（Ｃ1(0), Ｃ0(0)），（Ｃ2(1)，Ｃ
1(1)），（Ｃ3(3)，Ｃ1(3)），（Ｃ4(4)，Ｃ2(4)），
（Ｃ4(5)，Ｃ3(5)），（Ｃ5(6)，Ｃ4(6)）…となる。
1(1)），（Ｃ3(3)，Ｃ1(3)），（Ｃ4(4)，Ｃ2(4)），
（Ｃ4(5)，Ｃ3(5)），（Ｃ5(6)，Ｃ4(6)）…となる。
【００１４】次にこのようにして抽出した対応時点Ｃ
(k) と、推定パラメータＸ，Ｙと合成音色の程度、つま
り合成音における原音波形ｘ，ｙの比率αとを用いて補
間音色合成部１３により補間音色波形Ｚを合成する。こ
の補間音色合成部１３は図３に示すように初期値計算部
１５と単フレーム補間音色漸化計算部１６に大別され
る。初期値計算部１５においてはフレームｎを計数する
カウンタ記憶部１９の計数値がｎ＝０の時のみ動作され
る。第０番目フレーム（Ｃx (0),Ｃy (0))におけるパラ
メータＸ0 とＹ0 との対応するものをスペクトル対応探
査部１７で探査する。
(k) と、推定パラメータＸ，Ｙと合成音色の程度、つま
り合成音における原音波形ｘ，ｙの比率αとを用いて補
間音色合成部１３により補間音色波形Ｚを合成する。こ
の補間音色合成部１３は図３に示すように初期値計算部
１５と単フレーム補間音色漸化計算部１６に大別され
る。初期値計算部１５においてはフレームｎを計数する
カウンタ記憶部１９の計数値がｎ＝０の時のみ動作され
る。第０番目フレーム（Ｃx (0),Ｃy (0))におけるパラ
メータＸ0 とＹ0 との対応するものをスペクトル対応探
査部１７で探査する。
【００１５】次にスペクトル補間部１８で対応したスペ
クトルＯx ，Ｏy を補間情報つまり合成比率αに応じて
補間して新たなスペクトル（パラメータ）Ｚ0 を得る。
対応スペクトルの探査、補間についての具体的手法は後
で説明する。この新たなスペクトルＺ0 はＺn として単
フレーム補間音色漸化計算部１６中の単フレーム補間音
色合成部２１へ供給する。一方、単フレーム補間音色漸
化計算部１６内の基準時点算出部２２において、ｎ＋１
における、つまり最初はｎ＝１における補間スペクトル
Ｚn+1 の計算に用いる原音ｘ，ｙのスペクトルＸ，Ｙの
フレーム番号を対応付けているＺn+1 のフレーム番号ｋ
miを先に求めた（８）式のＣ(k) と、補間情報αn とを
用いて算出する。
クトルＯx ，Ｏy を補間情報つまり合成比率αに応じて
補間して新たなスペクトル（パラメータ）Ｚ0 を得る。
対応スペクトルの探査、補間についての具体的手法は後
で説明する。この新たなスペクトルＺ0 はＺn として単
フレーム補間音色漸化計算部１６中の単フレーム補間音
色合成部２１へ供給する。一方、単フレーム補間音色漸
化計算部１６内の基準時点算出部２２において、ｎ＋１
における、つまり最初はｎ＝１における補間スペクトル
Ｚn+1 の計算に用いる原音ｘ，ｙのスペクトルＸ，Ｙの
フレーム番号を対応付けているＺn+1 のフレーム番号ｋ
miを先に求めた（８）式のＣ(k) と、補間情報αn とを
用いて算出する。
【００１６】この様子を図４を用いて説明する。一般的
なフレームでは、時点ｎのスペクトルパラメータは前フ
レームの分析で知られており、ｎ＋１の時点を算出す
る。いまｎ＋１＝３とする。補間情報αn が図４中の曲
線２３で示すように時間に対し変化させる場合は、図４
の例ではｎ＝３の場合合成音色のスペクトルＺ3 ′は、
Ｃx (4),Ｃy (4) を結ぶ線２４上にあり、この線２４は
ｋ＝４番目の値であり、対応時点（フレーム）Ｃx (4),
Ｃy (4) の各スペクトルはＸ4 とＹ2 であるから、これ
らＸ4 とＹ2 をαで補間して新スペクトルＺ3 ′を求め
る。
なフレームでは、時点ｎのスペクトルパラメータは前フ
レームの分析で知られており、ｎ＋１の時点を算出す
る。いまｎ＋１＝３とする。補間情報αn が図４中の曲
線２３で示すように時間に対し変化させる場合は、図４
の例ではｎ＝３の場合合成音色のスペクトルＺ3 ′は、
Ｃx (4),Ｃy (4) を結ぶ線２４上にあり、この線２４は
ｋ＝４番目の値であり、対応時点（フレーム）Ｃx (4),
Ｃy (4) の各スペクトルはＸ4 とＹ2 であるから、これ
らＸ4 とＹ2 をαで補間して新スペクトルＺ3 ′を求め
る。
【００１７】一方例えばα＝０．３とαを固定にし、ｎ
＋１＝３の合成音色スペクトルＺ3は、時点対応抽出部
１２により得られた（８）式で求めた対応情報（Ｃ
x (k),Ｃ y (k））を結ぶ線上にない。そこで補間（合成
音色）スペクトルＺ3 の計算に必要とする原音のスペク
トルＸ，Ｙを求めるために、Ｃx (k),Ｃy (k) を結ぶ直
線に近い番号ｋ＝ｋmiを求める。図４の例ではα＝０．
３でｎ＋１＝３の補間スペクトルＺ3 に近いＣx (k),Ｃ
y (k) を結ぶ線はｋ＝４の直線２４であり、従ってその
直線２４の両端のフレームＣx (4),Ｃy (4) における
Ｘ，Ｙの各スペクトルＸ4 とＹ2 を用いてＺ3 を求め
る。この合成音色Ｚn+1 を通るＣx (k),Ｃy (k)を結ぶ
線、つまりｋがない場合に、Ｚn+1 に最も近いｋ＝ｋmi
は次式により求める。
＋１＝３の合成音色スペクトルＺ3は、時点対応抽出部
１２により得られた（８）式で求めた対応情報（Ｃ
x (k),Ｃ y (k））を結ぶ線上にない。そこで補間（合成
音色）スペクトルＺ3 の計算に必要とする原音のスペク
トルＸ，Ｙを求めるために、Ｃx (k),Ｃy (k) を結ぶ直
線に近い番号ｋ＝ｋmiを求める。図４の例ではα＝０．
３でｎ＋１＝３の補間スペクトルＺ3 に近いＣx (k),Ｃ
y (k) を結ぶ線はｋ＝４の直線２４であり、従ってその
直線２４の両端のフレームＣx (4),Ｃy (4) における
Ｘ，Ｙの各スペクトルＸ4 とＹ2 を用いてＺ3 を求め
る。この合成音色Ｚn+1 を通るＣx (k),Ｃy (k)を結ぶ
線、つまりｋがない場合に、Ｚn+1 に最も近いｋ＝ｋmi
は次式により求める。
【００１８】
ｋmi＝ arg min｜（１−α）・Ｃx (k) ＋α・Ｃy (k) −ｎ｜ （11）
ｋmi∈（ｋ｜ｋ＝０，１，…，Ｋ−１） （12）
arg min ｜Ａ(k) ｜は与えられたｋのなかでＡ(k) の値
が最も小さいｋを求めることである。この例ではＣ
x （ｋmi＝３）＝４，Ｃy （ｋmi＝３）＝２となる。な
お、式（１１）、（１２）は次のようなことを意味して
いると云える。即ち、フレームごとに二原音の対応フレ
ーム（Ｃx (k) ，Ｃy (k) ）を抽出し、合成音色の二原
音への所望の近さの程度αにより抽出された対応フレー
ム上を補間（これは線形補間に限られない）したときの
時点が、合成音色の新たに算出すべきフレームの表す時
点と最も近くなるように上記抽出された対応フレームを
選ぶことである。
が最も小さいｋを求めることである。この例ではＣ
x （ｋmi＝３）＝４，Ｃy （ｋmi＝３）＝２となる。な
お、式（１１）、（１２）は次のようなことを意味して
いると云える。即ち、フレームごとに二原音の対応フレ
ーム（Ｃx (k) ，Ｃy (k) ）を抽出し、合成音色の二原
音への所望の近さの程度αにより抽出された対応フレー
ム上を補間（これは線形補間に限られない）したときの
時点が、合成音色の新たに算出すべきフレームの表す時
点と最も近くなるように上記抽出された対応フレームを
選ぶことである。
【００１９】このようにして、補間情報αn における対
応時点（フレーム）Ｃx (k),Ｃy (k) のスペクトル
Ｘi ，Ｙj （ｉ＝Ｃx (k),ｊ＝Ｃy (k) ）が求まると、
これら両スペクトルＸi ，Ｙj をαn に応じて補間した
新スペクトルＺn+1 を作成するが、その補間は次のよう
に行う。まずスペクトル対応探査部２６で、スペクトル
Ｘ i ，Ｙj の対応するものを求める。ここではＸi ，Ｙ
j の各要素数が異なり、かつ、フレーム内で対応する要
素が時間的に異なっているが、これら二つの異次元ベク
トルで、その要素間に距離を定義して、全体として最適
に合致するような相手を決定する。この場合、相手が見
つからないことのコストを距離と同一次元で定義すると
総合コスト最小の考えを用いてＤＰ（動的計画法）によ
り決定すればよい。この距離尺度として、瞬時周波数、
レベルをベクトルの要素として、重み付きユークリッド
距離が考えられる。これは同ピッチの場合を考えると瞬
時周波数そのものよりも瞬時周波数を基本周波数で正規
化し、調波番号に対応する数値（実数）とした方が自然
な対応となる。すなわち、後者ではそれぞれの同一調波
同士が対応することになる。
応時点（フレーム）Ｃx (k),Ｃy (k) のスペクトル
Ｘi ，Ｙj （ｉ＝Ｃx (k),ｊ＝Ｃy (k) ）が求まると、
これら両スペクトルＸi ，Ｙj をαn に応じて補間した
新スペクトルＺn+1 を作成するが、その補間は次のよう
に行う。まずスペクトル対応探査部２６で、スペクトル
Ｘ i ，Ｙj の対応するものを求める。ここではＸi ，Ｙ
j の各要素数が異なり、かつ、フレーム内で対応する要
素が時間的に異なっているが、これら二つの異次元ベク
トルで、その要素間に距離を定義して、全体として最適
に合致するような相手を決定する。この場合、相手が見
つからないことのコストを距離と同一次元で定義すると
総合コスト最小の考えを用いてＤＰ（動的計画法）によ
り決定すればよい。この距離尺度として、瞬時周波数、
レベルをベクトルの要素として、重み付きユークリッド
距離が考えられる。これは同ピッチの場合を考えると瞬
時周波数そのものよりも瞬時周波数を基本周波数で正規
化し、調波番号に対応する数値（実数）とした方が自然
な対応となる。すなわち、後者ではそれぞれの同一調波
同士が対応することになる。
【００２０】ここではｋmiと対応するフレームｉのスペ
クトルＸi とフレームｊのスペクトルＹj が与えられ、
各スペクトルの次元Ｐx (n),Ｐy (n) は可変長であり、
フレーム番号ｎ，原音波形ｘ，ｙにより異なる。このＸ
i ，Ｙj に対し上のアルゴリズムにより最適な相手を見
つける。このようにして見つけた対応するものを次式で
記録する。つまり見つけた対応するものを一旦記憶して
おく。
クトルＸi とフレームｊのスペクトルＹj が与えられ、
各スペクトルの次元Ｐx (n),Ｐy (n) は可変長であり、
フレーム番号ｎ，原音波形ｘ，ｙにより異なる。このＸ
i ，Ｙj に対し上のアルゴリズムにより最適な相手を見
つける。このようにして見つけた対応するものを次式で
記録する。つまり見つけた対応するものを一旦記憶して
おく。
【００２１】
Ｏx （ｐx ），ｐx ＝０，１，…，Ｐx (i)
Ｏy （ｐy ），ｐy ＝０，１，…，Ｐy (j)
ここで対応関係が成立する場合は次式で表わせる。
Ｏx （ｐx ）∈｛ｐy ｜ｐy ＝０，１，…，Ｐy (j) −
１｝ Ｏy （ｐy ）∈｛ｐx ｜ｐx ＝０，１，…，Ｐx (i) −
１｝ 対応のないものは Ｏx （ｐx ）＝−１ とするなど、対応する場合に用いられる値以外の値を定
義することにより区別する。相手がない場合、冗長性が
あるのでＯy （ｐy ）はあえて記録しなくてもよい。
１｝ Ｏy （ｐy ）∈｛ｐx ｜ｐx ＝０，１，…，Ｐx (i) −
１｝ 対応のないものは Ｏx （ｐx ）＝−１ とするなど、対応する場合に用いられる値以外の値を定
義することにより区別する。相手がない場合、冗長性が
あるのでＯy （ｐy ）はあえて記録しなくてもよい。
【００２２】例えばＸi のスペクトルが図５Ａに示すよ
うに、１００Ｈｚを基本周波数とするものであって、調
波番号０，１，２，３，４の各要素Ｏx (0) ，Ｏx (1)
，Ｏ x (2) ，Ｏx (3) ，Ｏx (4) に対し、Ｙj のスペ
クトルが図５Ｂに示すように、２００Ｈｚを基本周波数
とするものであって、調波番号０，１，２の各要素Ｏ
y(0），Ｏy (1）、Ｏy (2）であったとする。この時Ｏ
x (0) はＯy (0）と対応し、Ｏx (0) ＝０とし、Ｏ
x (1) は対応がないからＯx (1) ＝−１とし、Ｏx (2)
はＯy (1）と対応し、Ｏx (2) ＝１とし、Ｏx (3) はＯ
y (2）と対応し、Ｏx (3) ＝２とし、Ｏx (4）は対応が
ないからＯx (4）＝−１とする。同様に、Ｏy (0）はＯ
x (0）と対応しＯy (0）＝０，Ｏy (1）＝２，Ｏy (2）
＝３，Ｏy (3）＝−１とする。
うに、１００Ｈｚを基本周波数とするものであって、調
波番号０，１，２，３，４の各要素Ｏx (0) ，Ｏx (1)
，Ｏ x (2) ，Ｏx (3) ，Ｏx (4) に対し、Ｙj のスペ
クトルが図５Ｂに示すように、２００Ｈｚを基本周波数
とするものであって、調波番号０，１，２の各要素Ｏ
y(0），Ｏy (1）、Ｏy (2）であったとする。この時Ｏ
x (0) はＯy (0）と対応し、Ｏx (0) ＝０とし、Ｏ
x (1) は対応がないからＯx (1) ＝−１とし、Ｏx (2)
はＯy (1）と対応し、Ｏx (2) ＝１とし、Ｏx (3) はＯ
y (2）と対応し、Ｏx (3) ＝２とし、Ｏx (4）は対応が
ないからＯx (4）＝−１とする。同様に、Ｏy (0）はＯ
x (0）と対応しＯy (0）＝０，Ｏy (1）＝２，Ｏy (2）
＝３，Ｏy (3）＝−１とする。
【００２３】以上のようにしてＸi ，Ｙj の対応したも
のを見付け記録すると、この記録したＸi ，Ｙj とαn
を用いて、対応がついたスペクトル同士はαn により物
理補間を、対応がつかないスペクトルはゼロ値への補間
をスペクトル補間部２７で行い、新しい合成音色スペク
トルＺn+1 を作成する。つまり例えばＯx ( ）とＯ
y( ）とが対応する場合、αＯx ( ）＋（１−α）Ｏ
y ( ）＝Ｏz ( ）を求め、対応するものがなければ、Ｏ
z ( ）とする。
のを見付け記録すると、この記録したＸi ，Ｙj とαn
を用いて、対応がついたスペクトル同士はαn により物
理補間を、対応がつかないスペクトルはゼロ値への補間
をスペクトル補間部２７で行い、新しい合成音色スペク
トルＺn+1 を作成する。つまり例えばＯx ( ）とＯ
y( ）とが対応する場合、αＯx ( ）＋（１−α）Ｏ
y ( ）＝Ｏz ( ）を求め、対応するものがなければ、Ｏ
z ( ）とする。
【００２４】以上のように調波番号による管理により、
異音を生じさせないで済む。原音に無声部が含まれてい
る場合は、（１）無声部と無声部の場合は、便宜的に任
意の調波帯幅を二原音共通に組む、（２）無声部と有声
部の場合は無声部の調波帯を有声部の調波帯と同一に設
定すればよい。このようにして合成した新しい音色スペ
クトルＺn+1 を前のフレームで計算されたＺn とから音
色波形Ｚn を単フレーム補間音色合成部２１で算出す
る。この波形合成の手法は例えば下記の公知の各種のも
のを用いることができる。
異音を生じさせないで済む。原音に無声部が含まれてい
る場合は、（１）無声部と無声部の場合は、便宜的に任
意の調波帯幅を二原音共通に組む、（２）無声部と有声
部の場合は無声部の調波帯を有声部の調波帯と同一に設
定すればよい。このようにして合成した新しい音色スペ
クトルＺn+1 を前のフレームで計算されたＺn とから音
色波形Ｚn を単フレーム補間音色合成部２１で算出す
る。この波形合成の手法は例えば下記の公知の各種のも
のを用いることができる。
【００２５】１．フレーム毎の分析から得られたパラメ
ータでフレーム内で正弦波合成し、更に隣合うフレーム
でオーバラップアッドをする方法。２．先に述べたＭＱ
アルゴリズムで、瞬時位相関数を３次式で表現するも
の。３．図６に示すように、ＭＱアルゴリズムにおい
て、フレームと次フレームのスペクトルローカルピーク
の接続において、図３で用いられているスペクトル対応
探査部２６を再度用いる。
ータでフレーム内で正弦波合成し、更に隣合うフレーム
でオーバラップアッドをする方法。２．先に述べたＭＱ
アルゴリズムで、瞬時位相関数を３次式で表現するも
の。３．図６に示すように、ＭＱアルゴリズムにおい
て、フレームと次フレームのスペクトルローカルピーク
の接続において、図３で用いられているスペクトル対応
探査部２６を再度用いる。
【００２６】最後のこの方法は同一計算部を用いること
から装置構成が容易となる。図６でスペクトル対応探査
部２６でＺn とＺn+1 との対応スペクトルＯzn，Ｏzn+1
を求め、その対応するＯzn，Ｏzn+1により、（３）式に
おける境界となるスペクトル情報が定まるから、二つの
間のサンプル点ｍ対応に補間データ、つまり（３）式で
表される合成波形を単フレーム音合成部２９で求める。
から装置構成が容易となる。図６でスペクトル対応探査
部２６でＺn とＺn+1 との対応スペクトルＯzn，Ｏzn+1
を求め、その対応するＯzn，Ｏzn+1により、（３）式に
おける境界となるスペクトル情報が定まるから、二つの
間のサンプル点ｍ対応に補間データ、つまり（３）式で
表される合成波形を単フレーム音合成部２９で求める。
【００２７】図３の説明において、スペクトル補間部２
７で合成音色スペクトルＺn+1 が求まると、これを記憶
部２８にＺn として記憶し、また記憶部１９のフレーム
計数値ｎを＋１し、再び、基準時点算出部２２でフレー
ムｎ＋１におけるαn と対応するｋmiを算出し、そのｋ
miの対応スペクトルＸi ，Ｙj の対応スペクトルを探査
して、スペクトル補間を行ってＺn+1 を求める。実施例２ 両端の二つの原音が同一文章で異なる声質の事例、ある
いは、ピッチ、あるいは、パワーが異なる二つの原音の
事例など、単なる定常音より複雑な二つの原音を両端音
とする場合についてのピッチ、あるいは音量は知覚的に
独立な要素であり、補間に際してはこれらが個別に補間
されていなくてはならない。また、音韻を司るスペクト
ル包絡も音韻を保存し、音色が補間されるような物理補
間がなされるべきである。そこでこの実施例２では図７
に示すように、まず、分析の初期段階で、部分音分解を
行うのみならず、ピッチ抽出部３１で原音波形ｘ，ｙよ
りピッチＰx ，Ｐy をそれぞれ抽出し、またパワー抽出
部３２によりパワーａx ，ａy をそれぞれ抽出し、更に
スペクトル包絡抽出部３３によりスペクトル包絡Ｅ x ，
Ｅy をそれぞれ求める。
７で合成音色スペクトルＺn+1 が求まると、これを記憶
部２８にＺn として記憶し、また記憶部１９のフレーム
計数値ｎを＋１し、再び、基準時点算出部２２でフレー
ムｎ＋１におけるαn と対応するｋmiを算出し、そのｋ
miの対応スペクトルＸi ，Ｙj の対応スペクトルを探査
して、スペクトル補間を行ってＺn+1 を求める。実施例２ 両端の二つの原音が同一文章で異なる声質の事例、ある
いは、ピッチ、あるいは、パワーが異なる二つの原音の
事例など、単なる定常音より複雑な二つの原音を両端音
とする場合についてのピッチ、あるいは音量は知覚的に
独立な要素であり、補間に際してはこれらが個別に補間
されていなくてはならない。また、音韻を司るスペクト
ル包絡も音韻を保存し、音色が補間されるような物理補
間がなされるべきである。そこでこの実施例２では図７
に示すように、まず、分析の初期段階で、部分音分解を
行うのみならず、ピッチ抽出部３１で原音波形ｘ，ｙよ
りピッチＰx ，Ｐy をそれぞれ抽出し、またパワー抽出
部３２によりパワーａx ，ａy をそれぞれ抽出し、更に
スペクトル包絡抽出部３３によりスペクトル包絡Ｅ x ，
Ｅy をそれぞれ求める。
【００２８】これらパラメータを用いて、図３中のスペ
クトル補間部２７でのパラメータ補間、つまりスペクト
ル補間を行うが、この場合におけるスペクトル補間は図
８に示すようになされる。つまりこのスペクトル補間部
２７には、対応するフレームのフレーム番号ｎx （＝Ｃ
x （ｋmi））、ｎy （＝Ｃy （ｋmi））、これらフレー
ムのスペクトルの部分音で対応するもの同士の番号
ｐx ，ｐy （＝Ｏx （ｐx））、利用者が指定した物理
補間定数α、ピッチＰx ，Ｐy ，パワーａx ，ａy、ス
ペクトル包絡Ｅx ，Ｅy が入力される。
クトル補間部２７でのパラメータ補間、つまりスペクト
ル補間を行うが、この場合におけるスペクトル補間は図
８に示すようになされる。つまりこのスペクトル補間部
２７には、対応するフレームのフレーム番号ｎx （＝Ｃ
x （ｋmi））、ｎy （＝Ｃy （ｋmi））、これらフレー
ムのスペクトルの部分音で対応するもの同士の番号
ｐx ，ｐy （＝Ｏx （ｐx））、利用者が指定した物理
補間定数α、ピッチＰx ，Ｐy ，パワーａx ，ａy、ス
ペクトル包絡Ｅx ，Ｅy が入力される。
【００２９】そのスペクトル包絡Ｅx ，Ｅy を補間して
目標とするスペクトル包絡を所望の合成音色に付与す
る。つまりピーク等対応探査部３５に対応フレーム番号
ｎx ，ｎy 、スペクトル包絡Ｅx ，Ｅy 、補間情報αn
を入力して、Ｅx ，Ｅy のピーク周波数とレベルをベク
トルとした距離をもとに、スペクトル対応探査部２６に
おける探査方法と同様の手法を用いて対応するピークを
算出し、その対応ピークを、スペクトル包絡補間部３６
で、αn に応じた線形補間を行って、目標とするスペク
トル包絡Ｅz を求める。
目標とするスペクトル包絡を所望の合成音色に付与す
る。つまりピーク等対応探査部３５に対応フレーム番号
ｎx ，ｎy 、スペクトル包絡Ｅx ，Ｅy 、補間情報αn
を入力して、Ｅx ，Ｅy のピーク周波数とレベルをベク
トルとした距離をもとに、スペクトル対応探査部２６に
おける探査方法と同様の手法を用いて対応するピークを
算出し、その対応ピークを、スペクトル包絡補間部３６
で、αn に応じた線形補間を行って、目標とするスペク
トル包絡Ｅz を求める。
【００３０】一方、フレームｎx の原音波形ｘの振幅Ａ
xpx nxとフレームｎy の原音波形ｙの振幅Ａypy nyとを
補間情報αn で振幅補間部３７により線形補間し、その
補間された振幅のスペクトル包絡をスペクトル包絡計算
部３８で計算し、このスペクトル包絡の先に求めた目標
スペクトル包絡Ｅz からのずれをスペクトル包絡修正量
計算部３９を計算し、このずれを、振幅補間部３７で求
めた補間された瞬時振幅に加算器４１で加算して、補間
された瞬時振幅のスペクトル包絡が目標とするものにな
るようにする。このようにして所望の合成音色に目標と
するスペクトル包絡が付与される。
xpx nxとフレームｎy の原音波形ｙの振幅Ａypy nyとを
補間情報αn で振幅補間部３７により線形補間し、その
補間された振幅のスペクトル包絡をスペクトル包絡計算
部３８で計算し、このスペクトル包絡の先に求めた目標
スペクトル包絡Ｅz からのずれをスペクトル包絡修正量
計算部３９を計算し、このずれを、振幅補間部３７で求
めた補間された瞬時振幅に加算器４１で加算して、補間
された瞬時振幅のスペクトル包絡が目標とするものにな
るようにする。このようにして所望の合成音色に目標と
するスペクトル包絡が付与される。
【００３１】この所望の合成音色に目標とするスペクト
ル包絡の付与には次の処理を加えてもよい。つまりフレ
ームｎx ，ｎy でそれぞれ抽出されたパワーａx （ｄ
Ｂ），ａy （ｄＢ）を、補間情報αn でパワー補間部４
２において線形補間して目標パワー値ａz を求め、加算
器４１よりスペクトル包絡が修正された補間振幅のレベ
ルがａz になるようにレベル調整部４３で調整して、合
成音色の瞬時振幅Ａzp n+ 1 を得る。
ル包絡の付与には次の処理を加えてもよい。つまりフレ
ームｎx ，ｎy でそれぞれ抽出されたパワーａx （ｄ
Ｂ），ａy （ｄＢ）を、補間情報αn でパワー補間部４
２において線形補間して目標パワー値ａz を求め、加算
器４１よりスペクトル包絡が修正された補間振幅のレベ
ルがａz になるようにレベル調整部４３で調整して、合
成音色の瞬時振幅Ａzp n+ 1 を得る。
【００３２】ピッチを補間する場合は、知覚との対応が
よくなるように、対数ピッチをとり、フレームｎx ，ｎ
y における抽出ピッチＰx ，Ｐy を補間情報αn で、ピ
ッチ補間部４５により線形補間し、この補間されたピッ
チＰz により、瞬時周波数を補間する際の補間定数を補
間係数再計算部４６で再計算し、その計算結果αn ′を
周波数補間部４７へ供給する。つまり瞬時周波数の補間
をαn で行うと補間合成波形のピッチが少しずれる、よ
ってピッチＰz に応じて補間情報αn を修正した方が、
聴覚的によい。このようにして周波数補間部４７では瞬
時周波数ｆxpx nx，ｆypy nyをαn ′で補間して補間瞬
時周波数ｆzp n+1 を得る。
よくなるように、対数ピッチをとり、フレームｎx ，ｎ
y における抽出ピッチＰx ，Ｐy を補間情報αn で、ピ
ッチ補間部４５により線形補間し、この補間されたピッ
チＰz により、瞬時周波数を補間する際の補間定数を補
間係数再計算部４６で再計算し、その計算結果αn ′を
周波数補間部４７へ供給する。つまり瞬時周波数の補間
をαn で行うと補間合成波形のピッチが少しずれる、よ
ってピッチＰz に応じて補間情報αn を修正した方が、
聴覚的によい。このようにして周波数補間部４７では瞬
時周波数ｆxpx nx，ｆypy nyをαn ′で補間して補間瞬
時周波数ｆzp n+1 を得る。
【００３３】更に音色合成波形ｚn+1 の生成には、瞬時
周波数ｆzp n+1 、瞬時振幅Ａzp n+1の他に瞬時位相θzp
n+1 を必要とする。この瞬時位相θzp n+1 を求めるには
位相計算部４８で原音波形の瞬時位相θxpx nx，θypy
nyを入力し、αn で補間することなく、部分音はフレー
ム内でチャープ（chirp)信号とみなして瞬時周波数のみ
で決定し、又はランダムとし、あるいは二原音のそれぞ
れの隣接フレームとの位相差を補間するなどにより決定
する。
周波数ｆzp n+1 、瞬時振幅Ａzp n+1の他に瞬時位相θzp
n+1 を必要とする。この瞬時位相θzp n+1 を求めるには
位相計算部４８で原音波形の瞬時位相θxpx nx，θypy
nyを入力し、αn で補間することなく、部分音はフレー
ム内でチャープ（chirp)信号とみなして瞬時周波数のみ
で決定し、又はランダムとし、あるいは二原音のそれぞ
れの隣接フレームとの位相差を補間するなどにより決定
する。
【００３４】なお、レベル調整部４３でのレベル調整は
省略してもよい。また周波数補間部４７での補間情報と
してαn を使用し、ピッチ補間部４５、補間係数再計算
部４６を省略してもよい。実施例１（図３）でのスペク
トル補間部２７は、先に述べたようにスペクトル補間で
あって、振幅補間部３７、周波数補間部４７、位相計算
部４８により行われるものである。
省略してもよい。また周波数補間部４７での補間情報と
してαn を使用し、ピッチ補間部４５、補間係数再計算
部４６を省略してもよい。実施例１（図３）でのスペク
トル補間部２７は、先に述べたようにスペクトル補間で
あって、振幅補間部３７、周波数補間部４７、位相計算
部４８により行われるものである。
【００３５】上述においては時点対応抽出部１２で原音
波形ｘ，ｙの各対応時点として対応フレームを抽出した
が、厳密に対応する時点を求めた方がより正しい音色合
成が得られると予測され、従って、各原音波形の各サン
プル時点ごとに対応する時刻を求めてもよい。この場合
は、部分音分解を各サンプル時点ごとにある区間につい
て部分音分解を行えばよい。また上述において原音をモ
デル表現するときのパラメータとしては部分音に限ら
ず、スペクトル、波形などを用いてもよい。
波形ｘ，ｙの各対応時点として対応フレームを抽出した
が、厳密に対応する時点を求めた方がより正しい音色合
成が得られると予測され、従って、各原音波形の各サン
プル時点ごとに対応する時刻を求めてもよい。この場合
は、部分音分解を各サンプル時点ごとにある区間につい
て部分音分解を行えばよい。また上述において原音をモ
デル表現するときのパラメータとしては部分音に限ら
ず、スペクトル、波形などを用いてもよい。
【００３６】図１において部分音分解部１１、時点対応
抽出部１２、補間音色合成部１３はそれぞれ基本的には
実時間ではなくオフライン計算を前提としたが、事前に
部分音分解部１１と時点対応抽出部１２について予め計
算しておき、適度に速い演算装置を用いることにより、
αを実時間で使用者が指定して、補間音色合成部１３の
計算を実時間で行わせ、つまり補間音色合成音波形を実
時間で生成することもできる。なお使用目的に応じては
補間合成音色パラメータＺn+1 を得、これを他の場所で
波形合成するようにしてもよく、つまり、この発明は補
間合成音色パラメータＺn+1 を得るまでに特徴がある。
抽出部１２、補間音色合成部１３はそれぞれ基本的には
実時間ではなくオフライン計算を前提としたが、事前に
部分音分解部１１と時点対応抽出部１２について予め計
算しておき、適度に速い演算装置を用いることにより、
αを実時間で使用者が指定して、補間音色合成部１３の
計算を実時間で行わせ、つまり補間音色合成音波形を実
時間で生成することもできる。なお使用目的に応じては
補間合成音色パラメータＺn+1 を得、これを他の場所で
波形合成するようにしてもよく、つまり、この発明は補
間合成音色パラメータＺn+1 を得るまでに特徴がある。
【００３７】
【発明の効果】以上述べたようにこの発明によれば、例
えば成人男声と成人女声の二原音の補間音色は、人間の
声、すなわち音声であるように、二原音に共通な属性が
あれば補間音色もそれを保つことができる。これは単に
歪を加える、雑音を付加するなどの目標のない方向への
音色制御とは異なり、一方の原音と他方他原音との間で
任意の程度にその一方の原音に近い合成音色を作成する
ことができ、もちろん、その二原音の一方自体をも出力
することができ、より音色制御の自由度が大きくなる。
また一方の原音から他方の原音へ連続的に音色を変化さ
せる音色モルフィングを行うことができる。
えば成人男声と成人女声の二原音の補間音色は、人間の
声、すなわち音声であるように、二原音に共通な属性が
あれば補間音色もそれを保つことができる。これは単に
歪を加える、雑音を付加するなどの目標のない方向への
音色制御とは異なり、一方の原音と他方他原音との間で
任意の程度にその一方の原音に近い合成音色を作成する
ことができ、もちろん、その二原音の一方自体をも出力
することができ、より音色制御の自由度が大きくなる。
また一方の原音から他方の原音へ連続的に音色を変化さ
せる音色モルフィングを行うことができる。
【００３８】特に実施例２によれば二つの原音に共通な
音韻、韻律などの言語特徴が合成された補間音色でも確
保でき、またピッチ、パワーなど知覚的に独立な要素
も、二つの原音で異なるとき、これらも補間される。こ
れにより楽器としては、これまでにない電子楽器として
の機能を持たせることができる。またコンピュータグラ
フィックでは知覚的な連続変形はモルフィングといわ
れ、既に実用化され多用されているが、このコンピュー
タグラフィックのモルフィングと合わせて音のモルフィ
ングを行うことができる。
音韻、韻律などの言語特徴が合成された補間音色でも確
保でき、またピッチ、パワーなど知覚的に独立な要素
も、二つの原音で異なるとき、これらも補間される。こ
れにより楽器としては、これまでにない電子楽器として
の機能を持たせることができる。またコンピュータグラ
フィックでは知覚的な連続変形はモルフィングといわ
れ、既に実用化され多用されているが、このコンピュー
タグラフィックのモルフィングと合わせて音のモルフィ
ングを行うことができる。
【図１】この発明の方法を適用した補間音色合成装置の
機能構成を示すブロック図。
機能構成を示すブロック図。
【図２】図１中の時点対応抽出部１２における二原音の
対応関係例を示す図。
対応関係例を示す図。
【図３】図１中の補間音色合成部１３の機能構成を示す
ブロック図。
ブロック図。
【図４】図３中の基準時点算出部２２における、合成し
たい時点と補間情報αから補間に用いる二原音の各時点
を求める説明図。
たい時点と補間情報αから補間に用いる二原音の各時点
を求める説明図。
【図５】図３中のスペクトル対応探査部２６で得られた
対応スペクトルを説明するための二原音のスペクトル例
を示す図。
対応スペクトルを説明するための二原音のスペクトル例
を示す図。
【図６】図３中の単フレーム補間音色合成部２１の機能
構成例を示すブロック図。
構成例を示すブロック図。
【図７】実施例２における初期過程の機能構成を示すブ
ロック図。
ロック図。
【図８】実施例２における図３中のスペクトル補間部の
機能情報を示すブロック図。
機能情報を示すブロック図。
Claims (7)
- 【請求項１】 二つの原音からその原音への所望の近さ
の合成音色を生成する方法において、 上記二つの原音について原音をモデル表現するためのパ
ラメータを、一定時間ごとに正弦波重畳モデル表現に基
づきそれぞれ推定する過程と、 これら推定された二つの原音のパラメータ間の対応する
時点を抽出する過程と、 上記抽出した対応する時点における上記二つの原音の異
次元ベクトルで、その要素間に距離を定義し、相手が見
つからないことのコストを距離と同一次元で定義し、総
合コスト最小の考えを用いてＤＰ（動的計画法）によ
り、各推定パラメータ間の対応するものを見い出す過程
と、 上記見い出した対応するパラメータを、上記合成音色の
上記二原音への所望の近さの程度に応じて補間して新し
いパラメータを作成する過程と、 を有することを特徴とする補間音色合成方法。 - 【請求項２】 二つの原音からその原音への所望の近さ
の合成音色を生成する方法において、 上記二つの原音について原音をモデル表現するためのパ
ラメータを、一定時間ごとにそれぞれ推定する過程と、 これら推定された二つの原音のパラメータ間の対応する
時点を抽出する過程と、 上記抽出した対応する時点における上記二つの原音の各
推定パラメータ間の対応するものを見い出す過程と、 上記見い出した対応するパラメータを、上記合成音色の
上記二原音への所望の近さの程度に応じて補間して新し
いパラメータを作成する過程とを有し、上記所望の近さの程度に応じて補間して新しいパラメー
タを作成する過程は、上記二つの原音のスペクトル包絡
を抽出する過程と、これら抽出されたスペクトル包絡を
補間して目標とするスペクトル包絡を所望の合成音色に
付与する過程と、上記二つの原音の瞬時周波数を補間す
る過程と、上記合成音色の瞬時位相を決定する過程 を有
することを特徴とする補間音色合成方法。 - 【請求項３】 上記対応する時点を抽出する過程は、上
記一定時間（フレーム）ごとの対応フレームを抽出して
時刻順に番号を付ける過程と、上記合成音色の上記二原
音への所望の近さの程度により上記抽出された対応フレ
ーム上を補間したときの時点が、合成音色の新たに算出
すべきフレームの表す時点と最も近くなるように上記抽
出された対応フレームを選び、これを上記抽出した対応
する時点とする過程より成り、上記選ばれた両対応フレ
ームにおける各パラメータを上記見い出した対応するパ
ラメータとすることを特徴とする請求項２記載の補間音
色合成方法。 - 【請求項４】 上記目標とするスペクトル包絡を所望の
合成音色に付与する過程は、上記二つの原音の振幅を補
間する過程と、その補間された振幅のスペクトル包絡を
求める過程と、その求めたスペクトル包絡と上記補間し
たスペクトル包絡との差を抽出する過程と、そのスペク
トル包絡の差を上記補間された振幅に加算する過程とよ
りなることを特徴とする請求項２又は３記載の補間音色
合成方法。 - 【請求項５】 上記目標とするスペクトル包絡を所望の
合成音色に付与する過程に、上記二つの原音のパワーを
抽出する過程と、これら抽出されたパワーを補間して目
標とするパワーを決定する過程と、上記所望の合成音色
のパワーが上記目標のパワーとなるように調整する過程
を含む請求項２乃至４の何れかに記載の補間音色合成方
法。 - 【請求項６】 上記瞬時周波数を補間する過程は、上記
二つの原音のピッチを抽出する過程と、上記これら抽出
された対応する時点のピッチを補間して目標とするピッ
チを決定する過程と、この目標とするピッチより、上記
二つの原音への所望の近さを表す定数を再計算する過程
と、この再計算された近さを表す定数を用いて上記二つ
の原音の瞬時周波数を補間する過程とからなる請求項２
乃至５の何れかに記載の補間音色合成方法。 - 【請求項７】 上記新しいパラメータを用いて波形合成
する過程を含むことを特徴とする請求項２乃至６の何れ
かに記載の補間音色合成方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP03491497A JP3468337B2 (ja) | 1997-01-07 | 1997-02-19 | 補間音色合成方法 |
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP9-830 | 1997-01-07 | ||
| JP83097 | 1997-01-07 | ||
| JP03491497A JP3468337B2 (ja) | 1997-01-07 | 1997-02-19 | 補間音色合成方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH10254500A JPH10254500A (ja) | 1998-09-25 |
| JP3468337B2 true JP3468337B2 (ja) | 2003-11-17 |
Family
ID=26333927
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP03491497A Expired - Fee Related JP3468337B2 (ja) | 1997-01-07 | 1997-02-19 | 補間音色合成方法 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP3468337B2 (ja) |
Families Citing this family (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| ID29029A (id) * | 1998-10-29 | 2001-07-26 | Smith Paul Reed Guitars Ltd | Metode untuk menemukan fundamental dengan cepat |
| JP3802293B2 (ja) * | 1999-10-21 | 2006-07-26 | ヤマハ株式会社 | 楽音処理装置および楽音処理方法 |
| JP4654621B2 (ja) * | 2004-06-30 | 2011-03-23 | ヤマハ株式会社 | 音声処理装置およびプログラム |
| JP4720974B2 (ja) * | 2004-12-21 | 2011-07-13 | 株式会社国際電気通信基礎技術研究所 | 音声発生装置およびそのためのコンピュータプログラム |
| JP2023060744A (ja) * | 2021-10-18 | 2023-04-28 | ヤマハ株式会社 | 音響処理方法、音響処理システムおよびプログラム |
-
1997
- 1997-02-19 JP JP03491497A patent/JP3468337B2/ja not_active Expired - Fee Related
Also Published As
| Publication number | Publication date |
|---|---|
| JPH10254500A (ja) | 1998-09-25 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US5749073A (en) | System for automatically morphing audio information | |
| Bonada et al. | Synthesis of the singing voice by performance sampling and spectral models | |
| Slaney et al. | Automatic audio morphing | |
| Verfaille et al. | Adaptive digital audio effects (A-DAFx): A new class of sound transformations | |
| US11410637B2 (en) | Voice synthesis method, voice synthesis device, and storage medium | |
| Amatriain et al. | Spectral processing | |
| JPS63285598A (ja) | 音素接続形パラメ−タ規則合成方式 | |
| US7379873B2 (en) | Singing voice synthesizing apparatus, singing voice synthesizing method and program for synthesizing singing voice | |
| JP2002202790A (ja) | 歌唱合成装置 | |
| Bonada et al. | Sample-based singing voice synthesizer by spectral concatenation | |
| US6944589B2 (en) | Voice analyzing and synthesizing apparatus and method, and program | |
| O'Brien et al. | Concatenative synthesis based on a harmonic model | |
| JP2018077283A (ja) | 音声合成方法 | |
| JP3468337B2 (ja) | 補間音色合成方法 | |
| Verfaille et al. | Adaptive digital audio effects | |
| JP2003345400A (ja) | ピッチ変換装置、ピッチ変換方法及びプログラム | |
| Saitou et al. | Analysis of acoustic features affecting" singing-ness" and its application to singing-voice synthesis from speaking-voice. | |
| JP4757971B2 (ja) | ハーモニー音付加装置 | |
| JP3540159B2 (ja) | 音声変換装置及び音声変換方法 | |
| Gu et al. | Mandarin singing voice synthesis using an hnm based scheme | |
| JP6834370B2 (ja) | 音声合成方法 | |
| JP2005275420A (ja) | 音声分析及び合成装置、方法、プログラム | |
| JPH07261798A (ja) | 音声分析合成装置 | |
| JP2018077280A (ja) | 音声合成方法 | |
| Amatriain et al. | Spectral modeling for higher-level sound transformation |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20080905 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20080905 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090905 Year of fee payment: 6 |
|
| LAPS | Cancellation because of no payment of annual fees |