JP2001249668A - 音声信号または楽音信号の処理装置およびその処理プログラムが記録された記録媒体 - Google Patents
音声信号または楽音信号の処理装置およびその処理プログラムが記録された記録媒体Info
- Publication number
- JP2001249668A JP2001249668A JP2000057111A JP2000057111A JP2001249668A JP 2001249668 A JP2001249668 A JP 2001249668A JP 2000057111 A JP2000057111 A JP 2000057111A JP 2000057111 A JP2000057111 A JP 2000057111A JP 2001249668 A JP2001249668 A JP 2001249668A
- Authority
- JP
- Japan
- Prior art keywords
- pitch
- signal
- input
- sound
- harmony
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000005236 sound signal Effects 0.000 title claims abstract description 129
- 238000012545 processing Methods 0.000 title claims abstract description 54
- 238000012937 correction Methods 0.000 claims abstract description 15
- 238000001514 detection method Methods 0.000 claims abstract description 14
- 238000000034 method Methods 0.000 claims description 53
- 238000012905 input function Methods 0.000 claims description 4
- 239000011295 pitch Substances 0.000 description 320
- 230000000694 effects Effects 0.000 description 45
- 238000006243 chemical reaction Methods 0.000 description 20
- 238000010586 diagram Methods 0.000 description 19
- 230000001755 vocal effect Effects 0.000 description 17
- 238000003860 storage Methods 0.000 description 8
- 241001342895 Chorus Species 0.000 description 4
- HAORKNGNJCEJBX-UHFFFAOYSA-N cyprodinil Chemical compound N=1C(C)=CC(C2CC2)=NC=1NC1=CC=CC=C1 HAORKNGNJCEJBX-UHFFFAOYSA-N 0.000 description 4
- 230000004807 localization Effects 0.000 description 4
- 238000004891 communication Methods 0.000 description 2
- 239000013256 coordination polymer Substances 0.000 description 2
- 238000013459 approach Methods 0.000 description 1
- 238000005520 cutting process Methods 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 238000003780 insertion Methods 0.000 description 1
- 230000037431 insertion Effects 0.000 description 1
- 210000003127 knee Anatomy 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000004091 panning Methods 0.000 description 1
- 238000003825 pressing Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
- G10L25/90—Pitch determination of speech signals
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
- G10H1/00—Details of electrophonic musical instruments
- G10H1/36—Accompaniment arrangements
- G10H1/361—Recording/reproducing of accompaniment for use with an external source, e.g. karaoke systems
- G10H1/366—Recording/reproducing of accompaniment for use with an external source, e.g. karaoke systems with means for modifying or correcting the external signal, e.g. pitch correction, reverberation, changing a singer's voice
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
- G10H1/00—Details of electrophonic musical instruments
- G10H1/36—Accompaniment arrangements
- G10H1/38—Chord
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
- G10H2240/00—Data organisation or data communication aspects, specifically adapted for electrophonic musical tools or instruments
- G10H2240/011—Files or data streams containing coded musical information, e.g. for transmission
- G10H2240/046—File format, i.e. specific or non-standard musical file format used in or adapted for electrophonic musical instruments, e.g. in wavetables
- G10H2240/056—MIDI or other note-oriented file format
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- Computational Linguistics (AREA)
- Signal Processing (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Electrophonic Musical Instruments (AREA)
- Reverberation, Karaoke And Other Acoustics (AREA)
Abstract
(57)【要約】
【課題】 入力音声信号と調和を保ちながら、変化に富
んだ付加音信号を生成することができる音声信号または
楽音信号の処理装置を提供する。 【解決手段】 入力音声の検出されたピッチは、ピッチ
が入力音声の直近となる音高の検出部２１において、対
数値表現で、入力音声のピッチに、そのピッチが最も近
くなる音高のピッチ（半音単位のピッチ）に補正され
る。減算器２２においては、入力音声の検出されたピッ
チから入力音声の直近の音高に対応するピッチを減算し
て補正量を算出する。この補正量を、加算器２３におい
て、「ハーモニー音の音高」に対応する半音単位のピッ
チに加算することにより、補正されたハーモニー音のピ
ッチの値が出力される。
んだ付加音信号を生成することができる音声信号または
楽音信号の処理装置を提供する。 【解決手段】 入力音声の検出されたピッチは、ピッチ
が入力音声の直近となる音高の検出部２１において、対
数値表現で、入力音声のピッチに、そのピッチが最も近
くなる音高のピッチ（半音単位のピッチ）に補正され
る。減算器２２においては、入力音声の検出されたピッ
チから入力音声の直近の音高に対応するピッチを減算し
て補正量を算出する。この補正量を、加算器２３におい
て、「ハーモニー音の音高」に対応する半音単位のピッ
チに加算することにより、補正されたハーモニー音のピ
ッチの値が出力される。
Description
【０００１】
【発明の属する技術分野】本発明は、音声信号または楽
音信号の付加音を生成する音声信号または楽音信号の処
理装置、および、この処理装置の機能を実現させるため
の処理プログラムが記録された記録媒体に関するもので
ある。
音信号の付加音を生成する音声信号または楽音信号の処
理装置、および、この処理装置の機能を実現させるため
の処理プログラムが記録された記録媒体に関するもので
ある。
【０００２】
【従来の技術】入力されたユーザの音声信号の音声ピッ
チをリアルタイムに検出し、所定のハーモニーモードに
従って、入力された音声信号のピッチを変更してハーモ
ニー音信号を生成し、入力された音声信号と混合してス
ピーカから出力するものが、例えば、特開平１１−１３
３９９０号公報等で知られている。ハーモニーモードに
は、「ボコーダハーモニーモード」，「コーダルハーモ
ニーモード」，「デチューンハーモニーモード」，「ク
ロマチックハーモニーモード」がある。
チをリアルタイムに検出し、所定のハーモニーモードに
従って、入力された音声信号のピッチを変更してハーモ
ニー音信号を生成し、入力された音声信号と混合してス
ピーカから出力するものが、例えば、特開平１１−１３
３９９０号公報等で知られている。ハーモニーモードに
は、「ボコーダハーモニーモード」，「コーダルハーモ
ニーモード」，「デチューンハーモニーモード」，「ク
ロマチックハーモニーモード」がある。
【０００３】図１１は、ボコーダハーモニーモードの各
タイプの一例を示す説明図である。ボコーダハーモニー
モードは、例えば、音声を入力しながらハーモニーパー
トに選ばれた鍵域を弾くと、入力された音声の声質で、
鍵盤操作子の音高に対応するピッチでハーモーニー音が
発音されるモードである。上述したハーモニーパート
は、右手鍵域（ＵＰＰＥＲ）、左手鍵域（ＬＯＷＥＲ）
のほか、自動演奏のソングトラック、外部入力等から、
ユーザにより選択することができる。ハーモニータイプ
によって、発音させるハーモニー音を、ハーモニーパー
トの音高から、オクターブシフトさせたり、入力音声の
ピッチを中心とする１オクターブの範囲内にハーモニー
音をシフト（オートトランスポーズ）させたりする。
タイプの一例を示す説明図である。ボコーダハーモニー
モードは、例えば、音声を入力しながらハーモニーパー
トに選ばれた鍵域を弾くと、入力された音声の声質で、
鍵盤操作子の音高に対応するピッチでハーモーニー音が
発音されるモードである。上述したハーモニーパート
は、右手鍵域（ＵＰＰＥＲ）、左手鍵域（ＬＯＷＥＲ）
のほか、自動演奏のソングトラック、外部入力等から、
ユーザにより選択することができる。ハーモニータイプ
によって、発音させるハーモニー音を、ハーモニーパー
トの音高から、オクターブシフトさせたり、入力音声の
ピッチを中心とする１オクターブの範囲内にハーモニー
音をシフト（オートトランスポーズ）させたりする。
【０００４】図１２は、デチューンハーモニーモードの
タイプの一例を示す説明図である。デチューンハーモニ
ーモードは、入力音声のピッチを、わずかにずらせた音
を鳴らすことによりコーラス効果をねらったモードであ
る。このハーモニー音の音高は、デチューン量と入力音
声によって決まる。１タイプしか図示していないが、デ
チューン量を変えることで複数のタイプを設定できる。
タイプの一例を示す説明図である。デチューンハーモニ
ーモードは、入力音声のピッチを、わずかにずらせた音
を鳴らすことによりコーラス効果をねらったモードであ
る。このハーモニー音の音高は、デチューン量と入力音
声によって決まる。１タイプしか図示していないが、デ
チューン量を変えることで複数のタイプを設定できる。
【０００５】図１３は、クロマチックハーモニーモード
の各タイプの一例を示す説明図である。クロマチックハ
ーモニーモードは、入力音声から固定ピッチ分シフトし
たハーモニー音を鳴らすモードである。このハーモニー
音の音高も、ピッチシフト量と入力音声とによって決ま
る。タイプの種類を切り替えることにより、ピッチシフ
ト量が変わる。
の各タイプの一例を示す説明図である。クロマチックハ
ーモニーモードは、入力音声から固定ピッチ分シフトし
たハーモニー音を鳴らすモードである。このハーモニー
音の音高も、ピッチシフト量と入力音声とによって決ま
る。タイプの種類を切り替えることにより、ピッチシフ
ト量が変わる。
【０００６】図１４は、コーダルハーモニーモードの各
タイプの一例を示す説明図である。コーダルハーモニー
モードは、例えば、自動伴奏コード鍵域の鍵盤操作子で
指定したコード（和音）タイプを認識し、そのコードタ
イプで、入力音声のピッチに合ったハーモニー音を鳴ら
すモードである。音声を入力するだけで、指定されたコ
ードタイプに合ったハーモニー音が鳴る。認識できるコ
ードタイプは、ＭＩＤＩ仕様書に規定された３７種類で
あり、ハーモニータイプと、このコードタイプ、およ
び、入力音声のピッチの直近となる音高のピッチ（ボー
カルノート）に応じて、ハーモニー音のピッチを決定す
る。なお、本明細書中において、音高とは、オクターブ
を区別した音名に対応するピッチを意味し、ピッチの周
波数が半音単位で規格化されている。ＭＩＤＩ仕様書で
はノートコードと呼ばれ、音名（Ｃ４）を６０として０
〜１２７の番号が付されている。ただし、音名に対する
ピッチの周波数は、音名「Ａ４」が４４０Ｈｚとなる絶
対的な周波数からシフトした周波数に対応させる場合
や、平均律とは異なる純正律を使用する場合もある。
タイプの一例を示す説明図である。コーダルハーモニー
モードは、例えば、自動伴奏コード鍵域の鍵盤操作子で
指定したコード（和音）タイプを認識し、そのコードタ
イプで、入力音声のピッチに合ったハーモニー音を鳴ら
すモードである。音声を入力するだけで、指定されたコ
ードタイプに合ったハーモニー音が鳴る。認識できるコ
ードタイプは、ＭＩＤＩ仕様書に規定された３７種類で
あり、ハーモニータイプと、このコードタイプ、およ
び、入力音声のピッチの直近となる音高のピッチ（ボー
カルノート）に応じて、ハーモニー音のピッチを決定す
る。なお、本明細書中において、音高とは、オクターブ
を区別した音名に対応するピッチを意味し、ピッチの周
波数が半音単位で規格化されている。ＭＩＤＩ仕様書で
はノートコードと呼ばれ、音名（Ｃ４）を６０として０
〜１２７の番号が付されている。ただし、音名に対する
ピッチの周波数は、音名「Ａ４」が４４０Ｈｚとなる絶
対的な周波数からシフトした周波数に対応させる場合
や、平均律とは異なる純正律を使用する場合もある。
【０００７】ハーモニータイプを切り替えることによ
り、種々のハーモニー音を付けることができる。１声
（１ボイス）や２声（２ボイス）を選択したり、入力音
声のピッチに対し、上（「１声が上」）や下（「１声が
下」）の音高のハーモニー音を指定することができる。
「１声がベース（Ｂａｓｓ）」は、コード指定したコー
ドのルート音をハーモニー音の音高とするものである。
また、ユニゾンにおいては、入力音声のピッチに合った
音高のハーモニー音、および、これより１〜数オクター
ブ上か、１〜数オクターブ下の音高のハーモニー音の中
から選択する。
り、種々のハーモニー音を付けることができる。１声
（１ボイス）や２声（２ボイス）を選択したり、入力音
声のピッチに対し、上（「１声が上」）や下（「１声が
下」）の音高のハーモニー音を指定することができる。
「１声がベース（Ｂａｓｓ）」は、コード指定したコー
ドのルート音をハーモニー音の音高とするものである。
また、ユニゾンにおいては、入力音声のピッチに合った
音高のハーモニー音、および、これより１〜数オクター
ブ上か、１〜数オクターブ下の音高のハーモニー音の中
から選択する。
【０００８】上述したデチューンハーモニーモードおよ
びクロマチックハーモニーモードにおいて、ハーモニー
音の音高は、入力音声信号のピッチ（ボーカルピッチ）
を、デチューンまたはピッチシフトしたピッチとなる。
従って、ボーカルピッチそのものからデチューンまたは
ピッチシフトさせれば、入力音声とハーモニー音との間
には、常にピッチ周波数の比例関係が保たれる。しか
し、上述したボコーダハーモニーモードおよびコーダル
ハーモニーモードにおいては、ハーモニー音は、鍵盤操
作子やコード指定により指定される、音高に対応するピ
ッチとなる。このピッチは半音単位で規格化されてい
る。すなわち、ボコーダモードでは、ハーモニー音は、
ハーモニーパートの音高に対応するピッチあるいはこれ
をオクターブ単位で移調したピッチが与えられる。ま
た、コーダルハーモニーモードでは、入力音声のピッチ
の直近となる音高とコード指定とに応じて、ハーモニー
音に音高が指定され、この音高に対応した半音単位の規
格化されたピッチが与えられる。
びクロマチックハーモニーモードにおいて、ハーモニー
音の音高は、入力音声信号のピッチ（ボーカルピッチ）
を、デチューンまたはピッチシフトしたピッチとなる。
従って、ボーカルピッチそのものからデチューンまたは
ピッチシフトさせれば、入力音声とハーモニー音との間
には、常にピッチ周波数の比例関係が保たれる。しか
し、上述したボコーダハーモニーモードおよびコーダル
ハーモニーモードにおいては、ハーモニー音は、鍵盤操
作子やコード指定により指定される、音高に対応するピ
ッチとなる。このピッチは半音単位で規格化されてい
る。すなわち、ボコーダモードでは、ハーモニー音は、
ハーモニーパートの音高に対応するピッチあるいはこれ
をオクターブ単位で移調したピッチが与えられる。ま
た、コーダルハーモニーモードでは、入力音声のピッチ
の直近となる音高とコード指定とに応じて、ハーモニー
音に音高が指定され、この音高に対応した半音単位の規
格化されたピッチが与えられる。
【０００９】一方、入力音声のボーカルピッチは、必ず
しも音高に対応する規格化されたピッチになるとは限ら
ない。すなわち、ユーザが歌うピッチがずれていたり、
不安定であったりして、ピッチが正確でないと、入力音
声のピッチは、音高に対応したピッチからずれることに
なる。従って、ユーザが歌うときの入力音声に上述した
ハーモニー音を付けると、入力音声と本来調和している
はずのハーモニー音に、濁りが発生する。
しも音高に対応する規格化されたピッチになるとは限ら
ない。すなわち、ユーザが歌うピッチがずれていたり、
不安定であったりして、ピッチが正確でないと、入力音
声のピッチは、音高に対応したピッチからずれることに
なる。従って、ユーザが歌うときの入力音声に上述した
ハーモニー音を付けると、入力音声と本来調和している
はずのハーモニー音に、濁りが発生する。
【００１０】これに対し、従来から知られている、入力
音声に対するピッチ補正を行ってリード音として放音さ
せれば、入力音声も半音単位のピッチに補正されるの
で、入力音声とハーモニー音との調和が保たれる。しか
し、リード音およびハーモニー音に、ユーザが歌う歌の
微妙な音程のずれが反映されなくなってしまう。また、
上述したデチューンハーモニーモードやクロマチックハ
ーモニーモードにおいて、入力音声のボーカルピッチか
ら固定ピッチ分シフトさせた音をハーモニー音とすれ
ば、入力音声の微妙なピッチのずれを残して、入力音声
とハーモニー音との調和をとることが可能である。しか
し、歌の旋律が時間とともに変化しても、リード音とハ
ーモニー音とは、常に一定のピッチ差を保つものである
ために、変化の乏しいハーモニー音となってしまう。
音声に対するピッチ補正を行ってリード音として放音さ
せれば、入力音声も半音単位のピッチに補正されるの
で、入力音声とハーモニー音との調和が保たれる。しか
し、リード音およびハーモニー音に、ユーザが歌う歌の
微妙な音程のずれが反映されなくなってしまう。また、
上述したデチューンハーモニーモードやクロマチックハ
ーモニーモードにおいて、入力音声のボーカルピッチか
ら固定ピッチ分シフトさせた音をハーモニー音とすれ
ば、入力音声の微妙なピッチのずれを残して、入力音声
とハーモニー音との調和をとることが可能である。しか
し、歌の旋律が時間とともに変化しても、リード音とハ
ーモニー音とは、常に一定のピッチ差を保つものである
ために、変化の乏しいハーモニー音となってしまう。
【００１１】
【発明が解決しようとする課題】本発明は、上述した問
題点を解決するためになされたもので、入力音声信号と
調和を保ちながら、変化に富んだ付加音信号を生成する
音声信号または楽音信号の処理装置、および、音声信号
または楽音信号の処理プログラムが記録された記録媒体
を提供することを目的とするものである。
題点を解決するためになされたもので、入力音声信号と
調和を保ちながら、変化に富んだ付加音信号を生成する
音声信号または楽音信号の処理装置、および、音声信号
または楽音信号の処理プログラムが記録された記録媒体
を提供することを目的とするものである。
【００１２】
【課題を解決するための手段】本発明は、請求項１に記
載の発明においては、音声信号または楽音信号を入力信
号として付加音信号を生成する音声信号または楽音信号
の処理装置において、前記入力信号のピッチを検出する
ピッチ検出手段、前記付加音信号の音高を制御する制御
データを入力する制御データ入力手段、少なくとも前記
制御データに基づいて前記付加音信号の音高を指定する
音高指定手段、前記入力信号のピッチと、前記入力信号
のピッチの直近となる音高のピッチとの差に応じて、指
定された前記付加音信号の音高に対応するピッチを補正
するピッチ補正手段、前記付加音信号の補正されたピッ
チを有する音声信号または楽音信号を生成する付加音信
号生成手段を有するものである。従って、入力信号とピ
ッチの調和を保ちながら、入力音声信号と同様に変化に
富んだ付加音信号を生成することができる。また、付加
音信号の音高を制御する制御データを入力するだけでよ
いので、入力が簡単になる。
載の発明においては、音声信号または楽音信号を入力信
号として付加音信号を生成する音声信号または楽音信号
の処理装置において、前記入力信号のピッチを検出する
ピッチ検出手段、前記付加音信号の音高を制御する制御
データを入力する制御データ入力手段、少なくとも前記
制御データに基づいて前記付加音信号の音高を指定する
音高指定手段、前記入力信号のピッチと、前記入力信号
のピッチの直近となる音高のピッチとの差に応じて、指
定された前記付加音信号の音高に対応するピッチを補正
するピッチ補正手段、前記付加音信号の補正されたピッ
チを有する音声信号または楽音信号を生成する付加音信
号生成手段を有するものである。従って、入力信号とピ
ッチの調和を保ちながら、入力音声信号と同様に変化に
富んだ付加音信号を生成することができる。また、付加
音信号の音高を制御する制御データを入力するだけでよ
いので、入力が簡単になる。
【００１３】請求項２に記載の発明においては、音声信
号または楽音信号を入力信号として付加音信号を生成す
る音声信号または楽音信号の処理装置において、前記入
力信号のピッチを検出するピッチ検出手段、時間的に変
化する音高データを入力する音高データ入力手段、前記
付加音信号の音高を制御する制御データを入力する制御
データ入力手段、少なくとも前記制御データに基づいて
前記付加音信号の音高を指定する音高指定手段、前記音
高データに対応するピッチと前記入力信号のピッチとの
差に応じて、指定された前記付加音信号の音高に対応す
るピッチを補正するピッチ補正手段、前記付加音信号の
補正されたピッチを有する音声信号または楽音信号を生
成する付加音信号生成手段を有するものである。従っ
て、入力信号とピッチの調和を保ちながら、入力音声と
同様に変化に富んだ付加音信号を生成することができ
る。また、時間的に変化する音高データによる楽音信号
を演奏再生すれば、歌の基準ピッチとして放音させるこ
とが可能となる。
号または楽音信号を入力信号として付加音信号を生成す
る音声信号または楽音信号の処理装置において、前記入
力信号のピッチを検出するピッチ検出手段、時間的に変
化する音高データを入力する音高データ入力手段、前記
付加音信号の音高を制御する制御データを入力する制御
データ入力手段、少なくとも前記制御データに基づいて
前記付加音信号の音高を指定する音高指定手段、前記音
高データに対応するピッチと前記入力信号のピッチとの
差に応じて、指定された前記付加音信号の音高に対応す
るピッチを補正するピッチ補正手段、前記付加音信号の
補正されたピッチを有する音声信号または楽音信号を生
成する付加音信号生成手段を有するものである。従っ
て、入力信号とピッチの調和を保ちながら、入力音声と
同様に変化に富んだ付加音信号を生成することができ
る。また、時間的に変化する音高データによる楽音信号
を演奏再生すれば、歌の基準ピッチとして放音させるこ
とが可能となる。
【００１４】請求項３に記載の発明においては、請求項
１または２に記載の音声信号または楽音信号の処理装置
において、前記付加音信号生成手段は、前記入力信号の
波形を、補正された前記付加音信号のピッチを有する波
形に変換するものである。従って、入力信号と音質が近
いハーモニー音信号を生成することができる。
１または２に記載の音声信号または楽音信号の処理装置
において、前記付加音信号生成手段は、前記入力信号の
波形を、補正された前記付加音信号のピッチを有する波
形に変換するものである。従って、入力信号と音質が近
いハーモニー音信号を生成することができる。
【００１５】請求項４に記載の発明においては、音声信
号または楽音信号を入力信号として付加音信号を生成さ
せる機能をコンピュータに実現させるための音声信号ま
たは楽音信号の処理プログラムが記録された記録媒体で
あって、前記入力信号のピッチを検出させるピッチ検出
機能、前記付加音信号の音高を制御する制御データに基
づいて前記付加音信号の音高を指定させる音高指定機
能、前記入力信号のピッチと、前記入力信号のピッチの
直近となる音高のピッチとの差に応じて、指定された前
記付加音信号の音高に対応するピッチを補正させるピッ
チ補正機能、前記付加音信号の補正されたピッチを有す
る音声信号または楽音信号を生成させる付加音信号生成
機能を有するものである。従って、請求項１に記載の発
明と同様の機能をコンピュータに実現させることができ
るプログラムを提供することができる。
号または楽音信号を入力信号として付加音信号を生成さ
せる機能をコンピュータに実現させるための音声信号ま
たは楽音信号の処理プログラムが記録された記録媒体で
あって、前記入力信号のピッチを検出させるピッチ検出
機能、前記付加音信号の音高を制御する制御データに基
づいて前記付加音信号の音高を指定させる音高指定機
能、前記入力信号のピッチと、前記入力信号のピッチの
直近となる音高のピッチとの差に応じて、指定された前
記付加音信号の音高に対応するピッチを補正させるピッ
チ補正機能、前記付加音信号の補正されたピッチを有す
る音声信号または楽音信号を生成させる付加音信号生成
機能を有するものである。従って、請求項１に記載の発
明と同様の機能をコンピュータに実現させることができ
るプログラムを提供することができる。
【００１６】請求項５に記載の発明においては、音声信
号または楽音信号を入力信号として付加音信号を生成さ
せる機能をコンピュータに実現させるための音声信号ま
たは楽音信号の処理プログラムが記録された記録媒体で
あって、前記入力信号のピッチを検出させるピッチ検出
機能、時間的に変化する音高データを入力させる音高デ
ータ入力機能、前記付加音信号の音高を制御する制御デ
ータを入力させる制御データ入力機能、少なくとも前記
制御データに基づいて前記付加音信号の音高を指定させ
る音高指定機能、前記音高データに対応するピッチと前
記入力信号のピッチとの差に応じて、指定された前記付
加音信号の音高に対応するピッチを補正させるピッチ補
正機能、前記付加音信号の補正されたピッチを有する音
声信号または楽音信号を生成させる付加音信号生成機能
を有するものである。従って、請求項２に記載の発明と
同様の機能をコンピュータに実現させることができるプ
ログラムを提供することができる。
号または楽音信号を入力信号として付加音信号を生成さ
せる機能をコンピュータに実現させるための音声信号ま
たは楽音信号の処理プログラムが記録された記録媒体で
あって、前記入力信号のピッチを検出させるピッチ検出
機能、時間的に変化する音高データを入力させる音高デ
ータ入力機能、前記付加音信号の音高を制御する制御デ
ータを入力させる制御データ入力機能、少なくとも前記
制御データに基づいて前記付加音信号の音高を指定させ
る音高指定機能、前記音高データに対応するピッチと前
記入力信号のピッチとの差に応じて、指定された前記付
加音信号の音高に対応するピッチを補正させるピッチ補
正機能、前記付加音信号の補正されたピッチを有する音
声信号または楽音信号を生成させる付加音信号生成機能
を有するものである。従って、請求項２に記載の発明と
同様の機能をコンピュータに実現させることができるプ
ログラムを提供することができる。
【００１７】
【発明の実施の形態】図１は、本発明の音声信号または
楽音信号の処理装置の実施の形態を説明するための機能
ブロック構成図である。最初に全体構成を説明する。図
中、１は音声入力部としてのマイクロフォン、２は押鍵
により演奏データが出力される鍵盤操作子、３は記憶さ
れた演奏データが読み出される自動演奏部、４はＭＩＤ
Ｉ（Musical Instrument Digital Interface）信号等を
入力する外部入力部、５は機能やパラメータの設定を行
うための操作パネル、６は音声入力のピッチ（ボーカル
ピッチ）を検出するピッチ検出部である。
楽音信号の処理装置の実施の形態を説明するための機能
ブロック構成図である。最初に全体構成を説明する。図
中、１は音声入力部としてのマイクロフォン、２は押鍵
により演奏データが出力される鍵盤操作子、３は記憶さ
れた演奏データが読み出される自動演奏部、４はＭＩＤ
Ｉ（Musical Instrument Digital Interface）信号等を
入力する外部入力部、５は機能やパラメータの設定を行
うための操作パネル、６は音声入力のピッチ（ボーカル
ピッチ）を検出するピッチ検出部である。
【００１８】７は音声入力の声質を制御するフォルマン
ト変更部であり、例えば、７ａは音声入力をそのまま通
過させるか否かを制御するスイッチ、７ｂはリード音ま
たはハーモニー音のいずれか一方のフォルマントを変更
する第１のフォルマント変更部、７ｃ，７ｄはハーモニ
ー音のフォルマントを変更する第２，第３のフォルマン
ト変更部である。第１〜第３のフォルマント変更部７ｂ
〜７ｄは、いずれも、機能を停止してフォルマントを変
更しない場合がある。８は入力信号のピッチを変換する
ピッチ変換部であり、８ａ〜８ｃは第１〜第３のピッチ
変換部であって、例えば、第１のピッチ変換部８ａは、
リード音またはハーモニー音のいずれか一方のピッチを
変換し、第２，第３のピッチ変換部８ｂ，８ｃはハーモ
ニー音のピッチを変換する。
ト変更部であり、例えば、７ａは音声入力をそのまま通
過させるか否かを制御するスイッチ、７ｂはリード音ま
たはハーモニー音のいずれか一方のフォルマントを変更
する第１のフォルマント変更部、７ｃ，７ｄはハーモニ
ー音のフォルマントを変更する第２，第３のフォルマン
ト変更部である。第１〜第３のフォルマント変更部７ｂ
〜７ｄは、いずれも、機能を停止してフォルマントを変
更しない場合がある。８は入力信号のピッチを変換する
ピッチ変換部であり、８ａ〜８ｃは第１〜第３のピッチ
変換部であって、例えば、第１のピッチ変換部８ａは、
リード音またはハーモニー音のいずれか一方のピッチを
変換し、第２，第３のピッチ変換部８ｂ，８ｃはハーモ
ニー音のピッチを変換する。
【００１９】９はピッチ検出部６が出力する音声入力の
ピッチやチャンネル割当部１０から出力される演奏デー
タ等に基づいて、ピッチ変換部８および音源部１２が出
力するピッチを制御するピッチ制御部、１０は鍵盤操作
子２，自動演奏部３，外部入力部４等からの制御入力
を、ピッチ制御部９および音源部１２の制御入力として
選択的に割り当てるチャンネル割当部、１１は各機能ブ
ロックを統括して制御する機能制御部、１２は楽音信号
を生成する音源部である。１３は効果付与部であり、１
３ａ〜１３ｅは第１〜第５の効果付与部であって、例え
ば、第１の効果付与部１３ａはリード音に対する効果を
付与し、第２の効果付与部１３ｂはリード音またはハー
モニー音に対する効果を付与し、第３，第４の効果付与
部は、ハーモニー音に対する効果を付与し、第５の効果
付与部１３ｅは楽音に対する効果を付与する。操作パネ
ル５に設けられたスイッチにより、入力信号の種類別
に、効果を簡単に素早く付与することが可能である。
ピッチやチャンネル割当部１０から出力される演奏デー
タ等に基づいて、ピッチ変換部８および音源部１２が出
力するピッチを制御するピッチ制御部、１０は鍵盤操作
子２，自動演奏部３，外部入力部４等からの制御入力
を、ピッチ制御部９および音源部１２の制御入力として
選択的に割り当てるチャンネル割当部、１１は各機能ブ
ロックを統括して制御する機能制御部、１２は楽音信号
を生成する音源部である。１３は効果付与部であり、１
３ａ〜１３ｅは第１〜第５の効果付与部であって、例え
ば、第１の効果付与部１３ａはリード音に対する効果を
付与し、第２の効果付与部１３ｂはリード音またはハー
モニー音に対する効果を付与し、第３，第４の効果付与
部は、ハーモニー音に対する効果を付与し、第５の効果
付与部１３ｅは楽音に対する効果を付与する。操作パネ
ル５に設けられたスイッチにより、入力信号の種類別
に、効果を簡単に素早く付与することが可能である。
【００２０】１４は信号出力制御部であり、機能制御部
１１により制御される。１４ａ〜１４ｅは第１〜第５の
信号出力制御部であって、１４ａはリード音に対する音
量比を制御し、１４ｂはリード音またはハーモニー音の
いずれか一方に対する音量比を制御し、１４ｃ，１４ｄ
はハーモニー音に対する音量比を制御し、１４ｅは楽音
に対する音量比を制御する。また、各系統を出力をする
か否かも制御する。ハーモニー音信号は、信号出力制御
部１４ａまたは１４ｂのいずれか一方から出力されるリ
ード音信号と混合されて出力されるほか、リード音信号
が出力されないで、ハーモニー音信号単独で出力される
ことも可能である。１５はパン制御部、１６は第１〜第
５の信号出力制御部１４ａ〜１４ｅの出力をミキシング
して増幅することにより、ステレオあるいは３Ｄサウン
ドの音声あるいは楽音信号を出力するアンプ部、１７は
１個以上のスピーカ、１８は操作パネル上の液晶等によ
る表示器である。図１においてはボーカルハーモニーの
パートを４系統設けた例を示している。パートの割り当
ては、操作パネル５により設定され、機能制御部１１に
より制御されてチャンネル割当部１０において実行され
る。
１１により制御される。１４ａ〜１４ｅは第１〜第５の
信号出力制御部であって、１４ａはリード音に対する音
量比を制御し、１４ｂはリード音またはハーモニー音の
いずれか一方に対する音量比を制御し、１４ｃ，１４ｄ
はハーモニー音に対する音量比を制御し、１４ｅは楽音
に対する音量比を制御する。また、各系統を出力をする
か否かも制御する。ハーモニー音信号は、信号出力制御
部１４ａまたは１４ｂのいずれか一方から出力されるリ
ード音信号と混合されて出力されるほか、リード音信号
が出力されないで、ハーモニー音信号単独で出力される
ことも可能である。１５はパン制御部、１６は第１〜第
５の信号出力制御部１４ａ〜１４ｅの出力をミキシング
して増幅することにより、ステレオあるいは３Ｄサウン
ドの音声あるいは楽音信号を出力するアンプ部、１７は
１個以上のスピーカ、１８は操作パネル上の液晶等によ
る表示器である。図１においてはボーカルハーモニーの
パートを４系統設けた例を示している。パートの割り当
ては、操作パネル５により設定され、機能制御部１１に
より制御されてチャンネル割当部１０において実行され
る。
【００２１】次に上述した実施の形態の動作概要を説明
する。マイクロフォン１の出力は、フォルマント変更部
７およびピッチ検出部６に入力される。図示のフォルマ
ント変更部７の一例においては、音声入力をそのまま出
力する１系統、音声入力をフォルマント変更（変更しな
い場合を含む）して出力する３系統という、最大４系統
を出力することができる。スイッチ部７ａをオフとし
て、音声入力をそのまま出力しない場合に、第１のフォ
ルマント変更部７ｂが、リード音に対するフォルマント
変更を行う場合がある。この場合、ハーモニー音は２系
統となる。
する。マイクロフォン１の出力は、フォルマント変更部
７およびピッチ検出部６に入力される。図示のフォルマ
ント変更部７の一例においては、音声入力をそのまま出
力する１系統、音声入力をフォルマント変更（変更しな
い場合を含む）して出力する３系統という、最大４系統
を出力することができる。スイッチ部７ａをオフとし
て、音声入力をそのまま出力しない場合に、第１のフォ
ルマント変更部７ｂが、リード音に対するフォルマント
変更を行う場合がある。この場合、ハーモニー音は２系
統となる。
【００２２】第１〜第３のフォルマント変更部７ｂ〜７
ｄの出力は、それぞれ第１〜第３のピッチ変換部８ａ〜
８ｃに出力される。スイッチ部７ａの出力、第１〜第３
のピッチ変換部８ａ〜８ｃの出力、および、音源部１２
の各系統の出力は、それぞれ、第１〜第４の効果付与部
１３ａ〜１３ｅにおいて効果を付与される。さらに、第
１〜第５の信号処理部１４ａ〜１４ｅにおいて、特定の
１または複数のチャンネルだけを出力したり、パン制御
部１５の重み付け制御により、各系統の信号の定位を決
定する。信号出力制御部１４ａの出力はリード音信号と
なり、信号出力制御部１４ｂの出力はリード音信号もし
くはハーモニー音信号のいずれか一方となり、信号出力
制御部１４ｃ，１４ｄの出力はハーモニー音信号とな
り、信号出力制御部１４ｅの出力は楽音信号となり、そ
れぞれ、アンプ部１６においてミキシングされ、スピー
カ１７より放音される。
ｄの出力は、それぞれ第１〜第３のピッチ変換部８ａ〜
８ｃに出力される。スイッチ部７ａの出力、第１〜第３
のピッチ変換部８ａ〜８ｃの出力、および、音源部１２
の各系統の出力は、それぞれ、第１〜第４の効果付与部
１３ａ〜１３ｅにおいて効果を付与される。さらに、第
１〜第５の信号処理部１４ａ〜１４ｅにおいて、特定の
１または複数のチャンネルだけを出力したり、パン制御
部１５の重み付け制御により、各系統の信号の定位を決
定する。信号出力制御部１４ａの出力はリード音信号と
なり、信号出力制御部１４ｂの出力はリード音信号もし
くはハーモニー音信号のいずれか一方となり、信号出力
制御部１４ｃ，１４ｄの出力はハーモニー音信号とな
り、信号出力制御部１４ｅの出力は楽音信号となり、そ
れぞれ、アンプ部１６においてミキシングされ、スピー
カ１７より放音される。
【００２３】一方、ピッチ検出部６は、ゼロクロス法
等、音声分析の分野で周知の技術を用いてボーカルピッ
チを検出し、ピッチ制御部９に出力する。ピッチ制御部
９は、ハーモニーモードに従って、変換後のピッチを決
定し、ピッチ変換部８、フォルマント変更部７、音源部
１２、効果付与部１３等に出力する。ピッチ変換は、入
力波形のフォルマントを保持したままピッチを変換する
という従来より知られた方法を用いることができる。簡
単に概要を説明する。入力波形を所定の周期ごとに窓関
数を用いて切り出しを開始し、切り出された波形を並べ
る。このときの周期の逆数が出力波形のピッチとなる。
このような処理を２系列で行い、交互に切り出しを開始
するようにすれば、入力信号のピッチよりも高いピッチ
周波数の出力波形も得られる。その際、窓関数の幅は出
力周期の２倍以下とし、隣接する窓関数同士が重ならな
いようにする。上述したピッチ変換の波形の切り出し時
に波形の読み出し速度を変えることにより、波形そのも
のの形を変化させることにより、フォルマント変更がで
き、これにより入力音声の声質を、男声から女声、女声
から男声に変換させることができる。
等、音声分析の分野で周知の技術を用いてボーカルピッ
チを検出し、ピッチ制御部９に出力する。ピッチ制御部
９は、ハーモニーモードに従って、変換後のピッチを決
定し、ピッチ変換部８、フォルマント変更部７、音源部
１２、効果付与部１３等に出力する。ピッチ変換は、入
力波形のフォルマントを保持したままピッチを変換する
という従来より知られた方法を用いることができる。簡
単に概要を説明する。入力波形を所定の周期ごとに窓関
数を用いて切り出しを開始し、切り出された波形を並べ
る。このときの周期の逆数が出力波形のピッチとなる。
このような処理を２系列で行い、交互に切り出しを開始
するようにすれば、入力信号のピッチよりも高いピッチ
周波数の出力波形も得られる。その際、窓関数の幅は出
力周期の２倍以下とし、隣接する窓関数同士が重ならな
いようにする。上述したピッチ変換の波形の切り出し時
に波形の読み出し速度を変えることにより、波形そのも
のの形を変化させることにより、フォルマント変更がで
き、これにより入力音声の声質を、男声から女声、女声
から男声に変換させることができる。
【００２４】ピッチ制御部９は、フォルマント変更部
７、効果付与部１３を制御し、ピッチ変換前後のピッチ
差、すなわち、入力音声のボーカルピッチとピッチ変換
されたハーモニー音とのピッチ差に応じてハーモニー音
に付与する効果（声質を含む）の種類を変更したり、お
よびまたは、効果の程度を変更する機能を有している。
その結果、使用者の音声入力に対し、ハーモニー音に変
化に富んだ効果を付与したり、ハーモニー音に対して使
用者の音声のピッチからのピッチ差に応じた適切な効果
の付与を自動的に行うことができる。
７、効果付与部１３を制御し、ピッチ変換前後のピッチ
差、すなわち、入力音声のボーカルピッチとピッチ変換
されたハーモニー音とのピッチ差に応じてハーモニー音
に付与する効果（声質を含む）の種類を変更したり、お
よびまたは、効果の程度を変更する機能を有している。
その結果、使用者の音声入力に対し、ハーモニー音に変
化に富んだ効果を付与したり、ハーモニー音に対して使
用者の音声のピッチからのピッチ差に応じた適切な効果
の付与を自動的に行うことができる。
【００２５】チャンネル割当部１０は、鍵盤操作子２、
自動演奏部３、外部入力部４のいずれかの演奏入力デー
タをハーモニーパートに割り当てて、上述したピッチ制
御部９に出力したり、他の演奏入力データを楽音発生用
のチャンネルに割り当てて、音源部１２において生成さ
れる楽音の音高等を制御する。操作パネル５の出力は機
能制御部１１を介して、フォルマント変更部７、ピッチ
制御部９、チャンネル割当部１０、音源部１２、効果付
与部１３、信号出力制御部１４、パン制御部１５、アン
プ１６、表示器１８等の各機能を制御する。
自動演奏部３、外部入力部４のいずれかの演奏入力デー
タをハーモニーパートに割り当てて、上述したピッチ制
御部９に出力したり、他の演奏入力データを楽音発生用
のチャンネルに割り当てて、音源部１２において生成さ
れる楽音の音高等を制御する。操作パネル５の出力は機
能制御部１１を介して、フォルマント変更部７、ピッチ
制御部９、チャンネル割当部１０、音源部１２、効果付
与部１３、信号出力制御部１４、パン制御部１５、アン
プ１６、表示器１８等の各機能を制御する。
【００２６】上述した構成により、マイクロフォン１か
ら入力された音声信号に対応するリード音と入力音声に
基づいて生成されたハーモニー音と楽音とは、所望に応
じて効果が付与されて、少なくとも１つが選択されミキ
シングされて放音されることになる。付与される効果と
しては、ジェンダー（男声，女声，中間声といった声質
のタイプおよび深さ）、ビブラート、トレモロ、音量、
パン（定位）、デチューン（後述するデチューンハーモ
ニーモード以外のモードにおけるハーモニー音のデチュ
ーン）、リバーブ（残響）、コーラスなどがある。
ら入力された音声信号に対応するリード音と入力音声に
基づいて生成されたハーモニー音と楽音とは、所望に応
じて効果が付与されて、少なくとも１つが選択されミキ
シングされて放音されることになる。付与される効果と
しては、ジェンダー（男声，女声，中間声といった声質
のタイプおよび深さ）、ビブラート、トレモロ、音量、
パン（定位）、デチューン（後述するデチューンハーモ
ニーモード以外のモードにおけるハーモニー音のデチュ
ーン）、リバーブ（残響）、コーラスなどがある。
【００２７】図１においては、機能的にわかりやすくす
るために、効果付与部１３において効果の付与を行うも
のとしているが、ビブラート、デチューンなどのピッチ
の変化に関するものは、ピッチ変換部８におけるピッチ
変換と同時に行うことができる。また、音量およびパン
については、信号出力制御部１４において行うことにな
る。一方、ジェンダーの効果制御は、フォルマント変更
部７において行う。操作パネル５および機能制御部１１
は、使用者の入力音声信号（リード音信号）に付与する
効果と、ハーモニー音信号に付与する効果とを独立して
設定できるようにしている。
るために、効果付与部１３において効果の付与を行うも
のとしているが、ビブラート、デチューンなどのピッチ
の変化に関するものは、ピッチ変換部８におけるピッチ
変換と同時に行うことができる。また、音量およびパン
については、信号出力制御部１４において行うことにな
る。一方、ジェンダーの効果制御は、フォルマント変更
部７において行う。操作パネル５および機能制御部１１
は、使用者の入力音声信号（リード音信号）に付与する
効果と、ハーモニー音信号に付与する効果とを独立して
設定できるようにしている。
【００２８】リード音信号の出力系統数、ハーモニー音
信号の出力系統数は任意である。リード音に対しては、
フォルマント変更および効果を付与せずに第１の信号出
力制御部１４ａに入力してもよい。第１のフォルマント
変更部７ｂ、第１のピッチ変換部８ａ、第２の効果付与
部１３ｂ、第２の信号出力制御部１４ｂを、リード音の
信号処理専用のブロックとしてもよい。信号出力制御部
１４においては、リード音信号、複数のハーモニー音信
号、および楽音信号の各出力系統の任意のものを１また
は複数選択してアンプ１６に供給して、スピーカ１７か
ら放音させることができる。なお、この機能ブロック図
においては、アナログ信号処理とディジタル信号処理の
区別をしていないので、Ａ／Ｄ変換器、Ｄ／Ａ変換器の
記載を省略している。一例として、マイクロフォン１の
アナログ信号は、Ａ／Ｄ変換器を通してディジタル信号
に変換してから後続のブロックに供給される。また、信
号出力制御部１４においては、複数系統の出力を重み付
けした後にディジタル加算し、Ｄ／Ａ変換器を通してア
ンプ１６に出力する。
信号の出力系統数は任意である。リード音に対しては、
フォルマント変更および効果を付与せずに第１の信号出
力制御部１４ａに入力してもよい。第１のフォルマント
変更部７ｂ、第１のピッチ変換部８ａ、第２の効果付与
部１３ｂ、第２の信号出力制御部１４ｂを、リード音の
信号処理専用のブロックとしてもよい。信号出力制御部
１４においては、リード音信号、複数のハーモニー音信
号、および楽音信号の各出力系統の任意のものを１また
は複数選択してアンプ１６に供給して、スピーカ１７か
ら放音させることができる。なお、この機能ブロック図
においては、アナログ信号処理とディジタル信号処理の
区別をしていないので、Ａ／Ｄ変換器、Ｄ／Ａ変換器の
記載を省略している。一例として、マイクロフォン１の
アナログ信号は、Ａ／Ｄ変換器を通してディジタル信号
に変換してから後続のブロックに供給される。また、信
号出力制御部１４においては、複数系統の出力を重み付
けした後にディジタル加算し、Ｄ／Ａ変換器を通してア
ンプ１６に出力する。
【００２９】マイクロフォン１等から入力された入力音
声は、フォルマント変更部７を通り、ピッチ変換部８に
おいて、指定されたハーモニー音の音高に対応するピッ
チに変換されてハーモニー音となる。従って、入力音声
から生成されるハーモニー音のピッチは、音高に対応し
た半音単位で規格化されたピッチである。その結果、入
力音声のピッチと、ハーモニー音のピッチとは、周波数
比が一定しないので調和しない。そこで、この実施の形
態では、入力音声が音高に対応したピッチからずれてい
れば、ハーモニー音のピッチを補正して、半音単位のピ
ッチの値から、入力音声と同じようにずらせるようにし
た。
声は、フォルマント変更部７を通り、ピッチ変換部８に
おいて、指定されたハーモニー音の音高に対応するピッ
チに変換されてハーモニー音となる。従って、入力音声
から生成されるハーモニー音のピッチは、音高に対応し
た半音単位で規格化されたピッチである。その結果、入
力音声のピッチと、ハーモニー音のピッチとは、周波数
比が一定しないので調和しない。そこで、この実施の形
態では、入力音声が音高に対応したピッチからずれてい
れば、ハーモニー音のピッチを補正して、半音単位のピ
ッチの値から、入力音声と同じようにずらせるようにし
た。
【００３０】図２は、本発明の第１の実施の形態におけ
るハーモニー音のピッチを出力する処理の一例を示す説
明図である。図中、２１はピッチが入力音声の直近とな
る音高の検出部、２２は減算器、２３は加算器である。
各ピッチは、例えばセント価のように、周波数の対数値
を用いる。従って、実周波数を用いた演算においては加
減算を乗除算で行うことになる。図３は、本発明の第１
の実施の形態におけるピッチ変換動作の一例を示す模式
的説明図である。図中、横軸は時間、縦軸はピッチであ
る。この実施の形態は、入力音声が音高に正確に対応す
るピッチから外れていた場合に、ハーモニー音のピッチ
を補正するというものである。
るハーモニー音のピッチを出力する処理の一例を示す説
明図である。図中、２１はピッチが入力音声の直近とな
る音高の検出部、２２は減算器、２３は加算器である。
各ピッチは、例えばセント価のように、周波数の対数値
を用いる。従って、実周波数を用いた演算においては加
減算を乗除算で行うことになる。図３は、本発明の第１
の実施の形態におけるピッチ変換動作の一例を示す模式
的説明図である。図中、横軸は時間、縦軸はピッチであ
る。この実施の形態は、入力音声が音高に正確に対応す
るピッチから外れていた場合に、ハーモニー音のピッチ
を補正するというものである。
【００３１】図２に示すように、入力音声の検出された
ピッチは、ピッチが入力音声の直近となる音高の検出部
２１において、対数値表現で、入力音声のピッチに、そ
のピッチが最も近くなる音高のピッチ（半音単位のピッ
チ）に補正される。言い換えれば、入力音声のピッチを
音高に同定する。なお、先に説明したように、本明細書
では、オクターブを区別した音名のピッチに音高という
用語を使用している。減算器２２においては、入力音声
の検出されたピッチから入力音声の直近の音高に対応す
るピッチを減算して補正量を算出する。この補正量を、
加算器２３において、「ハーモニー音の音高」に対応す
る半音単位のピッチに加算することにより、補正された
ハーモニー音のピッチの値が出力される。なお、補正さ
れたピッチにさらに一定値を加減算して補正されたピッ
チをシフト（移調）させてもよい。ここで、「ハーモニ
ー音の音高」とは、ボコーダハーモニーモードにおい
て、ハーモニーパートに指定された演奏入力の音高ある
いはオクターブシフトされた音高である。コーダルハー
モニーモードにおいては、入力音声の直近の音高と、コ
ード指定に基づいて決定される音高である。
ピッチは、ピッチが入力音声の直近となる音高の検出部
２１において、対数値表現で、入力音声のピッチに、そ
のピッチが最も近くなる音高のピッチ（半音単位のピッ
チ）に補正される。言い換えれば、入力音声のピッチを
音高に同定する。なお、先に説明したように、本明細書
では、オクターブを区別した音名のピッチに音高という
用語を使用している。減算器２２においては、入力音声
の検出されたピッチから入力音声の直近の音高に対応す
るピッチを減算して補正量を算出する。この補正量を、
加算器２３において、「ハーモニー音の音高」に対応す
る半音単位のピッチに加算することにより、補正された
ハーモニー音のピッチの値が出力される。なお、補正さ
れたピッチにさらに一定値を加減算して補正されたピッ
チをシフト（移調）させてもよい。ここで、「ハーモニ
ー音の音高」とは、ボコーダハーモニーモードにおい
て、ハーモニーパートに指定された演奏入力の音高ある
いはオクターブシフトされた音高である。コーダルハー
モニーモードにおいては、入力音声の直近の音高と、コ
ード指定に基づいて決定される音高である。
【００３２】図３に示すように、入力音声の直近の音高
およびハーモニー音の音高が変化しない限り、入力音声
の揺らぎに関わらず、入力音声のピッチとハーモニー音
のピッチとの間には、一定周波数比の関係が成立するの
で、ユーザの音声に調和したハーモニー音を生成するこ
とができる。ただし、入力音声のピッチのずれが、楽譜
に記述された本来の音高から±５０セントを超えてしま
うと、直近の音高が正しい音高から変化してしまう。従
って、ボコーダハーモニーモードにおいては、誤った補
正がされてしまう。しかし、入力音声に対する上述した
一定周波数比の関係は保たれる。また、コーダルハーモ
ニーモードにおいては、誤ったメロディーの音高に応じ
た誤ったハーモニー音が生成されることになる。しか
し、入力音声に対する上述した一定比の関係は満足され
る。
およびハーモニー音の音高が変化しない限り、入力音声
の揺らぎに関わらず、入力音声のピッチとハーモニー音
のピッチとの間には、一定周波数比の関係が成立するの
で、ユーザの音声に調和したハーモニー音を生成するこ
とができる。ただし、入力音声のピッチのずれが、楽譜
に記述された本来の音高から±５０セントを超えてしま
うと、直近の音高が正しい音高から変化してしまう。従
って、ボコーダハーモニーモードにおいては、誤った補
正がされてしまう。しかし、入力音声に対する上述した
一定周波数比の関係は保たれる。また、コーダルハーモ
ニーモードにおいては、誤ったメロディーの音高に応じ
た誤ったハーモニー音が生成されることになる。しか
し、入力音声に対する上述した一定比の関係は満足され
る。
【００３３】なお、ボコーダモードにおけるハーモニー
パートには、左手鍵域、右手鍵域を割り当てるほか、自
動演奏トラックのパートや外部入力機器を割り当てても
よい。また、コード指定についても、自動伴奏モードに
おけるコード鍵域を割り当てるほか、自動演奏モードに
おける特定のソングトラックを割り当てて、ソングトラ
ック中のコード（和音）を入力することにより、曲の進
行に合わせたコーダルハーモニーを付けることができ
る。マイクロフォン１から入力されたユーザの元の入力
音声であるリード音を、必ずしもこの装置のスピーカか
ら出力させる必要はない。ユーザの入力音声は、直接に
聴取者に伝わる場合があるし、別のオーディオアンプを
通して出力される場合もある。ハーモニー音のピッチを
出力する方法は、図２に示した演算処理に限られず、入
力音声の検出されたピッチおよびハーモニー音の音高に
対応するピッチによって変換テーブルを参照し、補正さ
れたパーもニー音のピッチを出力するようにしてもよ
い。
パートには、左手鍵域、右手鍵域を割り当てるほか、自
動演奏トラックのパートや外部入力機器を割り当てても
よい。また、コード指定についても、自動伴奏モードに
おけるコード鍵域を割り当てるほか、自動演奏モードに
おける特定のソングトラックを割り当てて、ソングトラ
ック中のコード（和音）を入力することにより、曲の進
行に合わせたコーダルハーモニーを付けることができ
る。マイクロフォン１から入力されたユーザの元の入力
音声であるリード音を、必ずしもこの装置のスピーカか
ら出力させる必要はない。ユーザの入力音声は、直接に
聴取者に伝わる場合があるし、別のオーディオアンプを
通して出力される場合もある。ハーモニー音のピッチを
出力する方法は、図２に示した演算処理に限られず、入
力音声の検出されたピッチおよびハーモニー音の音高に
対応するピッチによって変換テーブルを参照し、補正さ
れたパーもニー音のピッチを出力するようにしてもよ
い。
【００３４】図４は、本発明の第２の実施の形態におけ
るハーモニー音のピッチを出力する処理の一例を示す説
明図である。図中、図３と同様な部分には同じ符号を付
している。図５は、本発明の第２の実施の形態における
ピッチ変換動作の一例を示す模式的説明図である。図
中、横軸は時間、縦軸はピッチである。この実施の形態
は、入力音声に対する基準ピッチとなるメロディーパー
トを設定するものである。ユーザは、図１の操作パネル
５により、メロディーパートに、ユーザが歌うピッチの
基準にするための演奏入力を指定する。ユーザは、メロ
ディーパートの音高に対応するピッチと差が生じないよ
うに歌うようにする。例えば、右鍵域をメロディーパー
トに割り当てて主旋律を弾きながら歌う。加えて、ボコ
ーダハーモニーモードのときには、ハーモニーパートと
して左鍵域を指定すると、左鍵域の鍵盤操作子２の音高
またはオクターブシフトした音高がハーモニー音に指定
される。また、コーダルハーモニーモードのときに、左
手側の自動伴奏鍵域で押さえる１または複数の鍵盤操作
子２によって指定するコード指定と、右鍵域の鍵盤操作
子２によって指定されるメロディーパートの音高とによ
って、ハーモニー音の音高が指定される。この場合も、
入力音声のピッチは、必ずしも、メロディーパートの鍵
盤操作子２の音高のピッチに一致せず、ずれたり揺らい
だりする。従って、入力音声のピッチと、ハーモニー音
のピッチとは、メロディーパートの音高とハーモニー音
の音高とが、ともに一定の期間中であっても調和しな
い。
るハーモニー音のピッチを出力する処理の一例を示す説
明図である。図中、図３と同様な部分には同じ符号を付
している。図５は、本発明の第２の実施の形態における
ピッチ変換動作の一例を示す模式的説明図である。図
中、横軸は時間、縦軸はピッチである。この実施の形態
は、入力音声に対する基準ピッチとなるメロディーパー
トを設定するものである。ユーザは、図１の操作パネル
５により、メロディーパートに、ユーザが歌うピッチの
基準にするための演奏入力を指定する。ユーザは、メロ
ディーパートの音高に対応するピッチと差が生じないよ
うに歌うようにする。例えば、右鍵域をメロディーパー
トに割り当てて主旋律を弾きながら歌う。加えて、ボコ
ーダハーモニーモードのときには、ハーモニーパートと
して左鍵域を指定すると、左鍵域の鍵盤操作子２の音高
またはオクターブシフトした音高がハーモニー音に指定
される。また、コーダルハーモニーモードのときに、左
手側の自動伴奏鍵域で押さえる１または複数の鍵盤操作
子２によって指定するコード指定と、右鍵域の鍵盤操作
子２によって指定されるメロディーパートの音高とによ
って、ハーモニー音の音高が指定される。この場合も、
入力音声のピッチは、必ずしも、メロディーパートの鍵
盤操作子２の音高のピッチに一致せず、ずれたり揺らい
だりする。従って、入力音声のピッチと、ハーモニー音
のピッチとは、メロディーパートの音高とハーモニー音
の音高とが、ともに一定の期間中であっても調和しな
い。
【００３５】図４において、減算器２２において、入力
音声の検出されたピッチからメロディーパートの音高に
対応するピッチを引く。このピッチ差を、加算器２３に
おいて、ハーモニー音の音高に対応するピッチに加算す
る。このようにして、補正されたハーモニー音のピッチ
が得られる。その結果、図５に示すように、ハーモニー
音のピッチと入力音声のピッチとの間には、そのときの
メロディーパートの音高と、ハーモニーパートの音高あ
るいはコード指定とによって決まる一定周波数比の関係
が成立する。従って、ユーザの歌う音声に調和したハー
モニー音を生成することができる。なお、上述したメロ
ディーパートの演奏入力によって、必ずしも楽音を発生
させる必要はない。上述した入力音声の基準となる音高
を指定することのみを目的として使用されてもよい。
音声の検出されたピッチからメロディーパートの音高に
対応するピッチを引く。このピッチ差を、加算器２３に
おいて、ハーモニー音の音高に対応するピッチに加算す
る。このようにして、補正されたハーモニー音のピッチ
が得られる。その結果、図５に示すように、ハーモニー
音のピッチと入力音声のピッチとの間には、そのときの
メロディーパートの音高と、ハーモニーパートの音高あ
るいはコード指定とによって決まる一定周波数比の関係
が成立する。従って、ユーザの歌う音声に調和したハー
モニー音を生成することができる。なお、上述したメロ
ディーパートの演奏入力によって、必ずしも楽音を発生
させる必要はない。上述した入力音声の基準となる音高
を指定することのみを目的として使用されてもよい。
【００３６】上述した説明では、メロディパートに、右
鍵域を割り当てたが、メロディー演奏が記録された自動
演奏トラックのパートや外部入力機器のパートを割り当
ててもよい。この場合、ユーザ自らは楽器を演奏しない
ので、カラオケ装置に適する。ユーザは、歌いながら、
鍵盤でハーモニーパートやコード指定をリアルタイムで
行う。あるいは、ハーモニーパートやコード指定の伴奏
パートまでも、メロディーパートともに、自動演奏トラ
ックのパートや外部入力機器を割り当てて、同期して再
生されて自動演奏されるようにしてもよい。この実施の
形態においても、補正されたピッチにさらに一定値を加
減算して補正されたピッチを移調（シフト）させてもよ
い。また、演算処理に変えて変換テーブルを用いてもよ
い。
鍵域を割り当てたが、メロディー演奏が記録された自動
演奏トラックのパートや外部入力機器のパートを割り当
ててもよい。この場合、ユーザ自らは楽器を演奏しない
ので、カラオケ装置に適する。ユーザは、歌いながら、
鍵盤でハーモニーパートやコード指定をリアルタイムで
行う。あるいは、ハーモニーパートやコード指定の伴奏
パートまでも、メロディーパートともに、自動演奏トラ
ックのパートや外部入力機器を割り当てて、同期して再
生されて自動演奏されるようにしてもよい。この実施の
形態においても、補正されたピッチにさらに一定値を加
減算して補正されたピッチを移調（シフト）させてもよ
い。また、演算処理に変えて変換テーブルを用いてもよ
い。
【００３７】図６は、図１に示した実施の形態のハード
ウエア構成を示す図である。図中、図１と同様な部分に
は同じ符号を付して説明を省略する。４１はＣＤ（コン
パクトディスク）プレイヤーやカセットプレイヤー等か
らの音声信号が入力されるライン入力部、４２はインタ
ーフェース、４３はＣＰＵバス、４４はＲＡＭ、４５は
ＲＯＭ、４６はＣＰＵ、４７は音源部、４８はＤＳＰ、
４９は外部記憶装置、５０はインターフェース、５１は
外部入出力装置である。
ウエア構成を示す図である。図中、図１と同様な部分に
は同じ符号を付して説明を省略する。４１はＣＤ（コン
パクトディスク）プレイヤーやカセットプレイヤー等か
らの音声信号が入力されるライン入力部、４２はインタ
ーフェース、４３はＣＰＵバス、４４はＲＡＭ、４５は
ＲＯＭ、４６はＣＰＵ、４７は音源部、４８はＤＳＰ、
４９は外部記憶装置、５０はインターフェース、５１は
外部入出力装置である。
【００３８】マイクロフォン１またはライン入力部４１
の入力は、アナログ入力用のインターフェース４２にお
いてＡ／Ｄ変換され、ＣＰＵバス４３に入力される。こ
のＣＰＵバス４３には、ＲＡＭ４４，ＲＯＭ４５，ＣＰ
Ｕ４６などの複数のハードウエアが接続されている。表
示器１８は、ハーモーニーや個々のパラメータの設定メ
ニュー等を表示する。ＲＯＭ４５には、ＣＰＵ４６を用
いて実行される本発明の音声信号または楽音信号の処理
プログラムのほか、波形データやプリセットデータ、パ
ラメータの変換テーブル、デモンストレーション用ソン
グデータなどが記憶されている。ＲＡＭ４４には、ＣＰ
Ｕ４６が処理の実行に要するワーキングエリア、パラメ
ータ編集時のバッファ領域等が設けられている。
の入力は、アナログ入力用のインターフェース４２にお
いてＡ／Ｄ変換され、ＣＰＵバス４３に入力される。こ
のＣＰＵバス４３には、ＲＡＭ４４，ＲＯＭ４５，ＣＰ
Ｕ４６などの複数のハードウエアが接続されている。表
示器１８は、ハーモーニーや個々のパラメータの設定メ
ニュー等を表示する。ＲＯＭ４５には、ＣＰＵ４６を用
いて実行される本発明の音声信号または楽音信号の処理
プログラムのほか、波形データやプリセットデータ、パ
ラメータの変換テーブル、デモンストレーション用ソン
グデータなどが記憶されている。ＲＡＭ４４には、ＣＰ
Ｕ４６が処理の実行に要するワーキングエリア、パラメ
ータ編集時のバッファ領域等が設けられている。
【００３９】図１の自動演奏部３の記憶部ともなる外部
記憶装置４９の記録媒体としては、ＲＯＭカートリッ
ジ、フレキシブル磁気ディスク（ＦＤ）等を用い、音色
データや曲データ（ソングデータ）集が記録され、ＲＯ
Ｍ４５にはないデータを追加することができる。また、
記録再生可能な装置としたときには、ソングデータを記
録および再生することができる。インターフェース５０
は、ＭＩＤＩ入出力端子あるいはＲＳ２３２Ｃ端子を備
え、ＭＩＤＩ鍵盤，シーケンサ等のＭＩＤＩ機器、楽音
データ再生機能を有する音源装置、パーソナルコンピュ
ータ等の外部入出力装置５１との間で、ＭＩＤＩデータ
の転送を行う。
記憶装置４９の記録媒体としては、ＲＯＭカートリッ
ジ、フレキシブル磁気ディスク（ＦＤ）等を用い、音色
データや曲データ（ソングデータ）集が記録され、ＲＯ
Ｍ４５にはないデータを追加することができる。また、
記録再生可能な装置としたときには、ソングデータを記
録および再生することができる。インターフェース５０
は、ＭＩＤＩ入出力端子あるいはＲＳ２３２Ｃ端子を備
え、ＭＩＤＩ鍵盤，シーケンサ等のＭＩＤＩ機器、楽音
データ再生機能を有する音源装置、パーソナルコンピュ
ータ等の外部入出力装置５１との間で、ＭＩＤＩデータ
の転送を行う。
【００４０】音源部４７は、図１に示した音源部１２の
機能ブロックとは必ずしも一致しないが、ＣＰＵバス４
３から楽音パラメータを入力して楽音信号を生成する。
ＤＳＰ４８は、ＣＰＵ４６によって制御されて、マイク
ロフォン１あるいはライン入力４１からの音声信号のフ
ォルマント変更、ピッチ検出、ピッチ変換等を行うとと
もに、入力音声信号、楽音信号にリバーブやコーラス等
の効果を付与する。音源部４７およびＤＳＰ４８の機能
の少なくとも一部は、ＣＰＵ４６により実行されるソフ
トウエアで実現させることもできる。なお、上述したＤ
ＳＰを機能分割して、入力音声信号のピッチ検出および
ピッチ変換関係と、出力信号に対する効果付与とに別の
ＤＳＰを使用してもよい。ＤＳＰ４８の出力信号は、図
示を省略したＤ／Ａ変換器によりアナログ信号に変換さ
れて、アンプ１６を経てスピーカ１７から音声または楽
音信号が放音される。
機能ブロックとは必ずしも一致しないが、ＣＰＵバス４
３から楽音パラメータを入力して楽音信号を生成する。
ＤＳＰ４８は、ＣＰＵ４６によって制御されて、マイク
ロフォン１あるいはライン入力４１からの音声信号のフ
ォルマント変更、ピッチ検出、ピッチ変換等を行うとと
もに、入力音声信号、楽音信号にリバーブやコーラス等
の効果を付与する。音源部４７およびＤＳＰ４８の機能
の少なくとも一部は、ＣＰＵ４６により実行されるソフ
トウエアで実現させることもできる。なお、上述したＤ
ＳＰを機能分割して、入力音声信号のピッチ検出および
ピッチ変換関係と、出力信号に対する効果付与とに別の
ＤＳＰを使用してもよい。ＤＳＰ４８の出力信号は、図
示を省略したＤ／Ａ変換器によりアナログ信号に変換さ
れて、アンプ１６を経てスピーカ１７から音声または楽
音信号が放音される。
【００４１】ＣＰＵ４６は、マイクロフォン１等からの
入力音声信号、鍵盤操作子２、操作パネル５からの操作
情報、外部記憶装置４９または外部入出力装置５１から
の演奏データに対し、ＲＡＭ４４およびＲＯＭ４５を用
いて処理を行い、各種設定メニュー画面を表示器１８に
表示したり、処理された演奏データを基に音源部４７、
ＤＳＰ４８、アンプ１６をコントロールしたり、ＭＩＤ
Ｉデータをインターフェース５０を介して外部に出力す
る。演奏データは、外部記憶装置４９、場合により外部
入出力装置５１に、ＳＭＦ（Satandard MIDI File）
等のシーケンスデータを保存することができる。
入力音声信号、鍵盤操作子２、操作パネル５からの操作
情報、外部記憶装置４９または外部入出力装置５１から
の演奏データに対し、ＲＡＭ４４およびＲＯＭ４５を用
いて処理を行い、各種設定メニュー画面を表示器１８に
表示したり、処理された演奏データを基に音源部４７、
ＤＳＰ４８、アンプ１６をコントロールしたり、ＭＩＤ
Ｉデータをインターフェース５０を介して外部に出力す
る。演奏データは、外部記憶装置４９、場合により外部
入出力装置５１に、ＳＭＦ（Satandard MIDI File）
等のシーケンスデータを保存することができる。
【００４２】本発明の音声信号または楽音信号の処理装
置は、図６に示した専用のハードウエア構成上で実現す
ることができるほか、ディジタルアナログ変換部（ＤＡ
Ｃ）が搭載され、コーデック（ＣＯＤＥＣ）ドライバが
インストールされたパーソナルコンピュータにおいて、
ＣＰＵとオペレーティングシステム（ＯＳ）の下で音声
信号または楽音信号の処理プログラムが動作するように
して実現することもできる。この音声信号または楽音信
号の処理プログラムは、通信回線あるいはＣＤ−ＲＯＭ
等の記録媒体により供給され、パーソナルコンピュータ
のハード磁気ディスクにインストールされる。
置は、図６に示した専用のハードウエア構成上で実現す
ることができるほか、ディジタルアナログ変換部（ＤＡ
Ｃ）が搭載され、コーデック（ＣＯＤＥＣ）ドライバが
インストールされたパーソナルコンピュータにおいて、
ＣＰＵとオペレーティングシステム（ＯＳ）の下で音声
信号または楽音信号の処理プログラムが動作するように
して実現することもできる。この音声信号または楽音信
号の処理プログラムは、通信回線あるいはＣＤ−ＲＯＭ
等の記録媒体により供給され、パーソナルコンピュータ
のハード磁気ディスクにインストールされる。
【００４３】図７は、図１に示した実施の形態の外観図
である。図中、図１，図６と同様な部分には同じ符号を
付して説明を省略する。６１は電子楽器本体、６２は操
作子群、１７Ａは左スピーカ、１７Ｂは右スピーカであ
る。電子楽器本体６１は、複数の鍵盤操作子２と左右の
スピーカ１７Ａ，１７Ｂを有する。操作パネル５には複
数の操作子からなる操作子群６２および表示器１８が設
けられている。鍵盤操作子２およびその他の操作子は概
念的に図示しており、具体的な形状および個数に限定す
るものではない。本発明に関係が深いスイッチとして
は、ボーカルハーモニー（リード音信号およびハーモニ
ー音信号）の出力をオンオフする設定スイッチ、このボ
ーカルハーモニーに対するリバーブ効果の付与をオンオ
フする設定スイッチ、ボーカルハーモニーに対するリバ
ーブ効果以外の効果の付与をオンオフする設定スイッチ
などがある。この他、入力音声に対する効果の付与をオ
ンオフする設定スイッチ、楽音信号に対する効果の付与
をオンオフする設定スイッチ、ボーカルハーモニーの設
定を行うボーカルハーモニースイッチ、設定メニューの
切り替えを行う「ＢＡＣＫ」スイッチ、「ＮＥＸＴ」ス
イッチ、パラメータの選択を行う「＋」スイッチ、
「−」スイッチ等がある。図示を省略したが、電子楽器
本体６１には、ＲＯＭカートリッジやＦＤの挿入スロッ
ト、ＭＩＤＩ端子、ＲＳ２３２Ｃ端子等を備える。ピッ
チベンドホイールやモジュレーションホイールを設けて
もよい。
である。図中、図１，図６と同様な部分には同じ符号を
付して説明を省略する。６１は電子楽器本体、６２は操
作子群、１７Ａは左スピーカ、１７Ｂは右スピーカであ
る。電子楽器本体６１は、複数の鍵盤操作子２と左右の
スピーカ１７Ａ，１７Ｂを有する。操作パネル５には複
数の操作子からなる操作子群６２および表示器１８が設
けられている。鍵盤操作子２およびその他の操作子は概
念的に図示しており、具体的な形状および個数に限定す
るものではない。本発明に関係が深いスイッチとして
は、ボーカルハーモニー（リード音信号およびハーモニ
ー音信号）の出力をオンオフする設定スイッチ、このボ
ーカルハーモニーに対するリバーブ効果の付与をオンオ
フする設定スイッチ、ボーカルハーモニーに対するリバ
ーブ効果以外の効果の付与をオンオフする設定スイッチ
などがある。この他、入力音声に対する効果の付与をオ
ンオフする設定スイッチ、楽音信号に対する効果の付与
をオンオフする設定スイッチ、ボーカルハーモニーの設
定を行うボーカルハーモニースイッチ、設定メニューの
切り替えを行う「ＢＡＣＫ」スイッチ、「ＮＥＸＴ」ス
イッチ、パラメータの選択を行う「＋」スイッチ、
「−」スイッチ等がある。図示を省略したが、電子楽器
本体６１には、ＲＯＭカートリッジやＦＤの挿入スロッ
ト、ＭＩＤＩ端子、ＲＳ２３２Ｃ端子等を備える。ピッ
チベンドホイールやモジュレーションホイールを設けて
もよい。
【００４４】図１に示したパン制御部１５は、音像の定
位を決めるものであり、左スピーカ１７Ａ，右スピーカ
１７Ｂから出力される音声あるいは楽音の音量比を制御
することによって、ボーカル音、ハーモニー音、楽音の
各定位位置を個別に制御する。パン制御も一種の効果付
与である。従来、一種の音響効果として、楽音信号をラ
ンダムに定位させるというランダムパンを行うことがあ
った。例えば、自分が弾いた楽音信号が押鍵ごとに右か
ら次に左からと、あちらこちらから聞こえるようにする
ことがあった。このようなランダムパンを、音声信号あ
るいは楽音信号に個別に付与するためのパラメータを設
けてもよい。
位を決めるものであり、左スピーカ１７Ａ，右スピーカ
１７Ｂから出力される音声あるいは楽音の音量比を制御
することによって、ボーカル音、ハーモニー音、楽音の
各定位位置を個別に制御する。パン制御も一種の効果付
与である。従来、一種の音響効果として、楽音信号をラ
ンダムに定位させるというランダムパンを行うことがあ
った。例えば、自分が弾いた楽音信号が押鍵ごとに右か
ら次に左からと、あちらこちらから聞こえるようにする
ことがあった。このようなランダムパンを、音声信号あ
るいは楽音信号に個別に付与するためのパラメータを設
けてもよい。
【００４５】図８〜図１０は、本発明の実施の形態の動
作を説明する処理ステップのフローチャートである。図
８は、メインフローチャートである。Ｓ７１において、
装置が初期化され、Ｓ７２において、操作パネルで演奏
の各種設定を行う。具体的には、図７に示した操作子群
６２により、各種の制御入力、あるいは、各種のパラメ
ータの設定等を表示器１８の表示画面切り替えとともに
行う。このステップは図９を参照して後述する。Ｓ７３
において、演奏データの検出と音声や楽音信号に対する
信号処理を行う。このステップは図１０を参照して後述
する。
作を説明する処理ステップのフローチャートである。図
８は、メインフローチャートである。Ｓ７１において、
装置が初期化され、Ｓ７２において、操作パネルで演奏
の各種設定を行う。具体的には、図７に示した操作子群
６２により、各種の制御入力、あるいは、各種のパラメ
ータの設定等を表示器１８の表示画面切り替えとともに
行う。このステップは図９を参照して後述する。Ｓ７３
において、演奏データの検出と音声や楽音信号に対する
信号処理を行う。このステップは図１０を参照して後述
する。
【００４６】Ｓ７４においては演奏を行う。ここでは、
各種の入力、パラメータ設定に基づきリード音、ハーモ
ニー音の出力、および、楽音の演奏を行う。従って、第
１に、図６に示した、鍵盤操作子２の押鍵に応じた演奏
データ、第２に、外部記憶装置４９から入力された自動
演奏データ、あるいは、外部入出力装置５１から入力さ
れたＭＩＤＩデータ、第３に、マイクロフォン１、ライ
ン入力４１から入力のあった音声あるいは楽音信号等の
演奏入力に基づいて、操作パネル５で設定された制御モ
ードや設定パラメータに従って、リード音信号、ハーモ
ニー音信号、楽音信号を生成し、アンプ１６に供給し、
楽音信号や音声信号としてスピーカ１７から発音させ
る。リード音信号、ハーモニー音信号からなるボーカル
音信号は、鍵盤での演奏データ等によって、オリジナル
の入力音声信号のほか、入力音声の音色、特に、声質の
ジェンダーを変えたり（女声→男声、男声→女声、
等）、ピッチを変更させることができる。Ｓ７４の処理
が終了すると再びＳ７２に戻り、Ｓ７２〜Ｓ７４が繰り
返し実行される。
各種の入力、パラメータ設定に基づきリード音、ハーモ
ニー音の出力、および、楽音の演奏を行う。従って、第
１に、図６に示した、鍵盤操作子２の押鍵に応じた演奏
データ、第２に、外部記憶装置４９から入力された自動
演奏データ、あるいは、外部入出力装置５１から入力さ
れたＭＩＤＩデータ、第３に、マイクロフォン１、ライ
ン入力４１から入力のあった音声あるいは楽音信号等の
演奏入力に基づいて、操作パネル５で設定された制御モ
ードや設定パラメータに従って、リード音信号、ハーモ
ニー音信号、楽音信号を生成し、アンプ１６に供給し、
楽音信号や音声信号としてスピーカ１７から発音させ
る。リード音信号、ハーモニー音信号からなるボーカル
音信号は、鍵盤での演奏データ等によって、オリジナル
の入力音声信号のほか、入力音声の音色、特に、声質の
ジェンダーを変えたり（女声→男声、男声→女声、
等）、ピッチを変更させることができる。Ｓ７４の処理
が終了すると再びＳ７２に戻り、Ｓ７２〜Ｓ７４が繰り
返し実行される。
【００４７】図９は、パネル設定の処理を示すフローチ
ャートである。Ｓ８１においては、ハーモニー設定変更
指示があるか否かを判定し、変更指示があるときには右
側のフローに入り、Ｓ８２に処理を進め、変更指示がな
いときにはＳ８３に処理を進める。Ｓ８２においては、
メロディーチャンネルやハーモニーチャンネルの設定変
更指示があるか否かを判定し、変更指示があるときには
Ｓ８４に処理を進め、指示がないときにはＳ８５に処理
を進める。Ｓ８４においては、メロディーチャンネルや
ハーモニーチャンネルの変更設定をする。鍵盤や外部か
らのＭＩＤＩ信号のチャンネルを割り当てるだけでな
く、自動演奏のトラックを割り当てることもできる。Ｓ
８５において、処理モードの変更指示があるか否かを判
定し、変更指示があるときにはＳ８６に処理を進め、変
更指示がないときにはＳ８７に処理を進める。
ャートである。Ｓ８１においては、ハーモニー設定変更
指示があるか否かを判定し、変更指示があるときには右
側のフローに入り、Ｓ８２に処理を進め、変更指示がな
いときにはＳ８３に処理を進める。Ｓ８２においては、
メロディーチャンネルやハーモニーチャンネルの設定変
更指示があるか否かを判定し、変更指示があるときには
Ｓ８４に処理を進め、指示がないときにはＳ８５に処理
を進める。Ｓ８４においては、メロディーチャンネルや
ハーモニーチャンネルの変更設定をする。鍵盤や外部か
らのＭＩＤＩ信号のチャンネルを割り当てるだけでな
く、自動演奏のトラックを割り当てることもできる。Ｓ
８５において、処理モードの変更指示があるか否かを判
定し、変更指示があるときにはＳ８６に処理を進め、変
更指示がないときにはＳ８７に処理を進める。
【００４８】Ｓ８６においては、入力音声をどのように
処理してリード音とハーモニー音の音声を出力するかの
設定を行う。具体的には、処理モードＡ，Ｂ，Ｃのいず
れかによる変更設定を行う。処理モードＡは、上述した
本発明の実施の形態の処理モードであり、処理モード
Ｂ，Ｃは従来の処理モードである。処理モードＡにおい
ては、元の入力音声のピッチのままでリード音とする。
ハーモニー音は、ハーモニーモードに従って生成される
が、元の入力音声のピッチずれに調和するようにハーモ
ニー音のピッチを修正する。
処理してリード音とハーモニー音の音声を出力するかの
設定を行う。具体的には、処理モードＡ，Ｂ，Ｃのいず
れかによる変更設定を行う。処理モードＡは、上述した
本発明の実施の形態の処理モードであり、処理モード
Ｂ，Ｃは従来の処理モードである。処理モードＡにおい
ては、元の入力音声のピッチのままでリード音とする。
ハーモニー音は、ハーモニーモードに従って生成される
が、元の入力音声のピッチずれに調和するようにハーモ
ニー音のピッチを修正する。
【００４９】処理モードＢにおいては、元の入力音声の
ピッチは、オクターブを区別した最寄りの音名の音高に
対応するピッチに補正してリード音とする。入力音声の
音高が多少ずれていても，それを正しい音高に補正す
る。ハーモニー音は、ハーモニーモードに従って生成さ
れる。元の入力音声のピッチが半音単位の音高に対応す
るピッチに補正されているので、ハーモニー音のピッチ
を修正する必要性はない。処理モードＣにおいては、元
の入力音声のピッチのままリード音とする。ハーモニー
音は、ハーモニーモードに従って生成されるが、ハーモ
ニー音のピッチと元の入力音声のピッチとのずれは考慮
しない。Ｓ８７においては、指示のあったその他の処理
を実行する。
ピッチは、オクターブを区別した最寄りの音名の音高に
対応するピッチに補正してリード音とする。入力音声の
音高が多少ずれていても，それを正しい音高に補正す
る。ハーモニー音は、ハーモニーモードに従って生成さ
れる。元の入力音声のピッチが半音単位の音高に対応す
るピッチに補正されているので、ハーモニー音のピッチ
を修正する必要性はない。処理モードＣにおいては、元
の入力音声のピッチのままリード音とする。ハーモニー
音は、ハーモニーモードに従って生成されるが、ハーモ
ニー音のピッチと元の入力音声のピッチとのずれは考慮
しない。Ｓ８７においては、指示のあったその他の処理
を実行する。
【００５０】Ｓ８３においては、自動演奏に関する処理
指示があるか否かを判定し、処理指示があるときには、
右側のフローに入り、Ｓ８８に処理を進め、指示がない
ときにはＳ８９に処理を進める。Ｓ８８においては、曲
選択の指示があるか否かを判定し、曲選択の指示がある
ときにはＳ９０に処理を進め、指示がないときにはＳ９
１に処理を進める。Ｓ９０においては、選択された自動
演奏を行う曲目（ソング）を設定して、Ｓ８９に処理を
進める。なお、電源投入時には 前回最後に選択した曲
データがセットされているので、必要に応じて曲目の変
更を行う。なお曲データは、図６に示したＲＯＭ４５や
外部記憶装置４９から読み込まれて、ＲＡＭ４４に記憶
される。
指示があるか否かを判定し、処理指示があるときには、
右側のフローに入り、Ｓ８８に処理を進め、指示がない
ときにはＳ８９に処理を進める。Ｓ８８においては、曲
選択の指示があるか否かを判定し、曲選択の指示がある
ときにはＳ９０に処理を進め、指示がないときにはＳ９
１に処理を進める。Ｓ９０においては、選択された自動
演奏を行う曲目（ソング）を設定して、Ｓ８９に処理を
進める。なお、電源投入時には 前回最後に選択した曲
データがセットされているので、必要に応じて曲目の変
更を行う。なお曲データは、図６に示したＲＯＭ４５や
外部記憶装置４９から読み込まれて、ＲＡＭ４４に記憶
される。
【００５１】Ｓ９１においては、再生指示があるか否か
を判定し、再生指示があるときにはＳ９２に処理を進
め、再生指示がないときにはＳ９３に処理を進める。Ｓ
９２においては、選択された曲の演奏データの再生を開
始させ、Ｓ８９に処理を進める。Ｓ９３においては、停
止指示があるか否かを判定し、停止指示があるときには
Ｓ９４に処理を進め、停止指示がないときにはＳ９５に
処理を進める。Ｓ９４においては、再生中の自動演奏を
停止させて、Ｓ８９に処理を進める。Ｓ９５において
は、その他の設定指示、例えば、早送り，戻し，編集を
実行してＳ８９に処理を進める。Ｓ８９においては、ハ
ーモニー設定、自動演奏以外の、その他の設定指示、例
えば効果設定、音色変更の指示等があるか否かを判定
し、指示があるときにはＳ９６に処理を進め、その他の
設定を行い、指示がないときには、メインルーチンに戻
る。
を判定し、再生指示があるときにはＳ９２に処理を進
め、再生指示がないときにはＳ９３に処理を進める。Ｓ
９２においては、選択された曲の演奏データの再生を開
始させ、Ｓ８９に処理を進める。Ｓ９３においては、停
止指示があるか否かを判定し、停止指示があるときには
Ｓ９４に処理を進め、停止指示がないときにはＳ９５に
処理を進める。Ｓ９４においては、再生中の自動演奏を
停止させて、Ｓ８９に処理を進める。Ｓ９５において
は、その他の設定指示、例えば、早送り，戻し，編集を
実行してＳ８９に処理を進める。Ｓ８９においては、ハ
ーモニー設定、自動演奏以外の、その他の設定指示、例
えば効果設定、音色変更の指示等があるか否かを判定
し、指示があるときにはＳ９６に処理を進め、その他の
設定を行い、指示がないときには、メインルーチンに戻
る。
【００５２】図１０は、本発明の実施の形態の動作を説
明する演奏データ検出と信号処理を示すフローチャート
である。Ｓ１０１において、鍵盤操作状態を検出し、音
高を指定する演奏データを生成し、Ｓ１０２において外
部入力端子から入力されるシーケンサ，パーソナルコン
ピュータ，電子楽器などからのＭＩＤＩ形式の演奏デー
タを入力する。Ｓ１０３において、自動演奏が再生状態
であるか否かを判定し、再生状態であればＳ１０４に処
理を進め、再生状態でなけれは、Ｓ１０５に処理を進め
る。Ｓ１０４においては、ＳＭＦ等の形式で演奏データ
が記憶された記憶装置から、演奏データを読み出してＳ
１０５に処理を進める。Ｓ１０５において、音声処理の
設定があるか否かを判定し、あるときにはＳ１０６に処
理を進め、ないときにはメインルーチンに戻る。
明する演奏データ検出と信号処理を示すフローチャート
である。Ｓ１０１において、鍵盤操作状態を検出し、音
高を指定する演奏データを生成し、Ｓ１０２において外
部入力端子から入力されるシーケンサ，パーソナルコン
ピュータ，電子楽器などからのＭＩＤＩ形式の演奏デー
タを入力する。Ｓ１０３において、自動演奏が再生状態
であるか否かを判定し、再生状態であればＳ１０４に処
理を進め、再生状態でなけれは、Ｓ１０５に処理を進め
る。Ｓ１０４においては、ＳＭＦ等の形式で演奏データ
が記憶された記憶装置から、演奏データを読み出してＳ
１０５に処理を進める。Ｓ１０５において、音声処理の
設定があるか否かを判定し、あるときにはＳ１０６に処
理を進め、ないときにはメインルーチンに戻る。
【００５３】Ｓ１０６以降は、処理モードＡ，Ｂ，Ｃに
従って音声処理を行う。説明を簡単にするため、以下、
ハーモニーモードが、ボコーダハーモニーモードまたは
コーダルハーモニーモードの場合であって、かつ、入力
音声がメロディパートの音高を基準に歌われ、メロディ
ーパートの音高を基準として処理をする場合について説
明する。Ｓ１０６において、処理モードＡであるか否か
を判定し、処理モードＡであればＳ１０７に処理を進
め、処理モードＡでなければＳ１０８に処理を進める。
Ｓ１０８において、処理モードＢであるか否かを判定
し、処理モードＢであればＳ１０９に処理を進め、処理
モードＢでなければ、残りの処理モードＣと判定してＳ
１１０に処理を進める。
従って音声処理を行う。説明を簡単にするため、以下、
ハーモニーモードが、ボコーダハーモニーモードまたは
コーダルハーモニーモードの場合であって、かつ、入力
音声がメロディパートの音高を基準に歌われ、メロディ
ーパートの音高を基準として処理をする場合について説
明する。Ｓ１０６において、処理モードＡであるか否か
を判定し、処理モードＡであればＳ１０７に処理を進
め、処理モードＡでなければＳ１０８に処理を進める。
Ｓ１０８において、処理モードＢであるか否かを判定
し、処理モードＢであればＳ１０９に処理を進め、処理
モードＢでなければ、残りの処理モードＣと判定してＳ
１１０に処理を進める。
【００５４】Ｓ１０７，Ｓ１１１〜Ｓ１１６は処理モー
ドＡのステップである。Ｓ１０７においては、マイク入
力やライン入力された入力音声のピッチを検出する。Ｓ
１１１において、メロディーパートの音高に対応するピ
ッチと入力音声のピッチとの差を検出し、Ｓ１１２にお
いて、ハーモニーモードに従って、ハーモニー音の音高
を決定する。ボコーダモードのときには、ハーモニーパ
ートの音高あるいはこれをオクターブシフトさせてハー
モニー音の音高を決定する。コーダルハーモニーモード
のときには、ハーモニータイプおよびハーモニーパート
のコード指定とメロディーパートの音高とによってハー
モニー音の音高を決定する。
ドＡのステップである。Ｓ１０７においては、マイク入
力やライン入力された入力音声のピッチを検出する。Ｓ
１１１において、メロディーパートの音高に対応するピ
ッチと入力音声のピッチとの差を検出し、Ｓ１１２にお
いて、ハーモニーモードに従って、ハーモニー音の音高
を決定する。ボコーダモードのときには、ハーモニーパ
ートの音高あるいはこれをオクターブシフトさせてハー
モニー音の音高を決定する。コーダルハーモニーモード
のときには、ハーモニータイプおよびハーモニーパート
のコード指定とメロディーパートの音高とによってハー
モニー音の音高を決定する。
【００５５】Ｓ１１３において、ピッチ差に応じてハー
モニー音のピッチを補正し、Ｓ１１４において、入力音
声をそのピッチが補正されたハーモニー音のピッチとな
るようにピッチ変換して、ハーモニー音を生成する。な
お、ピッチ変換として、図１を参照して説明した方法を
用いるときには、元のの入力音声のピッチを知る必要は
必ずしもない。Ｓ１１５においては、入力音声や、ハー
モニー音の処理チャンネルに効果を付与し、Ｓ１１６に
おいては、入力音声（リード音）とハーモニー音とを混
合して、メインルーチンに戻る。
モニー音のピッチを補正し、Ｓ１１４において、入力音
声をそのピッチが補正されたハーモニー音のピッチとな
るようにピッチ変換して、ハーモニー音を生成する。な
お、ピッチ変換として、図１を参照して説明した方法を
用いるときには、元のの入力音声のピッチを知る必要は
必ずしもない。Ｓ１１５においては、入力音声や、ハー
モニー音の処理チャンネルに効果を付与し、Ｓ１１６に
おいては、入力音声（リード音）とハーモニー音とを混
合して、メインルーチンに戻る。
【００５６】処理モードＢにおいては、Ｓ１０９におい
て、入力音声のピッチをメロディーパートの音高のピッ
チに補正し、Ｓ１１７において、ハーモニーモードに従
ってハーモニー音の音高を決定し、Ｓ１１４以降に処理
を進める。処理モードＣにおいては、ハーモニーモード
に従ってハーモニー音の音高を決定し、Ｓ１１４以降に
処理を進める。
て、入力音声のピッチをメロディーパートの音高のピッ
チに補正し、Ｓ１１７において、ハーモニーモードに従
ってハーモニー音の音高を決定し、Ｓ１１４以降に処理
を進める。処理モードＣにおいては、ハーモニーモード
に従ってハーモニー音の音高を決定し、Ｓ１１４以降に
処理を進める。
【００５７】なお、上述した処理モードＡにおいて、ボ
コーダハーモニーモードの場合に、ハーモニーパートか
ら演奏入力がないときには、Ｓ１０７〜Ｓ１１４のステ
ップをスキップして、ＣＰＵの処理負担を軽減させるこ
とが可能である。また、コーダルハーモニーモードの場
合に、従来、１度、コード指定がされると、コードチェ
ンジまでそのコード指定を持続させている。これに代え
て、ハーモニーパートから、コード指定の押鍵データが
出力されているときにのみ、ハーモニー音を生成するよ
うにした場合には、同様にしてコード指定の押鍵がなさ
れていない期間において、Ｓ１０７〜Ｓ１１４のステッ
プをスキップすることが可能である。上述した説明で
は、マイクロフォン１やライン入力４１に入力される音
は、ユーザの歌う音声信号であったが、ピッチ検出でき
るものであれば、楽音信号やその他の音響信号であって
もよい。
コーダハーモニーモードの場合に、ハーモニーパートか
ら演奏入力がないときには、Ｓ１０７〜Ｓ１１４のステ
ップをスキップして、ＣＰＵの処理負担を軽減させるこ
とが可能である。また、コーダルハーモニーモードの場
合に、従来、１度、コード指定がされると、コードチェ
ンジまでそのコード指定を持続させている。これに代え
て、ハーモニーパートから、コード指定の押鍵データが
出力されているときにのみ、ハーモニー音を生成するよ
うにした場合には、同様にしてコード指定の押鍵がなさ
れていない期間において、Ｓ１０７〜Ｓ１１４のステッ
プをスキップすることが可能である。上述した説明で
は、マイクロフォン１やライン入力４１に入力される音
は、ユーザの歌う音声信号であったが、ピッチ検出でき
るものであれば、楽音信号やその他の音響信号であって
もよい。
【００５８】上述した説明では、ハーモニー音として、
入力信号と同じ音質（声質）あるいはジェンダーコント
ロールを行った音質（声質）とし、いずれにしても、入
力音声の波形を加工したものであった。しかし、ハーモ
ニー音に、入力音声とは異なる楽器音色を与えてもよ
い。その第１の方法は、別に楽音信号波形を用意し、こ
のピッチを、上述したピッチ変換と同様の方法でピッチ
変換する。第２の方法は、音源部１２から出力させる。
具体的には、従来、元となる入力音声に対して適用され
ていた、入力音声のピッチで楽音を発生させるピッチ・
トゥ・ノートと呼ばれる技術を、ハーモニー音の生成に
用いる。第２の方法の場合、楽音の音色として、コーラ
ス系の音色を選択すれば、入力音声と違和感の少ないハ
ーモニー音となる。
入力信号と同じ音質（声質）あるいはジェンダーコント
ロールを行った音質（声質）とし、いずれにしても、入
力音声の波形を加工したものであった。しかし、ハーモ
ニー音に、入力音声とは異なる楽器音色を与えてもよ
い。その第１の方法は、別に楽音信号波形を用意し、こ
のピッチを、上述したピッチ変換と同様の方法でピッチ
変換する。第２の方法は、音源部１２から出力させる。
具体的には、従来、元となる入力音声に対して適用され
ていた、入力音声のピッチで楽音を発生させるピッチ・
トゥ・ノートと呼ばれる技術を、ハーモニー音の生成に
用いる。第２の方法の場合、楽音の音色として、コーラ
ス系の音色を選択すれば、入力音声と違和感の少ないハ
ーモニー音となる。
【００５９】本発明の音声信号または楽音信号の処理装
置を適用して好適な装置としては、音声または楽音信号
を入力する機能を備えた、電子楽器、ゲーム機、カラオ
ケ装置などのアミューズメント機器、テレビジョンなど
の各種家電機器、携帯電話などの通信機器、パーソナル
コンピュータなどがあり、これらの機器の音声信号また
は楽音信号の処理部に用いることができる。
置を適用して好適な装置としては、音声または楽音信号
を入力する機能を備えた、電子楽器、ゲーム機、カラオ
ケ装置などのアミューズメント機器、テレビジョンなど
の各種家電機器、携帯電話などの通信機器、パーソナル
コンピュータなどがあり、これらの機器の音声信号また
は楽音信号の処理部に用いることができる。
【００６０】
【発明の効果】本発明は、上述した説明から明らかなよ
うに、入力音声信号と調和を保ちながら、変化に富んだ
付加音信号を生成できるという効果がある。また、入力
音声の微妙な音程のずれを残したまま、リード音とハー
モニー音との調和をとれるという効果がある。その結
果、多少歌の下手な人でも気持ちのよいハーモニーを聞
かせることができるとともに、ユーザの歌声の微妙な音
程のずれを積極的に利用した人間味あるハーモニー音を
生成することができる。
うに、入力音声信号と調和を保ちながら、変化に富んだ
付加音信号を生成できるという効果がある。また、入力
音声の微妙な音程のずれを残したまま、リード音とハー
モニー音との調和をとれるという効果がある。その結
果、多少歌の下手な人でも気持ちのよいハーモニーを聞
かせることができるとともに、ユーザの歌声の微妙な音
程のずれを積極的に利用した人間味あるハーモニー音を
生成することができる。
【図１】 本発明の音声信号または楽音信号の処理装置
の実施の形態を説明するための機能ブロックの構成図で
ある。
の実施の形態を説明するための機能ブロックの構成図で
ある。
【図２】 本発明の第１の実施の形態におけるハーモニ
ー音のピッチを出力する処理の一例を示す説明図であ
る。
ー音のピッチを出力する処理の一例を示す説明図であ
る。
【図３】 本発明の第１の実施の形態におけるピッチ変
換動作の一例を示す模式的説明図である。
換動作の一例を示す模式的説明図である。
【図４】 本発明の第２の実施の形態におけるハーモニ
ー音のピッチを出力する処理の一例を示す説明図であ
る。
ー音のピッチを出力する処理の一例を示す説明図であ
る。
【図５】 本発明の第２の実施の形態におけるピッチ変
換動作の一例を示す模式的説明図である。
換動作の一例を示す模式的説明図である。
【図６】 図１に示した実施の形態のハードウエア構成
を示す図である。
を示す図である。
【図７】 図１に示した実施の形態の外観図である。
【図８】 本発明の実施の形態の動作を説明するメイン
フローチャートである。
フローチャートである。
【図９】 本発明の実施の形態の動作を説明するパネル
設定の処理を示すフローチャートである。
設定の処理を示すフローチャートである。
【図１０】 本発明の実施の形態の動作を説明する演奏
データ検出と信号処理を示すフローチャートである。
データ検出と信号処理を示すフローチャートである。
【図１１】 ボコーダハーモニーモードの各タイプの一
例を示す説明図である。
例を示す説明図である。
【図１２】 デチューンハーモニーモードのタイプの一
例を示す説明図である。
例を示す説明図である。
【図１３】 クロマチックハーモニーモードの各タイプ
の一例を示す説明図である。
の一例を示す説明図である。
【図１４】 コーダルハーモニーモードの各タイプの一
例を示す説明図である。
例を示す説明図である。
１ マイクロフォン、２ 鍵盤操作子、３ 自動演奏
部、４ 外部入力部、５操作パネル、６ ピッチ検出
部、７ フォルマント変更部、８ ピッチ変換部、９
ピッチ制御部、１０ チャンネル割当部、１１ 機能制
御部、１２ 音源部、１３ 効果付与部、１４ 信号出
力制御部、１５ パン制御部、１６ アンプ、１７ ス
ピーカ、１８ 表示器
部、４ 外部入力部、５操作パネル、６ ピッチ検出
部、７ フォルマント変更部、８ ピッチ変換部、９
ピッチ制御部、１０ チャンネル割当部、１１ 機能制
御部、１２ 音源部、１３ 効果付与部、１４ 信号出
力制御部、１５ パン制御部、１６ アンプ、１７ ス
ピーカ、１８ 表示器
───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl.7 識別記号 ＦＩ テーマコート゛(参考） Ｇ１０Ｌ 9/02 Ｌ
Claims (5)
- 【請求項１】 音声信号または楽音信号を入力信号とし
て付加音信号を生成する音声信号または楽音信号の処理
装置において、 前記入力信号のピッチを検出するピッチ検出手段、 前記付加音信号の音高を制御する制御データを入力する
制御データ入力手段、 少なくとも前記制御データに基づいて前記付加音信号の
音高を指定する音高指定手段、 前記入力信号のピッチと、前記入力信号のピッチの直近
となる音高のピッチとの差に応じて、指定された前記付
加音信号の音高に対応するピッチを補正するピッチ補正
手段、 前記付加音信号の補正されたピッチを有する音声信号ま
たは楽音信号を生成する付加音信号生成手段、 を有することを特徴とする音声信号または楽音信号の処
理装置。 - 【請求項２】 音声信号または楽音信号を入力信号とし
て付加音信号を生成する音声信号または楽音信号の処理
装置において、 前記入力信号のピッチを検出するピッチ検出手段、 時間的に変化する音高データを入力する音高データ入力
手段、 前記付加音信号の音高を制御する制御データを入力する
制御データ入力手段、 少なくとも前記制御データに基づいて前記付加音信号の
音高を指定する音高指定手段、 前記音高データに対応するピッチと前記入力信号のピッ
チとの差に応じて、指定された前記付加音信号の音高に
対応するピッチを補正するピッチ補正手段、 前記付加音信号の補正されたピッチを有する音声信号ま
たは楽音信号を生成する付加音信号生成手段、 を有することを特徴とする音声信号または楽音信号の処
理装置。 - 【請求項３】 前記付加音信号生成手段は、 前記入力信号の波形を、補正された前記付加音信号のピ
ッチを有する波形に変換するものである、 ことを特徴とする請求項１または２に記載の音声信号ま
たは楽音信号の処理装置。 - 【請求項４】 音声信号または楽音信号を入力信号とし
て付加音信号を生成させる機能をコンピュータに実現さ
せるための音声信号または楽音信号の処理プログラムが
記録された記録媒体であって、 前記入力信号のピッチを検出させるピッチ検出機能、 前記付加音信号の音高を制御する制御データに基づいて
前記付加音信号の音高を指定させる音高指定機能、 前記入力信号のピッチと、前記入力信号のピッチの直近
となる音高のピッチとの差に応じて、指定された前記付
加音信号の音高に対応するピッチを補正させるピッチ補
正機能、 前記付加音信号の補正されたピッチを有する音声信号ま
たは楽音信号を生成させる付加音信号生成機能、 を有する音声信号または楽音信号の処理プログラムが記
録された記録媒体。 - 【請求項５】 音声信号または楽音信号を入力信号とし
て付加音信号を生成させる機能をコンピュータに実現さ
せるための音声信号または楽音信号の処理プログラムが
記録された記録媒体であって、 前記入力信号のピッチを検出させるピッチ検出機能、 時間的に変化する音高データを入力させる音高データ入
力機能、 前記付加音信号の音高を制御する制御データを入力させ
る制御データ入力機能、 少なくとも前記制御データに基づいて前記付加音信号の
音高を指定させる音高指定機能、 前記音高データに対応するピッチと前記入力信号のピッ
チとの差に応じて、指定された前記付加音信号の音高に
対応するピッチを補正させるピッチ補正機能、 前記付加音信号の補正されたピッチを有する音声信号ま
たは楽音信号を生成させる付加音信号生成機能、 を有する音声信号または楽音信号の処理プログラムが記
録された記録媒体。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2000057111A JP3879357B2 (ja) | 2000-03-02 | 2000-03-02 | 音声信号または楽音信号の処理装置およびその処理プログラムが記録された記録媒体 |
| US09/797,120 US6657114B2 (en) | 2000-03-02 | 2001-03-01 | Apparatus and method for generating additional sound on the basis of sound signal |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2000057111A JP3879357B2 (ja) | 2000-03-02 | 2000-03-02 | 音声信号または楽音信号の処理装置およびその処理プログラムが記録された記録媒体 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2001249668A true JP2001249668A (ja) | 2001-09-14 |
| JP3879357B2 JP3879357B2 (ja) | 2007-02-14 |
Family
ID=18577961
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2000057111A Expired - Fee Related JP3879357B2 (ja) | 2000-03-02 | 2000-03-02 | 音声信号または楽音信号の処理装置およびその処理プログラムが記録された記録媒体 |
Country Status (2)
| Country | Link |
|---|---|
| US (1) | US6657114B2 (ja) |
| JP (1) | JP3879357B2 (ja) |
Cited By (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006154526A (ja) * | 2004-11-30 | 2006-06-15 | Roland Corp | ボコーダ装置 |
| JP2008145777A (ja) * | 2006-12-11 | 2008-06-26 | Yamaha Corp | 楽音信号発生装置及びカラオケ装置 |
| JP2009122611A (ja) * | 2007-11-19 | 2009-06-04 | Yamaha Corp | ハーモニー音生成装置及びプログラム |
| JP2009122612A (ja) * | 2007-11-19 | 2009-06-04 | Yamaha Corp | ハーモニー音生成装置及びプログラム |
| JP2011085731A (ja) * | 2009-10-15 | 2011-04-28 | Yamaha Corp | 楽音信号処理装置及びプログラム |
| JP2011170030A (ja) * | 2010-02-17 | 2011-09-01 | Yamaha Corp | 電子音楽装置およびハーモニー音生成方法を実現するためのプログラム |
| JP2011175159A (ja) * | 2010-02-25 | 2011-09-08 | Yamaha Corp | 電子音楽装置及びプログラム |
| JP2012168323A (ja) * | 2011-02-14 | 2012-09-06 | Yamaha Corp | 音信号生成装置及びプログラム |
| CN109559718A (zh) * | 2017-09-27 | 2019-04-02 | 卡西欧计算机株式会社 | 电子乐器、电子乐器的乐音产生方法以及存储介质 |
| US20200211519A1 (en) * | 2017-10-04 | 2020-07-02 | Yamaha Corporation | Electronic musical instrument |
Families Citing this family (29)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7102072B2 (en) * | 2003-04-22 | 2006-09-05 | Yamaha Corporation | Apparatus and computer program for detecting and correcting tone pitches |
| JP4448378B2 (ja) * | 2003-07-30 | 2010-04-07 | ヤマハ株式会社 | 電子管楽器 |
| JP2005049439A (ja) * | 2003-07-30 | 2005-02-24 | Yamaha Corp | 電子楽器 |
| WO2006078635A1 (en) * | 2005-01-18 | 2006-07-27 | Jack Cookerly | Complete orchestration system |
| JP4501725B2 (ja) * | 2005-03-04 | 2010-07-14 | ヤマハ株式会社 | 鍵盤楽器 |
| WO2006112585A1 (en) * | 2005-04-18 | 2006-10-26 | Lg Electronics Inc. | Operating method of music composing device |
| US8168877B1 (en) * | 2006-10-02 | 2012-05-01 | Harman International Industries Canada Limited | Musical harmony generation from polyphonic audio signals |
| US7667126B2 (en) * | 2007-03-12 | 2010-02-23 | The Tc Group A/S | Method of establishing a harmony control signal controlled in real-time by a guitar input signal |
| WO2011002933A2 (en) * | 2009-06-30 | 2011-01-06 | Museami, Inc. | Vocal and instrumental audio effects |
| US20110017048A1 (en) * | 2009-07-22 | 2011-01-27 | Richard Bos | Drop tune system |
| US8983829B2 (en) * | 2010-04-12 | 2015-03-17 | Smule, Inc. | Coordinating and mixing vocals captured from geographically distributed performers |
| US9058797B2 (en) | 2009-12-15 | 2015-06-16 | Smule, Inc. | Continuous pitch-corrected vocal capture device cooperative with content server for backing track mix |
| US8682653B2 (en) * | 2009-12-15 | 2014-03-25 | Smule, Inc. | World stage for pitch-corrected vocal performances |
| US8735709B2 (en) * | 2010-02-25 | 2014-05-27 | Yamaha Corporation | Generation of harmony tone |
| US8389844B2 (en) * | 2010-08-03 | 2013-03-05 | Yamaha Corporation | Tone generation apparatus |
| US8022284B1 (en) * | 2010-08-07 | 2011-09-20 | Jorge Alejandro Velez Medicis | Method and system to harmonically tune (just intonation tuning) a digital / electric piano in real time |
| WO2013138651A1 (en) * | 2012-03-14 | 2013-09-19 | Robert Bosch Gmbh | Device pairing with audio fingerprint encodings |
| US9012756B1 (en) | 2012-11-15 | 2015-04-21 | Gerald Goldman | Apparatus and method for producing vocal sounds for accompaniment with musical instruments |
| US9123353B2 (en) * | 2012-12-21 | 2015-09-01 | Harman International Industries, Inc. | Dynamically adapted pitch correction based on audio input |
| CA2929213C (en) * | 2013-10-30 | 2019-07-09 | Music Mastermind, Inc. | System and method for enhancing audio, conforming an audio input to a musical key, and creating harmonizing tracks for an audio input |
| JP6735100B2 (ja) | 2015-01-20 | 2020-08-05 | ハーマン インターナショナル インダストリーズ インコーポレイテッド | 音楽コンテンツ及びリアルタイム音楽伴奏の自動採譜 |
| US9741327B2 (en) * | 2015-01-20 | 2017-08-22 | Harman International Industries, Incorporated | Automatic transcription of musical content and real-time musical accompaniment |
| US9721551B2 (en) * | 2015-09-29 | 2017-08-01 | Amper Music, Inc. | Machines, systems, processes for automated music composition and generation employing linguistic and/or graphical icon based musical experience descriptions |
| JP6930144B2 (ja) * | 2017-03-09 | 2021-09-01 | カシオ計算機株式会社 | 電子楽器、楽音発生方法およびプログラム |
| JP7190284B2 (ja) * | 2018-08-28 | 2022-12-15 | ローランド株式会社 | ハーモニー生成装置およびそのプログラム |
| US10964299B1 (en) | 2019-10-15 | 2021-03-30 | Shutterstock, Inc. | Method of and system for automatically generating digital performances of music compositions using notes selected from virtual musical instruments based on the music-theoretic states of the music compositions |
| US11024275B2 (en) | 2019-10-15 | 2021-06-01 | Shutterstock, Inc. | Method of digitally performing a music composition using virtual musical instruments having performance logic executing within a virtual musical instrument (VMI) library management system |
| US11037538B2 (en) | 2019-10-15 | 2021-06-15 | Shutterstock, Inc. | Method of and system for automated musical arrangement and musical instrument performance style transformation supported within an automated music performance system |
| CN113012668B (zh) * | 2019-12-19 | 2023-12-29 | 雅马哈株式会社 | 键盘装置及发音控制方法 |
Family Cites Families (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5446238A (en) | 1990-06-08 | 1995-08-29 | Yamaha Corporation | Voice processor |
| JP2820052B2 (ja) * | 1995-02-02 | 1998-11-05 | ヤマハ株式会社 | コーラス効果付与装置 |
| JP3552379B2 (ja) * | 1996-01-19 | 2004-08-11 | ソニー株式会社 | 音響再生装置 |
| JP3718919B2 (ja) * | 1996-09-26 | 2005-11-24 | ヤマハ株式会社 | カラオケ装置 |
| JPH1154420A (ja) | 1997-07-30 | 1999-02-26 | Hioki Ee Corp | レーザービーム直接描画装置 |
| JP3365354B2 (ja) * | 1999-06-30 | 2003-01-08 | ヤマハ株式会社 | 音声信号または楽音信号の処理装置 |
-
2000
- 2000-03-02 JP JP2000057111A patent/JP3879357B2/ja not_active Expired - Fee Related
-
2001
- 2001-03-01 US US09/797,120 patent/US6657114B2/en not_active Expired - Lifetime
Cited By (14)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006154526A (ja) * | 2004-11-30 | 2006-06-15 | Roland Corp | ボコーダ装置 |
| JP2008145777A (ja) * | 2006-12-11 | 2008-06-26 | Yamaha Corp | 楽音信号発生装置及びカラオケ装置 |
| JP2009122611A (ja) * | 2007-11-19 | 2009-06-04 | Yamaha Corp | ハーモニー音生成装置及びプログラム |
| JP2009122612A (ja) * | 2007-11-19 | 2009-06-04 | Yamaha Corp | ハーモニー音生成装置及びプログラム |
| JP2011085731A (ja) * | 2009-10-15 | 2011-04-28 | Yamaha Corp | 楽音信号処理装置及びプログラム |
| JP2011170030A (ja) * | 2010-02-17 | 2011-09-01 | Yamaha Corp | 電子音楽装置およびハーモニー音生成方法を実現するためのプログラム |
| JP2011175159A (ja) * | 2010-02-25 | 2011-09-08 | Yamaha Corp | 電子音楽装置及びプログラム |
| JP2012168323A (ja) * | 2011-02-14 | 2012-09-06 | Yamaha Corp | 音信号生成装置及びプログラム |
| CN109559718A (zh) * | 2017-09-27 | 2019-04-02 | 卡西欧计算机株式会社 | 电子乐器、电子乐器的乐音产生方法以及存储介质 |
| JP2019061135A (ja) * | 2017-09-27 | 2019-04-18 | カシオ計算機株式会社 | 電子楽器、電子楽器の楽音発生方法、及びプログラム |
| US10825438B2 (en) | 2017-09-27 | 2020-11-03 | Casio Computer Co., Ltd. | Electronic musical instrument, musical sound generating method of electronic musical instrument, and storage medium |
| CN109559718B (zh) * | 2017-09-27 | 2023-06-20 | 卡西欧计算机株式会社 | 电子乐器、电子乐器的乐音产生方法以及存储介质 |
| US20200211519A1 (en) * | 2017-10-04 | 2020-07-02 | Yamaha Corporation | Electronic musical instrument |
| US11551653B2 (en) * | 2017-10-04 | 2023-01-10 | Yamaha Corporation | Electronic musical instrument |
Also Published As
| Publication number | Publication date |
|---|---|
| US6657114B2 (en) | 2003-12-02 |
| JP3879357B2 (ja) | 2007-02-14 |
| US20010037196A1 (en) | 2001-11-01 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP3879357B2 (ja) | 音声信号または楽音信号の処理装置およびその処理プログラムが記録された記録媒体 | |
| JP3365354B2 (ja) | 音声信号または楽音信号の処理装置 | |
| US6816833B1 (en) | Audio signal processor with pitch and effect control | |
| JP3598598B2 (ja) | カラオケ装置 | |
| US8735709B2 (en) | Generation of harmony tone | |
| KR100319478B1 (ko) | 효과부가장치 | |
| US5741992A (en) | Musical apparatus creating chorus sound to accompany live vocal sound | |
| JPH0981167A (ja) | カラオケ装置 | |
| JP3324477B2 (ja) | 付加音信号生成装置および付加音信号生成機能を実現させるためのプログラムを記録したコンピュータ読み取り可能な記録媒体 | |
| JP2001324987A (ja) | カラオケ装置 | |
| JP2003015672A (ja) | 声域告知機能付きカラオケ装置 | |
| JP3329245B2 (ja) | 音声信号または楽音信号の処理装置および音声信号または楽音信号の処理プログラムを記録したコンピュータ読み取り可能な記録媒体 | |
| JPH11338480A (ja) | カラオケ装置 | |
| JP3637196B2 (ja) | 音楽再生装置 | |
| JP3617285B2 (ja) | 音声信号または楽音信号の処理装置および音声信号または楽音信号の処理プログラムを記録したコンピュータ読み取り可能な記録媒体 | |
| JP3293536B2 (ja) | 音声信号または楽音信号の処理装置および処理方法および音声信号または楽音信号の処理プログラムを記録したコンピュータ読み取り可能な記録媒体 | |
| JP3617286B2 (ja) | 音声信号または楽音信号の処理装置および音声信号または楽音信号の処理プログラムを記録したコンピュータ読み取り可能な記録媒体 | |
| JP3834963B2 (ja) | 音声入力装置及び方法並びに記憶媒体 | |
| JP7117229B2 (ja) | カラオケ装置 | |
| JP4033146B2 (ja) | カラオケ装置 | |
| JP6036800B2 (ja) | 音信号生成装置及びプログラム | |
| JP5776205B2 (ja) | 音信号生成装置及びプログラム | |
| JP5659501B2 (ja) | 電子音楽装置及びプログラム | |
| JPH10187172A (ja) | カラオケ装置 | |
| JPH1078787A (ja) | カラオケ装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20060127 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20060214 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20060414 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20060718 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20060915 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20061017 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20061030 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313532 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20101117 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20101117 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111117 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111117 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121117 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121117 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131117 Year of fee payment: 7 |
|
| LAPS | Cancellation because of no payment of annual fees |