JP3944930B2 - カラオケのテンポ制御装置 - Google Patents
カラオケのテンポ制御装置 Download PDFInfo
- Publication number
- JP3944930B2 JP3944930B2 JP30974496A JP30974496A JP3944930B2 JP 3944930 B2 JP3944930 B2 JP 3944930B2 JP 30974496 A JP30974496 A JP 30974496A JP 30974496 A JP30974496 A JP 30974496A JP 3944930 B2 JP3944930 B2 JP 3944930B2
- Authority
- JP
- Japan
- Prior art keywords
- pitch
- melody
- singing
- singing voice
- karaoke
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Auxiliary Devices For Music (AREA)
- Reverberation, Karaoke And Other Acoustics (AREA)
Description
【０００１】
【発明の属する技術分野】
この発明は、歌唱の遅速に応じてカラオケ演奏のテンポを制御することができるカラオケのテンポ制御装置に関する。
【０００２】
【従来の技術】
近年、いわゆるカラオケが広く普及しており、種々の機能を備えたカラオケ装置が開発されている。例えば、操作子を操作することによって利用者が自分の歌い易い速さにカラオケ演奏のテンポを調整する機能を有するカラオケ装置が従来から知られている。
【０００３】
【発明が解決しようとする課題】
しかしながら、従来のカラオケ装置においては、テンポを速くする、遅くする、といったように調整の仕方が固定的であるため、曲のテンポに合わせて上手く歌うことができない人（いわゆるリズムおんちの人）にとっては効果が少なく利用価値が低かった。結局、リズムおんちの利用者は、自分の歌をカラオケの演奏に合わせることに気を使わねばならず、気持ちよく歌うことができなかった。また、周囲で歌を聴いている人も歌がカラオケの演奏と合っていないために聞き苦しい思いをすることがあった。
【０００４】
この発明は、このような背景の下になされたもので、カラオケのテンポを歌い手の歌唱速度に追従させることができるカラオケのテンポ制御装置を提供することを目的としている。
【０００５】
【課題を解決するための手段】
上述した課題を解決するために、請求項１記載の発明は、カラオケ演奏のための複数のイベントデータと各イベント間の時間間隔を示すデュレーションデータとからなるシーケンスデータで構成された楽音トラックを含む演奏情報を所定のテンポに対応する速度で再生しカラオケ演奏を行うカラオケ装置の前記テンポを制御するテンポ制御装置において、前記演奏情報には、前記楽音トラックの他に、カラオケ曲のメロディを構成する各音符の発音タイミング、ピッチおよび符長を示すイベントデータが書き込まれたガイドメロディトラックが含まれており、歌い手の歌唱音声を取り込む入力手段と、前記入力手段によって取り込まれた歌唱音声のピッチを抽出する抽出手段と、所定期間における前記歌唱音声のピッチ変化のパターンが、時間の経過とともにピッチが上昇する上昇傾向に該当するのか、それとも、時間の経過とともにピッチが下降する下降傾向に該当するのかを、前記所定期間における前記抽出手段の抽出結果から認識する音型認識手段と、前記楽音トラックのイベントデータが対応する処理系に送られるのと同期して前記ガイドメロディトラックのイベントデータが入力されるとともに、そのイベントデータと、前記抽出手段による抽出結果および前記音型認識手段による認識結果とから、前記歌唱音声が前記メロディに対して進んでいるのか遅れているのかを判断する歌唱速度判断手段と、前記歌唱速度判断手段による判断結果に応じて前記テンポを制御するテンポ制御手段と、を備え、前記歌唱速度判断手段は、前記ガイドメロディトラックのイベントデータが所定個数入力される毎に、そのイベントデータの表す発音タイミングから前記所定期間における前記メロディのピッチ変化のパターンが前記上昇傾向であるのか、それとも、前記下降傾向であるのかを現在のタイミングより先行する時間を含む所定期間分のイベントデータを前記ガイドメロディトラックから先読みして判定し、前記メロディのピッチ変化のパターンと前記歌唱音声のピッチ変化のパターンとが、ともに前記上昇傾向である場合には、前記メロディのピッチよりも前記歌唱音声のピッチが半音以上高ければ、前記メロディに対して前記歌唱音声は進んでいると判断し、逆に、前記メロディのピッチよりも前記歌唱音声のピッチが半音以上低ければ、前記メロディに対して前記歌唱音声は遅れていると判断し、前記メロディのピッチ変化のパターンと前記歌唱音声のピッチ変化のパターンとが、ともに前記下降傾向である場合には、前記メロディのピッチよりも前記歌唱音声のピッチが半音以上高ければ、前記メロディに対して前記歌唱音声は遅れていると判断し、逆に、前記メロディのピッチよりも前記歌唱音声のピッチが半音以上低ければ、前記メロディに対して前記歌唱音声は進んでいると判断することを特徴としている。
【０００７】
また、請求項２記載の発明は、請求項１に記載のテンポ制御装置であって、
前記テンポ制御手段は、
前記歌唱速度判断手段の判断結果を所定サイクルで累積し、この累積結果に応じて新たにテンポを指定すること
を特徴としている。
【０００８】
【発明の実施の形態】
以下、図面を参照して、この発明の実施形態について説明する。
Ａ：実施形態の構成
図１はこの発明の一実施形態によるカラオケのテンポ制御装置の構成を示すブロック図である。図１において、１はピッチ抽出部であり、マイクＭより入力される歌唱音声信号のピッチ（基本周波数）を抽出する。２は音型認識部であり、所定期間における歌唱音声のピッチ変化の挙動から上昇型や下降型といったパターンを認識する。３は歌唱速度判断部であり、ピッチ抽出部１によるピッチ抽出結果、音型認識部２によるパターンの認識結果およびカラオケの演奏情報に含まれるガイドメロディトラック（後述する）のデータに基づき歌唱のタイミングがカラオケの演奏に対して進み過ぎているか遅れているかあるいは一致しているかを判断する。この歌唱速度判断部３におけるアルゴリズムの詳細については後述する。
【０００９】
ここで、カラオケの演奏情報は、図２に示すようにヘッダ、楽音トラック、ガイドメロディトラック、効果トラックおよび歌詞トラックからなり、例えばＭＩＤＩ(Musical Instrument Digital Interface)規格に準拠して記述されている。ヘッダには、曲番号、ジャンル、曲の演奏時間（長さ）などその曲の属性情報等が書かれている。楽音トラックないし歌詞トラックの各トラックは、複数のイベントデータと各イベント間の時間間隔を示すデュレーションデータからなるシーケンスデータで構成されている。これら各トラックのデータは並行して読み出され、各トラック毎にデュレーションをカウントし、カウントを終了したタイミングで次のイベントデータが処理されるようになっている。
【００１０】
楽音トラックには、カラオケ演奏のためのシーケンスデータが書かれており、そのイベントデータによって発音／消音が指示され、ノートナンバ（音高）、ベロシティ（強さ）、符長等が指定がされる。ガイドメロディトラックには、伴奏演奏の対象とならないメロディのシーケンスデータが書かれており、そのイベントデータにはメロディを構成する音符に関する情報（ピッチ、符長等を示す情報）が含まれている。また、このガイドメロディトラックは、２つのデータトラックからなり、第１のトラックにはカラオケ演奏と同期するメロディのシーケンスデータが書かれており、第２のトラックにはカラオケ演奏に対して２秒程度タイミングが進んだメロディのシーケンスデータが書かれている。第１のトラックのデータは歌唱音声とピッチを比較するために用いられ、第２のトラックのデータはガイドメロディのパターンを検出するために用いられる。さらに、効果トラックには、カラオケの楽音にエコー、リバーブ等の各種エフェクト処理を施すためのシーケンスデータが書かれており、歌詞トラックには、図示しないモニタに歌詞を表示するためのシーケンスデータが書かれている。
【００１１】
さて、再び図１に戻って実施形態の構成を説明する。図１において、４はテンポ制御部であり、歌唱速度判断部３の判断結果に基づきカラオケの演奏速度を歌唱速度に追従させるようカラオケ演奏のテンポを制御する。５はシーケンサであり、テンポ制御部４によって指定されたテンポに対応する速度でカラオケの演奏情報を図示しない記録媒体から再生する。このシーケンサ５によって再生される演奏情報は各トラックのデータに対応する処理系に渡される。すなわち、楽音トラックのイベントデータは、カラオケの楽音を生成する図示しない音源ＬＳＩ（大規模集積回路）に送られ、ガイドメロディトラックのイベントデータは、歌唱速度判断部３に送られ、効果トラックのイベントデータは、生成された楽音にエフェクト付与の信号処理を施す図示しないＤＳＰ（ディジタルシグナルプロセッサ）に送られ、歌詞トラックのイベントデータは、カラオケの映像制御系（図示略）に送られる。
【００１２】
次に、６はゲーム処理部であり、歌唱速度判断部３の判断結果に基づき歌い手のリズム感を評価するとともに該評価結果を利用したゲーム処理を行う。このゲーム処理の内容としては種々の態様を採用可能であるが、例えば評価結果を数値化してこれを得点として表示したり、あるいは評価結果に応じて誉め言葉や励ましの言葉を音声によりメッセージ出力する処理が行われる。
【００１３】
Ｂ：実施形態の動作
次に、上記構成からなるテンポ制御装置の動作を説明する。
まず、カラオケの演奏が開始され、歌い手の歌唱音声がマイクＭから入力されると、ピッチ抽出部１が歌唱音声のピッチを抽出し、その値を出力する。音型認識部２は、所定期間においてピッチ抽出部１から出力されるピッチ抽出値を追跡し歌唱音声のピッチ変化のパターンが上昇型であるか下降型であるかを認識する。この認識結果は、歌唱速度判断部３において歌唱速度の判断に用いられる。
【００１４】
歌唱速度判断部３は、まずガイドメロディの第２のトラックからメロディのデータを先読みすることにより、現在のタイミングより先行する時間を含む所定期間におけるガイドメロディのパターン（すなわち、上昇型、下降型等のピッチ変化のパターン）を認識する。また、歌唱速度判断部３は、ガイドメロディの第１のトラックのデータによって指定されるピッチとピッチ抽出部１により抽出される歌唱音声のピッチとを比較する。そして、歌唱速度判断部３は、上記ガイドメロディのパターンの認識結果、前述の音型認識部２による歌唱音声のパターンの認識結果、および上記歌唱音声とガイドメロディのピッチ比較結果に基づき、以下のアルゴリズムに従って歌唱速度を判断する。
【００１５】
図３はガイドメロディと歌唱音声のパターンを比較して示すグラフであり、同図（ａ）はカラオケの演奏と歌唱のタイミングが一致している場合を、同図（ｂ）はカラオケの演奏に対して歌唱が進み過ぎている場合を、同図（ｃ）はカラオケの演奏に対して歌唱が遅れている場合をそれぞれ示している。
【００１６】
これらの図において、グラフの横軸は時間を、縦軸はピッチを示している。また、ガイドメロディを構成する音符は、その符長に対応した長さを有する水平方向の線分Ｇで表され、これらの線分Ｇを囲む斜線の領域はガイドメロディから上下半音以内のピッチずれ範囲を示している。一方、歌唱音声は時間とともにピッチが変化する曲線Ｖで表される。また、破線Ｐは現在の歌唱タイミングを示している。
【００１７】
ここで、ガイドメロディのパターンが上昇型であって、歌唱音声のピッチが概ねガイドメロディに沿って変化するとした場合（すなわち、メロディに合った歌い方がされているとした場合）、カラオケの演奏と歌唱のタイミングが一致していれば、図３（ａ）に示すように、現在の歌唱タイミングにおけるピッチずれはない（ピッチがずれたとしても上下半音以内である）。このことから、歌唱速度判断部３は、現在の歌唱タイミングにおけるピッチずれが上下半音以内であるとき、カラオケの演奏と歌唱のタイミングが合っているものと判断する。
【００１８】
また、同じ前提の下で、図３（ｂ）に示すように、カラオケの演奏より歌唱の方が先に進んでいれば、歌唱音声のピッチはガイドメロディより先に上昇する。このことから、歌唱速度判断部３は、現在の歌唱タイミングにおける歌唱音声のピッチがガイドメロディより半音以上高い場合、カラオケの演奏より歌唱の方が先に進んでいると判断する。
【００１９】
さらに、同じ前提の下で、図３（ｃ）に示すように、カラオケの演奏に対して歌唱が遅れていれば、歌唱音声のピッチはガイドメロディより遅く上昇する。したがって、歌唱速度判断部３は、現在の歌唱タイミングにおける歌唱音声のピッチがガイドメロディより半音以上低い場合、カラオケの演奏に対して歌唱が遅れていると判断する。
【００２０】
一方、図示を省略するが、図３の例とは逆にガイドメロディのパターンが下降型であるとした場合、歌唱速度判断部３は、現在の歌唱タイミングにおける歌唱音声のピッチがガイドメロディより半音以上高ければ、カラオケの演奏に対して歌唱が遅れていると判断し、半音以上低い場合、カラオケの演奏より歌唱の方が先に進んでいると判断する。
【００２１】
次に、図４を参照し、ガイドメロディのパターンが上昇型から下降型に変わる場合について説明する。同図（ａ）に示すように、現在の歌唱タイミングにおいてガイドメロディのパターンが上昇型から下降型に変わる場合に、音型認識部２によって認識される歌唱音声のパターンがまだ上昇中であれば、歌唱速度判断部３は、カラオケの演奏に対して歌唱が遅れていると判断する。
【００２２】
また、同図（ｂ）に示すように、現在の歌唱タイミングにおいてガイドメロディのパターンが上昇型から下降型に変わる場合に、音型認識部２によって認識される歌唱音声のパターンがすでに下降中であれば、歌唱速度判断部３は、カラオケの演奏より歌唱の方が先に進んでいると判断する。
【００２３】
一方、図示を省略するが、図４の例とは逆に現在の歌唱タイミングにおいてガイドメロディのパターンが下降型から上昇型に変わる場合に、音型認識部２によって認識される歌唱音声のパターンがまだ下降中であれば、歌唱速度判断部３は、カラオケの演奏に対して歌唱が遅れていると判断し、すでに上昇中であれば、歌唱速度判断部３は、カラオケの演奏より歌唱の方が先に進んでいると判断する。
【００２４】
さて、上述したアルゴリズムに基づく歌唱速度の判断は、例えば新たに音符が入力される毎に（すなわちガイドメロディの発音指示情報が入力される毎に）行われる。一方、ガイドメロディのパターンについては、新たに音符が入力される度に所定期間を設定しその期間に含まれる複数の音符のピッチ情報から上昇型、下降型の類型が認識される。
【００２５】
こうして音符が入力される度に歌唱速度判断部３によって歌唱速度が判断され、その判断結果（歌唱が速すぎる、歌唱が遅れている、あるいは丁度良いのいずれか）がテンポ制御部４およびゲーム処理部６へ各々出力される。テンポ制御部４は、歌唱速度判断部３の判断結果を一定サイクル（例えば、２小節、１フレーズ等のサイクル）で累計し、この累計結果に応じてシーケンサ６に指定するテンポを制御する。
【００２６】
例えば、「歌唱が遅れている」を「＋１」、「歌唱が速すぎる」を「−１」、「丁度良い」を「０」のように数値化し、一サイクルの累計結果が例えば「＋２」以上であればテンポを１１０％とし、「−２」以下であればテンポを９０％とする。こうして、例えば「＋２」以上となるサイクルが連続すれば、１００％→１１０％→１２０％のようにテンポを順次上げて行き、逆に「−２」以下となるサイクルが連続すれば、１００％→９０％→８０％のようにテンポを順次下げて行く。これにより、カラオケのテンポが歌い手の歌唱速度に追従し、いわゆるリズムおんちの歌い手であっても気持ちよくカラオケを楽しむことができる。
【００２７】
一方、ゲーム処理部６は、歌唱速度判断部３から出力される歌唱速度の判断結果を、例えば「歌唱が遅れている」、「歌唱が速すぎる」をともに「−１」、「丁度良い」を「＋１」のように数値化し、これらを一曲について累計する。そして、その累計値の大きさを１００点満点に換算して得点表示したり、あるいは、累計値の大きさに応じて誉め言葉や励ましの言葉をメッセージ出力する。これにより、歌い手は、自分のリズム感の優劣を知ることができ、他の人と競ったりすることができる。
【００２８】
Ｃ：変形例
なお、本発明は、上述した実施形態に限定されることなく、例えば以下のような種々の変形が可能である。
【００２９】
（１）実施形態では、１音符毎に歌唱速度を判断するようにしたが、これに限らず、２音符につき１回など必要に応じて適宜サイクルを選択可能である。
【００３０】
（２）また、実施形態では、歌唱音声やガイドメロディのパターンを認識するための期間を特に限定しなかったが、パターンを認識できる程度の音符数を含む期間であれば適宜選択可能である。
【００３１】
（３）また、実施形態では、歌唱速度の判断結果を例えば２小節や１フレーズのサイクルで累計しそのサイクルでテンポ制御を行うようにしたが、これに限らず、制御の応答性や安定性に対する要求に応じて所望のサイクルを適宜選択可能であり、必要であれば累計を行わずに歌唱速度の判断と同じサイクルでテンポ制御を行うようにしてもよい。
【００３２】
（４）また、テンポ制御のオン／オフを切り換えるスイッチ機構を設け、テンポ制御モードと通常のカラオケ演奏モードを選択できるようにしてもよい。また、カラオケの演奏情報の中にテンポ制御のオン／オフを指示するコードを含めておき、これによってテンポ制御モードと通常のカラオケ演奏モードを切り換え、曲の一部についてのみテンポ制御を行うようにしてもよい。これにより、歌い手にとってテンポを合わせるのが困難なリタルダンドやフェルマータの指定部分についてのみテンポ制御を行うことも可能である。
【００３３】
（５）また、テンポ制御の結果、テンポが異常に速くなりすぎたり、あるいは遅くなりすぎることを防止するため、テンポの上限値と下限値を設定してリミットをかけるようにしてもよい。
【００３４】
（６）また、実施形態では、ガイドメロディのパターンを認識するために、カラオケの演奏と同期するガイドメロディのデータ（第１のトラックのデータ）に加え、時間的に先行したガイドメロディのデータ（第２のトラックのデータ）をカラオケの演奏情報に含めるよう構成したが、再生中にガイドメロディのデータを一時記憶しておくことが可能であれば、時間的に先行したガイドメロディのデータ（第２のトラックのデータ）のみをカラオケの演奏情報に含めておけば足りる。
【００３５】
【発明の効果】
以上説明したように、この発明によれば、カラオケのテンポを歌い手の歌唱速度に追従させることができる。この結果、利用者はカラオケのテンポを気にすることなく気持ちよく歌うことができる一方、周囲で歌を聴いている人も聞き苦しい思いをすることがなくなり、カラオケをより一層楽しむことができる。
【図面の簡単な説明】
【図１】 この発明の一実施形態によるカラオケのテンポ制御装置の構成を示すブロック図である。
【図２】 同実施形態におけるカラオケの演奏情報のフォーマットを示す図である。
【図３】 ガイドメロディと歌唱音声のパターンを比較して示すグラフであり、（ａ）はタイミングが一致している場合を、（ｂ）は歌唱が速すぎる場合を、（ｃ）は歌唱が遅れている場合をそれぞれ示している。
【図４】 ガイドメロディと歌唱音声のパターンを比較して示すグラフであり、（ａ）は歌唱が遅れている場合を、（ｂ）は歌唱が速すぎる場合をそれぞれ示している。
【符号の説明】
１…ピッチ抽出部（ピッチ抽出手段）、２…音型認識部（歌唱速度判断手段、音型認識手段）、３…歌唱速度判断部（歌唱速度判断手段）、４…テンポ制御部（テンポ制御手段）、５…シーケンサ、６…ゲーム処理部。
【発明の属する技術分野】
この発明は、歌唱の遅速に応じてカラオケ演奏のテンポを制御することができるカラオケのテンポ制御装置に関する。
【０００２】
【従来の技術】
近年、いわゆるカラオケが広く普及しており、種々の機能を備えたカラオケ装置が開発されている。例えば、操作子を操作することによって利用者が自分の歌い易い速さにカラオケ演奏のテンポを調整する機能を有するカラオケ装置が従来から知られている。
【０００３】
【発明が解決しようとする課題】
しかしながら、従来のカラオケ装置においては、テンポを速くする、遅くする、といったように調整の仕方が固定的であるため、曲のテンポに合わせて上手く歌うことができない人（いわゆるリズムおんちの人）にとっては効果が少なく利用価値が低かった。結局、リズムおんちの利用者は、自分の歌をカラオケの演奏に合わせることに気を使わねばならず、気持ちよく歌うことができなかった。また、周囲で歌を聴いている人も歌がカラオケの演奏と合っていないために聞き苦しい思いをすることがあった。
【０００４】
この発明は、このような背景の下になされたもので、カラオケのテンポを歌い手の歌唱速度に追従させることができるカラオケのテンポ制御装置を提供することを目的としている。
【０００５】
【課題を解決するための手段】
上述した課題を解決するために、請求項１記載の発明は、カラオケ演奏のための複数のイベントデータと各イベント間の時間間隔を示すデュレーションデータとからなるシーケンスデータで構成された楽音トラックを含む演奏情報を所定のテンポに対応する速度で再生しカラオケ演奏を行うカラオケ装置の前記テンポを制御するテンポ制御装置において、前記演奏情報には、前記楽音トラックの他に、カラオケ曲のメロディを構成する各音符の発音タイミング、ピッチおよび符長を示すイベントデータが書き込まれたガイドメロディトラックが含まれており、歌い手の歌唱音声を取り込む入力手段と、前記入力手段によって取り込まれた歌唱音声のピッチを抽出する抽出手段と、所定期間における前記歌唱音声のピッチ変化のパターンが、時間の経過とともにピッチが上昇する上昇傾向に該当するのか、それとも、時間の経過とともにピッチが下降する下降傾向に該当するのかを、前記所定期間における前記抽出手段の抽出結果から認識する音型認識手段と、前記楽音トラックのイベントデータが対応する処理系に送られるのと同期して前記ガイドメロディトラックのイベントデータが入力されるとともに、そのイベントデータと、前記抽出手段による抽出結果および前記音型認識手段による認識結果とから、前記歌唱音声が前記メロディに対して進んでいるのか遅れているのかを判断する歌唱速度判断手段と、前記歌唱速度判断手段による判断結果に応じて前記テンポを制御するテンポ制御手段と、を備え、前記歌唱速度判断手段は、前記ガイドメロディトラックのイベントデータが所定個数入力される毎に、そのイベントデータの表す発音タイミングから前記所定期間における前記メロディのピッチ変化のパターンが前記上昇傾向であるのか、それとも、前記下降傾向であるのかを現在のタイミングより先行する時間を含む所定期間分のイベントデータを前記ガイドメロディトラックから先読みして判定し、前記メロディのピッチ変化のパターンと前記歌唱音声のピッチ変化のパターンとが、ともに前記上昇傾向である場合には、前記メロディのピッチよりも前記歌唱音声のピッチが半音以上高ければ、前記メロディに対して前記歌唱音声は進んでいると判断し、逆に、前記メロディのピッチよりも前記歌唱音声のピッチが半音以上低ければ、前記メロディに対して前記歌唱音声は遅れていると判断し、前記メロディのピッチ変化のパターンと前記歌唱音声のピッチ変化のパターンとが、ともに前記下降傾向である場合には、前記メロディのピッチよりも前記歌唱音声のピッチが半音以上高ければ、前記メロディに対して前記歌唱音声は遅れていると判断し、逆に、前記メロディのピッチよりも前記歌唱音声のピッチが半音以上低ければ、前記メロディに対して前記歌唱音声は進んでいると判断することを特徴としている。
【０００７】
また、請求項２記載の発明は、請求項１に記載のテンポ制御装置であって、
前記テンポ制御手段は、
前記歌唱速度判断手段の判断結果を所定サイクルで累積し、この累積結果に応じて新たにテンポを指定すること
を特徴としている。
【０００８】
【発明の実施の形態】
以下、図面を参照して、この発明の実施形態について説明する。
Ａ：実施形態の構成
図１はこの発明の一実施形態によるカラオケのテンポ制御装置の構成を示すブロック図である。図１において、１はピッチ抽出部であり、マイクＭより入力される歌唱音声信号のピッチ（基本周波数）を抽出する。２は音型認識部であり、所定期間における歌唱音声のピッチ変化の挙動から上昇型や下降型といったパターンを認識する。３は歌唱速度判断部であり、ピッチ抽出部１によるピッチ抽出結果、音型認識部２によるパターンの認識結果およびカラオケの演奏情報に含まれるガイドメロディトラック（後述する）のデータに基づき歌唱のタイミングがカラオケの演奏に対して進み過ぎているか遅れているかあるいは一致しているかを判断する。この歌唱速度判断部３におけるアルゴリズムの詳細については後述する。
【０００９】
ここで、カラオケの演奏情報は、図２に示すようにヘッダ、楽音トラック、ガイドメロディトラック、効果トラックおよび歌詞トラックからなり、例えばＭＩＤＩ(Musical Instrument Digital Interface)規格に準拠して記述されている。ヘッダには、曲番号、ジャンル、曲の演奏時間（長さ）などその曲の属性情報等が書かれている。楽音トラックないし歌詞トラックの各トラックは、複数のイベントデータと各イベント間の時間間隔を示すデュレーションデータからなるシーケンスデータで構成されている。これら各トラックのデータは並行して読み出され、各トラック毎にデュレーションをカウントし、カウントを終了したタイミングで次のイベントデータが処理されるようになっている。
【００１０】
楽音トラックには、カラオケ演奏のためのシーケンスデータが書かれており、そのイベントデータによって発音／消音が指示され、ノートナンバ（音高）、ベロシティ（強さ）、符長等が指定がされる。ガイドメロディトラックには、伴奏演奏の対象とならないメロディのシーケンスデータが書かれており、そのイベントデータにはメロディを構成する音符に関する情報（ピッチ、符長等を示す情報）が含まれている。また、このガイドメロディトラックは、２つのデータトラックからなり、第１のトラックにはカラオケ演奏と同期するメロディのシーケンスデータが書かれており、第２のトラックにはカラオケ演奏に対して２秒程度タイミングが進んだメロディのシーケンスデータが書かれている。第１のトラックのデータは歌唱音声とピッチを比較するために用いられ、第２のトラックのデータはガイドメロディのパターンを検出するために用いられる。さらに、効果トラックには、カラオケの楽音にエコー、リバーブ等の各種エフェクト処理を施すためのシーケンスデータが書かれており、歌詞トラックには、図示しないモニタに歌詞を表示するためのシーケンスデータが書かれている。
【００１１】
さて、再び図１に戻って実施形態の構成を説明する。図１において、４はテンポ制御部であり、歌唱速度判断部３の判断結果に基づきカラオケの演奏速度を歌唱速度に追従させるようカラオケ演奏のテンポを制御する。５はシーケンサであり、テンポ制御部４によって指定されたテンポに対応する速度でカラオケの演奏情報を図示しない記録媒体から再生する。このシーケンサ５によって再生される演奏情報は各トラックのデータに対応する処理系に渡される。すなわち、楽音トラックのイベントデータは、カラオケの楽音を生成する図示しない音源ＬＳＩ（大規模集積回路）に送られ、ガイドメロディトラックのイベントデータは、歌唱速度判断部３に送られ、効果トラックのイベントデータは、生成された楽音にエフェクト付与の信号処理を施す図示しないＤＳＰ（ディジタルシグナルプロセッサ）に送られ、歌詞トラックのイベントデータは、カラオケの映像制御系（図示略）に送られる。
【００１２】
次に、６はゲーム処理部であり、歌唱速度判断部３の判断結果に基づき歌い手のリズム感を評価するとともに該評価結果を利用したゲーム処理を行う。このゲーム処理の内容としては種々の態様を採用可能であるが、例えば評価結果を数値化してこれを得点として表示したり、あるいは評価結果に応じて誉め言葉や励ましの言葉を音声によりメッセージ出力する処理が行われる。
【００１３】
Ｂ：実施形態の動作
次に、上記構成からなるテンポ制御装置の動作を説明する。
まず、カラオケの演奏が開始され、歌い手の歌唱音声がマイクＭから入力されると、ピッチ抽出部１が歌唱音声のピッチを抽出し、その値を出力する。音型認識部２は、所定期間においてピッチ抽出部１から出力されるピッチ抽出値を追跡し歌唱音声のピッチ変化のパターンが上昇型であるか下降型であるかを認識する。この認識結果は、歌唱速度判断部３において歌唱速度の判断に用いられる。
【００１４】
歌唱速度判断部３は、まずガイドメロディの第２のトラックからメロディのデータを先読みすることにより、現在のタイミングより先行する時間を含む所定期間におけるガイドメロディのパターン（すなわち、上昇型、下降型等のピッチ変化のパターン）を認識する。また、歌唱速度判断部３は、ガイドメロディの第１のトラックのデータによって指定されるピッチとピッチ抽出部１により抽出される歌唱音声のピッチとを比較する。そして、歌唱速度判断部３は、上記ガイドメロディのパターンの認識結果、前述の音型認識部２による歌唱音声のパターンの認識結果、および上記歌唱音声とガイドメロディのピッチ比較結果に基づき、以下のアルゴリズムに従って歌唱速度を判断する。
【００１５】
図３はガイドメロディと歌唱音声のパターンを比較して示すグラフであり、同図（ａ）はカラオケの演奏と歌唱のタイミングが一致している場合を、同図（ｂ）はカラオケの演奏に対して歌唱が進み過ぎている場合を、同図（ｃ）はカラオケの演奏に対して歌唱が遅れている場合をそれぞれ示している。
【００１６】
これらの図において、グラフの横軸は時間を、縦軸はピッチを示している。また、ガイドメロディを構成する音符は、その符長に対応した長さを有する水平方向の線分Ｇで表され、これらの線分Ｇを囲む斜線の領域はガイドメロディから上下半音以内のピッチずれ範囲を示している。一方、歌唱音声は時間とともにピッチが変化する曲線Ｖで表される。また、破線Ｐは現在の歌唱タイミングを示している。
【００１７】
ここで、ガイドメロディのパターンが上昇型であって、歌唱音声のピッチが概ねガイドメロディに沿って変化するとした場合（すなわち、メロディに合った歌い方がされているとした場合）、カラオケの演奏と歌唱のタイミングが一致していれば、図３（ａ）に示すように、現在の歌唱タイミングにおけるピッチずれはない（ピッチがずれたとしても上下半音以内である）。このことから、歌唱速度判断部３は、現在の歌唱タイミングにおけるピッチずれが上下半音以内であるとき、カラオケの演奏と歌唱のタイミングが合っているものと判断する。
【００１８】
また、同じ前提の下で、図３（ｂ）に示すように、カラオケの演奏より歌唱の方が先に進んでいれば、歌唱音声のピッチはガイドメロディより先に上昇する。このことから、歌唱速度判断部３は、現在の歌唱タイミングにおける歌唱音声のピッチがガイドメロディより半音以上高い場合、カラオケの演奏より歌唱の方が先に進んでいると判断する。
【００１９】
さらに、同じ前提の下で、図３（ｃ）に示すように、カラオケの演奏に対して歌唱が遅れていれば、歌唱音声のピッチはガイドメロディより遅く上昇する。したがって、歌唱速度判断部３は、現在の歌唱タイミングにおける歌唱音声のピッチがガイドメロディより半音以上低い場合、カラオケの演奏に対して歌唱が遅れていると判断する。
【００２０】
一方、図示を省略するが、図３の例とは逆にガイドメロディのパターンが下降型であるとした場合、歌唱速度判断部３は、現在の歌唱タイミングにおける歌唱音声のピッチがガイドメロディより半音以上高ければ、カラオケの演奏に対して歌唱が遅れていると判断し、半音以上低い場合、カラオケの演奏より歌唱の方が先に進んでいると判断する。
【００２１】
次に、図４を参照し、ガイドメロディのパターンが上昇型から下降型に変わる場合について説明する。同図（ａ）に示すように、現在の歌唱タイミングにおいてガイドメロディのパターンが上昇型から下降型に変わる場合に、音型認識部２によって認識される歌唱音声のパターンがまだ上昇中であれば、歌唱速度判断部３は、カラオケの演奏に対して歌唱が遅れていると判断する。
【００２２】
また、同図（ｂ）に示すように、現在の歌唱タイミングにおいてガイドメロディのパターンが上昇型から下降型に変わる場合に、音型認識部２によって認識される歌唱音声のパターンがすでに下降中であれば、歌唱速度判断部３は、カラオケの演奏より歌唱の方が先に進んでいると判断する。
【００２３】
一方、図示を省略するが、図４の例とは逆に現在の歌唱タイミングにおいてガイドメロディのパターンが下降型から上昇型に変わる場合に、音型認識部２によって認識される歌唱音声のパターンがまだ下降中であれば、歌唱速度判断部３は、カラオケの演奏に対して歌唱が遅れていると判断し、すでに上昇中であれば、歌唱速度判断部３は、カラオケの演奏より歌唱の方が先に進んでいると判断する。
【００２４】
さて、上述したアルゴリズムに基づく歌唱速度の判断は、例えば新たに音符が入力される毎に（すなわちガイドメロディの発音指示情報が入力される毎に）行われる。一方、ガイドメロディのパターンについては、新たに音符が入力される度に所定期間を設定しその期間に含まれる複数の音符のピッチ情報から上昇型、下降型の類型が認識される。
【００２５】
こうして音符が入力される度に歌唱速度判断部３によって歌唱速度が判断され、その判断結果（歌唱が速すぎる、歌唱が遅れている、あるいは丁度良いのいずれか）がテンポ制御部４およびゲーム処理部６へ各々出力される。テンポ制御部４は、歌唱速度判断部３の判断結果を一定サイクル（例えば、２小節、１フレーズ等のサイクル）で累計し、この累計結果に応じてシーケンサ６に指定するテンポを制御する。
【００２６】
例えば、「歌唱が遅れている」を「＋１」、「歌唱が速すぎる」を「−１」、「丁度良い」を「０」のように数値化し、一サイクルの累計結果が例えば「＋２」以上であればテンポを１１０％とし、「−２」以下であればテンポを９０％とする。こうして、例えば「＋２」以上となるサイクルが連続すれば、１００％→１１０％→１２０％のようにテンポを順次上げて行き、逆に「−２」以下となるサイクルが連続すれば、１００％→９０％→８０％のようにテンポを順次下げて行く。これにより、カラオケのテンポが歌い手の歌唱速度に追従し、いわゆるリズムおんちの歌い手であっても気持ちよくカラオケを楽しむことができる。
【００２７】
一方、ゲーム処理部６は、歌唱速度判断部３から出力される歌唱速度の判断結果を、例えば「歌唱が遅れている」、「歌唱が速すぎる」をともに「−１」、「丁度良い」を「＋１」のように数値化し、これらを一曲について累計する。そして、その累計値の大きさを１００点満点に換算して得点表示したり、あるいは、累計値の大きさに応じて誉め言葉や励ましの言葉をメッセージ出力する。これにより、歌い手は、自分のリズム感の優劣を知ることができ、他の人と競ったりすることができる。
【００２８】
Ｃ：変形例
なお、本発明は、上述した実施形態に限定されることなく、例えば以下のような種々の変形が可能である。
【００２９】
（１）実施形態では、１音符毎に歌唱速度を判断するようにしたが、これに限らず、２音符につき１回など必要に応じて適宜サイクルを選択可能である。
【００３０】
（２）また、実施形態では、歌唱音声やガイドメロディのパターンを認識するための期間を特に限定しなかったが、パターンを認識できる程度の音符数を含む期間であれば適宜選択可能である。
【００３１】
（３）また、実施形態では、歌唱速度の判断結果を例えば２小節や１フレーズのサイクルで累計しそのサイクルでテンポ制御を行うようにしたが、これに限らず、制御の応答性や安定性に対する要求に応じて所望のサイクルを適宜選択可能であり、必要であれば累計を行わずに歌唱速度の判断と同じサイクルでテンポ制御を行うようにしてもよい。
【００３２】
（４）また、テンポ制御のオン／オフを切り換えるスイッチ機構を設け、テンポ制御モードと通常のカラオケ演奏モードを選択できるようにしてもよい。また、カラオケの演奏情報の中にテンポ制御のオン／オフを指示するコードを含めておき、これによってテンポ制御モードと通常のカラオケ演奏モードを切り換え、曲の一部についてのみテンポ制御を行うようにしてもよい。これにより、歌い手にとってテンポを合わせるのが困難なリタルダンドやフェルマータの指定部分についてのみテンポ制御を行うことも可能である。
【００３３】
（５）また、テンポ制御の結果、テンポが異常に速くなりすぎたり、あるいは遅くなりすぎることを防止するため、テンポの上限値と下限値を設定してリミットをかけるようにしてもよい。
【００３４】
（６）また、実施形態では、ガイドメロディのパターンを認識するために、カラオケの演奏と同期するガイドメロディのデータ（第１のトラックのデータ）に加え、時間的に先行したガイドメロディのデータ（第２のトラックのデータ）をカラオケの演奏情報に含めるよう構成したが、再生中にガイドメロディのデータを一時記憶しておくことが可能であれば、時間的に先行したガイドメロディのデータ（第２のトラックのデータ）のみをカラオケの演奏情報に含めておけば足りる。
【００３５】
【発明の効果】
以上説明したように、この発明によれば、カラオケのテンポを歌い手の歌唱速度に追従させることができる。この結果、利用者はカラオケのテンポを気にすることなく気持ちよく歌うことができる一方、周囲で歌を聴いている人も聞き苦しい思いをすることがなくなり、カラオケをより一層楽しむことができる。
【図面の簡単な説明】
【図１】 この発明の一実施形態によるカラオケのテンポ制御装置の構成を示すブロック図である。
【図２】 同実施形態におけるカラオケの演奏情報のフォーマットを示す図である。
【図３】 ガイドメロディと歌唱音声のパターンを比較して示すグラフであり、（ａ）はタイミングが一致している場合を、（ｂ）は歌唱が速すぎる場合を、（ｃ）は歌唱が遅れている場合をそれぞれ示している。
【図４】 ガイドメロディと歌唱音声のパターンを比較して示すグラフであり、（ａ）は歌唱が遅れている場合を、（ｂ）は歌唱が速すぎる場合をそれぞれ示している。
【符号の説明】
１…ピッチ抽出部（ピッチ抽出手段）、２…音型認識部（歌唱速度判断手段、音型認識手段）、３…歌唱速度判断部（歌唱速度判断手段）、４…テンポ制御部（テンポ制御手段）、５…シーケンサ、６…ゲーム処理部。
Claims (2)
- カラオケ演奏のための複数のイベントデータと各イベント間の時間間隔を示すデュレーションデータとからなるシーケンスデータで構成された楽音トラックを含む演奏情報を所定のテンポに対応する速度で再生しカラオケ演奏を行うカラオケ装置の前記テンポを制御するテンポ制御装置において、
前記演奏情報には、前記楽音トラックの他に、カラオケ曲のメロディを構成する各音符の発音タイミング、ピッチおよび符長を示すイベントデータが書き込まれたガイドメロディトラックが含まれており、
歌い手の歌唱音声を取り込む入力手段と、
前記入力手段によって取り込まれた歌唱音声のピッチを抽出する抽出手段と、
所定期間における前記歌唱音声のピッチ変化のパターンが、時間の経過とともにピッチが上昇する上昇傾向に該当するのか、それとも、時間の経過とともにピッチが下降する下降傾向に該当するのかを、前記所定期間における前記抽出手段の抽出結果から認識する音型認識手段と、
前記楽音トラックのイベントデータが対応する処理系に送られるのと同期して前記ガイドメロディトラックのイベントデータが入力されるとともに、そのイベントデータと、前記抽出手段による抽出結果および前記音型認識手段による認識結果とから、前記歌唱音声が前記メロディに対して進んでいるのか遅れているのかを判断する歌唱速度判断手段と、
前記歌唱速度判断手段による判断結果に応じて前記テンポを制御するテンポ制御手段と、
を備え、
前記歌唱速度判断手段は、
前記ガイドメロディトラックのイベントデータが所定個数入力される毎に、
そのイベントデータの表す発音タイミングから前記所定期間における前記メロディのピッチ変化のパターンが前記上昇傾向であるのか、それとも、前記下降傾向であるのかを現在のタイミングより先行する時間を含む所定期間分のイベントデータを前記ガイドメロディトラックから先読みして判定し、
前記メロディのピッチ変化のパターンと前記歌唱音声のピッチ変化のパターンとが、ともに前記上昇傾向である場合には、前記メロディのピッチよりも前記歌唱音声のピッチが半音以上高ければ、前記メロディに対して前記歌唱音声は進んでいると判断し、逆に、前記メロディのピッチよりも前記歌唱音声のピッチが半音以上低ければ、前記メロディに対して前記歌唱音声は遅れていると判断し、
前記メロディのピッチ変化のパターンと前記歌唱音声のピッチ変化のパターンとが、ともに前記下降傾向である場合には、前記メロディのピッチよりも前記歌唱音声のピッチが半音以上高ければ、前記メロディに対して前記歌唱音声は遅れていると判断し、逆に、前記メロディのピッチよりも前記歌唱音声のピッチが半音以上低ければ、前記メロディに対して前記歌唱音声は進んでいると判断する
ことを特徴とするカラオケのテンポ制御装置。 - 請求項１に記載のテンポ制御装置であって、
前記テンポ制御手段は、
前記歌唱速度判断手段の判断結果を所定サイクルで累積し、この累積結果に応じて新たにテンポを指定すること
を特徴とするカラオケのテンポ制御装置。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP30974496A JP3944930B2 (ja) | 1996-11-20 | 1996-11-20 | カラオケのテンポ制御装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP30974496A JP3944930B2 (ja) | 1996-11-20 | 1996-11-20 | カラオケのテンポ制御装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH10149180A JPH10149180A (ja) | 1998-06-02 |
| JP3944930B2 true JP3944930B2 (ja) | 2007-07-18 |
Family
ID=17996782
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP30974496A Expired - Fee Related JP3944930B2 (ja) | 1996-11-20 | 1996-11-20 | カラオケのテンポ制御装置 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP3944930B2 (ja) |
Families Citing this family (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2004170891A (ja) * | 2002-11-15 | 2004-06-17 | Takao Ushiyama | キー及び出だしずれ自動調整機能付カラオケシステム |
| JP6497404B2 (ja) * | 2017-03-23 | 2019-04-10 | カシオ計算機株式会社 | 電子楽器、その電子楽器の制御方法及びその電子楽器用のプログラム |
-
1996
- 1996-11-20 JP JP30974496A patent/JP3944930B2/ja not_active Expired - Fee Related
Also Published As
| Publication number | Publication date |
|---|---|
| JPH10149180A (ja) | 1998-06-02 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP3598598B2 (ja) | カラオケ装置 | |
| US6352432B1 (en) | Karaoke apparatus | |
| JP2921428B2 (ja) | カラオケ装置 | |
| JP2927229B2 (ja) | メドレー演奏装置 | |
| JPH1074093A (ja) | カラオケ装置 | |
| US5955693A (en) | Karaoke apparatus modifying live singing voice by model voice | |
| US20070234882A1 (en) | Performance control apparatus and program therefor | |
| JP3266149B2 (ja) | 演奏ガイド装置 | |
| JP4163584B2 (ja) | カラオケ装置 | |
| JP3452792B2 (ja) | カラオケ採点装置 | |
| JP3944930B2 (ja) | カラオケのテンポ制御装置 | |
| JP4222915B2 (ja) | 歌唱音声評価装置、カラオケ採点装置及びこれらのプログラム | |
| JP2002006866A (ja) | カラオケ装置 | |
| JP3901008B2 (ja) | 音声変換機能付カラオケ装置 | |
| JP4036952B2 (ja) | 歌唱採点方式に特徴を有するカラオケ装置 | |
| JP3599624B2 (ja) | カラオケ装置用の電子打楽器装置 | |
| JP3645364B2 (ja) | 周波数検出装置 | |
| JP4008562B2 (ja) | 歌唱者独自の節回しの採点方式に特徴を有するカラオケ装置 | |
| JP4275762B2 (ja) | 音声指示装置およびカラオケ装置 | |
| JP3713836B2 (ja) | 音楽演奏装置 | |
| JP2005215493A (ja) | カラオケ装置及びプログラム | |
| JP3050129B2 (ja) | カラオケ装置 | |
| JP2002221973A (ja) | カラオケ装置 | |
| JP3047879B2 (ja) | 演奏ガイド装置、演奏ガイド用演奏データ作成装置および記憶媒体 | |
| JP3834963B2 (ja) | 音声入力装置及び方法並びに記憶媒体 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20060331 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20060704 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20060904 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20061212 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20070202 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20070320 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20070402 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110420 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120420 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130420 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140420 Year of fee payment: 7 |
|
| LAPS | Cancellation because of no payment of annual fees |