JPH10268875A - カラオケ装置 - Google Patents

カラオケ装置

Info

Publication number
JPH10268875A
JPH10268875A JP9070081A JP7008197A JPH10268875A JP H10268875 A JPH10268875 A JP H10268875A JP 9070081 A JP9070081 A JP 9070081A JP 7008197 A JP7008197 A JP 7008197A JP H10268875 A JPH10268875 A JP H10268875A
Authority
JP
Japan
Prior art keywords
voice
conversion
input
male
pitch
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP9070081A
Other languages
English (en)
Other versions
JP3900580B2 (ja
Inventor
Shuichi Matsumoto
秀一 松本
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Yamaha Corp
Original Assignee
Yamaha Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Yamaha Corp filed Critical Yamaha Corp
Priority to JP07008197A priority Critical patent/JP3900580B2/ja
Priority to US09/046,065 priority patent/US5889223A/en
Publication of JPH10268875A publication Critical patent/JPH10268875A/ja
Application granted granted Critical
Publication of JP3900580B2 publication Critical patent/JP3900580B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H1/00—Details of electrophonic musical instruments
    • G10H1/36—Accompaniment arrangements
    • G10H1/361—Recording/reproducing of accompaniment for use with an external source, e.g. karaoke systems
    • G10H1/366—Recording/reproducing of accompaniment for use with an external source, e.g. karaoke systems with means for modifying or correcting the external signal, e.g. pitch correction, reverberation, changing a singer's voice

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Reverberation, Karaoke And Other Acoustics (AREA)

Abstract

(57)【要約】 【課題】 男女間の音声変換を行なう場合に、曲種と歌
唱者の性別に基づいて変換モードを自動的に切り換え
る。 【解決手段】 楽曲データの歌手コードから曲の性別を
判定する性別判定部３２２と、入力音声を分析して歌唱
者の性別を判定するとともに声質を検出する音声分析部
３２１と、曲の性別判定結果と歌唱者の性別判定結果か
ら音声変換の方向を決定するとともに声質の補正を指示
するパラメータ生成部３２３と、指定された変換方向に
入力音声を変換するとともに声質を補正するボイスチェ
ンジ部３２４とを設けた。

Description

【発明の詳細な説明】
【０００１】
【発明の属する技術分野】この発明は、入力音声を変換
処理して出力するカラオケ装置に関する。
【０００２】
【従来の技術】近年、カラオケの分野においては、入力
音声に周波数変換等の処理を施して様々な効果を得る音
声変換機能を備えたカラオケ装置が各種開発されてい
る。例えば、入力音声の音程やフォルマント（声道の共
振周波数）をシフトさせて、男性の声を女性の声に、女
性の声を男性の声にそれぞれ変換する、いわゆる男女間
の音声変換を行うカラオケ装置が知られている。
【０００３】
【発明が解決しようとする課題】ところで、従来のカラ
オケ装置における男女変換は、その変換方向を利用者が
マニュアルで指定するようになっている。例えば、女性
ボーカルの楽曲を男性の利用者が歌唱する場合には、男
から女への変換モードを指定し、女性の利用者が歌唱す
る場合には変換モードを解除する必要がある。このよう
な操作を演奏曲が変わる度に、あるいは歌唱者が変わる
度に行うことは、利用者にとって極めて面倒な作業であ
った。また、操作が煩雑なために指定を誤る場合も多
く、例えば男性の声であるにもかかわらず女から男への
変換モードを指定した場合には低い声がより一層低い声
となるため利用者に聴き苦しい思いをさせることもあっ
た。さらに、従来の音声変換では、入力音声の声質を考
慮することなくピッチシフトやフォルマントシフトを施
すため、声質によっては変換後の音声がかえって不自然
になる場合も多かった。
【０００４】この発明は、このような背景の下になされ
たもので、男女間の音声変換を行なう場合に、曲種と歌
唱者の性別に基づいて変換モードを自動的に切り換える
ことができるカラオケ装置を提供することを目的として
いる。また、この発明の他の目的は、入力音声の声質を
考慮して適切な音声変換を行うことができるカラオケ装
置を提供することにある。
【０００５】
【課題を解決するための手段】上述した課題を解決する
ために、請求項１記載の発明は、歌唱者の入力音声を音
高側へシフトする男から女への音声変換と該入力音声を
低音側へシフトする女から男への音声変換の二方向の音
声変換を選択的に行う音声変換手段と、前記入力音声を
分析して当該歌唱者の性別を判別する音声分析手段と、
前記音声分析手段の判別結果と楽曲のボーカルの性別と
を比較し、この比較結果に基づき音声変換の方向を前記
音声変換手段に指定する変換方向指定手段とを具備する
ことを特徴としている。
【０００６】また、請求項２記載の発明は、請求項１に
記載の発明において、カラオケの楽曲データに識別情報
を含めておき、この識別情報に基づき楽曲のボーカルの
性別を判別する判別手段を具備することを特徴としてい
る。
【０００７】また、請求項３記載の発明は、歌唱者の入
力音声を音高側へシフトする男から女への音声変換と該
入力音声を低音側へシフトする女から男への音声変換の
二方向の音声変換を選択的に行う音声変換手段と、前記
入力音声を分析してその音高を検出する音声分析手段
と、前記音声分析手段によって検出される音高と楽曲の
メロディの音高とを比較し、この比較結果に基づき音声
変換の方向を前記音声変換手段に指定する変換方向指定
手段とを具備することを特徴としている。
【０００８】また、請求項４記載の発明は、請求項１な
いし３のいずれかに記載の発明において、前記音声変換
手段による音声変換は、音高のシフトのみならず、フォ
ルマントのシフトを伴うことを特徴としている。
【０００９】また、請求項５記載の発明は、請求項４記
載の発明において、前記音声分析手段は、入力音声のフ
ォルマント特性をも分析するとともに、前記音声変換手
段は、前記音声分析手段の分析結果に応じて入力音声の
フォルマントをシフトさせることを特徴としている。
【００１０】
【発明の実施の形態】以下、図面を参照して、この発明
の実施形態について説明する。なお、以下の実施形態
は、本発明を通信カラオケ装置に適用したものである
が、本発明はかかるカラオケ装置への適用に限らず、そ
の他のカラオケ装置にも適用可能である。
【００１１】Ａ：第１実施形態 （１）実施形態の構成 全体構成 図１はこの発明の一実施形態の全体構成を示すブロック
図である。同図において、１はセンタ局に設置されたホ
ストコンピュータであり、カラオケの楽曲データを蓄積
したデータベースを有している。このホストコンピュー
タ１には、通信回線（電話回線またはＩＳＤＮ）を介
し、各カラオケ店舗に設置された複数のカラオケ端末２
が接続されており、定期的に楽曲データを各カラオケ端
末２に配信するようになっている。以下、このカラオケ
端末２を構成する各部を説明する。
【００１２】２１はＣＰＵ（中央処理装置）であり、バ
スＢＵＳを介し接続される端末各部を制御する。また、
２２はＲＯＭ(Read Only Memory)であり、ＣＰＵ２１が
実行する制御プログラムおよび楽曲データに含まれる歌
詞コードに対応したフォントデータを記憶する。さら
に、２３はＲＡＭ(Random Access Memory)であり、ＣＰ
Ｕ２１のワークエリアとして用いられる。
【００１３】また、２４はハードディスクであり、ホス
トコンピュータ１から配信される楽曲データを記憶す
る。すなわち、カラオケ端末２においては、ホストコン
ピュータ１から供給される楽曲データを一旦ハードディ
スク２４に蓄積し、これを読み出して用いるようになっ
ている。２５は通信コントローラであり、ホストコンピ
ュータ１から送信される楽曲データを受信しこれをハー
ドディスク２４へ転送する。この通信コントローラ２５
は、通信回線が電話回線の場合モデムであり、ＩＳＤＮ
の場合ターミナルアダブタである。
【００１４】ここで、楽曲データの内容について説明す
る。１曲についての楽曲データは、図２に示すように、
ヘッダ、楽音トラック、表示トラック、音声トラック、
効果制御トラック、および音声データ領域からなってい
る。ヘッダは、その曲に関する種々のデータが書き込ま
れる部分であって、「曲名」、曲の識別情報である「曲
コード」、その曲を歌っている歌手またはアーティスト
を示す「歌手コード」、音楽ジャンルや季節等の曲の属
性を示す「ジャンルコード」、曲の長さを示す「演奏時
間」等のデータが記述されている。
【００１５】楽音トラックには、楽音合成を制御するシ
ーケンスデータが記述されており、発音、消音等を制御
するイベントデータとタイミングを制御するデュレーシ
ョンデータからなっている。表示トラックには、曲の進
行と同期して表示すべきカラオケの歌詞に対応したコー
ド情報が記述されている。音声トラックには、曲の進行
と同期して音声データ領域からバックコーラス等の効果
音のＡＤＰＣＭデータを読み出すためのアドレス情報等
が記述されている。さらに、効果制御トラックには、エ
コー、リバーブ等の楽音に付与すべき効果を制御する制
御データが記述されている。
【００１６】さて、図１において、２６はパネルスイッ
チであり、カラオケ装置本体の操作パネル（図示略）に
設けられ、例えば演奏の開始または中止を指示する操作
の他、ボリューム、テンポ、キーコントロールあるいは
後述する音声変換のためのピッチシフトおよび声質等の
設定操作がなされる。パネルスイッチ２６は、こうした
指示操作や設定状態に対応した入力値あるいは設定値を
ＣＰＵ２１へ出力する。また、２７はリモコン受信部で
あり、リモコン端末ＲＭＣから入力される曲コードや演
奏の開始または中止などの指示操作に対応した信号を受
信し、これを入力値としてＣＰＵ２１へ出力する。さら
に、２８はＬＣＤ(Liquid Crystal Display)等で構成さ
れた表示パネルであり、リクエスト中の曲コードや各種
設定状態等のメッセージを表示する。
【００１７】次に、２９は音源であり、ＣＰＵ２１によ
り供給される楽音制御データ（楽曲データに含まれ
る。）に対応した楽音信号を合成しこれを効果用ＤＳＰ
(DigitalSignal Processor)３０へ出力する。３１は音
声デコーダであり、ＣＰＵ２１により供給されるＡＤＰ
ＣＭデータ（楽曲データに含まれるバックコーラス等の
音声データ）に対応した音声信号を生成しこれを効果用
ＤＳＰ３０へ出力する。
【００１８】また、３２は音声変換部であり、マイクア
ンプ３３によって増幅されＡ／Ｄ変換器３４を介しディ
ジタル信号に変換されたマイクＭからの入力音声に対し
て所定の音声変換処理を施す。この変換後の音声信号
は、効果用ＤＳＰ３０および採点機３５へ各々供給され
る。なお、音声変換部３２の詳細については後述する。
【００１９】効果用ＤＳＰ３０は、ＣＰＵ２１により供
給される効果制御データ（楽曲データに含まれる。）に
基づき、音源２９から供給される楽音信号、音声デコー
ダ３１から供給されるバックコーラス等の音声信号、お
よび音声変換部３２によって変換処理を施されたマイク
入力に対し、エコー、リバーブ、ディレイ等の各種効果
を付与する。こうして効果付与された楽音は、Ｄ／Ａ変
換器３７によってアナログ信号に変換された後、サウン
ドシステム３６に送られ、スピーカより放音される。
【００２０】一方、採点機３５は、音声変換部３２にお
けるマイク入力の分析結果（後述する）に基づき歌唱者
の歌唱力を評価し、その採点結果を数値データとして出
力する。
【００２１】次に、３８は表示制御部であり、モニタ３
９の表示制御を行う。この表示制御部３８は、カラオケ
の演奏中、動画ＣＤ等の映像記憶装置４０から供給され
るカラオケの背景映像を表示するための映像データに、
ＲＯＭ２２から読み出される歌詞のフォントデータをス
ーパーインポーズし、その合成画像をモニタ３９に表示
させる。また、表示制御部３８は、カラオケの演奏終了
後、採点機３５の採点結果をモニタ３９に表示させる。
【００２２】音声変換部３２の構成 次に、音声変換部３２の構成について説明する。図３
は、音声変換部３２の構成を示すブロック図である。同
図において、３２１は、マイクＭからの入力音声を分析
する音声分析部である。この音声分析部３２１は、入力
音声のピッチ抽出およびフォルマント分析を行い、歌唱
者の性別判定と声質パラメータの抽出を行う。
【００２３】ここで、音声分析部３２１は、入力音声の
ピッチが第１のしきい値ＰＨ以上であれば歌唱者が女性
であると判定し、第２のしきい値ＰＬ（ＰＬ＜ＰＨ）以
下であれば歌唱者が男性であると判定する。また、入力
音声のピッチがＰＬ以上ＰＨ以下のボーダ領域にある場
合には、ピッチのみでは判定できないことから、入力音
声のフォルマントを基に判定を行う。例えば、女性の声
は、第１フォルマントと第２フォルマントの間隔が男性
の声より広いという傾向があることから、当該間隔に基
づいて性別を判定する。また、低音の女性の声は、高音
域においてノイズ成分が少ないという特性を有すること
から、一定の場合、高音域におけるノイズ成分の量に基
づいて性別を判定する。
【００２４】また、声質パラメータとは、入力音声の周
波数軸上における包絡形状の特徴を示すパラメータをい
い、具体的には、第１フォルマントおよび第２フォルマ
ントの位置（周波数軸上の位置）と大きさ（レベル）が
含むものである。特に、第２フォルマントの位置と大き
さは入力音声の特徴に大きく関わるため、重要な声質パ
ラメータとなる。
【００２５】また、図示を略しているが、音声分析部３
２１は、入力音声の音量をも抽出し、該音量と前述のピ
ッチ抽出結果（すなわち音程）を採点機３５へ出力す
る。採点機３５は、入力音声の音量および音程と楽曲デ
ータとに基づき、歌唱力を採点する。
【００２６】次に、３２２は、カラオケの歌手またはア
ーティストの性別を判定する性別判定部である。この性
別判定部３２２は、歌手コードと性別との対応関係を示
す性別判定テーブルを保持しており、楽曲データのヘッ
ダから読み取った歌手コードをキーとして当該テーブル
を参照しその性別を取得する。
【００２７】次に、３２３は、音声変換制御用のパラメ
ータを生成するパラメータ生成部である。このパラメー
タ生成部３２３は、まず音声変換部３２１と性別判定部
３２２双方の性別判定結果を比較し、この比較結果に基
づき性別変換モードを指定するパラメータを生成する。
すなわち、音声変換部３２１の性別判定結果が「男」、
性別判定部３２２の性別判定結果が「女」である場合、
男から女への変換モードを指定し、逆の場合、女から男
への変換モードを指定する。また、両者の性別判定結果
が一致した場合、性別変換を行う必要がないことから無
変換モードを指定する。
【００２８】また、パラメータ生成部３２３は、歌唱者
の声質に応じて適切な音声変換を施すべく、音声変換部
３２１によって抽出された声質パラメータに基づき声質
補正パラメータを生成する。すなわち、入力音声の声質
によっては、男女変換（いわゆるオクターブシフト）を
行うと、変換後の音声が不自然になる場合がある（ロボ
ット声等と呼ばれるもの）。そこで、パラメータ生成部
３２３は、標準的あるいは典型的な男女の声の声質パラ
メータを記憶しており、音声変換にあたって、入力音声
から抽出した声質パラメータを当該記憶している声質パ
ラメータに近づけるような補正をすべく、声質補正パラ
メータを生成する。なお、声質補正の具体的な態様につ
いては、後述する。
【００２９】次に、３２４はボイスチェンジ部であり、
パラメータ生成部３２３から供給されるパラメータに基
づき入力音声に対して変換処理を施す。このボイスチェ
ンジ部３２４は、図４に示すように、ピッチシフト部３
２４１とフォルマントシフト部３２４２からなってい
る。
【００３０】ピッチシフト部３２４１は、例えばレント
法と呼ばれるピッチ変換手法によって入力音声をピッチ
シフトさせる。このレント法とは、入力音声信号の繰り
返し波形に着目し、その繰り返し波形をハニングウィン
ドウと呼ばれる繰り返し波形に対応した周期の切り出し
窓によって切り出し、これをさらに切り出し時とは異な
る周期で再合成するものである。すなわち、レント法に
おいては、再合成の周期を伸長または短縮することによ
り入力音声のフォルマントをある程度保存しつつピッチ
変換することが可能である。
【００３１】例えば、男から女への変換では、再合成の
周期を切り出し時の２分の１に短縮することによりピッ
チが２倍となり、これによって音程が１オクターブ上が
る。一方、女から男への変換では、再合成の周期を切り
出し時の２倍に伸長することによりピッチが２分の１と
なり、これによって音程が１オクターブ下がる。
【００３２】また、フォルマントシフト部３２４２は、
入力音声のフォルマントに対応する周波数成分を入力サ
ンプルクロックとは異なる読み出しサンプルクロックで
読み出すことによりフォルマントをシフトさせる。ま
た、ピッチシフト部３２４１およびフォルマントシフト
部３２４２の各々のシフト量は、いずれもパラメータ生
成部３２３から供給されるパラメータによって制御され
る。
【００３３】なお、ボイスチェンジ部３２４は、パネル
スイッチ２４からの手動入力に応じて手動モードによる
音声変換を行うことも可能である。この場合、ピッチシ
フト量とフォルマントシフト量は手動で指定される。
【００３４】（２）実施形態の動作 次に、上記構成からなる実施形態の動作を説明する。 全体動作 はじめに、本実施形態にかかるカラオケ装置の全体動作
を説明する。ただし、楽曲データは、既にホストコンピ
ュータ１からカラオケ端末２へ配信されており、ハード
ディスク２４に格納されているものとする。
【００３５】まずカラオケ端末２に電源が投入され、リ
モコン端末ＲＭＣより曲コードが入力されると、この曲
コードを示す光信号が発信され、これがリモコン受信部
２７によって受信される。これによりＣＰＵ２１は指定
された曲コードを識別し、この曲コードに対応する楽曲
データをハードディスク２４から読み出し、再生を開始
する。
【００３６】そして、楽曲データの楽音トラックから読
み出される楽音制御情報（イベントデータに含まれる）
がデュレーションデータによって指定されたタイミング
で音源２９に供給され、これによってカラオケの演奏が
行われる。一方、楽曲データのヘッダで指定されたジャ
ンルコードに対応する背景映像が映像記憶装置４０より
再生される。これにより、その曲の音楽ジャンルや季節
等に合った背景映像が選択される。また、再生された背
景映像には、楽曲データの表示トラックから読み出され
る歌詞コードに対応するフォント画像がスーパーインポ
ーズされ、モニタ３９に表示される。
【００３７】一方、マイクＭから入力される利用者の歌
唱音声は、効果用ＤＳＰ３０において、音源２９から出
力されるカラオケの楽音および音声デコーダ３１から出
力されるバックコーラス音とともにエコー、リバーブ等
の各種効果が付与された後、サウンドシステム３６へ送
られ、スピーカより放音される。
【００３８】音声変換の動作 次に、上述したカラオケ演奏において、利用者がパネル
スイッチ２６より自動による音声変換モードを指示した
場合の動作を説明する。以下、女性ボーカルの楽曲を男
性が歌唱する場合を例として説明する。この場合、楽曲
データのヘッダで指定された歌手コードが性別判定部３
２２によって読み取られ、性別判定テーブルの参照によ
って当該曲が女性ボーカルの楽曲であると判定される。
この判定結果は、パラメータ生成部３２３へ供給され
る。
【００３９】一方、男性の歌唱者による入力音声は、音
声分析部３２１によって分析され、その音程が第１およ
び第２のしきい値ＰＨ，ＰＬと比較される。ここで、入
力音声が男性に典型的な低音の音声であれば、その音程
は第２のしきい値ＰＬより低くなるので男性であると判
定される。また、入力音声の音程が男性としては高く、
第１のしきい値ＰＨより低いものの第２のしきい値ＰＬ
を超えるような場合には、音程のみでは性別判定ができ
ない。そこで、この場合の判定基準としてフォルマント
分析の結果も考慮される。すなわち、男性の場合、検出
される第１フォルマントと第２フォルマントの間隔が狭
いことから、その間隔が所定のしきい値より小さければ
男性であると判定される。また、上記フォルマントの間
隔によっても判定が困難な場合には、さらに高音域にお
けるノイズ成分の量を調べ、多い場合には男性であると
判定される。こうして得られる判定結果は、フォルマン
ト分析によって得られる声質パラメータとともにパラメ
ータ生成部３２３へ供給される。
【００４０】そして、パラメータ生成部３２３において
は、性別判定部３２２と音声分析部３２１双方の性別判
定結果が比較され、この比較結果から女性ボーカルの楽
曲が男性によって歌唱されていることが認識される。こ
れにより、ボイスチェンジ部３２４に対し、男から女へ
の性別変換モードが指定される。
【００４１】また、パラメータ生成部３２３において
は、歌唱者の声質に対応した音声変換を行うべく、音声
分析部３２１から供給される声質パラメータに基づき、
変換後の音声のフォルマントを補正する声質補正パラメ
ータが生成され、これがボイスチェンジ部３２４へ出力
される。ボイスチェンジ部３２４は、男声から女声への
ピッチ変換を行うべく、ピッチシフト部３２４１におい
て入力音声のピッチを１オクターブ高音側にシフトさせ
た後、フォルマントシフト部３２４２においてパラメー
タ生成部３２３から供給される声質補正パラメータに応
じてフォルマントの位置をシフトさせる。
【００４２】ここで、男声から女声への変換において
は、以下の態様で声質補正を行う。すなわち、一般に男
声より女声の方が第１および第２フォルマントの間隔が
広いため、男声から女声への変換を行う場合、第２フォ
ルマントを高域側にシフトさせて上記フォルマントの間
隔を広げる必要がある。このとき、入力音声の第１およ
び第２フォルマントの間隔が元々広い男声を女声に変換
する場合には、第２フォルマントの高域側へのシフト量
を少なくする。一方、入力音声の第１および第２フォル
マントの間隔が元々狭い男声を女声に変換する場合に
は、第２フォルマントの高域側へのシフト量を大きくす
る。
【００４３】また、上述したカラオケの演奏中に歌唱者
が男性から女性に変更された場合、性別判定部３２２と
音声分析部３２１双方の判定結果が一致することから、
パラメータ生成部３２３よりボイスチェンジ部３２４に
対し性別変換の停止が指示される。これにより、ボイス
チェンジ部３２４は、入力音声に対して何も処理を施さ
ずに出力する。
【００４４】一方、男性ボーカルの楽曲を女性が歌唱す
る場合においては、上記と逆に女声から男声への音声変
換が行われる。この場合、音程については高音側へオク
ターブシフトされる。また、声質補正については、上述
した男声から女声への変換とは逆の観点で、第２フォル
マントのシフト（この場合、低域側へのシフト）が行わ
れる。
【００４５】Ｂ：第２実施形態 次に、この発明の第２実施形態について説明する。図５
は、この発明の第２実施形態による音声変換部３２′の
構成を示すブロック図である。この図に示す音声変換部
３２′が、図３に示す音声変換部３２と異なる点は、性
別判定に基づいて音声変換の方向（男から女あるいは女
から男）を決定するのではなく、楽曲のメロディと入力
音声とを音程比較して上記音声変換の方向を決定すると
ころにある。したがって、音声変換部３２′は、性別判
定部３２２を有さず、また、音声分析部３２１′が性別
判定をすることはない。
【００４６】この場合、音声分析部３２１′は、性別判
定に代えてピッチ検出によって得られる入力音声の音程
情報をパラメータ生成部３２３′へ出力する。パラメー
タ生成部３２３′には入力音声の音程情報と楽曲のメロ
ディ情報とが入力される。これによってパラメータ生成
部３２３′は、楽曲のメロディと入力音声とを音程比較
し、例えば以下の基準によって音声変換の方向を決定す
る。すなわち、入力音声とメロディとの音程のずれが半
オクターブ以内である場合、パラメータ生成部３２３′
は、ボイスチェンジ部３２４に対して音声変換を指示し
ない。また、入力音声の音程がメロディより半オクター
ブ以上高い場合、パラメータ生成部３２３′は、ボイス
チェンジ部３２４に対して女から男への音声変換を指示
する。一方、入力音声の音程がメロディより半オクター
ブ以上低い場合、パラメータ生成部３２３′は、ボイス
チェンジ部３２４に対して男から女への音声変換を指示
する。その他の構成および動作は、前述の第１実施形態
と同様である。
【００４７】Ｃ：その他の変形例 なお、本発明は、既述した実施形態に限らず、例えば以
下のような種々の変形が可能である。 （１）第１実施形態においては、歌手コードと性別との
対応関係に基づいて楽曲の性別判定を行ったが、本発明
は、これに限らず、曲コードと性別との対応関係に基づ
いて性別判定を行ってもよい。あるいは、歌手コードを
曲コードから独立した情報として構成するのではなく、
曲コードの一部の桁を歌手コードに割り当て、この歌手
コードと性別との対応関係に基づいて性別判定を行って
もよい。また、これらに代えて性別コードを楽曲データ
のヘッダに含め、性別を直接指定してもよい。
【００４８】（２）また、例えばデュエット曲の場合、
男性パートと女性パートがあり、男性のみが歌う部分
と、女性のみが歌う部分と、男性と女性が同時に歌う部
分とがある。この場合、曲の途中で楽曲の性別が変わる
ため、第１実施形態のように歌手コードに基づく性別判
定では対応することができない。そこで、このような場
合、例えば楽曲データのボーカルの性別が切り替わるタ
イミングで性別コードを含ませておき、この性別コード
に基づいて性別判定部３２２がパートの性別を判定する
よう構成すれば対応可能である。一方、第２実施形態で
は、カラオケのメロディと歌唱音声との音程のずれに基
づいて男女変換モードを決定するので、上記のようなデ
ュエット曲にも対応可能である。
【００４９】（３）また、実施形態では、音声変換手段
としてピッチシフトとフォルマントシフトを併用する構
成を採用したが、本発明は、このような形態に限らず、
構成の簡単化を図るためピッチシフトのみに対応した構
成を採用してもよい。ただし、この場合、実施形態のよ
うな声質補正は行われない。
【００５０】
【発明の効果】以上説明したように、この発明によれ
ば、男女間の音声変換を行うな場合に、曲種と歌唱者の
性別に基づいて変換モードを自動的に切り換えることが
できる（請求項１ないし５）。
【００５１】さらに、請求項５記載の発明によれば、入
力音声の声質を考慮して適切な音声変換を行うことがで
きる。
【図面の簡単な説明】
【図１】 この発明の第１実施形態の全体構成を示すブ
ロック図である。
【図２】 同実施形態における楽曲データの内容を示す
データフォーマット図である。
【図３】 同実施形態における音声変換部の構成を示す
ブロック図である。
【図４】 同音声変換部におけるボイスチェンジ部の構
成を示すブロック図である。
【図５】 この発明の第２実施形態における音声変換部
の構成を示すブロック図である。
【符号の説明】
１…ホストコンピュータ、２…カラオケ端末、２１…Ｃ
ＰＵ、２２…ＲＯＭ、２３…ＲＡＭ、２４…ハードディ
スク、２５…通信コントローラ、２６…パネルスイッ
チ、２７…リモコン受信部、２８…表示パネル、２９…
音源、３０…効果用ＤＳＰ、３１…音声デコーダ、３２
…音声変換部、３３…マイクアンプ、３４…Ａ／Ｄ変換
器、３５…採点機、３６…サウンドシステム、３７…Ｄ
／Ａ変換器、３８…表示制御部、３９…モニタ、４０…
映像記憶装置、３２１，３２１′…音声分析部（音声分
析手段）、３２２…性別判定部（判別手段）、３２３，
３２３′…パラメータ生成部（変換方向指定手段）、３
２４…ボイスチェンジ部（音声変換手段）、３２４１…
ピッチシフト部、３２４２…フォルマントシフト部。

Claims (5)

    【特許請求の範囲】
  1. 【請求項１】 歌唱者の入力音声を音高側へシフトする
    男から女への音声変換と該入力音声を低音側へシフトす
    る女から男への音声変換の二方向の音声変換を選択的に
    行う音声変換手段と、 前記入力音声を分析して当該歌唱者の性別を判別する音
    声分析手段と、 前記音声分析手段の判別結果と楽曲のボーカルの性別と
    を比較し、この比較結果に基づき音声変換の方向を前記
    音声変換手段に指定する変換方向指定手段とを具備する
    ことを特徴とするカラオケ装置。
  2. 【請求項２】 カラオケの楽曲データに識別情報を含め
    ておき、 この識別情報に基づき楽曲のボーカルの性別を判別する
    判別手段を具備することを特徴とする請求項１に記載の
    カラオケ装置。
  3. 【請求項３】 歌唱者の入力音声を音高側へシフトする
    男から女への音声変換と該入力音声を低音側へシフトす
    る女から男への音声変換の二方向の音声変換を選択的に
    行う音声変換手段と、 前記入力音声を分析してその音高を検出する音声分析手
    段と、 前記音声分析手段によって検出される音高と楽曲のメロ
    ディの音高とを比較し、この比較結果に基づき音声変換
    の方向を前記音声変換手段に指定する変換方向指定手段
    とを具備することを特徴とするカラオケ装置。
  4. 【請求項４】 前記音声変換手段による音声変換は、音
    高のシフトのみならず、フォルマントのシフトを伴うこ
    とを特徴とする請求項１ないし３のいずれかに記載のカ
    ラオケ装置。
  5. 【請求項５】 前記音声分析手段は、入力音声のフォル
    マント特性をも分析するとともに、 前記音声変換手段は、前記音声分析手段の分析結果に応
    じて入力音声のフォルマントをシフトさせることを特徴
    とする請求項４記載のカラオケ装置。
JP07008197A 1997-03-24 1997-03-24 カラオケ装置 Expired - Fee Related JP3900580B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP07008197A JP3900580B2 (ja) 1997-03-24 1997-03-24 カラオケ装置
US09/046,065 US5889223A (en) 1997-03-24 1998-03-23 Karaoke apparatus converting gender of singing voice to match octave of song

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP07008197A JP3900580B2 (ja) 1997-03-24 1997-03-24 カラオケ装置

Publications (2)

Publication Number Publication Date
JPH10268875A true JPH10268875A (ja) 1998-10-09
JP3900580B2 JP3900580B2 (ja) 2007-04-04

Family

ID=13421246

Family Applications (1)

Application Number Title Priority Date Filing Date
JP07008197A Expired - Fee Related JP3900580B2 (ja) 1997-03-24 1997-03-24 カラオケ装置

Country Status (2)

Country Link
US (1) US5889223A (ja)
JP (1) JP3900580B2 (ja)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001282269A (ja) * 2000-03-31 2001-10-12 Clarion Co Ltd 情報提供システム及び発声人形
JP2006208958A (ja) * 2005-01-31 2006-08-10 Daiichikosho Co Ltd カラオケシステム
WO2008044752A1 (fr) * 2006-10-06 2008-04-17 Atsushi Nakanishi Appareil audio à perception réduite de la voix propre de son utilisateur
JP2008116534A (ja) * 2006-11-01 2008-05-22 Yamaha Corp 音声通信装置
JP2009222993A (ja) * 2008-03-17 2009-10-01 Honda Motor Co Ltd 車両用音声案内装置
CN109712635A (zh) * 2018-12-28 2019-05-03 深圳创维－Rgb电子有限公司 一种声音数据处理方法、智能终端及存储介质

Families Citing this family (45)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10319947A (ja) * 1997-05-15 1998-12-04 Kawai Musical Instr Mfg Co Ltd 音域制御装置
JP2000029462A (ja) * 1998-05-18 2000-01-28 Sony Corp 情報処理装置および情報処理方法、並びに提供媒体
JP3365354B2 (ja) * 1999-06-30 2003-01-08 ヤマハ株式会社 音声信号または楽音信号の処理装置
JP2001093226A (ja) * 1999-09-21 2001-04-06 Sony Corp 情報通信システムおよび方法、ならびに、情報通信装置および方法
GB9925297D0 (en) * 1999-10-27 1999-12-29 Ibm Voice processing system
US8108509B2 (en) * 2001-04-30 2012-01-31 Sony Computer Entertainment America Llc Altering network transmitted content data based upon user specified characteristics
KR20030006308A (ko) * 2001-07-12 2003-01-23 엘지전자 주식회사 이동통신 단말기의 음성 변조 장치 및 방법
US7027983B2 (en) * 2001-12-31 2006-04-11 Nellymoser, Inc. System and method for generating an identification signal for electronic devices
JP4487632B2 (ja) * 2004-05-21 2010-06-23 ヤマハ株式会社 演奏練習装置および演奏練習用コンピュータプログラム
US20060257827A1 (en) * 2005-05-12 2006-11-16 Blinktwice, Llc Method and apparatus to individualize content in an augmentative and alternative communication device
US7563975B2 (en) * 2005-09-14 2009-07-21 Mattel, Inc. Music production system
US7974838B1 (en) * 2007-03-01 2011-07-05 iZotope, Inc. System and method for pitch adjusting vocals
US7772480B2 (en) * 2007-08-10 2010-08-10 Sonicjam, Inc. Interactive music training and entertainment system and multimedia role playing game platform
US9529423B2 (en) * 2008-12-10 2016-12-27 International Business Machines Corporation System and method to modify audio components in an online environment
US9147385B2 (en) 2009-12-15 2015-09-29 Smule, Inc. Continuous score-coded pitch correction
JP5331901B2 (ja) * 2009-12-21 2013-10-30 富士通株式会社 音声制御装置
JP5782677B2 (ja) 2010-03-31 2015-09-24 ヤマハ株式会社 コンテンツ再生装置および音声処理システム
US10930256B2 (en) 2010-04-12 2021-02-23 Smule, Inc. Social music system and method with continuous, real-time pitch correction of vocal performance and dry vocal capture for subsequent re-rendering based on selectively applicable vocal effect(s) schedule(s)
GB2493470B (en) 2010-04-12 2017-06-07 Smule Inc Continuous score-coded pitch correction and harmony generation techniques for geographically distributed glee club
US9601127B2 (en) * 2010-04-12 2017-03-21 Smule, Inc. Social music system and method with continuous, real-time pitch correction of vocal performance and dry vocal capture for subsequent re-rendering based on selectively applicable vocal effect(s) schedule(s)
US8584198B2 (en) * 2010-11-12 2013-11-12 Google Inc. Syndication including melody recognition and opt out
US9866731B2 (en) 2011-04-12 2018-01-09 Smule, Inc. Coordinating and mixing audiovisual content captured from geographically distributed performers
US8729374B2 (en) * 2011-07-22 2014-05-20 Howling Technology Method and apparatus for converting a spoken voice to a singing voice sung in the manner of a target singer
EP2573761B1 (en) 2011-09-25 2018-02-14 Yamaha Corporation Displaying content in relation to music reproduction by means of information processing apparatus independent of music reproduction apparatus
JP5494677B2 (ja) 2012-01-06 2014-05-21 ヤマハ株式会社 演奏装置及び演奏プログラム
KR102246623B1 (ko) * 2012-08-07 2021-04-29 스뮬, 인코포레이티드 선택적으로 적용가능한 보컬 효과 스케줄에 기초한 후속적 리렌더링을 위한 보컬 연주 및 드라이 보컬 캡쳐의 연속적인 실시간 피치 보정에 의한 소셜 음악 시스템 및 방법
CN103730117A (zh) * 2012-10-12 2014-04-16 中兴通讯股份有限公司 一种自适应智能语音装置及方法
US11146901B2 (en) 2013-03-15 2021-10-12 Smule, Inc. Crowd-sourced device latency estimation for synchronization of recordings in vocal capture applications
CN103680518A (zh) * 2013-12-20 2014-03-26 上海电机学院 基于虚拟仪器技术的语音性别识别方法及***
CN106463111B (zh) * 2014-06-17 2020-01-21 雅马哈株式会社 基于字符的话音生成的控制器与***
KR102179431B1 (ko) * 2014-12-26 2020-11-16 삼성전자주식회사 음향 출력 장치 및 그 제어 방법
US11488569B2 (en) 2015-06-03 2022-11-01 Smule, Inc. Audio-visual effects system for augmentation of captured performance based on content thereof
US11032602B2 (en) 2017-04-03 2021-06-08 Smule, Inc. Audiovisual collaboration method with latency management for wide-area broadcast
US10008193B1 (en) * 2016-08-19 2018-06-26 Oben, Inc. Method and system for speech-to-singing voice conversion
CN106340288A (zh) * 2016-10-12 2017-01-18 刘冬来 多功能迷你便携k歌设备
US10134374B2 (en) * 2016-11-02 2018-11-20 Yamaha Corporation Signal processing method and signal processing apparatus
US11310538B2 (en) 2017-04-03 2022-04-19 Smule, Inc. Audiovisual collaboration system and method with latency management for wide-area broadcast and social media-type user interface mechanics
US10845956B2 (en) 2017-05-31 2020-11-24 Snap Inc. Methods and systems for voice driven dynamic menus
JP7000782B2 (ja) * 2017-09-29 2022-01-19 ヤマハ株式会社 歌唱音声の編集支援方法、および歌唱音声の編集支援装置
JP6610715B1 (ja) * 2018-06-21 2019-11-27 カシオ計算機株式会社 電子楽器、電子楽器の制御方法、及びプログラム
JP6547878B1 (ja) * 2018-06-21 2019-07-24 カシオ計算機株式会社 電子楽器、電子楽器の制御方法、及びプログラム
JP6610714B1 (ja) * 2018-06-21 2019-11-27 カシオ計算機株式会社 電子楽器、電子楽器の制御方法、及びプログラム
CN109087623A (zh) * 2018-08-14 2018-12-25 无锡冰河计算机科技发展有限公司 异性演唱伴奏调整方法、装置及ktv点唱机
US11423920B2 (en) 2018-09-28 2022-08-23 Rovi Guides, Inc. Methods and systems for suppressing vocal tracks
JP7059972B2 (ja) 2019-03-14 2022-04-26 カシオ計算機株式会社 電子楽器、鍵盤楽器、方法、プログラム

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US3602824A (en) * 1968-08-19 1971-08-31 Sanders Associates Inc Frequency changing apparatus and methods
US5428708A (en) * 1991-06-21 1995-06-27 Ivl Technologies Ltd. Musical entertainment system
US5231671A (en) * 1991-06-21 1993-07-27 Ivl Technologies, Ltd. Method and apparatus for generating vocal harmonies
US5248845A (en) * 1992-03-20 1993-09-28 E-Mu Systems, Inc. Digital sampling instrument
US5296643A (en) * 1992-09-24 1994-03-22 Kuo Jen Wei Automatic musical key adjustment system for karaoke equipment
JP2897552B2 (ja) * 1992-10-14 1999-05-31 松下電器産業株式会社 カラオケ装置
US5477003A (en) * 1993-06-17 1995-12-19 Matsushita Electric Industrial Co., Ltd. Karaoke sound processor for automatically adjusting the pitch of the accompaniment signal
US5641927A (en) * 1995-04-18 1997-06-24 Texas Instruments Incorporated Autokeying for musical accompaniment playing apparatus

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001282269A (ja) * 2000-03-31 2001-10-12 Clarion Co Ltd 情報提供システム及び発声人形
JP4531916B2 (ja) * 2000-03-31 2010-08-25 クラリオン株式会社 情報提供システム及び発声人形
JP2006208958A (ja) * 2005-01-31 2006-08-10 Daiichikosho Co Ltd カラオケシステム
WO2008044752A1 (fr) * 2006-10-06 2008-04-17 Atsushi Nakanishi Appareil audio à perception réduite de la voix propre de son utilisateur
JP2008116534A (ja) * 2006-11-01 2008-05-22 Yamaha Corp 音声通信装置
JP2009222993A (ja) * 2008-03-17 2009-10-01 Honda Motor Co Ltd 車両用音声案内装置
CN109712635A (zh) * 2018-12-28 2019-05-03 深圳创维－Rgb电子有限公司 一种声音数据处理方法、智能终端及存储介质
CN109712635B (zh) * 2018-12-28 2020-10-09 深圳创维－Rgb电子有限公司 一种声音数据处理方法、智能终端及存储介质

Also Published As

Publication number Publication date
US5889223A (en) 1999-03-30
JP3900580B2 (ja) 2007-04-04

Similar Documents

Publication Publication Date Title
JP3900580B2 (ja) カラオケ装置
JP2001215979A (ja) カラオケ装置
JP4802857B2 (ja) 楽音合成装置及びプログラム
JPH1074098A (ja) 音声変換装置
JP4487632B2 (ja) 演奏練習装置および演奏練習用コンピュータプログラム
JPH10319947A (ja) 音域制御装置
JP3484719B2 (ja) 音声入力機能付き演奏ガイド装置および演奏ガイド方法
JPH08286689A (ja) 音声信号処理装置
JP3659138B2 (ja) カラオケ装置
JP2001324987A (ja) カラオケ装置
JPH0417000A (ja) カラオケ装置
JP2007206183A (ja) カラオケ装置
JPH08227296A (ja) 音声信号処理装置
JP2889841B2 (ja) 電子楽器自動伴奏時のコード変化処理方法
JP2904045B2 (ja) カラオケ装置
JP2005037848A (ja) 楽音発生装置及びそのプログラム
JP4296767B2 (ja) ブレス音合成方法、ブレス音合成装置およびプログラム
JP2000010572A (ja) 歌声発生装置およびカラオケ装置
JP3166621B2 (ja) カラオケ用プロセッサおよび楽器練習用プロセッサ
JPH0651790A (ja) カラオケ用ディスクプレーヤ
KR20010058808A (ko) 가라오케 시스템의 음높이 자동 제어 방법
JP3279299B2 (ja) 楽音要素抽出装置及び方法並びに記憶媒体
JP3494095B2 (ja) 楽音要素抽出装置及び方法並びに記憶媒体
JP3471672B2 (ja) ボーカル音量の自動フェードアウト機能を備えたカラオケ装置
JP2000163072A (ja) 波形再生装置のピッチ制御装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20031209

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20060915

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20060926

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20061127

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20061212

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20061225

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313532

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110112

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120112

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130112

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140112

Year of fee payment: 7

LAPS Cancellation because of no payment of annual fees