JP2003271158A - 画像変更機能を持つカラオケ装置及びプログラム - Google Patents

Abstract

(57)【要約】 【課題】ユーザが指定した画像を３次元キャラクタや背
景の部位に貼り付け、カラオケデータの情報等に基づ
き、画像を変化させたり、画像を切り替えることを可能
とする、カラオケ装置およびプログラムを提供すること
を目的としている。 【解決手段】上記の課題を解決するために、請求項１に
記載の発明は、カラオケの再生に必要なカラオケデータ
に従って動画を再生する動画再生手段と、前記カラオケ
データに含まれる時系列的に変化する属性データに従っ
てカラオケの再生時に前記動画再生手段を制御すること
により、前記動画再生手段により再生される動画を逐次
変化させる動画制御手段と、を備えることを特徴とす
る。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、カラオケデータま
たはマイク入力レべルに基づいて動く映像を再生する、
動画再生手段と動画制御手段を有するカラオケ装置およ
びカラオケプログラムに関するものである。

【０００２】

【従来の技術】歌謡曲、ポップス等の楽曲（伴奏部分）
を再生すると共に、再生する楽曲専用の背景画像を表示
するカラオケ装置は、一般に知られている。このような
カラオケ装置は、例えば、ＶＣＤ（Video CD）またはＬ
Ｄ（Laser Disc）等を用いた記憶装置を有しており、こ
の記憶装置に、楽曲を再生するための音声データ、背景
画像および歌詞を表示するための画像データを記憶保持
している。ここで、前記音声データは、例えばＰＣＭ音
声データ等であり、前記画像データは、撮影された景色
に歌詞を合成することによって形成されたデータであ
る。そして、このカラオケ装置は、前記記憶装置から音
声データを読み出して楽曲を再生し、これと同時に、前
記記憶装置から画像データを読み出して背景画像を表示
する。

【０００３】近年では、カラオケ装置に通信機能を備
え、楽曲を再生するための音声データおよび歌詞データ
を電話回線等を介して伝送する、いわゆる通信カラオケ
装置が広く普及している。

【０００４】このような通信カラオケ装置では、楽曲を
再生するための音声データ等を電話回線を介して受け取
る構成であるため、再生できる楽曲の数は記憶装置の記
憶容量によって制限されない。従って、膨大な楽曲を再
生することができる。また、最新の楽曲を再生する必要
が生じても、電話回線を介してその楽曲の音声データを
受け取れば、当該最新の楽曲を再生することができる。

【０００５】また、このような通信カラオケ装置におい
て、カラオケデータに基づいた３次元キャラクタや背景
を表示するものが知られている。

【０００６】

【発明が解決しようとする課題】これらのカラオケ装置
においては決まった画像（テクスチャ）を３次元キャラ
クタや背景として使用し、これらをカラオケの映像とし
て使用していた。従って、カラオケ装置で表示される３
次元キャラクタや背景においては、決まったテクスチャ
を使用しているので、キャラクタの表情に変化が無く、
また背景にも変化がないため、おもしろみに欠けるとい
う問題点を有していた。

【０００７】そこで、本発明では、ユーザが指定した画
像を３次元キャラクタや背景の部位に貼り付け、カラオ
ケデータの情報等に基づき、画像を変化させたり、画像
を切り替えることを可能とする、カラオケ装置およびプ
ログラムを提供することを目的としている。

【０００８】

【課題を解決するための手段】上記の課題を解決するた
めに、請求項１に記載の発明は、カラオケの再生に必要
なカラオケデータに従って動画を再生する動画再生手段
と、前記カラオケデータに含まれる時系列的に変化する
属性データに従ってカラオケの再生時に前記動画再生手
段を制御することにより、前記動画再生手段により再生
される動画を逐次変化させる動画制御手段と、を備える
ことを特徴とする。

【０００９】この発明によれば、カラオケ再生画像をカ
ラオケデータに含まれる時系列的に変化する属性データ
によって変化させることができるようになったので、カ
ラオケで使用するキャラクタに表情などの表現力をもた
せることができるようになった。また、背景ステージも
変化させることができるようになり、より一層カラオケ
に対して楽しさを向上させることができるようになっ
た。

【００１０】上記の課題を解決するために、請求項２に
記載の前記動画制御手段は前記属性データとしてのテロ
ップデータに基づいて、前記動画再生手段による動画を
前記テロップデータが示す歌詞の発音に応じて変化させ
ることを特徴とする。

【００１１】この場合には、テロップ（歌詞）データの
発音に同期して、キャラクタや背景ステージを変化させ
ることができるようになったので、キャラクタや背景ス
テージが、あたかも演奏されている曲に合わせるかのよ
うに変化させることができるようになった。

【００１２】上記の課題を解決するために、請求項３に
記載の前記動画制御手段は前記属性データとしての文字
データに含まれる母音に基づいて、前記動画再生手段に
よる動画を前記母音に応じて変化させることを特徴とす
る。

【００１３】この場合には、テロップ（歌詞）データの
母音に同期して、キャラクタや背景ステージを変化させ
ることができるようになったので、キャラクタや背景ス
テージが、あたかも演奏されている曲に合わせるかのよ
うに変化させることができるようになった。

【００１４】上記の課題を解決するために、請求項４に
記載の前記動画制御手段は前記属性データとしての文字
データに含まれる母音に基づいて、前記動画再生手段に
よる動画中のキャラクタの口の動作を前記母音に応じて
変化させることを特徴とする。

【００１５】テロップ（歌詞）データの母音に同期し
て、キャラクタの口の形状を変化させることができるよ
うになったので、キャラクタがいかにも演奏されている
曲を歌っているかのようにすることができるようになっ
た。

【００１６】上記の課題を解決するために、請求項５に
記載の前記動画制御手段は前記属性データとしての拍子
データに基づいて、前記動画再生手段による動画を前記
拍子データが示す演奏曲の拍子に応じて変化させること
を特徴とする。

【００１７】この場合には、拍子データによって示され
る拍子に同期して、キャラクタや背景ステージを変化さ
せることができるようになったので、キャラクタや背景
ステージが、あたかも演奏されている曲に合わせるかの
ように変化させることができるようになった。

【００１８】上記の課題を解決するために、請求項６に
記載の前記動画制御手段は前記属性データとしての展開
データに基づいて、前記動画再生手段による動画を前記
展開データが示す演奏曲の展開に応じて変化させること
を特徴とする。

【００１９】この場合には、属性データの展開データで
ある曲のイントロの部分、サビの部分、エンディングの
部分等に対応して、それぞれにふさわしいキャラクタの
動作の変更や背景ステージを変化させることができるよ
うになったので、カラオケに対する楽しさを一層向上で
きるようになった。

【００２０】上記の課題を解決するために、請求項７に
記載のカラオケ装置は、カラオケの再生に必要なカラオ
ケデータに従って動画を再生する動画再生手段と、カラ
オケ再生時にマイクを介して逐次入力される入力データ
に従って前記動画再生手段を制御することにより、前記
動画再生手段により再生される動画を逐次変化させる動
画制御手段と、を備えることを特徴とする。

【００２１】この場合には、曲を歌っている人間のマイ
クに入力される情報に合わせて、キャラクタの形状を変
化させることができるようになったので、キャラクタが
いかにも演奏されている曲に対応して感情を表現して歌
っているかのようにすることができるようになった。

【００２２】上記の課題を解決するために、請求項８に
記載のカラオケ装置は、前記動画制御手段は、前記入力
データとしての音量情報に基づいて、前記動画再生手段
により再生される動画中のキャラクタの口の動作を前記
音量情報に応じて変化させることを特徴とする。

【００２３】この場合には、曲を歌っている人間のマイ
クに入力される音量レベルに合わせて、キャラクタの口
の形状を変化させることができるようになったので、音
量レベルが大きいときにはキャラクタの口を大きく開け
た画面に対応させ、音量レベルが小さいときにはキャラ
クタの口を小さく開けた画面に対応させることによっ
て、キャラクタがいかにも演奏されている曲に感情を表
現して歌っているかのようにすることができるようにな
った。

【００２４】上記の課題を解決するために、請求項９に
記載のカラオケ装置は、あらかじめ作成された画像を貼
り付けて前記動画を作成する画像作成手段を備え、前記
動画制御手段は、前記貼り付けられた画像を逐次変化さ
せることを特徴とする。

【００２５】この場合には、キャラクタや背景ステージ
として撮影されたデジタルカメラなどの画像を使用する
ことができるようになった。したがってより一層カラオ
ケに対する楽しさを向上させることが可能となった。

【００２６】上記の課題を解決するために、請求項１０
に記載のカラオケ装置は、前記動画の一部として、あら
かじめ用意された複数の画像のうち一つを選択する画像
選択手段を備えたことを特徴とする。

【００２７】この場合には、キャラクタや背景ステージ
として撮影されたデジタルカメラなどの画像を使用する
ことができるようになり、さらに、その撮影された画像
やあらかじめ用意された広告などの画像を、演奏されて
いる曲の途中で変更することが可能となった。したがっ
てより一層カラオケに対する楽しさを向上させることが
可能となった。

【００２８】上記の課題を解決するために、請求項１１
に記載のプログラムは、コンピュータに、カラオケの再
生に必要なカラオケデータに従って動画を再生する動画
再生機能と、前記カラオケデータに含まれる時系列的に
変化する属性データに従ってカラオケの再生時に前記動
画再生機能を制御することにより、前記動画再生機能に
より再生される動画を逐次変化させる動画制御機能を、
実現させることを特徴とする。

【００２９】この場合には、カラオケ再生画像をカラオ
ケデータに含まれる時系列的に変化する属性データによ
って変化させることができるようになったので、カラオ
ケで使用するキャラクタに表情などの表現力をもたせる
ことができるようになった。また、背景ステージも変化
させることができるようなり、より一層カラオケに対し
て楽しさを向上させることができるようになった。

【００３０】上記の課題を解決するために、請求項１２
に記載のプログラムは、コンピュータに、カラオケの再
生に必要なカラオケデータに従って動画を再生する動画
再生機能と、前記カラオケデータに含まれる時系列的に
変化する属性データに従ってカラオケの再生時に前記動
画再生機能を制御することにより、前記動画再生機能に
より再生される動画を逐次変化させる動画制御機能を、
実現させることを特徴とする。

【００３１】この場合には、曲を歌っている人間のマイ
クに入力される情報に合わせて、キャラクタの形状を変
化させることができるようになったので、キャラクタが
いかにも演奏されている曲に対応して感情を表現して歌
っているかのようにすることができるようになった。

【００３２】

【発明の実施の形態】−第1の実施形態− 以下、本発明によるカラオケ装置の第1の実施形態につ
いて説明する。本実施形態は業務用に主に使用するカラ
オケ装置の実施形態である。

【００３３】図１は、本実施形態のカラオケ装置の構成
をブロック図で示したものである。

【００３４】本実施形態のカラオケ装置は、制御部１
と、メモリ部２と、ディスプレイ３、音声出力部４と、
スピーカ５と、マイク入力部６と、マイク７と、入力部
８と、外部インターフェース９とからなる。

【００３５】メモリ部２は、ユーザが用意した画像デー
タやカラオケ演奏に必要な画像や音声をあらかじめ格納
しておく部分である。ディスプレイ３は、カラオケ画像
であるキャラクタや背景を表示する。また、ユーザが曲
や画像を選択する時に使用する表示装置としても用いら
れる。マイク７はユーザの発声する声などをマイク入力
部６に伝送する。スピーカ５は、演奏される曲の音やマ
イク７から入力された音声を音声出力部４を介して外部
に出力する。入力部８は、ディスプレイ３に表示された
メニューから、ユーザが曲や画像を選択するためのキー
ボードやリモコン装置および外部から新たな画像を取り
込むハードディスク装置やフロッピィディスク装置など
である。外部インターフェース部９は、外部コンピュー
タ１０からカラオケに必要な映像データや音声データを
取り込む部分である。制御部１は全体の制御を行うＣＰ
Ｕなどの装置である。制御部１は、カラオケ演奏に必要
な画像や音声をメモリ部２から取得して、ディスプレイ
３に動画を再生したり、音声出力部４に音声を送出す
る。また、制御部１は入力部８を介して、ユーザとの情
報の交換を行い、必要な処理を行う。さらに制御部１
は、外部インターフェース部９を介して、ユーザが選択
したカラオケに必要な映像データや音声データを外部コ
ンピュータ１０から取得したり、ユーザが選択した画像
をメモリ部２から取得する。その後、カラオケ情報に含
まれる時系列的な変化を表す情報に従って、動画を逐次
変化させる制御を行い、ディスプレイ３に表示したりす
る。

【００３６】図２は、本実施形態のカラオケ装置の処理
をブロック図に示したものである。画像データ格納部１
０１、キャラクタデータ及び背景ステージデータ格納部
１０４、カラオケデータ格納部１０７および曲情報デー
タ格納部１０５は図１のメモリ部２に相当する。ユーザ
インターフェース部１０２は図１の入力部８に相当す
る。画像データ加工処理部１０３、キャラクタ・ステー
ジ選択部１０６、演奏処理部１１０、属性情報抽出部１
０９およびマイク入力レベル検出部１０８は、図１の制
御部１に相当する。

【００３７】画像データ格納部１０１は、ユーザが用意
した画像データをあらかじめ格納しておく部分である。
ユーザインターフェース部１０２は、画像データ１０１
から、ユーザがキャラクタや背景ステージなどを選択
し、取り込む画像を指定するインターフェース部であ
る。画像データ加工処理部１０３では、ユーザインター
フェース部１０２において取り込んだ画像のうち、例え
ば、取り込んだ画像がキャラクタの顔である場合には、
キャラクタの顔をあらかじめ指定された枠のなかにはめ
込み、このはめ込まれた画像に対して、目、口、鼻、頬
の位置を入力部８を介してユーザが指定するか、画像デ
ータ加工処理部１０３が自動的に割り付ける。また、ユ
ーザインターフェース部１０２から取り込んだ画像をキ
ャラクタの顔や胴体として、また、背景ステージデータ
としてユーザが入力部８を介して指定する。キャラクタ
データ及び背景ステージデータ格納部１０４は、画像デ
ータ加工処理部１０３で加工されたデータを、キャラク
タデータ及び背景ステージデータとして格納しておく部
分である。曲情報データ格納部１０５には、カラオケと
して演奏される曲のジャンル（例えば、ポップス、演
歌、スローテンポなど）が格納されている。キャラクタ
・ステージ選択部１０６は、演奏される曲についての情
報を曲情報データ格納部１０５から転送し、その曲情報
によって最適なデータをキャラクタデータ及び背景ステ
ージデータ格納部１０４から自動的に選択する。また、
ユーザが入力部８を用いてディスプレイ３に表示された
画像から選択して変更することも可能である。

【００３８】カラオケデータ格納部１０７には、カラオ
ケデータである、曲展開データ（図３に示す、曲情報デ
ータ、メロディボリュームデータ、タイムベース、スケ
ジュールテーブルなど）、ＭＩＤＩデータ（ＭＩＤＩ音
源データ）、テロップ（歌詞）データ（図４に示す、テ
ロップ制御テーブル、歌詞用文字データ、口ぱく用ひら
がなデータなど）、ＭＰＥＧデータ（ＭＰＥＧデータ番
号、ＭＰＥＧコーラスデータなど）が格納されている。

【００３９】マイク入力レベル検出部１０８は、ユーザ
が発声している音量をデジタルデータとして検出する。
属性情報抽出部１０９では、カラオケデータ格納部１０
７から、図３に示す曲展開データ、ＭＩＤＩデータ、図
４示すテロップデータ、ＭＰＥＧデータから必要な情報
のみを抽出する。また、マイク入力レベル検出部１０８
から入力されるデータから、音量レベルを抽出する。演
奏処理部１１０では、属性情報抽出部１０９から抽出し
た属性データに基づき、ディスプレイ３に表示されるキ
ャラクタや背景ステージデータを変化させて表示、すな
わち動作させるとともに、音声を音声出力部３に出力す
る。ここで属性データとは、テロップデータ（図３）
と、時間データ（図示せず）と、テンポデータ（図３）
と、マイクに入力された音声レベルと、イントロ開始部
分、曲番開始／終了部分、最後（エンディング）開始終
了部分（図３）とである。

【００４０】図３は、カラオケデータである曲展開デー
タの内容を示している。曲展開データには、曲情報デー
タ、メロディボリュームデータ、タイムベースデータ及
びスケジュールテーブルが含まれる。

【００４１】図４は、カラオケデータであるテロップデ
ータ（歌詞データ）の内容を示している。テロップデー
タには、テロップ制御テーブル、歌詞用文字データ及び
口パク用ひらがなデータが含まれる。

【００４２】次に属性データに基づいて、ディスプレイ
３に表示させるキャラクタの動作を変化させる処理につ
いて図５〜図８に従って説明する。

【００４３】図５は、カラオケデータのテロップデータ
に基づくキャラクタの動作を説明している。すなわち、
ディスプレイ３に表示されるテロップ（歌詞）の色変わ
りタイミングと同期して、同じくディスプレイ３に表示
されるキャラクタの口の形状を変化（いわゆる口パク）
させて、あたかもキャラクタが演奏されている曲を歌っ
ているかのように表示させる。

【００４４】さらに図５に基づいて詳細に説明する。ス
テップＳ１にて、カラオケデータ格納部１０７からカラ
オケ演奏に必要なカラオケデータを抽出する。ステップ
Ｓ２では、属性情報抽出部１０９から抽出した属性デー
タから図３に示すテロップ（文字）データと時間データ
（図示せず）を取得し、一文字ごとの母音データと文字
データの色変わりタイミングを演奏開始からの時間デー
タとして抽出しメモリ部に記憶する。ステップＳ３で
は、演奏に必要なキャラクタデータ、背景ステージデー
タをキャラクタデータ及び背景ステージデータ格納部１
０４から選択する。ステップＳ４では、ステップＳ１に
おいて抽出したカラオケデータに基づいてカラオケの演
奏用のデータをメモリに記憶する。ステップＳ５にて、
カラオケの音声をスピーカから出力し、キャラクタ、背
景ステージ及びテロップをディスプレイ３に表示する。
ステップＳ６では、演奏処理部１１０にて演奏時間と、
メモリに記憶された１文字ごとの色変わりタイミング時
間を比較し、現在の演奏時間と色変わりタイミングの時
間が等しい場合は、ステップＳ７に進み、等しくない場
合はステップＳ８に進む。ステップＳ７では、演奏処理
部１１０にてキャラクタの口を、母音データに対応した
形に変更し、ディスプレイ３に出力する。

【００４５】母音を抽出する方法、ならびに、キャラク
タの口を変化さえるタイミングの決定方法について、図
９〜図１２に基づいて説明を行う。

【００４６】まず、図９にテロップデータからひらがな
五十音に対する母音テーブル（ａ，ｉ，ｕ，ｅ，ｏ）を
作成する方法を示す。「愛とＰＥＡＣＥ」というテロッ
プデータを例にした。この場合、「愛とＰＥＡＣＥ」と
いうテロップデータは、それぞれの文字ごとに、図９に
示すシフトＪＩＳコードで表される。テロップデータに
は、あらかじめ、ひらがなのデータも含まれている。通
常、このひらがなのデータは、ふりがな（“ルビ”と言
う。）で使用される。このルビデータを口パク用ひらが
なデータとして流用する。この口パク用ひらがなデータ
から対応する母音を、図９の母音データのように抽出す
る。この母音データのａ，ｉ，ｕ，ｅ，ｏに対応させ
て、キャラクタの口の形状を変化させる（図示せず）。
つまり母音データａのときのキャラクタの口の形状と、
母音データｉのときのキャラクタの口の形状と、母音デ
ータｕのときのキャラクタの口の形状と、母音データｅ
のときのキャラクタの口の形状および母音データｏのと
きのキャラクタの口の形状をそれぞれ異なった形状にす
る。この場合、各文字の色変わり開始時間に合わせて、
キャラクタの形状を変化させればよいが、「愛」の文字
は、母音を２つ持つために特別な処理を行う必要があ
る。

【００４７】図１０は、ディスプレイに表示されるテロ
ップデータ「愛」の文字と、一緒に表示される口ぱく用
ひらがなデータ「あい」の表示幅を示す。「愛」の文字
幅を４８ドットに設定した場合に、口パク用ひらがなデ
ータ「あ」及び「い」は、「愛」の文字の半分の文字幅
にあたる２４ドットがそれぞれ割り当てられる。この口
ぱく用データは、ディスプレイに表示されているとき
に、曲の演奏の時間と共に色が変化していくが、「あ」
から「い」に移り変わるタイミングは、テロップデータ
内には無い。そこで、この「あ」から「い」に移り変わ
るタイミングをテロップデータ内のカラオケデータを使
用して求める方法を次に説明する。

【００４８】図１１および図１２に、図４に示されるテ
ロップデータ中の色変わり開始時間ｔ１、ｔ２、ｔ３と
色変わり幅ｘ１、ｘ２、ｘ３の関係を示す。演奏されて
いる曲の開始からｔ１時間がたつと、図１１に示す歌詞
データ「愛」および図１２に示す口パク用ひらがなデー
タ「あ」のｘ１幅に相当する部分の表示色が変化する。
次に、演奏されている曲の開始からｔ２時間がたつと、
歌詞データ「愛」および口パク用ひらがなデータ「あ」
のｘ２幅に相当する部分の表示色がｘ１表示色と同じ色
に変化する。さらに、演奏されている曲の開始からｔ３
時間がたつと、歌詞データ「愛」および口パク用ひらが
なデータ「あ」のｘ３幅に相当する部分の表示色がｘ１
表示色と同じ色に変化する。このようにして、曲の演奏
とともに、テロップデータである「愛」および「あい」
の文字の表示色が変化していく。ところが、本実施形態
においては、母音の変化に合わせて、キャラクタの口の
形状を変化させるので、図１２の演奏されている曲の開
始からｔ１時間が経過したときと、ｔ４時間が経過した
ときを検知する必要がある。すなわち、演奏開始から、
ｔ１時間経過したら、“ａ”の母音に対応するキャラク
タの口の形状を表示させ、ｔ４時間経過したら、“ｉ”
の母音に対応するキャラクタの口の形状を表示させる。
ｔ１は、あらかじめテロップデータとして記憶されてい
るが、ｔ４は計算をする必要がある。そのための計算方
法を以下に述べる。ｘ１は色変わり幅であるが、その単
位は、ディスプレイ上の単位であるドット数に対応す
る。図１０に示したごとく、歌詞データ幅は４８ドット
であり、口パク用ひらがなデータ幅はその半分の２４ド
ットで表現されている。そこで、ｔ４にあたる時間はｔ
２にあたる時間からＴ５の時間だけ経過した時間である
ことがわかる。このＴ５は（２４−ｘ１）×（ｔ３−ｔ
２）／ｘ２―――（１）で求められる。したがって、ｔ
２の時間が経過した後、（１）式で計算された時間が経
過した時点で“ａ”の母音に対応するキャラクタの口の
形状から“ｉ”の母音に対応するキャラクタの口の形状
に変化させる。

【００４９】このように、漢字、ひらがな、カタカナ、
ローマ字に対応するテロップデータから母音を抽出し
て、母音に対応するタイミングの変化時点で、キャラク
タの口の形状を変更することにより、キャラクタがあた
かもその曲を歌っているように口を変化させることが可
能となる。

【００５０】図５の処理はさらに続き、ステップＳ８で
は、カラオケの演奏が継続されるかどうかを判断する。
さらに演奏が継続される場合には、ステップＳ５に戻
り、カラオケの演奏が継続されない場合には、ステップ
Ｓ９にてカラオケの演奏を終了する。 ―第２の実施形態― 以下、本発明によるカラオケ装置の第２の実施形態につ
いて説明する。第1の実施形態と同一構成要素について
の説明は省略する。

【００５１】図６は、カラオケデータの拍子データに基
づくキャラクタの動作を説明している。ステップＳ１１
では、カラオケデータ格納部１０７からカラオケ演奏に
必要なカラオケデータを抽出する。ステップＳ１２で
は、図３の曲展開データの中にあるスケジュールテーブ
ル中のテンポデータを抽出する。テンポデータは四分音
符の長さを基準としているので、これの整数倍Ｎの時間
間隔がいわゆる拍子の始まり時間に対応するので、この
時間間隔を演奏始めの時間としてメモリに記憶する。ス
テップＳ１３では、演奏に必要なキャラクタデータ及び
背景ステージデータをキャラクタデータ及び背景ステー
ジデータ格納部１０４から選択する。ステップＳ１４
で、ステップＳ１１でにおいて抽出したカラオケデータ
に基づいてカラオケの演奏を開始する。ステップＳ１５
にて、カラオケの音声をスピーカから出力し、キャラク
タ、背景ステージ及びテロップをディスプレイに表示す
る。ステップＳ１６では、演算処理部１１０にて演奏時
間と、メモリに記憶された拍子の始まり時間とを比較
し、両者が等しい場合は、ステップＳ１７に進み、等し
くない場合はステップＳ１８に進む。ステップＳ１７で
は、演算処理部１１０にて拍子の時間が経過する毎にキ
ャラクタ及び背景ステージを変化させてディスプレイに
表示する。すなわち、四分音符のＮ倍の時間が経過した
時に、キャラクタの形状を変化させると、キャラクタは
あたかも拍子にあわせて踊るかのように表示させること
ができる。また、背景ステージも変化させてディスプレ
イに表示させることができる。ステップＳ１８では、カ
ラオケの演奏が継続されるかどうかを判断する。さらに
演奏が継続される場合には、ステップＳ１５に戻り、カ
ラオケの演奏が継続されない場合には、ステップＳ１９
にて演奏を終了する。 ―第３の実施形態― 以下、本発明によるカラオケ装置の第３の実施形態につ
いて説明する。第1の実施形態と同一構成要素について
の説明は省略する。

【００５２】図７は、マイク入力レベルに基づくキャラ
クタの動作を説明している。ステップＳ２１では、カラ
オケデータ格納部１０７からカラオケ演奏に必要なカラ
オケデータを抽出する。ステップＳ２２では、演奏に必
要なキャラクタデータ及び背景ステージデータをキャラ
クタデータ及び背景ステージデータ格納部１０４から選
択する。ステップＳ２３で、ステップＳ２１にておいて
抽出したカラオケデータに基づいてカラオケを開始す
る。ステップＳ２４にて、カラオケの音声をスピーカか
ら出力し、キャラクタ、背景ステージ及びテロップをデ
ィスプレイに表示する。ステップＳ２５で、マイク入力
レベル検出部１０８にてマイクに入力された音声のレベ
ルを検出する。ステップＳ２６では、演算処理部１１０
にてキャラクタの口を、そのマイクに入力された音声の
レベルに対応した形状に変更する処理を行い、ディスプ
レイに表示する。すなわち、マイクの入力レベルが大き
いときには、キャラクタの口を大きく開けた形状に対応
させ、マイクの入力レベルが小さいときには、キャラク
タの口を小さく開けた形状に対応させる。したがって、
演奏されている曲に合わせて歌っているユーザは、ユー
ザの声の大きさに合わせてキャラクタの口が大きくなっ
たり、小さくなったりするので、キャラクタが自分の声
の大きさに合わせて歌っているかのように感じられる。
ステップＳ２７では、カラオケの演奏が継続されるかど
うかを判断する。さらに演奏が継続される場合には、ス
テップＳ２４に戻り、カラオケの演奏が継続されない場
合には、ステップＳ２８にて演奏を終了する。 ―第４の実施形態― 以下、本発明によるカラオケ装置の第４の実施形態につ
いて説明する。第1の実施形態と同一構成要素について
の説明は省略する。

【００５３】図８は、図３に示すカラオケデータの曲展
開データに基づくキャラクタおよび背景ステージの変化
を説明している。ステップＳ３１では、カラオケデータ
格納部１０７からカラオケ演奏に必要なカラオケデータ
を抽出する。ステップＳ３２では、属性情報抽出部１０
９から抽出した属性データから図３に示す曲の展開情報
から、演奏する曲のイントロ開始部分、曲番開始／終了
部分、最後（エンディング）開始終了部分の演奏時間を
計算する。ステップＳ３３では、演奏に必要なキャラク
タデータ及び背景ステージデータをキャラクタデータ及
び背景ステージデータ格納部１０４から選択する。ステ
ップＳ３４で、Ｓ３１にて抽出したカラオケデータに基
づいてカラオケの演奏を開始する。ステップＳ３５に
て、カラオケの音声をスピーカから出力し、キャラク
タ、背景ステージ及びテロップをディスプレイに表示す
る。ステップＳ３６では、演算処理部１１０にて演奏時
間と、曲展開データの開始時間とを比較し、両者の時間
が等しい場合は、ステップＳ３７に進み、等しくない場
合にはステップＳ３８に進む。ステップＳ３７では、演
算処理部１１０にてキャラクタ及び背景ステージを、そ
の曲展開データに対応したものに変更する。例えば、演
奏する曲のイントロ開始部分、曲番開始部分、最後（エ
ンディング）開始部分で、異なるキャラクタ及び背景ス
テージデータに変更してディスプレイに表示する。した
がって、曲の展開に合わせてキャラクタ及び背景ステー
ジが変化するので、演奏されている曲の雰囲気にあわせ
て、情緒ある画面をディスプレイに表示させることがで
きる。ステップＳ３８では、カラオケの演奏が継続され
るかどうかを判断する。さらに演奏が継続される場合に
は、ステップＳ３５に戻り、カラオケの演奏が継続され
ない場合には、ステップＳ３９にて演奏を終了する。 ―第５の実施形態― 以下、本発明によるカラオケ装置の第５の実施形態につ
いて説明する。第1の実施形態と同一構成要素について
の説明は省略する。本実施形態は家庭において使用する
ことを主な目的とするカラオケ装置の実施形態である。

【００５４】最初に、図１の入力部８であるフロッピィ
ディスク装置などから、デジタルカメラで撮影された写
真画像ファイルを入力し、キャラクタデータ及び背景ス
テージデータ格納部１０４に、その画像を格納する。そ
の後、ディスプレイを見ながらユーザがキャラクタの顔
の部分にデジタルカメラの画像を貼り付ける。これによ
り、例えば、第１〜第4の実施形態に示したキャラクタ
の顔をユーザが用意した画像に置き換えることができる
ものとする。この手順を図１３〜図１６に基づいて、説
明する。図１３は本出願の画像貼り付け操作画面であ
る。元データ２０には変更元になる、カラオケ演奏に現
在使用されているキャラクタの部位や背景ステージが表
示される。図１３では「ＴＶ−ＦＡＣＥ」というキャラ
クタの部位が表示されている。これは、キャラクタの顔
の部分に、ＴＶ画面のような「ＴＶ−ＦＡＣＥ」画像が
曲の演奏中に表示されることを表している。画像データ
２１は元データ２０と交換される画像データが表示され
る。この画面では、まだ画像データが選択されていない
ので、何も表示されていない。全データ表示キー２１１
が選択されると、元データとして貼り付けることができ
る候補の画像を全て画像表示部分２１２に表示すること
ができる。図１３では全データ表示キー２１１が選択さ
れていないので、画像表示部２１２には全候補画像の１
／３が表示されている。左端がＴＶ−ＦＡＣＥであり、
この右隣が野球場であり、この右隣がバーのステージで
あり、この右隣がプールであり、この右隣が宮殿の中を
それぞれ表している。キャラクタ作成キー２２は、選択
されると、次の図１４に示す画像ファイル選択画面が表
示される。貼り付ける画像のデータ形式はＪＰＥＧでも
ＴＩＦＦでも可能である。図１４の貼り付ける画像欄２
７１には、ファイル名で特定される画像が表示される。
ユーザがデジタルカメラで撮影した顔部分の写真画像が
画像欄２７１に表示されている。ファイル名欄２４にフ
ァイル名を入力し、ファイル参照欄２５を選択すると、
キャラクタデータ及び背景ステージデータ格納部１０４
に保存されている画像データの中からファイル名欄２４
に入力されたファイル名の画像データを表示することが
できる。画像ファイルの名前欄２３には、自由にファイ
ル名に対応した識別情報を入力することができる。図１
４では「ブービー賞」が識別情報として入力されてい
る。画像ファイルの名前欄２３に名前が入力されない状
態で、ファイル参照欄２５を選択すると、画像ファイル
名欄２４に表示されたファイル名から拡張子がないファ
イル名が自動的に名前欄２３に表示される。キャンセル
キー２７２を選択すると、図１３の画面に戻る。名前欄
２３、ファイル名欄２４が共に入力されている状態で
「ＯＫ」キー２６が選択されると、図１５のキャラクタ
登録画面が表示される。キャラクタ登録画面には、元デ
ータ２８、および図１４で選択された画像データ２９が
表示される。この画像データ２９が元データ２８に表示
されている「ＴＶ−ＦＡＣＥ」に替わって、キャラクタ
の顔部分として、次の演奏時に表示される画像データの
候補であることを示している。この画面でキャラクタ登
録キー３０を選択すると、これまで選択されていた元デ
ータ２８のキャラクタや背景ステージに加え、画像デー
タ２９の画像を貼り付けた新たなキャラクタや背景ステ
ージの画像データが登録される。本実施形態では、キャ
ラクタを変更しているので、図１６のキャラクタ設定画
面が表示される。

【００５５】このようにして、キャラクタ、ステージの
画像の変更をディスプレイ３の画面から入力部３を介し
て行うことが可能になる。これにより、ユーザが撮影し
たデジタルカメラの画像等を貼り付けた新たなキャラク
タや背景ステージをカラオケ演奏中に表示することが可
能となる。

【００５６】上記説明ではキャラクタの一部分をユーザ
がデジタルカメラを使用して撮影した画像を貼り付ける
方法について説明したが、交換対象となる画像を広告な
どにしてもよい。背景ステージデータに広告などを使用
することによって、広告の表示方法を変えたり、曲の途
中で他の広告に変更するなどして、広告をタイムリ−に
提供することが可能になる。

【００５７】以上の実施形態では、業務用の通信カラオ
ケ装置用の実施形態と家庭用のカラオケ装置の実施形態
を示したが、いずれの実施形態も家庭用及び業務用とし
て実施できる。

【００５８】

【発明の効果】以上説明したとおり、ユーザがあらかじ
め用意したあらたな画像をキャラクタや背景ステージの
指定された部位へ貼り付けることができるようになり、
ユーザが好みの画像を見ながら、カラオケを楽しむこと
ができるようになった。また、キャラクタや背景ステー
ジを、カラオケデータにあわせて変化させることができ
るようになったため、キャラクタがあたかも歌っている
ように、表情を変化させたりすることができるようにな
り、カラオケに対する楽しさを増大させることができる
ようになった。さらに、背景ステージに広告を貼り付け
ることもできるようになり、よりタイムリ−な広告をカ
ラオケ画面に表示することができるようになった。

【図面の簡単な説明】

【図１】本発明によるカラオケ装置構成のブロック図。

【図２】本発明による実施形態の処理のブロック図。

【図３】本発明に使用する曲情報データの内容を示す
図。

【図４】本発明に使用するテロップ（歌詞）データの内
容を示す図。

【図５】本発明によるテロップ（歌詞）データに基づく
演奏処理を示すフローチャート。

【図６】本発明による拍子データに基づく演奏処理を示
すフローチャート。

【図７】本発明によるマイク入力レベルに基づく演奏処
理を示すフローチャート。

【図８】本発明による曲展開データに基づく演奏処理を
示すフローチャート。

【図９】歌詞データから母音を抽出する仕組みを示す
図。

【図１０】歌詞データおよび口パク用ひらがなデータの
一部を表す図。

【図１１】歌詞データとテロップデータとの関係を示す
図。

【図１２】歌詞データと口パク用ひらがなデータとの関
係を示す図。

【図１３】画像貼り付け画面。

【図１４】画像ファイル選択画面。

【図１５】キャラクタ登録画面。

【図１６】キャラクタ設定画面。

【符号の説明】

２０、２８：元データ ２１、２９：画像データ ２２：キャラクタ作成キー ２３：名前欄 ２４：ファイル名欄 ２５：ファイル参照欄 ２６：「ＯＫ」キー ２７：貼り付ける画像 ３０：キャラクタ登録キー ３１：キャラクタ設定領域 １０１：画像データ格納部 １０２：ユーザインターフェース部 １０３：画像データ加工処理部 １０４：キャラクタデータ及び背景ステージデータ格納
部 １０５：曲情報データ格納部 １０６：キャラクタ・ステージ選択部 １０７：カラオケデータ格納部 １０８：マイク入力レベル検出部 １０９：属性情報抽出部 １１０：演算処理部 ２１１：全データ表示キー ２１２：画像表示部分 ２７１：画像欄 ２７２：キャンセルキー

───────────────────────────────────────────────────── フロントページの続き (72)発明者 長山 博功 東京都大田区大森西４丁目15番５号 パイ オニア株式会社大森工場内 (72)発明者 高梨 真琴 東京都大田区大森西４丁目15番５号 パイ オニア株式会社大森工場内 Ｆターム(参考） 5D108 BE06 BF03 BF20

Claims (12)

【特許請求の範囲】
1. 【請求項１】 カラオケの再生に必要なカラオケデータ
   に従って動画を再生する動画再生手段と、 前記カラオケデータに含まれる時系列的に変化する属性
   データに従ってカラオケの再生時に前記動画再生手段を
   制御することにより、前記動画再生手段により再生され
   る動画を逐次変化させる動画制御手段と、を備えること
   を特徴とするカラオケ装置。
2. 【請求項２】 前記動画制御手段は前記属性データとし
   てのテロップデータに基づいて、前記動画再生手段によ
   る動画を前記テロップデータが示す歌詞の発音に応じて
   変化させることを特徴とする請求項１に記載のカラオケ
   装置。
3. 【請求項３】 前記動画制御手段は前記属性データとし
   ての文字データに含まれる母音に基づいて、前記動画再
   生手段による動画を前記母音に応じて変化させることを
   特徴とする請求項１に記載のカラオケ装置。
4. 【請求項４】 前記動画制御手段は前記属性データとし
   ての文字データに含まれる母音に基づいて、前記動画再
   生手段による動画中のキャラクタの口の動作を前記母音
   に応じて変化させることを特徴とする請求項１に記載の
   カラオケ装置。
5. 【請求項５】 前記動画制御手段は前記属性データとし
   ての拍子データに基づいて、前記動画再生手段による動
   画を前記拍子データが示す演奏曲の拍子に応じて変化さ
   せることを特徴とする請求項１に記載のカラオケ装置。
6. 【請求項６】 前記動画制御手段は前記属性データとし
   ての展開データに基づいて、前記動画再生手段による動
   画を前記展開データが示す演奏曲の展開に応じて変化さ
   せることを特徴とする請求項１に記載のカラオケ装置。
7. 【請求項７】 カラオケの再生に必要なカラオケデータ
   に従って動画を再生する動画再生手段と、 カラオケ再生時にマイクを介して逐次入力される入力デ
   ータに従って前記動画再生手段を制御することにより、
   前記動画再生手段により再生される動画を逐次変化させ
   る動画制御手段と、を備えることを特徴とするカラオケ
   装置。
8. 【請求項８】 前記動画制御手段は、前記入力データと
   しての音量情報に基づいて、前記動画再生手段により再
   生される動画中のキャラクタの口の動作を前記音量情報
   に応じて変化させることを特徴とする請求項７に記載の
   カラオケ装置。
9. 【請求項９】 あらかじめ作成された画像を貼り付けて
   前記動画を作成する画像作成手段を備え、 前記動画制御手段は、前記貼り付けられた画像を逐次変
   化させることを特徴とする請求項１乃至８のいずれかに
   記載のカラオケ装置。
10. 【請求項１０】 前記動画の一部として、あらかじめ用
    意された複数の画像のうち一つを選択する画像選択手段
    を備えたことを特徴とする請求項１乃至９のいずれかに
    記載のカラオケ装置。
11. 【請求項１１】 コンピュータに、カラオケの再生に必
    要なカラオケデータに従って動画を再生する動画再生機
    能と、 前記カラオケデータに含まれる時系列的に変化する属性
    データに従ってカラオケの再生時に前記動画再生機能を
    制御することにより、前記動画再生機能により再生され
    る動画を逐次変化させる動画制御機能を、実現させるた
    めのプログラム。
12. 【請求項１２】 コンピュータに、カラオケの再生に必
    要なカラオケデータに従って動画を再生する動画再生機
    能と、 カラオケ再生時にマイクを介して逐次入力される入力デ
    ータに従って前記動画再生機能を制御することにより、
    前記動画再生機能により再生される動画を逐次変化させ
    る動画制御機能を、実現させるためのプログラム。