JP6389128B2

JP6389128B2 - カラオケ装置、及び、カラオケ用表示制御プログラム

Info

Publication number: JP6389128B2
Application number: JP2015007302A
Authority: JP
Inventors: 智美披川; 範彦村瀬
Original assignee: Xing Inc
Current assignee: Xing Inc
Priority date: 2015-01-17
Filing date: 2015-01-17
Publication date: 2018-09-12
Anticipated expiration: 2035-01-17
Also published as: JP2016133576A

Description

本発明は、入力された音信号を評価する機能を有するカラオケ装置に関する。詳細には、入力された音信号の評価結果に適する効果画像を表示部に表示するカラオケ装置に関する。

従来、利用者の操作を評価し、評価を表す画像を表示する装置が種々提案されている。たとえば、特許文献１に記載のゲームシステムは、入力タイミングと評価タイミングとに基づいてプレーヤーの操作を評価し、評価結果に基づいて、エフェクト画像を標的キャラクタに関連付けて表示する。表示するエフェクト画像は、ＧＯＯＤ又はＢＡＤの文字であり、評価結果が良い場合はＧＯＯＤが表示され、悪い場合にはＢＡＤが評価結果として表示される。

特開2010−88688号公報

一般に、カラオケ装置は、入力された音信号を評価する機能を有する。特許文献１に開示された評価結果の表示技術を、カラオケ装置に採用した場合を考える。この場合、音信号の評価結果に基づいて、評価結果が良い場合にはＧＯＯＤを、悪い場合にはＢＡＤをエフェクト画像として背景画像の上に表示させることが考えられる。

しかし、特許文献１に開示された技術を採用したカラオケ装置では、ＧＯＯＤ及びＢＡＤの２種類の文字のいずれかが、評価結果のエフェクト画像として表示される構成であることから、評価結果の表示内容が単調となる。このため、歌唱者は、歌唱中における自身の評価結果の変化に注意を向けなくなり、歌唱の楽しみが薄れる結果となる。特に、歌唱者が低年齢の子供である場合には、単なる文字の評価結果を表示するのみでは、歌唱途中で、歌唱に飽きてしまうおそれがある。

そこで、本発明は、上記の問題に鑑みて成されたものであり、その目的は、表示部に複数表示された評価関連画像のそれぞれに設定された複数の効果画像の中から、利用者の評価結果に関連する効果画像を決定し表示部に表示させることにより、自身の評価結果の変化について利用者に注意を喚起させるカラオケ装置を提供する。

上記の目的を達成するために、請求項１に記載の発明に係るカラオケ装置は、楽曲を再生する再生手段と、前記再生手段により再生される楽曲を表す楽曲信号と、入力手段により入力される音信号とを比較し、該音信号の評価点数を算出する評価算出手段と、前記評価算出手段により算出された評価点数が第１条件を満たしたか否かを判断する評価判断手段と、評価関連画像データを複数記憶する評価関連画像記憶手段と、前記評価関連画像記憶手段から、少なくとも１つの評価関連画像データを読み出し、読み出された評価関連画像データに基づいて評価関連画像を表示部に表示させる表示制御手段と、前記評価関連画像データに設定される効果画像データであって、第１種類の効果画像データと、第２種類の効果画像データとを複数記憶する効果画像記憶手段と、前記表示部に表示された前記評価関連画像を表す評価関連画像データに、前記第１種類の効果画像データ、または前記第２種類の効果画像データが設定され、かつ、該効果画像データが設定された前記評価関連画像データに基づく評価関連画像が前記表示部に複数表示されているか否かを判断する効果画像判断手段と、前記効果画像データが設定された前記評価関連画像データが表す前記評価関連画像が複数表示されていると前記効果画像判断手段により判断された場合、複数の前記評価関連画像データにそれぞれ設定された複数の前記効果画像データの中から第２条件に基づいて、１つの効果画像データを決定する効果画像決定手段と、を備え、前記第1条件を満たすと前記評価判断手段により判断された場合、かつ、前記第１種類の効果画像データが設定された前記評価関連画像データが表す前記評価関連画像が複数表示されていると前記効果画像判断手段により判断された場合、前記第２条件に基づいて前記効果画像決定手段が１つの前記第１種類の効果画像データを決定し、前記第１条件を満たさないと前記評価判断手段により判断された場合、かつ、前記第２種類の効果画像データが設定された前記評価関連画像データが表す前記評価関連画像が複数表示されていると前記効果画像判断手段により判断された場合、前記第２条件に基づいて前記効果画像決定手段が１つの前記第２種類の効果画像データを決定し、前記表示制御手段は、前記決定された効果画像データを前記効果画像記憶手段から読み出し、読み出された効果画像データに基づいて効果画像を前記表示部に表示させる。

請求項２に記載の発明に係るカラオケ装置において、前記表示制御手段は、前記評価関連画像記憶手段から楽曲演奏の所定区間毎に評価関連画像データを読み出し、読み出された評価関連画像データに基づいて少なくとも１つの評価関連画像を前記表示部に表示させ、前記表示部に表示されている評価関連画像が所定数に達した時に、前記表示部に表示されている所定数の評価関連画像の中から少なくとも1つの評価関連画像の表示を終了させる。

請求項３に記載の発明に係るカラオケ装置において、前記表示制御手段は、特定の効果画像が前記表示部に表示されてから所定時間が経過した時に、前記表示部に表示された特定の効果画像と、その特定の効果画像を表す効果画像データが設定された評価関連画像データに基づいて表示された特定の評価関連画像との表示を終了させる。

請求項４に記載の発明に係るカラオケ装置において、前記評価算出手段は、前記楽曲信号と前記音信号とを比較し、該音信号の評価点数を楽曲演奏の所定区間毎に算出し、前記表示制御手段は、前記特定の効果画像が前記表示部に表示されてから前記楽曲演奏の所定区間に相当する時間が前記所定時間として経過した時に、前記特定の効果画像と前記特定の評価関連画像との表示を終了させる。

請求項５に記載の発明に係るカラオケ装置において、前記表示制御手段は、前記表示部に表示されている評価関連画像が所定数に達した時に、前記表示部に表示されている所定数の評価関連画像の中で最初に表示された評価関連画像の表示を終了させる。

請求項６に記載の発明に係るカラオケ装置において、前記評価算出手段は、前記楽曲信号と前記音信号とを比較し、該音信号の評価点数を楽曲演奏の所定区間毎に算出し、前記評価判断手段は、前記評価算出手段が現在の所定区間で算出した現在の評価点数と前回の所定区間で算出した前回の評価点数とを比較し、現在の評価点数が前回の評価点数以上であることを前記第１条件として判断する。

請求項７に記載の発明に係るカラオケ装置において、前記効果画像記憶手段は、前記評価算出手段が算出した現在の評価点数が前回の評価点数以上である良い評価結果に関連する前記第１種類の効果画像データと、前記評価算出手段が算出した現在の評価点数が前回の評価点数未満である悪い評価結果に関連する前記第２種類の効果画像データとを複数記憶する。

請求項８に記載の発明に係るカラオケ装置において、前記評価判断手段は、前記評価算出手段により算出された評価点数が予め定められた閾値の点数以上であることを前記第１条件として判断する。

請求項９に記載の発明に係るカラオケ装置において、前記効果画像記憶手段は、前記評価算出手段が算出した評価点数が予め定められた閾値の点数以上である良い評価結果に関連する前記第１種類の効果画像データと、前記評価算出手段が算出した評価点数が予め定められた閾値の点数未満である悪い評価結果に関連する前記第２種類の効果画像データとを複数記憶する。

請求項１０に記載の発明に係るカラオケ装置において、前記効果画像決定手段は、前記効果画像データに設定された複数種類の利用者関連データの中の少なくとも１つのデータが示す内容を前記第２条件として判断する。

請求項１１に記載の発明に係るカラオケ装置において、前記効果画像は、前記評価関連画像と観念上関連する形象を含む画像であり、前記効果画像記憶手段は、観念上異なる複数種類の効果画像を表す複数の前記効果画像データを記憶する。

請求項１２に記載の本発明に係るプログラムは、楽曲を再生する再生手段と、前記再生手段により再生される楽曲を表す楽曲信号と、入力手段により入力される音信号とを比較し、該音信号の評価点数を算出する評価算出手段と、評価関連画像データを複数記憶する評価関連画像記憶手段と、前記評価関連画像データに設定される効果画像データであって、第１種類の効果画像データと、第２種類の効果画像データとを複数記憶する効果画像記憶手段と、を備えるカラオケ装置において実行されるプログラムであって、前記評価算出手段により算出された評価点数が第１条件を満たしているか否かを判断する評価判断ステップと、前記評価関連画像記憶手段から、少なくとも１つの評価関連画像データを読み出し、読み出された評価関連画像データに基づいて評価関連画像を表示部に表示させる表示制御ステップと、前記表示部に表示された前記評価関連画像を表す評価関連画像データに、前記第１種類の効果画像データ、または前記第２種類の効果画像データが設定され、かつ、該効果画像データが設定された前記評価関連画像データに基づく評価関連画像が前記表示部に複数表示されているか否かを判断する効果画像判断ステップと、前記効果画像データが設定された前記評価関連画像データが表す前記評価関連画像が複数表示されていると前記効果画像判断ステップにより判断された場合、複数の前記評価関連画像データにそれぞれ設定された複数の前記効果画像データの中から第２条件に基づいて、１つの効果画像データを決定する効果画像決定ステップと、をカラオケ装置のコンピュータに実行させ、前記第1条件を満たすと前記評価判断ステップにより判断された場合、かつ、前記第１種類の効果画像データが設定された前記評価関連画像データが表す前記評価関連画像が複数表示されていると前記効果画像判断ステップにより判断された場合、前記第２条件に基づいて前記効果画像決定ステップが１つの前記第１種類の効果画像データを決定し、前記第１条件を満たさないと前記評価判断ステップにより判断された場合、かつ、前記第２種類の効果画像データが設定された前記評価関連画像データが表す前記評価関連画像が複数表示されていると前記効果画像判断ステップにより判断された場合、前記第２条件に基づいて前記効果画像決定ステップが１つの前記第２種類の効果画像データを決定し、前記表示制御ステップは、前記決定された効果画像データを前記効果画像記憶手段から読み出し、読み出された効果画像データに基づいて効果画像を前記表示部に表示させる。

請求項１に記載の発明において、効果画像判断手段は、表示部に表示された評価関連画像を表す評価関連画像データに、第１種類の効果画像データ、または第２種類の効果画像データが設定され、かつ、該効果画像データが設定された評価関連画像データに基づく評価関連画像が表示部に複数表示されているか否かを判断する。効果画像決定手段は、効果画像データが設定された評価関連画像データが表す評価関連画像が複数表示されていると効果画像判断手段により判断された場合、複数の評価関連画像データにそれぞれ設定された複数の効果画像データの中から第２条件に基づいて、１つの効果画像データを決定する。効果画像決定手段は、第1条件を満たすと評価判断手段により判断された場合、かつ、第１種類の効果画像データが設定された評価関連画像データが表す評価関連画像が複数表示されていると効果画像判断手段により判断された場合、第２条件に基づいて１つの第１種類の効果画像データを決定する。効果画像決定手段は、第１条件を満たさないと評価判断手段により判断された場合、かつ、第２種類の効果画像データが設定された評価関連画像データが表す評価関連画像が複数表示されていると効果画像判断手段により判断された場合、第２条件に基づいて１つの第２種類の効果画像データを決定する。表示制御手段は、決定された効果画像データに基づいて効果画像を表示部に表示させる。この結果、同一の効果画像が表示部に表示されることに比べ、複数の種類の効果画像の中から効果画像が決定されて表示部に表示されることにより、表示される効果画像が変化するため、表示内容が単調にならず、利用者は自身の評価結果の変化に注意喚起することができる。

請求項２に記載の発明において、表示制御手段は、楽曲演奏の所定区間毎に評価関連画像データに基づいて少なくとも１つの評価関連画像を表示部に表示させ、表示部に表示されている評価関連画像が所定数に達した時に、表示部に表示されている所定数の評価関連画像の中から少なくとも1つの評価関連画像の表示を終了する。この結果、評価関連画像が所定数に達した場合には、少なくとも１つの評価関連画像の表示が終了し、所定区間毎に新たな評価関連画像が表示されるため、利用者は、表示部の画面において所定区間毎に変化する評価関連画像を視覚的に楽しみながら歌唱することができる。

請求項３に記載の発明において、表示制御手段は、特定の効果画像が表示部に表示されてから所定時間が経過した時に、表示部に表示された特定の効果画像と、その特定の効果画像を表す効果画像データが設定された評価関連画像データに基づいて表示された特定の評価関連画像との表示を終了する。この結果、評価結果に関連する特定の効果画像が表示部に表示されてから所定時間経過する毎に、表示部の画面に表示される効果画像及び評価関連画像が変化するため、利用者自身の評価結果の表示内容が単調にならず、利用者は自身の評価結果の変化に注意喚起することができる。

請求項４に記載の発明において、評価算出手段は、楽曲信号と前記音信号とを比較し、該音信号の評価点数を楽曲演奏の所定区間毎に算出する。表示制御手段は、特定の効果画像が表示部に表示されてから楽曲演奏の所定区間に相当する時間が所定時間として経過した時に、特定の効果画像と特定の評価関連画像との表示を終了する。この結果、評価結果に関連する効果画像とは異なる効果画像が所定区間毎に表示されるため、利用者自身の評価結果の表示内容が単調にならず、利用者は自身の評価結果の変化に注意喚起することができる。

請求項５に記載の発明において、表示制御手段は、表示部に表示されている評価関連画像が所定数に達した時に、表示部に表示されている所定数の評価関連画像の中で最初に表示された評価関連画像の表示を終了する。この結果、評価関連画像が所定数に達した場合には、最初に表示された評価関連画像の表示が終了するため、利用者は、所定区間毎に変化する評価関連画像を視覚的に楽しみながら歌唱することができる。

請求項６に記載の発明において、評価算出手段は、楽曲信号と前記音信号とを比較し、該音信号の評価点数を楽曲演奏の所定区間毎に算出する。評価判断手段は、評価算出手段が現在の所定区間で算出した現在の評価点数と前回の所定区間で算出した前回の評価点数とを比較し、現在の評価点数が前回の評価点数以上であることを第１条件として判断する。この結果、現在の評価点数が前回の評価点数以上であるか否かの結果について、利用者は、表示される効果画像を見ることにより容易に認識することができる。

請求項７に記載の発明において、効果画像記憶手段は、評価算出手段が算出した現在の評価点数が前回の評価点数以上である良い評価結果に関連する第１種類の効果画像データと、評価算出手段が算出した現在の評価点数が前回の評価点数未満である悪い評価結果に関連する第２種類の効果画像データとを複数記憶する。この結果、現在の評価点数が前回の評価点数以上であるか否かの結果について、利用者は、表示される効果画像を見ることにより、その効果画像の種類から容易に認識することができる。

請求項８に記載の発明において、評価判断手段は、評価算出手段により算出された評価点数が予め定められた閾値の点数以上であることを第１条件として判断する。この結果、表示部に表示される効果画像により予め定められた閾値の点数以上であるか否かの結果について、利用者は、表示される効果画像を見ることにより、容易に認識することができる。

請求項９に記載の発明において、効果画像記憶手段は、評価算出手段が算出した評価点数が予め定められた閾値の点数以上である良い評価結果に関連する第１種類の効果画像データと、評価算出手段が算出した評価点数が予め定められた閾値の点数未満である悪い評価結果に関連する第２種類の効果画像データとを複数記憶する。この結果、表示部に表示される効果画像により、予め定められた閾値の点数以上であるか否かの結果について、利用者は、表示される効果画像を見ることにより、その効果画像の種類から容易に認識することができる。

請求項１０に記載の発明において、効果画像決定手段は、効果画像データに設定される複数種類の利用者関連データの中の少なくとも１つのデータが示す内容を第２条件として判断する。この結果、利用者に関連した効果画像が表示部に表示されるため、利用者は、効果画像の内容を容易に理解することができ、その効果画像を視覚的に楽しみながら歌唱することができる。

請求項１１に記載の発明において、効果画像は、評価関連画像と観念上関連する形象を含む画像であり、効果画像記憶手段は、観念上異なる複数種類の効果画像を表す複数の効果画像データを記憶する。この結果、評価関連画像を見て歌唱している利用者は、その評価関連画像と観念上関連する形象である効果画像が表示されることにより、評価関連画像と関連させて効果画像を容易に認識することができる。

請求項１２に記載の発明において、評価判断ステップは、評価算出手段により算出された評価点数が第１条件を満たしているか否かを判断する。表示制御ステップは、評価関連画像記憶手段から、少なくとも１つの評価関連画像データを読み出し、読み出された評価関連画像データに基づいて評価関連画像を表示部に表示させる。効果画像判断ステップは、表示部に表示された評価関連画像を表す評価関連画像データに、第１種類の効果画像データ、または第２種類の効果画像データが設定され、かつ、該効果画像データが設定された評価関連画像データに基づく評価関連画像が前記表示部に複数表示されているか否かを判断する。効果画像決定ステップは、効果画像データが設定された評価関連画像データが表す評価関連画像が複数表示されていると効果画像判断ステップにより判断された場合、複数の評価関連画像データにそれぞれ設定された複数の効果画像データの中から第２条件に基づいて、１つの効果画像データを決定する。効果画像決定ステップは、第1条件を満たすと評価判断ステップにより判断された場合、かつ、第１種類の効果画像データが設定された評価関連画像データが表す評価関連画像が複数表示されていると効果画像判断ステップにより判断された場合、第２条件に基づいて１つの第１種類の効果画像データを決定する。効果画像決定ステップは、第１条件を満たさないと評価判断ステップにより判断された場合、かつ、第２種類の効果画像データが設定された評価関連画像データが表す評価関連画像が複数表示されていると効果画像判断ステップにより判断された場合、第２条件に基づいて１つの第２種類の効果画像データを決定する。表示制御ステップは、決定された効果画像データを効果画像記憶手段から読み出し、読み出された効果画像データに基づいて効果画像を表示部に表示する。この結果、同一の効果画像が表示部に表示されることに比べ、複数の種類の効果画像の中から効果画像が決定されて表示部に表示されることにより、表示される効果画像が変化するため、表示内容が単調にならず、利用者は自身の評価結果の変化に注意喚起することができる。

本発明の実施形態に係るカラオケ装置２を備えるカラオケシステム１の構成を示すブロック図である。カラオケ装置２における画像データベースの内容を示す図である。カラオケ装置２における楽曲演奏開始時のモニタ３の表示画面を示す図である。効果画像３２０が設定されない評価関連画像３１０をモニタ３に表示した様子を示す図である。効果画像３２０が設定されない評価関連画像３１０Ａと、効果画像３２０が設定される評価関連画像３１０Ｂとをモニタ３に表示した様子を示す図である。評価結果が良いことに関連する効果画像３２０が評価関連画像３１０に設定される場合、評価結果が良いことに関連する効果画像３２０Ｂをモニタ３に表示した様子を示す図である。評価関連画像３１０Ｂと、評価結果が良いことに関連する効果画像３２０Ｂとの表示が終了したモニタ３の様子を示す図である。評価結果が良いことに関連する効果画像３２０が設定される複数の評価関連画像３１０をモニタ３に表示した様子を示す図である。評価結果が良いことに関連する効果画像３２０が評価関連画像３１０に設定される場合、評価結果が良いことに関連する効果画像３２０Ｃをモニタ３に表示した様子を示す図である。評価関連画像３１０Ｃと、評価結果が良いことに関連する効果画像３２０Ｃとの表示が終了したモニタ３の様子を示す図である。評価結果が悪いことに関連する効果画像３２０が設定されない評価関連画像３１０をモニタ３に表示した様子を示す図である。評価結果が悪いことに関連する効果画像３２０が設定される評価関連画像３１０Ｆをモニタ３に表示した様子を示す図である。評価結果が悪いことに関連する効果画像３２０が評価関連画像３１０に設定される場合、評価結果が悪いことに関連する効果画像３２０Ｆをモニタ３に表示した様子を示す図である。評価関連画像３１０Ｆ、評価結果が悪いことに関連する効果画像３２０Ｆ、及び、表示されてから所定時間以上経過した評価関連画像３１０Ａの表示が終了したモニタ３の様子を示す図である。評価結果が悪いことに関連する効果画像３２０が設定される複数の評価関連画像３１０をモニタ３に表示した様子を示す図である。評価結果が悪いことに関連する効果画像３２０が評価関連画像３１０に設定される場合、評価結果が悪いことに関連する効果画像３２０Ｇをモニタ３に表示した様子を示す図である。評価関連画像３１０Ｇと、評価結果が悪いことに関連する効果画像３２０Ｇとの表示が終了したモニタ３の様子を示す図である。カラオケ装置２における楽曲演奏処理を示すフローチャートである。カラオケ装置２における効果画像決定処理を示すフローチャートである。カラオケ装置２における、評価結果が良かった場合の効果画像決定処理を示すフローチャートである。カラオケ装置２における、評価結果が悪かった場合の効果画像決定処理を示すフローチャートである。カラオケ装置２における、モニタ３に表示されている評価関連画像及び効果画像効果画像の表示を終了するフローチャートである。

＜実施形態の電気的構成＞
本発明の一実施形態に係るカラオケ装置２について図面を参照して説明する。図１は、カラオケシステム１の構成を示すブロック図である。カラオケシステム１は、本実施形態のカラオケ装置２と、モニタ３と、カメラ４と、歌唱用マイク５と、スピーカー６と、リモコン装置７と、カラオケ用ホスト８とを主に備える。

（カラオケ装置２の構成）
カラオケ装置２は、制御部２０と、ハードディスク（以下、ＨＤＤと記す。）２１と、操作処理部２２と、操作部２３と、赤外線通信部２４と、ＬＡＮ通信部２５、メモリ２６と、ビデオＲＡＭ２７と、画像再生部２８と、画像制御部２９と、音響制御部３０とを主に備える。

制御部２０は、ＣＰＵとＲＡＭとＲＯＭとを備えており、ＲＡＭの一時記憶機能を利用しつつＲＯＭに予め記憶された所定のプログラムに基づいてデータを処理するコンピュータである。制御部２０は、カラオケ装置２における各種制御を実行する。制御部２０は、ＨＤＤ２１等の記憶手段に記憶したプログラムを実行することで、音響制御部３０及び画像再生部２８等の周辺構成要素に対して、各種処理を指令することが可能である。制御部２０は、楽曲演奏の処理を実行するメインＣＰＵと、採点アプリケーションの処理を実行するサブＣＰＵとを備える。メインの処理は、カラオケ装置全体を制御する処理である。メインＣＰＵと、サブＣＰＵとは、それぞれデータのやり取りを行っている。

ＨＤＤ２１は、楽曲データ記憶領域と、採点アプリケーション記憶領域とを備える。楽曲データ記憶領域は、楽曲データ１００を記憶する。

楽曲データ１００は、メタデータと実データとを含む。メタデータは、楽曲データに関する各種情報であり、楽曲データを識別するための楽曲識別データ、曲名、歌手名、作詞者名、作曲者名、背景画像指定データ、及び区間データを有する。背景画像指定データは、演奏データの演奏時に、モニタ３の画面上に表示される画像を指定するためのデータである。区間データは、楽曲を、前奏、Ａメロディ、Ｂメロディ、サビ、間奏、Ｃメロディ、及び後奏といった複数の区間に分割するデータである。実データは、演奏などの各種処理を実行するデータであり、演奏データ、歌詞テロップデータ、ガイドメロディデータ、及びハーモニーパートデータを有する。演奏データは、ＭＩＤＩ規格に基づいて電子楽器用の制御データ、または、実際の演奏を録音した圧縮音声データ等で構成され、カラオケの伴奏音を演奏するためのデータである。歌詞テロップデータは、歌唱補助のため、演奏データに同期して表示されるデータである。ガイドメロディデータは、楽曲の歌唱旋律を表すデータであり、利用者が歌唱すべき音高のお手本となる。ハーモニーパートデータは、ガイドメロディデータの音高データに対して、旋律がマッチする音高関係で予め作成されたデータである。ハーモニーパートデータは、和音を参照して作成される。例えば、和音「ソ・シ・レ」を参照すると、ガイドメロディデータの音高データが「シ」の場合、対応するハーモニーパートデータの音高は「ソ」または「レ」となる。

採点アプリケーション記憶領域は、採点アプリケーション１１０を記憶する。採点アプリケーション１１０は、歌唱評価プログラムと、画像データベースとを含む。歌唱評価プログラムは、歌唱を評価する歌唱評価処理を制御部２０に実行させ、後述の歌唱用マイク５から入力される利用者の歌声を所定区間毎に評価するプログラムである。

画像データベースは、図２に示す内容であり、画像ファイル名、評価関連画像データ、効果画像ファイル名、効果画像データ、評価データ、及び利用者関連データを含む。利用者関連データとしては、人気ランキング、年齢別人気ランキング、利用時間帯、及び歌唱評価点数が使用される。利用者関連データは、利用者の嗜好、利用者がカラオケ装置を利用する時間、及び利用者の歌唱評価に基づいて設定される。利用者の嗜好については、年齢毎に異なることが想定されるため、利用者関連データは、利用者の年齢別の嗜好に基づいて設定される。

画像ファイル名は、評価関連画像を識別するファイル名である。画像ファイル名は、図２の画像データベースに含まれ、太陽．ｊｐｇ、ハート．ｊｐｇ、八分音符．ｊｐｇ、花．ｊｐｇ、星．ｊｐｇ、風船．ｊｐｇ、黒ネコ．ｊｐｇ、雷．ｊｐｇ、カラス．ｊｐｇ、及び雨雲．ｊｐｇなどである。

評価関連画像データは、評価関連画像を表すデータである。評価関連画像は、利用者の身の回りの物体の形象など、各種の形象を表す。評価関連画像データは、図２の画像データベースに含まれ、「太陽」、「ハート」、「八分音符」、「花」、「星」、「風船」、「黒ネコ」、「雷」、「カラス」、及び「雨雲」などである。評価関連画像データの圧縮形式は、例えばＪＰＥＧ方式である。画像は、動画及び静止画を含む。

効果画像ファイル名は、効果画像を識別するファイル名である。効果画像ファイル名は、図２の画像データベースに含まれ、連続ハート．ｊｐｇ、音符．ｊｐｇ、花びら．ｊｐｇ、流れ星．ｊｐｇ、風船束．ｊｐｇ、爪．ｊｐｇ、稲妻．ｊｐｇ、及びしずく．ｊｐｇなどである。

効果画像データは、効果画像を表すデータである。効果画像は、評価関連画像と観念上関連する形象を含む画像である。すなわち、効果画像は評価関連画像から連想される形象を含む画像である。観念上関連について、図２の画像データベースに含まれる評価関連画像データと効果画像データとを例に説明する。気持ちを表す「ハート」の評価関連画像データは、同じ気持ちを表すハートを複数用いた「連続ハート」の効果画像データと、気持ちを表すハートで関連する。また、黒ネコの評価関連画像データは、ネコの爪で引っかいた線を表す「ネコの爪で引っかいた３本線」の効果画像データと、動物であるネコで関連する。雨を降らせる「雨雲」の評価関連画像データは、雨雲によって降った雨のしずくを表す「雨のしずく」の効果画像データと、天気を表す雨で関連する。

評価データは、歌唱評価処理において、所定区間毎に評価された評価結果を示すデータである。図２の画像データベースに含まれる評価データは、評価結果が良いことを示す「プラス」と、評価結果が悪いことを示す「マイナス」とを含む。また、第１種類の効果画像データは、「プラス」の評価データが設定される効果画像データである。第２種類の効果画像データは、「マイナス」の評価データが設定される効果画像データである。具体的には、現在の区間の評価結果が前回の区間の評価結果以上の場合には、評価データは「プラス」である。現在の区間の評価結果が前回の区間の評価結果未満の場合は、評価データは「マイナス」である。また、評価データとしては、「プラス」は０、「マイナス」は１の数字にて表される。

図２の画像データベースに含まれる人気ランキングは、レベル１、レベル２、レベル３、レベル４、及びレベル５などのレベルデータを含む。人気ランキングのレベル１〜レベル５は、効果画像データにそれぞれ設定される。人気ランキングのレベルは、評価関連画像の利用者の人気に基づいて設定される。例えば、評価関連画像の利用者による人気が低い画像には、低いレベルが設定される。評価関連画像の利用者による人気が高い画像には、高いレベルが設定される。

図２の画像データベースに含まれる年齢別人気ランキングは、レベル１、レベル２、レベル３、レベル４、及びレベル５などのレベルデータを含む。年齢別人気ランキングのレベル１〜レベル５は、効果画像データにそれぞれ設定される。人気ランキングのレベルは、利用者の年齢毎の評価関連画像の人気に基づいて設定される。図２の画像データベースに含まれる年齢別人気ランキングにおいて、「年齢別人気ランキング（０歳〜６歳）」のレベルデータは、０歳から６歳の利用者による人気に基づいて設定される。「年齢別人気ランキング（７歳〜１２歳）」のレベルデータは、７歳から１２歳の利用者による人気に基づいて設定される。「年齢別人気ランキング（１３歳〜）」のレベルデータは、１３歳以上の利用者による人気に基づいて設定される。レベルデータは、評価関連画像の利用者による人気が低い画像には、低いレベルが設定される。評価関連画像の利用者による人気が高い画像には、高いレベルが設定される。

図２の画像データベースに含まれる利用時間帯は、朝、朝と昼、昼、夜、及び深夜などの時間帯データを含む。利用時間帯は、効果画像データにそれぞれ設定される。図２の画像データベースに含まれる利用時間帯としては、朝は６時から１２時まで、昼は１３時から１８時まで、夜は１９時から２２時まで、及び深夜は２３時から５時までの時間帯が設定される。

図２の画像データベースに含まれる評価点数は、Ａ、Ｂ、及びＣなどの評価点数をランク付けしたランクデータを含む。ランクデータは、効果画像データにそれぞれ設定される。図２の画像データベース含まれるランクデータとしては、Ａは０点から５０点まで、Ｂは５１点から７０点まで、及びＣは７１点から１００点までの点数が設定される。

操作処理部２２は、利用者が操作部２３を操作した時に、その操作に応じた操作入力データを発生して制御部２０に供給する。

操作部２３は、カラオケ装置２の利用者が歌いたい楽曲を選択する選択操作部と、楽曲の演奏出力に係る音程を調整する音程調整操作部と、演奏と歌との音量バランスを調整するバランス調整操作部と、エコー、音量、及びトーン等の各種調整を行う調整操作部とを含む入力装置である。操作部２３は、タッチパネル、操作ボタン、または、つまみなどを含む。

赤外線通信部２４は、カラオケ装置２とリモコン装置７等の入力装置との間の無線通信を行う。赤外線通信部２４は、リモコン装置７から送信されるリモコン信号を受信するリモコン受信部として機能する。

ＬＡＮ通信部２５は、ＬＡＮ２００と接続する。ＬＡＮ通信部２５は、ＬＡＮ２００を介してカラオケ用ホスト８と、またはリモコン装置７とデータの送受信を実行することが可能である。

メモリ２６は、ＨＤＤ２１に記憶する各種プログラムを実行するにあたって必要となるデータを一時記憶する。

ビデオＲＡＭ２７は、画像再生部２８が画像を再生する際に参照する画像データを一時的に蓄積する。

画像再生部２８は、制御部２０から入力された画像の再生を指示する信号と、ビデオＲＡＭ２７に蓄積された画像データとに基づいて画像を再生する。

画像制御部２９は、制御部２０から入力された画像の表示を指示する信号に従って、モニタ３に歌詞テロップ、評価関連画像、及び効果画像などの画像を表示させる。画像制御部２９は、カメラ４から送信される画像データに基づいて、モニタ３に所定の画像を表示させる。この画像制御部２９は、モニタ３と、カメラ４とに接続される。

音響制御部３０は、制御部２０から入力された音響の再生を指示する信号に従って、ＨＤＤ２１が記憶する楽曲データ１００から、１つの演奏データを読み出す。音響制御部３０は、読み出した演奏データに基づいて音響信号を生成し、スピーカー６に供給する。音響制御部３０は、後述する歌唱用マイク５から受信したアナログ音信号をデジタル音信号に変換する。音響制御部３０は、後述する採点アプリケーション１１０による評価処理のため、制御部２０にデジタル音信号を送信する。

（モニタ３の構成）
モニタ３は、画像制御部２９から入力される画像の再生を指示する信号に従って図９に示す画像を表示する。図９はモニタ３が表示する画面を示す。モニタ３が表示する画面は、カメラ４により撮影された画像３００、評価関連画像３１０、効果画像３２０、及び歌詞テロップ３３０を含む。

撮影された画像３００は、図９に示す画面の中央に表示される。本実施形態においては、撮影された画像は利用者の上半身が撮影された画像である。

図９に示す画面において、評価関連画像３１０として、太陽の評価関連画像３１０Ａ、ハートの評価関連画像３１０Ｃ、及び花の評価関連画像３１０Ｄが表示される。評価関連画像３１０は、評価関連画像全体の総称を示す。採点アプリケーション１１０に含まれる複数の評価関連画像データからランダムに１つの評価関連画像データが読み出される。ランダムな読出し技術としては、例えば、評価関連画像データのそれぞれに１から順番に番号を付し、乱数表を用いた演算結果による乱数に応じた番号の評価関連画像データを読み出す方法等が使用可能である。各評価関連画像は、重ならないようにモニタ３上に表示される。

効果画像３２０は、利用者の歌唱評価結果に関連する画像である。効果画像３２０は、効果画像全体の総称を示す。採点アプリケーション１１０に含まれる複数の効果画像データから、制御部２０により決定された１つの効果画像データが読み出される。図９において、効果画像３２０としては、ハートの評価関連画像３１０Ｃに観念が関連する連続ハートの効果画像３２０Ｃが表示される。効果画像３２０Ｃは、３つの評価関連画像の周辺に多数表示され、さらに撮影された画像３００の周辺にも多数表示され、モニタ３の画面全体に表示される。

歌詞テロップ３３０は、演奏中の楽曲の歌詞を表す画像である。歌詞テロップ３３０は、楽曲データ１００に含まれる歌詞テロップデータに従って表示される。歌詞テロップ３３０は図５が示す画面の下方に表示される。

（カメラ４の構成）
カメラ４は、カラオケ装置２に接続される。カメラ４が撮影した歌唱する利用者の画像、又は楽器を演奏する利用者の画像を表す画像データは、カラオケ装置２の画像制御部２９に出力される。

（マイク５及びスピーカー６の構成）
歌唱用マイク５は、利用者の歌声を受信し、カラオケ装置２の音響制御部３０にアナログ音信号を出力する。スピーカー６は、音響制御部３０がミキシングした音楽信号を受け取り、放音する。

（リモコン装置７の構成）
リモコン装置７は、タッチパネル表示画面を備え、利用者に対して各種データを表示することと、利用者による各種操作を受け付けることとが可能である。リモコン装置７は、ＬＡＮ２００上に設置されたアクセスポイント２１０を介してカラオケ装置２と無線通信することが可能である。また、リモコン装置７とカラオケ装置２とは赤外線通信部２４などを利用した近距離通信を行うことも可能である。カラオケ装置２は、歌唱者に対して歌唱の評価結果をモニタ３に表示する機能を有する。カラオケ装置２による表示出力先は、モニタ３ではなく、リモコン装置７とすることとしてもよい。

（カラオケ用ホスト８の構成）
カラオケ用ホスト８は、利用者に各種サービスを提供するためにインターネットを介してカラオケ装置２と接続され、記憶部３１を備える。記憶部３１は、楽曲データ及び利用者個人データなど、各種サービスに必要なデータを記憶する。カラオケ用ホスト８は、ルータ２２０を介して、カラオケ装置２、又はリモコン装置７と、各種データの送受信を行うように構成される。

利用者個人データは、カラオケ装置２の利用者を対象とするソーシャルネットワークサービス（ＳｏｃｉａｌＮｅｔｗｏｒｋＳｅｒｖｉｃｅ）に関連する各種情報を含む。ソーシャルネットワークサービスとは、例えば、予め会員登録された会員相互間に限定して情報の閲覧等のサービスを提供する会員制のコミュニティ型のウェブサイトをいう。なお、以下の説明において、ソーシャルネットワークサービスをＳＮＳと略称する。利用者個人データは、利用者毎に、カラオケ演奏に関するデータと、その利用者の識別データ（利用者ＩＤ）とを関連付けて含む。カラオケ演奏に関するデータとしては、利用者が過去に利用したカラオケ装置２に対応する店舗（カラオケ装置２が設置された店舗）の来店履歴に関するデータ、利用者がカラオケ装置２によるカラオケ演奏において十八番曲として登録した演奏曲（簡易な操作により選曲入力を行い得るように設定される演奏曲）に関するデータ、利用者が過去にカラオケ装置２によるカラオケ演奏において選曲した選曲履歴（カラオケ装置２において過去に選曲された演奏曲の履歴）に関するデータ、及び利用者が過去にカラオケ装置２を使用して行ったカラオケ演奏の評価結果に関するデータを含む。来店履歴は、利用者が過去に利用（来店）した店舗の店舗ＩＤを含むデータであってもよいし、利用者が過去に利用（使用）したカラオケ装置２の装置ＩＤを含むデータであってもよい。

利用者個人データは、利用者の名前（ニックネーム）、生年月日、実際の年齢、性別、メールアドレス、利用者の住所又は居所に対応する地域、血液型、星座、ＳＮＳへのログイン認証に用いられるパスワード、パスワードを忘れた時のための質問及び解答、アバタ（ネット上において利用者を象徴する人型画像）に関するデータ、及び利用者の歌年齢等のデータと、利用者毎の利用者ＩＤとを関連付けて含む。歌年齢とは、利用者の演奏曲の好みの傾向がどの程度の年代（何歳）に相当するものかを示す仮想的な年齢データであり、対象となる利用者がカラオケ装置２を用いてカラオケ演奏を行う時に選曲された楽曲データに基づいて判断される値である。

＜実施形態の動作及び作用＞
本実施形態の動作及び作用について、図１８を参照して説明する。図１８は、制御部２０のメインＣＰＵにより実行されるメインの処理を示すフローチャートである。図１８に示す各ステップの処理は、制御部２０のメインＣＰＵにより実行される処理である。カラオケ装置２の電源が投入されると、カラオケ装置２の全体を制御するメインの処理が実行される。

（メインの処理）
ステップＳＡ１においては、採点アプリケーションの開始要求が受信されたか否かが判断される。具体的には、利用者が操作部２３、またはリモコン装置７を操作して採点アプリケーションの開始を指示すると、操作処理部２２から採点アプリケーションの開始要求が受信されたか否かが判断される。ステップＳＡ１の判断がＮＯである場合には、ステップＳＡ３以下の処理が実行されるが、ステップＳＡ１の判断がＹＥＳである場合には、ステップＳＡ２が実行される。

ステップＳＡ２において、採点アプリケーションの開始指令が送信される。具体的には、採点アプリケーションの開始要求に従って、採点アプリケーションの開始指令が制御部２０のサブＣＰＵに送信される。その開始指令に従って、サブＣＰＵは、採点アプリケーションを実行する。

ステップＳＡ３においては、選曲番号が受信されたか否かが判断される。具体的には、利用者が操作部２３、またはリモコン装置７を操作して選曲番号を設定すると、操作処理部２２から楽曲予約要求が受信されたか否かが判断される。楽曲予約要求は、設定される選曲番号を含む。ステップＳＡ３の判断がＮＯである場合には、ステップＳＡ５以下の処理が実行されるが、ステップＳＡ３の判断がＹＥＳである場合には、ステップＳＡ４が実行される。

ステップＳＡ４においては、受信された選曲番号が登録される。具体的には、楽曲予約要求に含まれる選曲番号が、ＲＡＭに設けられた予約曲データベースの最後尾に記憶される。

ステップＳＡ５においては、選曲番号が予約曲データベースに登録されるか否かが判断される。具体的には、選曲番号がＲＡＭの予約曲データベースに記憶されるか否かが判断される。ステップＳＡ５の判断がＮＯである場合には、ステップＳＡ１以下の処理が再び実行されるが、ステップＳＡ５の判断がＹＥＳである場合には、ステップＳＡ６が実行される。

ステップＳＡ６においては、予約曲データベースに登録される選曲番号に基づいて楽曲の演奏が指令される。具体的には、予約曲データベースに記憶された最も先頭の選曲番号に従って、ＨＤＤ２１から楽曲データ１００が読み出される。楽曲データ１００はＲＡＭに一時記憶される。ＲＡＭに一時記憶された、楽曲データ１００に含まれる各演奏データが、順次読み出されて、音響制御部３０に送信される。音響制御部３０は、受信された演奏データに基づいて、演奏音をスピーカー６から放音させる。

ステップＳＡ７においては、演奏データに基づく演奏が終了したか否かが判断される。具体的には、楽曲データ１００に含まれるすべての演奏データの読み出しが終了したか否かが判断される。ステップＳＡ７の判断がＮＯである場合には、ステップＳＡ６以下の処理が再び実行されるが、ステップＳＡ７の判断がＹＥＳである場合には、ステップＳＡ１以下の処理が再び実行される。

（採点アプリケーションの処理）
図１９は、制御部２０のサブＣＰＵにより実行される採点アプリケーションの処理を示すフローチャートである。図１９に示す各ステップの処理は、制御部２０のサブＣＰＵにより実行される処理である。サブＣＰＵは、メインＣＰＵから採点アプリケーションの開始指令を受信すると、ＨＤＤ２１の採点アプリケーション記憶領域から採点アプリケーション１１０を読み出す。読み出された採点アプリケーション１１０がＲＡＭに一時記憶される。ＲＡＭに一時記憶された採点アプリケーション１１０のプログラムが実行される。採点アプリケーション１１０の実行により、図１９に示す各ステップが順次実行される。採点アプリケーション１１０は、図１８に示すメインの処理と並行して実行される。

ステップＳＢ１においては、カメラ４により撮影された画像がモニタ３に表示されるように指令される。具体的には、撮影開始指令と、画像表示指令とが画像制御部２９に送信される。画像制御部２９は、撮影開始指令に従ってカメラ４を起動する。カメラ４により撮影された画像を表す撮影画像データが画像制御部２９に送信される。画像制御部２９は、撮影画像データが受信されると、画像表示指令に従って撮影画像をモニタ３に表示させる。

ステップＳＢ２においては、モニタ３に表示させる評価関連画像が読み出される。具体的には、ＲＡＭに記憶されている採点アプリケーション１１０に含まれている複数の評価関連画像データから、１つの評価関連画像データが読み出される。図１９に示す採点アプリケーション１１０が開始されてから、ステップＳＢ１からステップＳＥ３までの最初の一連の処理である１回目のルーチン処理が実行された後、２回目以降のルーチン処理の実行においては、２０秒毎にステップＳＢ２の処理が実行される。本実施形態において、２０秒の時間間隔は、評価関連画像データの読み出し時間間隔であり、採点時間Ｔｓの間隔、及び評価関連画像データと効果画像データとの表示終了の時間間隔でもある。読み出される評価関連画像データとしては、後述するＲＡＭに一時記憶された画像ファイル名が表す評価関連画像データとは異なる評価関連画像データが読み出される。また、ＲＡＭに記憶された画像ファイル名の数が所定数Ｎに達した場合は、評価関連画像データの読み出しタイミングであっても、評価関連画像データが読み出されない。本実施形態において、所定数Ｎは、採点時間Ｔｓの間隔に相当する時間内で利用者が注目して認識できる数であり、例えば５個である。

ステップＳＢ３においては、モニタ３に評価関連画像が表示されるように指令される。ステップＳＢ２において読み出された評価関連画像データと、読み出された評価関連画像データを表示する位置を示す予め定められた座標値を含む表示指令とが画像制御部２９に送信される。また、読み出された評価関連画像データを識別する画像ファイル名と、座標値とが関連付けられた状態でＲＡＭに一時記憶される。画像制御部２９は、受信された表示指令に含まれる座標値と評価関連画像データとに従って、評価関連画像をモニタ３に表示させる。

座標値は、採点アプリケーション１１０が開始されてから、ステップＳＢ１からステップＳＥ２までの最初の一連の処理である１回目のルーチン処理が実行された後、２回目以降のルーチン処理の実行においては、ＲＡＭに一時記憶されている座標値と一定の距離（ｘ、ｙ）を保った座標値が算出される。

ステップＳＢ４においては、利用者の歌唱音声が採点される。具体的には、採点アプリケーション１１０に含まれる歌唱評価プログラムに従って、採点時間Ｔｓ毎に読み出された楽曲データ１００の演奏データに含まれるガイドメロディデータの音高データと、音響制御部３０から送信されたデジタル音信号とが比較される。比較された結果から区間毎に点数が算出される。採点時間Ｔｓは、所定時間区間であり、例えば１曲の楽曲データの再生開始から２０秒毎の時間である。楽曲データの再生から２０秒毎に点数の算出が実行される。歌唱評価プログラムにより算出された所定時間区間毎の点数を含む記憶指令がメモリ２６に送信される。メモリ２６は、受信した記憶指令に従って、所定時間区間毎の点数を記憶する。

ステップＳＢ５においては、算出された点数と前回の所定時間区間の点数とが比較され、比較された結果が１つ前の所定時間区間の点数以上であるか否かが判断される。具体的には、ステップＳＢ４において点数が算出される今回の所定時間区間より１つ前の所定時間区間である前回の所定時間区間の点数を読み出すための点数読出要求がメモリ２６に送信される。受信した点数読出要求に従って、メモリから前回の所定時間区間の点数が読み出される。制御部２０は、読み出された前回の所定時間区間の点数を受信する。

ステップＳＢ５の判断がＮＯである場合には、ステップＳＤ１以下の処理が実行されるが、ステップＳＢ５の判断がＹＥＳである場合には、ステップＳＣ１以下の処理が実行される。図１９に示す採点アプリケーション１１０が開始されてから、ステップＳＢ５が最初に実行される場合には、前回の所定時間区間の点数が存在しないことから、前回の所定時間区間の点数は「０」の点数として、ステップＳＢ５が実行され、この場合のステップＳＢ５の判断はＹＥＳとなり、次の処理はステップＳＣ１に移行される。

（前回の点数以上の場合における採点アプリケーションの処理）
図２０は、前回の点数以上の場合に制御部２０のサブＣＰＵにより実行される採点アプリケーションの処理を示すフローチャートである。図１９に示すステップＳＢ５の判断がＹＥＳである場合、図２０に示す各ステップの処理が実行される。

ステップＳＣ１においては、モニタ３に評価関連画像が１つ以上表示されるか否かが判断される。具体的には、ＲＡＭを参照して画像ファイル名が１つ以上記憶されるか否かが判断される。ステップＳＣ１の判断がＮＯである場合には、ステップＳＣ８以下の処理が実行されるが、ステップＳＣ１の判断がＹＥＳである場合には、ステップＳＣ２が実行される。

ステップＳＣ２においては、モニタ３に評価関連画像が２つ以上表示されるか否かが判断される。具体的には、ＲＡＭを参照して画像ファイル名がＲＡＭに２つ以上記憶されるか否かが判断される。ステップＳＣ２の判断がＮＯである場合には、ステップＳＣ９が実行されるが、ステップＳＣ２の判断がＹＥＳである場合には、ステップＳＣ３が実行される。

ステップＳＣ３においては、モニタ３に表示されている評価関連画像に効果画像が設定されるか否かが判断される。具体的には、図２に示す画像データベースを参照して、ＲＡＭに一時記憶される画像ファイル名に効果画像データが設定されるか否かが判断される。ステップＳＣ３の判断がＮＯである場合には、ステップＳＣ８が実行されるが、ステップＳＣ３の判断がＹＥＳである場合には、ステップＳＣ４が実行される。

ステップＳＣ４においては、モニタ３に表示されている評価関連画像に設定される効果画像が第１種類の効果画像であるか否かが判断される。図２に示す画像データベースの評価データを参照して、ＲＡＭに一時記憶される画像ファイル名に設定される効果画像データが、第１種類の効果画像データであるか否かが判断される。ステップＳＣ４の判断がＮＯである場合には、ステップＳＣ８が実行されるが、ステップＳＣ４の判断がＹＥＳである場合には、ステップＳＣ５が実行される。

ステップＳＣ５においては、第１種類の効果画像データが設定される評価関連画像がモニタ３に複数表示されるか否かが判断される。具体的には、第１種類の効果画像データが設定される画像ファイル名がＲＡＭに２つ以上記憶されるか否かが判断される。ステップＳＣ５の判断がＮＯである場合には、ステップＳＣ１１が実行されるが、ステップＳＣ５の判断がＹＥＳである場合には、ステップＳＣ６が実行される。

ステップＳＣ６においては、第２条件に基づいて第１種類の効果画像データが決定される。具体的には、ＲＡＭに一時記憶された複数の画像ファイル名に設定される第１種類の効果画像データ中から、第２条件に基づいて第１種類の効果画像データが決定される。第２条件は、図２に示す画像データベースに含まれる利用者関連データの中の１つのデータが示す内容である。例えば、図２に示す画像データベースの人気ランキングを参照して、最も低いレベルが設定される第１種類の効果画像データが決定される。

ステップＳＣ７においては、決定された第１種類の効果画像データが読み出され、モニタ３に効果画像が表示されるように指令される。具体的には、ＲＡＭに記憶される採点アプリケーション１１０に含まれる複数の効果画像データの中から、ステップＳＣ６またはステップＳＣ１１により決定された第１種類の効果画像データが読み出される。読み出された第１種類の効果画像データを含む効果画像表示指令が画像制御部２９に送信される。また、読み出された効果画像データを識別する効果画像ファイル名がＲＡＭに一時記憶される。

ステップＳＣ８においては、演奏が終了したか否かが判断される。ステップＳＣ８の判断がＮＯである場合には、ステップＳＥ１が実行されるが、ステップＳＣ８の判断がＹＥＳである場合には、図２０に示すルーチン全体が終了する。

ステップＳＣ９においては、モニタ３に表示される評価関連画像に効果画像が設定されるか否かが判断される。具体的には、図２に示す画像データベースを参照して、ＲＡＭに一時記憶された画像ファイル名に効果画像データが設定されるか否かが判断される。ステップＳＣ９の判断がＮＯである場合には、ステップＳＣ８が実行されるが、ステップＳＣ９の判断がＹＥＳである場合には、ステップＳＣ１０が実行される。

ステップＳＣ１０においては、モニタ３に表示されている評価関連画像に設定される効果画像が第１種類の効果画像であるか否かが判断される。具体的には、図２に示す画像データベースの評価データを参照して、ＲＡＭに一時記憶された画像ファイル名に設定される効果画像データが、第１種類の効果画像データであるか否かが判断される。ステップＳＣ１０の判断がＮＯである場合には、ステップＳＣ８が実行されるが、ステップＳＣ１０の判断がＹＥＳである場合には、ステップＳＣ１１が実行される。

ステップＳＣ１１においては、第１種類の効果画像データが決定される。具体的には、ステップＳＣ１０により第１種類の効果画像データであると判断された効果画像データが決定される。ステップＳＣ１１において、効果画像データが決定されるとステップＳＣ７以下が実行される。

（前回の点数未満の場合における採点アプリケーションの処理）
図２１は、前回の点数未満の場合に制御部２０のサブＣＰＵにより実行される採点アプリケーションの処理を示すフローチャートである。図１９に示すステップＳＢ５の判断がＮＯである場合、図２１に示す各ステップの処理が実行される。

ステップＳＤ１においては、モニタ３に評価関連画像が１つ以上表示されるか否かが判断される。具体的には、ＲＡＭを参照して画像ファイル名が１つ以上記憶されるか否かが判断される。ステップＳＤ１の判断がＮＯである場合には、ステップＳＤ８以下の処理が実行されるが、ステップＳＤ１の判断がＹＥＳである場合には、ステップＳＤ２が実行される。

ステップＳＤ２においては、モニタ３に評価関連画像が２つ以上表示されるか否かが判断される。具体的には、ＲＡＭを参照して画像ファイル名がＲＡＭに２つ以上記憶されるか否かが判断される。ステップＳＤ２の判断がＮＯである場合には、ステップＳＤ９が実行されるが、ステップＳＤ２の判断がＹＥＳである場合には、ステップＳＤ３が実行される。

ステップＳＤ３においては、モニタ３に表示される評価関連画像に効果画像が設定されるか否かが判断される。具体的には、図２に示す画像データベースを参照して、ＲＡＭに一時記憶される画像ファイル名に効果画像データが設定されるか否かが判断される。ステップＳＤ３の判断がＮＯである場合には、ステップＳＤ８が実行されるが、ステップＳＤ３の判断がＹＥＳである場合には、ステップＳＤ４が実行される。

ステップＳＤ４においては、モニタ３に表示されている評価関連画像に設定される効果画像が第２種類の効果画像であるか否かが判断される。図２に示す画像データベースの評価データを参照して、ＲＡＭに一時記憶される画像ファイル名に設定される効果画像データが、第２種類の効果画像データであるか否かが判断される。ステップＳＤ４の判断がＮＯである場合には、ステップＳＤ８が実行されるが、ステップＳＤ４の判断がＹＥＳである場合には、ステップＳＤ５が実行される。

ステップＳＤ５においては、第２種類の効果画像データが設定される評価関連画像がモニタ３に複数表示されるか否かが判断される。具体的には、第２種類の効果画像データが設定される画像ファイル名がＲＡＭに２つ以上記憶されるか否かが判断される。ステップＳＤ５の判断がＮＯである場合には、ステップＳＤ１１が実行されるが、ステップＳＤ５の判断がＹＥＳである場合には、ステップＳＤ６が実行される。

ステップＳＤ６においては、第２条件に基づいて第２種類の効果画像データが決定される。具体的には、ＲＡＭに一時記憶された複数の画像ファイル名に設定される第２種類の効果画像データ中から、第２条件に基づいて第２種類の効果画像データが決定される。第２条件は、図２に示す画像データベースに含まれる利用者関連データの中の１つのデータが示す内容である。例えば、図２に示す画像データベースの人気ランキングを参照して、最も低いレベルが設定される第２種類の効果画像データが決定される。

ステップＳＤ７においては、決定された第２種類の効果画像データが読み出され、モニタ３に効果画像が表示される。具体的には、ＲＡＭに記憶される採点アプリケーション１１０に含まれている複数の効果画像データの中から、ステップＳＤ６またはステップＳＤ１１により決定された第２種類の効果画像データが読み出される。読み出された第２種類の効果画像データを含む効果画像表示指令が画像制御部２９に送信される。また、読み出された効果画像データを識別する効果画像ファイル名がＲＡＭに一時記憶される。

ステップＳＤ８においては、演奏が終了したか否かが判断される。ステップＳＤ８の判断がＮＯである場合には、ステップＳＥ１が実行されるが、ステップＳＤ８の判断がＹＥＳである場合には、図２１に示すルーチン全体が終了する。

ステップＳＤ９においては、モニタ３に表示される評価関連画像に効果画像が設定されるか否かが判断される。具体的には、図２に示す画像データベースを参照して、ＲＡＭに一時記憶される画像ファイル名に効果画像データが設定されるか否かが判断される。ステップＳＤ９の判断がＮＯである場合には、ステップＳＤ８が実行されるが、ステップＳＤ９の判断がＹＥＳである場合には、ステップＳＤ１０が実行される。

ステップＳＤ１０においては、モニタ３に表示される評価関連画像に設定される効果画像が第２種類の効果画像であるか否かが判断される。具体的には、ＲＡＭに一時記憶された画像ファイル名に設定される効果画像データが、第２種類の効果画像データであるか否かが判断される。ステップＳＤ１０の判断がＮＯである場合には、ステップＳＤ８が実行されるが、ステップＳＤ１０の判断がＹＥＳである場合には、ステップＳＤ１１が実行される。

ステップＳＤ１１においては、第２種類の効果画像データが決定される。具体的には、ステップＳＤ１０において第２種類の効果画像データであると判断された効果画像データが決定される。ステップＳＤ１１において、効果画像データが決定されるとステップＳＤ７以下が実行される

（画像表示を終了させるときの採点アプリケーションの処理）
図２２は、評価関連画像及び効果画像の表示を終了させるときに制御部２０のサブＣＰＵにより実行される採点アプリケーションの処理を示すフローチャートである。図２０に示すステップＳＣ８、及び図２１に示すステップＳＤ８の判断がＮＯである場合、図２２に示す各ステップの処理が実行される。

ステップＳＥ１においては、モニタ３に効果画像が表示されるか否かが判断される。具体的には、ＲＡＭに効果画像ファイル名が一時記憶されるか否かが判断される。ステップＳＥ１の判断がＮＯである場合には、ステップＳＥ４が実行されるが、ステップＳＥ２の判断がＹＥＳである場合には、ステップＳＥ２が実行される。

ステップＳＥ２においては、モニタ３に表示されてから採点時間Ｔｓが経過した効果画像と、当該効果画像が設定される評価関連画像とが表示を終了させる画像として決定される。具体的には、ステップＳＣ７またはステップＳＤ７においてＲＡＭに一時記憶されてから採点時間Ｔｓが経過した効果画像ファイル名と、一時記憶された効果画像ファイル名を示す効果画像データが設定される評価関連画像データの画像ファイル名とが決定される。

ステップＳＥ３においては、決定された効果画像ファイル名と画像ファイル名とが示す効果画像と評価関連画像とがモニタ３から消去される。具体的には、ステップＳＥ２において決定された効果画像ファイル名と画像ファイル名とを示す効果画像データと評価関連画像データとを含む画像終了指令が画像制御部２９に送信される。また、決定された効果画像ファイル名と画像ファイル名とが一時記憶されたＲＡＭから両ファイル名が削除される。画像制御部２９は、受信した画像消去指令に含まれる両画像データが示す効果画像と評価関連画像との表示を終了する。

ステップＳＥ４においては、モニタ３に表示された評価関連画像が所定数Ｎに達するか否かが判断される。具体的には、ステップＳＢ３においてＲＡＭに一時記憶された画像ファイル名が所定数Ｎに達するか否かが判断される。ステップＳＥ４の判断がＮＯである場合には、ステップＳＢ６が実行されるが、ステップＳＥ４の判断がＹＥＳである場合には、ステップＳＥ５が実行される。本実施形態において、所定数Ｎは、採点時間の範囲内で利用者が注目して認識できる数であり、例えば５個である。

ステップＳＥ５においては、モニタ３に表示された評価関連画像の中より最初に表示された評価関連画像の表示を終了させる。具体的には、ステップＳＢ３においてＲＡＭに一時記憶された画像ファイル名の中より最初に記憶された画像ファイル名を示す評価関連画像データを含む画像終了指令が画像制御部２９に送信される。また、ＲＡＭに一時記憶されている画像ファイル名が削除される。画像制御部２９は、受信した画像消去指令に含まれる評価関連画像データが示す評価関連画像の表示を終了する。

ステップＳＥ６においては、モニタ３に表示されてから採点時間Ｔｓの所定倍数以上の時間が経過した評価関連画像があるか否かが判断される。具体的には、ステップＳＢ３においてＲＡＭに一時記憶されてから採点時間Ｔｓの所定倍数以上の時間が経過している画像ファイル名があるか否かが判断される。ステップＳＥ６の判断がＮＯである場合には、ステップＳＢ２以降が実行されるが、ステップＳＥ６の判断がＹＥＳである場合には、ステップＳＥ７が実行される。本実施形態において、所定倍数は、利用者が継続して表示される評価関連画像に見飽きるおそれがある時間に基づいて設定される倍数である。たとえば、５倍である。

ステップＳＥ７においては、モニタ３に表示されてから採点時間Ｔｓの所定倍数以上経過した評価関連画像が消去される。具体的には、ステップＳＥ４においてモニタ３に表示されてから採点時間Ｔｓの所定倍数以上の時間が経過したと判断された画像ファイル名を表す評価関連画像データを含む画像終了指令が画像制御部２９に送信される。また、ＲＡＭに一時記憶されている画像ファイル名が削除される。画像制御部２９は、受信した画像消去指令に含まれる評価関連画像データの表示を終了する。ステップＳＥ７の実行後に、ステップＳＢ２以降が実行される。

（実施形態の使用形態）
次に、本実施形態の使用形態について、図３から図１７を参照して説明する。本使用形態は、採点アプリケーションが実行されている状況で、楽曲の演奏に伴い、モニタ３に撮影された画像３００と評価関連画像３１０とが表示されてから、利用者の音声の採点結果に関連する効果画像３２０が表示され、評価関連画像３１０と効果画像３２０との表示が終了するまでの使用形態である。

カラオケ装置２が選曲番号に従ってＨＤＤ２１から楽曲データを読み出して演奏を開始すると、演奏開始画面がモニタ３に表示される。演奏開始画面には、曲名、歌手名、作詞者名、及び作曲者が表示されると共に、採点アプリケーションが実行されていることを示す採点アプリタイトルが表示される。

演奏開始画面と採点アプリタイトルとの表示が終了すると、モニタ３の画面は図３の画面に移る。図３は、カメラ４により撮影された画像３００が表示される図である。具体的には、カメラ４により人の姿を撮影した画像３００がモニタ３に表示される。

図４は、太陽の評価関連画像３１０Ａが表示されたモニタ３の画面を示す図である。具体的には、楽曲が再生されるとともに、制御部２０により、図１９のステップＳＢ２において読み出された太陽の評価関連画像３１０Ａがモニタ３に表示される。図２に示す画像データベースにおいて、太陽の評価関連画像３１０Ａには、評価データが設定されない。また、効果画像データも設定されない。太陽の評価関連画像３１０Ａには効果画像データが設定されないため、図１９のステップＳＢ５において今回算出された点数が前回の点数以上と判断された場合であっても、モニタ３の画面は変化しない。

図５は、太陽の評価関連画像３１０Ａが表示された時点から２０秒経過後に、八分音符の評価関連画像３１０Ｂが表示されたモニタ３の画面を示す図である。具体的には、楽曲の演奏開始から２０秒経過後に、制御部２０により、図１９のステップＳＢ２において読み出された八分音符の評価関連画像３１０Ｂがモニタ３に表示される。八分音符の評価関連画像３１０Ｂには、図２の画像データベースに示すように、プラスの評価データと、評価結果が良いことに関連する音符の効果画像データとが設定される。

図６は、評価結果が良かったことに関連する音符の効果画像３２０Ｂが表示されたモニタ３の画面を示す図である。具体的には、図１９のステップＳＢ５において今回算出された点数が前回以上と判断された場合、図２の画像データベースに示す評価データが「プラス」である八分音符の評価関連画像３１０Ｂに設定される音符の効果画像３２０Ｂがモニタ３の画面全体に多数表示される。

図７は、八分音符の評価関連画像３１０Ｂと音符の効果画像３２０Ｂとの表示が終了されたモニタ３の画面を示す図である。具体的には、音符の効果画像３２０Ｂがモニタ３に表示されてから２０秒経過した直後に、八分音符の評価関連画像３１０Ｂと音符の効果画像３２０Ｂとの表示が終了される。

図８は、効果画像データが設定されない太陽の評価関連画像３１０Ａと、効果画像データがそれぞれ設定されるハートの評価関連画像３１０Ｃ及び花の評価関連画像３１０Ｄとが表示されたモニタ３の画面を示す図である。具体的には、図７において、八分音符の評価関連画像３１０Ｂと音符の効果画像３２０Ｂとの表示が終了された直後に、制御部２０により、図１９のステップＳＢ２において読み出されたハート評価関連画像３１０Ｃがモニタ３に表示される。ステップＳＢ２において読み出されたハート評価関連画像３１０Ｃには、図２の画像データベースに示されるように評価結果が良いことに関連する連続ハートの効果画像が設定される。図１９のステップＳＢ５において今回算出された点数が前回の点数未満と判断された場合、評価結果が悪かったことに関連する効果画像データが設定されないため、モニタ３の画面は変化しない。ハートの評価関連画像３１０Ｃがモニタ３に表示されてから２０秒後に、制御部２０により、図１９のステップＳＢ２において読み出された花の評価関連画像３１０Ｄがモニタ３に表示される。花の評価関連画像３１０Ｄには、図２の画像データベースに示されるように評価結果が良いことに関連する花びらの効果画像データが設定される。

図９は、連続ハートの効果画像３２０Ｃが表示されたモニタ３の画面を示す図である。具体的には、制御部２０により、図１９のステップＳＢ５において今回算出された点数が前回の点数以上と判断された場合、モニタ３に表示された評価関連画像３１０に設定される効果画像データの中から、図２０のステップＳＣ６において決定されたハートの評価関連画像３１０Ｃに設定される連続ハートの効果画像３２０Ｃがモニタ３の画面全体に多数表示される。

効果画像３２０の決定は、図２の画像データベースが示す人気ランキング、年齢別人気ランキング、利用時間帯、及び歌唱評価点数に基づいて決定される。具体的には、図２の画像データベースの評価データとして「プラス」が設定されるハートの評価関連画像３１０Ｃと、花の評価関連画像３１０Ｄとにそれぞれ設定される人気ランキング「レベル２」及び「レベル５」などの複数のレベルのうちで、最も低いレベルである「レベル２」が設定される連続ハートの効果画像データが決定される。なお、最も高いレベルが設定される効果画像データが決定されてもよい。

図１０は、ハートの評価関連画像３１０Ｃと連続ハートの効果画像３２０Ｃとの表示が終了されたモニタ３の画面を示す図である。具体的には、連続ハートの効果画像３２０Ｃがモニタ３に表示されてから２０秒経過した直後に、ハートの評価関連画像３１０Ｃと連続ハート効果画像３２０Ｃとの表示が終了される。

図１１は、効果画像データがそれぞれ設定されない太陽の評価関連画像３１０Ａ及びカラスの評価関連画像３１０Ｅと、評価結果が良いことに関連する効果画像データが設定される花の評価関連画像３１０Ｄとが表示されたモニタ３の画面を示す図である。具体的には、連続ハートの効果画像３２０Ｃがモニタ３に表示されてから２０秒経過した直後に、制御部２０により、図１９のステップＳＢ２において読み出されたカラスの評価関連画像３１０Ｅがモニタ３に表示される。図２に示す画像データベースにおいて、カラスの評価関連画像３１０Ｅには、評価データと効果画像データとが設定されない。図１９のステップＳＢ５において今回算出された点数が前回の点数未満と判断された場合、モニタ３に表示される評価関連画像３１０には、評価結果が悪かったことに関連する効果画像データが設定されないため、モニタ３の画面は変化しない。

図１２は、カラスの評価関連画像３１０Ｅが表示された時点から２０秒経過後に、評価黒ネコの関連画像３１０Ｆが表示されたモニタ３の画面を示す図である。具体的には、カラスの評価関連画像３１０Ｅがモニタ３に表示されてから２０秒経過後に、制御部２０により、図１９のステップＳＢ２において読み出された黒ネコの評価関連画像３１０Ｆがモニタ３に表示される。図２に示す画像データベースにおいて、黒ネコの評価関連画像３１０Ｆには、マイナスの評価データと、評価結果が悪いことに関連するネコの爪で引っかいた３本線の効果画像データとが設定される。

図１３は、評価結果が悪かったことに関連するネコの爪で引っかいた３本線の効果画像３２０Ｆが表示されたモニタ３の画面を示す図である。具体的には、図１９のステップＳＢ５において今回算出された点数が前回の点数未満と判断された場合、図２の画像データベースに示す評価データが「マイナス」である黒ネコの評価関連画像３１０Ｆに設定されるネコの爪で引っかいた３本線の効果画像３２０Ｆがモニタ３の画面全体に多数表示される。

図１４は、太陽の評価関連画像３１０Ａ、黒ネコの評価関連画像３１０Ｆ、及びネコの爪で引っかいた３本線の効果画像３２０Ｆの表示が終了されたモニタ３の画面を示す図である。具体的には、ネコの爪で引っかいた３本線の効果画像３２０Ｆがモニタ３に表示されてから２０秒経過後に、黒ネコの評価関連画像３１０Ｆとネコの爪で引っかいた３本線の効果画像３２０Ｆとの表示が終了される。また、制御部２０により、図２２のステップＳＥ４においてモニタ３に表示されている評価関連画像３１０が所定数Ｎに達すると判断された場合、モニタ３に表示されている評価関連画像３１０の中より、最初に表示された太陽の評価関連画像３１０Ａの表示が終了される。

図１５は、効果画像データが設定されないカラス評価関連画像３１０Ｅと、効果画像データがそれぞれ設定される雨雲の評価関連画像３１０Ｇ及び雷の評価関連画像３１０Ｈとが表示されたモニタ３の画面を示す図である。具体的には、図１４において、太陽の評価関連画像３１０Ａ、黒ネコの評価関連画像３１０Ｆ、及びネコの爪で引っかいた３本線の効果画像３２０Ｆとの表示が終了された直後に、制御部２０により、図１９のステップＳＢ２において読み出された雨雲の評価関連画像３１０Ｇがモニタ３に表示される。雨雲の評価関連画像３１０Ｇには、図２の画像データベースに示すように、評価結果が悪いことに関連する雨のしずくの効果画像データが設定される。図１９のステップＳＢ５において、今回算出された点数が前回の点数以上と判断された場合、図示しないが花の評価関連画像３１０Ｄに設定される評価結果が良かったことに関連する花びらの効果画像が、モニタ３の画面に表示される。雨雲の評価関連画像３１０Ｇがモニタ３に表示されてから２０秒経過後に、制御部２０により、図１９のステップＳＢ２において読み出された雷の評価関連画像３１０Ｈがモニタ３に表示される。雷の評価関連画像３１０Ｈには、図２の画像データベースに示すように、評価結果が悪いことに関連する稲妻の効果画像データが設定される。

図１６は、しずくの効果画像３２０Ｇが表示されたモニタ３の画面を示す図である。具体的には、制御部２０により、図１９のステップＳＢ５において今回算出された点数が前回の点数未満と判断された場合、モニタ３に表示された評価関連画像３１０に設定される効果画像データの中から、図２０のステップＳＤ６において決定された雨雲の評価関連画像３１０Ｇに設定されるしずくの効果画像３２０Ｇが、モニタ３の画面全体に多数表示される。

効果画像３２０の決定について、具体的には、図２の画像データベースに示す評価データとして「マイナス」が設定される雨雲の評価関連画像３１０Ｇと、雷の評価関連画像３１０Ｈとにそれぞれ設定される人気ランキングの複数のレベルのうちで、最も低いレベルが設定されるしずくの効果画像データが決定される。なお、最も高いレベルが設定される効果画像データが決定されてもよい。

図１７は、雨雲の評価関連画像３１０Ｇとしずくの効果画像３２０Ｇとの表示が終了されたモニタ３の画面を示す図である。具体的には、しずくの効果画像３２０Ｇがモニタ３に表示されてから２０秒経過後に、雨雲の評価関連画像３１０Ｇとしずくの効果画像３２０Ｇとの表示が終了される。

＜実施形態の効果＞
本実施形態によれば、利用者の音信号の評価結果が良い場合、モニタ３の画面に表示されたハートの評価関連画像３１０Ｃに設定される連続ハートの効果画像３２０Ｃが、図９に示すように、表示されている評価関連画像３１０Ａ、３１０Ｃ、３１０Ｄの周辺及び撮影された利用者の画像３００の周辺に多数表示されるため、利用者は自身の評価結果を意識しながら歌唱することが可能となる。

モニタ３の画面に表示されたハートの評価関連画像３１０Ｃと、花の評価関連画像３１０Ｄとにそれぞれ評価結果が良いことに関連する効果画像３２０が設定されており、かつ、利用者の音信号の評価結果が良い場合において、人気ランキングのレベルに基づいて、利用者の評価結果に関連する連続ハートの効果画像３２０Ｃが図９に示すように多数表示されるため、利用者に自身の良い評価結果への注意喚起がされる。

表示された連続ハートの効果画像３２０Ｃと、連続ハートの効果画像３２０Ｃが設定されるハートの評価関連画像３１０Ｃとの表示を終了することで、画面が図９の画面から図１０の画面へ大きく変化するため、利用者は画面の表示内容に飽きることなく歌唱することができる。また、表示された評価関連画像３１０が所定数Ｎに達した場合、表示されている評価関連画像３１０の中から、最初に表示された評価関連画像３１０Ａの表示を終了し、新たな評価関連画像３１０Ｇが表示されることにより、画面の表示内容に変化が起き、利用者は画面の表示内容を楽しみながら歌唱することができる。さらに、表示されてから所定時間以上表示されていると判断された効果画像３２０が設定されない太陽の評価関連画像３１０Ａの表示を終了することで表示画面が変化するため、利用者に歌唱を飽きさせることがなくなる。

＜実施形態の構成と発明の構成との対応関係＞
制御部２０と音響制御部３０との組み合わせは、本発明の再生手段の一例である。歌唱用マイク５は、本発明の入力手段の一例である。デジタル音信号は、本発明の音信号の一例である。制御部２０と図１９のステップＳＢ４との組み合わせは、本発明の評価算出手段の一例である。制御部２０と図１９のステップＳＢ５との組み合わせは、本発明の評価判断手段の一例である。ＨＤＤ２１の採点アプリケーション１１０の画像データベースは、本発明の評価関連画像記憶手段の一例である。制御部２０、図１９のステップＳＢ２、及びステップＳＢ３の組み合わせは、本発明の表示制御手段の一例である。ＨＤＤ２１の採点アプリケーション１１０の画像データベースは、本発明の効果画像記憶手段の一例である。制御部２０、図２０のステップＳＣ５、及び図２１のステップＳＤ５の組み合わせは、本発明の効果画像判断手段の一例である。制御部２０、図２０のステップＳＣ６、及び図２１のステップＳＤ６の組み合わせは、本発明の効果画像決定手段の一例である。

制御部２０と、図１９のステップＳＢ２及びステップＳＢ３と、図２２のステップＳＥ４及びステップＳＥ５との組み合わせによる動作は、本発明の評価関連画像を表示する動作と、表示部に表示されている評価関連画像の表示を終了させる動作との一例である。

制御部２０と、図２２のステップＳＥ１、ステップＳＥ２、及びステップＳＥ３との組み合わせによる動作は、本発明の表示部に表示された特定の効果画像と特定の評価関連画像との表示を終了させる動作の一例である。

制御部２０と、図１９のステップＳＢ４と、図２２のステップＳＥ１、ステップＳＥ２、及びステップＳＥ３との組み合わせは、本発明の所定時間が経過した時に、特定の効果画像と特定の評価関連画像との表示を終了させる一例である。

制御部２０と、図２２のステップＳＥ４及びステップＳＥ５との組み合わせによる動作は、本発明の表示部に表示された評価関連画像が所定数に達した時、最初に表示された評価関連画像の表示を終了させる動作の一例である。

図１９のステップＳＢ５の判断条件は、本発明の現在の評価点数が前回の評価点数以上である第１条件の一例である。

ＨＤＤ２１の採点アプリケーション１１０の画像データベースに含まれる「効果画像データ」は、本発明の現在の評価点数が前回の評価点数以上である良い評価結果に関連する第１種類の効果画像データと、現在の評価点数が前回の評価点数未満である悪い評価結果に関連する第２種類の効果画像データとの一例である。

ＨＤＤ２１の採点アプリケーション１１０の画像データベースに含まれる、「人気ランキング」、「年齢別人気ランキング」、「利用時間帯」、及び「歌唱評価点数」は、本発明の利用者関連データが示す内容である第２条件の一例である。

ＨＤＤ２１の採点アプリケーション１１０の画像データベースに含まれる、複数の「効果画像データ」により表される複数種類の効果画像は、本発明の観念上異なる複数種類の効果画像の一例である。

＜変形例＞
本発明の実施形態について以上説明したが、本発明の趣旨を逸脱しない範囲において当業者であれば種々の変形を加えることができる。

本実施形態において、楽曲を表す楽曲信号は、演奏データに含まれるガイドメロディデータの音高データである。この実施形態に代えて、楽曲を表す楽曲信号はガイドメロディデータの音量を表す信号であってもよい。具体的には、音量は、利用者が歌唱するときの声の大きさの基準であり、ガイドメロディデータの音量と、入力手段により入力される利用者の歌唱音量とを比較し、評価点数を算出してもよい。

本実施形態において、図２の画像データベースには、効果画像データが設定される評価関連画像３１０と、効果画像データが設定されない評価関連画像３１０とが記憶される。この実施形態に代えて、評価関連画像３１０の全てに効果画像データが設定されてもよい。

本実施形態において、図３のモニタ３に表示される画像３００としては、カメラ４により撮影された画像３００が表示される。この実施形態に代えて、楽曲データに含まれる背景画像指定データにより指定される背景画像が表示されてもよい。

本実施形態においては、図３のモニタ３に表示される画像３００としては、カラオケ店舗に設置されているカメラ４により撮影された画像が表示される。この実施形態に代えて、利用者が所有している携帯端末に備えられるカメラを利用して撮影された画像がカラオケ装置２に送信され、モニタ３に表示されてもよい。

本実施形態において、図６等のモニタ３に表示される効果画像３２０は、静止画である。この実施形態に代えて、効果画像３２０は動画であってもよい。

本実施形態においては、図６等のモニタ３に表示される効果画像３２０としては、同じ種類の効果画像３２０Ｂが多数表示される。この実施形態に代えて、異なる複数種類の効果画像３２０がモニタ３に表示されてもよい。例えば、評価算出手段が現在の所定区間で算出した現在の評価点数と前回の所定区間で算出した前回の評価点数とを比較して評価点数の差分を算出し、算出された評価点数の差分に基づいて、表示される効果画像３２０の種類の数を増減し表示されてもよい。具体的には、良い評価結果に関連する効果画像３２０が設定される評価関連画像３１０がモニタ３に複数表示されている状態であって、評価算出手段が現在の評価点数と前回の評価点数とを比較して評価点数の差分を算出し、算出された評価点数の差分が１０点以上増加していた場合、複数の評価関連画像３１０にそれぞれ設定される複数の効果画像３２０のうちから、２種類以上の効果画像３２０がモニタ３に表示されてもよい。

本実施形態においては、図２２のステップＳＥ２、ステップＳＥ５、及びステップＳＥ７の処理において、表示を終了する評価関連画像３１０が決定される。この実施形態に代えて、ステップＳＢ４において算出される点数に基づいて、表示を終了する評価関連画像３１０が決定されてもよい。具体的には、評価関連画像３１０毎に評価点数が設定されており、図１９のステップＳＢ４において算出される点数が、評価関連画像に設定される点数以上である場合、当該評価関連画像３１０の表示が終了されてもよい。

本実施形態においては、図１９のステップＳＢ３の処理において、画像ファイル名がＲＡＭに一時記憶される。この実施形態に代えて、評価関連画像３１０を識別する番号がＲＡＭに一時記憶されてもよい。

本実施形態においては、図１９のステップＳＢ４の採点は、所定時間毎の区間において実行される。この実施形態に代えて、楽曲の演奏時間に応じて所定時間が設定されてもよい。例えば、４分未満の楽曲は所定時間を２０秒とし、４分以上５分未満の楽曲は所定時間を２５秒とし、５分以上の楽曲は所定時間を３０秒とする。また、所定の採点区間は、楽曲毎に予め決められた区間データに基づいて設定されてもよい。区間データは、Ａメロディ、Ｂメロディ、サビ、及びＣメロディといった楽曲を複数の区間に分割するデータを含む。例えば、Ａメロディが開始してから終了するまでのガイドメロディの音高データと歌唱音の音高データとの差分の絶対値が積算され、Ａメロディ終了時点で採点値が算出される。Ａメロディ、Ｂメロディ、サビ及びＣメロディといった区間データは、カラオケ楽曲データの制作時に予め決定される。楽曲中で歌唱する区間は、大きく分けてメロディとサビとに分けられる。サビは楽曲の中で最も盛り上がる区間であり、メロディはそれ以外の区間である。Ａメロディは楽曲の最初のメロディ、ＢメロディはＡメロディの次に来るメロディ、Ｃメロディは最後のサビに続くメロディである。楽曲の一例として、前奏、Ａメロディ、Ｂメロディ、サビ、間奏、Ａメロディ、Ｂメロディ、サビ、間奏、Ｃメロディ、サビ、及び後奏の順に区間が到来する。所定の採点区間はまた、小節に基づいて設定されてもよい。小節は楽曲の単位であり、４／４拍子では、四分音符４つ分で１小節、４／３拍子では、四分音符３つ分で１小節である。例えば、所定の採点区間を８小節と設定すると、１小節目で差分の絶対値の積算を開始し８小節目が終了したら採点値が算出される。

本実施形態においては、図１９のステップＳＢ５の処理において、算出された点数と前回の区間の点数とが比較され、前回の区間の点数以上であるか否かが判断される。この実施形態に加えて、歌唱マイク５から入力された歌唱音の音信号が、予め定められた閾値の音量以上である条件は、第１条件に含まれてもよい。変形例において、評価点数を条件とする判断処理と、音量を条件とする判断処理とが、所定区間毎に交互に実行されてもよい。

本実施形態においては、図１９のステップＳＢ５の処理において、算出された点数と前回の区間の点数とが比較され、前回の区間の点数以上であるか否かが判断される。この実施形態に代えて、図１９のステップＳＢ４の処理において算出された評価点数が、予め定められた閾値の点数以上であるか否かが判断されてもよい。なお、予め定められた閾値の点数は、１曲の演奏経過時間に基づいて変更されてもよい。例えば、楽曲毎に予め決められた区間データに基づいて、Ａメロディ、Ｂメロディ、サビ、及びＣメロディの区間データを演奏するごとに閾値の点数が高くなる。または、楽曲が再生されてから採点時間Ｔｓが経過する毎に、閾値の点数が低くなる。評価点数が予め定められた閾値の点数以上である条件は、本発明の第１条件の一例である。

本実施形態においては、図２の画像データベースに示す評価データについて、「プラス」は、現在の区間の評価点数が前回の区間の評価点数以上であることを表し、「マイナス」は、現在の区間の評価点数が前回の区間の評価点数未満であることを表す。この実施形態に代えて、評価データについて、「プラス」は、評価算出手段により算出された評価点数が予め定められた閾値の点数以上であることを表し、「マイナス」は、評価点数が予め定められた閾値の点数未満であることを表してもよい。評価点数が予め定められた閾値の評価点数以上である良い評価結果に関連する効果画像データと、評価点数が予め定められた評価点数未満である悪い評価結果に関連する効果画像データとは、本発明の第１種類の効果画像データと第２種類の効果画像データとの一例である。

本実施形態において、カラオケ装置２の一例として、カラオケ店舗で使用される業務用のカラオケ装置を挙げている。本実施形態に代えて、家庭用ゲーム機、パーソナルコンピュータ、携帯電話、及び携帯情報端末といった、ユーザがカラオケを実施できる機能を有している機器をカラオケ装置としてもよい。

本実施形態において、図２０のステップＳＣ６及び図２１のステップＳＤ６では、図２に示す画像データベースの人気ランキングに基づき、効果画像３２０が決定される。この実施形態に代えて、図２に示す画像データベースの年齢別人気ランキング、利用時間帯、及び歌唱評価点に基づいて、効果画像３２０が決定されてもよい。

具体的には、カラオケ装置の利用者の年齢に該当する年齢別人気ランキングのレベルに基づいて、効果画像３２０が決定される。例えば、利用者がリモコン装置等から入力される利用者ＩＤ及びパスワードに基づいて、ＳＮＳの利用者を認証し、認証が正常に行われた場合、利用者のＳＮＳのログインを許可する。ＳＮＳのログインが許可されると、カラオケ用ホスト８に記憶されている利用者データから利用者の実際の年齢、または歌唱年齢が取得される。または、リモコン装置等の画面に利用者の年齢の入力を受け付ける画面を表示することにより、利用者の年齢が受け付け画面から取得される。取得された年齢が該当する年齢別人気ランキングのレベルが参照される。取得された利用者年齢が５歳であった場合、図２に示す画像データベースの「年齢別人気ランキング（０歳〜６歳）」のレベルが参照され、評価関連画像３１０に設定される年齢別人気ランキング（０歳〜６歳）のレベルが最も低い評価関連画像３１０に設定される効果画像３２０が決定される。

カラオケ装置２が利用されている時間に基づいて、効果画像３２０が決定される。例えば、カラオケ装置２が利用されている時間データがカラオケ装置２から取得される。取得された時間データが２０時３７分である場合、図２に示す画像データベースの利用時間帯の「夜：１９時〜２２時」が設定される効果画像３２０が決定される。

図１９のステップＳＢ４の処理において算出された評価点数に基づいて、効果画像３２０が決定される。例えば、図１９のステップＳＢ４の処理おいて算出された評価点数が６６点である場合、図２に示す画像データベースの歌唱評価点数の「Ｂ：５１〜７０」が設定される効果画像３２０が決定される。

本実施形態において、図２０のステップＳＣ６及び図２１のステップＳＤ６は、図２に示す画像データベースの人気ランキングに基づき、効果画像３２０が決定される。この実施形態に代えて、図２に示す画像データベースの人気ランキング、年齢別人気ランキング、利用時間帯、及び歌唱評価点の２つ以上に基づいて、効果画像３２０が決定されてもよい。

本実施形態において、図９において効果画像３２０Ｃは、撮影された画像３００及び表示された評価関連画像３２０の周辺に多数表示される。この実施形態に代えて、歌詞３３０の周辺に効果画像３２０が表示されるものであってもよい。歌詞３３０の周辺に表示されることにより、歌詞を見ている利用者の目が効果画像３２０の表示位置にも向くことにより、利用者は自身の評価結果を容易に確認することができる。

本実施形態において、図１９のステップＳＢ２において、１つの評価関連画像データは複数の評価関連画像データからランダムに読み出される。この実施形態に代えて、評価結果が良いことに関連する効果画像データと、評価結果が悪いことに関連する効果画像データとがそれぞれ設定される評価関連画像データが同等の数だけ読み出されてモニタ３に表示されるものであってもよい。具体的には、図１９のステップＳＢ３においてＲＡＭに一時記憶された画像ファイル名が示す評価関連画像データに設定される評価データのプラスとマイナスとの割合が同じになるよう、図１９のステップＳＢ２では評価関連画像データが読み出される。

本実施形態において、図１９のステップＳＢ２において、評価関連画像データは複数の評価関連画像データからランダムに読み出される。この実施形態に代えて、図２に示す画像データベースの人気ランキングに基づいて、評価関連画像データが読み出されるものであってもよい。具体的には、図２に示す画像データベースの評価関連画像データのすべてに人気ランキングのレベル１〜５までのレベルが設定される。評価関連画データとして、人気ランキングのレベルが全て異なるように設定される評価関連画像データが読み出される。人気ランキングのレベルが異なる評価関連画像データが読み出されることにより、利用者による人気が低い評価関連画像データだけではなく、人気の高い評価関画像データも読み出されるため、利用者は表示される評価関連画像を視覚的に楽しみながら歌唱することができる。

本実施形態において、図１９のステップＳＢ２において、１つの評価関連画像データが読み出される。この実施形態に代えて、１度に読み出される評価関連画像データが２つ以上であってもよい。具体的には、図１９のステップＳＢ２の１回目の処理においては、所定数Ｎの評価関連画像データが読み出されてもよい。

本実施形態において、図２２のステップＳＥ２において、表示されてから採点時間Ｔｓが経過した効果画像と、当該効果画像が設定される評価関連画像とが、表示が終了される画像として決定される。この実施形態に代えて、図２２のステップＳＥ４において評価関連画像が所定数Ｎに達しているか否かの判断がＹＥＳとなるまで、評価関連画像３１０の表示が終了されなくともよい。具体的には、図２２のステップＳＥ１においてＹＥＳと判断された場合、効果画像３２０の表示が終了される。次に、評価関連画像３１０が所定数Ｎに達しているか否かが判断され、ＹＥＳの場合には、表示を終了した効果画像３２０を設定する評価関連画像３１０の表示を終了させる。所定数Ｎに達していないと判断された場合には、表示を終了した効果画像３２０を設定する評価関連画像３１０の表示を終了させない。

本実施形態において、図１９のステップＳＢ３において、評価関連画像は予め定められた座標値に基づいて表示される。この実施形態に代えて、カメラ４にて撮影された画像３００から顔認識技術を用いて利用者の顔の位置を特定し、特定された利用者の顔の位置に評価関連画像が近づく、または離れる位置に移動してもよい。

本実施形態において、評価結果に関連する効果画像がモニタ３に表示される。この実施形態に代えて、効果画像とともに、評価結果を示す点数がモニタ３に表示されてもよい。

本実施形態において、図２の画像データベースは、ＨＤＤ２１に記憶される採点アプリケーションに含まれる。この実施形態に代えて、例えば、月に１度など定期的に、画像データベースがホストからインターネットを介してカラオケ装置２に配信されてもよい。

２・・・カラオケ装置、３・・・モニタ、５・・・歌唱用マイク、２０・・・制御部、２１・・・ＨＤＤ（ハードディスク）、１００・・・楽曲データ、１１０・・・採点アプリケーション、３１０・・・評価関連画像、３２０・・・効果画像

Claims

楽曲を再生する再生手段と、
前記再生手段により再生される楽曲を表す楽曲信号と、入力手段により入力される音信号とを比較し、該音信号の評価点数を算出する評価算出手段と、
前記評価算出手段により算出された評価点数が第１条件を満たしたか否かを判断する評価判断手段と、
評価関連画像データを複数記憶する評価関連画像記憶手段と、
前記評価関連画像記憶手段から、少なくとも１つの評価関連画像データを読み出し、読み出された評価関連画像データに基づいて評価関連画像を表示部に表示させる表示制御手段と、
前記評価関連画像データに設定される効果画像データであって、第１種類の効果画像データと、第２種類の効果画像データとを複数記憶する効果画像記憶手段と、
前記表示部に表示された前記評価関連画像を表す評価関連画像データに、前記第１種類の効果画像データ、または前記第２種類の効果画像データが設定され、かつ、該効果画像データが設定された前記評価関連画像データに基づく評価関連画像が前記表示部に複数表示されているか否かを判断する効果画像判断手段と、
前記効果画像データが設定された前記評価関連画像データが表す前記評価関連画像が複数表示されていると前記効果画像判断手段により判断された場合、複数の前記評価関連画像データにそれぞれ設定された複数の前記効果画像データの中から第２条件に基づいて、１つの効果画像データを決定する効果画像決定手段と、を備え、
前記第1条件を満たすと前記評価判断手段により判断された場合、かつ、前記第１種類の効果画像データが設定された前記評価関連画像データが表す前記評価関連画像が複数表示されていると前記効果画像判断手段により判断された場合、前記第２条件に基づいて前記効果画像決定手段が１つの前記第１種類の効果画像データを決定し、
前記第１条件を満たさないと前記評価判断手段により判断された場合、かつ、前記第２種類の効果画像データが設定された前記評価関連画像データが表す前記評価関連画像が複数表示されていると前記効果画像判断手段により判断された場合、前記第２条件に基づいて前記効果画像決定手段が１つの前記第２種類の効果画像データを決定し、
前記表示制御手段は、前記決定された効果画像データを前記効果画像記憶手段から読み出し、読み出された効果画像データに基づいて効果画像を前記表示部に表示させる
ことを特徴とするカラオケ装置。
前記表示制御手段は、前記評価関連画像記憶手段から楽曲演奏の所定区間毎に評価関連画像データを読み出し、読み出された評価関連画像データに基づいて少なくとも１つの評価関連画像を前記表示部に表示させ、前記表示部に表示されている評価関連画像が所定数に達した時に、前記表示部に表示されている所定数の評価関連画像の中から少なくとも1つの評価関連画像の表示を終了させる
ことを特徴とする請求項１に記載のカラオケ装置。
前記表示制御手段は、特定の効果画像が前記表示部に表示されてから所定時間が経過した時に、前記表示部に表示された特定の効果画像と、その特定の効果画像を表す効果画像データが設定された評価関連画像データに基づいて表示された特定の評価関連画像との表示を終了させる
ことを特徴とする請求項１または請求項２に記載のカラオケ装置。
前記評価算出手段は、前記楽曲信号と前記音信号とを比較し、該音信号の評価点数を楽曲演奏の所定区間毎に算出し、
前記表示制御手段は、前記特定の効果画像が前記表示部に表示されてから前記楽曲演奏の所定区間に相当する時間が前記所定時間として経過した時に、前記特定の効果画像と前記特定の評価関連画像との表示を終了させる
ことを特徴とする請求項３に記載のカラオケ装置。
前記表示制御手段は、前記表示部に表示されている評価関連画像が所定数に達した時に、前記表示部に表示されている所定数の評価関連画像の中で最初に表示された評価関連画像の表示を終了させる
ことを特徴とする請求項１から請求項４のいずれかに記載のカラオケ装置。
前記評価算出手段は、前記楽曲信号と前記音信号とを比較し、該音信号の評価点数を楽曲演奏の所定区間毎に算出し、
前記評価判断手段は、前記評価算出手段が現在の所定区間で算出した現在の評価点数と前回の所定区間で算出した前回の評価点数とを比較し、現在の評価点数が前回の評価点数以上であることを前記第１条件として判断する
ことを特徴とする請求項１から請求項５のいずれかに記載のカラオケ装置。
前記効果画像記憶手段は、前記評価算出手段が算出した現在の評価点数が前回の評価点数以上である良い評価結果に関連する前記第１種類の効果画像データと、前記評価算出手段が算出した現在の評価点数が前回の評価点数未満である悪い評価結果に関連する前記第２種類の効果画像データとを複数記憶する
ことを特徴とする請求項６に記載のカラオケ装置。
前記評価判断手段は、前記評価算出手段により算出された評価点数が予め定められた閾値の点数以上であることを前記第１条件として判断する
ことを特徴とする請求項１から請求項５のいずれかに記載のカラオケ装置。
前記効果画像記憶手段は、前記評価算出手段が算出した評価点数が予め定められた閾値の点数以上である良い評価結果に関連する前記第１種類の効果画像データと、前記評価算出手段が算出した評価点数が予め定められた閾値の点数未満である悪い評価結果に関連する前記第２種類の効果画像データとを複数記憶する
ことを特徴とする請求項８に記載のカラオケ装置。
前記効果画像決定手段は、前記効果画像データに設定された複数種類の利用者関連データの中の少なくとも１つのデータが示す内容を前記第２条件として判断する
ことを特徴とする請求項１から請求項９のいずれかに記載のカラオケ装置。
前記効果画像は、前記評価関連画像と観念上関連する形象を含む画像であり、
前記効果画像記憶手段は、観念上異なる複数種類の効果画像を表す複数の前記効果画像データを記憶する
ことを特徴とする請求項１から請求項１０のいずれかに記載のカラオケ装置。
楽曲を再生する再生手段と、前記再生手段により再生される楽曲を表す楽曲信号と、入力手段により入力される音信号とを比較し、該音信号の評価点数を算出する評価算出手段と、評価関連画像データを複数記憶する評価関連画像記憶手段と、前記評価関連画像データに設定される効果画像データであって、第１種類の効果画像データと、第２種類の効果画像データとを複数記憶する効果画像記憶手段と、を備えるカラオケ装置において実行されるプログラムであって、
前記評価算出手段により算出された評価点数が第１条件を満たしているか否かを判断する評価判断ステップと、
前記評価関連画像記憶手段から、少なくとも１つの評価関連画像データを読み出し、読み出された評価関連画像データに基づいて評価関連画像を表示部に表示させる表示制御ステップと、
前記表示部に表示された前記評価関連画像を表す評価関連画像データに、前記第１種類の効果画像データ、または前記第２種類の効果画像データが設定され、かつ、該効果画像データが設定された前記評価関連画像データに基づく評価関連画像が前記表示部に複数表示されているか否かを判断する効果画像判断ステップと、
前記効果画像データが設定された前記評価関連画像データが表す前記評価関連画像が複数表示されていると前記効果画像判断ステップにより判断された場合、複数の前記評価関連画像データにそれぞれ設定された複数の前記効果画像データの中から第２条件に基づいて、１つの効果画像データを決定する効果画像決定ステップと、
をカラオケ装置のコンピュータに実行させ、
前記第1条件を満たすと前記評価判断ステップにより判断された場合、かつ、前記第１種類の効果画像データが設定された前記評価関連画像データが表す前記評価関連画像が複数表示されていると前記効果画像判断ステップにより判断された場合、前記第２条件に基づいて前記効果画像決定ステップが１つの前記第１種類の効果画像データを決定し、
前記第１条件を満たさないと前記評価判断ステップにより判断された場合、かつ、前記第２種類の効果画像データが設定された前記評価関連画像データが表す前記評価関連画像が複数表示されていると前記効果画像判断ステップにより判断された場合、前記第２条件に基づいて前記効果画像決定ステップが１つの前記第２種類の効果画像データを決定し、
前記表示制御ステップは、前記決定された効果画像データを前記効果画像記憶手段から読み出し、読み出された効果画像データに基づいて効果画像を前記表示部に表示させる
ことを特徴とするプログラム。