JP6638429B2 - Karaoke device and karaoke program - Google Patents

Karaoke device and karaoke program Download PDF

Info

Publication number
JP6638429B2
JP6638429B2 JP2016016137A JP2016016137A JP6638429B2 JP 6638429 B2 JP6638429 B2 JP 6638429B2 JP 2016016137 A JP2016016137 A JP 2016016137A JP 2016016137 A JP2016016137 A JP 2016016137A JP 6638429 B2 JP6638429 B2 JP 6638429B2
Authority
JP
Japan
Prior art keywords
performance
singing
user
evaluation
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2016016137A
Other languages
Japanese (ja)
Other versions
JP2017134341A (en
Inventor
永介 山下
永介 山下
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Brother Industries Ltd
Original Assignee
Brother Industries Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Brother Industries Ltd filed Critical Brother Industries Ltd
Priority to JP2016016137A priority Critical patent/JP6638429B2/en
Publication of JP2017134341A publication Critical patent/JP2017134341A/en
Application granted granted Critical
Publication of JP6638429B2 publication Critical patent/JP6638429B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Auxiliary Devices For Music (AREA)
  • Reverberation, Karaoke And Other Acoustics (AREA)
  • Electrophonic Musical Instruments (AREA)

Description

本発明は、ギター、ベース、キーボード等の楽器による演奏と歌唱を行うことのできるカラオケ装置、並びに、各種コンピュータで実行可能なカラオケ用プログラムに関する。   The present invention relates to a karaoke apparatus capable of performing and singing with instruments such as a guitar, a bass, and a keyboard, and a karaoke program executable by various computers.

従来、カラオケボックスやスナックなどのナイト店に設置されているカラオケ装置では、楽曲の演奏に合わせて歌唱を楽しむことが行われている。特許文献1には、歌唱のみならず楽器演奏を楽しむことのできるカラオケ装置が提案されている。この特許文献1に開示されるカラオケ装置は、カラオケ演奏されるパートの内、ミュート(消音)できるパートを表示し、利用者から指示されたパートをミュートし、当該パートのマイナスワン演奏を楽しむことができる。さらに、特許文献1に開示されるカラオケ装置では、画面にコード名を表示させて、演奏者に対してどのコードを演奏するべきかを指示し、紙の楽譜を用いずとも演奏を楽しむことが可能となっている。   2. Description of the Related Art Conventionally, karaoke devices installed in night shops such as karaoke boxes and snacks have enjoyed singing along with music performances. Patent Literature 1 proposes a karaoke apparatus that can enjoy not only singing but also playing musical instruments. The karaoke apparatus disclosed in Patent Literature 1 displays a mute (silence) part among karaoke performance parts, mutes a part instructed by a user, and enjoys the minus one performance of the part. Can be. Further, in the karaoke apparatus disclosed in Patent Literature 1, a chord name is displayed on a screen, a player is instructed which chord should be played, and the user can enjoy playing without using a sheet music. It is possible.

また、特許文献2には、楽曲の再生に合わせてギターのコード譜を表示することでギターの演奏支援を行う演奏情報表示装置が開示されている。この演奏情報表示装置は、ギターのコード演奏を支援するための複数種類の情報を、ユーザーにとって分かりやすい態様で表示することでギターの演奏支援を行いつつ、ギターの演奏評価を行っている。   Further, Patent Document 2 discloses a performance information display device that supports playing of a guitar by displaying a chord score of the guitar in accordance with the reproduction of a music piece. This performance information display device evaluates the performance of the guitar while supporting the performance of the guitar by displaying a plurality of types of information for supporting the chord performance of the guitar in a manner that is easy for the user to understand.

特開2001−100771号公報JP 2001-100771 A 特開2015−4794号公報JP-A-2015-4794

特許文献1、特許文献2に開示されるように自動演奏に合わせて楽器の演奏を行うことが行われている。従来、カラオケ装置では歌唱に対する採点(歌唱音声の評価)を行うことがよく知られている。このため、特許文献1、特許文献2に開示されるような自動演奏に合わせて楽器の演奏を行うカラオケ装置においても、歌唱採点と演奏採点(楽器演奏の評価)を行うことが考えられる。ところで、同じユーザーが楽曲の歌唱を行いながら楽器の演奏を行うことは、歌唱、演奏の両方にそれなりの技量が必要となることが考えられる。しかしながら、歌唱採点と演奏採点はそれぞれ独立して行われる程度であって、このような技量を評価することはできない。本発明は、同じユーザーが楽曲の歌唱を行いながら楽器の演奏を行うことを、歌唱評価あるいは演奏評価に加味した新たな評価を使用することで、ユーザーの技量を精度よく判定することを目的としている。   As disclosed in Patent Literature 1 and Patent Literature 2, a musical instrument is played along with an automatic performance. 2. Description of the Related Art Conventionally, it is well known that a karaoke apparatus scores a singing (evaluation of singing voice). For this reason, it is conceivable that a karaoke apparatus that plays a musical instrument in conjunction with an automatic performance as disclosed in Patent Literature 1 and Patent Literature 2 also performs singing scoring and performance scoring (evaluation of musical instrument performance). By the way, when the same user performs a musical instrument while singing a song, it is considered that both singing and performing require a certain level of skill. However, singing and performance scoring are performed independently of each other, and such skills cannot be evaluated. The present invention aims to accurately determine the user's skill by performing a musical performance while the same user sings a song, and by using a new evaluation in addition to the singing evaluation or performance evaluation. I have.

そのため、本発明に係るカラオケ装置は、以下の構成を採用する。
演奏情報に基づいて楽曲を再生する再生処理と、
楽器の演奏音を取得する演奏音取得処理と、
前記演奏音取得処理で判定された演奏音に基づき演奏評価値を算出する演奏評価処理と、
前記楽器を演奏するユーザーと歌唱を行うユーザーが同一であるか否かを判定する演奏形態判定処理と、
前記演奏形態判定処理の判定結果に基づいて、前記演奏評価処理で算出された演奏評価値を補正する補正処理と、を実行することを特徴とする。
Therefore, the karaoke apparatus according to the present invention employs the following configuration.
A reproduction process for reproducing music based on performance information;
Performance sound acquisition processing for acquiring the performance sound of the musical instrument;
Performance evaluation processing for calculating a performance evaluation value based on the performance sound determined in the performance sound acquisition processing;
Performance form determination processing for determining whether the user who plays the musical instrument and the user who sings are the same,
A correction process for correcting the performance evaluation value calculated in the performance evaluation process based on the determination result of the performance mode determination process.

また本発明に係るカラオケ装置は、
演奏情報に基づいて楽曲を再生する再生処理と、
マイクロホンに入力される歌唱音声を取得する歌唱音声取得処理と、
前記歌唱音声取得処理で判定された歌唱音声に基づき歌唱評価値を算出する歌唱評価処理と、
歌唱を行うユーザーと楽器を演奏するユーザーが同一であるか否かを判定する歌唱形態判定処理と、
前記歌唱形態判定処理の判定結果に基づいて、前記歌唱評価処理で算出された歌唱評価値を補正する補正処理と、を実行することを特徴とする。
Further, the karaoke apparatus according to the present invention,
A reproduction process for reproducing music based on performance information;
Singing voice acquisition processing for acquiring singing voice input to the microphone;
Singing evaluation processing to calculate a singing evaluation value based on the singing voice determined in the singing voice acquisition processing,
Singing form determination processing for determining whether the user who sings and the user who plays the instrument are the same,
And a correction process for correcting the singing evaluation value calculated in the singing evaluation process based on the result of the singing mode determination process.

さらに本発明に係るカラオケ装置は、
マイクロホンに入力される歌唱音声を取得する歌唱音声取得処理と、
前記歌唱音声取得処理で判定された歌唱音声に基づき歌唱評価値を算出する歌唱評価処理を実行することを特徴とする。
Further, the karaoke device according to the present invention is
Singing voice acquisition processing for acquiring singing voice input to the microphone;
A singing evaluation process for calculating a singing evaluation value based on the singing voice determined in the singing voice acquisition process is performed.

さらに本発明に係るカラオケ装置は、
楽器の演奏音を取得する演奏音取得処理と、
前記演奏音取得処理で判定された演奏音に基づき演奏評価値を算出する演奏評価処理と、を実行することを特徴とする。
Further, the karaoke device according to the present invention is
Performance sound acquisition processing for acquiring the performance sound of the musical instrument;
A performance evaluation process for calculating a performance evaluation value based on the performance sound determined in the performance sound acquisition process.

さらに本発明に係るカラオケ装置は、
算出された演奏評価値と歌唱評価値に基づいて総合評価値を算出することを特徴とする。
Further, the karaoke device according to the present invention is
A total evaluation value is calculated based on the calculated performance evaluation value and singing evaluation value.

さらに本発明に係るカラオケ装置において、
前記補正処理は、前記演奏情報に対応する区間において実行されることを特徴とする。
Further, in the karaoke apparatus according to the present invention,
The correction process is performed in a section corresponding to the performance information.

また本発明に係るカラオケ用プログラムは、
演奏情報に基づいて楽曲を再生する再生処理と、
楽器の演奏音を取得する演奏音取得処理と、
前記演奏音取得処理で判定された演奏音に基づき演奏評価値を算出する演奏評価処理と、
前記楽器を演奏するユーザーと歌唱を行うユーザーが同一であるか否かを判定する演奏形態判定処理と、
前記演奏形態判定処理の判定結果に基づいて、前記演奏評価処理で算出された演奏評価値を補正する補正処理と、をコンピュータに実行させることを特徴とする。
Also, the karaoke program according to the present invention,
A reproduction process for reproducing music based on performance information;
Performance sound acquisition processing for acquiring the performance sound of the musical instrument;
Performance evaluation processing for calculating a performance evaluation value based on the performance sound determined in the performance sound acquisition processing;
Performance form determination processing for determining whether the user who plays the musical instrument and the user who sings are the same,
And a correction process for correcting the performance evaluation value calculated in the performance evaluation process based on the result of the performance mode determination process.

また本発明に係るカラオケ用プログラムは、
演奏情報に基づいて楽曲を再生する再生処理と、
マイクロホンに入力される歌唱音声を取得する歌唱音声取得処理と、
前記歌唱音声取得処理で判定された歌唱音声に基づき歌唱評価値を算出する歌唱評価処理と、
歌唱を行うユーザーと楽器を演奏するユーザーが同一であるか否かを判定する歌唱形態判定処理と、
前記歌唱形態判定処理の判定結果に基づいて、前記歌唱評価処理で算出された歌唱評価値を補正する補正処理と、をコンピュータに実行させることを特徴とする。
Also, the karaoke program according to the present invention,
A reproduction process for reproducing music based on performance information;
Singing voice acquisition processing for acquiring singing voice input to the microphone;
Singing evaluation processing to calculate a singing evaluation value based on the singing voice determined in the singing voice acquisition processing,
Singing form determination processing for determining whether the user who sings and the user who plays the instrument are the same,
And a correction process for correcting the singing evaluation value calculated in the singing evaluation process based on the result of the singing mode determination process.

本発明のカラオケ装置、カラオケ用プログラムによれば、ユーザーの楽器演奏に対する演奏評価値、あるいは、ユーザーの歌唱に対する歌唱評価値に対し、演奏と歌唱を同時に行っているか否かに基づく補正を行うことで、演奏と歌唱を同時に行う技量に対する評価を行うことを可能とする。   According to the karaoke apparatus and the karaoke program of the present invention, the performance evaluation value for the user's musical instrument performance or the singing evaluation value for the user's singing is corrected based on whether the performance and the singing are performed simultaneously. Thus, it is possible to evaluate the skill of simultaneously performing and singing.

さらに本発明によれば、ユーザーを撮影した撮像情報に基づいて、歌唱を行うユーザーと楽器を演奏するユーザーが同一であるか否かを判定することとしている。このような構成により、ユーザーを撮影する簡易な手法により、歌唱を行うユーザーと楽器を演奏するユーザーが同一であるか否かを判定することが可能となっている。   Further, according to the present invention, it is determined whether or not the user who sings and the user who plays the musical instrument are the same based on the imaging information of the user. With such a configuration, it is possible to determine whether the user who sings and the user who plays the instrument are the same by a simple method of photographing the user.

さらに本発明によれば、入力手段に入力された設定情報に基づいて、歌唱を行うユーザーと楽器を演奏するユーザーが同一であるか否かを判定することとしている。このような構成により、外部からの簡易な入力にて判定を行うことが可能となる。また、撮像情報等を解析することによる複雑な処理を必要としない。   Further, according to the present invention, it is determined whether the user who sings and the user who plays the musical instrument are the same based on the setting information input to the input means. With such a configuration, it is possible to make a determination with a simple external input. Further, complicated processing by analyzing imaging information or the like is not required.

さらに本発明によれば、演奏評価値と歌唱評価値のそれぞれを算出することで、楽器の演奏、歌唱の評価の両方について評価を行うことが可能となる。   Further, according to the present invention, by calculating each of the performance evaluation value and the singing evaluation value, it is possible to evaluate both the performance of the musical instrument and the evaluation of the singing.

さらに本発明によれば、演奏評価値と歌唱評価値に基づいて総合評価値を算出することで、演奏と歌唱の両方を加味した総合評価値をユーザーに提示することが可能となる。なお、この総合評価値は、楽器を演奏するユーザーと歌唱を行うユーザーが同一である場合において、当該ユーザーに対する総合評価値としてもよい。   Further, according to the present invention, it is possible to present a comprehensive evaluation value that takes into account both performance and singing to the user by calculating the overall evaluation value based on the performance evaluation value and the singing evaluation value. Note that, when the user who plays the musical instrument and the user who sings are the same, the overall evaluation value may be the overall evaluation value for the user.

さらに本発明によれば、演奏情報に対応する演奏区間において補正処理を実行することとしている。楽曲においては、歌唱だけを行う区間、演奏だけを行う区間、歌唱と演奏の両方を行う区間が存在する場合がある。演奏情報に対応する演奏区間において補正処理を実行することで、演奏される各楽曲に対応した適切な補正を行うことが可能となる。   Further, according to the present invention, the correction processing is executed in a performance section corresponding to the performance information. In music, there may be a section where only singing is performed, a section where only performing is performed, and a section where both singing and performing are performed. By performing the correction process in the performance section corresponding to the performance information, it is possible to perform appropriate correction corresponding to each music piece to be played.

カラオケシステムの構成を示す図Diagram showing the configuration of the karaoke system 楽曲の予約確認画面を示す図Figure showing the song reservation confirmation screen (A)予約情報、(B)楽曲情報のデータ構成を示す図FIG. 3A shows a data configuration of reservation information, and FIG. カラオケ装置のメイン処理を示すフロー図Flow chart showing main processing of the karaoke apparatus 演奏用再生処理を示すフロー図Flow chart showing performance playback processing 演奏形態、歌唱形態の判定を説明するための模式図Schematic diagram for explaining the determination of the playing form and the singing form 演奏用再生処理時のモニターの様子を示す図Diagram showing the monitor during playback processing for performance 演奏評価結果画面を示す図Figure showing performance evaluation result screen 歌唱用再生処理を示すフロー図Flow chart showing singing playback processing 歌唱評価結果画面を示す図Figure showing the singing evaluation result screen

図1は、本実施形態のカラオケシステムの構成を示す図である。本実施形態におけるカラオケシステムは、カラオケ装置2と、リモコン装置1にて構成されおり、これらは、LAN100にて、無線、有線で通信可能なように互いに接続されている。   FIG. 1 is a diagram showing a configuration of the karaoke system of the present embodiment. The karaoke system according to the present embodiment includes a karaoke device 2 and a remote control device 1, which are connected to each other via a LAN 100 so as to be able to perform wireless and wired communication.

店舗に設置されるカラオケ装置2は、リモコン装置1によりユーザーからの各種指示を受け付けることが可能となっている。また、リモコン装置1は表示部11と操作部17が共有されたタッチパネル表示画面を備え、ユーザーに対して各種情報を提供することも可能である。リモコン装置1は、LAN100上に設置されたアクセスポイント110を介してカラオケ装置2と無線接続される。図中に示されるように、例えばカラオケ装置2にはリモコン装置1が対応付けられ、LAN100を介して情報を送受信することが可能となっている。また、リモコン装置1とカラオケ装置2とは赤外線などを利用した近距離通信を行うことも可能である。   The karaoke device 2 installed in the store can receive various instructions from the user by the remote control device 1. Further, the remote control device 1 includes a touch panel display screen in which the display unit 11 and the operation unit 17 are shared, and can provide various information to a user. Remote control device 1 is wirelessly connected to karaoke device 2 via access point 110 installed on LAN 100. As shown in the figure, for example, the karaoke apparatus 2 is associated with the remote control apparatus 1, and can transmit and receive information via the LAN 100. Further, the remote control device 1 and the karaoke device 2 can also perform short-range communication using infrared rays or the like.

さらに、本実施形態のカラオケシステムでは、ユーザーに各種サービスを提供するためインターネットを介してカラオケ用ホスト5(サーバー装置)が設けられ、その記憶部51には、楽曲情報やユーザー情報など、各種サービスに必要な情報を記憶している。そして、ルータ120を通じて、カラオケ装置2、又はリモコン装置1と、各種情報の送受信が行えるように構成されている。   Further, in the karaoke system of the present embodiment, a karaoke host 5 (server device) is provided via the Internet to provide various services to the user, and the storage unit 51 stores various services such as music information and user information. Necessary information is stored. The karaoke device 2 or the remote control device 1 is configured to transmit and receive various information via the router 120.

本発明の実施形態に係る楽曲演奏装置としてのカラオケ装置2は、全体を統括制御する制御部30を中心として機能し、主な機能として、楽曲演奏を実行する楽曲演奏処理を行う。記憶手段としてのハードディスク32には、楽曲演奏処理で使用する楽曲情報が記憶されている。   The karaoke apparatus 2 as a music performance apparatus according to the embodiment of the present invention functions mainly as a control unit 30 that performs overall control, and performs music performance processing for executing music performance as a main function. The hard disk 32 as storage means stores music information used in music performance processing.

本実施形態では、カラオケ装置2に対して外部楽器44bを接続可能としている。外部楽器44bとしては、ギター、ベース、バイオリン等、弦を弾くことで演奏音を奏でる各種撥弦楽器の他、キーボード、ドラム等各種楽器を使用することが可能である。ギターやベース等の撥弦楽器を使用する本実施形態の場合、外部楽器44bはケーブルを介してカラオケ装置2に接続され、ユーザーの演奏によって発生する演奏音情報をカラオケ装置2に送信する。外部楽器44bから入力された演奏音情報は、音響制御部52にて演奏される演奏情報とミキシングされてスピーカー42から放音される。なお、外部楽器44bには、電気的な音響出力を有さないアコースティックな楽器を採用してもよい。その場合には、マイクロホンで拾った楽器音を演奏音情報として音響制御部52に入力することが考えられる。   In the present embodiment, an external musical instrument 44b can be connected to the karaoke apparatus 2. As the external musical instrument 44b, various musical instruments such as a keyboard, a drum, and the like can be used, in addition to various plucked musical instruments such as a guitar, a bass, and a violin that play a performance sound by playing a string. In the case of the present embodiment using a plucked string instrument such as a guitar or a bass, the external musical instrument 44b is connected to the karaoke apparatus 2 via a cable, and transmits performance sound information generated by the user's performance to the karaoke apparatus 2. The performance sound information input from the external musical instrument 44 b is mixed with the performance information to be performed by the sound control unit 52 and is emitted from the speaker 42. Note that an acoustic instrument having no electric sound output may be adopted as the external instrument 44b. In that case, it is conceivable that the instrument sound picked up by the microphone is input to the acoustic control unit 52 as performance sound information.

さらに、カラオケ装置2は、カメラ43が接続されており、カメラ43が撮像した撮像情報を取り込み可能としている。本実施形態では、このカメラ43にて撮像された撮像情報に基づいて、ユーザーの演奏形態、もしくは、歌唱形態が判定される。なお、本実施形態でいう演奏形態とは、ユーザーが外部楽器44bを演奏するための楽曲再生(後に説明する演奏用再生処理)を実行している際、同一のユーザーが演奏と歌唱の両方を行っているか否かの形態である。また、歌唱形態とは、ユーザーが歌唱するための楽曲再生(後に説明する歌唱用再生処理)を実行している際、同一のユーザーが演奏と歌唱の両方を行っているか否かの形態である。   Further, the karaoke apparatus 2 is connected to a camera 43, and can capture image information captured by the camera 43. In the present embodiment, the performance mode or the singing mode of the user is determined based on the imaging information captured by the camera 43. It should be noted that the performance form referred to in the present embodiment means that when the user is performing music reproduction for performing the external instrument 44b (performance reproduction processing described later), the same user performs both performance and singing. It is a form of whether or not it is performed. In addition, the singing form is a form of whether or not the same user is performing both performance and singing when the user is performing music reproduction (singing reproduction processing described later) for singing. .

図2には、本実施形態の楽曲確認画面が示されている。本実施形態のカラオケシステムは、複数のユーザーが同時にログインして使用することが可能である。図2に示す楽曲確認画面の上方には、カラオケシステムにログインしているユーザーに関する情報が表示されている。ログインユーザー欄103には、カラオケシステムにログインしているユーザーの分身像103a〜103e(本実施形態では顔部分)が表示される。またログインユーザー欄103中、右端に背景がハイライト(白色)で示されるユーザーは、アクティブユーザー103e(この例ではAさん)であって、アクティブユーザー103eに対するサービス、すなわち、アクティブユーザー103eのユーザー情報を利用したサービスが実行されている状態となっている。アクティブユーザーの切り替えは、ユーザー切り替えボタン101を操作することで行うことが可能である。また、ユーザー登録していないユーザーは、ゲストボタン102を操作することで、ゲストユーザーとしてカラオケシステムを使用することが可能である。   FIG. 2 shows a music confirmation screen of the present embodiment. The karaoke system of the present embodiment allows a plurality of users to log in and use at the same time. Above the music confirmation screen shown in FIG. 2, information about the user who has logged in to the karaoke system is displayed. In the login user column 103, alternation images 103a to 103e of the user who has logged in to the karaoke system (face parts in this embodiment) are displayed. In the login user column 103, the user whose background is highlighted (white) at the right end is the active user 103e (Mr. A in this example), and a service for the active user 103e, that is, user information of the active user 103e. The service using is running. Switching of the active user can be performed by operating the user switching button 101. A user who has not registered as a user can use the karaoke system as a guest user by operating the guest button 102.

アクティブユーザーとして楽曲を選択した場合、この楽曲確認画面にて、予約を行う楽曲に間違いがないか、楽曲名、歌手名、歌い出し等の詳細を表示してユーザーに確認させる。本実施形態の楽曲確認画面には、オプション設定欄105が設けられている。オプション設定欄105を選択することで、選択している楽曲について、マイクロホン44aを使用した歌唱評価を行うのか、外部楽器44bを使用した演奏評価を行うのか、両方を行うのか、を選択することができる。オプション設定欄105の右下に表示された変更ボタンを各々操作することで、子画面(図示せず)が表示され、予約する楽曲に対する再生形態を設定することが可能である。本実施形態では、歌唱評価、演奏評価、歌唱と演奏の両方の評価を択一的に選択可能としている(図2の例では、歌唱評価を選択した状態となっている)。なお、外部楽器44bの利用を選択した場合、楽曲再生時には通常の歌唱支援のための歌詞表示に加え、外部楽器44bの演奏支援するためのコード表示等が行われる。   When a tune is selected as the active user, the user confirms the tune to be reserved by displaying details such as a tune name, a singer name, and a singing start on the tune confirmation screen. An option setting column 105 is provided on the music confirmation screen of the present embodiment. By selecting the option setting field 105, it is possible to select whether to perform singing evaluation using the microphone 44a, performance evaluation using the external instrument 44b, or both for the selected music. it can. By operating each of the change buttons displayed at the lower right of the option setting column 105, a child screen (not shown) is displayed, and it is possible to set a reproduction mode for the music to be reserved. In the present embodiment, singing evaluation, performance evaluation, and both singing and performance evaluations can be selectively selected (in the example of FIG. 2, the singing evaluation is selected). When the use of the external instrument 44b is selected, at the time of music reproduction, in addition to the lyrics display for normal singing support, a code display or the like for supporting the performance of the external instrument 44b is performed.

楽曲確認画面において、歌唱する楽曲であることを確認したユーザーは、予約ボタン106を操作することで、楽曲の予約を確定させる。リモコン装置1を使用して楽曲を予約した場合、リモコン装置1からカラオケ装置2に予約情報が送信される。図3(A)は、予約情報のデータ構成を示した図である。予約情報は、予約した楽曲を識別するための楽曲ID、予約を行ったユーザー(アクティブユーザー)を識別するためのユーザーIDの他、オプション設定欄105の設定に基づく再生形態情報(0:演奏評価、1:歌唱評価、2:演奏評価&歌唱評価)が含まれている。カラオケ装置2は、カラオケ装置2のメモリ27で管理する予約テーブルに、受信した予約情報を順次記憶して、楽曲再生処理を実行する。   On the song confirmation screen, the user who has confirmed that the song is to be sung operates the reservation button 106 to confirm the reservation of the song. When music is reserved using the remote control device 1, the reservation information is transmitted from the remote control device 1 to the karaoke device 2. FIG. 3A shows a data structure of the reservation information. The reservation information includes a music ID for identifying the reserved music, a user ID for identifying the user who made the reservation (active user), and reproduction mode information (0: performance evaluation) based on the settings in the option setting column 105. , 1: singing evaluation, 2: performance evaluation & singing evaluation). The karaoke apparatus 2 sequentially stores the received reservation information in a reservation table managed by the memory 27 of the karaoke apparatus 2, and executes a music reproduction process.

図3(B)は、楽曲情報のデータ構成を示した図である。楽曲情報は、楽曲情報に関連する各種情報であるメタ情報と、演奏や歌詞の表示といった各種処理を実行するための実情報を有している。メタ情報には、楽曲情報を識別するための楽曲ID、曲名、歌手名、楽器演奏時の難易度等、楽曲関連情報を有している。楽曲関連情報は、ユーザーが楽曲を検索する際の検索対象項目として使用することが可能である。   FIG. 3B is a diagram showing a data configuration of music information. The music information has meta information, which is various information related to the music information, and actual information for executing various processes such as displaying performances and lyrics. The meta information includes music-related information such as a music ID for identifying music information, a music title, a singer name, a difficulty level when playing an instrument, and the like. The song-related information can be used as a search target item when the user searches for songs.

楽曲情報の実情報には、演奏情報、歌詞情報、演奏評価情報、歌唱評価情報が含まれている。演奏情報は、MIDI規格に基づいて電子楽器用の制御情報、あるいは、実際の演奏を録音した圧縮音声情報等を含んで構成された、カラオケの伴奏音を演奏するための情報である。歌詞情報は、歌唱補助のため、演奏情報に同期して表示される情報であり、演奏に同期して表示された歌詞の色替えを行うように構成してもよい。演奏評価情報は、楽曲再生時において、ユーザーが外部楽器44bの演奏を支援するための情報である。例えば、外部楽器44bがギターの場合、楽曲の演奏進行に対応付けたギターコードで構成される。楽曲再生時、演奏評価情報に基づく情報(ギターの場合、演奏すべきコード等)をモニター41に表示することで、ユーザーの演奏支援を行うことが可能である。   The actual information of the music information includes performance information, lyrics information, performance evaluation information, and singing evaluation information. The performance information is control information for an electronic musical instrument based on the MIDI standard, or information for playing a karaoke accompaniment sound, which includes compressed audio information obtained by recording an actual performance. The lyrics information is information displayed in synchronization with the performance information to assist the singing, and the lyrics displayed in synchronization with the performance may be changed in color. The performance evaluation information is information for assisting the user in playing the external musical instrument 44b during music reproduction. For example, when the external musical instrument 44b is a guitar, the external musical instrument 44b is composed of a guitar chord associated with the progress of the music. At the time of music reproduction, by displaying information based on the performance evaluation information (in the case of a guitar, a chord to be performed, etc.) on the monitor 41, it is possible to support the performance of the user.

演奏評価情報は、ユーザーの外部楽器44bの演奏に対する評価(演奏評価処理)にも使用される。演奏評価処理では、楽曲の再生時、外部楽器44bから出力された演奏音と、演奏評価情報を対比することで、外部楽器44bによる適切な演奏が行われたか否かを判定し、評価結果としての演奏評価値が算出される。なお、カラオケ装置2では、歌唱しやすいように楽曲の音程(キー)を変更する機能が設けられている。音程変更が行われた場合、演奏評価情報も同様に音程変更が反映されて、演奏支援の表示、演奏評価処理に使用される。   The performance evaluation information is also used for evaluating the user's performance of the external instrument 44b (performance evaluation processing). In the performance evaluation processing, at the time of music reproduction, the performance sound output from the external instrument 44b is compared with the performance evaluation information to determine whether or not an appropriate performance by the external instrument 44b has been performed. Is calculated. Note that the karaoke apparatus 2 has a function of changing the pitch (key) of a musical piece so that it can be easily sung. When the pitch is changed, the performance evaluation information is also used for display of performance support and performance evaluation processing by reflecting the pitch change.

歌唱評価情報は、ユーザーが歌唱評価の再生形態を選択した場合に使用される情報であり、主旋律などユーザーが歌唱すべき音高を規定した情報である。歌唱評価処理では、楽曲の再生時、マイクロホン44aから出力された歌唱音声と、歌唱評価情報を対比することで、適切な歌唱が行われたか否かを判定し、評価結果としての歌唱評価値が算出される。なお、この場合も同様に、音程変更が行われた場合、歌唱評価情報も同様に音程変更が反映されて歌唱評価処理が行われる。なお、これら演奏評価情報、歌唱評価情報は、演奏情報のパートとして形成することも可能である。   The singing evaluation information is information used when the user selects a singing evaluation reproduction mode, and is information that defines the pitch to be sung by the user, such as the main melody. In the singing evaluation processing, at the time of reproducing the music, by comparing the singing voice output from the microphone 44a with the singing evaluation information, it is determined whether or not an appropriate singing has been performed. Is calculated. In this case, similarly, when the pitch is changed, the singing evaluation information is similarly reflected in the singing evaluation information, and the singing evaluation process is performed. The performance evaluation information and the singing evaluation information can be formed as parts of the performance information.

図4は、カラオケ装置2で実行されるメイン処理を示すフロー図である。カラオケ装置2は、予約テーブルのチェックを行い(S101)、次に再生すべき再生の楽曲があると判定した場合(S102:Yes)、予約情報中の再生形態情報を参照し、外部楽器44bを使用した演奏評価を行うのか、マイクロホン44aを使用した歌唱評価を行うのかを判定する(S103)。外部楽器44bを使用した演奏評価を行う場合(S103:演奏評価)には、演奏用再生処理(S200)を実行する。一方、マイクロホン44aを使用した歌唱評価を行う場合(S103:歌唱評価)には、歌唱用再生処理(S300)を実行する。   FIG. 4 is a flowchart showing a main process executed by the karaoke apparatus 2. The karaoke apparatus 2 checks the reservation table (S101), and when it is determined that there is a music piece to be reproduced next (S102: Yes), the karaoke apparatus 2 refers to the reproduction form information in the reservation information and controls the external musical instrument 44b. It is determined whether the performance evaluation is performed or the singing evaluation is performed using the microphone 44a (S103). When performance evaluation using the external musical instrument 44b is performed (S103: performance evaluation), a performance reproduction process (S200) is executed. On the other hand, when singing evaluation using the microphone 44a is performed (S103: singing evaluation), singing reproduction processing (S300) is performed.

まず、演奏用再生処理(S200)について、図5〜図8を用いて説明する。図5は、演奏用再生処理(S200)の詳細を示すフロー図である。演奏用再生処理(S200)が開始されると、まず、楽曲情報中の実情報(演奏情報、歌詞情報、演奏評価情報)を使用した楽曲再生が開始される(S201)。具体的には、音響制御部52にて演奏情報を再生し、映像再生部28にて、歌詞情報、演奏評価情報を使用した各種支援情報の表示が行われる。なお、演奏情報中、使用する外部楽器44bの演奏パートは、再生しない、あるいは、音量を小さくするといった、いわゆるマイナスワン再生を行うこととしてもよい。   First, the performance reproduction process (S200) will be described with reference to FIGS. FIG. 5 is a flowchart showing details of the performance reproduction process (S200). When the performance reproduction process (S200) is started, music reproduction using actual information (performance information, lyrics information, performance evaluation information) in the music information is started (S201). Specifically, the sound control unit 52 reproduces the performance information, and the video reproduction unit 28 displays various kinds of support information using the lyrics information and the performance evaluation information. In the performance information, the performance part of the external instrument 44b to be used may not be reproduced or the volume may be reduced, so-called minus one reproduction.

図7は、楽器演奏処理時のモニター41の様子を示す図である。本実施形態では、外部楽器44bにギターを使用した場合であって、ギターコードの表示による演奏支援が行われる形態となっている。楽曲の再生時、モニター41には、歌唱を支援するための歌詞表示欄65が表示される。歌詞表示欄65には、楽曲の再生進行に同期して歌詞情報が表示される。表示された歌詞情報は、再生進行に同期した色変えが施されている。モニター41の右上には予定コード表示欄62が設けられている。これは、今後、演奏が予定されるギターコードが時系列順に左から右に表示されている。予定コード表示欄62の下には、コードタイミング表示欄63が設けられている。コードタイミング表示欄63の左には、現在演奏すべき現在コード63aが位置している。タイミングバー63bは、コードタイミング表示欄63中を右から左にスクロールする。タイミングバー63bが現在コード63aを通過するときが、現在コード63aに表示されるギターコードの演奏タイミングである。   FIG. 7 is a diagram illustrating a state of the monitor 41 during the musical instrument performance processing. In the present embodiment, a guitar is used as the external musical instrument 44b, and the performance is supported by displaying a guitar chord. At the time of music reproduction, the monitor 41 displays a lyrics display field 65 for assisting singing. In the lyrics display field 65, lyrics information is displayed in synchronization with the progress of music playback. The displayed lyrics information has undergone a color change synchronized with the progress of the reproduction. A schedule code display column 62 is provided at the upper right of the monitor 41. Here, guitar chords to be performed in the future are displayed in chronological order from left to right. Below the scheduled code display column 62, a code timing display column 63 is provided. On the left of the chord timing display column 63, a current chord 63a to be currently played is located. The timing bar 63b scrolls the code timing display field 63 from right to left. The timing when the timing bar 63b passes the current chord 63a is the performance timing of the guitar chord displayed on the current chord 63a.

タイミングバー63bが現在コード63aを通過し終え、現在コード63aの演奏タイミングが終了すると、予定コード表示欄62の一番左に位置する予定コードが、現在コード63aの位置にスクロールして、次の現在コード63aとなる。予定コード表示欄62内では、一番左に位置する予定コードが無くなったことで、全体が左方向にスライドし、一番右には新たな予定コードが加えられる。さらに、モニター左側には、外部楽器44b(ギター)の指板上の運指が表示されている。一番上には、現在運指64aが表示され、現在、演奏すべきコードの運指が示されている。現在運指64aの下方には、次運指64b、次々運指64cが表示されている。現在コード63aの演奏タイミングが終了する毎に、現在運指64a〜次々運指64cは上にスクロールしていく。ユーザーは、予定コード表示欄62、コードタイミング表示欄63、現在運指64a〜次々運指64cを参照して、外部楽器44bを演奏することができる。   When the timing bar 63b finishes passing the current chord 63a and the performance timing of the current chord 63a ends, the schedule code located at the leftmost of the schedule chord display column 62 scrolls to the position of the current chord 63a, and The current code is 63a. In the scheduled code display field 62, the leftmost scheduled code is eliminated, so that the whole is slid to the left and a new scheduled code is added to the rightmost. Further, fingering on the fingerboard of the external musical instrument 44b (guitar) is displayed on the left side of the monitor. At the top, the current fingering 64a is displayed, and the fingering of the chord to be currently played is shown. Below the fingering 64a, the next fingering 64b and the next fingering 64c are displayed. Every time the performance timing of the current chord 63a ends, the current fingering 64a to the next fingering 64c scroll upward. The user can play the external musical instrument 44b with reference to the scheduled chord display section 62, the chord timing display section 63, and the current fingering 64a to the next fingering 64c.

さらに、モニター41の左上には現在採点値(演奏評価値)が表示されている。現在採点値は、外部楽器44bの演奏に対する演奏評価値であって、外部楽器44bから出力された演奏音情報と、演奏評価情報中の現在演奏すべきコード(コードタイミング表示欄63中、タイミングバー63bが重畳している現在コード63a)とを対比して、適切な演奏に対して加算された演奏評価値である。   Further, the current scoring value (performance evaluation value) is displayed at the upper left of the monitor 41. The current score value is a performance evaluation value for the performance of the external instrument 44b, and includes the performance sound information output from the external instrument 44b and the code to be currently played in the performance evaluation information (the timing bar in the code timing display column 63, This is a performance evaluation value added to an appropriate performance by comparing the current code 63a) with the superimposed current code 63b.

演奏用再生処理の期間中、ユーザーはモニター41に表示された各種情報を参照しつつ、外部楽器44bの演奏、歌唱を行うことが可能である。また、楽器演奏処理中には、外部楽器44bの演奏に対する採点値(演奏評価値)の算出が行われる。本実施形態では、外部楽器44bの演奏音情報と演奏評価情報を対比することで適切な演奏が行われたか否かを判定する演奏評価処理(S202)が実行される。例えば、図7の例では、タイミングバー63bが重畳している現在コード63a(A7)が適切なタイミングで演奏されたか否かが判定される。演奏評価処理(S202)では、現在コード63aが演奏されたか否か、また、その演奏タイミングに応じて演奏評価値が算出される。   During the performance reproduction process, the user can perform and sing the external instrument 44b while referring to various information displayed on the monitor 41. Further, during the musical instrument performance processing, a score value (performance evaluation value) for the performance of the external musical instrument 44b is calculated. In the present embodiment, performance evaluation processing (S202) is performed in which the performance sound information of the external instrument 44b is compared with the performance evaluation information to determine whether or not an appropriate performance has been performed. For example, in the example of FIG. 7, it is determined whether or not the current chord 63a (A7) on which the timing bar 63b is superimposed has been played at an appropriate timing. In the performance evaluation process (S202), a performance evaluation value is calculated according to whether or not the chord 63a is currently played and the performance timing.

ところで、本実施形態では、図7に示すように歌詞表示欄65に表示された歌詞によって、外部楽器44bの演奏を行いながら歌唱することも可能である。外部楽器44bを演奏しながら歌唱を行うことは、演奏及び歌唱の両方に注意を払うことが必要であるため、演奏のみを行う、あるいは、歌唱のみを行うことに比較して難易度が高い。従来の演奏評価あるいは歌唱評価では、このような両方に対する配慮は行われていなかった。本実施形態では、演奏評価を行う際、外部楽器44bの演奏に加えて歌唱しているか否かといった演奏形態を判定し、同じユーザーが両方行っていると判定した場合、演奏評価に対して加点する補正処理を行うことで、上述する演奏と歌唱の両方を行うことの難易度を考慮している。また、歌唱評価を行う際にも、歌唱に加えて外部楽器44bの演奏を行っているか否かといった歌唱形態を判定し、同じユーザーが両方行っていると判定した場合、歌唱評価に対して加点する補正処理を行うこととしている。   By the way, in the present embodiment, it is also possible to sing while performing the external instrument 44b by the lyrics displayed in the lyrics display field 65 as shown in FIG. Performing a singing while playing the external instrument 44b is more difficult than performing only the performance or performing only the singing because it is necessary to pay attention to both the performance and the singing. In conventional performance evaluation or singing evaluation, no consideration has been given to both of these. In the present embodiment, when performing the performance evaluation, a performance mode such as whether or not the user sings is determined in addition to the performance of the external instrument 44b. By performing the correction process described above, the difficulty level of performing both the performance and the singing described above is considered. Also, when performing the singing evaluation, the singing form such as whether or not the external instrument 44b is performed in addition to the singing is determined, and when it is determined that the same user performs both, the score is added to the singing evaluation. Correction processing to be performed.

図6は、演奏形態、歌唱形態の判定を説明するための模式図である。本実施形態では、カメラ43で撮影した撮像情報に基づいて、演奏形態(あるいは歌唱形態)の判定を行う。演奏形態(あるいは歌唱形態)には、図6(A)〜図6(D)に示す各種形態が考えられる。図6(A)は同じユーザーが演奏と歌唱を同時に行っている形態である。このような場合、カメラ43で撮像した撮像情報に対して画像解析を行い、マイクロホン44aと外部楽器44bの位置の検出を行う。例えば、マイクロホン44aと外部楽器44b間の距離が閾値以内である、あるいは、マイクロホン44aと外部楽器44bの両方が、ユーザーの頭部81aや体躯81bから所定範囲内に位置していること等を条件として、同一ユーザーが演奏と歌唱の両方を行っていると判定することが可能である。   FIG. 6 is a schematic diagram for explaining the determination of the performance mode and the singing mode. In the present embodiment, a performance mode (or a singing mode) is determined based on the imaging information captured by the camera 43. Various forms shown in FIGS. 6A to 6D are conceivable as performance forms (or singing forms). FIG. 6A shows a form in which the same user performs and sings simultaneously. In such a case, image analysis is performed on the imaging information captured by the camera 43, and the positions of the microphone 44a and the external musical instrument 44b are detected. For example, the condition is that the distance between the microphone 44a and the external musical instrument 44b is within a threshold, or both the microphone 44a and the external musical instrument 44b are located within a predetermined range from the user's head 81a and the body 81b. It can be determined that the same user is performing both performance and singing.

図6(B)は、歌唱のみを行っている形態である。この場合、撮像情報からはマイクロホン44aのみが検出されるため、ユーザーは演奏と歌唱の両方を行っていないと判定される。図6(C)は、演奏のみを行っている形態である。この場合、撮像情報からは外部楽器44bのみが検出されるため、ユーザーは演奏と歌唱の両方を行っていないと判定される。図6(D)は、ユーザーAが歌唱を行い、ユーザーBが演奏を行っている場合である。この場合、撮像情報中にはマイクロホン44aと外部楽器44bの両方が検出されることになるが、マイクロホン44aと外部楽器44b間の距離が閾値以内である、あるいは、マイクロホン44aと外部楽器44bの両方が、ユーザーの頭部81aや体躯81bから所定範囲内に位置していること等を条件に使用することで、同一ユーザーは演奏と歌唱の両方を行っていないと判定することが可能である。   FIG. 6B shows a form in which only singing is performed. In this case, since only the microphone 44a is detected from the imaging information, it is determined that the user has not performed both performance and singing. FIG. 6C shows a form in which only performance is performed. In this case, since only the external instrument 44b is detected from the imaging information, it is determined that the user has not performed both performance and singing. FIG. 6D illustrates a case where the user A sings and the user B performs. In this case, both the microphone 44a and the external musical instrument 44b are detected in the imaging information, but the distance between the microphone 44a and the external musical instrument 44b is within a threshold, or both the microphone 44a and the external musical instrument 44b are detected. However, it is possible to determine that the same user does not perform both the performance and the singing by using the condition that the user is located within a predetermined range from the user's head 81a and the body 81b.

演奏形態(あるいは歌唱形態)について、同一ユーザーが演奏と歌唱の両方を行っているか否かは、撮像情報中の外部楽器44b、マイクロホン44aの位置を使用することに代えて各種形態を採用することが可能である。例えば、マイクロホン44aの位置を使用することに代え、ユーザーの口の動きを使用することとしてもよい。簡易的には、外部楽器44bを所持しているユーザーの口が動いている場合、当該ユーザーは演奏と歌唱を同時に行っていると判定される。また、より正確に行うには、外部楽器44bを所持しているユーザーの口が歌唱すべき歌詞に合わせて動いていることを、判定の条件に使用することが考えられる。   Regarding the performance form (or singing form), it is determined whether or not the same user performs both the performance and the singing by using various forms instead of using the positions of the external instrument 44b and the microphone 44a in the imaging information. Is possible. For example, instead of using the position of the microphone 44a, the movement of the user's mouth may be used. For simplicity, when the mouth of the user holding the external instrument 44b is moving, it is determined that the user is performing and singing at the same time. Further, in order to perform the determination more accurately, it is conceivable to use the fact that the mouth of the user possessing the external musical instrument 44b moves in accordance with the lyrics to be sung as a condition for the determination.

また本実施形態のように、カメラ43でユーザーを撮像する形態以外の形態を採用することも可能である。例えば、楽曲予約時の楽曲確認画面において、ユーザーが歌唱と演奏を同時に行うか否かを指定可能とし、ユーザーによる指定に基づく設定情報を使用して、同一ユーザーが演奏と歌唱の両方を行っているか否かを判定してもよい。例えば、オプション設定欄105に、「1人で両方」設定ボタンを設けることで、予約者であるユーザー(本実施例においては、表示部11のAさん)が演奏と歌唱の両方を行うか否かを設定可能とする。この場合、同一ユーザーが演奏と歌唱の両方を行なう設定情報が予約情報中に含まれることとなり、演奏用再生処理(S200)における演奏形態、あるいは、歌唱用再生処理(S300)における歌唱形態の判定に、その設定情報が使用され、以下に説明する演奏用再生処理時における(S205)では(S205:YES)として処理される。同様に歌唱用再生処理時における(S305)においても(S305:YES)として処理される。   Further, as in the present embodiment, it is also possible to adopt a mode other than the mode in which the camera 43 images the user. For example, on the music confirmation screen at the time of music reservation, it is possible for the user to specify whether to perform singing and performance at the same time, and using the setting information based on the specification by the user, the same user performs both performance and singing It may be determined whether or not there is. For example, by providing a “both alone” setting button in the option setting field 105, it is determined whether the user who is the reservation person (in this embodiment, Mr. A on the display unit 11) performs both performance and singing. Can be set. In this case, the setting information for performing the performance and singing by the same user is included in the reservation information, and the determination of the performance mode in the performance reproduction process (S200) or the singing mode in the singing reproduction process (S300) is made. Then, the setting information is used, and the processing is performed as (S205: YES) in (S205) in the performance reproduction processing described below. Similarly, in (S305) at the time of the singing reproduction process, it is also processed as (S305: YES).

この場合、ユーザー自身の設定に基づくため、評価の向上を目的とした不正が行われる可能性がある。したがって、ユーザーが歌唱と演奏を同時に行うか否かの指定は、他のユーザーによって行う仕様としてもよい。例えば、演奏用再生処理(S200)あるいは歌唱用再生処理(S300)を実行中、リモコン装置1等のインターフェイスを使用して、「演奏と歌唱が同時に行われていますか?」などのメッセージを表示して、他のユーザーからその正否を受け付けることで、設定情報を形成してもよい。さらには、ログインユーザー中、歌唱または演奏を行っているユーザー以外のユーザーのみから指定を受け付け可能とすることで、判定の客観性を担保し、上述する不正をさらに抑制することが可能である。   In this case, since it is based on the user's own setting, there is a possibility that a fraud for the purpose of improving the evaluation is performed. Therefore, the specification of whether or not the user performs the singing and the performance at the same time may be specified by another user. For example, during execution of the reproduction process for performance (S200) or the reproduction process for singing (S300), a message such as “Is performance and singing performed simultaneously?” Is displayed using an interface of the remote control device 1 or the like. Then, the setting information may be formed by accepting the right or wrong from another user. Furthermore, by allowing designation only from users other than the user who is singing or performing among the logged-in users, it is possible to ensure the objectivity of the determination and further suppress the above-mentioned fraud.

演奏形態判定処理(S204)で判定されたユーザーの演奏形態は、演奏評価処理(S202)で算出された演奏評価値を補正する補正処理(S206)に使用される。本実施形態の補正処理(S206)は、評価対象となっているユーザーが演奏と歌唱の両方を行っている場合(S205:Yes)、演奏評価値に対して加点する加点補正を行う。したがって、歌唱と演奏の両方を同時に行っている場合、演奏評価値に加点されることになり、演奏と歌唱を同時に行うことの難易度を反映した演奏評価値に補正されることになる。なお、補正処理(S206)における加点方法は、所定の値を加算する形態、あるいは、所定の倍率を積算する形態など各種形態を採用することが可能である。S207では補正された演奏評価値を累積し、現在までの評価指標を算出する。   The user's performance mode determined in the performance mode determination process (S204) is used for a correction process (S206) for correcting the performance evaluation value calculated in the performance evaluation process (S202). In the correction processing (S206) according to the present embodiment, when the user to be evaluated performs both performance and singing (S205: Yes), point correction is performed to add to the performance evaluation value. Therefore, if both singing and performance are performed at the same time, the score is added to the performance evaluation value, which is corrected to a performance evaluation value reflecting the difficulty of performing the performance and singing at the same time. Note that the point adding method in the correction processing (S206) can adopt various forms such as a form in which a predetermined value is added or a form in which a predetermined magnification is integrated. In S207, the corrected performance evaluation values are accumulated, and the evaluation index up to the present is calculated.

図5のフロー図において、楽曲の再生が終了するまで(S208:Yes)、S202〜S207の処理を継続して行うことで、ユーザーの演奏形態を考慮した演奏の評価が行われる。楽曲の再生終了後(S208:Yes)、モニター41に演奏評価結果が表示される(S209)。   In the flowchart of FIG. 5, until the reproduction of the music is completed (S208: Yes), the processing of S202 to S207 is continuously performed, so that the performance is evaluated in consideration of the performance form of the user. After the reproduction of the music is completed (S208: Yes), the performance evaluation result is displayed on the monitor 41 (S209).

図8は、演奏用再生処理(S200)で表示される演奏評価結果画面を示す図である。楽曲の再生終了後、モニター41に表示される演奏評価結果画面には、再生した楽曲に関する楽曲関連情報として、曲名66a、歌手名66b、演奏の難易度66cが表示される。また演奏の評価結果として、コード評価結果67、コード一致数68、累積された演奏評価値69、ミスコード一覧70が表示される。本実施形態では、図7で説明したように外部楽器44b(ギター)のコード毎に判定を行っているため、コード単位でのコード評価結果67が表示される。コード評価結果67には、楽曲再生中、適切なコードが適切なタイミングで演奏された数(Excellent)、適切なコードが適度なタイミングで演奏された数(Good)、コードが不適切であった数(Bad)、コードが演奏されなかった数(Blank)、連続してExcellentもしくはGoodが継続した数(Combo)が表示される。コード一致数68は、コード評価結果67中のExcellentとGoodの和である。ミスコード一覧70は、演奏できなかったコードの一覧である。   FIG. 8 is a diagram showing a performance evaluation result screen displayed in the performance reproduction process (S200). After the reproduction of the music, the performance evaluation result screen displayed on the monitor 41 displays a music title 66a, a singer name 66b, and a performance difficulty 66c as music-related information on the reproduced music. Further, as the performance evaluation results, a chord evaluation result 67, a code match number 68, an accumulated performance evaluation value 69, and a list of miscodes 70 are displayed. In the present embodiment, since the determination is made for each chord of the external musical instrument 44b (guitar) as described with reference to FIG. 7, the chord evaluation result 67 for each chord is displayed. The chord evaluation results 67 show that during music playback, the number of appropriate chords played at appropriate timing (Excellent), the number of appropriate chords played at appropriate timing (Good), and the chord was inappropriate The number (Bad), the number of chords not played (Blank), and the number of continuous Excellent or Good (Combo) are displayed. The code matching number 68 is the sum of Excellent and Good in the code evaluation result 67. The miss code list 70 is a list of chords that could not be played.

累積された演奏評価値69(スキルレベル)は、図5のS207の累積に基づく演奏評価値であって、楽曲を通じてのユーザーの演奏に基づく演奏評価指標である。本実施形態では、補正処理(S206)が適用されており、ユーザーが演奏に加えて歌唱を行うことによる難易度を反映した値となっている。   The accumulated performance evaluation value 69 (skill level) is a performance evaluation value based on the accumulation in S207 of FIG. 5, and is a performance evaluation index based on the performance of the user through the music. In the present embodiment, the correction processing (S206) is applied, and the value reflects the degree of difficulty caused by the user singing in addition to the performance.

なお、本実施形態では、各コードに対する演奏評価処理(S202)毎に、演奏形態判定処理(S204)を行うことで、楽曲の再生期間中にユーザーの演奏形態が変化した場合であっても追従して補正を行うことを可能としている。このような形態に代え、ユーザーの演奏形態は、楽曲再生中の何れかのタイミングで判断することとしてもよい。例えば、楽曲再生中、適宜タイミングで1〜数回、演奏形態判定処理(S204)を行うことが考えられる。あるいは、楽曲中、演奏すべき箇所と歌唱すべき箇所が重複する区間についてのみ、この演奏形態判定処理(S204)を行うこととしてもよい。また、楽曲中においては、演奏と歌唱を同時に行うことが難しい区間と易しい区間が存在することが考えられえる。そのため、補正処理(S206)では、このような区間毎の難易度の違いにより加点形態を変更してもよい。   In the present embodiment, the performance evaluation processing (S204) is performed for each performance evaluation processing (S202) for each chord, so that even if the user's performance changes during the music playback period, the user can follow up. It is possible to perform correction. Instead of such a form, the performance form of the user may be determined at any timing during music reproduction. For example, it is conceivable to perform the performance mode determination processing (S204) once or several times at appropriate timing during the music reproduction. Alternatively, the performance form determination process (S204) may be performed only for a section in which the place to be played and the place to be sung overlap in the music. Also, in the music, there may be sections where it is difficult to perform and sing at the same time and sections which are easy. Therefore, in the correction process (S206), the point addition form may be changed based on such a difference in difficulty for each section.

次に、歌唱用再生処理(S300)について、図9〜図10を用いて説明する。図9は、歌唱用再生処理(S300)の詳細を示すフロー図である。歌唱用再生処理(S300)の主な流れは、図5で説明した演奏用再生処理(S200)と略同様であるが、歌唱用再生処理(S300)では、マイクロホン44aに入力される歌唱音声を評価対象とし、歌唱形態に基づき歌唱評価値を補正する点において異なっている。   Next, the singing reproduction process (S300) will be described with reference to FIGS. FIG. 9 is a flowchart showing details of the singing reproduction process (S300). The main flow of the singing reproduction process (S300) is substantially the same as the playing reproduction process (S200) described with reference to FIG. 5, but in the singing reproduction process (S300), the singing voice input to the microphone 44a is reproduced. The difference is that the singing evaluation value is corrected based on the singing form as an evaluation target.

歌唱用再生処理(S300)が開始されると、まず、楽曲情報中の実情報(演奏情報、歌詞情報、歌唱評価情報)を使用した楽曲再生が開始される(S301)。具体的には、音響制御部52にて演奏情報が再生される。楽曲再生期間中は、従来のカラオケ装置で行われているように背景映像上に歌詞表示を行う形態であってもよく、あるいは、図7と同様、歌詞表示による歌唱支援と外部楽器44bの演奏支援の両方を行ってもよい。   When the singing reproduction process (S300) is started, first, the reproduction of music using actual information (performance information, lyrics information, singing evaluation information) in the music information is started (S301). Specifically, the performance information is reproduced by the sound control unit 52. During the music playback period, lyrics may be displayed on a background image as in a conventional karaoke apparatus, or, as in FIG. 7, singing support by lyrics display and performance of the external instrument 44b. Support may be provided for both.

歌唱用再生処理中には、マイクロホン44aに入力される歌唱音声と歌唱評価情報を対比することで適切な歌唱が行われたか否かを判定する歌唱評価処理(S302)が実行される。また、歌唱用再生処理期間中には、同一ユーザーが歌唱と外部楽器44bの演奏を行っているか否かを判定する歌唱形態判定処理(S304)が実行される。この詳細については、図6で説明した演奏形態判定処理(S204)における演奏形態の判定と同様である。   During the singing reproduction process, a singing evaluation process (S302) is performed in which the singing voice input to the microphone 44a is compared with the singing evaluation information to determine whether an appropriate singing has been performed. Also, during the singing reproduction process, a singing form determination process (S304) for determining whether the same user is singing and playing the external instrument 44b is performed. The details are the same as the performance mode determination in the performance mode determination process (S204) described with reference to FIG.

歌唱形態判定処理(S304)で判定されたユーザーの歌唱形態は、歌唱評価処理(S302)で算出された歌唱評価値を補正する補正処理(S306)に使用される。本実施形態の補正処理(S306)は、評価対象となっているユーザーが歌唱と演奏の両方を行っている場合(S305:Yes)、歌唱評価値に対して加点する加点補正を行う。したがって、歌唱と演奏の両方を同時に行っている場合、歌唱評価値に加点されることになり、演奏と歌唱を同時に行うことの難易度を反映した歌唱評価値に補正されることになる。   The singing form of the user determined in the singing form determination processing (S304) is used for a correction processing (S306) for correcting the singing evaluation value calculated in the singing evaluation processing (S302). In the correction processing (S306) of the present embodiment, when the user to be evaluated is performing both singing and performing (S305: Yes), point correction for adding points to the singing evaluation value is performed. Therefore, when both singing and performance are performed at the same time, the score is added to the singing evaluation value, and the singing evaluation value is corrected to the singing evaluation value reflecting the difficulty of performing the performance and singing at the same time.

図9のフロー図において、楽曲の再生が終了するまで(S308:Yes)、S302〜S307の処理を継続して行うことで、ユーザーの歌唱形態を考慮した歌唱の評価が行われる。楽曲の再生終了後(S308:Yes)、モニター41に歌唱評価結果が表示される(S309)。   In the flowchart of FIG. 9, the singing is evaluated in consideration of the singing form of the user by continuing the processing of S302 to S307 until the reproduction of the music ends (S308: Yes). After the reproduction of the music is completed (S308: Yes), the singing evaluation result is displayed on the monitor 41 (S309).

図10は、歌唱用再生処理(S300)で表示される歌唱評価結果画面を示す図である。楽曲の再生終了後、モニター41に表示される歌唱評価結果画面には、再生した楽曲に関する楽曲関連情報として、曲名66a、歌手名66bが表示される。また歌唱の評価結果として、累積された歌唱評価値71、項目別評価値72、項目別グラフ73が表示される。累積された歌唱評価値71は、図9のS307で累積された歌唱評価値であって、楽曲を通じてのユーザーの歌唱に基づく評価指標である。本実施形態では、補正処理(S306)が適用されており、ユーザーが歌唱に加えて演奏を行うことによる難易度を反映した値となっている。また、本実施形態では、歌唱評価の評価項目として、音程、安定感、ロングトーン、抑揚、テクニックといった項目別に歌唱評価を行っており、これらの結果は、項目別評価値72に数値として表示され、項目別グラフ73で数値が可視化されている。   FIG. 10 is a diagram showing a singing evaluation result screen displayed in the singing reproduction process (S300). After the reproduction of the music, the song name 66a and the singer's name 66b are displayed on the singing evaluation result screen displayed on the monitor 41 as the music-related information on the reproduced music. Further, as the singing evaluation result, an accumulated singing evaluation value 71, an item-specific evaluation value 72, and an item-specific graph 73 are displayed. The accumulated singing evaluation value 71 is the singing evaluation value accumulated in S307 of FIG. 9, and is an evaluation index based on the singing of the user through the music. In the present embodiment, the correction process (S306) is applied, and the value reflects the difficulty level of the user performing in addition to singing. In the present embodiment, singing evaluation is performed for each item such as pitch, stability, long tone, intonation, and technique as evaluation items for singing evaluation, and these results are displayed as numerical values in the evaluation value 72 for each item. Numerical values are visualized in the item-by-item graph 73.

以上、本発明の実施形態について、演奏用再生処理(S200)、歌唱用再生処理(S300)を選択して実行可能なカラオケ装置2について説明したが、このカラオケ装置2によれば、同一のユーザーが演奏と歌唱を行っているか否かという演奏形態(あるいは歌唱形態)を使用して演奏評価(あるいは歌唱評価)を行うことで、歌唱と演奏を同時に行うことの困難性に配慮したものとなっている。   As described above, the karaoke apparatus 2 capable of selecting and executing the reproduction processing for performance (S200) and the reproduction processing for singing (S300) has been described in the embodiment of the present invention. Performing performance evaluation (or singing evaluation) using the performance form (or singing form) of whether or not they are performing and singing takes into account the difficulty of performing singing and performing simultaneously. ing.

なお、本発明は前述する実施形態に限られるものではなく、各種変形例を採用することが可能である。前述する実施形態では、演奏用再生処理(S200)において演奏評価値を算出することで、演奏に対する評価をユーザーに提示し、歌唱用再生処理(S300)において歌唱評価値を算出することで、歌唱に対する評価をユーザーに提示することとしているが、オプション設定欄105において、歌唱評価、演奏評価の両方をONとすることで、演奏に対する評価と歌唱に対する評価の両方を行い、演奏評価値と歌唱評価値の両方に基づいて総合評価値を算出することとしてもよい。この場合、メイン処理において(S103:演奏評価&歌唱評価)側に分岐し、演奏&歌唱用再生処理(S400)が実行される。この演奏&歌唱用再生処理(S400)は、演奏用再生処理(S200)で説明した演奏評価値と、歌唱用再生処理(S300)で説明した歌唱評価値をそれぞれ算出し、両者に基づいて統合評価値の算出を行い、評価結果として統合評価値をユーザーに提示する。なお、演奏評価値、歌唱評価値の何れか一方についても統合評価値と一緒にユーザーに提示することとしてもよい。その際、ユーザーに提示される統合評価値は、同一のユーザーが演奏と歌唱を同時に行ったか否かという判定形態に基づき補正された値として提示される。なお、楽曲再生中の画面については、図7で説明した演奏用再生処理(S400)のものを利用する、あるいは、図示しない歌唱用再生処理(S300)時のものを利用する、あるいは、演奏&歌唱用再生処理(S400)に特化した画面構成とすることが考えられる。   Note that the present invention is not limited to the above-described embodiment, and various modifications can be adopted. In the above-described embodiment, the performance evaluation value is calculated in the performance reproduction process (S200), so that the evaluation of the performance is presented to the user. In the singing reproduction process (S300), the singing evaluation value is calculated. In the option setting section 105, both the singing evaluation and the performance evaluation are turned ON, so that both the performance evaluation and the singing evaluation are performed, and the performance evaluation value and the singing evaluation are displayed. The total evaluation value may be calculated based on both of the values. In this case, the process branches to (S103: performance evaluation & singing evaluation) side in the main process, and the performance & singing reproduction process (S400) is executed. In the performance & singing reproduction process (S400), the performance evaluation value described in the performance reproduction process (S200) and the singing evaluation value described in the singing reproduction process (S300) are calculated, and integrated based on both. The evaluation value is calculated, and the integrated evaluation value is presented to the user as the evaluation result. Note that either one of the performance evaluation value and the singing evaluation value may be presented to the user together with the integrated evaluation value. At this time, the integrated evaluation value presented to the user is presented as a value corrected based on the determination form of whether or not the same user has performed and sung at the same time. As for the screen during the music reproduction, the screen of the performance reproduction processing (S400) described with reference to FIG. 7 is used, or the screen of the singing reproduction processing (S300) (not shown) is used. It is conceivable that the screen configuration is specialized for the singing reproduction process (S400).

また、補正処理は、演奏情報中に規定された区間においてのみ実行することとしてもよい。例えば、楽曲の再生中、前奏、間奏、後奏等の区間では、ユーザーによる歌唱は行われず、楽器の演奏のみとなる。このような区間では補正処理を行わないことにより、演奏される各楽曲に対応した適切な補正を行うことが可能となる。   Further, the correction processing may be performed only in a section specified in the performance information. For example, in a section such as a prelude, an interlude, and a follow-up during the reproduction of a music piece, the user does not sing and only plays the musical instrument. By not performing the correction processing in such a section, it is possible to perform appropriate correction corresponding to each musical piece to be played.

以上、本実施形態のカラオケ装置について説明したが、本発明は、パーソナルコンピュータ、ゲーム機、スマートフォン、タブレット端末といった各種コンピュータにインストールすることで、カラオケ装置と同じ機能を有するカラオケ用プログラムについても、本発明の範疇に属する。   Although the karaoke apparatus according to the present embodiment has been described above, the present invention is also applicable to a karaoke program having the same function as the karaoke apparatus by installing the karaoke apparatus in various computers such as a personal computer, a game machine, a smartphone, and a tablet terminal. It belongs to the category of the invention.

1:リモコン装置 64c:次々運指
2:カラオケ装置 65:歌詞表示欄
5:カラオケ用ホスト 66a:曲名
11:表示部 66b:歌手名
17:操作部 66c:難易度
27:メモリ 67:コード評価結果
28:映像再生部 68:コード一致数
30:制御部 69:演奏評価値
32:ハードディスク 70:ミスコード一覧
41:モニター 71:歌唱評価値
42:スピーカー 72:項目別評価値
43:カメラ 73:項目別グラフ
44a:マイクロホン 81a:頭部
44b:外部楽器 81b:体躯
51:記憶部 101:ユーザー切り替えボタン
52:音響制御部 102:ゲストボタン
62:予定コード表示欄 103:ログインユーザー欄
63:コードタイミング表示欄 103a〜103e:分身像
63a:現在コード 105:オプション設定欄
63b:タイミングバー 106:予約ボタン
64a:現在運指 110:アクセスポイント
64b:次運指 120:ルータ
1: Remote control device 64c: One after another fingering 2: Karaoke device 65: Lyrics display field 5: Karaoke host 66a: Song name 11: Display section 66b: Singer name 17: Operation section 66c: Difficulty 27: Memory 67: Code evaluation result 28: Video playback unit 68: Number of matched codes 30: Control unit 69: Performance evaluation value 32: Hard disk 70: Miscode list 41: Monitor 71: Singing evaluation value 42: Speaker 72: Evaluation value 43 by item 43: Camera 73: Item Separate graph 44a: microphone 81a: head 44b: external instrument 81b: body 51: storage unit 101: user switching button 52: acoustic control unit 102: guest button 62: scheduled code display field 103: login user field 63: code timing display Columns 103a to 103e: Alternate image 63a: Current code 105: Optional setting Fixed column 63b: timing bar 106: reservation button 64a: current fingering 110: access point 64b: next fingering 120: router

Claims (8)

演奏情報に基づいて楽曲を演奏する演奏処理と、
楽器の演奏音を取得する演奏音取得処理と、
前記演奏音取得処理で判定された演奏音に基づき演奏評価値を算出する演奏評価処理と、
前記楽器を演奏するユーザーと歌唱を行うユーザーが同一であるか否かを判定する演奏形態判定処理と、
前記演奏形態判定処理の判定結果に基づいて、前記演奏評価処理で算出された演奏評価値を補正する補正処理と、を実行することを特徴とする
カラオケ装置。
A performance process of playing a song based on performance information;
Performance sound acquisition processing for acquiring the performance sound of the musical instrument;
Performance evaluation processing for calculating a performance evaluation value based on the performance sound determined in the performance sound acquisition processing;
Performance form determination processing for determining whether the user who plays the musical instrument and the user who sings are the same,
A karaoke apparatus for executing a correction process for correcting the performance evaluation value calculated in the performance evaluation process based on a result of the performance mode determination process.
演奏情報に基づいて楽曲を演奏する演奏処理と、
マイクロホンに入力される歌唱音声を取得する歌唱音声取得処理と、
前記歌唱音声取得処理で判定された歌唱音声に基づき歌唱評価値を算出する歌唱評価処理と、
歌唱を行うユーザーと楽器を演奏するユーザーが同一であるか否かを判定する歌唱形態判定処理と、
前記歌唱形態判定処理の判定結果に基づいて、前記歌唱評価処理で算出された歌唱評価値を補正する補正処理と、を実行することを特徴とする
カラオケ装置。
A performance process of playing a song based on performance information;
Singing voice acquisition processing for acquiring singing voice input to the microphone;
Singing evaluation processing to calculate a singing evaluation value based on the singing voice determined in the singing voice acquisition processing,
Singing form determination processing for determining whether the user who sings and the user who plays the instrument are the same,
A karaoke apparatus for executing a correction process for correcting a singing evaluation value calculated in the singing evaluation process based on a result of the singing mode determination process.
マイクロホンに入力される歌唱音声を取得する歌唱音声取得処理と、
前記歌唱音声取得処理で判定された歌唱音声に基づき歌唱評価値を算出する歌唱評価処理を実行することを特徴とする
請求項1に記載のカラオケ装置。
Singing voice acquisition processing for acquiring singing voice input to the microphone;
The karaoke apparatus according to claim 1, wherein a singing evaluation process for calculating a singing evaluation value based on the singing voice determined in the singing voice acquisition process is performed.
楽器の演奏音を取得する演奏音取得処理と、
前記演奏音取得処理で判定された演奏音に基づき演奏評価値を算出する演奏評価処理と、を実行することを特徴とする
請求項2に記載のカラオケ装置。
Performance sound acquisition processing for acquiring the performance sound of the musical instrument;
The karaoke apparatus according to claim 2, further comprising: performing a performance evaluation process of calculating a performance evaluation value based on the performance sound determined in the performance sound acquisition process.
算出された演奏評価値と歌唱評価値に基づいて総合評価値を算出することを特徴とする
請求項または請求項に記載のカラオケ装置。
The karaoke apparatus according to claim 3 or 4 , wherein an overall evaluation value is calculated based on the calculated performance evaluation value and singing evaluation value.
前記補正処理は、前記演奏情報に対応する区間において実行されることを特徴とする
請求項1から請求項の何れか1項に記載のカラオケ装置。
The karaoke apparatus according to any one of claims 1 to 5 , wherein the correction processing is performed in a section corresponding to the performance information.
演奏情報に基づいて楽曲を演奏する演奏処理と、
楽器の演奏音を取得する演奏音取得処理と、
前記演奏音取得処理で判定された演奏音に基づき演奏評価値を算出する演奏評価処理と、
前記楽器を演奏するユーザーと歌唱を行うユーザーが同一であるか否かを判定する演奏形態判定処理と、
前記演奏形態判定処理の判定結果に基づいて、前記演奏評価処理で算出された演奏評価値を補正する補正処理と、をコンピュータに実行させることを特徴とする
カラオケ用プログラム。
A performance process of playing a song based on performance information;
Performance sound acquisition processing for acquiring the performance sound of the musical instrument;
Performance evaluation processing for calculating a performance evaluation value based on the performance sound determined in the performance sound acquisition processing;
Performance form determination processing for determining whether the user who plays the musical instrument and the user who sings are the same,
A karaoke program for causing a computer to execute a correction process for correcting a performance evaluation value calculated in the performance evaluation process based on a result of the performance mode determination process.
演奏情報に基づいて楽曲を演奏する演奏処理と、
マイクロホンに入力される歌唱音声を取得する歌唱音声取得処理と、
前記歌唱音声取得処理で判定された歌唱音声に基づき歌唱評価値を算出する歌唱評価処理と、
歌唱を行うユーザーと楽器を演奏するユーザーが同一であるか否かを判定する歌唱形態判定処理と、
前記歌唱形態判定処理の判定結果に基づいて、前記歌唱評価処理で算出された歌唱評価値を補正する補正処理と、をコンピュータに実行させることを特徴とする
カラオケ用プログラム。
A performance process of playing a song based on performance information;
Singing voice acquisition processing for acquiring singing voice input to the microphone;
Singing evaluation processing to calculate a singing evaluation value based on the singing voice determined in the singing voice acquisition processing,
Singing form determination processing for determining whether the user who sings and the user who plays the instrument are the same,
A karaoke program for causing a computer to execute a correction process for correcting a singing evaluation value calculated in the singing evaluation process based on a result of the singing mode determination process.
JP2016016137A 2016-01-29 2016-01-29 Karaoke device and karaoke program Active JP6638429B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2016016137A JP6638429B2 (en) 2016-01-29 2016-01-29 Karaoke device and karaoke program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2016016137A JP6638429B2 (en) 2016-01-29 2016-01-29 Karaoke device and karaoke program

Publications (2)

Publication Number Publication Date
JP2017134341A JP2017134341A (en) 2017-08-03
JP6638429B2 true JP6638429B2 (en) 2020-01-29

Family

ID=59504815

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016016137A Active JP6638429B2 (en) 2016-01-29 2016-01-29 Karaoke device and karaoke program

Country Status (1)

Country Link
JP (1) JP6638429B2 (en)

Also Published As

Publication number Publication date
JP2017134341A (en) 2017-08-03

Similar Documents

Publication Publication Date Title
US9117432B2 (en) Apparatus and method for detecting chord
JP4926756B2 (en) Karaoke sound effect output system
JP6070952B2 (en) Karaoke device and karaoke program
JP2014130187A (en) Karaoke device
JP5622679B2 (en) Karaoke equipment
JP2018173444A (en) Music selection device, karaoke system and music selection program
JP6638429B2 (en) Karaoke device and karaoke program
JP6736914B2 (en) Music selection device, karaoke system, and music selection program
JP5807754B2 (en) Stringed instrument performance evaluation apparatus and stringed instrument performance evaluation program
JP2012247558A (en) Information processing device, information processing method, and information processing program
JP5969421B2 (en) Musical instrument sound output device and musical instrument sound output program
JP5590350B2 (en) Music performance device and music performance program
JP6705167B2 (en) String instrument performance evaluation device, music performance device, and string instrument performance evaluation program
JP6728572B2 (en) Plucked instrument performance evaluation device, music performance device, and plucked instrument performance evaluation program
JP2015069053A (en) Karaoke device scoring singing by considering stretch tuning
JP5500214B2 (en) Music score display output device and music score display output program
JP5556821B2 (en) Music performance device and music performance program
JP5825533B2 (en) Music search device, music search system, and music search program
JP6601214B2 (en) Music selection device, karaoke system, and music selection program
JP6642215B2 (en) Music selection device, karaoke system and music selection program
JP5429501B2 (en) Karaoke remote control device and karaoke system
JP5240840B2 (en) Karaoke equipment
JP6394366B2 (en) Karaoke device and karaoke program
JP5195209B2 (en) Performance data editing apparatus and program
JP5392510B2 (en) Music performance device and music performance program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20181023

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20190805

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190910

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20191023

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20191126

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20191209

R150 Certificate of patent or registration of utility model

Ref document number: 6638429

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150