JP5311071B2 - Music playback device and music playback program - Google Patents
Music playback device and music playback program Download PDFInfo
- Publication number
- JP5311071B2 JP5311071B2 JP2010218291A JP2010218291A JP5311071B2 JP 5311071 B2 JP5311071 B2 JP 5311071B2 JP 2010218291 A JP2010218291 A JP 2010218291A JP 2010218291 A JP2010218291 A JP 2010218291A JP 5311071 B2 JP5311071 B2 JP 5311071B2
- Authority
- JP
- Japan
- Prior art keywords
- information
- music
- phrase section
- phrase
- singing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Description
本発明は、楽曲を再生する楽曲再生装置及び楽曲再生プログラムに関するものであり、特に、楽曲情報と音声情報を同期して再生させる楽曲再生装置及び楽曲再生プログラムに関する。 The present invention relates to a music playback device and a music playback program for playing back music, and in particular, to a music playback device and a music playback program that play back music information and audio information in synchronization.
従来、楽曲の自動演奏に合わせて歌唱を楽しむカラオケ装置では、歌唱を補助するため、模範となるガイドメロディのオン／オフを切り換える機能が設けられている。不慣れな歌唱者は、ガイドメロディを出力させることで、ガイドメロディを聴きながら音程を取って歌唱を行うことが可能となる。さらに、この補助機能において、歌唱が途絶えた、あるいは、歌唱音程がずれていることを検出し、模範となるガイドメロディを音声出力する機能が知られている。 2. Description of the Related Art Conventionally, a karaoke apparatus that enjoys singing in accordance with automatic performance of music is provided with a function for switching on / off of a model guide melody to assist singing. An unfamiliar singer can sing by taking a pitch while listening to the guide melody by outputting the guide melody. Further, in this auxiliary function, there is known a function of detecting that the singing is interrupted or that the singing pitch is shifted and outputting a guide melody as an example by voice.
特許文献１には、歌唱補助機能として模範ボーカルの音量制御に特徴を持たせたカラオケ装置が開示されている。このカラオケ装置では、歌唱音量値に基づいてガイドボーカル混合音量を加減制御することで、「ため」などによりフレーズの先頭で歌い出しのタイミングを意図的に遅らせた場合であっても、余計な模範ボーカルが出力されることがない。
特許文献２には、歌唱の音程と主旋律の音程との差に応じてガイドメロディの音量を制御することで、歌唱状態に応じて自動的にガイドメロディの音量が調整されるカラオケ装置が開示されている。 Patent Document 2 discloses a karaoke device in which the volume of the guide melody is automatically adjusted according to the singing state by controlling the volume of the guide melody according to the difference between the pitch of the singing and the pitch of the main melody. ing.
ところで、現在、カラオケでは、楽曲に合わせて行われた歌唱を録音し、ネットワーク機能を利用して他者に公開する投稿サービスが人気を集めている。この投稿サービスでは、歌唱を録音した録音情報は、通信回線を介してサーバ装置に送信され、インターネットを介してパーソナルコンピュータや携帯情報端末にて視聴することができる。 By the way, at present, in karaoke, a posting service that records a song performed along with a music and makes it available to others using a network function is gaining popularity. In this posting service, recording information obtained by recording a song is transmitted to a server device via a communication line and can be viewed on a personal computer or a portable information terminal via the Internet.
特許文献１、特許文献２に開示される歌唱補助機能は、歌唱を補助することを目的としたものであって、補助音声となるガイドメロディを歌唱の状態に合わせて切り換える必要がある。そのため、不自然なタイミングでガイドメロディがオン／オフされることとなり、聞いている者にとっては違和感を覚える。特に、前述の投稿サービスのように聴取することを目的としている場合には、不自然なタイミングで出力されるガイドメロディは煩わしい。
The singing assistance function disclosed in
前述の課題を解決するため、本発明に係る楽曲再生装置は、楽曲識別情報に対応付けて記録された録音情報についてフレーズ区間を設定する設定処理と、前記フレーズ区間にて歌唱が行われたか否かを判定する判定処理と、前記楽曲識別情報に対応する録音情報と楽曲情報とを同期して再生させる際、歌唱が行われたと判定された前記フレーズ区間では、前記楽曲情報に含まれるガイドメロディ情報を再生させず、歌唱が行われなかったと判定された前記フレーズ区間では、前記ガイドメロディ情報を再生させる再生処理と、を実行し、前記判定処理は、前記フレーズ区間よりも短いサブフレーズ区間毎に歌唱が行われたか否かを検出し、前記フレーズ区間中、歌唱が行われたと判定された前記サブフレーズ区間の割合に基づいて、前記フレーズ区間に音声が含まれているか否かを判定することを特徴としている。
In order to solve the above-described problem, the music reproducing device according to the present invention includes a setting process for setting a phrase section for the recording information recorded in association with the music identification information, and whether or not the song has been sung in the phrase section. In the phrase section where it is determined that the singing has been performed when the recording process and the music information corresponding to the music identification information are reproduced in synchronization with the determination process for determining whether or not the guide melody included in the music information In the phrase section where it was determined that the singing was not performed without reproducing information, a reproduction process for reproducing the guide melody information is performed, and the determination process is performed for each sub-phrase section shorter than the phrase section. Whether or not the singing was performed, and based on the ratio of the sub-phrase section determined to be sung during the phrase section, It is characterized by determining whether contains sound's period.
また本発明に係る楽曲再生装置は、楽曲識別情報に対応付けて記録された録音情報についてフレーズ区間を設定する設定処理と、前記フレーズ区間にて歌唱が行われたか否かを判定する判定処理と、前記楽曲識別情報に対応する録音情報と楽曲情報とを同期して再生させる際、歌唱が行われたと判定された前記フレーズ区間では、前記楽曲情報に含まれるガイドメロディ情報を再生させず、歌唱が行われなかったと判定された前記フレーズ区間では、前記ガイドメロディ情報を再生させる再生処理と、を実行し、前記録音情報は、複数のパートを含む録音情報であって、前記判定処理と前記再生処理は、録音情報の各パートについて処理を実行することを特徴としている。Moreover, the music reproducing apparatus according to the present invention includes a setting process for setting a phrase section for the recording information recorded in association with the music identification information, and a determination process for determining whether or not a singing has been performed in the phrase section. When the recorded information and the music information corresponding to the music identification information are played back in synchronization, the guide melody information included in the music information is not played back in the phrase section where it is determined that the song has been performed. In the phrase section determined not to be performed, a reproduction process for reproducing the guide melody information is executed, and the recording information is recording information including a plurality of parts, and the determination process and the reproduction are performed. The process is characterized in that the process is executed for each part of the recording information.
さらに本発明に係る楽曲再生装置において、前記判定処理は、音量に基づいて歌唱が行われたか否かを判定することを特徴としている。 Furthermore, in the music reproducing apparatus according to the present invention, the determination process determines whether or not a song has been performed based on a volume.
前記判定処理は、前記録音情報と前記楽曲情報に含まれるガイドメロディ情報とを比較することで、歌唱が行われたか否かを判定することを特徴としている。 The determination process is characterized by determining whether or not a song has been performed by comparing the recording information with guide melody information included in the music information.
また本発明に係る楽曲再生プログラムは、楽曲識別情報に対応付けて記録された録音情報においてフレーズ区間を設定する設定処理と、前記フレーズ区間にて歌唱が行われたか否かを判定する判定処理と、前記楽曲識別情報に対応する録音情報と楽曲情報とを同期して再生させる際、歌唱が行われたと判定された前記フレーズ区間では、前記楽曲情報に含まれるガイドメロディ情報を再生させず、歌唱が行われなかったと判定された前記フレーズ区間では、前記ガイドメロディ情報を再生させる再生処理と、をコンピュータに実行させ、前記判定処理は、前記フレーズ区間よりも短いサブフレーズ区間毎に歌唱が行われたか否かを検出し、前記フレーズ区間中、歌唱が行われたと判定された前記サブフレーズ区間の割合に基づいて、前記フレーズ区間に音声が含まれているか否かを判定することを特徴としている。Moreover, the music reproduction program according to the present invention includes a setting process for setting a phrase section in the recording information recorded in association with the music identification information, and a determination process for determining whether or not a singing has been performed in the phrase section. When the recorded information and the music information corresponding to the music identification information are played back in synchronization, the guide melody information included in the music information is not played back in the phrase section where it is determined that the song has been performed. In the phrase section determined not to be performed, the computer executes a reproduction process for reproducing the guide melody information, and the determination process is performed for each sub-phrase section shorter than the phrase section. Based on the ratio of the sub-phrase section determined to have been sung in the phrase section, It is characterized by determining whether contains sound's period.
また本発明に係る楽曲再生プログラムは、楽曲識別情報に対応付けて記録された録音情報においてフレーズ区間を設定する設定処理と、前記フレーズ区間にて歌唱が行われたか否かを判定する判定処理と、前記楽曲識別情報に対応する録音情報と楽曲情報とを同期して再生させる際、歌唱が行われたと判定された前記フレーズ区間では、前記楽曲情報に含まれるガイドメロディ情報を再生させず、歌唱が行われなかったと判定された前記フレーズ区間では、前記ガイドメロディ情報を再生させる再生処理と、をコンピュータに実行させ、前記録音情報は、複数のパートを含む録音情報であって、前記判定処理と前記再生処理は、録音情報の各パートについて処理を実行することを特徴としている。
Moreover, the music reproduction program according to the present invention includes a setting process for setting a phrase section in the recording information recorded in association with the music identification information, and a determination process for determining whether or not a singing has been performed in the phrase section. When the recorded information and the music information corresponding to the music identification information are played back in synchronization, the guide melody information included in the music information is not played back in the phrase section where it is determined that the song has been performed. In the phrase section determined to have not been performed, the computer executes a reproduction process for reproducing the guide melody information, and the recording information is recording information including a plurality of parts, and the determination process The reproduction process is characterized by executing a process for each part of the recording information.
本発明によれば、録音情報について、フレーズ区間毎に歌唱が行われたか否かを判定し、歌唱が行われなかったフレーズ区間にてガイドメロディを再生することで、進行上、違和感の少ない楽曲再生を行うことが可能となる。 According to the present invention, with respect to the recording information, it is determined whether or not the singing has been performed for each phrase section, and the guide melody is reproduced in the phrase section in which the singing has not been performed. Playback can be performed.
さらに、本発明ではフレーズ区間よりも短いサブフレーズ区間にて歌唱が行われたか否かを判定し、サブフレーズ区間での判定結果に基づいてフレーズ区間におけるガイドメロディの再生、非再生を決定している。このような形態によれば、フレーズ区間の一部にて歌唱が行われた場合においても、設定条件（フレーズ区間におけるサブフレーズ区間の割合）に基づいてガイドメロディの再生、非再生を決定することができる。 Furthermore, in the present invention, it is determined whether or not the singing has been performed in a subphrase section shorter than the phrase section, and based on the determination result in the subphrase section, reproduction / non-reproduction of the guide melody in the phrase section is determined. Yes. According to such a form, even when the singing is performed in a part of the phrase section, the reproduction or non-reproduction of the guide melody is determined based on the setting condition (the ratio of the subphrase section in the phrase section). Can do.
さらに、本発明では音量に基づいて歌唱が行われたか否かを判定することで、簡易な構成にてガイドメロディの再生、非再生を決定することが可能となる。 Furthermore, according to the present invention, it is possible to determine whether or not to play the guide melody with a simple configuration by determining whether or not the singing has been performed based on the volume.
さらに、本発明では、録音情報とガイドメロディ情報を比較することで、フレーズ区間にて歌唱が行われたか否かの検出精度を高めることが可能となる。さらに、ガイドメロディ情報を利用した採点を実行する際の結果を流用することも可能となる。 Furthermore, in the present invention, it is possible to improve the detection accuracy of whether or not the singing has been performed in the phrase section by comparing the recording information and the guide melody information. Furthermore, it is possible to divert the results when executing scoring using guide melody information.
さらに、本発明では、複数のパートを含む録音情報に対しても適用することができる。各パートに対応するガイドメロディ情報を、フレーズ区間毎に再生、非再生とすることで、デュエット楽曲など複数のガイドメロディ情報を有する楽曲において、聴感上の違和感を抑えた再生を行うことが可能となる。 Further, the present invention can be applied to recording information including a plurality of parts. By playing back and not playing guide melody information corresponding to each part for each phrase section, it is possible to play back music with multiple pieces of guide melody information such as duet music while suppressing discomfort in the sense of hearing. Become.
また、本発明は、楽曲再生プログラムとして提供することで、コマンダ（カラオケ装置
）などの各種コンピュータにおいて楽曲再生機能を追加することが可能となる。
Further, by providing the present invention as a music playback program, it is possible to add a music playback function in various computers such as a commander (karaoke device).
図１は、本発明の実施形態に係るカラオケシステムのネットワーク構成を示す図である。図中、カラオケシステムとしての主要構成は、カラオケ用ホスト（サーバ装置）、店舗などに設置されるコマンダ２などにて構成される。コマンダ２は楽曲再生機能を有した、いわゆるカラオケ装置であって、店舗内のＬＡＮ１００に接続されている。コマンダ２とカラオケ用ホストは、インターネットを介して接続され、新しく供給された楽曲情報やユーザー情報など、各種サービスに必要な情報の送受信を行う。本実施形態ではＶＰＮ（Virtual Private Network）を介して接続されており、セキュリティに優れた通信を行うこ
とが可能となっている。
FIG. 1 is a diagram showing a network configuration of a karaoke system according to an embodiment of the present invention. In the figure, the main configuration as a karaoke system is configured by a karaoke host (server device), a commander 2 installed in a store, and the like. The commander 2 is a so-called karaoke device having a music playback function, and is connected to the LAN 100 in the store. The commander 2 and the karaoke host are connected via the Internet, and exchange information necessary for various services such as newly supplied music information and user information. In this embodiment, they are connected via a VPN (Virtual Private Network), and communication with excellent security can be performed.
店舗に設置されたコマンダ２は、リモコン装置１によりユーザーからの各種指示を受け付けることが可能となっている。また、リモコン装置１は表示画面を備え、ユーザーに対して各種情報を提供することも可能である。リモコン装置１は、ＬＡＮ１００上に設置されたアクセスポイント１１０ａを介してコマンダ２と無線接続される。例えば、コマンダ２ａにはリモコン装置１ａと１ｂが対応付けられており、ＬＡＮ１００ａを介した操作が可能となっている。また、リモコン装置１とコマンダ２とは赤外線を利用した近距離通信を行うことも可能である。
The commander 2 installed in the store can accept various instructions from the user by the
さらに、本実施形態のカラオケシステムでは、ユーザーに各種サービスを提供するためインターネット用ホストが設けられている。このインターネット用ホストは、ユーザーのパーソナルコンピュータ、携帯情報端末（携帯電話やＰＤＡなど）と接続され、これら機器を利用するユーザーに各種サービスを提供することができる。また、インターネット用ホストは、カラオケ用ホストとデータ共有することで連携を取ったサービスを提供することができる。本実施形態では、コマンダ２にて録音、録画して得られた投稿データをこのインターネット用ホストを介して、パーソナルコンピュータ、携帯情報端末などに公開することが可能である。投稿データの公開は、コマンダ２にて実行されることとしてもよい。 Furthermore, in the karaoke system of this embodiment, an Internet host is provided to provide various services to the user. The Internet host is connected to a user's personal computer and a portable information terminal (such as a mobile phone or a PDA), and can provide various services to users who use these devices. In addition, the Internet host can provide a coordinated service by sharing data with the karaoke host. In the present embodiment, post data obtained by recording and recording with the commander 2 can be disclosed to a personal computer, a portable information terminal, or the like via the Internet host. The posting of the posted data may be executed by the commander 2.
図２は、本発明の実施形態に係る店舗Ａに設置されたカラオケシステムの構成を示している。本実施形態におけるカラオケシステムは、コマンダ２（カラオケ装置）と、リモコン装置１にて構成されており、これらは、ＬＡＮ１００にて、無線、有線で互いに接続されている。
FIG. 2 shows a configuration of the karaoke system installed in the store A according to the embodiment of the present invention. The karaoke system in the present embodiment is composed of a commander 2 (karaoke device) and a
コマンダ２は、全体を統括制御する制御部３０を中心として機能し、主な機能として、演奏処理、映像再生処理、楽曲指定処理、投稿処理などを実行可能としている。演奏処理は、入力部２１やリモコン装置１にて、ユーザーにより指定された楽曲に対応する楽曲情報をＭＩＤＩ音源２６などの音源部にて演奏させ、スピーカー４２から放音させる処理である。このとき、スピーカー４２からは歌唱用マイク４４から入力される音声も合わせて
放音される。映像再生処理は、映像再生部２９にて映像情報や歌詞情報などを再生させ、モニタ４１を介した視覚情報をユーザーに提供する処理である。
The commander 2 functions centering on the
楽曲指定処理は、ユーザーからの指定に基づいて楽曲を選択、予約するための処理である。本実施形態ではリモコン装置１と連携して実行することとなる。リモコン装置１の操作部１７から入力されたユーザーの指令は、赤外線通信部１９、２３、あるいは、ＬＡＮ１００を介してコマンダ２に伝達される。コマンダ２での処理結果は、リモコン装置１側の表示部１１に表示され、ユーザーは選曲のための各種情報を視認することが可能である。コマンダ２とリモコン装置１では、この楽曲指定処理に限らず、ユーザーから各種入力を受付けて、ログイン処理など各種処理を実行することが可能である。
The music designation process is a process for selecting and reserving music based on designation from the user. In this embodiment, it is executed in cooperation with the
投稿処理は、楽曲指定処理にて指定された楽曲を演奏する際、歌唱用マイク４４から入力される音声を録音情報として記録し、カラオケ用ホストやインターネット用ホストなどの各種サーバ装置に送信する処理である。本実施形態の録音情報は、歌唱用マイク４４からの音声だけであるため、録音情報を再生するにあたっては録音時に使用した楽曲を同時に再生させることとしている。 The posting process is a process of recording the voice input from the singing microphone 44 as recording information and playing it to various server devices such as a karaoke host and an Internet host when playing the music specified in the music specification process. It is. Since the recording information of the present embodiment is only the sound from the singing microphone 44, when reproducing the recording information, the music used at the time of recording is reproduced at the same time.
また、投稿処理においては歌唱用マイク４４からの音声のみならず、歌唱の様子を同時に録画することも可能である。本実施形態のコマンダ２には、カメラ４３が接続可能とされており、接続されたカメラ４３から歌唱者や同伴客の様子を撮像することが可能となっている。カメラ４１からの映像を表示手段（例えば、モニタ４１）にてモニタする場合には、カメラ４３は、当該表示手段の上部など、表示手段の近傍に配置することが好ましい。ユーザーは、モニタ画像を鏡のように利用することが可能となる。なお、カメラ４３を複数設け、同時に、あるいは、切り換えて撮影することで撮像情報を取得することとしても構わない。
In the posting process, not only the voice from the singing microphone 44 but also the state of the singing can be recorded simultaneously. A
本実施形態では、リモコン装置１の表示部１１に表示させ、ログイン、選曲、録音、録画、投稿など各種操作を行うユーザーに対して各種情報を提供する。なお、リモコン装置１の操作部１７としては、カーソルキーなどの各種スイッチの他、表示部１１に表示されたアイコンを直接タッチして、各種操作を可能とするタッチパネル等を採用することができる。
In the present embodiment, the information is displayed on the
本実施形態のカラオケシステムは、ユーザーが、録音、録画した情報を投稿データとしてホストに投稿する時に、ユーザーと投稿データとの対応付けするときに必要となる、ユーザーＩＤをリモコン装置１へ入力することでログインすることが可能となっている。ユーザーのログインに関する情報（ユーザーＩＤ）は、ログイン時にメモリ１４、ＨＤＤ３２等の記憶手段に記憶される。
In the karaoke system of the present embodiment, when a user posts recorded or recorded information to a host as posted data, the user ID required for associating the user with the posted data is input to the
図３は、本発明の実施形態に係る投稿処理を示すフロー図である。この投稿処理においてユーザーは、操作部１７などの入力手段にてログインした状態となっている。本実施形態では、歌唱音声の録音に加え、カメラ４３を利用した録画を行い、録音情報と録画情報を得ることとしているが録音情報のみであってもよい。Ｓ１０２ではユーザーによる選曲が実行される。ここでは、リモコン装置１を介して、ユーザーは所望の楽曲を検索し、目的の楽曲を選択することで選曲を行う。楽曲の検索や選択については各種周知の手法にて行うことができるため、ここではその詳細を省略する。なお、この楽曲を選択する際、投稿のために録音、録画を許可することをユーザーが指定することとしてもよい。
FIG. 3 is a flowchart showing the posting process according to the embodiment of the present invention. In this posting process, the user is logged in using input means such as the
Ｓ１０３では、指定された楽曲に対応する楽曲情報（ＭＩＤＩデータ等にて構成）をＭＩＤＩ音源２６等で構成された楽曲演奏手段にて演奏させる。それと略同時に歌唱用マイク４４から入力される歌唱音声の録音、並びに、カメラ４３にて撮影される映像の録画が
開始される（Ｓ１０４）。録音された歌唱音声は録音情報として、録画された映像は録画情報としてＨＤＤ３２等の記憶手段に格納される。
In S103, music information corresponding to the designated music (configured by MIDI data or the like) is played by a music playing means configured by the
楽曲演奏中、Ｓ１０５では歌唱用マイク４４から入力される音声について、所定時間毎に歌唱が行われているか否かを判定する。この判定は、歌唱用マイク４４から閾値以上の音声が入力されたか否か、あるいは、楽曲の演奏に同期したガイドメロディ情報と比較することで実行される。なお、ガイドメロディ情報を利用する場合には、採点機能としての処理を流用することも可能である。歌唱用マイクが複数ある場合（歌唱用マイク４４ａ、４４ｂ）の録音情報は、歌唱用マイク毎に作成してもよいし、複数の歌唱用マイクからの音声を混合した上で録音情報を作成してもよい。
During music performance, in S105, it is determined whether or not the voice input from the singing microphone 44 is sung at predetermined time intervals. This determination is performed by comparing whether or not the voice above the threshold is input from the singing microphone 44 or by comparing with the guide melody information synchronized with the performance of the music. In addition, when using guide melody information, it is also possible to divert the processing as a scoring function. The recording information when there are a plurality of singing microphones (singing
Ｓ１０６にて楽曲情報の演奏終了が判断されると、Ｓ１０７では録音、録画を終了させる。Ｓ１０８では、録音情報、録画情報を投稿するか否かをユーザーに対して問い合わせる表示が行われる。ここでは投稿することで、例えば、インターネットを介して公開されることを許諾するか等をユーザーに確認させる。Ｓ１０９にてユーザーが投稿しないことを選択した場合には、投稿処理を終了する（Ｓ１１１）。 If it is determined in S106 that the music information has been played, recording is ended in S107. In S108, recording information and a display for inquiring to the user whether or not to post the recording information are performed. In this case, posting allows the user to confirm whether or not to permit publication via the Internet, for example. If the user selects not to post in S109, the posting process is terminated (S111).
一方、ユーザーが投稿することを選択した場合には、音声情報、録画情報を含む投稿データがサーバ装置に送信される（Ｓ１１０）。本実施形態の音声情報、録画情報のデータ形式にはＭＰＥＧ形式が採用されている。図４に投稿データのデータ構成の一例が示されている。コマンダ２から送信される投稿データには、録音情報、録画情報の他、楽曲ＩＤ、当該楽曲を歌唱したユーザー、すなわち、当該楽曲を予約したユーザーのユーザーＩＤ、投稿処理を実行したコマンダ２のＩＤ（製造番号、IPアドレスなど）、録音日時といった属性情報が含まれている。 On the other hand, when the user selects to post, post data including audio information and recording information is transmitted to the server device (S110). The MPEG format is adopted as the data format of the audio information and recording information of this embodiment. FIG. 4 shows an example of the data structure of the posted data. The post data transmitted from the commander 2 includes the recording information, the recording information, the music ID, the user who sang the music, that is, the user ID of the user who reserved the music, and the ID of the commander 2 who executed the posting process. Includes attribute information such as recording date and time (recording number, IP address, etc.) and recording date and time.
サーバ装置では、受信した投稿データをデータベースに登録し（Ｓ１１２）、当該投稿データに基づいて公開データを作成する（Ｓ１１３）。具体的には、Ｗｅｂサーバから公開するために、投稿データの録画情報からサムネイル画の公開データを作成する。コマンダ２からの投稿データの録音、録画情報はＭＰＥＧ形式であるので、公開する対象がコマンダであった場合は、そのままＭＰＥＧ形式で公開すればよいが、公開する対象がパーソナルコンピュータや携帯情報端末などであった場合のために、ＭＰＥＧ形式の録音、録画情報からＦＬＶ形式（Ａｄｏｂｅ Ｆｌａｓｈ形式：商標）の録画、録音情報を作成し、コマンダ２、パーソナルコンピュータ等何れからも利用できるようにして公開する（Ｓ１１４）。 The server device registers the received posting data in the database (S112), and creates public data based on the posting data (S113). Specifically, in order to make it public from the Web server, the public data of the thumbnail image is created from the recording information of the post data. Since the recording and recording information of the posted data from the commander 2 is in the MPEG format, if the subject to be published is the commander, it may be published in the MPEG format as it is, but the subject to be published is a personal computer, a portable information terminal, etc. Therefore, FLV format (Adobe Flash format: trademark) recording and recording information is created from MPEG recording and recording information, and is made available for use by any of Commander 2, a personal computer, etc. (S114).
投稿データを公開する場合、これらの属性情報を検索項目に用いて検索することが可能となる。楽曲ＩＤは、投稿データの公開に際して録音情報、録画情報に同期して楽曲を再生するために利用される。本実施形態では録音情報に楽曲情報に基づく演奏音が含まれていないため、楽曲演奏できないパーソナルコンピュータ上で、ＦＬＶ形式で再生可能とするために、サーバ装置側で投稿データの楽曲ＩＤから楽曲を特定し、その楽曲ＩＤの楽曲演奏音を挿入しながらＦＬＶ形式のデータを作成する。 When posting post data, it is possible to search using these attribute information as search items. The music ID is used for reproducing the music in synchronization with the recording information and the recording information when the posted data is disclosed. In this embodiment, since the performance information based on the music information is not included in the recording information, the server apparatus can play the music from the music ID of the posted data so that it can be reproduced in the FLV format on a personal computer that cannot perform the music. Identify and create FLV format data while inserting the music performance sound of that music ID.
投稿データをコマンダ２で再生する場合は、コマンダ２側で投稿データの楽曲ＩＤを特定し、コマンダ２の音源制御部２５がその楽曲ＩＤに対応した楽曲演奏を行いながら投稿データを再生する。投稿データをパーソナルコンピュータなどで再生する場合は、予めパーソナルコンピュータなどにＦｌａｓｈプレーヤ（投稿データ再生ソフト）がインストールされている。パーソナルコンピュータなどから投稿データを選択すると、サーバ装置は、選択した装置が、コマンダＩＤではないので、パーソナルコンピュータなどからの選択と判断し、楽曲ＩＤに対応する演奏音が組み込まれたＦＬＶ形式の投稿データを送出し、パーソナルコンピュータなどはＦｌａｓｈプレーヤを用いて投稿データを再生する。
When the posted data is reproduced by the commander 2, the commander 2 specifies the music ID of the posted data, and the sound
図５には、公開データ作成処理にて利用する楽曲データのデータ構成が示されている。楽曲データには、楽曲ＩＤに対応付けられた楽曲情報とガイドメロディ情報を含んで構成されている。投稿データに含まれる楽曲ＩＤに基づいて、この楽曲データを読み出し、楽曲情報、ガイドメロディ情報の再生に同期して、投稿データ内の録音情報、録画情報を再生することで、投稿データ作成時における楽曲を再現することが可能となる。サーバ装置には、コマンダ２のＩＤが予め登録されているので、コマンダ２からの要求であればＭＰＥＧ形式の投稿データを再生し、それ以外からの要求（パーソナルコンピュータなどからの要求）であればＦＬＶ形式の投稿データを再生する。 FIG. 5 shows the data structure of music data used in the public data creation process. The music data includes music information associated with the music ID and guide melody information. Based on the song ID included in the posted data, this song data is read out, and the recorded information and recorded information in the posted data are reproduced in synchronization with the reproduction of the song information and the guide melody information. It becomes possible to reproduce the music. Since the ID of the commander 2 is registered in the server device in advance, if it is a request from the commander 2, the post data in the MPEG format is reproduced, and if it is a request from the other (request from a personal computer or the like) Play FLV format post data.
図６は、本発明の実施形態に係る公開データ作成処理を説明するための図である。まず、録音情報にフレーズ区間を設定する設定処理が実施される。フレーズ区間は、録音情報と一緒に再生される楽曲情報あるいはガイドメロディ情報を用いて判定してもよいし、録音情報の録音時に一緒に再生された楽曲情報を用いてもよい。フレーズ区間には、楽曲の小節、あるいは、歌詞の１フレーズなど聴感上区切りのよい適宜区間を利用することができる。なお、１楽曲を通して複数のフレーズ区間を設定してもよいし、１つのフレーズ区間であってもよい。 FIG. 6 is a diagram for explaining public data creation processing according to the embodiment of the present invention. First, a setting process for setting a phrase section in the recording information is performed. The phrase section may be determined using music information or guide melody information that is reproduced together with the recording information, or may be music information that is reproduced together when recording information is recorded. As the phrase section, an appropriate section having a good separation in terms of audibility such as a measure of music or one phrase of lyrics can be used. A plurality of phrase sections may be set through one piece of music, or one phrase section may be used.
本実施形態では、楽曲演奏時に判定された所定時間毎の判定結果（図３のＳ１０５にて判定されたサブフレーズ区間）を利用して各フレーズ区間にて歌唱が行われたか否かが判定される。図では説明のため、フレーズ区間を、複数のサブフレーズ区間に対応付けて表示（フレーズ１区間では４つのサブフレーズ区間が対応）しているが、複数のサブフレーズ区間はフレーズ区間に対応する必要はない。
In the present embodiment, it is determined whether or not singing has been performed in each phrase section by using a determination result (sub-phrase section determined in S105 of FIG. 3) for each predetermined time determined during music performance. The For the sake of illustration, the phrase section is displayed in association with a plurality of sub-phrase sections (four sub-phrase sections correspond to the
本実施形態では、フレーズ区間のうち過半数のサブフレーズ区間において歌唱が行われたと判定された場合、当該フレーズ区間においてガイドメロディ情報を再生させる再生処理を実行する。なお、フレーズ区間において歌唱が行われたと判定するためのサブフレーズ区間の割合は任意に設定することができる。フレーズ１区間では、４つのサブフレーズ区間のうち、３つについて歌唱が行われたと判定されているため、ガイドメロディ情報は再生されない。フレーズ２区間では、歌唱が行われたサブフレーズ区間は１つであるため、ガイドメロディ情報が再生される。
In this embodiment, when it is determined that singing has been performed in a majority of the sub-phrase sections in the phrase section, a reproduction process for reproducing guide melody information in the phrase section is executed. In addition, the ratio of the subphrase area for determining that the singing was performed in the phrase area can be arbitrarily set. In the
このように、本実施形態ではフレーズ区間毎に歌唱が行われたか否かを判定することで、区切りよくガイドメロディ情報を再生し、聴感上の違和感を抑えることができる。また、録音情報に対して実行されるため、例えば、フレーズ２区間の途中のサブフレーズ区間で歌唱が行われたと判定される場合においても、フレーズ区間として歌唱が行われなかったと判定した場合には、当該フレーズ区間の最初からガイドメロディ情報を再生させることが可能となり聴感上の違和感を軽減することが可能となる。 Thus, in this embodiment, by determining whether or not the singing is performed for each phrase section, it is possible to reproduce the guide melody information with good separation and to suppress a sense of discomfort in the sense of hearing. Moreover, since it is performed with respect to the recording information, for example, even when it is determined that the singing was performed in the subphrase section in the middle of the phrase 2 section, when it is determined that the singing was not performed as the phrase section, Thus, it is possible to reproduce the guide melody information from the beginning of the phrase section, and to reduce the sense of incongruity in hearing.
本実施形態では、１つのガイドメロディ情報を含む楽曲について説明したが、デュエット楽曲のように複数（２以上）のガイドメロディ情報を含む楽曲に対しても適用することができる。図７は、デュエット楽曲のように２つのガイドメロディ情報を有する楽曲データのデータ構成を示す図である。このような楽曲データの場合には、図８に示される公開データ作成処理が実行される。 In the present embodiment, the music including one guide melody information has been described, but the present invention can also be applied to a music including a plurality (two or more) of guide melody information such as a duet music. FIG. 7 is a diagram showing a data structure of music data having two guide melody information like a duet music. In the case of such music data, the public data creation process shown in FIG. 8 is executed.
図８の実施形態では、録音情報中の各サブフレーズ区間において、どちらのパートで歌唱されたか、すなわち、メロディＡが歌唱されたのか、メロディＢが歌唱されたのかが判別されている。これは歌唱時において、メロディＡ、メロディＢに対応するガイドメロディ情報と対比することで判別することができる。例えば、フレーズ１区間においてはメロディＡにて歌唱されたサブフレーズ区間を２つ有しているため、メロディＡの歌唱が行わ
れたと判定し、ガイドメロディ情報Ａの再生を中止する。また、フレーズ２区間においては、メロディＢにて歌唱されたサブフレーズ区間が１つであるため、フレーズ２区間においては歌唱が行われなかったと判定し、ガイドメロディＢを再生させる。
In the embodiment of FIG. 8, it is determined in which part of each sub-phrase section in the recording information is sung, that is, whether melody A is sung or melody B is sung. This can be determined by comparing with guide melody information corresponding to melody A and melody B at the time of singing. For example, since the
さらに、本実施形態では、２つのガイドメロディＡ、Ｂが同時に再生される箇所についても対応できる。フレーズ４区間は、この例を示したものであって、メロディＡ、Ｂが共に歌唱された２つのサブフレーズ区間と、メロディＢのみが歌唱された１つのサブフレーズ区間となっている。この場合、フレーズ４区間では、両メロディＡ、Ｂについて歌唱が行われたと判定し、両ガイドメロディ情報Ａ、Ｂを再生させない。 Further, in the present embodiment, it is possible to deal with a place where two guide melodies A and B are reproduced simultaneously. The phrase 4 section shows this example, and includes two sub-phrase sections where both the melody A and B are sung and one sub-phrase section where only the melody B is sung. In this case, in the phrase 4 section, it is determined that both melody A and B are sung, and both guide melody information A and B are not reproduced.
本実施形態では、１つの録音情報中に複数パートの歌唱音声（メロディＡ、メロディＢ）が混入している場合について説明したが、各パート毎の録音情報としてもよい。その場合、録音情報とガイドメロディ情報を対応付けることで、図６にて説明した公開データ作成処理と同様の処理にてガイドメロディの再生、非再生を決定することができる。また、歌唱用マイク毎の録音情報に対して、それぞれ録音情報とガイドメロディ情報を対応付け、録音情報毎にガイドメロディの再生、非再生を決定してもよい。 In the present embodiment, a case has been described where singing voices (melody A, melody B) of a plurality of parts are mixed in one piece of recording information, but recording information for each part may be used. In this case, by associating the recording information with the guide melody information, it is possible to determine whether to reproduce or not reproduce the guide melody by the same process as the public data creation process described with reference to FIG. Further, the recording information and the guide melody information may be associated with the recording information for each singing microphone, and the reproduction or non-reproduction of the guide melody may be determined for each recording information.
以上、本実施形態では、投稿サービスにおける録音情報に関し、サーバ装置にて行われる公開データ作成処理を説明したが、このような場合に限らず、例えば、録音情報をコマンダ２にて再生する場合あるいは、サーバ装置にてストリーミング再生させる場合に用いることとしてもよい。 As described above, in the present embodiment, the public data creation process performed in the server device has been described with respect to the recording information in the posting service. However, the present invention is not limited to such a case. The server device may be used for streaming playback.
なお、本発明はこれらの実施形態のみに限られるものではなく、それぞれの実施形態の構成を適宜組み合わせて構成した実施形態も本発明の範疇となるものである。 Note that the present invention is not limited to these embodiments, and embodiments configured by appropriately combining the configurations of the respective embodiments also fall within the scope of the present invention.
１…リモコン装置、１１…表示部、１２…ビデオＲＡＭ、１３…映像制御部、１４…メモリ、１５…制御部、１６…無線ＬＡＮ通信部、１７…操作部、１８…操作処理部、１９…赤外線通信部、２…コマンダ（カラオケ装置）、２１…操作部、２２…操作処理部、２３…赤外線通信部、２４…インターフェイス部、２５…音声制御部、２６…ＭＩＤＩ音源、２７…メモリ、２８…ビデオＲＡＭ、２９…映像再生部、３０…制御部、３１…映像制御部、３２…ハードディスク、４１…モニタ、４２…スピーカー、４３…カメラ、４４ａ、４４ｂ…歌唱用マイク、１００…ＬＡＮ、１１０…アクセスポイント、１２０…ルータ
DESCRIPTION OF
Claims (5)
前記フレーズ区間にて歌唱が行われたか否かを判定する判定処理と、
前記楽曲識別情報に対応する録音情報と楽曲情報とを同期して再生させる際、歌唱が行われたと判定された前記フレーズ区間では、前記楽曲情報に含まれるガイドメロディ情報を再生させず、歌唱が行われなかったと判定された前記フレーズ区間では、前記ガイドメロディ情報を再生させる再生処理と、を実行し、
前記判定処理は、前記フレーズ区間よりも短いサブフレーズ区間毎に歌唱が行われたか否かを検出し、前記フレーズ区間中、歌唱が行われたと判定された前記サブフレーズ区間の割合に基づいて、前記フレーズ区間に音声が含まれているか否かを判定することを特徴とする
楽曲再生装置。 A setting process for setting a phrase section for the recording information recorded in association with the music identification information;
A determination process for determining whether or not a song has been performed in the phrase section;
When the recorded information and the music information corresponding to the music identification information are reproduced in synchronism with each other, the singing is performed without reproducing the guide melody information included in the music information in the phrase section determined to have been sung. In the phrase section determined not to be performed, a reproduction process for reproducing the guide melody information is performed ,
The determination process detects whether or not singing has been performed for each sub-phrase section shorter than the phrase section, and based on the ratio of the sub-phrase section determined to have been sung in the phrase section, It is determined whether the said phrase area contains audio | voice, The music reproduction apparatus characterized by the above-mentioned .
前記フレーズ区間にて歌唱が行われたか否かを判定する判定処理と、A determination process for determining whether or not a song has been performed in the phrase section;
前記楽曲識別情報に対応する録音情報と楽曲情報とを同期して再生させる際、歌唱が行われたと判定された前記フレーズ区間では、前記楽曲情報に含まれるガイドメロディ情報を再生させず、歌唱が行われなかったと判定された前記フレーズ区間では、前記ガイドメロディ情報を再生させる再生処理と、を実行し、When the recorded information and the music information corresponding to the music identification information are reproduced in synchronism with each other, the singing is performed without reproducing the guide melody information included in the music information in the phrase section determined to have been sung. In the phrase section determined not to be performed, a reproduction process for reproducing the guide melody information is performed,
前記録音情報は、複数のパートを含む録音情報であって、The recording information is recording information including a plurality of parts,
前記判定処理と前記再生処理は、録音情報の各パートについて処理を実行することを特徴とするThe determination process and the reproduction process are performed for each part of the recording information.
楽曲再生装置。Music playback device.
請求項１または請求項２に記載の楽曲再生装置。 The music reproducing apparatus according to claim 1, wherein the determination process determines whether or not a song has been performed based on a volume.
前記フレーズ区間にて歌唱が行われたか否かを判定する判定処理と、
前記楽曲識別情報に対応する録音情報と楽曲情報とを同期して再生させる際、歌唱が行われたと判定された前記フレーズ区間では、前記楽曲情報に含まれるガイドメロディ情報を再生させず、歌唱が行われなかったと判定された前記フレーズ区間では、前記ガイドメロディ情報を再生させる再生処理と、をコンピュータに実行させ、
前記判定処理は、前記フレーズ区間よりも短いサブフレーズ区間毎に歌唱が行われたか否かを検出し、前記フレーズ区間中、歌唱が行われたと判定された前記サブフレーズ区間の割合に基づいて、前記フレーズ区間に音声が含まれているか否かを判定することを特徴とする
楽曲再生プログラム。 A setting process for setting a phrase section in the recording information recorded in association with the music identification information;
A determination process for determining whether or not a song has been performed in the phrase section;
When the recorded information and the music information corresponding to the music identification information are reproduced in synchronism with each other, the singing is performed without reproducing the guide melody information included in the music information in the phrase section determined to have been sung. In the phrase section determined not to be performed, the computer is caused to execute a reproduction process for reproducing the guide melody information,
The determination process detects whether or not singing has been performed for each sub-phrase section shorter than the phrase section, and based on the ratio of the sub-phrase section determined to have been sung in the phrase section, A music reproduction program characterized by determining whether or not voice is included in the phrase section .
前記フレーズ区間にて歌唱が行われたか否かを判定する判定処理と、A determination process for determining whether or not a song has been performed in the phrase section;
前記楽曲識別情報に対応する録音情報と楽曲情報とを同期して再生させる際、歌唱が行われたと判定された前記フレーズ区間では、前記楽曲情報に含まれるガイドメロディ情報を再生させず、歌唱が行われなかったと判定された前記フレーズ区間では、前記ガイドメロディ情報を再生させる再生処理と、をコンピュータに実行させ、When the recorded information and the music information corresponding to the music identification information are reproduced in synchronism with each other, the singing is performed without reproducing the guide melody information included in the music information in the phrase section determined to have been sung. In the phrase section determined not to be performed, the computer is caused to execute a reproduction process for reproducing the guide melody information,
前記録音情報は、複数のパートを含む録音情報であって、The recording information is recording information including a plurality of parts,
前記判定処理と前記再生処理は、録音情報の各パートについて処理を実行することを特徴とするThe determination process and the reproduction process are performed for each part of the recording information.
楽曲再生プログラム。Music playback program.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2010218291A JP5311071B2 (en) | 2010-09-29 | 2010-09-29 | Music playback device and music playback program |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2010218291A JP5311071B2 (en) | 2010-09-29 | 2010-09-29 | Music playback device and music playback program |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2012073426A JP2012073426A (en) | 2012-04-12 |
| JP5311071B2 true JP5311071B2 (en) | 2013-10-09 |
Family
ID=46169653
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2010218291A Active JP5311071B2 (en) | 2010-09-29 | 2010-09-29 | Music playback device and music playback program |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP5311071B2 (en) |
Families Citing this family (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP6176721B2 (en) * | 2013-09-30 | 2017-08-09 | 株式会社エクシング | Karaoke program, information processing device and host device |
| JP6315475B2 (en) * | 2014-10-19 | 2018-04-25 | 株式会社エクシング | Karaoke management system, program and karaoke system |
| JP2016157083A (en) * | 2015-02-26 | 2016-09-01 | パイオニア株式会社 | Reproduction device, reproduction method, and program |
| JP2019215570A (en) * | 2019-08-27 | 2019-12-19 | パイオニア株式会社 | Reproduction device, reproduction method, and program |
Family Cites Families (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2000267677A (en) * | 1999-03-16 | 2000-09-29 | Daiichikosho Co Ltd | Karaoke device having feature in volume control of model vocal |
| JP4275510B2 (en) * | 2003-11-19 | 2009-06-10 | 株式会社第一興商 | Karaoke device characterized by volume control of model vocals |
| JP4994890B2 (en) * | 2007-03-05 | 2012-08-08 | 株式会社第一興商 | A karaoke device that allows you to strictly compare your recorded singing voice with a model song |
-
2010
- 2010-09-29 JP JP2010218291A patent/JP5311071B2/en active Active
Also Published As
| Publication number | Publication date |
|---|---|
| JP2012073426A (en) | 2012-04-12 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP5218791B2 (en) | Post data determination device, karaoke device, server device, and post data determination program | |
| JP5311071B2 (en) | Music playback device and music playback program | |
| JP5622679B2 (en) | Karaoke equipment | |
| JP5173380B2 (en) | Karaoke device that can make karaoke music selection reservations based on personal music composition | |
| JP2014186177A (en) | Reproduction device | |
| JP6196839B2 (en) | A communication karaoke system characterized by voice switching processing during communication duets | |
| JP2014071226A (en) | Music reproduction system and music reproduction method | |
| JP6096566B2 (en) | Performance start synchronization system in network chorus | |
| JP6058991B2 (en) | Singing video selection system corresponding to singing voice | |
| JP2014066922A (en) | Musical piece performing device | |
| JP6266234B2 (en) | Karaoke system | |
| JP6144477B2 (en) | Collaboration singing video display system | |
| JP5349171B2 (en) | Karaoke system with performance condition setting function | |
| JP5224509B2 (en) | Karaoke host device, karaoke recording system | |
| JP6543897B2 (en) | Music playback apparatus and music playback program. | |
| JP6474292B2 (en) | Karaoke equipment | |
| JP5224508B2 (en) | Karaoke recorder | |
| JP2014235301A (en) | Command input discrimination system using gesture | |
| JP7484943B2 (en) | Karaoke program and karaoke device | |
| JP2015011155A (en) | Communication karaoke system featuring communication duet by multiple people | |
| JP6642215B2 (en) | Music selection device, karaoke system and music selection program | |
| JP6574697B2 (en) | Karaoke system | |
| JP6057079B2 (en) | Karaoke device and karaoke program | |
| JP6648464B2 (en) | Karaoke system and composite posting information creation method | |
| JP2022155749A (en) | Playback position instruction device, music playback device and playback position instruction program |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20130130 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20130206 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20130308 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20130605 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20130618 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 Ref document number: 5311071 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |