JP2012073349A - Karaoke device and karaoke system - Google Patents
Karaoke device and karaoke system Download PDFInfo
- Publication number
- JP2012073349A JP2012073349A JP2010217184A JP2010217184A JP2012073349A JP 2012073349 A JP2012073349 A JP 2012073349A JP 2010217184 A JP2010217184 A JP 2010217184A JP 2010217184 A JP2010217184 A JP 2010217184A JP 2012073349 A JP2012073349 A JP 2012073349A
- Authority
- JP
- Japan
- Prior art keywords
- search
- karaoke
- data
- singing
- performance
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Reverberation, Karaoke And Other Acoustics (AREA)
Abstract
Description
本発明は、カラオケ演奏に際し、予め蓄積された歌唱データを並行して再生する技術に関する。 The present invention relates to a technique for reproducing song data stored in advance in karaoke performance.
従来、ユーザからの要求に基づき楽曲を順次演奏するカラオケ装置において、一人でデュエット曲を歌う場合であってもデュエットする相手の映像を表示してデュエットしている雰囲気を味わえる装置が提案されている（例えば、特許文献１参照）。 2. Description of the Related Art Conventionally, in a karaoke apparatus that sequentially plays songs based on a request from a user, an apparatus that displays a video of a duet partner and can enjoy a duet atmosphere even when a duet song is singed alone has been proposed. (For example, refer to Patent Document 1).
具体的には、デュエット曲においては、２種類の歌唱パート（以下、「パート」という）が用意されている。ここでいう「パート」とは、いわゆる声部（歌唱する区間）であり、合唱で各奏者が受け持つ部分をいう。例えば、男性用のＡパート、女性用のＢパートがある、という具合である。 Specifically, in the duet music, two types of singing parts (hereinafter referred to as “parts”) are prepared. The “part” referred to here is a so-called voice part (singing section), which is a part that each player plays in chorus. For example, there are A part for men and B part for women.
上述の装置は、例えば男性が一人で歌う場合にＡパートを選択すると、女性用のＢパートを、映像とともに再生するものである。これによって、一人で歌っている場合でも、あたかもデュエットしているかのような雰囲気を味わえる。 For example, when the A part is selected when a man sings alone, the apparatus described above reproduces the B part for women together with the video. As a result, even if you sing alone, you can feel as if you are duet.
しかしながら、上記特許文献に記載される技術では、次のような場合には問題が生じる。例えば、Ａパートを歌うはずの男性が、間違えてＢパートを担当してしまったような場合である。この場合、Ｂパートとのハーモニーの部分では、歌唱者も映像もＢパートを歌うことになり、ハーモニーが台無しになる。また、Ａパートのみの部分では、男性がＢパートを担当することで、誰も歌わない部分が生じる。 However, the techniques described in the above-mentioned patent documents cause problems in the following cases. For example, it is a case where a man who should sing the A part mistakes for the B part. In this case, in the harmony part with the B part, both the singer and the video sing the B part, and the harmony is spoiled. Moreover, in the part only of A part, the part in which no one sings arises because a man takes charge of B part.
つまり、歌唱者がＡパートを歌いＢパートを映像とともに再生する場合、歌唱者がＡパートを完全に歌える保障がないため、不自然な動画再生となることがある。なお、この問題は、デュエット曲に限られず、複数のパートを有する楽曲であれば同様に生じる問題である。 That is, when the singer sings the A part and reproduces the B part together with the video, there is no guarantee that the singer can completely sing the A part, and thus unnatural video reproduction may occur. Note that this problem is not limited to a duet song, and is a problem that similarly occurs if a song has a plurality of parts.
本発明は、上述した問題を解決するためになされたものであり、その目的は、複数のパートを有する楽曲において、一部のパートを装置側で受け持つにあたり、全体として自然な楽曲の演奏を実現することにある。 The present invention has been made in order to solve the above-described problems, and the object of the present invention is to realize a natural musical performance as a whole when a piece of music is handled on the device side. There is to do.
上述した課題を解決するためになされた請求項１に係るカラオケ装置は、複数のパートを有する楽曲のカラオケ演奏に際して、複数の歌唱データを並行して再生可能とするものである。 The karaoke apparatus according to claim 1 made to solve the above-described problem enables a plurality of pieces of song data to be reproduced in parallel when performing a karaoke performance of a music piece having a plurality of parts.
ここでは、複数の歌唱データが、楽曲の各パートの全てを網羅している。例えば、楽曲に男性用のＡパートと女性用のＢパートがある場合、例えば、Ａパートに対応する歌唱データ、Ｂパートに対応する歌唱データの２つの歌唱データで各パートが網羅されるという具合である。また例えば、ある歌唱データは、途中までがＡパートで、その後はＢパートとなっていることが考えられる。この場合、途中までがＢパートでその後がＡパートとなっている歌唱データがあれば、これら２つの歌唱データで各パートを網羅してもよい。もちろん、３つ以上のパートを有する楽曲であっても、同様である。 Here, the plurality of singing data covers all the parts of the music. For example, if there are A part for men and B part for women in the music, for example, each part is covered by two singing data of singing data corresponding to A part and singing data corresponding to B part. It is. Further, for example, it is conceivable that some singing data is part A until the middle and part B thereafter. In this case, if there is singing data in which the B part is partway and the A part is thereafter, each part may be covered by these two singing data. Of course, the same applies to music having three or more parts.
また、歌唱データは、少なくとも歌唱音声を含むものである。歌唱音声の他には歌唱映像を含むものとすることが考えられる。歌唱映像が含まれる場合、歌唱映像がカラオケ演奏に並行して再生され、例えばデュエットの相手が実際にいるような臨場感が演出されるため、好ましい。 The singing data includes at least a singing voice. It is conceivable to include a singing video in addition to the singing voice. When the singing video is included, the singing video is reproduced in parallel with the karaoke performance, and for example, a realistic feeling that the duet is actually presenting is produced.
ここで特に、本カラオケ装置では、パート推定手段が、歌唱者が現に担当している担当パートを当該歌唱者の音声に基づき推定する。推定手法の一例としては、歌唱者の音声の有無を検出することが考えられる。例えば、Ａパートを担当しているはずの歌唱者が、Ａパートの部分を歌っているか否かを判断するという具合である。また、推定手法の別例としては、歌唱者の音声の音程を検出することが考えられる。例えば、Ａパートの音程で歌っているのか、Ｂパートの音程で歌っているのかを判断するという具合である。なお、「音声」には、歌唱音声だけでなく、楽曲中の台詞などの音声も含まれる。 Here, in particular, in the present karaoke apparatus, the part estimating means estimates the responsible part that the singer is currently in charge of based on the voice of the singer. As an example of the estimation method, it is conceivable to detect the presence or absence of a singer's voice. For example, a singer who should be in charge of part A determines whether or not the part of part A is being sung. As another example of the estimation method, it is conceivable to detect the pitch of the singer's voice. For example, it is determined whether the song is sung at the pitch of the A part or the pitch of the B part. Note that “voice” includes not only singing voice but also voice such as lines in music.
そして、本カラオケ装置では、歌唱データ再生手段によって、推定される担当パートに応じ歌唱データが切り換えられて再生されることにより、担当パートを除く残りのパートに対応する歌唱データが再生される。例えば、Ａパートを歌うはずの男性が途中からＢパートを歌ってしまった場合、途中まではＢパートの歌唱データが再生されるが、途中からは推定される担当パートが替わることで、Ａパートの歌唱データが再生される。 And in this karaoke apparatus, the song data corresponding to the remaining part excluding the responsible part is reproduced by switching the song data according to the estimated responsible part and reproducing it by the song data reproducing means. For example, if a man who should sing Part A sings Part B from the middle, the singing data of Part B will be played up to the middle, but the estimated part in charge will change from the middle. Singing data is reproduced.
つまり、歌唱者のパートに対しても歌唱データを用意することにより、歌唱者がどのパートを歌った場合でも、そのパート以外の歌唱データが再生されるのである。なお、「担当パートを除く残りのパート」とあるが、担当パートがない場合、残りのパートが全パートとなることもあり得る。 That is, by preparing singing data for a singer's part, singing data other than that part is reproduced regardless of which part the singer sings. It should be noted that “the remaining parts excluding the part in charge” is described, but if there is no part in charge, the remaining part may be all parts.
これにより、複数のパートを有する楽曲において、一部のパートを装置側で受け持つにあたり、全体として自然な楽曲の演奏を実現することができる。
ところで、上述した歌唱データは、例えば、複数のパートを有する楽曲に対し予め用意されるものとしてもよい。また例えば、蓄積手段に記憶された歌唱データの中からカラオケ演奏に先立ち所定の検索条件で検索手段によって検索されるものとしてもよい。この場合、検索指示手段によって、検索手段による歌唱データの検索が指示される（請求項２）。
Thereby, in the music which has a plurality of parts, when a part is handled on the apparatus side, it is possible to realize a natural music performance as a whole.
By the way, the singing data mentioned above is good also as what is prepared beforehand with respect to the music which has several parts, for example. Further, for example, the search means may be searched from the singing data stored in the storage means under a predetermined search condition prior to the karaoke performance. In this case, the search instruction means instructs the search means to search for singing data (claim 2).
蓄積手段は、例えばハードディスク装置などとして具現化される。このような蓄積手段は、カラオケ装置が備えることとしてもよいし、カラオケ装置と通信可能に接続される外部のカラオケサーバが備えることとしてもよい。検索手段についても同様である。外部のカラオケサーバが蓄積手段を備える場合、カラオケ装置の検索指示手段は、通信回線を介して検索を指示（要求）することとなる。また、この場合、歌唱データについては、例えばカラオケ装置側で作成して、カラオケサーバへアップロードすることが考えられる。このようにすれば、十分な量の歌唱データを蓄積することができる。 The storage means is embodied as a hard disk device, for example. Such storage means may be provided in the karaoke device, or may be provided in an external karaoke server that is communicably connected to the karaoke device. The same applies to the search means. When the external karaoke server is provided with storage means, the search instruction means of the karaoke device instructs (requests) search via a communication line. In this case, for example, the singing data may be created on the karaoke device side and uploaded to the karaoke server. In this way, a sufficient amount of singing data can be accumulated.
このように歌唱データを検索することを考えると、適切な歌唱データの検索は、自然な楽曲の演奏を行うために重要である。
例えば、歌唱データに、当該歌唱データの楽曲を特定可能な楽曲情報及び当該楽曲のパートを特定可能なパート情報を対応付けることが考えられる。この場合、検索指示手段は、上述の検索条件として、演奏対象の楽曲を指定し、楽曲情報及びパート情報に基づく歌唱データの検索を検索手段に指示する（請求項３）。このようにすれば、演奏対象となる楽曲に対し適切な歌唱データが検索されるため、自然な楽曲の演奏に寄与する。なお、楽曲情報は、曲名や曲番号として具現化される。
Considering searching for song data in this way, searching for appropriate song data is important for performing natural music.
For example, it is conceivable to associate song information that can specify the song of the song data and part information that can specify the part of the song with the song data. In this case, the search instruction means designates the music to be played as the search condition described above, and instructs the search means to search for song data based on the music information and the part information (claim 3). If it does in this way, since suitable singing data is searched with respect to the music used as a performance object, it contributes to the performance of a natural music. Note that the music information is embodied as a song name or a song number.
ところで、演奏対象の楽曲の演奏速度と歌唱データの再生速度とが合致しない場合、歌唱データの再生速度を楽曲の演奏速度に合わせて変更することが考えられるが、両者の速度が大きく異なると、歌唱データの再生に違和感を生じる虞がある。 By the way, if the performance speed of the music to be played and the playback speed of the song data do not match, it is possible to change the playback speed of the song data according to the performance speed of the music, There is a possibility of causing a sense of incongruity in the reproduction of song data.
そこで、歌唱データに、当該歌唱データの再生速度を示す速度情報を対応付けることが考えられる。この場合、検索指示手段は、検索条件として、演奏対象の楽曲の演奏速度を指定し、当該演奏速度と同じ演奏速度の速度情報が対応付けられた歌唱データの検索を検索手段に指示する（請求項４）。つまり、演奏対象の楽曲の演奏速度に合致する再生速度を持つ歌唱データを検索するのである。このようにすれば、自然な楽曲の演奏に寄与する。なお、演奏対象の楽曲の演奏速度は、歌唱者によって設定されることが考えられる。また、歌唱者による設定がなされない場合にはデフォルト値を使用してもよい。 Therefore, it is conceivable to associate speed information indicating the playback speed of the song data with the song data. In this case, the search instruction means designates the performance speed of the music to be played as the search condition, and instructs the search means to search for song data associated with speed information of the same performance speed as the performance speed (claim) Item 4). That is, singing data having a reproduction speed that matches the performance speed of the musical piece to be played is searched. In this way, it contributes to the performance of natural music. In addition, it is possible that the performance speed of the music of performance object is set by the singer. Moreover, you may use a default value when the setting by a singer is not made.
また、演奏対象の楽曲の演奏キーと歌唱データのキーとが合致しない場合も、再生速度の場合と同様、歌唱データの再生に違和感を生じる虞がある。そこで、歌唱データに、当該歌唱データの音階の種類であるキーを示すキー情報を対応付けることが考えられる。この場合、検索指示手段は、検索条件として、演奏対象の楽曲の演奏キーを指定し、当該演奏キーと同じキーのキー情報が対応付けられた歌唱データの検索を検索手段に指示する（請求項５）。つまり、演奏対象の楽曲の演奏キーと合致するキーを持つ歌唱データを検索するのである。このようにすれば、自然な楽曲の演奏に寄与する。なお、演奏対象の楽曲の演奏キーは、歌唱者によって設定されることが考えられる。歌唱者による設定がなされない場合にはデフォルト値を使用してもよい。 Further, even when the performance key of the musical piece to be played does not match the key of the song data, there is a possibility that the reproduction of the song data may be uncomfortable as in the case of the playback speed. Therefore, it is conceivable to associate key information indicating a key that is the kind of scale of the song data with the song data. In this case, the search instruction means designates the performance key of the music to be played as a search condition, and instructs the search means to search for singing data associated with key information of the same key as the performance key. 5). That is, singing data having a key that matches the performance key of the musical piece to be played is searched. In this way, it contributes to the performance of natural music. In addition, it is possible that the performance key of the performance object music is set by the singer. The default value may be used if no setting is made by the singer.
さらにまた、カラオケ装置がカメラなどの撮影手段を備える場合、歌唱者の映像がモニタなどに表示される。このとき、歌唱データが歌唱映像を含むものであれば、歌唱者の映像に並べて、歌唱データの歌唱映像を再生することが考えられる。 Furthermore, when the karaoke apparatus includes photographing means such as a camera, the video of the singer is displayed on a monitor or the like. At this time, if the singing data includes a singing video, it is considered that the singing video of the singing data is reproduced along with the singing video.
ところが、撮影手段による映像の明度と歌唱データの歌唱映像の明度とが大きく異なると、歌唱映像の再生に違和感を抱く虞がある。そこで、撮影手段が映像撮影時の映像の明度を測定する機能を有しており、歌唱データは、歌唱映像を含むものとし、当該歌唱映像の明度を示す明度情報を対応付けることが考えられる。この場合、検索指示手段は、検索条件として、撮影手段による映像の明度と、歌唱データの有する明度情報に基づく明度とを比較し、お互いの明度差がもっとも小さい歌唱データの検索を検索手段に指示する（請求項６）。このようにすれば、自然な楽曲の演奏に寄与する。 However, if the brightness of the video by the photographing means and the brightness of the singing video of the singing data are greatly different, there is a possibility that the reproduction of the singing video may feel uncomfortable. Therefore, it is conceivable that the photographing means has a function of measuring the brightness of the video at the time of video shooting, and the singing data includes a singing video, and is associated with lightness information indicating the brightness of the singing video. In this case, the search instruction means compares the brightness of the video by the photographing means with the brightness based on the brightness information of the song data as a search condition, and instructs the search means to search for song data with the smallest brightness difference between them. (Claim 6). In this way, it contributes to the performance of natural music.
なお、ここまではカラオケ装置の発明として説明してきたが、カラオケ装置とカラオケサーバとを備えるカラオケシステムの発明として実現することもできる（請求項７）。もちろん、このようなカラオケシステムによっても、上記カラオケ装置と同様の効果が奏される。また、上記カラオケ装置の構成（請求項３〜６）と同様の構成を採用することができる。 In addition, although demonstrated so far as invention of a karaoke apparatus, it can also be implement | achieved as invention of a karaoke system provided with a karaoke apparatus and a karaoke server (Claim 7). Of course, such a karaoke system can provide the same effects as the karaoke apparatus. Moreover, the structure similar to the structure (Claims 3-6) of the said karaoke apparatus is employable.
以下、図面に基づき、一実施形態を説明する。
図１は、カラオケシステム１を示すブロック図である。
図１に示すように、カラオケシステム１は、複数台のカラオケ装置１０と、カラオケサーバ３０とを備えている。複数台の各カラオケ装置１０は、カラオケボックス内ＬＡＮ（以下、単に「ＬＡＮ」という）４０に接続されている。ＬＡＮ４０は、ルータ５０に接続されている。これにより、各カラオケ装置１０は、ＬＡＮ４０、ルータ５０を介し、インターネット６０によって、カラオケサーバ３０とのデータ通信が可能となっている。
Hereinafter, an embodiment will be described with reference to the drawings.
FIG. 1 is a block diagram showing a karaoke system 1.
As shown in FIG. 1, the karaoke system 1 includes a plurality of
カラオケ装置１０は、装置全体の制御を司る制御部１１を中心に構成されている。制御部１１は、バスライン１２に接続されている。また、制御部１１には、音声制御部１３が接続されている。
The
バスライン１２には、操作処理部１４、画像入力部１５、インターフェース部１６、ビデオＲＡＭ１７、映像再生部１８、及び、ＨＤＤ１９が接続されている。一方、音声制御部１３には、２本のマイク２０ａ，２０ｂ、音声分析部２１、ＭＩＤＩ音源２２、及び、スピーカ２３が接続されている。
An
操作処理部１４は、操作部１４ａからの信号を処理する。操作部１４ａからは、演奏する楽曲データを特定する曲番号、楽曲データの演奏速度、演奏キーなどの情報がユーザによって入力される。操作部１４ａは、例えば、装置本体と無線通信を行うリモコンとして具現化される。
The
画像入力部１５には、カメラ１５ａが接続されている。カメラ１５ａは、カラオケ装置１０が設置される室内に設置され、歌唱者の映像を撮影可能となっている。カメラ１５ａからの信号は、画像入力部１５にて処理される。また、画像入力部１５は、カメラ１５ａから取得される映像の明度を測定可能となっている。なお、画像入力部１５が映像の明度を測定するものとしたが、映像の明度として、カメラ１５ａの露出計が示す露出値を取得する構成としてもよい。
A
インターフェース部１６は、カラオケ装置１０をＬＡＮ４０に接続するための構成である。これにより、上述したように、インターネット６０によるカラオケサーバ３０とのデータ通信が可能となる。
The
ビデオＲＡＭ１７は、映像情報を一時的に記憶する。このビデオＲＡＭ１７は、映像再生部１８にも接続されており、映像再生部１８は、ビデオＲＡＭ１７からの映像情報及びバスライン１２を介して送信されてくる映像データに基づく映像の再生を行う。映像再生部１８には、映像制御部２４が接続されている。また、映像制御部２４には、表示部２４ａが接続されている。表示部２４ａは、モニタ装置として具現化される。かかる構成により、映像制御部２４は、映像再生部１８から出力される映像を表示部２４ａに表示可能となっている。
The
ＨＤＤ１９は、いわゆるハードディスクドライブ装置であり、カラオケサーバ３０から配信される楽曲データなどを記憶している。また、後述するように、デュエット曲においては、一人で歌った場合でもデュエットの雰囲気が味わえるように、相手パートの動画データを予めいくつか記憶している。
The
次に、音声制御部１３に接続される構成について述べると、２本のマイク２０ａ，２０ｂは、音声を入力するためのものである。歌唱者の歌唱音声は、これらのマイク２０ａ，２０ｂを介して入力される。
Next, the configuration connected to the
音声分析部２１は、歌唱音声の分析を行う。ここでは、音声の有無を検出できることはもちろん、音程なども検出できる。音声分析部２１には、音声制御部１３を介して、マイク２０ａ，２０ｂから入力された音声が出力される。
The voice analysis unit 21 analyzes the singing voice. Here, not only the presence or absence of voice can be detected, but also the pitch or the like can be detected. The voice input from the
ＭＩＤＩ音源２２は、ＭＩＤＩ（Musical Instrument Digital Interface）データに基づく楽音を発生する。上述したＨＤＤ１９に記憶される楽曲データは、ＭＩＤＩデータ、デュエット曲か否かを判別する情報、デュエット曲であれば、声部のパート種別を判別するパート情報、演奏速度の初期値（原曲の「演奏速度」）、演奏キーの初期値（原曲の「演奏キー」）、とからなっている。演奏速度及び演奏キーは、ＭＩＤＩデータのＭＩＤＩパラメータとして設定されていることもある。
The
スピーカ２３は、音声制御部１３から出力されるオーディオ信号を音に変える。
音声制御部１３は、マイク２０ａ，２０ｂから入力される音声をオーディオ信号に変換し、また、ＨＤＤ１９に記憶される楽曲データを、ＭＩＤＩ音源２２を介してオーディオ信号に変換してスピーカ２３へ出力する。
The
The
次にカラオケサーバ３０の構成について説明する。カラオケサーバ３０は、周知のサーバ装置であり、コンピュータシステムを構成している。カラオケサーバ３０は楽曲データを配信するのであるが、ここでは特に、データベース３１を有しており、このデータベース３１に、動画データが蓄積されている。この動画データは、デュエット曲の各パートに対応するものである。
Next, the configuration of the
動画データは、図２に示すように、楽曲情報、パート情報、速度情報、キー情報、及び、明度情報と対応付けられており、これらの情報を基に検索可能となっている。この動画データは、歌唱音声及び歌唱映像からなっている。 As shown in FIG. 2, the moving image data is associated with music information, part information, speed information, key information, and lightness information, and can be searched based on these information. This moving image data consists of singing voice and singing video.
楽曲情報は、楽曲を特定可能な情報である。ここでは、曲番号となっている。もちろん、曲名としてもよい。また、検索の便宜などから、楽曲情報に歌手名を含めるようにしてもよい。 The music information is information that can specify the music. Here, it is a song number. Of course, it may be the song title. Further, for convenience of search, the singer name may be included in the music information.
パート情報は、上述したように、デュエット曲であれば、例えば、男性用の「Ａパート」情報、女性用の「Ｂパート」情報が設定されている。他に、楽曲の歌唱パートの種別を特定するものとして、「主旋律」、「副旋律」、「ソプラノ」、「アルト」、「歌手○○のパート」という情報であってもよい。 As described above, if the part information is a duet song, for example, “A part” information for men and “B part” information for women are set. In addition, information specifying the type of the singing part of the music may be information of “main melody”, “sub melody”, “soprano”, “alto”, “part of singer XX”.
また、速度情報は、動画データの再生速度を示す情報である。さらにまた、キー情報は、動画データのキーを示す情報である。また、明度情報は、動画データにおける歌唱映像の明度を示す情報である。 The speed information is information indicating the playback speed of moving image data. Furthermore, the key information is information indicating the key of the moving image data. Moreover, lightness information is information which shows the lightness of the song image | video in moving image data.
このような動画データ及び対応付けられる各情報は、カラオケ装置１０でカラオケ演奏が行われる際に作成することが例示される。例えば、動画データに関しては、カメラ１５ａから画像入力部１５を介して入力された歌唱者の歌唱映像及び、マイク２０ａ，２０ｂにて入力された歌唱者の歌唱音声から作成すればよい。また、このとき入力される曲番号を楽曲情報とし、音声分析部２１にて、音声の有無などを検出することで、どのパートを歌ったものかを特定すれば、パート情報も作成できる。さらに、カラオケ演奏における演奏速度を速度情報とし、選択された演奏キーをキー情報とし、画像入力部１５にて測定される明度を明度情報とする。このようにして作成された動画データは、ＨＤＤ１９に一時的に記憶しておき、歌唱者の了承を得た上で、カラオケサーバ３０にアップロードすることが考えられる。このようにすれば、十分な動画データをカラオケサーバ３０のデータベース３１に蓄積することが可能となる。
Such moving image data and associated information are exemplified when the
次に、カラオケシステム１における特徴的な処理を説明する。なお、以下では、デュエット曲が選択された場合について説明し、デュエット曲が選択された場合の相手パートの動画データのいくつかがＨＤＤ１９に既に記憶されているものとして説明する。
Next, characteristic processing in the karaoke system 1 will be described. In the following, a case where a duet song is selected will be described, and a description will be given assuming that some of the moving image data of the counterpart part when the duet song is selected is already stored in the
最初に全体の処理の流れを説明する。図３に示すように、カラオケ装置１０では、最初に検索指示処理が実行される。この検索指示処理では、動画データの検索をカラオケサーバ３０へ指示する（記号Ａで示す通信処理）。これに基づき、カラオケサーバ３０は、動画データ送信処理を実行する。この動画データ送信処理によって、データベース３１に蓄積された動画データが検索されて、カラオケ装置１０へ送信される（記号Ｂで示す通信処理）。カラオケ装置１０では、送信された動画データに基づき、演奏処理を実行する。
First, the overall processing flow will be described. As shown in FIG. 3, in the
次に、検索指示処理の詳細を、図４のフローチャートに基づいて説明する。この検索指示処理は、利用者によって楽曲が選択されると制御部１１によって実行される。
最初のＳ１００では、デュエット曲であるか否かを判断する。この処理は、利用者によって選択された楽曲がデュエット曲であるか否かを判断するものである。ここでデュエット曲であると判断された場合（Ｓ１００でＹＥＳ）、Ｓ１１０へ移行する。一方、デュエット曲でないと判断された場合（Ｓ１００でＮＯ）、以降の処理を実行せず、検索指示処理を終了する。
Next, details of the search instruction processing will be described based on the flowchart of FIG. This search instruction process is executed by the
In the first S100, it is determined whether or not it is a duet song. This process is to determine whether or not the music selected by the user is a duet music. If it is determined that the song is a duet song (YES in S100), the process proceeds to S110. On the other hand, if it is determined that it is not a duet song (NO in S100), the subsequent processing is not executed and the search instruction processing is terminated.
Ｓ１１０では、デュエット曲の一方のパートが選択されたか否かを判断する。この処理は、デュエット曲を一人で歌う場合などに、２つのパートのうちの一方を歌唱する旨が指示されたか否かを判断するものである。例えばリモコンなどで楽曲選択を行う際に、歌うパートを併せて入力させることが考えられる。ここでパートが選択されたと判断された場合（Ｓ１１０でＹＥＳ）、Ｓ１２０へ移行する。一方、パートが選択されていないと判断された場合（Ｓ１１０でＮＯ）、例えば２人の歌唱者がデュエット曲を歌う場合などには、以降の処理を実行せず、検索指示処理を終了する。 In S110, it is determined whether one part of the duet song has been selected. This process determines whether or not it is instructed to sing one of the two parts when singing a duet song alone. For example, when performing music selection with a remote controller or the like, it is conceivable to input a singing part together. If it is determined that a part has been selected (YES in S110), the process proceeds to S120. On the other hand, when it is determined that no part is selected (NO in S110), for example, when two singers sing a duet song, the subsequent processing is not executed and the search instruction processing is terminated.
Ｓ１２０では、相手パートの動画を表示する。相手パートとは、選択されたパートとは異なる別のパートである。上述したように、デュエット曲が選択された場合の相手パートの動画データのいくつかがＨＤＤ１９に既に記憶されている。そこで、ここでは、ＨＤＤ１９に記憶されている相手パートの動画データを読み出し、相手パートの動画データを再生する。これはデュエットの相手として誰がよいかを選択させるための動画データ再生である。例えば、図８（ａ）には、表示部２４ａに表示される画面の一例として画面Ｇを示した。この画面Ｇでは、左画面ＧＬに歌唱者の映像が表示され、右画面ＧＲに相手パートの動画が表示されている。このような分割表示は、映像制御部２４によって実現される。ここで、左画面ＧＬの「歌唱者の映像」は、カメラ１５ａを介し画像入力部１５から入力されるものである。一方、右画面ＧＲの動画はＨＤＤ１９に記憶された動画データに基づくものであり、デュエットの相手を選択できるように、数秒毎に切り替えられて、複数の動画が表示される。相手の選択は、操作部１４ａを介して指示するものとすることが考えられる。例えば、気に入った相手の動画が再生されている最中に選択ボタンを押す、という具合である。
In S120, the moving image of the opponent part is displayed. The opponent part is another part different from the selected part. As described above, some of the moving image data of the counterpart part when the duet music is selected is already stored in the
次のＳ１３０では、動画が選択されたか否かを判断する。この処理は、相手パートの動画が選択されたか否かを判断するものである。ここで相手パートの動画が選択されたと判断された場合（Ｓ１３０でＹＥＳ）、Ｓ１４０へ移行する。一方、相手パートの動画が選択されなかったと判断された場合（Ｓ１３０でＮＯ）、Ｓ１４０及びＳ１５０の処理を実行せず、検索指示処理を終了する。 In the next S130, it is determined whether or not a moving image has been selected. This process determines whether the moving image of the opponent part has been selected. If it is determined that the moving image of the opponent part has been selected (YES in S130), the process proceeds to S140. On the other hand, when it is determined that the moving image of the opponent part has not been selected (NO in S130), the processing of S140 and S150 is not performed, and the search instruction process is terminated.
Ｓ１４０では、特徴量を取得する。この処理は、利用者によって選択された楽曲の「曲番号」、歌唱者の「担当パート」、楽曲の「演奏速度」、「演奏キー」、及び、カメラ１５ａから入力される信号に基づき画像入力部１５で測定される「カメラ映像の明度」を、特徴量として取得するものである。利用者によって「演奏速度」及び「演奏キー」が特に指定されていない場合は、原曲の「演奏速度」及び「演奏キー」を特徴量とすることが例示される。
In S140, a feature amount is acquired. This process is based on the “song number” of the song selected by the user, the “part in charge” of the singer, the “performance speed” of the song, the “performance key”, and the image input based on the signal input from the
Ｓ１５０では、カラオケサーバ３０へ検索を指示する。この処理は、Ｓ１４０にて取得した特徴量を指定し、これら特徴量に基づく動画データの検索をカラオケサーバ３０へ指示するものである。この検索指示が、図３中に記号Ａで示した通信処理に該当する。
In S150, the
次に、カラオケサーバ３０にて実行される動画データ送信処理を、図５のフローチャートに基づいて説明する。動画データ送信処理は、所定タイミングで繰り返し実行される。
最初のＳ２００では、検索指示があったか否かを判断する。この処理は、カラオケ装置１０からの検索指示（図３中に記号Ａで示した通信処理）があったか否かを判断するものであり、図４中のＳ１５０の処理に対応するものである。ここで検索指示があったと判断された場合（Ｓ２００でＹＥＳ）、Ｓ２１０へ移行する。一方、検索指示がないと判断された場合（Ｓ２００でＮＯ）、以降の処理を実行せず、動画データ送信処理を終了する。
Next, the moving image data transmission process executed by the
In first S200, it is determined whether or not there is a search instruction. This process determines whether or not there is a search instruction (communication process indicated by symbol A in FIG. 3) from the
Ｓ２１０では、特徴量を取得する。この処理は、カラオケ装置１０から指定された特徴量を取得するものである。具体的には、歌唱者によって選択された楽曲の「曲番号」、歌唱者の「担当パート」、楽曲の「演奏速度」、「演奏キー」、及び、カメラ１５ａから入力される信号に基づき画像入力部１５で測定される「カメラ映像の明度」を取得する。
In S210, a feature amount is acquired. In this process, the feature amount designated from the
Ｓ２２０では、検索処理を実行する。図６は、検索処理の一例を示すフローチャートである。この検索処理は、データベース３１に蓄積された動画データの検索を行うものである。
In S220, search processing is executed. FIG. 6 is a flowchart illustrating an example of search processing. This search process searches for moving image data stored in the
最初のＳ２２１では、楽曲情報での検索を行う。楽曲情報は「曲番号」であり、動画データの中で「曲番号」が一致するものを検索する。もちろん、楽曲情報を「曲名」とし、「曲名」での一致を判断するようにしてもよい。また、「歌手名」を楽曲情報に含めるようにしてもよい。 In the first S221, a search based on music information is performed. The music information is “song number”, and a search is made for video data that matches “song number”. Of course, the music information may be “song name”, and a match in “song name” may be determined. Further, “singer name” may be included in the music information.
続くＳ２２２では、パート情報で検索を行う。相手パートの動画データは、ＨＤＤ１９に予め記憶されたものの中から選択されているため、ここでは、歌唱者の「担当パート」の動画データを検索する。
In subsequent S222, a search is performed using the part information. Since the moving image data of the opponent part is selected from those stored in advance in the
次のＳ２２３では、速度情報で検索する。この処理は、Ｓ２２２で検索された動画のうちで、その動画の再生速度を示す速度情報を用い、カラオケ装置１０から送信された特徴量の一つである演奏速度と同じ再生速度の動画を検索する。
In the next S223, the search is performed using the speed information. This process uses the speed information indicating the playback speed of the moving picture from the videos searched in S222 to search for a moving picture having the same playback speed as the performance speed that is one of the feature values transmitted from the
続くＳ２２４では、キー情報で検索する。この処理は、Ｓ２２３で検索された動画のうちで、その動画のキーを示すキー情報を用い、カラオケ装置１０から送信された特徴量の一つである演奏キーと同じキーの動画を検索する。
In subsequent S224, search is performed using key information. This process uses the key information indicating the key of the moving image in the moving image searched in S223 to search for a moving image having the same key as the performance key that is one of the feature values transmitted from the
次のＳ２２５では、明度情報で検索する。この処理は、Ｓ２２４で検索された動画のうちで、その動画の明度を示す明度情報を用い、カラオケ装置１０から送信された特徴量の一つである「カメラ映像の明度」に最も近い明度の動画を検索する。
In the next S225, a search is performed using brightness information. This process uses the brightness information indicating the brightness of the moving image searched for in S224, and uses the lightness information closest to the “lightness of the camera video” that is one of the feature amounts transmitted from the
動画データが検索されると、その後、図５中のＳ２３０へ移行し、検索された「担当パート」の動画データをカラオケ装置１０へ送信する。この動画データの送信が、図３中に記号Ｂで示した通信処理に該当する。
When the moving image data is retrieved, the process proceeds to S230 in FIG. 5, and the retrieved moving image data of “part in charge” is transmitted to the
このようにして、最初に選択する「相手パート」、すなわちデュエット曲の相手パートだけでなく、これから歌唱しようとする担当パートの動画が所定の検索条件で検索されてカラオケ装置１０へ送信されてくる。その後、カラオケ装置１０では、演奏処理が実行される。
In this way, not only the “partner part” to be selected first, that is, the partner part of the duet song, but also the video of the part in charge that is to be sung from now on is searched under the predetermined search conditions and transmitted to the
次に、カラオケ装置１０にて実行される演奏処理を、図７のフローチャートに基づいて説明する。
最初のＳ３００では、「相手パート」の動画データを再生する。この処理は、楽曲のカラオケ演奏に同期させ、歌唱者自らが選択した相手パートの動画データを再生するものである。このときは、例えば図８（ｂ）に示すように、左画面ＧＬに歌唱者の「カメラ映像」を表示すると共に右画面ＧＲに「相手パート」の動画を表示して、画面Ｇが構成される。
Next, the performance process performed in the
In the first S300, the moving image data of “partner part” is reproduced. This process is to synchronize with the karaoke performance of the music and reproduce the moving image data of the opponent part selected by the singer himself. At this time, for example, as shown in FIG. 8B, the “camera image” of the singer is displayed on the left screen GL and the moving image of the “partner part” is displayed on the right screen GR. The
次のＳ３１０では、歌唱者の音声を分析する。この処理は、マイク２０ａ，２０ｂから入力される歌唱者の音声を、音声分析部２１にて分析するものである。具体的には、音声の有無、及び、音程などを取得する。
In the next S310, the voice of the singer is analyzed. In this process, the voice analysis unit 21 analyzes the voice of the singer input from the
そしてＳ３２０では、「担当パート」を担当しているか否かを判断する。この判断は、例えば「担当パート」の部分で音声が有ること、「相手パート」の部分で音声がないこと、「担当パート」の音程で歌っていること（「相手パート」の音程で歌っていないこと）、などから総合的に判断される。ここで「担当パート」を担当していると判断された場合（Ｓ３２０でＹＥＳ）、Ｓ３３０にて「相手パート」の動画データを再生する。図８（ｂ）に示すごとくである。このとき、「担当パート」の動画データが再生されている場合には、動画データを切り替えて再生することになる。一方、「担当パート」を担当していないと判断された場合（Ｓ３２０でＮＯ）、例えば「相手パート」を歌っているような場合には、Ｓ３４０にて「担当パート」の動画データを再生する。図８（ｃ）に示すごとくである。ここで、「相手パート」の動画データが再生されている場合には、動画データを切り替えて再生することになる。 In S320, it is determined whether or not the “part in charge” is in charge. This judgment can be made, for example, that there is a voice in the “part in charge”, no voice in the “part of the other party”, singing in the pitch of the “part in charge” (singing in the pitch of the “part of the other party” Etc.), and so on. If it is determined that the “part in charge” is in charge (YES in S320), the moving image data of “part of the other party” is reproduced in S330. This is as shown in FIG. At this time, when the moving image data of the “part in charge” is being reproduced, the moving image data is switched and reproduced. On the other hand, when it is determined that the “part in charge” is not in charge (NO in S320), for example, when the “part of the other party” is sung, the video data of “part in charge” is reproduced in S340. . This is as shown in FIG. Here, when the moving image data of the “partner part” is being reproduced, the moving image data is switched and reproduced.
Ｓ３３０及びＳ３４０のいずれかから移行するＳ３５０では、カラオケ演奏が終了したか否かを判断する。ここで演奏が終了したと判断された場合（Ｓ３５０でＹＥＳ）、演奏処理を終了する。一方、演奏が終了していないうちは（Ｓ３５０でＮＯ）、Ｓ３１０からの処理を繰り返す。 In S350, which is shifted from either S330 or S340, it is determined whether or not the karaoke performance is finished. If it is determined here that the performance has ended (YES in S350), the performance processing ends. On the other hand, while the performance is not finished (NO in S350), the processing from S310 is repeated.
以上詳述したように、本実施形態では、歌唱者が担当しようとする「担当パート」の動画がカラオケサーバ３０から予め取得され（図４中のＳ１５０，図５中のＳ２３０）、その後の演奏処理では、歌唱者の音声が分析されて（図７中のＳ３１０）、「担当パート」を担当しているか否かが判断される（Ｓ３２０）。そして、「担当パート」を担当している場合は（Ｓ３２０でＹＥＳ）「相手パート」の動画データが再生され（Ｓ３３０）、担当パートとは異なる「相手パート」を担当している場合には（Ｓ３２０：ＮＯ）「担当パート」の動画データが再生される（Ｓ３４０）。 As described in detail above, in this embodiment, a video of the “part in charge” that the singer wants to be in charge of is acquired in advance from the karaoke server 30 (S150 in FIG. 4 and S230 in FIG. 5), and the subsequent performance is performed. In the process, the voice of the singer is analyzed (S310 in FIG. 7), and it is determined whether or not the person in charge is in charge (S320). If it is in charge of “part in charge” (YES in S320), the video data of “part of the other party” is reproduced (S330), and if it is in charge of “part of part” that is different from the part in charge ( S320: NO) The moving image data of “part in charge” is reproduced (S340).
つまり、歌唱者の担当する「担当パート」に対しても動画データを用意することにより、歌唱者がどちらのパートを歌った場合でも、残ったパートの動画データが再生されるのである。これにより、デュエット曲において、片方のパートを装置側で受け持つにあたり、全体として自然な楽曲の演奏を実現することができる。 That is, by preparing moving image data for the “part in charge” that the singer is in charge of, the moving image data of the remaining part is reproduced regardless of which part the singer sings. Thereby, in the duet music, when one part is handled by the apparatus side, the performance of a natural music as a whole is realizable.
また、本実施形態では、楽曲情報での検索を行っている（図６中のＳ２２１）。また、パート情報で検索を行っている（Ｓ２２２）。このようにすれば、演奏対象となる楽曲に対し適切な歌唱データが検索されるため、自然な楽曲の演奏に寄与する。 In the present embodiment, a search is performed using music information (S221 in FIG. 6). Also, a search is performed using part information (S222). If it does in this way, since suitable singing data is searched with respect to the music used as a performance object, it contributes to the performance of a natural music.
ところで、演奏対象の楽曲の演奏速度と動画データの再生速度とが合致しない場合、動画データの再生速度を楽曲の演奏速度に合わせて変更することが考えられるが、両者の速度が大きく異なると、動画データの再生に違和感を生じる虞がある。 By the way, if the performance speed of the music to be played does not match the playback speed of the video data, it is possible to change the playback speed of the video data according to the performance speed of the music, There is a possibility that a sense of incongruity may occur in reproduction of moving image data.
そこで、本実施形態では、速度情報で検索を行っている。すなわち、動画の再生速度を示す速度情報を用い、カラオケ装置１０から送信された特徴量の一つである演奏速度と同じ再生速度の動画を検索する（図６中のＳ２２３）。これによって、自然な楽曲の演奏が実現される。
Therefore, in this embodiment, the search is performed using the speed information. That is, using the speed information indicating the playback speed of the moving picture, a moving picture having the same playback speed as the performance speed that is one of the feature amounts transmitted from the
また、演奏対象の楽曲の演奏キーと動画のキーとが合致しない場合も、再生速度の場合と同様、動画データの再生に違和感を生じる虞がある。
そこで、本実施形態では、キー情報で検索を行っている。すなわち、動画のキーを示すキー情報を用い、カラオケ装置１０から送信された特徴量の一つである演奏キーと同じキーの動画を検索する（図６中のＳ２２４）。これによって、自然な楽曲の演奏が実現される。
Further, even when the performance key of the musical piece to be played does not match the key of the moving image, there is a possibility that the reproduction of the moving image data may be uncomfortable as in the case of the reproduction speed.
Therefore, in this embodiment, a search is performed using key information. That is, using the key information indicating the key of the moving image, a moving image having the same key as the performance key that is one of the feature values transmitted from the
さらにまた、カメラ１５ａを介して入力される歌唱者のカメラ映像と動画データの再生に基づく歌唱映像とを並べて表示するような場合、カメラ映像の明度と歌唱映像の明度とが大きく異なると、動画データの再生に違和感を抱く虞がある。
Furthermore, when the camera video of the singer input via the
そこで、本実施形態では、明度情報で検索を行っている。すなわち、動画の明度を示す明度情報を用い、カラオケ装置１０から送信された特徴量の一つである「カメラ映像の明度」に最も近い明度の動画を検索する（図６中のＳ２２５）。これによって、自然な楽曲の演奏が実現される。
Therefore, in this embodiment, the search is performed using the brightness information. That is, using the lightness information indicating the lightness of the moving image, the moving image having the lightness closest to the “lightness of the camera video” that is one of the feature amounts transmitted from the
なお、本実施形態におけるカラオケシステム１が「カラオケシステム」に相当し、カラオケ装置１０が「カラオケ装置」に相当し、カラオケサーバ３０が「カラオケサーバ」に相当する。
The karaoke system 1 in this embodiment corresponds to a “karaoke system”, the
また、カラオケ装置１０の制御部１１が「パート推定手段」、「歌唱データ再生手段」及び「検索指示手段」に相当し、図７中のＳ３１０の処理が「パート推定手段」の機能としての処理に相当し、Ｓ３２０〜Ｓ３４０の処理が「歌唱データ再生手段」の機能としての処理に相当し、図４中のＳ１５０の処理が「検索指示手段」の機能としての処理に相当する。
Further, the
さらにまた、カラオケ装置１０のカメラ１５ａ及び画像入力部１５が「撮影手段」に相当し、画像入力部１５が「撮影時の映像の明度を測定する」機能を備える。
また、データベース３１が「蓄積手段」に相当し、データベース３１に蓄積される動画データが「歌唱データ」に相当し、カラオケサーバ３０の有するＣＰＵが「検索手段」に相当し、図６に示した検索処理が「検索手段」の機能としての処理に相当する。
Furthermore, the
Further, the
以上、本発明は、上述した実施形態に何ら限定されるものではなく、その要旨を逸脱しない範囲において、種々なる形態で実施することができる。
（イ）上記実施形態では、デュエット曲を例に挙げ、「担当パート」と「相手パート」とを切り替えて再生することを説明した。これに対し、パートが３つ以上ある場合にも同様に適用できる。
As mentioned above, this invention is not limited to embodiment mentioned above at all, In the range which does not deviate from the summary, it can implement with a various form.
(A) In the above-described embodiment, a duet song is taken as an example, and it has been described that the “part in charge” and the “partner part” are switched and played. On the other hand, the same applies to the case where there are three or more parts.
（ロ）上記実施形態ではデュエット曲の相手パートのいくつかが既にＨＤＤ１９に記憶されているものとしていたが、「担当パート」及び「相手パート」の両方の動画データがカラオケサーバ３０から送信される構成としてもよい。
(B) In the above embodiment, it is assumed that some of the opponent parts of the duet music are already stored in the
この場合、図４中のＳ１１０で肯定判断されたとき、特徴量を取得し（Ｓ１４０）、カラオケサーバへ検索を指示する（Ｓ１５０）。カラオケサーバ３０では、上記実施形態と同様、特徴量に基づく検索処理を実行するのであるが（図５中のＳ２２０）、このとき、選択された楽曲の全てのパートを網羅するように、複数の動画データを検索する。そして、全てのパートを網羅する動画データを送信する。カラオケ装置１０では、これら複数の動画データを受信した後、図４中のＳ１２０と同様の処理を実行する。
In this case, when an affirmative determination is made in S110 in FIG. 4, the feature amount is acquired (S140), and a search is instructed to the karaoke server (S150). The
（ハ）上記実施形態では、「担当パート」を担当している場合は（図７中のＳ３２０でＹＥＳ）「相手パート」の動画データを再生し、「担当パート」以外の「相手パート」を担当している場合は（Ｓ３２０でＮＯ）「担当パート」の動画データを再生している。これに対し、例えば歌うことを忘れてしまったような場合、いずれのパートも担当しないような状況も考えられる。この場合には、図８（ｄ）に示すように、左画面ＧＬに「担当パート」の動画が表示され、右画面ＧＲに「相手パート」の動画が表示された画面Ｇを構成するようにしてもよい。 (C) In the above embodiment, when the “responsible part” is in charge (YES in S320 in FIG. 7), the video data of “the partner part” is reproduced, and the “partner part” other than the “part in charge” is displayed. If the person in charge is in charge (NO in S320), the moving image data of “part in charge” is reproduced. On the other hand, for example, if you forget to sing, you may be in a situation where neither part is in charge. In this case, as shown in FIG. 8D, a screen G in which the “part in charge” video is displayed on the left screen GL and the “partner part” video is displayed on the right screen GR is configured. May be.
（ニ）上記実施形態では、図６に示すように、速度情報、キー情報、明度情報での検索を行い（Ｓ２２３〜Ｓ２２５）、動画データを絞り込むようにしていた。
なお、図６では、Ｓ２２５の明度情報の検索によって最終的な動画データが検索されることを前提としているが、途中で動画データが検索できないような場合、途中の条件までの動画データを用いることが考えられる。このときも、Ｓ２２３，Ｓ２２４，Ｓ２２５の順序で検索を行い、動画データが検索されない場合、検索されたステップの動画データを採用する。
(D) In the above embodiment, as shown in FIG. 6, the search is performed by speed information, key information, and brightness information (S223 to S225), and the moving image data is narrowed down.
In FIG. 6, it is assumed that the final moving image data is searched by searching for brightness information in S225. However, when moving image data cannot be searched in the middle, moving image data up to the middle condition is used. Can be considered. Also in this case, when the search is performed in the order of S223, S224, and S225 and the moving image data is not searched, the moving image data of the searched step is adopted.
この絞り込み（Ｓ２２３，Ｓ２２４，Ｓ２２５の実行順序）は、通常の絞り込み検索とは異なり、カラオケ分野固有の順序であることを、以下に説明する。
一般的にカラオケは、楽曲の演奏進行の心地よさが重要であり、楽曲の演奏速度と歌唱映像の動画データの再生速度が一致していなければ、相手パートとして意味をなさない。このため、速度情報、キー情報、明度情報が検索条件が設定された場合は、最初にＳ２２３を実行する。
It will be described below that this narrowing (the execution order of S223, S224, and S225) is an order unique to the karaoke field, unlike a normal narrowing search.
In general, karaoke is important for the comfort of music performance, and if the performance speed of the music and the playback speed of the video data of the singing video do not match, it does not make sense as an opponent part. For this reason, when speed information, key information, and brightness information are set as search conditions, S223 is first executed.
次に、演奏の進行に問題のない速度の動画データが複数検索できた場合を考える。カラオケは音を楽しむものであるから、音は心地よく聞こえる必要がある。そこで、歌唱曲の演奏キーと同じキーを有するキー情報の動画データを抽出する。もしくは、同じキーの動画データが抽出できない場合には、楽曲の演奏キーとの差が３度又は５度となるキーのキー情報を有する動画データを抽出してもよい。この場合、歌唱者と動画データとがハーモニー（例えば、アカペラ）を奏でながら演奏が進行するので、音は心地よく聞こえる。このため、Ｓ２２３の次に実行する処理はＳ２２４がよい。よってＳ２２５の処理はＳ２２３，Ｓ２２４の後で実行するのがよい。 Next, let us consider a case where a plurality of moving image data having a speed at which there is no problem in performance progress can be searched. Since karaoke is something that enjoys sound, it needs to sound comfortable. Therefore, the moving image data of key information having the same key as the performance key of the song is extracted. Alternatively, when moving image data with the same key cannot be extracted, moving image data having key information of a key whose difference from the music performance key is 3 degrees or 5 degrees may be extracted. In this case, since the performance proceeds while the singer and the moving image data are playing harmony (for example, a cappella), the sound can be heard comfortably. For this reason, the process to be executed next to S223 is preferably S224. Therefore, the process of S225 is preferably executed after S223 and S224.
ところで、速度情報、キー情報及び明度情報の少なくともいずれか２つを用いる検索を行うような場合でも、上述した優先順序とすることが望ましい。上述したように、演奏速度が同じであることは最重要となるが、予め速度が一致していることを前提とすれば、キー情報、又は明度情報だけで検索することも考えられる。 By the way, it is desirable that the above-mentioned priority order be used even when a search using at least any two of speed information, key information, and brightness information is performed. As described above, it is most important that the performance speeds are the same. However, if it is assumed that the speeds are matched in advance, it is possible to search only with key information or lightness information.
また、検索結果が少ない場合には検索条件を減らし、検索結果が多い場合には検索条件を増やすようにしてもよい。さらにまた、特徴量として、動画データの歌唱音声に関する「歌唱音声の大きさ」、歌唱映像に関する「振り（踊り）の有無」、歌唱者に関する「採点値」、「地域」、「年齢」、「性別」などを採用してもよい。歌唱映像に関する「振り（踊り）の有無」は、例えば歌唱映像の差分などによって動きがあるか否かを判断することが例示される。歌唱者に関する情報は、例えば歌唱者の識別情報（ＩＤ）などによってデータベースから検索することが例示される。 Further, the search condition may be reduced when the search result is small, and the search condition may be increased when the search result is large. Furthermore, as feature quantities, “the size of the singing voice” regarding the singing voice of the video data, “presence / absence of dance” regarding the singing video, “scoring value”, “region”, “age”, “ “Gender” or the like may be employed. “Presence / absence of swing (dance)” related to the singing video is exemplified by determining whether or not there is movement based on the difference of the singing video, for example. For example, the information related to the singer is searched from the database by the identification information (ID) of the singer.
（ホ）上記実施形態では、カラオケサーバ３０のデータベース３１に蓄積された動画データを検索していた。これに対し、カラオケ装置１０の内部にデータベースを構築し、カラオケ装置１０の内部で動画データを検索するようにしてもよい。
(E) In the above embodiment, the video data stored in the
１：カラオケシステム
１０：カラオケ装置
１１：制御部
１２：バスライン
１３：音声制御部
１４：操作処理部
１４ａ：操作部
１５：画像入力部
１５ａ：カメラ
１６：インターフェース部
１７：ビデオＲＡＭ
１８：映像再生部
１９：ＨＤＤ
２０ａ，２０ｂ：マイク
２１：音声認識部
２２：ＭＩＤＩ音源
２３：スピーカ
２４：映像制御部
２４ａ：表示部
３０：カラオケサーバ
３１：データベース
４０：カラオケボックス内ＬＡＮ
５０：ルータ
６０：インターネット
1: Karaoke system
10: Karaoke device
11: Control unit
12: Bus line
13: Voice control unit
14:
15:
16: Interface section
17: Video RAM
18: Video playback unit
19: HDD
20a, 20b: microphone
21: Voice recognition unit
22: MIDI sound source
23: Speaker
24:
30: Karaoke server
31: Database
40: LAN in karaoke box
50: Router
60: Internet
Claims (7)
歌唱者が現に担当している担当パートを当該歌唱者の音声に基づき推定するパート推定手段と、
前記パート推定手段にて推定される前記担当パートに応じ前記歌唱データを切り換えて再生することにより、前記担当パートを除く残りのパートに対応する歌唱データを再生する歌唱データ再生手段と、
を備えていることを特徴とするカラオケ装置。 A karaoke device capable of reproducing in parallel a plurality of singing data including at least a singing voice and covering all of the parts when performing a karaoke performance of a music piece having a plurality of parts,
A part estimation means for estimating a responsible part that the singer is currently in charge of based on the voice of the singer,
Song data reproducing means for reproducing song data corresponding to the remaining parts excluding the responsible part by switching and reproducing the song data according to the responsible part estimated by the part estimating means;
A karaoke apparatus comprising:
前記歌唱データは、蓄積手段に記憶された歌唱データの中から前記カラオケ演奏に先立ち検索手段によって所定の検索条件で検索されるようになっており、
前記検索手段による前記歌唱データの検索を指示する検索指示手段を備えていること
を特徴とするカラオケ装置。 The karaoke apparatus according to claim 1,
The singing data is to be searched by the searching means by the searching means prior to the karaoke performance from the singing data stored in the storage means,
A karaoke apparatus comprising search instruction means for instructing search of the song data by the search means.
前記歌唱データには、当該歌唱データの楽曲を特定可能な楽曲情報及び当該楽曲のパートを特定可能なパート情報が対応付けられており、
前記検索指示手段は、前記検索条件として、演奏対象の楽曲を指定し、前記楽曲情報及び前記パート情報に基づく前記歌唱データの検索を前記検索手段に指示すること
を特徴とするカラオケ装置。 The karaoke apparatus according to claim 2,
The song data is associated with music information that can specify the music of the song data and part information that can specify the part of the music,
The search instruction means designates a musical piece to be played as the search condition, and instructs the search means to search for the song data based on the music information and the part information.
前記歌唱データには、当該歌唱データの再生速度を示す速度情報が対応付けられており、
前記検索指示手段は、前記検索条件として、演奏対象の楽曲の演奏速度を指定し、当該演奏速度と同じ演奏速度の速度情報が対応付けられた前記歌唱データの検索を前記検索手段に指示すること
を特徴とするカラオケ装置。 The karaoke apparatus according to claim 2 or 3,
The song data is associated with speed information indicating the playback speed of the song data,
The search instruction means designates a performance speed of a musical piece to be played as the search condition, and instructs the search means to search for the song data associated with speed information of the same performance speed as the performance speed. Karaoke device characterized by.
前記歌唱データには、当該歌唱データの音階の種類であるキーを示すキー情報が対応付けられており、
前記検索指示手段は、前記検索条件として、演奏対象の楽曲の演奏キーを指定し、当該演奏キーと同じキーのキー情報が対応付けられた前記歌唱データの検索を前記検索手段に指示すること
を特徴とするカラオケ装置。 In the karaoke apparatus as described in any one of Claims 2-4,
The singing data is associated with key information indicating a key that is a kind of scale of the singing data,
The search instruction means designates a performance key of a music to be played as the search condition, and instructs the search means to search for the song data associated with key information of the same key as the performance key. A karaoke device that features it.
さらに、歌唱者を撮影可能な撮影手段を備え、
前記撮影手段は、撮影時の映像の明度を測定する機能を有し、
前記歌唱データには、歌唱映像が含まれると共に、当該歌唱映像の明度を示す明度情報が対応付けられており、
前記検索指示手段は、前記検索条件として、前記撮影手段による映像の明度と、前記歌唱データの有する明度情報に基づく明度とを比較し、お互いの明度差がもっとも小さい歌唱データの検索を前記検索手段に指示すること
を特徴とするカラオケ装置。 In the karaoke apparatus as described in any one of Claims 2-5,
Furthermore, it has a photographing means that can photograph the singer,
The photographing means has a function of measuring the brightness of an image at the time of photographing,
The singing data includes a singing video and is associated with lightness information indicating the lightness of the singing video,
The search instruction means compares the brightness of the video by the photographing means with the brightness based on the brightness information of the song data as the search condition, and searches for song data with the smallest difference in brightness between the search means. A karaoke device characterized by
前記カラオケ演奏に用いられる楽曲データとともに前記カラオケ演奏に先立って検索される前記歌唱データを配信可能なカラオケサーバと、
を備えるカラオケシステムであって、
前記カラオケサーバは、
前記歌唱データを蓄積する蓄積手段と、
前記蓄積手段に蓄積された前記歌唱データを検索する検索手段と、を有し、
前記カラオケ装置は、
前記検索手段に対し所定の検索条件で歌唱データの検索を指示する検索指示手段と、
歌唱者が現に担当している担当パートを当該歌唱者の音声に基づき推定するパート推定手段と、
前記パート推定手段にて推定される前記担当パートに応じ前記歌唱データを切り換えて再生することにより、前記担当パートを除く残りのパートに対応する歌唱データを再生する歌唱データ再生手段と、を有していること
を特徴とするカラオケシステム。 A karaoke device capable of reproducing in parallel a plurality of singing data including at least a singing voice and covering all of the parts when performing a karaoke performance of a song having a plurality of parts,
A karaoke server capable of delivering the singing data searched prior to the karaoke performance together with the music data used for the karaoke performance;
A karaoke system comprising:
The karaoke server
Storage means for storing the song data;
Search means for searching for the song data stored in the storage means,
The karaoke device
Search instruction means for instructing the search means to search for song data under a predetermined search condition;
A part estimation means for estimating a responsible part that the singer is currently in charge of based on the voice of the singer,
Singing data reproducing means for reproducing singing data corresponding to the remaining parts excluding the responsible part by switching and reproducing the singing data according to the responsible part estimated by the part estimating means; A karaoke system characterized by
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2010217184A JP5293712B2 (en) | 2010-09-28 | 2010-09-28 | Karaoke device and karaoke system |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2010217184A JP5293712B2 (en) | 2010-09-28 | 2010-09-28 | Karaoke device and karaoke system |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2012073349A true JP2012073349A (en) | 2012-04-12 |
| JP5293712B2 JP5293712B2 (en) | 2013-09-18 |
Family
ID=46169599
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2010217184A Active JP5293712B2 (en) | 2010-09-28 | 2010-09-28 | Karaoke device and karaoke system |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP5293712B2 (en) |
Cited By (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2014167576A (en) * | 2013-02-28 | 2014-09-11 | Brother Ind Ltd | Karaoke system and karaoke device |
| JP2014167575A (en) * | 2013-02-28 | 2014-09-11 | Brother Ind Ltd | Karaoke system and karaoke device |
| JP2014167574A (en) * | 2013-02-28 | 2014-09-11 | Brother Ind Ltd | Karaoke system and karaoke device |
| JP2014186155A (en) * | 2013-03-22 | 2014-10-02 | Brother Ind Ltd | Portable terminal, program for portable terminal, server, and image browsing system |
| JP2015161710A (en) * | 2014-02-26 | 2015-09-07 | ブラザー工業株式会社 | Karaoke device and karaoke program |
| US10340743B2 (en) | 2014-10-28 | 2019-07-02 | Ihi Corporation | Power transmission device, power transmission method, and wireless power transfer system |
Citations (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH08129394A (en) * | 1994-10-31 | 1996-05-21 | Yamaha Corp | Karaoke device |
| JPH0944171A (en) * | 1995-07-31 | 1997-02-14 | Yamaha Corp | Karaoke device |
| JPH1091173A (en) * | 1996-09-11 | 1998-04-10 | Brother Ind Ltd | Musical tone reproducing device |
| JP2000099050A (en) * | 1998-09-24 | 2000-04-07 | Daiichikosho Co Ltd | Karaoke device selectively reproducing and outputting plural vocal parts |
| JP2001042878A (en) * | 1999-08-03 | 2001-02-16 | Taito Corp | Player joining type communication karaoke system |
| JP2002244680A (en) * | 2001-02-20 | 2002-08-30 | Yamaha Corp | Musical performance information retrieval device |
| JP2004053736A (en) * | 2002-07-17 | 2004-02-19 | Daiichikosho Co Ltd | Method for using karaoke system |
| JP2004240065A (en) * | 2003-02-04 | 2004-08-26 | Konami Co Ltd | Karaoke device, voice output controlling method and program |
| JP2006119360A (en) * | 2004-10-21 | 2006-05-11 | Yamaha Corp | Data processor for processing image data and program |
| JP2007072315A (en) * | 2005-09-08 | 2007-03-22 | Daiichikosho Co Ltd | Karaoke machine characterized in reproduction control over model singing of chorus music |
| JP2007093658A (en) * | 2005-09-27 | 2007-04-12 | Yamaha Corp | Audio device and karaoke machine |
| JP2009163192A (en) * | 2008-01-10 | 2009-07-23 | Yamaha Corp | Audio reproduction device and audio reproduction system |
| JP2010078878A (en) * | 2008-09-25 | 2010-04-08 | Xing Inc | Karaoke device |
-
2010
- 2010-09-28 JP JP2010217184A patent/JP5293712B2/en active Active
Patent Citations (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH08129394A (en) * | 1994-10-31 | 1996-05-21 | Yamaha Corp | Karaoke device |
| JPH0944171A (en) * | 1995-07-31 | 1997-02-14 | Yamaha Corp | Karaoke device |
| JPH1091173A (en) * | 1996-09-11 | 1998-04-10 | Brother Ind Ltd | Musical tone reproducing device |
| JP2000099050A (en) * | 1998-09-24 | 2000-04-07 | Daiichikosho Co Ltd | Karaoke device selectively reproducing and outputting plural vocal parts |
| JP2001042878A (en) * | 1999-08-03 | 2001-02-16 | Taito Corp | Player joining type communication karaoke system |
| JP2002244680A (en) * | 2001-02-20 | 2002-08-30 | Yamaha Corp | Musical performance information retrieval device |
| JP2004053736A (en) * | 2002-07-17 | 2004-02-19 | Daiichikosho Co Ltd | Method for using karaoke system |
| JP2004240065A (en) * | 2003-02-04 | 2004-08-26 | Konami Co Ltd | Karaoke device, voice output controlling method and program |
| JP2006119360A (en) * | 2004-10-21 | 2006-05-11 | Yamaha Corp | Data processor for processing image data and program |
| JP2007072315A (en) * | 2005-09-08 | 2007-03-22 | Daiichikosho Co Ltd | Karaoke machine characterized in reproduction control over model singing of chorus music |
| JP2007093658A (en) * | 2005-09-27 | 2007-04-12 | Yamaha Corp | Audio device and karaoke machine |
| JP2009163192A (en) * | 2008-01-10 | 2009-07-23 | Yamaha Corp | Audio reproduction device and audio reproduction system |
| JP2010078878A (en) * | 2008-09-25 | 2010-04-08 | Xing Inc | Karaoke device |
Cited By (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2014167576A (en) * | 2013-02-28 | 2014-09-11 | Brother Ind Ltd | Karaoke system and karaoke device |
| JP2014167575A (en) * | 2013-02-28 | 2014-09-11 | Brother Ind Ltd | Karaoke system and karaoke device |
| JP2014167574A (en) * | 2013-02-28 | 2014-09-11 | Brother Ind Ltd | Karaoke system and karaoke device |
| JP2014186155A (en) * | 2013-03-22 | 2014-10-02 | Brother Ind Ltd | Portable terminal, program for portable terminal, server, and image browsing system |
| JP2015161710A (en) * | 2014-02-26 | 2015-09-07 | ブラザー工業株式会社 | Karaoke device and karaoke program |
| US10340743B2 (en) | 2014-10-28 | 2019-07-02 | Ihi Corporation | Power transmission device, power transmission method, and wireless power transfer system |
Also Published As
| Publication number | Publication date |
|---|---|
| JP5293712B2 (en) | 2013-09-18 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US7772480B2 (en) | Interactive music training and entertainment system and multimedia role playing game platform | |
| JP5293712B2 (en) | Karaoke device and karaoke system | |
| US20090038467A1 (en) | Interactive music training and entertainment system | |
| JP2007310204A (en) | Musical piece practice support device, control method, and program | |
| JP2007271977A (en) | Evaluation standard decision device, control method, and program | |
| JP2004233698A (en) | Device, server and method to support music, and program | |
| JP2007264569A (en) | Retrieval device, control method, and program | |
| JP5459331B2 (en) | Post reproduction apparatus and program | |
| JP6153255B2 (en) | Singing part decision system | |
| JP7175120B2 (en) | Singing aid for music therapy | |
| JP6944357B2 (en) | Communication karaoke system | |
| JP2007256619A (en) | Evaluation device, control method and program | |
| JP5454802B2 (en) | Karaoke equipment | |
| JP5550593B2 (en) | Karaoke equipment | |
| WO2021106512A1 (en) | Musical piece creation method and musical piece creation system | |
| JP6219750B2 (en) | Singing battle karaoke system | |
| JP2012247558A (en) | Information processing device, information processing method, and information processing program | |
| JP2014123085A (en) | Device, method, and program for further effectively performing and providing body motion and so on to be performed by viewer according to singing in karaoke | |
| JP6474292B2 (en) | Karaoke equipment | |
| WO2023276279A1 (en) | Image processing device, image processing method, and program | |
| JP2007233078A (en) | Evaluation device, control method, and program | |
| JP5741625B2 (en) | Karaoke system, karaoke equipment | |
| WO2023062865A1 (en) | Information processing apparatus, method, and program | |
| JP2011154290A (en) | Karaoke machine for supporting singing of music partially including solitary duet | |
| JP4881747B2 (en) | Karaoke system |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20130204 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20130212 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20130329 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20130514 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20130527 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 5293712 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |