JP2021162711A - Sound effect outputting device - Google Patents

Sound effect outputting device Download PDF

Info

Publication number
JP2021162711A
JP2021162711A JP2020063928A JP2020063928A JP2021162711A JP 2021162711 A JP2021162711 A JP 2021162711A JP 2020063928 A JP2020063928 A JP 2020063928A JP 2020063928 A JP2020063928 A JP 2020063928A JP 2021162711 A JP2021162711 A JP 2021162711A
Authority
JP
Japan
Prior art keywords
music
sound effect
sound
output
source data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2020063928A
Other languages
Japanese (ja)
Inventor
佑介 岡田
Yusuke Okada
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Pioneer Corp
Original Assignee
Pioneer Electronic Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Pioneer Electronic Corp filed Critical Pioneer Electronic Corp
Priority to JP2020063928A priority Critical patent/JP2021162711A/en
Publication of JP2021162711A publication Critical patent/JP2021162711A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Auxiliary Devices For Music (AREA)
  • Reverberation, Karaoke And Other Acoustics (AREA)
  • Electrophonic Musical Instruments (AREA)

Abstract

To provide a sound effect mixing device that provides a musical piece with sound effects more natural to listeners.SOLUTION: A sound effect mixing device has: a musical piece feature quantity acquisition unit acquiring a feature quantity of a musical piece that includes beat positions; and a sound effect output unit outputting sound effects after the lapse of a first time from when the beat position has been detected. Therefore, it happens very often that the sound effects do not match up precisely with the beat positions, the musical piece can be provided with the sound effects more natural to listeners, and the listeners can more enjoy the atmosphere of being in a live hall. The first time may be determined randomly.EFFECT: Thus, gaps from the beat positions to the generations of the sound effects become random. As a result, the musical piece can be provided with the sound effects more natural to the listeners, and the listeners can more enjoy the atmosphere of being in the live hall.SELECTED DRAWING: Figure 12

Description

本発明は、効果音出力装置に関する。 The present invention relates to a sound effect output device.

楽曲に効果音を付与し、ライブ会場の雰囲気を味わえるようにする技術が知られている。例えば、特許文献１には、カラオケ効果音システムが開示されており、このカラオケ効果音設定システムでは、楽曲のジャンルに応じて効果音の種別が設定され、選択されたライブ会場の規模に応じて効果音の出力態様（手拍子や歓声を発する人数）が設定されている。 Technology is known to add sound effects to music so that you can enjoy the atmosphere of the live venue. For example, Patent Document 1 discloses a karaoke sound effect system, in which the type of sound effect is set according to the genre of the music, and the type of the sound effect is set according to the scale of the selected live venue. The output mode of the sound effect (the number of people clapping and cheering) is set.

特開２０１６−７０９９９号公報Japanese Unexamined Patent Publication No. 2016-70999

観客による歓声や拍手の音や大きさなどは、会場の規模により変わってくる。そこで、会場の規模ごとに、その会場用の歓声などの音源データを用意し、効果音として用いる音源データを楽曲に応じて変えることで、聴者に、ライブ会場にいる雰囲気をより味わわせることが可能になる。しかしながら、会場の規模ごとに、その会場用の歓声などの音源データを用意した場合、これらの音源データを記憶するために大きな容量の記憶装置が必要になる。しかしながら、特許文献１には、このような課題を解決するための技術が開示されていない。 The cheers, applause, and loudness of the audience will vary depending on the size of the venue. Therefore, by preparing sound source data such as cheers for the venue for each scale of the venue and changing the sound source data used as sound effects according to the music, it is possible to give the listener a more enjoyable atmosphere of being in the live venue. It will be possible. However, when sound source data such as cheers for the venue is prepared for each scale of the venue, a storage device having a large capacity is required to store these sound source data. However, Patent Document 1 does not disclose a technique for solving such a problem.

また、ライブ会場では、楽曲が演奏される際に、演奏の始まりの部分や、終わりの部分において、観客による歓声や拍手が発生する。この歓声や拍手が発生するタイミングは、ライブ会場の規模やライブ会場で演奏される楽曲のジャンルなどにより変化する。しかしながら、特許文献１では、このように歓声などが生じるタイミングの違いは考慮されていない。 In addition, at the live venue, when a piece of music is played, cheers and applause from the audience are generated at the beginning and end of the performance. The timing at which these cheers and applause occur varies depending on the scale of the live venue and the genre of the music played at the live venue. However, in Patent Document 1, such a difference in timing at which cheers and the like occur is not taken into consideration.

また、ライブ会場では、多くの人が集まっているため、歓声や拍手がないときでも、ざわざわとしている。このため、このざわつきなどの環境音を、楽曲に付与（混合）することで、ライブ会場の雰囲気を味わえるようにすることが可能である。しかしながら、１つの環境音用の音源データを単に連続して出力しただけでは、同じ音源データの音が規則的に繰り返し流れるだけになり、実際のライブ会場で生じる環境音に比べ、規則性が感じられ、自然な環境音と感じられない。特許文献１には、このような課題を解決するための技術が開示されていない。 Also, at the live venue, many people are gathering, so even when there is no cheering or applause, it is noisy. Therefore, it is possible to enjoy the atmosphere of the live venue by adding (mixing) environmental sounds such as this noise to the music. However, if the sound source data for one environmental sound is simply output continuously, the sound of the same sound source data will only flow regularly and repeatedly, and the sound will feel more regular than the environmental sound generated at the actual live venue. It does not feel like a natural environmental sound. Patent Document 1 does not disclose a technique for solving such a problem.

また、ライブ会場では、観客は、楽曲に合わせ、手拍子や足踏みによりリズムを取ることがある。しかしながら、観客は、演奏されるすべての楽曲に、手拍子などによりリズムを取るわけではない。特許文献１では、すべての曲に手拍子を入れており、特許文献１には、このような課題を解決するための技術が開示されていない。 In addition, at the live venue, the audience may take a rhythm by clapping or stepping along with the music. However, the audience does not take the rhythm of all the songs played by clapping their hands. Patent Document 1 clapping all songs, and Patent Document 1 does not disclose a technique for solving such a problem.

また、ライブ会場において、観客は、楽曲の拍に位置に合わせて、手拍子を行おうとするが、観客による手拍子が拍の位置にぴったりと合うことはない。そのため、正確に拍の位置に鳴るように、手拍子の音を出力した場合、聴者は、楽曲に混合された手拍子を、機械的で、不自然な手拍子であると感じてしまう。しかしながら、特許文献１には、このような課題を解決するための技術が開示されていない。 Also, at the live venue, the audience tries to clapping their hands according to the position of the beat of the music, but the clapping by the audience does not exactly match the position of the beat. Therefore, when the sound of the hand clapping is output so as to sound at the exact position of the beat, the listener feels that the hand clapping mixed in the music is a mechanical and unnatural hand clapping. However, Patent Document 1 does not disclose a technique for solving such a problem.

本発明が解決しようとする課題としては、聴者にとってより自然な効果音を楽曲に付与することが一例として挙げられる。 As an example of the problem to be solved by the present invention, it is possible to give a music sound effect that is more natural for the listener.

上記課題を解決するために、請求項１に記載の発明は、拍の位置を含む楽曲の特徴量を取得する楽曲特徴量取得部と、前記検出された拍の位置から第１の時間経過後に、効果音を出力する効果音出力部と、を有する。 In order to solve the above problems, the invention according to claim 1 has a music feature amount acquisition unit that acquires a music feature amount including a beat position, and a music feature amount acquisition unit that acquires the feature amount of the music including the beat position, and after a lapse of a first time from the detected beat position. It has a sound effect output unit that outputs a sound effect.

請求項４に記載の発明は、拍の位置を含む楽曲の特徴量を取得する楽曲特徴量取得部と、前記検出された拍に位置に、効果音用の複数種類の音源データからランダムに選択された音源データを出力する効果音出力部と、を有する。 The invention according to claim 4 is a music feature amount acquisition unit that acquires a music feature amount including a beat position, and a position at the detected beat is randomly selected from a plurality of types of sound source data for sound effects. It has a sound effect output unit that outputs the sound source data.

請求項７に記載の発明は、拍の位置を含む楽曲の特徴量を取得する楽曲特徴量取得工程と、前記検出された拍の位置から第１の時間経過後に、効果音を出力する効果音出力工程と、を有する。 The invention according to claim 7 is a music feature amount acquisition step of acquiring a music feature amount including a beat position, and a sound effect that outputs a sound effect after the first time elapses from the detected beat position. It has an output process.

請求項８に記載の発明は、拍の位置を含む楽曲の特徴量を取得する楽曲特徴量取得工程と、前記検出された拍に位置に、効果音用の複数種類の音源データからランダムに選択された音源データを出力する効果音出力工程と、を有する。 The invention according to claim 8 is a music feature amount acquisition step for acquiring a music feature amount including a beat position, and a position at the detected beat is randomly selected from a plurality of types of sound source data for sound effects. It has a sound effect output process for outputting the sound source data.

請求項９に記載の発明は、請求項７または８に記載の効果音出力方法を、コンピュータにより実行させる。 The invention according to claim 9 causes the computer to execute the sound effect output method according to claim 7 or 8.

請求項１０に記載の発明は、請求項９に記載の効果音出力プログラムを記憶している。 The invention according to claim 10 stores the sound effect output program according to claim 9.

本発明の一実施例に係る効果音混合装置１００である。The sound effect mixing device 100 according to an embodiment of the present invention. 楽曲出力部１２０による楽曲の出力、効果音出力部１３０による効果音の出力の一例を示す図である。It is a figure which shows an example of the output of the music by the music output unit 120, and the output of the sound effect by the sound effect output unit 130. 本発明の一実施例に係る効果音混合装置１００における処理動作の一例を示す図である。It is a figure which shows an example of the processing operation in the sound effect mixing apparatus 100 which concerns on one Example of this invention. 楽曲出力部１２０による楽曲の出力、効果音出力部１３０による効果音の出力の一例を示す図である。It is a figure which shows an example of the output of the music by the music output unit 120, and the output of the sound effect by the sound effect output unit 130. 本発明の一実施例に係る効果音混合装置１００における処理動作の一例を示す図である。It is a figure which shows an example of the processing operation in the sound effect mixing apparatus 100 which concerns on one Example of this invention. 楽曲出力部１２０による楽曲の出力、効果音出力部１３０による効果音の出力の一例を示す図である。It is a figure which shows an example of the output of the music by the music output unit 120, and the output of the sound effect by the sound effect output unit 130. 楽曲出力部１２０による楽曲の出力、効果音出力部１３０による効果音の出力の一例を示す図である。It is a figure which shows an example of the output of the music by the music output unit 120, and the output of the sound effect by the sound effect output unit 130. 本発明の一実施例に係る効果音混合装置１００における処理動作の一例を示す図である。It is a figure which shows an example of the processing operation in the sound effect mixing apparatus 100 which concerns on one Example of this invention. 効果音出力部１３０による効果音の出力の一例を示す図である。It is a figure which shows an example of the output of the sound effect by the sound effect output unit 130. 本発明の一実施例に係る効果音混合装置１００における処理動作の一例を示す図である。It is a figure which shows an example of the processing operation in the sound effect mixing apparatus 100 which concerns on one Example of this invention. 本実施例に係る効果音混合装置１００における処理動作の一例を示す図である。It is a figure which shows an example of the processing operation in the sound effect mixing apparatus 100 which concerns on this Example. 楽曲出力部１２０による楽曲の出力、効果音出力部１３０による効果音の出力の一例を示す図である。It is a figure which shows an example of the output of the music by the music output unit 120, and the output of the sound effect by the sound effect output unit 130. 楽曲出力部１２０による楽曲の出力、効果音出力部１３０による効果音の出力の一例を示す図である。It is a figure which shows an example of the output of the music by the music output unit 120, and the output of the sound effect by the sound effect output unit 130. 本実施例に係る効果音混合装置１００における処理動作の一例を示す図である。It is a figure which shows an example of the processing operation in the sound effect mixing apparatus 100 which concerns on this Example.

本発明の一実施形態に係る効果音出力装置は、拍の位置を含む楽曲の特徴量を取得する楽曲特徴量取得部と、前記検出された拍の位置から第１の時間経過後に、効果音を出力する効果音出力部と、を有する。このため、本実施形態では、効果音が拍の位置にぴったりと合わないことが多々ある。結果、聴者にとってより自然な効果音を楽曲に付与することが可能になり、聴者に、ライブ会場にいる雰囲気をより味わわせることが可能になる。 The sound effect output device according to the embodiment of the present invention includes a music feature amount acquisition unit that acquires the feature amount of the music including the beat position, and a sound effect after the first time elapses from the detected beat position. It has a sound effect output unit that outputs the sound effect. Therefore, in the present embodiment, the sound effect often does not exactly match the position of the beat. As a result, it becomes possible to add sound effects that are more natural for the listener to the music, and it becomes possible for the listener to feel the atmosphere of the live venue more.

前記第１の時間は、ランダムに決定されるようにしても良い。このようにすることで、拍の位置から効果音の発生までのずれが、ランダムになり、結果、聴者にとってより自然な効果音を楽曲に付与することが可能になり、聴者に、ライブ会場にいる雰囲気をより味わわせることが可能になる。 The first time may be randomly determined. By doing so, the deviation from the position of the beat to the generation of the sound effect becomes random, and as a result, it becomes possible to add a sound effect that is more natural for the listener to the music, and to the listener at the live venue. It will be possible to enjoy the atmosphere of being there.

前記効果音出力部は、前記効果音用の複数種類の音源データからランダムに選択された音源データを、前記効果音として出力するようにしても良い。このため、本実施形態では、混合される効果音が単調でなくなり、結果、聴者にとってより自然な効果音を楽曲に付与することが可能になり、聴者に、ライブ会場にいる雰囲気をより味わわせることが可能になる。 The sound effect output unit may output sound source data randomly selected from a plurality of types of sound source data for the sound effect as the sound effect. Therefore, in the present embodiment, the mixed sound effects are not monotonous, and as a result, it is possible to add sound effects that are more natural for the listener to the music, and the listener can feel the atmosphere of the live venue more. Will be possible.

また、本発明の一実施形態に係る効果音出力装置は、拍の位置を含む楽曲の特徴量を取得する楽曲特徴量取得部と、前記検出された拍に位置に、効果音用の複数種類の音源データからランダムに選択された音源データを出力する効果音出力部と、を有する。このため、本実施形態では、混合される効果音が単調でなくなり、結果、聴者にとってより自然な効果音を楽曲に付与することが可能になり、聴者に、ライブ会場にいる雰囲気をより味わわせることが可能になる。 Further, the sound effect output device according to the embodiment of the present invention includes a music feature amount acquisition unit that acquires the feature amount of the music including the beat position, and a plurality of types for the sound effect at the detected beat position. It has a sound effect output unit that outputs sound effect data randomly selected from the sound effect data of. Therefore, in the present embodiment, the mixed sound effects are not monotonous, and as a result, it is possible to add sound effects that are more natural for the listener to the music, and the listener can feel the atmosphere of the live venue more. Will be possible.

前記効果音の出力を開始するタイミングは、前記楽曲の出力開始からの時間および前記楽曲の音量に基づいて決定されるようにしても良い。このようにすることで、観客が楽曲にノリ始めるようなタイミングで手拍子などのリズムを取る音を付与を開始することが可能になり、結果、聴者にとってより自然な効果音を楽曲に付与することが可能になり、聴者に、ライブ会場にいる雰囲気をより味わわせることが可能になる。 The timing for starting the output of the sound effect may be determined based on the time from the start of the output of the music and the volume of the music. By doing so, it becomes possible to start giving a sound that takes a rhythm such as clapping at a timing when the audience starts to feel the music, and as a result, a sound effect that is more natural for the listener is given to the music. Will be possible, and it will be possible for listeners to feel more like being in a live venue.

前記特徴量は、前記楽曲のサビが始まる位置を含み、前記効果音の出力を終了するタイミングは、前記楽曲のサビが始まる位置に基づいて決定されるようにしても良い。このようにすることで、観客が楽曲にサビに聴き入るようなタイミングで手拍子などのリズムを取る音の付与を終了することが可能になり、結果、聴者にとってより自然な効果音を楽曲に付与することが可能になり、聴者に、ライブ会場にいる雰囲気をより味わわせることが可能になる。 The feature amount may include a position where the chorus of the music starts, and the timing of ending the output of the sound effect may be determined based on the position where the chorus of the music starts. By doing so, it becomes possible to end the addition of a sound that takes a rhythm such as clapping at the timing when the audience listens to the music in a chorus, and as a result, a sound effect that is more natural for the listener is added to the music. This makes it possible for listeners to feel more like being in a live venue.

また、本発明の一実施形態にかかる効果音出力方法は、拍の位置を含む楽曲の特徴量を取得する楽曲特徴量取得工程と、前記検出された拍の位置から第１の時間経過後に、効果音を出力する効果音出力工程と、を有する。このため、本実施形態では、効果音が拍の位置にぴったりと合うことがない。結果、聴者にとってより自然な効果音を楽曲に付与することが可能になり、聴者に、ライブ会場にいる雰囲気をより味わわせることが可能になる。 Further, the sound effect output method according to the embodiment of the present invention includes a music feature amount acquisition step of acquiring the feature amount of the music including the beat position, and after the first time elapses from the detected beat position. It has a sound effect output process for outputting a sound effect. Therefore, in the present embodiment, the sound effect does not exactly match the position of the beat. As a result, it becomes possible to add sound effects that are more natural for the listener to the music, and it becomes possible for the listener to feel the atmosphere of the live venue more.

また、本発明の一実施形態にかかる効果音出力方法は、拍の位置を含む楽曲の特徴量を取得する楽曲特徴量取得工程と、前記検出された拍に位置に、効果音用の複数種類の音源データからランダムに選択された音源データを出力する効果音出力工程と、を有する。このため、本実施形態では、混合される効果音が単調でなくなり、結果、聴者にとってより自然な効果音を楽曲に付与することが可能になり、聴者に、ライブ会場にいる雰囲気をより味わわせることが可能になる。 Further, the sound effect output method according to the embodiment of the present invention includes a music feature amount acquisition step of acquiring the feature amount of the music including the beat position, and a plurality of types for the sound effect at the detected beat position. It has a sound effect output step of outputting sound source data randomly selected from the sound source data of. Therefore, in the present embodiment, the mixed sound effects are not monotonous, and as a result, it is possible to add sound effects that are more natural for the listener to the music, and the listener can feel the atmosphere of the live venue more. Will be possible.

また、本発明の一実施形態に係る効果音出力プログラムは、上記の効果音出力方法を、コンピュータに実行させる。このようにすることで、コンピュータを用いて、聴者にとってより自然な効果音を楽曲に付与することが可能になり、聴者に、ライブ会場にいる雰囲気をより味わわせることが可能になる。 Further, the sound effect output program according to the embodiment of the present invention causes a computer to execute the above-mentioned sound effect output method. By doing so, it becomes possible to add sound effects that are more natural to the listener to the music by using a computer, and it is possible to give the listener a more enjoyable atmosphere of being in the live venue.

また、本発明の一実施形態に係るコンピュータ読み取り可能な記憶媒体は、上記の効果音出力プログラムを記憶している。このようにすることで、上記の効果音出力プログラムを、機器に組み込む以外にも単体で流通することが可能になり、バージョンアップ等を容易に行うことが可能になる。 Further, the computer-readable storage medium according to the embodiment of the present invention stores the above-mentioned sound effect output program. By doing so, the above-mentioned sound effect output program can be distributed as a single unit in addition to being incorporated in the device, and it becomes possible to easily upgrade the version.

＜効果音混合装置１００＞
図１は、本発明の一実施例に係る効果音混合装置１００である。効果音混合装置１００は、聴者がライブ会場で楽曲を聴いているような雰囲気を味わえるようにするために、楽曲に効果音を混合（付与）して出力する。そこで、効果音混合装置１００は、楽曲のデータや効果音用の音源データなどを記憶する記憶部１１０と、楽曲を出力する楽曲出力部１２０と、効果音を出力する効果音出力部１３０と、楽曲出力部１２０から出力された楽曲に、効果音出力部１３０から出力された効果音を混合する混合部１４０と、を有する。混合部１４０により効果音が混合された楽曲の音は、スピーカなどの音出力装置から出力される。 <Sound effect mixer 100>
FIG. 1 is a sound effect mixing device 100 according to an embodiment of the present invention. The sound effect mixing device 100 mixes (adds) sound effects to the music and outputs it so that the listener can enjoy the atmosphere of listening to the music at the live venue. Therefore, the sound effect mixing device 100 includes a storage unit 110 that stores music data, sound effect data for sound effects, and the like, a music output unit 120 that outputs music, and a sound effect output unit 130 that outputs sound effects. It has a mixing unit 140 that mixes the sound effect output from the sound effect output unit 130 with the music output from the music output unit 120. The sound of the music in which the sound effects are mixed by the mixing unit 140 is output from a sound output device such as a speaker.

記憶部１１０は、楽曲のデータや効果音用の音源データを記憶する。記憶部１１０は、ハードディスクやフラッシュメモリなどの記憶装置である。 The storage unit 110 stores music data and sound source data for sound effects. The storage unit 110 is a storage device such as a hard disk or a flash memory.

楽曲出力部１２０は、楽曲を出力する。楽曲出力部１２０は、例えば、記憶部１１０やＣＤ（Ｃｏｍｐｃｔ Ｄｉｓｃ）、クラウド上などに記憶された楽曲のデータを取得し、この取得したデータから楽曲の信号を生成し、生成された楽曲の信号を出力する。 The music output unit 120 outputs a music. The music output unit 120 acquires, for example, music data stored in a storage unit 110, a CD (Compct Disc), a cloud, or the like, generates a music signal from the acquired data, and generates a music signal. Is output.

効果音出力部１３０は、効果音を出力する。効果音出力部１３０は、例えば、記憶部１１０に記憶された効果音用の音源データを取得し、この取得した音源データから効果音の信号を生成し、生成された効果音の信号を出力する。 The sound effect output unit 130 outputs a sound effect. The sound effect output unit 130 acquires, for example, sound effect data for sound effects stored in the storage unit 110, generates a sound effect signal from the acquired sound effect data, and outputs the generated sound effect signal. ..

効果音としては、ライブ会場において楽曲に始まりや終わりに生じる歓声や拍手などの第１の効果音、ライブ会場において常時発生している環境音（ざわつき）などの第２の効果音、ライブ会場において楽曲のリズムや拍に合わせて行われる手拍子などの第３の効果音がある。 The sound effects include the first sound effect such as cheers and applause that occur at the beginning and end of the music at the live venue, the second sound effect such as the environmental sound (buzzing) that is constantly generated at the live venue, and at the live venue. There is a third sound effect, such as clapping in time with the rhythm or beat of the song.

図２は、楽曲出力部１２０による楽曲の出力、効果音出力部１３０による効果音の出力の一例を示す図である。図２に示した例では、第１の効果音（歓声や拍手など）は、楽曲の始まりの部分と終わりの部分に付与される。第２の効果音（環境音）は、楽曲の出力が始まる前から出力され、楽曲が再生されている間はずっと出される。第３の効果音（手拍子など）は、下記で詳述するように、楽曲が出力されている間に、楽曲の拍の位置に出力される。 FIG. 2 is a diagram showing an example of music output by the music output unit 120 and sound effect output by the sound effect output unit 130. In the example shown in FIG. 2, the first sound effect (cheers, applause, etc.) is given to the beginning part and the ending part of the music. The second sound effect (environmental sound) is output before the output of the music starts, and is output all the time while the music is being played. The third sound effect (such as clapping) is output at the beat position of the music while the music is being output, as described in detail below.

混合部１４０は、楽曲出力部１２０から出力された楽曲に、効果音出力部１３０から出力された効果音を混合し、効果音が混合された楽曲を出力する。混合部１４０は、例えば、複数の信号を加算して、加算された信号を出力する装置であり、楽曲出力部１２０から出力された楽曲の信号と効果音出力部１３０から出力された効果音の信号とを加算し、加算された信号を出力する。 The mixing unit 140 mixes the sound effect output from the sound effect output unit 130 with the music output from the music output unit 120, and outputs the music in which the sound effect is mixed. The mixing unit 140 is, for example, a device that adds a plurality of signals and outputs the added signal. The music signal output from the music output unit 120 and the sound effect output from the sound effect output unit 130. The signal is added and the added signal is output.

さらに、効果音混合装置１００は、楽曲出力部１２０からの楽曲の出力、効果音出力部１３０からの効果音の出力を制御する制御部１５０を有する。制御部１５０は、例えば、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）などを有するコンピュータにより構成される。 Further, the sound effect mixing device 100 has a control unit 150 that controls the output of the music from the music output unit 120 and the output of the sound effect from the sound effect output unit 130. The control unit 150 is composed of, for example, a computer having a CPU (Central Processing Unit) or the like.

制御部１５０は、例えば、楽曲の特徴量を取得する楽曲特徴量取得部１５１と、楽曲の曲調やジャンル、ライブ会場の規模などに関する複数のモードのうちから１つのモードを選択するモード選択部１５２と、楽曲特徴量取得部１５１により取得された楽曲の特徴量やモード選択部１５２により選択されたモードに基づいて、楽曲出力部１２０からの楽曲の出力、効果音出力部１３０からの効果音の出力を制御する出力制御部１５３と、を有する。上記実施形態の効果音出力装置は、例えば、効果音出力部１３０と制御部１５０を含む。 The control unit 150 is, for example, a music feature amount acquisition unit 151 that acquires a music feature amount, and a mode selection unit 152 that selects one mode from a plurality of modes related to the music tone and genre of the music, the scale of the live venue, and the like. And, based on the feature amount of the music acquired by the music feature amount acquisition unit 151 and the mode selected by the mode selection unit 152, the output of the music from the music output unit 120 and the sound effect from the sound effect output unit 130. It has an output control unit 153 that controls the output. The sound effect output device of the above embodiment includes, for example, a sound effect output unit 130 and a control unit 150.

楽曲特徴量取得部１５１は、楽曲の特徴量を取得する。楽曲の特徴量は、例えば、楽曲の音量、楽曲の拍の位置、単位時間あたりの拍の数（例えば、ＢＰＭ（Ｂｅａｔｓ Ｐｅｒ Ｍｉｎｕｔｅ））、楽曲の拍子、楽曲に使用される和音の種類の数、単位時間あたりの和音の数、和音の明瞭度、各帯域のパワー、楽曲のサビの位置などがある。 The music feature amount acquisition unit 151 acquires the feature amount of the music. The feature amount of the music is, for example, the volume of the music, the position of the beat of the music, the number of beats per unit time (for example, BPM (Beats Per Minute)), the beat of the music, and the number of types of chords used in the music. , Number of chords per unit time, clarity of chords, power of each band, position of chorus of music, etc.

楽曲特徴量取得部１５１は、楽曲を解析することで、楽曲の特徴量を取得するようにしても良いし、事前の解析で得られていた楽曲の特徴量が記憶部１１０やクラウド上に記憶されるようにし、楽曲特徴量取得部１５１は、記憶部１１０やクラウド上に記憶された楽曲の特徴量を取得するようにしても良い。また、楽曲特徴量取得部１５１は、記憶部１１０やＣＤなどに記憶された楽曲のデータに付与されたタグ情報から、楽曲の特徴量を取得するようにしても良い。 The music feature amount acquisition unit 151 may acquire the music feature amount by analyzing the music, or the music feature amount obtained by the prior analysis is stored in the storage unit 110 or the cloud. The music feature amount acquisition unit 151 may acquire the feature amount of the music stored in the storage unit 110 or the cloud. Further, the music feature amount acquisition unit 151 may acquire the music feature amount from the tag information added to the music data stored in the storage unit 110, the CD, or the like.

例えば、出力制御部１５３は、楽曲特徴量取得部１５１により取得された楽曲の音量に基づいて、効果音出力部１３０から出力される効果音の音量を制御すると良い。このようにすることで、楽曲の音量に比べて、混合された効果音の音量が大きくなりすぎることや、小さくなりすぎることを防ぐことが可能になり、聴者にとってより自然な効果音を楽曲に付与することが可能になり、聴者に、ライブ会場にいる雰囲気をより味わわせることが可能になる。 For example, the output control unit 153 may control the volume of the sound effect output from the sound effect output unit 130 based on the volume of the music acquired by the music feature amount acquisition unit 151. By doing so, it is possible to prevent the volume of the mixed sound effect from becoming too loud or too low compared to the volume of the music, and the sound effect that is more natural for the listener can be made into the music. It will be possible to give it, and it will be possible for the listener to feel the atmosphere of the live venue more.

また、出力制御部１５３は、楽曲特徴量取得部１５１により取得された楽曲の特徴量に基づいて、楽曲の曲調を検出し、この検出された曲調に基づいて、効果音出力部１３０からの効果音の出力を制御するようにしても良い。このとき、例えば、記憶部１１０が、スタジアムや野外フェス、アリーナなどの大規模会場用の効果音や、ホールや中大規模のライブハウスなどの中規模会場用の効果音、小規模のライブハウスや音楽バーなどの小規模会場用の効果音を記憶するようにし、出力制御部１５３は、検出された曲調に基づいて、効果音出力部１３０から出力される効果音を、大規模会場用の効果音、中規模会場用の効果音、小規模会場用の効果音のいずれにするかを決定するようにしても良い。このようにすることで、楽曲に合った効果音が付与されることになり、より自然な効果音を楽曲に応じて出力することが可能になる。結果、聴者にとってより自然な効果音を楽曲に付与することが可能になり、聴者に、ライブ会場にいる雰囲気をより味わわせることが可能になる。 Further, the output control unit 153 detects the musical tone of the musical piece based on the characteristic amount of the musical piece acquired by the musical piece feature amount acquisition unit 151, and the effect from the sound effect output unit 130 based on the detected musical tone. The sound output may be controlled. At this time, for example, the storage unit 110 uses sound effects for large-scale venues such as stadiums, outdoor festivals, and arenas, sound effects for medium-sized venues such as halls and medium- and large-scale live houses, and small-scale live houses. The sound effect for a small venue such as a music bar or a music bar is stored, and the output control unit 153 outputs the sound effect output from the sound effect output unit 130 for a large venue based on the detected musical tone. It may be decided whether to use a sound effect, a sound effect for a medium-sized venue, or a sound effect for a small-scale venue. By doing so, a sound effect suitable for the music is given, and a more natural sound effect can be output according to the music. As a result, it becomes possible to add sound effects that are more natural for the listener to the music, and it becomes possible for the listener to feel the atmosphere of the live venue more.

モード選択部１５２は、楽曲のジャンル、ライブ会場の規模などに関する複数のモードのうちから１つのモードを選択する。このとき、モード選択部１５２は、ユーザの入力に基づいてモードを選択するようにしても良いし、楽曲の特徴量や楽曲のタグ情報などに基づいてモードを選択するようにしても良い。 The mode selection unit 152 selects one mode from a plurality of modes related to the genre of the music, the scale of the live venue, and the like. At this time, the mode selection unit 152 may select the mode based on the input of the user, or may select the mode based on the feature amount of the music, the tag information of the music, and the like.

例えば、複数のモードには、ライブ会場の規模ごとに用意されたモードを含むようにすると良い。例えば、大規模会場用のモードや、中規模会場用のモード、小規模会場用のモードを用意すると良い。そして、出力制御部１５３は、モード選択部１５２により選択されたモードに基づいて、効果音出力部１３０から出力される効果音を決定し（つまり、例えば、大規模用のモードが選択された場合は、出力される効果音として、大規模用の効果音を決定し）、効果音出力部１３０からこの決定された効果音が出力されるように制御すると良い。このようにすることで、楽曲に合った効果音が付与されることになり、より自然な効果音を楽曲に応じて出力することが可能になる。結果、聴者にとってより自然な効果音を楽曲に付与することが可能になり、聴者に、ライブ会場にいる雰囲気をより味わわせることが可能になる。 For example, the plurality of modes may include modes prepared for each size of the live venue. For example, it is advisable to prepare a mode for a large-scale venue, a mode for a medium-sized venue, and a mode for a small-scale venue. Then, the output control unit 153 determines the sound effect output from the sound effect output unit 130 based on the mode selected by the mode selection unit 152 (that is, when a large-scale mode is selected, for example). Determines a large-scale sound effect as the output sound effect), and controls so that the determined sound effect is output from the sound effect output unit 130. By doing so, a sound effect suitable for the music is given, and a more natural sound effect can be output according to the music. As a result, it becomes possible to add sound effects that are more natural for the listener to the music, and it becomes possible for the listener to feel the atmosphere of the live venue more.

例えば、複数のモードには、曲調やジャンルごとに用意されたモードを含むようにすると良い。例えば、ノリのいいポップス用のモードや、落ち着いたポップス用のモード、クラシック用のモード、ジャズ用のモードなどを用意すると良い。そして、記憶部１１０が、各モード用の効果音を記憶するようにし、出力制御部１５３は、モード選択部１５２により選択されたモードに基づいて、効果音出力部１３０から出力される効果音を決定し（つまり、ノリのいいポップス用のモードが選択された場合は、出力される効果音として、ノリのいいポップス用の効果音を決定し）、効果音出力部１３０からこの決定された効果音が出力されるように制御すると良い。このようにすることで、楽曲に合った効果音が付与されることになり、より自然な効果音を楽曲に応じて出力することが可能になる。結果、聴者にとってより自然な効果音を楽曲に付与することが可能になり、聴者に、ライブ会場にいる雰囲気をより味わわせることが可能になる。 For example, the plurality of modes may include modes prepared for each tune or genre. For example, it is good to prepare a mode for pop music with a good feeling, a mode for calm pop music, a mode for classical music, a mode for jazz, and so on. Then, the storage unit 110 stores the sound effect for each mode, and the output control unit 153 stores the sound effect output from the sound effect output unit 130 based on the mode selected by the mode selection unit 152. Determined (that is, when the mode for good pops is selected, the sound effect for good pops is determined as the output sound effect), and this determined effect is determined from the sound effect output unit 130. It is good to control so that the sound is output. By doing so, a sound effect suitable for the music is given, and a more natural sound effect can be output according to the music. As a result, it becomes possible to add sound effects that are more natural for the listener to the music, and it becomes possible for the listener to feel the atmosphere of the live venue more.

＜効果音混合装置１００における処理動作＞
図３は、本実施例に係る効果音混合装置１００における処理動作の一例を示す図である。楽曲特徴量１５１が楽曲の特徴量を取得する、または、モード選択部１５２がモードを選択する（ステップＳ３０１）。出力制御部１５３は、取得した特徴量または選択されたモードに基づいて、楽曲出力部１２０により楽曲を出力し、効果音出力部１３０により効果音の出力する（ステップＳ３０２）。混合部１４０が、楽曲出力部１２０から出力された楽曲に、効果音出力部１３０から出力された効果音を混合する（ステップＳ３０３）。 <Processing operation in the sound effect mixing device 100>
FIG. 3 is a diagram showing an example of a processing operation in the sound effect mixing device 100 according to the present embodiment. The music feature amount 151 acquires the feature amount of the music, or the mode selection unit 152 selects the mode (step S301). The output control unit 153 outputs the music by the music output unit 120 and outputs the sound effect by the sound effect output unit 130 based on the acquired feature amount or the selected mode (step S302). The mixing unit 140 mixes the sound effect output from the sound effect output unit 130 with the music output from the music output unit 120 (step S303).

＜効果音の出力＞
観客による歓声や拍手、環境音、手拍子の音や大きさなどは、例えば、会場の規模により変わってくる。そこで、会場の規模ごとに、その会場用の歓声などの音源データを用意し、効果音として用いる音源データを楽曲に応じて変えることで、聴者に、ライブ会場にいる雰囲気をより味わわせることが可能になる。しかしながら、会場の規模ごとに、その会場用の歓声などの音源データを用意した場合、これらの音源データを記憶するために大きな容量の記憶装置が必要になる。 <Sound effect output>
The cheers and applause of the audience, the environmental sounds, the sounds and loudness of the clapping, etc. vary depending on the scale of the venue, for example. Therefore, by preparing sound source data such as cheers for the venue for each scale of the venue and changing the sound source data used as sound effects according to the music, it is possible to give the listener a more enjoyable atmosphere of being in the live venue. It will be possible. However, when sound source data such as cheers for the venue is prepared for each scale of the venue, a storage device having a large capacity is required to store these sound source data.

そこで、本発明の一実施例に係る効果音混合装置１００では、複数の領域で発生した音を混合することで、効果音を出力するようにする。具体的には、本実施例では、出力制御部１５３は、効果音出力部１３０により、各々が複数の領域の一つの領域で発生する音を含む複数の音源データを効果音として出力するようにする。そして、このとき、出力制御部１５３は、例えば、モード選択部１５２により選択されたモードに基づいて、複数の音源データの出力レベルを決定する。 Therefore, the sound effect mixing device 100 according to the embodiment of the present invention outputs the sound effect by mixing the sounds generated in a plurality of regions. Specifically, in this embodiment, the output control unit 153 outputs a plurality of sound source data including sounds generated in one region of a plurality of regions as sound effects by the sound effect output unit 130. do. Then, at this time, the output control unit 153 determines the output levels of the plurality of sound source data based on the mode selected by the mode selection unit 152, for example.

例えば、本実施例では、出力制御部１５３は、効果音出力部１３０により、基準位置の近傍（第１の領域）で発生する音を含む近傍音用の音源データと、基準位置の遠方（第１の領域より基準位置から離れている第２の領域）で発生する音を含む遠方音用の音源データと、を効果音として出力するようにすると良い。そして、このとき、出力制御部１５３は、例えば、モード選択部１５２により選択されたモードに基づいて、出力される近傍音用の音源データの出力レベルと出力される遠方音用の音源データの出力レベルを決定するようにすると良い。ここで、基準位置は、例えば、ライブ会場における観客の位置である。また、基準位置は、ライブ会場のステージの位置であっても良い。 For example, in this embodiment, the output control unit 153 uses the sound effect output unit 130 to provide sound source data for nearby sounds including sounds generated in the vicinity of the reference position (first region) and far away from the reference position (first region). It is preferable to output the sound source data for distant sounds including the sound generated in the second region) farther from the reference position than the region 1 as a sound effect. Then, at this time, the output control unit 153 outputs, for example, the output level of the sound source data for the near sound to be output and the sound source data for the far sound to be output based on the mode selected by the mode selection unit 152. It is good to decide the level. Here, the reference position is, for example, the position of the audience at the live venue. Further, the reference position may be the position of the stage of the live venue.

このため、本実施例では、例えば、遠方音用の音源データの出力レベルを近傍音用の音源データの出力レベルと同じくらいすることで、近傍で発生する歓声や拍手と遠方で発生する歓声や拍手の両方が楽曲に付与されることになり、聴者は、大規模なライブ会場で楽曲が演奏されている雰囲気を味わうことが可能になる。また、遠方音用の音源データの出力レベルの出力をゼロにすることで、近傍で発生する歓声や拍手だけが楽曲に付与されることになり、聴者は、小規模なライブ会場で楽曲が演奏されている雰囲気を味わうことが可能になる。つまり、本実施例では、少ない音源データにより、様々な規模の会場に適した効果音を楽曲に付与することが可能になる。結果、少ない音源データにより、聴者にとってより自然な効果音を楽曲に付与することが可能になり、聴者に、ライブ会場にいる雰囲気をより味わわせることが可能になる。 Therefore, in this embodiment, for example, by setting the output level of the sound source data for the distant sound to be the same as the output level of the sound source data for the near sound, cheers and applause generated in the vicinity and cheers generated in the distance can be obtained. Both applause will be given to the music, allowing listeners to experience the atmosphere of the music being played in a large live venue. In addition, by setting the output level of the sound source data for distant sounds to zero, only the cheers and applause generated in the vicinity are given to the music, and the listener can play the music in a small live venue. It will be possible to enjoy the atmosphere that is being played. That is, in this embodiment, it is possible to add sound effects suitable for venues of various scales to the music with a small amount of sound source data. As a result, with a small amount of sound source data, it is possible to add sound effects that are more natural for the listener to the music, and it is possible for the listener to feel the atmosphere of the live venue more.

近傍音用の音源データと遠方音用の音源データが用意される効果音は、第１の効果音（歓声、拍手など）でも良いし、第２の効果音（環境音）でも良いし、第３の効果音（手拍子など）でも良い。例えば、図４に示した例では、第１の効果音、第２の効果音に対して、近傍音用の音源データと遠方用の音源データを出力している。 The sound effect for which the sound effect data for the near sound and the sound effect data for the far sound are prepared may be the first sound effect (cheers, applause, etc.), the second sound effect (environmental sound), or the first. The sound effect of 3 (clapping, etc.) may be used. For example, in the example shown in FIG. 4, sound source data for near sounds and sound source data for distant sounds are output for the first sound effect and the second sound effect.

例えば、複数のモードに、大規模会場用のモードや、中規模会場用のモード、小規模会場用のモードが含まれているようにすることで、本実施例では、会場の規模に応じた効果音を楽曲に付与することが可能になる。例えば、モード選択部１５２により大規模会場用のモードが選択されたとき、出力制御部１５３は、遠方音用の音源データと近傍音用の音源データを同じ出力レベルで出力するように効果音出力部１３０を制御すると良い。また、例えば、モード選択部１５２により中規模会場用のモードが選択されたとき、出力制御部１５３は、遠方音用の音源データの出力レベルを近傍音用の音源データの出力レベルに比べて小さくなるように出力するように効果音出力部１３０を制御すると良く、モード選択部１５２により小規模会場用のモードが選択されたとき、出力制御部１５３は、遠方音用の音源データの出力レベルをゼロにし、近傍音用の音源データだけを出力するように効果音出力部１３０を制御すると良い。 For example, by making the plurality of modes include a mode for a large-scale venue, a mode for a medium-sized venue, and a mode for a small-scale venue, in this embodiment, the mode for the venue is adjusted. It becomes possible to add sound effects to music. For example, when a mode for a large-scale venue is selected by the mode selection unit 152, the output control unit 153 outputs a sound effect so that the sound source data for the distant sound and the sound source data for the near sound are output at the same output level. It is preferable to control the unit 130. Further, for example, when the mode for a medium-sized venue is selected by the mode selection unit 152, the output control unit 153 sets the output level of the sound source data for the distant sound smaller than the output level of the sound source data for the near sound. It is preferable to control the sound source output unit 130 so as to output so as to be, and when the mode for a small venue is selected by the mode selection unit 152, the output control unit 153 sets the output level of the sound source data for the distant sound. It is preferable to set the effect sound output unit 130 to zero so that only the sound source data for nearby sounds is output.

また、記憶部１１０が、近傍音用の音源データとして、複数種類の音源データを記憶するようにし、出力制御部１５３は、効果音出力部１３０から出力される近傍音用の音源データを、この複数種類の音源データからランダムに選択するようにしても良い。同様に、記憶部１１０が、遠方音用の音源データとして、複数種類の音源データを記憶するようにし、出力制御部１５３は、効果音出力部１３０から出力される遠方音用の音源データを、この複数種類の音源データからランダムに選択するようにしても良い。このようにすることで、効果音出力部１３０から出力される効果音が単調でなくなり、結果、聴者にとってより自然な効果音を楽曲に付与することが可能になり、聴者に、ライブ会場にいる雰囲気をより味わわせることが可能になる。 Further, the storage unit 110 stores a plurality of types of sound source data as sound source data for nearby sounds, and the output control unit 153 stores the sound source data for nearby sounds output from the effect sound output unit 130. You may randomly select from a plurality of types of sound source data. Similarly, the storage unit 110 stores a plurality of types of sound source data as the sound source data for the distant sound, and the output control unit 153 stores the sound source data for the distant sound output from the effect sound output unit 130. You may randomly select from these a plurality of types of sound source data. By doing so, the sound effect output from the sound effect output unit 130 is not monotonous, and as a result, it becomes possible to add a sound effect that is more natural for the listener to the music, and the listener is at the live venue. It becomes possible to taste the atmosphere more.

また、記憶部１１０が、残響用の音源データを記憶するようにし、出力制御部１５３は、近傍音用の音源データ、遠方音用の音源データに加え、残響用の音源データを出力するようにしても良い。このようにすることで、楽曲に付与される効果音が、ライブ会場で生じる音に近い音になり、結果、聴者にとってより自然な効果音を楽曲に付与することが可能になり、聴者に、ライブ会場にいる雰囲気をより味わわせることが可能になる。 Further, the storage unit 110 stores the sound source data for reverberation, and the output control unit 153 outputs the sound source data for reverberation in addition to the sound source data for near sound and the sound source data for distant sound. You may. By doing so, the sound effect given to the music becomes a sound close to the sound generated at the live venue, and as a result, it becomes possible to give a sound effect more natural to the listener to the listener. It will be possible to enjoy the atmosphere of being in the live venue.

図５は、本実施例に係る効果音混合装置１００における処理動作の一例を示す図である。モード選択部１５２がモードを選択する（ステップＳ５０１）。出力制御部１５３は、選択されたモードに基づいて、近傍音用の音源データの出力レベルと遠方音用の音源データの出力レベルを決定し（ステップＳ５０２）、効果音出力部１２０により、この決定された出力レベルで、近傍音用の音源データと遠方音用の音源データを出力する（ステップＳ５０３）。 FIG. 5 is a diagram showing an example of a processing operation in the sound effect mixing device 100 according to the present embodiment. The mode selection unit 152 selects a mode (step S501). The output control unit 153 determines the output level of the sound source data for the near sound and the output level of the sound source data for the far sound based on the selected mode (step S502), and the sound effect output unit 120 determines this. At the output level, the sound source data for the near sound and the sound source data for the far sound are output (step S503).

なお、上記実施例では、複数の音源データを混合することで、第１の効果音のバリエーションを増やしているが、音処理を使い分けること（例えば、パラメータ設定を変えること）で、第１の効果音のバリエーションを増やすようにして良い。 In the above embodiment, the variation of the first sound effect is increased by mixing a plurality of sound source data, but the first effect can be obtained by properly using the sound processing (for example, changing the parameter setting). You may try to increase the variation of the sound.

また、上記実施例では、複数の音源データの各々の出力レベルを変えることで、会場の規模に適した第１の効果音を出力しているが、複数の音源データの各々の出力レベルを変えることで、会場のその他の特徴（会場の形状など）に適した第１の効果音を出力できるようにしても良い。 Further, in the above embodiment, the first sound effect suitable for the scale of the venue is output by changing the output level of each of the plurality of sound source data, but the output level of each of the plurality of sound source data is changed. Therefore, the first sound effect suitable for other features of the venue (such as the shape of the venue) may be output.

＜第１の効果音（歓声、拍手など）の出力＞
ライブ会場では、楽曲が演奏される際に、演奏の始まりの部分や、終わりの部分において、観客による歓声や拍手が発生する。この歓声や拍手が発生するタイミングは、ライブ会場の規模やライブ会場で演奏される楽曲のジャンルなどにより変化する。 <Output of the first sound effect (cheers, applause, etc.)>
At the live venue, when a piece of music is played, the audience cheers and applauds at the beginning and end of the performance. The timing at which these cheers and applause occur varies depending on the scale of the live venue and the genre of the music played at the live venue.

そこで、本発明の一実施例に係る効果音混合装置１００では、楽曲のジャンルに基づいて、第１の効果音（歓声、拍手）の楽曲への付与の仕方を決定する。このとき、楽曲のジャンルは、楽曲特徴量取得部１５１により取得されるようにすると良い。また、モードが曲調やジャンルごとに用意されている場合、モード選択部１５２によりモードを選択することでも、楽曲のジャンルが決まる。よって、本実施例に係る効果音混合装置１００では、設定されたモード（つまり、モード選択部により選択されたモード）に基づいて、第１の効果音（歓声、拍手）の楽曲への付与の仕方を決定するようにしても良い。 Therefore, in the sound effect mixing device 100 according to the embodiment of the present invention, the method of giving the first sound effect (cheers, clapping) to the music is determined based on the genre of the music. At this time, the genre of the music may be acquired by the music feature amount acquisition unit 151. Further, when the mode is prepared for each music tone or genre, the genre of the music is also determined by selecting the mode by the mode selection unit 152. Therefore, in the sound effect mixing device 100 according to the present embodiment, the first sound effect (cheers, applause) is added to the music based on the set mode (that is, the mode selected by the mode selection unit). You may decide how to do it.

例えば、本実施例に係る効果音混合装置１００では、出力制御部１５３は、楽曲のジャンルまたはモード選択部により選択されたモードに基づいて、第１の効果音が楽曲の始まりの部分に重複する時間を決定し、この決定に基づいて、楽曲出力部１２０による楽曲の出力と効果音出力部１３０による効果音の出力を制御する。特に、本実施例に係る効果音混合装置１００では、出力制御部１５３は、楽曲のジャンルまたはモード選択部により選択されたモードに基づいて、楽曲の始まりの部分に重複するように第１の効果音を出力するのか否かを決定し、この決定に基づいて、楽曲出力部による楽曲の出力と効果音出力部による効果音の出力を制御する。例えば、本実施例において、効果音出力部１３０は、図６に示すように、楽曲の始まりの部分に重複するように、第１の効果音が出力されるように制御される。また、本実施例において、効果音出力部１３０は、図７に示すように、楽曲の出力が開始される前に、楽曲に重複しないように、第１の効果音が出力されるように制御される。このようにすることで、本実施例では、楽曲のジャンルに応じた効果音の出力を行うことが可能になる。結果、聴者にとってより自然な効果音を楽曲に付与することが可能になり、聴者に、ライブ会場にいる雰囲気をより味わわせることが可能になる。 For example, in the sound effect mixing device 100 according to the present embodiment, the output control unit 153 overlaps the first sound effect with the beginning part of the music based on the genre of the music or the mode selected by the mode selection unit. The time is determined, and based on this determination, the output of the music by the music output unit 120 and the output of the sound effect by the sound effect output unit 130 are controlled. In particular, in the sound effect mixing device 100 according to the present embodiment, the output control unit 153 has the first effect so as to overlap the beginning part of the music based on the genre of the music or the mode selected by the mode selection unit. Whether or not to output sound is determined, and based on this determination, the output of the music by the music output unit and the output of the sound effect by the sound effect output unit are controlled. For example, in this embodiment, as shown in FIG. 6, the sound effect output unit 130 is controlled so that the first sound effect is output so as to overlap the beginning portion of the music. Further, in the present embodiment, as shown in FIG. 7, the sound effect output unit 130 controls so that the first sound effect is output so as not to overlap with the music before the output of the music is started. Will be done. By doing so, in this embodiment, it is possible to output sound effects according to the genre of the music. As a result, it becomes possible to add sound effects that are more natural for the listener to the music, and it becomes possible for the listener to feel the atmosphere of the live venue more.

また、楽曲の始まりの部分に付与される効果音を出力するタイミングは、楽曲の音量や楽曲の音量の変化スピードに基づいて決定されるようにしても良い。 Further, the timing of outputting the sound effect given to the beginning portion of the musical piece may be determined based on the volume of the musical piece or the speed of change of the volume of the musical piece.

また、本実施例に係る効果音混合装置１００では、楽曲の終わりの部分に付与される効果音を出力するタイミングを、楽曲の終了までの時間および前記楽曲の音量に基づいて決定する。例えば、図６、７に示すように、楽曲の終了の所定の時間ｔｅ前の時間以降に、楽曲のレベルが所定の音量値以下になったときに、楽曲の終わりの部分に付与される第１の効果音を出力する。このようにすることで、ライブ会場において楽曲が終わったと観客が感じたときに行う歓声や拍手と同様のタイミングで、楽曲に歓声や拍手などの第１の効果音を付与することが可能になる。 Further, in the sound effect mixing device 100 according to the present embodiment, the timing of outputting the sound effect given to the end portion of the music is determined based on the time until the end of the music and the volume of the music. For example, as shown in FIGS. 6 and 7, when the level of the music becomes equal to or lower than the predetermined volume value after the time before the predetermined time te of the end of the music, the first portion of the music is given. Outputs the sound effect of 1. By doing so, it becomes possible to add the first sound effect such as cheers and applause to the music at the same timing as the cheers and applause performed when the audience feels that the music is over at the live venue. ..

楽曲の終了する際の音量の変化は、楽曲によって異なる。そこで、楽曲の終わりの部分に付与される効果音を出力するタイミングは、楽曲の音量の変化スピードに基づくようにしても良い。このようにすることで、楽曲の終了する際の音量の変化に適した効果音の出力を行うことが可能になる。 The change in volume at the end of a song depends on the song. Therefore, the timing of outputting the sound effect given to the end portion of the musical piece may be based on the changing speed of the volume of the musical piece. By doing so, it becomes possible to output a sound effect suitable for a change in volume at the end of the music.

このとき、閾値となる所定の音量値は、楽曲のジャンルおよび／または会場の規模に基づいて決定するようにしても良い。このようにすることで、聴者にとってより自然な効果音を楽曲に付与することが可能になり、聴者に、ライブ会場にいる雰囲気をより味わわせることが可能になる。 At this time, the predetermined volume value serving as a threshold value may be determined based on the genre of the music and / or the scale of the venue. By doing so, it becomes possible to give the music a sound effect that is more natural for the listener, and it becomes possible for the listener to feel the atmosphere of the live venue more.

例えば、音楽のジャンルを二つのグループ、第１のグループと第２のグループに分け、出力制御部１５３は、楽曲のジャンルが第１のグループに含まれるジャンルであるときは、図６に示すように、第１の効果音の出力を開始するように、楽曲出力部１２０と効果音出力部１３０を制御するようにすると良い。また、出力制御部１５３は、楽曲のジャンルが第２のグループに含まれるジャンルであるときは、図７に示すように、効果音出力部１３０による第１の効果音の出力が終了した後に、楽曲の出力が開始されるように、楽曲出力部１２０と楽曲出力部１３０を制御するようにすると良い。 For example, the genre of music is divided into two groups, the first group and the second group, and when the genre of music is a genre included in the first group, the output control unit 153 is as shown in FIG. In addition, it is preferable to control the music output unit 120 and the sound effect output unit 130 so as to start the output of the first sound effect. Further, when the genre of the music is a genre included in the second group, the output control unit 153 receives after the output of the first sound effect by the sound effect output unit 130 is completed, as shown in FIG. It is preferable to control the music output unit 120 and the music output unit 130 so that the output of the music is started.

落ち着いた音楽のジャンルの楽曲は、ノリのいい音楽のジャンルの楽曲よりも小さい会場で演奏されることが多い。そこで、出力制御部１５３は、例えば、楽曲のジャンルが第１のグループに含まれるジャンルであるときは、楽曲の終了の所定時間ｔｅ前の時間以降かつ楽曲の音量が第１の音量値以下になったときに第１の効果音の出力を開始するように、効果音出力部１４０を制御するようにし、楽曲のジャンルが第２のグループに含まれるジャンルであるときは、楽曲の終了の所定時間ｔｅ前の時間以降かつ楽曲の音量が第２の音量値以下になったときに第１の効果音の出力を開始するように、効果音出力部１４０を制御するようにしても良い。 Music in a calm music genre is often played in a smaller venue than music in a nice music genre. Therefore, for example, when the genre of the music is a genre included in the first group, the output control unit 153 sets the volume of the music to the first volume value or less after the time before the predetermined time te of the end of the music. The sound effect output unit 140 is controlled so that the output of the first sound sound is started when the music becomes output, and when the music genre is a genre included in the second group, the end of the music is specified. The sound effect sound output unit 140 may be controlled so that the output of the first sound effect sound is started when the volume of the music becomes equal to or less than the second volume value after the time before the time te.

また、記憶部１１０に第１の効果音用の複数種類の音源データを記憶するようにし、出力制御部１５３は、第１の効果音を出力するごとに、この複数種類の音源データからランダムに１つの音源データを選択し、この音源データを第１の効果音として出力するようにしても良い。このようにすることで、楽曲の始まりと終わりとで、歓声や拍手が変わり、また、楽曲ごとに、歓声や拍手が変わるため、楽曲に付与される効果音がより自然になり、聴者にとってより自然な効果音を楽曲に付与することが可能になり、聴者に、ライブ会場にいる雰囲気をより味わわせることが可能になる。 Further, the storage unit 110 stores a plurality of types of sound source data for the first sound effect, and the output control unit 153 randomly outputs the first sound effect from the plurality of types of sound source data. One sound source data may be selected and this sound source data may be output as the first sound effect. By doing this, the cheers and clappings change between the beginning and end of the song, and the cheers and clappings change for each song, so the sound effects given to the song become more natural and more for the listener. It is possible to add natural sound effects to the music, and it is possible to give the listener a more enjoyable atmosphere of being in the live venue.

このとき、記憶部１１０には、会場の規模ごとに、第１の効果音用の複数種類の音源データを記憶するようし、出力制御部１５３は、第１の効果音を出力するごとに、モード選択部１５２により選択されたモードに基づいた規模の会場用の複数種類の音源データからランダムに選択し、この音源データを第１の効果音として出力するようにしても良い。このようにすることで、会場の規模にあった歓声や拍手が楽曲に付与されることになり、聴者にとってより自然な効果音を楽曲に付与することが可能になり、聴者に、ライブ会場にいる雰囲気をより味わわせることが可能になる。このとき、第１の効果音用の音源データは、上述したように、近傍用の音源データと遠方用の音源データにより構成されるようにしても良い。 At this time, the storage unit 110 stores a plurality of types of sound source data for the first sound effect for each scale of the venue, and the output control unit 153 outputs the first sound effect each time. It is also possible to randomly select from a plurality of types of sound source data for a venue of a scale based on the mode selected by the mode selection unit 152, and output this sound source data as the first sound effect. By doing so, cheers and applause suitable for the scale of the venue will be added to the music, and it will be possible to add sound effects that are more natural for the listener to the music, and to the listener at the live venue. It will be possible to enjoy the atmosphere of being there. At this time, the sound source data for the first sound effect may be composed of the sound source data for the vicinity and the sound source data for the distance as described above.

楽曲の始まる部分に付与される第１の効果音用の音源データとは別に、楽曲の終わりの部分に付与される第１の効果音用の音源データを用意するようにしても良い。また、このとき、記憶楽曲の始まる部分に付与される第１の効果音と楽曲の終わりの部分に付与される第１の効果音のそれぞれに対して、複数種類の音源データを用意するようにしても良い。 In addition to the sound source data for the first sound effect given to the beginning part of the music, the sound source data for the first sound effect given to the end part of the music may be prepared. Further, at this time, a plurality of types of sound source data are prepared for each of the first sound effect given to the beginning part of the stored music and the first sound effect given to the ending part of the music. You may.

楽曲を連続して出力するときは、出力制御部１５３は、図６に示すように、前の楽曲に終わりの部分に付与された第１の効果音の出力が終わった後に、楽曲出力部１２０により次の楽曲の出力をするようにすると良い。このとき、前の楽曲と次の楽曲の間の時間ｔｉは、一定であっても良いし、ランダムに選択されるようにしても良い。 When continuously outputting music, as shown in FIG. 6, the output control unit 153 outputs the music output unit 120 after the output of the first sound effect added to the end portion of the previous music is completed. It is better to output the next song. At this time, the time ti between the previous song and the next song may be constant or may be randomly selected.

また、例えば、第２のグループに含まれるジャンルの楽曲が連続して出力されるときは、出力制御部１５３は、図７に示すように、前の楽曲に終わりの部分に付与された第１の効果音の出力が終わったときに、楽曲出力部１２０により次の楽曲の出力をするようにすると良い。または、第２のグループに含まれるジャンルの楽曲が連続して出力されるときに、出力制御部１５３は、楽曲が連続している間は、効果音出力部１３０により第１の効果音を出力せず、最後の楽曲の終わりの部分にのみ、効果音出力部１３０により第１の効果音を出力するようにしても良い。このとき、出力制御部１５３は、連続する楽曲間には間隔が入らないように、楽曲出力部１２０により楽曲を出力するようにしても良い。 Further, for example, when music of a genre included in the second group is continuously output, the output control unit 153 is a first unit added to the end portion of the previous music as shown in FIG. When the output of the sound effect of is finished, it is preferable that the music output unit 120 outputs the next music. Alternatively, when the music of the genre included in the second group is continuously output, the output control unit 153 outputs the first sound effect by the sound effect output unit 130 while the music is continuous. Instead, the sound effect output unit 130 may output the first sound effect only at the end of the last song. At this time, the output control unit 153 may output the music by the music output unit 120 so that there is no interval between the continuous music.

また、第１の効果音の出力レベルは、例えば、第１の効果音が出力開始から一定時間経過するまでの間に、ゼロから漸増するようにしても良い。つまり、第１の効果音は、フェイドインするようにしても良い。 Further, the output level of the first sound effect may be gradually increased from zero, for example, from the start of the output until a certain period of time elapses from the start of the output of the first sound effect. That is, the first sound effect may be faded in.

図８は、本実施例に係る効果音混合装置１００における処理動作の一例を示す図である。出力制御部１５３は、楽曲のジャンルが第１のグループに含まれるジャンルであるならば（ステップＳ８０１、ＹＥＳ）、まず、楽曲出力部１２０により、楽曲を出力する（ステップＳ８０２）。楽曲が出力されてから所定の時間ｔｂが経過したときに（ステップＳ８０３、ＹＥＳ）、出力制御部１５３は、複数種類の第１の効果音用の音源データからランダムに１つの音源データを選択し（ステップＳ８０４）、効果音出力部１３０により、この音源データを第１の効果音として出力する（ステップＳ８０５）。そして、楽曲の終了の所定時間ｔｅ前の時間を超えた後（ステップＳ８０６、ＹＥＳ）、楽曲の音量が第１の音量値以下になったときに（ステップＳ８０７、ＹＥＳ）、出力制御部１５３は、複数種類の第１の効果音用の音源データからランダムに１つの音源データを選択し（ステップＳ８０８）、効果音出力部１３０により、この音源データを第１の効果音として出力する（ステップＳ８０９）。 FIG. 8 is a diagram showing an example of a processing operation in the sound effect mixing device 100 according to the present embodiment. If the genre of the music is a genre included in the first group (step S801, YES), the output control unit 153 first outputs the music by the music output unit 120 (step S802). When a predetermined time tb has elapsed since the music was output (step S803, YES), the output control unit 153 randomly selects one sound source data from the sound source data for the first sound effect of a plurality of types. (Step S804), the sound effect output unit 130 outputs this sound source data as the first sound effect (step S805). Then, after the time before the predetermined time te of the end of the music is exceeded (step S806, YES), when the volume of the music becomes equal to or lower than the first volume value (step S807, YES), the output control unit 153 , One sound source data is randomly selected from the sound source data for the first sound effect of a plurality of types (step S808), and this sound source data is output as the first sound effect by the sound effect output unit 130 (step S809). ).

一方、出力制御部１５３は、楽曲のジャンルが第１のグループに含まれるジャンルでなく、第２のグループに含まれるジャンルであるならば（ステップＳ８０１、ＮＯ）、まず、複数種類の第１の効果音用の音源データからランダムに１つの音源データを選択し（ステップＳ８１０）、効果音出力部１３０により、この音源データを第１の効果音として出力する（ステップＳ８１１）。第１の効果音の出力が終了したとき（ステップＳ８１２、ＹＥＳ）、出力制御部１５３は、楽曲出力部１２０により、楽曲を出力する（ステップＳ８１３）。そして、楽曲の終了の所定時間ｔｅ前の時間を超えた後（ステップＳ８１４、ＹＥＳ）、楽曲の音量が第２の音量値以下になったときに（ステップＳ８１５、ＹＥＳ）、出力制御部１５３は、複数種類の第１の効果音用の音源データからランダムに１つの音源データを選択し（ステップＳ８１６）、効果音出力部１３０により、この音源データを第１の効果音として出力する（ステップＳ８１７）。 On the other hand, if the genre of the music is not the genre included in the first group but the genre included in the second group (step S801, NO), the output control unit 153 first of a plurality of types of the first One sound source data is randomly selected from the sound source data for the sound effect (step S810), and the sound effect output unit 130 outputs this sound source data as the first sound effect (step S811). When the output of the first sound effect is completed (step S812, YES), the output control unit 153 outputs the music by the music output unit 120 (step S813). Then, after the time before the predetermined time te of the end of the music is exceeded (step S814, YES), when the volume of the music becomes equal to or lower than the second volume value (step S815, YES), the output control unit 153 , One sound source data is randomly selected from the sound source data for the first sound effect of a plurality of types (step S816), and this sound source data is output as the first sound effect by the sound effect output unit 130 (step S817). ).

また、出力制御部１５３は、楽曲の音量と楽曲の音量の変化スピードに基づいて、効果音出力部１３０により出力される第１の効果音の音量や第１の効果音の音量の遷移を決定するようにしても良い。 Further, the output control unit 153 determines the transition of the volume of the first sound effect and the volume of the first sound effect output by the sound effect output unit 130 based on the volume of the music and the change speed of the volume of the music. You may try to do it.

＜第２の効果音（環境音）の出力＞
ライブ会場では、多くの人が集まっているため、歓声や拍手がないときでも、ざわざわとしている。このため、このざわつきなどの環境音を、楽曲に付与（混合）することで、ライブ会場の雰囲気を味わえるようにすることが可能である。しかしながら、１つの環境音用の音源データを単に連続して出力しただけでは、同じ音源データの音が規則的に繰り返し流れるだけになり、実際のライブ会場で生じる環境音に比べ、規則性が感じられ、自然な環境音と感じられない。 <Output of the second sound effect (environmental sound)>
Many people gather at the live venue, so even when there is no cheers or applause, it is noisy. Therefore, it is possible to enjoy the atmosphere of the live venue by adding (mixing) environmental sounds such as this noise to the music. However, if the sound source data for one environmental sound is simply output continuously, the sound of the same sound source data will only flow regularly and repeatedly, and the sound will feel more regular than the environmental sound generated at the actual live venue. It does not feel like a natural environmental sound.

そこで、本発明の一実施例に係る効果音混合装置１００では、第２の効果音を連続して出力する際に、連続して出力される第２の効果音のうちの互いに前後する第２の効果音の一部は同時に出され、その前後する第２の効果音が同時に出力される時間（重複時間ＴＯ）は、ランダムに設定される。つまり、本実施例では、出力制御部１５３は、効果音出力部１３０により第２の効果音を出力する際に、ランダムに重複時間ＴＯを選択し、図９に示すように、前に出力された第２の効果音の終了の選択された重複時間ＴＯだけ前に、次の第２の効果音を出力するように、効果音出力部１３０を制御する。 Therefore, in the sound effect mixing device 100 according to the embodiment of the present invention, when the second sound effect is continuously output, the second sound effect that is continuously output before and after the second sound effect is second. A part of the sound effects of is output at the same time, and the time during which the second sound effects before and after that are output at the same time (overlapping time TO) is set at random. That is, in this embodiment, when the output control unit 153 outputs the second sound effect by the sound effect output unit 130, the overlap time TO is randomly selected and output before as shown in FIG. The sound effect output unit 130 is controlled so as to output the next second sound effect only before the selected overlap time TO of the end of the second sound effect.

このようにすることで、たとえ第２の効果音用の音源データが一種類の音源データのみであっても、第２の効果音の出力のタイミングが単調でなく、ランダムになり、規則性が薄れる。結果、聴者にとってより自然な環境音を楽曲に付与することが可能になり、聴者に、ライブ会場にいる雰囲気をより味わわせることが可能になる。 By doing so, even if the sound source data for the second sound effect is only one type of sound source data, the output timing of the second sound effect is not monotonous but random, and the regularity becomes regular. It fades. As a result, it becomes possible to give the music a more natural environmental sound to the listener, and it becomes possible to give the listener a more enjoyable atmosphere of being in the live venue.

第２の効果音用の音源データは、一種類の音源データのみを含んでいても良いし、複数種類の音源データを含んでいても良い。第２の効果音用の音源データが一種類の音源データのみを含んでいる場合は、第２の効果音用の音源データに記憶される記憶部１１０の容量を抑えることが可能になる。 The sound source data for the second sound effect may include only one type of sound source data, or may include a plurality of types of sound source data. When the sound source data for the second sound effect includes only one type of sound source data, it is possible to suppress the capacity of the storage unit 110 stored in the sound source data for the second sound effect.

一方、第２の効果音用の音源が複数種類の音源データを含んでいる場合は、効果音出力部により出力される第２の効果音の各々は、複数種類の音源データからランダムに選択された音源データの音であるようにすると良い。つまり、出力制御部１５３は、複数種類の第２の効果音用の音源データのうちから１つの音源データをランダムに選択し、この選択された音源データを第２の効果音として出力するように、効果音出力部１３０を制御すると良い。このようにすることで、より規則性が無くなり、結果、聴者にとってより自然な環境音を楽曲に付与することが可能になり、聴者に、ライブ会場にいる雰囲気をより味わわせることが可能になる。 On the other hand, when the sound source for the second sound effect contains a plurality of types of sound source data, each of the second sound effects output by the sound effect output unit is randomly selected from the plurality of types of sound source data. It is good to make it the sound of the sound source data. That is, the output control unit 153 randomly selects one sound source data from a plurality of types of sound source data for the second sound effect, and outputs the selected sound source data as the second sound effect. , It is preferable to control the sound effect output unit 130. By doing so, it becomes less regular, and as a result, it becomes possible to give the music a more natural environmental sound for the listener, and it becomes possible for the listener to feel the atmosphere of the live venue more. ..

また、会場の規模ごとにモードが用意されているようなときは、第２の効果音の音源データを、会場の規模ごとに用意するようにしても良い。そして、出力制御部１５３は、モード選択部１５２により選択されたモードに基づいて、音源データを選択し、この音源データを効果音出力部１３０により出力するようにしても良い。 Further, when the mode is prepared for each scale of the venue, the sound source data of the second sound effect may be prepared for each scale of the venue. Then, the output control unit 153 may select the sound source data based on the mode selected by the mode selection unit 152, and output the sound source data by the sound effect output unit 130.

重複時間ＴＯは、例えば、所定の範囲から選択されるようにすると良い。このとき、重複時間ＴＯは、会場の大きさ、つまり、モード選択部１５２により選択されたモードにより異なる範囲から選択されるようにしても良い。 The overlap time TO may be selected from a predetermined range, for example. At this time, the overlapping time TO may be selected from a different range depending on the size of the venue, that is, the mode selected by the mode selection unit 152.

出力制御部１５３は、重複時間ＴＯにおいて、前の第２の効果音の出力レベルを、ゼロまで漸減させ、つまり、フェイドアウトさせ、後の第２の効果音の出力レベルは、ゼロから漸増させる、つまり、フェイドインさせるようにすると良い。このようにすることで、重複時間ＴＯにおいても、効果音の出力レベルが変化することがなくなり、結果、聴者にとってより自然な環境音を楽曲に付与することが可能になり、聴者に、ライブ会場にいる雰囲気をより味わわせることが可能になる。 The output control unit 153 gradually reduces the output level of the previous second sound effect to zero, that is, fades out, and gradually increases the output level of the subsequent second sound effect from zero in the overlap time TO. In other words, it is better to fade in. By doing so, the output level of the sound effect does not change even in the overlapping time TO, and as a result, it becomes possible to add a more natural environmental sound to the music to the listener, and to the listener at the live venue. It will be possible to enjoy the atmosphere of being in the area.

なお、上記では、連続して出力される効果音は、第２の効果音（環境音）であるが、上記の連続して出力される効果音は、第１の効果音（歓声、拍手など）であっても良い。つまり、楽曲の始まりや終わりの部分に付与される第１の効果音として、２以上の音源データを連続して出力するようにしても良い。 In the above, the continuously output sound effect is the second sound effect (environmental sound), but the continuously output sound effect is the first sound effect (cheers, applause, etc.). ) May be. That is, two or more sound source data may be continuously output as the first sound effect given to the beginning or end of the music.

図１０は、本実施例に係る効果音混合装置１００における処理動作の一例を示す図である。楽曲の再生が開始されたときに（ステップＳ１００１、ＹＥＳ）、出力制御部１５３は、効果音出力部１３０により第２の効果音を出力する（ステップＳ１００２）。楽曲の再生が終了していないならば（ステップＳ１００３、ＮＯ）、出力制御部１５３は、重複時間をランダムに選択し（ステップＳ１００４）、前に出力された第２の効果音と選択された重複時間だけ重複するように、前の出力された第２の効果音の出力の終了の重複時間前の時間に（ステップＳ１００５、ＹＥＳ）、効果音出力部１３０により第２の効果音を出力する（ステップＳ１００２）。楽曲の再生が終了したならば（ステップＳ１００３、ＹＥＳ）、処理を終了する。図１０に示した処理動作では、複数の楽曲が連続再生される場合は、ステップＳ１００３において、この連続再生が終了したのか否かの確認を行い、連続再生が終了したときに、楽曲の再生が終了したと判断する。 FIG. 10 is a diagram showing an example of a processing operation in the sound effect mixing device 100 according to the present embodiment. When the reproduction of the music is started (step S1001, YES), the output control unit 153 outputs the second sound effect by the sound effect output unit 130 (step S1002). If the reproduction of the music is not completed (step S1003, NO), the output control unit 153 randomly selects the overlap time (step S1004), and the overlap selected with the previously output second sound effect. The second sound effect is output by the sound effect output unit 130 at the time before the overlap time (step S1005, YES) of the end of the output of the previously output second sound effect so as to overlap by the time (step S1005, YES). Step S1002). When the reproduction of the music is completed (step S1003, YES), the process is terminated. In the processing operation shown in FIG. 10, when a plurality of songs are continuously played, in step S1003, it is confirmed whether or not the continuous playback is completed, and when the continuous playback is completed, the music is reproduced. Judge that it is finished.

＜第３の効果音（手拍子など）の混合判定＞
ライブ会場では、観客は、楽曲に合わせ、手拍子や足踏みによりリズムを取ることがある。しかしながら、観客は、演奏されるすべての楽曲に、手拍子などによりリズムを取るわけではない。観客は、例えば、ノリのいい曲に対しては、手拍子などでリズムを取る。 <Mixing judgment of the third sound effect (clapping, etc.)>
At the live venue, the audience may take a rhythm by clapping or stepping on the music. However, the audience does not take the rhythm of all the songs played by clapping their hands. The audience takes a rhythm by clapping, for example, for a song with a good feeling.

そこで、本発明の一実施例に係る効果音混合装置１００では、出力制御部１５３出力制御部１５３が、楽曲の特徴量に基づいて、楽曲に第３の効果音（手拍子など）を混合（付与）するのか否かを決定する。このようにすることで、例えば、出力制御部１５３が、楽曲の特徴量に基づき、楽曲がノリのいい曲であるのか否かを判断し、ノリのいい曲のみに、手拍子などの第３の効果音を付与することが可能になり、結果、聴者にとってより自然な効果音を楽曲に付与することが可能になり、聴者に、ライブ会場にいる雰囲気をより味わわせることが可能になる。 Therefore, in the sound effect mixing device 100 according to the embodiment of the present invention, the output control unit 153, the output control unit 153, mixes (adds) a third sound effect (clapping, etc.) to the music based on the feature amount of the music. ) Decide whether or not to do it. By doing so, for example, the output control unit 153 determines whether or not the music is a good music based on the feature amount of the music, and only the good music is clapping or the like. It becomes possible to add sound effects, and as a result, it becomes possible to add sound effects that are more natural for the listener to the music, and it becomes possible for the listener to more enjoy the atmosphere of being in the live venue.

例えば、楽曲特徴量取得部１５１は、楽曲の特徴量として、ＢＰＭなどの単位時間あたりの拍の数を取得するようにすると良い。そして、出力制御部１５３は、この単位時間あたりの拍の数が所定の範囲内にあるのか否かを判断し、単位時間あたりの拍の数が所定の範囲内にないときは、楽曲に第３の効果音を混合しないと決定し、単位時間あたりの拍の数が所定の範囲内にあるときは、楽曲に第３の効果音を混合すると決定するようにすると良い。 For example, the music feature amount acquisition unit 151 may acquire the number of beats per unit time such as BPM as the music feature amount. Then, the output control unit 153 determines whether or not the number of beats per unit time is within the predetermined range, and if the number of beats per unit time is not within the predetermined range, the music is subjected to the first. It is preferable to decide not to mix the third sound effect, and when the number of beats per unit time is within a predetermined range, decide to mix the third sound effect with the music.

また、例えば、楽曲特徴量取得部１５１は、音量（例えば、楽曲における最大音量）と、単位時間あたりの拍の数と、楽曲における和音の変化を示す和音変化パラメータと、に基づいた第１の指標を楽曲の特徴量として取得するようにし、出力制御部１５３は、第１の指標に基づいて、楽曲に第３の効果音を混合するのか否かを決定するようにしても良い。第１の指標は、楽曲がノリのいい曲であるのか否かを判定するための指標であり、例えば、単位時間あたりの拍の数や音量、和音変化パラメータを重み付け加算することなどで得られる。 Further, for example, the music feature amount acquisition unit 151 is the first based on the volume (for example, the maximum volume in the music), the number of beats per unit time, and the chord change parameter indicating the change in the chord in the music. The index may be acquired as the feature amount of the music, and the output control unit 153 may determine whether or not to mix the third sound effect with the music based on the first index. The first index is an index for determining whether or not a song is a good song, and can be obtained, for example, by weighting and adding the number of beats per unit time, the volume, and the chord change parameter. ..

単位時間あたりの拍の数を見ることにより、テンポの速い楽曲であるのか否かを知ることが可能である。テンポが速い楽曲は、リズムを取りたくなるような、ノリのいい曲である可能性が高い。また、音量が大きい楽曲は、観客を圧倒して巻き込む迫力があり、ノリのいい曲である可能性が高い。また、和音の変化が大きい楽曲は、観客を盛り上げる力があり、ノリのいい曲である可能性が高い。和音変化パラメータとしては、単位時間あたりの和音の数や、楽曲における和音の種類数などや、これらのパラメータの重み付け加算することで得られるパラメータなどがある。 By looking at the number of beats per unit time, it is possible to know whether or not the song has a fast tempo. A song with a fast tempo is likely to be a good song that makes you want to take a rhythm. In addition, a song with a loud volume has the power to overwhelm the audience and get involved, and it is highly possible that the song has a good feeling. In addition, a song with a large change in chords has the power to excite the audience, and it is highly possible that the song has a good feeling. The chord change parameters include the number of chords per unit time, the number of types of chords in a musical piece, and parameters obtained by weighting and adding these parameters.

よって、第１の指標を用いることで、楽曲が、テンポが速く、音が大きめで、和音の変化が多い、ノリのいい曲であるのか否かを判断することが可能になる。例えば、テンポが速く、音が大きめで、和音の変化が多い楽曲ほど、第１の指標が小さくなるように、第１の指標を定義した場合は、出力制御部１５３は、楽曲に対して算出された第１の指標が第１の閾値以下である場合に、この楽曲はノリがいい曲であるとして、この楽曲に第３の効果音を混合することを決定し、第１の指標が第１の閾値より大きい場合に、この楽曲はノリがいい曲でないとして、この楽曲に第３の効果音を混合しないことを決定すると良い。このようにすることで、楽曲がノリのいい曲であるときのみに、楽曲に手拍子が付与されることになる。結果、聴者にとってより自然な効果音を楽曲に付与することが可能になり、聴者に、ライブ会場にいる雰囲気をより味わわせることが可能になる。 Therefore, by using the first index, it is possible to determine whether or not the music has a fast tempo, a large sound, a large change in chords, and a good feeling. For example, if the first index is defined so that the first index becomes smaller as the music has a faster tempo, a louder sound, and more changes in chords, the output control unit 153 calculates the music. When the first index is equal to or less than the first threshold value, it is determined that this song is a good song, and a third sound effect is mixed with this song, and the first index is the first. If it is larger than the threshold of 1, it is good to decide not to mix the third sound effect with this music, assuming that this music is not a good music. By doing so, clapping is given to the music only when the music is a good song. As a result, it becomes possible to add sound effects that are more natural for the listener to the music, and it becomes possible for the listener to feel the atmosphere of the live venue more.

また、例えば、楽曲特徴量取得部１５１は、帯域ごとのパワーと、楽曲における和音の明瞭度を示す和音明瞭度パラメータと、に基づいた第２の指標を楽曲の特徴量として取得するようにし、出力制御部１５３は、第２の指標に基づいて、楽曲に第３の効果音を混合するのか否かを決定するようにしても良い。第２の指標は、楽曲がノリのいい曲であるのか否かを判定するための指標であり、例えば、帯域間のパワー比（例えば、低音域と高音域のパワー比）や和音明瞭度パラメータを重み付け加算することなどで得られる。 Further, for example, the music feature amount acquisition unit 151 acquires a second index based on the power for each band and the chord intelligibility parameter indicating the clarity of the chord in the music as the music feature amount. The output control unit 153 may determine whether or not to mix the third sound effect with the music based on the second index. The second index is an index for determining whether or not a song is a good song, for example, a power ratio between bands (for example, a power ratio between bass and treble) and a chord intelligibility parameter. Can be obtained by weighting and adding.

帯域ごとのパワーを見ることにより、低音を発するベースやバスドラムなどのリズムパートが強い楽曲であるのか否かを知ることが可能である。リズムパートが強い楽曲は、リズムを取りたくなるような、ノリのいい曲である可能性が高い。また、和音が明瞭である楽曲は、安らぎや落ち着きを与えるのに対し、和音が明瞭でない楽曲は、騒々しく、リズムが強調される。このため、和音が明瞭でない楽曲は、リズムを取りたくなるような、ノリのいい曲である可能性が高い。和音明瞭度パラメータとしては、例えば、ＷＯ２００９／１０４２６９のハーモニー明瞭度などを用いると良い。このハーモニー明瞭度も楽曲における和音の明瞭度を示す値である。 By looking at the power of each band, it is possible to know whether or not the rhythm part such as the bass or bass drum that emits bass is a strong song. A song with a strong rhythm part is likely to be a good song that makes you want to take the rhythm. In addition, a song with clear chords gives comfort and calm, while a song with unclear chords is noisy and the rhythm is emphasized. For this reason, a song whose chords are not clear is likely to be a song with a good rhythm that makes you want to take a rhythm. As the chord intelligibility parameter, for example, the harmony intelligibility of WO2009 / 104269 may be used. This harmony intelligibility is also a value indicating the intelligibility of chords in a musical piece.

よって、第２の指標を用いることで、楽曲が、リズムパートの強く、和音が明瞭でない、ノリのいい曲であるのか否かを判断することが可能になる。例えば、リズムパートが強く、和音が明瞭でない楽曲ほど、第２の指標が大きくなるように、第２の指標を定義した場合は、出力制御部１５３は、楽曲に対して算出された第２の指標が第２の閾値以上である場合に、この楽曲はノリがいい曲であるとして、この楽曲に第３の効果音を混合することを決定し、第２の指標が第２の閾値未満である場合に、この楽曲はノリがいい曲でないとして、この楽曲に第３の効果音を混合しないことを決定すると良い。このようにすることで、楽曲がノリのいい曲であるときのみに、楽曲に手拍子が付与されることになる。結果、聴者にとってより自然な効果音を楽曲に付与することが可能になり、聴者に、ライブ会場にいる雰囲気をより味わわせることが可能になる。 Therefore, by using the second index, it is possible to determine whether or not the song is a song with a strong rhythm part, unclear chords, and a good feeling. For example, when the second index is defined so that the second index becomes larger as the rhythm part is stronger and the chord is not clear, the output control unit 153 calculates the second index for the music. If the index is greater than or equal to the second threshold, it is determined that this song is a good song and a third sound effect is mixed with this song, and the second index is less than the second threshold. In some cases, it is good to decide not to mix the third sound effect with this song, assuming that this song is not a good song. By doing so, clapping is given to the music only when the music is a good song. As a result, it becomes possible to add sound effects that are more natural for the listener to the music, and it becomes possible for the listener to feel the atmosphere of the live venue more.

なお、上記では、楽曲の特徴量に基づいて楽曲に混合されるのか否かを決定される効果音は、第３の効果音（手拍子）であるが、上記の混合されるのか否かを決定される効果音は、第１の効果音（歓声、拍手など）や第２の効果音（環境音）であっても良い。つまり、楽曲の始まりや終わりの部分に第１の効果音に付与するのか否かや、楽曲の生成中に第２の効果音を付与するのか否かを、楽曲の特徴量に基づいて決定するようにしても良い。 In the above, the sound effect for which it is determined whether or not to be mixed with the music based on the feature amount of the music is the third sound effect (clapping), but it is determined whether or not it is mixed as described above. The sound effect to be played may be a first sound effect (cheers, applause, etc.) or a second sound effect (environmental sound). That is, it is determined based on the feature amount of the music whether or not the first sound effect is given to the beginning and the end of the music and whether or not the second sound effect is given during the generation of the music. You may do so.

図１１は、本実施例に係る効果音混合装置１００における処理動作の一例を示す図である。出力制御部１５３は、第１の条件「楽曲のＢＰＭが所定の範囲内にある」、第２の条件「第１の指標が第１の閾値以下である」、第３の条件「第２の指標が第２の閾値以上である」の３つの条件のすべてを満たしているのか否かを確認し（ステップＳ１１０１）、３つの条件のすべてを満たしているときは（ステップＳ１１０１、ＹＥＳ）、出力制御部１５３は、楽曲に第３の効果音を混合すると決定し、効果音出力部１３０により、第３の効果音を出力する（ステップＳ１１０２）。３つの条件のすべてを満たしていないときは（ステップＳ１１０１、ＮＯ）、出力制御部１５３は、楽曲に第３の効果音を混合しないと決定する（ステップＳ１１０３）。 FIG. 11 is a diagram showing an example of a processing operation in the sound effect mixing device 100 according to the present embodiment. The output control unit 153 has the first condition "the BPM of the music is within a predetermined range", the second condition "the first index is equal to or less than the first threshold value", and the third condition "the second". It is confirmed whether or not all three conditions of "the index is equal to or higher than the second threshold value" are satisfied (step S1101), and when all three conditions are satisfied (step S1101, YES), the output is output. The control unit 153 determines that the third sound effect is mixed with the music, and the sound effect output unit 130 outputs the third sound effect (step S1102). When all three conditions are not satisfied (step S1101, NO), the output control unit 153 determines that the third sound effect is not mixed with the music (step S1103).

＜第３の効果音（手拍子）の出力＞
ライブ会場において、観客は、楽曲の拍に位置に合わせて、手拍子を行おうとするが、通常、観客による手拍子が拍の位置にぴったりと合わないことが多々ある。そのため、正確に拍の位置に鳴るように、手拍子の音を出力した場合、聴者は、楽曲に混合された手拍子を、機械的で、不自然な手拍子であると感じてしまう。 <Output of the third sound effect (clapping)>
In a live venue, the audience tries to clapping their hands according to the position of the beat of the music, but usually, the clapping by the audience does not exactly match the position of the beat. Therefore, when the sound of the hand clapping is output so as to sound at the exact position of the beat, the listener feels that the hand clapping mixed in the music is a mechanical and unnatural hand clapping.

そこで、本発明の一実施例に係る効果音混合装置１００では、例えば、図１２に示すように、出力制御部１５３は、楽曲特徴量取得部１５１により取得された楽曲の拍の位置Ｂｐから第１の時間ｔ１経過後に、効果音出力部１２０により、第３の効果音（手拍子など）を出力する。このため、本実施例では、手拍子が拍の位置にぴったりと合うことがない。結果、聴者にとってより自然な効果音を楽曲に付与することが可能になり、聴者に、ライブ会場にいる雰囲気をより味わわせることが可能になる。 Therefore, in the sound effect mixing device 100 according to the embodiment of the present invention, for example, as shown in FIG. 12, the output control unit 153 is the first from the position Bp of the beat of the music acquired by the music feature amount acquisition unit 151. After the lapse of time t1 of 1, the sound effect output unit 120 outputs a third sound effect (clapping, etc.). Therefore, in this embodiment, the clapping does not exactly match the position of the beat. As a result, it becomes possible to add sound effects that are more natural for the listener to the music, and it becomes possible for the listener to feel the atmosphere of the live venue more.

第１の時間ｔ１は、一定でなく、ランダムに選択されるようにしても良い。このようにすることで、拍の位置から手拍子の発生までのずれが、ランダムになり、結果、聴者にとってより自然な効果音を楽曲に付与することが可能になり、聴者に、ライブ会場にいる雰囲気をより味わわせることが可能になる。 The first time t1 is not constant and may be randomly selected. By doing so, the deviation from the position of the beat to the occurrence of the clapping becomes random, and as a result, it becomes possible to give the music a sound effect that is more natural for the listener, and the listener is at the live venue. It becomes possible to taste the atmosphere more.

また、本発明の一実施例に係る効果音混合装置１００では、第３の効果音用の複数種類の音源データを用意しておき、拍に位置から第１の時間経過後に、複数種類の音源データからランダムに選択された音源データを出力する。つまり、本実施例では、記憶部１１０は、第３の効果音用の複数種類の音源データを記憶しており、出力制御部１５３は、楽曲特徴量取得部１５１により取得された楽曲の拍の位置から第１の時間経過後に、効果音出力部１２０により、複数種類の音源データからランダムに選択された音源データを、第３の効果音として出力する。このため、本実施例では、混合される手拍子が単調でなくなり、結果、聴者にとってより自然な効果音を楽曲に付与することが可能になり、聴者に、ライブ会場にいる雰囲気をより味わわせることが可能になる。 Further, in the sound effect mixing device 100 according to the embodiment of the present invention, a plurality of types of sound source data for the third sound effect are prepared, and a plurality of types of sound sources are prepared after the first time elapses from the position on the beat. Outputs sound source data randomly selected from the data. That is, in this embodiment, the storage unit 110 stores a plurality of types of sound source data for the third sound effect, and the output control unit 153 stores the beats of the music acquired by the music feature amount acquisition unit 151. After the first time elapses from the position, the sound effect output unit 120 outputs sound source data randomly selected from a plurality of types of sound source data as a third sound effect. Therefore, in this embodiment, the mixed clapping is not monotonous, and as a result, it is possible to give the music a sound effect that is more natural for the listener, and the listener can feel the atmosphere of the live venue more. Becomes possible.

複数種類の音源データの各々を、複数の人の手拍手を録音した場合、複数の人の拍手が常にぴったりと揃うことはない。このため、録音するごとに、複数の人の間での手拍子のずれが変化する。よって、このような場合は、出力制御部１５３は、図１３に示すように、楽曲の拍の位置Ｂｐに、効果音出力部１２０により、複数種類の音源データからランダムに選択された音源データを、第３の効果音として出力するようにしても良い。このようにすることでも、すべての手拍子が拍の位置にぴったりに合うことがなく、結果、聴者にとってより自然な効果音を楽曲に付与することが可能になり、聴者に、ライブ会場にいる雰囲気をより味わわせることが可能になる。 When the clappings of a plurality of people are recorded for each of the plurality of types of sound source data, the clappings of the plurality of people are not always exactly aligned. Therefore, each time a recording is made, the difference in clapping between a plurality of people changes. Therefore, in such a case, as shown in FIG. 13, the output control unit 153 sets the sound source data randomly selected from a plurality of types of sound source data by the sound effect output unit 120 at the beat position Bp of the music. , It may be output as a third sound effect. By doing this, not all clapping will fit the beat position exactly, and as a result, it will be possible to give the music a sound effect that is more natural for the listener, giving the listener the atmosphere of being in a live venue. It becomes possible to taste more.

第３の効果音は、楽曲の始まりから終わりまで付与されるようにしても良いし、図１３に示すように、楽曲の一部期間だけ付与されるようにしても良い。例えば、第３の効果音の出力を開始するタイミングは、楽曲の出力開始からの時間および楽曲の音量に基づいて決定されるようにすると良い。例えば、出力制御部１５３は、楽曲の出力開始から第２の時間ｔ２経過後に楽曲の音量が第３の音量値以上になった時以降、楽曲の拍の位置（または楽曲の拍の位置から第１の時間経過後）に、第３の効果音の出力の開始をするようにすると良い。このようにすることで、観客が楽曲にノリ始めるようなタイミングで手拍子の付与を開始することが可能になり、結果、聴者にとってより自然な効果音を楽曲に付与することが可能になり、聴者に、ライブ会場にいる雰囲気をより味わわせることが可能になる。なお、楽曲の出力開始から第２の時間ｔ２経過する前に、楽曲の音量が第３の音量値以上になったときは、出力制御部１５３は、楽曲の出力開始から第２の時間ｔ２経過したときに、第３の効果音を出力の開始をするようにしても良い。 The third sound effect may be given from the beginning to the end of the music, or may be given only for a part of the period of the music as shown in FIG. For example, the timing for starting the output of the third sound effect may be determined based on the time from the start of the output of the music and the volume of the music. For example, the output control unit 153 determines the position of the beat of the music (or the position of the beat of the music) after the time when the volume of the music becomes equal to or higher than the third volume value after the lapse of the second time t2 from the start of output of the music. It is preferable to start the output of the third sound effect after the lapse of one time). By doing so, it becomes possible to start giving clapping at the timing when the audience starts to feel the music, and as a result, it becomes possible to give the music a sound effect that is more natural for the listener, and the listener. In addition, it will be possible to enjoy the atmosphere of the live venue. If the volume of the music becomes equal to or higher than the third volume value before the second time t2 elapses from the start of the output of the music, the output control unit 153 elapses the second time t2 from the start of the output of the music. At that time, the output of the third sound effect may be started.

また、例えば、第３の効果音の出力を終了するタイミングは、楽曲のサビが始まる位置などの楽曲のパートが切り替わる位置および楽曲の音量に基づいて決定されるようにすると良い。例えば、楽曲特徴量取得部１５１により、楽曲のパートが切り替わる位置を取得するようにし、出力制御部１５３は、取得した楽曲のパートが切り替わる位置から第３の時間経過後に、第３の効果音の出力を止めるようにすると良い。このようにすることで、例えば、観客が楽曲にサビに聴き入るようなタイミングで手拍子の付与を終了することが可能になり、結果、聴者にとってより自然な効果音を楽曲に付与することが可能になり、聴者に、ライブ会場にいる雰囲気をより味わわせることが可能になる。第３の効果音の出力は、第３の効果音の出力が開始されてから第４の時間経過した後に終了するようにしても良い。 Further, for example, the timing for ending the output of the third sound effect may be determined based on the position where the part of the music is switched, such as the position where the chorus of the music starts, and the volume of the music. For example, the music feature amount acquisition unit 151 acquires the position where the music part is switched, and the output control unit 153 of the third sound effect after a third time elapses from the position where the acquired music part is switched. It is good to stop the output. By doing so, for example, it becomes possible to finish giving the hand clapping at the timing when the audience listens to the chorus in the music, and as a result, it becomes possible to give the music a more natural sound effect for the listener. This makes it possible for listeners to experience the atmosphere of being in a live venue. The output of the third sound effect may be terminated after a fourth time has elapsed from the start of the output of the third sound effect.

また、第３の効果音の出力を開始するときは、時間をかけ、第３の効果音の出力レベルをゼロから漸増するように、つまり、フェイドインするようにすると良い。また、第３の効果音の出力を終了するときは、第３の効果音の出力が終了する前の第３の時間の間、第３の効果音の出力レベルをゼロまで漸減する、つまり、フェイドアウトするようにすると良い。このようにすることで、聴者に、一部の観客の手拍子が会場全体に広がっていく雰囲気や、観客による手拍子が徐々に減っていく雰囲気を味わわせることが可能になり、結果、聴者にとってより自然な効果音を楽曲に付与することが可能になり、聴者に、ライブ会場にいる雰囲気をより味わわせることが可能になる。 Further, when starting the output of the third sound effect, it is preferable to take time to gradually increase the output level of the third sound effect from zero, that is, to fade in. When the output of the third sound effect is finished, the output level of the third sound effect is gradually reduced to zero during the third time before the output of the third sound effect is finished, that is, It's a good idea to fade out. By doing so, it becomes possible for the listener to experience an atmosphere in which the clapping of some spectators spreads throughout the venue and an atmosphere in which the clapping of the spectators gradually decreases, and as a result, the listener is more likely to experience it. It is possible to add natural sound effects to the music, and it is possible to give the listener a more enjoyable atmosphere of being in the live venue.

第３の効果音は、図１３に示すように、楽曲の拍の位置ごとに出力されるようにしても良いし、楽曲の拍の位置の一部に出力されるようにしても良い。例えば、ライブ会場において、観客は、ノリのいい曲に対して、いわゆる裏打ちをする。つまり、観客は、４分の４拍子で曲であれば、各小節において２拍目の位置と４拍目の位置に手拍子を入れる。そこで、楽曲が４分の４拍子である場合は、小節ごとに、２拍目の位置と４拍目の位置に、第３の効果音が出力されるようにしても良い。また、パターン化した手拍子を入れるようにしても良い。 As shown in FIG. 13, the third sound effect may be output at each beat position of the music, or may be output at a part of the beat position of the music. For example, at a live venue, the audience backs up a good song. That is, if the song is a song with a four-quarter time signature, the audience clapping at the position of the second beat and the position of the fourth beat in each measure. Therefore, when the music has a four-quarter time signature, the third sound effect may be output at the position of the second beat and the position of the fourth beat for each bar. In addition, a patterned clapping may be inserted.

図１４は、本実施例に係る効果音混合装置１００における処理動作の一例を示す図である。楽曲が開始してから第２の時間が経過し（ステップＳ１４０１、ＹＥＳ）、楽曲の音量が第３の音量値以上であるならば（ステップＳ１４０２、ＹＥＳ）、楽曲の拍の位置への第３の効果音の出力を開始する（ステップＳ１４０３）。楽曲のサビの始まりの位置から第３の時間が経過した時（ステップＳ１４０４、ＹＥＳ）、第３の効果音の出力を終了する（ステップＳ１４０５）。 FIG. 14 is a diagram showing an example of a processing operation in the sound effect mixing device 100 according to the present embodiment. If the second time elapses from the start of the music (step S1401, YES) and the volume of the music is equal to or higher than the third volume value (step S1402, YES), the third to the beat position of the music. The output of the sound effect of (step S1403) is started. When the third time elapses from the start position of the chorus of the music (step S1404, YES), the output of the third sound effect ends (step S1405).

以上、本発明の好適な実施の形態により本発明を説明した。ここでは特定の具体例を示して本発明を説明したが、特許請求の範囲に記載した本発明の趣旨および範囲から逸脱することなく、これら具体例に様々な修正および変更が可能である。 The present invention has been described above according to a preferred embodiment of the present invention. Although the present invention has been described here with reference to specific examples, various modifications and changes can be made to these specific examples without departing from the spirit and scope of the present invention described in the claims.

１００ 効果音混合装置
１１０ 記憶部
１２０ 楽曲出力部
１３０ 効果音出力部
１４０ 混合部
１５０ 制御部
１５１ 音楽特徴量取得部
１５２ モード選択部
１５３ 出力制御部 100 Sound effect mixing device 110 Storage unit 120 Music output unit 130 Sound effect output unit 140 Mixing unit 150 Control unit 151 Music feature amount acquisition unit 152 Mode selection unit 153 Output control unit

Claims (10)

拍の位置を含む楽曲の特徴量を取得する楽曲特徴量取得部と、
前記検出された拍の位置から第１の時間経過後に、効果音を出力する効果音出力部と、を有する効果音出力装置。 A music feature acquisition unit that acquires music features including beat positions,
A sound effect output device including a sound effect output unit that outputs a sound effect after the lapse of a first time from the position of the detected beat. 前記第１の時間は、ランダムに決定される、請求項１に記載 The first time is determined at random, according to claim 1. 前記効果音出力部は、前記効果音用の複数種類の音源データからランダムに選択された音源データを、前記効果音として出力する、請求項１または２に記載の効果音出力装置。 The sound effect output device according to claim 1 or 2, wherein the sound effect output unit outputs sound source data randomly selected from a plurality of types of sound source data for the sound effect as the sound effect. 拍の位置を含む楽曲の特徴量を取得する楽曲特徴量取得部と、
前記検出された拍に位置に、効果音用の複数種類の音源データからランダムに選択された音源データを出力する効果音出力部と、を有する効果音出力装置。 A music feature acquisition unit that acquires music features including beat positions,
A sound effect output device having a sound effect output unit that outputs sound source data randomly selected from a plurality of types of sound source data for sound effects at a position at the detected beat. 前記効果音の出力を開始するタイミングは、前記楽曲の出力開始からの時間および前記楽曲の音量に基づいて決定される、請求項１から４のいずれかに記載の効果音出力装置。 The sound effect output device according to any one of claims 1 to 4, wherein the timing for starting the output of the sound effect is determined based on the time from the start of the output of the music and the volume of the music. 前記特徴量は、前記楽曲のパートが切り替わる位置を含み、
前記効果音の出力を終了するタイミングは、前記楽曲のパートが切り替わる位置に基づいて決定される、請求項１から５のいずれか一項に記載の効果音出力装置。 The feature amount includes a position where a part of the music is switched.
The sound effect output device according to any one of claims 1 to 5, wherein the timing for ending the output of the sound effect is determined based on the position where the parts of the music are switched. 拍の位置を含む楽曲の特徴量を取得する楽曲特徴量取得工程と、
前記検出された拍の位置から第１の時間経過後に、効果音を出力する効果音出力工程と、を有する効果音出力方法。 A music feature acquisition process for acquiring music features including beat positions, and
A sound effect output method comprising a sound effect output step of outputting a sound effect after a lapse of a first time from the position of the detected beat. 拍の位置を含む楽曲の特徴量を取得する楽曲特徴量取得工程と、
前記検出された拍に位置に、効果音用の複数種類の音源データからランダムに選択された音源データを出力する効果音出力工程と、を有する効果音出力方法。 A music feature acquisition process for acquiring music features including beat positions, and
A sound effect output method comprising a sound effect output step of outputting sound source data randomly selected from a plurality of types of sound source data for sound effects at a position at the detected beat. 請求項７または８に記載の効果音出力方法を、コンピュータに実行させる効果音出力プログラム。 A sound effect output program that causes a computer to execute the sound effect output method according to claim 7 or 8. 請求項９に記載の効果音出力プログラムを記憶しているコンピュータ読み取り可能な記憶媒体。 A computer-readable storage medium that stores the sound effect output program according to claim 9.
JP2020063928A 2020-03-31 2020-03-31 Sound effect outputting device Pending JP2021162711A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2020063928A JP2021162711A (en) 2020-03-31 2020-03-31 Sound effect outputting device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2020063928A JP2021162711A (en) 2020-03-31 2020-03-31 Sound effect outputting device

Publications (1)

Publication Number Publication Date
JP2021162711A true JP2021162711A (en) 2021-10-11

Family

ID=78003293

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020063928A Pending JP2021162711A (en) 2020-03-31 2020-03-31 Sound effect outputting device

Country Status (1)

Country Link
JP (1) JP2021162711A (en)

Similar Documents

Publication Publication Date Title
US10790919B1 (en) Personalized real-time audio generation based on user physiological response
JP5318095B2 (en) System and method for automatically beat-mixing a plurality of songs using an electronic device
JP5135931B2 (en) Music processing apparatus and program
JPH0990965A (en) Karaoke sing-alone machine
d'Escrivan Music technology
White Basic mixing techniques
JP2021162708A (en) Sound effect output device
JP2021162707A (en) Sound effect output device
JP2021162711A (en) Sound effect outputting device
JP7367835B2 (en) Recording/playback device, control method and control program for the recording/playback device, and electronic musical instrument
JP2021162710A (en) Sound effect mixing device
JP2021162709A (en) Sound effect output device
Skea Rudy Van Gelder in Hackensack: Defining the jazz sound in the 1950s
WO2023054236A1 (en) Audio output device
WO2023054237A1 (en) Sound effect output device
Cliff hpDJ: An automated DJ with floorshow feedback
JP4107212B2 (en) Music playback device
JP2013046661A (en) Music switching device in game machine
Miller Mixing music
JP2010015053A (en) Musical piece playback device
JP2023050570A (en) Effect sound mixing device
Canfer Music Technology in Live Performance: Tools, Techniques, and Interaction
WO2022249402A1 (en) Acoustic device, music track reproduction method, and program
JP4303485B2 (en) Music composition system, music composition system control method, program, and music composition method
WO2022230170A1 (en) Acoustic device, acoustic device control method, and program