JP2011107445A

JP2011107445A - Performance device

Info

Publication number: JP2011107445A
Application number: JP2009262776A
Authority: JP
Inventors: Yasushi Kamiya; 泰史神谷; Yoshihiro Katsumata; 良宏勝又; Kiyohisa Sugii; 清久杉井; Coolbaugh Toma; クールボートマ
Original assignee: Yamaha Corp
Current assignee: Yamaha Corp
Priority date: 2009-11-18
Filing date: 2009-11-18
Publication date: 2011-06-02

Abstract

<P>PROBLEM TO BE SOLVED: To provide a performance device capable of displaying an image related to performance operation, at a comparatively low cost and in a simple configuration. <P>SOLUTION: A drum device 1 includes a drum pad in which a beat face for receiving beating operation functions as a screen. An image is displayed on the beat face by projecting the image relative to the beating operation from the rear face side of the drum pad, by a projector 4 arranged at the rear face side of the drum pad, and when the beating operation to the beat face is detected, sound corresponding to the position of the beat face on which the beating operation is performed is emitted by a sound source 14. <P>COPYRIGHT: (C)2011,JPO&INPIT

Description

本発明は、打撃動作によって発音する演奏装置に関する。 The present invention relates to a performance device that produces sound by a striking motion.

楽器の演奏を教示する種々の技術が提案されている。例えば、ピアノを演奏する際の指の位置等を教示するものとして、電子ピアノの鍵盤全体に薄膜蒸着構造の有機ＥＬ(electroluminescence)ディスプレイを粘着し、模範的な手の位置をディスプレイに表示させる技術が下記特許文献１に開示されている。また、ドラム演奏の仕方を教示するものとして、ドラムセットを演奏する際に用いる手足の動きを示す演奏部位画像を別の表示装置に表示する技術が下記特許文献２に開示されている。 Various techniques for teaching the performance of musical instruments have been proposed. For example, to teach the position of fingers when playing a piano, etc., a technology that attaches an organic EL (electroluminescence) display with a thin film deposition structure to the entire keyboard of an electronic piano and displays the position of an exemplary hand on the display Is disclosed in Patent Document 1 below. Further, as a technique for teaching how to play a drum, a technique for displaying a performance part image showing movements of limbs used when playing a drum set on another display device is disclosed in Patent Document 2 below.

特開２００６-１０６０９５号公報JP 2006-106095 A 特開２００２-１１６６８６号公報Japanese Patent Laid-Open No. 2002-116686

上記特許文献１の技術の場合、ピアノ専用の押鍵に耐え得る薄膜蒸着構造の有機ＥＬディスプレイが必要であり、有機ＥＬディスプレイをピアノに実装すると高価なものとなるため、事実上実装は困難である。また、特許文献２の技術の場合には、ドラムセットとは別に表示装置が設けられるため、演奏者はドラムセットと表示装置の両方を見なければならない。
本発明は、簡易な構成で比較的低廉に、演奏動作に関連した画像を表示しうる演奏装置を提供する。 In the case of the technique disclosed in Patent Document 1, an organic EL display having a thin film deposition structure that can withstand piano key presses is necessary, and it is expensive to mount an organic EL display on a piano. is there. In the case of the technique of Patent Document 2, since a display device is provided separately from the drum set, the performer must watch both the drum set and the display device.
The present invention provides a performance device capable of displaying an image related to a performance operation with a simple configuration and at a relatively low cost.

本発明に係る演奏装置は、表面からの打撃を受けて振動する打撃面を有し、前記打撃面の裏面から投影される画像を前記打撃面に表示する打撃面部と、前記打撃面に対する打撃動作を検出する打撃動作検出手段と、前記打撃動作検出手段の検出結果に応じた音を発音する発音手段と、前記打撃面の裏面側に配置され、前記打撃面に前記打撃動作に関する画像を投射する表示手段とを備えることを特徴とする。 The performance device according to the present invention has a striking surface that vibrates in response to a striking from the front surface, a striking surface portion that displays an image projected from the back surface of the striking surface on the striking surface, and a striking operation on the striking surface A striking motion detecting means for detecting the sound, a sound generating means for generating a sound corresponding to the detection result of the striking motion detecting means, and a rear surface side of the striking surface, and projecting an image relating to the striking motion on the striking surface And a display means.

本発明によれば、打撃面の裏面側から画像を投射するという簡易な構成で打撃面に画像を表示することができるので、演奏者は、打撃面に表示される打撃動作に関する画像を見ながら演奏操作を行うことができる。 According to the present invention, an image can be displayed on the striking surface with a simple configuration in which an image is projected from the back surface side of the striking surface, so that the player can view the image related to the striking motion displayed on the striking surface. Performing operations can be performed.

また、前記演奏装置の構成において、前記打撃動作検出手段は、検出した打撃動作に基づいて前記打撃面における打撃位置を特定し、前記発音手段は、前記打撃動作検出手段により特定された前記打撃位置に応じた音を発音し、前記表示手段は、予め定められたタイミングで出力すべき音に対応する、前記打撃面における打撃位置を指示する打撃位置指示画像を投射することとしてもよい。この構成によれば、演奏者は、打撃すべきタイミングで打撃面に表示された打撃位置指示画像を視認することができるので演奏操作を容易に行うことができる。 Further, in the configuration of the playing device, the hitting motion detection means specifies a hitting position on the hitting surface based on the detected hitting action, and the sounding means is the hitting position specified by the hitting action detecting means. The display means may project a striking position indication image that indicates a striking position on the striking surface corresponding to a sound to be output at a predetermined timing. According to this configuration, the performer can easily perform the performance operation because the player can visually recognize the batting position instruction image displayed on the batting surface at the timing when the batting should be performed.

また、前記演奏装置の構成において、楽曲データを再生する再生手段を備え、前記表示手段は、前記再生手段により再生される前記楽曲データの進行に応じて定められた前記タイミングで前記打撃位置指示画像を前記打撃面に投射することとしてもよい。この構成によれば、楽曲の進行に応じて打撃面に表示される打撃位置指示画像により、演奏者は、楽曲において演奏すべきタイミングで打撃操作を行うことができる。 Further, in the configuration of the performance device, the playing device further includes a reproducing unit that reproduces the music data, and the display unit displays the hitting position instruction image at the timing determined according to the progress of the music data reproduced by the reproducing unit. May be projected onto the striking surface. According to this configuration, the performer can perform a batting operation at a timing at which the music should be played by the batting position instruction image displayed on the batting surface according to the progress of the music.

また、前記演奏装置の構成において、前記表示手段は、前記再生手段により再生される前記楽曲データの進行に対応する前記楽曲データの楽譜を示す楽譜画像と共に、当該楽譜において打撃すべき音を指示する画像を投射することとしてもよい。この構成によれば、演奏者は、楽曲の進行に合わせて打撃面に表示される楽譜を確認しながら打撃操作を行うことができる。 Further, in the configuration of the performance device, the display means instructs a sound to be hit in the score together with a score image indicating the score of the music data corresponding to the progress of the music data played by the playback means. An image may be projected. According to this configuration, the performer can perform a striking operation while confirming the score displayed on the striking surface as the music progresses.

また、前記演奏装置の構成において、前記打撃動作検出手段は、検出した打撃動作に基づいて前記打撃面における打撃位置を特定し、前記表示手段は、前記打撃位置に応じて予め定められた画像を前記打撃面に投射することとしてもよい。この構成によれば、演奏者は、打撃した位置に応じた画像を打撃面に表示させることができる。 Further, in the configuration of the performance device, the hitting motion detection means specifies a hitting position on the hitting surface based on the detected hitting action, and the display means displays an image predetermined according to the hitting position. It is good also as projecting on the said striking surface. According to this configuration, the performer can display an image corresponding to the hit position on the hitting surface.

実施形態に係るドラム装置の外観図である。1 is an external view of a drum device according to an embodiment. 実施形態に係るドラム装置のブロック図である。It is a block diagram of a drum device concerning an embodiment. (ａ)は、実施形態に係るドラム装置のドラムパッドを示す図である。(ｂ)は、実施形態における打撃領域特定テーブルの構成及びデータ例を示す図である。(a) is a figure which shows the drum pad of the drum apparatus which concerns on embodiment. (b) is a figure which shows the structure and data example of a hit | damage area | region specific table in embodiment. 実施形態における楽曲データの構成及びデータ例を示す図である。It is a figure which shows the structure and data example of the music data in embodiment. 実施形態における音色特定テーブルの構成及びデータ例を示す図である。It is a figure which shows the structure and data example of a timbre specific table in embodiment. (ａ)は、実施形態におけるＣ領域の打撃を指示する場合の打撃位置指示画像の一例を示す図である。(ｂ)は、実施形態におけるＯ領域の打撃を指示する場合の打撃位置指示画像の一例を示す図である。(a) is a figure showing an example of an impact position directions image in the case of directing an impact of C field in an embodiment. (b) is a figure showing an example of a striking position instruction image when instructing striking of the O region in the embodiment. （ａ）は、実施形態における打撃位置指示画像表示処理の動作フロー図である。(ｂ)は、実施形態における打撃時の発音処理の動作フロー図である。(A) is an operation | movement flowchart of the striking position instruction | indication image display process in embodiment. FIG. 6B is an operation flowchart of sound generation processing at the time of hitting in the embodiment. 変形例１における楽譜画像の一例を示す図である。It is a figure which shows an example of the score image in the modification 1. (ａ)は、変形例２に係るドラム装置のドラムパッドの打撃領域を説明する図である。（ｂ）は、変形例２の領域Ａ１の打撃を指示する場合の打撃位置指示画像と楽譜画像の一例を示す図である。(ｃ)は、変形例２の領域Ａ２の打撃を指示する場合の打撃位置指示画像と楽譜画像の一例を示す図である。(a) is a figure explaining the hit | damage area | region of the drum pad of the drum apparatus which concerns on the modification 2. FIG. (B) is a figure which shows an example of the striking position instruction | indication image in the case of instruct | indicating the striking of area | region A1 of the modification 2, and a score image. (c) is a figure which shows an example of the striking position instruction | indication image in the case of instruct | indicating the striking of area | region A2 of the modification 2, and a score image.

＜外観＞
本発明の実施形態に係る演奏装置は、図１に示すドラム装置１である。図１に示すように、ドラム装置１は円筒形状のパッド体２とパッド体２を軸支する脚部３とで構成されている。パッド体２は、光を透過する例えば乳白色のプラスチックやゴム素材等で構成された円盤状のドラムパッド２ａと、上面部が開口された円筒状の胴部(リム)２ｂとで構成されており、胴部２ｂの上面部にドラムパッド２ａが固着されて形成されている。また、パッド体２の内部には、ドラムパッド２ａの裏面側から画像を投影するプロジェクタ４が設けられており、ドラムパッド２ａの打撃面は、裏面側から投影された画像を表示するスクリーンとして機能するよう構成されている。 <Appearance>
The performance device according to the embodiment of the present invention is the drum device 1 shown in FIG. As shown in FIG. 1, the drum device 1 includes a cylindrical pad body 2 and leg portions 3 that pivotally support the pad body 2. The pad body 2 is composed of a disk-like drum pad 2a made of, for example, milky white plastic or rubber material that transmits light, and a cylindrical body (rim) 2b having an upper surface opened. The drum pad 2a is fixed to the upper surface of the body 2b. Further, a projector 4 that projects an image from the back side of the drum pad 2a is provided inside the pad body 2, and the striking surface of the drum pad 2a functions as a screen that displays the image projected from the back side. It is configured to

また、ドラムパッド２ａの打撃面は破線枠内の打撃領域(以下、Ｃ領域)と破線枠外の打撃領域(以下、Ｏ領域)とが設定されている。本実施形態では、ドラム装置１は、例えばスネアドラム等の単体のドラム音を発音するものである。ドラムパッド２ａのＣ領域は、アコースティックのスネアドラムのドラムヘッド中心を叩いた場合の音を発音する領域であり、Ｏ領域はドラムヘッドの端を叩いた場合の音を発音する領域として予め設定され、ドラム装置１は、演奏者によってスティック等で打撃された打撃領域に応じた音を発音する。本実施形態では、楽曲の再生に合わせて、ドラムパッド２ａを打撃すべき打撃位置、即ち、打撃領域を演奏者に指示する打撃位置指示画像を打撃面に表示することで、演奏者のドラム演奏を補助する。以下、ドラム装置１の詳細について説明する。 Further, the striking surface of the drum pad 2a is set with a striking area within the broken line frame (hereinafter referred to as C area) and a striking area outside the broken line frame (hereinafter referred to as O area). In the present embodiment, the drum device 1 generates a single drum sound such as a snare drum. The C area of the drum pad 2a is an area that produces a sound when the drum head center of the acoustic snare drum is hit, and the O area is preset as an area that produces a sound when the end of the drum head is hit. The drum device 1 generates a sound corresponding to the hit area hit by the player with a stick or the like. In the present embodiment, the player performs the drum performance by displaying on the striking surface a striking position indicating image for instructing the player of the striking position, that is, the striking area, in accordance with the reproduction of the music. To assist. Details of the drum device 1 will be described below.

＜構成＞
図２は、ドラム装置１の構成を示すブロック図を示している。ＣＰＵ(Central Processing Unit)１１は、ＲＯＭ(Read Only Memory)１２に記憶されている制御プログラムをＲＡＭ(Random Access Memory)１３をワークエリアとして実行することによりＣＰＵ１１と接続されている各部を制御する機能を有する。具体的には、ＣＰＵ１１は、ドラムパッド２ａが打撃された際に打撃領域に対応する音色を発音する処理を行うと共に、楽曲を再生して楽曲の進行に合わせて打撃すべき打撃領域を指示する打撃位置指示画像をドラムパッド２ａの打撃面に表示する処理を行う。なお、ＲＯＭ１２には、後述するドラムパッド２ａに対する打撃領域を特定するための打撃領域特定テーブルが記憶されている。 <Configuration>
FIG. 2 is a block diagram showing the configuration of the drum device 1. A CPU (Central Processing Unit) 11 functions to control each unit connected to the CPU 11 by executing a control program stored in a ROM (Read Only Memory) 12 using a RAM (Random Access Memory) 13 as a work area. Have Specifically, the CPU 11 performs a process of generating a timbre corresponding to the hit area when the drum pad 2a is hit, and also reproduces the music and instructs the hit area to be hit according to the progress of the music. A process of displaying the striking position instruction image on the striking surface of the drum pad 2a is performed. The ROM 12 stores a hitting area specifying table for specifying a hitting area for the drum pad 2a described later.

音源１４は、ドラムパッド２ａの打撃領域に応じたドラムの音色の波形データや、ドラム以外の音色の波形データを記憶し、ＣＰＵ１１の制御の下、指示された打撃領域(Ｃ領域及びＯ領域)に対応する音色の楽音信号を生成したり、指示された楽曲の演奏データに対応する楽音信号を生成してアンプ１５に出力する。 The sound source 14 stores drum tone color data corresponding to the hit area of the drum pad 2a and tone data other than the drum tone data, and under the control of the CPU 11, the indicated hit area (C area and O area). A tone signal corresponding to the tone is generated, or a tone signal corresponding to the performance data of the designated music is generated and output to the amplifier 15.

ここで、本実施形態における打撃位置を含む打撃領域の特定について説明する。図３(ａ)は、ドラム装置１のドラムパッド２ａ部分を裏面から見た図である。図３(ａ)に示すように、ドラムパッド２ａの裏面には、ドラムパッド２ａの打撃面が打撃されたときの振動を検出するピエゾ型の圧電センサ(Ｓ０、Ｓ１、Ｓ２、Ｓ３、Ｓ４)が接着されている。この例では、Ｃ領域には圧電センサＳ０、Ｏ領域には圧電センサＳ１〜Ｓ４が設けられており、各圧電センサには、ドラムパッド２ａ上をＸＹ平面とする座標が各々設定されている。
各圧電センサから出力される検出信号の波形は、圧電センサと打撃位置との距離が近いほど他の圧電センサより早いタイミングで極大値をとる。本実施形態では、圧電センサからの検出信号により打撃動作を検出する。即ち、一定の閾値以上の検出信号が出力された場合にドラムパッド２ａに対して打撃動作されたものとし、Ｃ領域の圧電センサＳ０からの検出信号の波形が最初に極大値をとる場合には、演奏者によって打撃された打撃領域としてＣ領域を特定する。また、Ｏ領域に設けられた圧電センサからの検出信号が圧電センサＳ０からの検出信号より早いタイミングで極大値をとる場合には、ＲＯＭ１２に記憶されている打撃領域特定テーブルに基づいて打撃領域を特定する。 Here, the identification of the hit area including the hit position in the present embodiment will be described. FIG. 3A is a view of the drum pad 2a portion of the drum device 1 as seen from the back side. As shown in FIG. 3 (a), a piezoelectric piezoelectric sensor (S0, S1, S2, S3, S4) that detects vibration when the striking surface of the drum pad 2a is struck on the back surface of the drum pad 2a. Is glued. In this example, the piezoelectric sensor S0 is provided in the C region, and the piezoelectric sensors S1 to S4 are provided in the O region, and each piezoelectric sensor is set with coordinates having the XY plane on the drum pad 2a.
The waveform of the detection signal output from each piezoelectric sensor takes a maximum value at a timing earlier than other piezoelectric sensors as the distance between the piezoelectric sensor and the hitting position is shorter. In the present embodiment, the hitting operation is detected by a detection signal from the piezoelectric sensor. That is, when a detection signal of a certain threshold value or more is output, it is assumed that the drum pad 2a is hit, and the waveform of the detection signal from the piezoelectric sensor S0 in the C region first takes a maximum value. The C area is specified as the hit area hit by the player. Further, when the detection signal from the piezoelectric sensor provided in the O region takes a maximum value at a timing earlier than the detection signal from the piezoelectric sensor S0, the hitting region is determined based on the hitting region specifying table stored in the ROM 12. Identify.

図３(ｂ)は、本実施形態における打撃領域特定テーブルの構成例を示している。打撃領域特定テーブルは、１番目に極大値を検出した圧電センサ(以下、第１圧電センサと言う)と２番目に極大値を検出した圧電センサ(以下、第２圧電センサと言う)の相対位置と、第２圧電センサと３番目に極大値を検出した圧電センサ(以下、第３圧電センサと言う)の相対位置との全ての組み合わせの数だけ記憶されているが、図３(ｂ)にはそのうちの１つの打撃領域特定テーブルが示されている。この図において、ΔＴ１は、第１圧電センサと第２圧電センサにおいて極大値がとられた時間差を示し、ΔＴ２は、第２圧電センサと第３圧電センサにおいて極大値がとられた時間差を示しており、ΔＴ１及びΔＴ２の時間差の範囲が複数設定されている。打撃領域を特定する際には、一定の閾値以上の検出値が圧電センサから出力されて打撃動作がなされたことが検出された際に、第１圧電センサ、第２圧電センサ、第３圧電センサを特定して第１圧電センサと第２圧電センサにおける時間差ΔＴ１と、第２圧電センサと第３圧電センサにおける時間差ΔＴ２を計測する。そして、第１圧電センサと第２圧電センサの相対位置と、第２圧電センサと第３圧電センサの相対位置とに対応する打撃領域特定テーブルにおいて、計測した各時間差に対応する打撃領域を特定するようにする。なお、例えば、圧電センサ間の時間差に応じて打撃領域を特定するための予め定めた演算式に、圧電センサの時間差を代入して打撃領域を特定するなど、打撃領域を特定できる方法であれば上記以外の方法を用いてもよい。 FIG. 3B shows a configuration example of the striking area specifying table in the present embodiment. The striking area specifying table indicates the relative position of the first piezoelectric sensor that detects the maximum value (hereinafter referred to as the first piezoelectric sensor) and the second piezoelectric sensor that detects the maximum value (hereinafter referred to as the second piezoelectric sensor). And the number of all combinations of the second piezoelectric sensor and the relative position of the piezoelectric sensor that has detected the third maximum value (hereinafter referred to as the third piezoelectric sensor), are stored in FIG. Is a striking area specifying table of one of them. In this figure, ΔT1 indicates the time difference when the maximum value is taken between the first piezoelectric sensor and the second piezoelectric sensor, and ΔT2 indicates the time difference when the maximum value is taken between the second piezoelectric sensor and the third piezoelectric sensor. A plurality of time difference ranges between ΔT1 and ΔT2 are set. When specifying the hitting region, the first piezoelectric sensor, the second piezoelectric sensor, and the third piezoelectric sensor are detected when it is detected that a detection value equal to or greater than a certain threshold is output from the piezoelectric sensor and the hitting operation is performed. And the time difference ΔT1 between the first and second piezoelectric sensors and the time difference ΔT2 between the second and third piezoelectric sensors are measured. And the hit | damage area | region corresponding to each measured time difference is specified in the hit | damage area | region specific table corresponding to the relative position of a 1st piezoelectric sensor and a 2nd piezoelectric sensor, and the relative position of a 2nd piezoelectric sensor and a 3rd piezoelectric sensor. Like that. It should be noted that, for example, any method that can identify a striking area, such as identifying a striking area by substituting the time difference of the piezoelectric sensor into a predetermined arithmetic expression for identifying the striking area according to the time difference between the piezoelectric sensors. You may use methods other than the above.

図２に戻り、ドラム装置１の構成の説明を続ける。アンプ１５は、音源１４から入力されたドラムの楽音信号や楽曲データの楽音信号を増幅してスピーカ１６に出力し、スピーカ１６からドラムや楽曲の楽音信号を放音する。
記憶部１７は、不揮発性記憶媒体で構成されており、ドラム装置１の演奏時において再生する楽曲データ、打撃位置に応じて放音する音色を特定するための音色特定テーブル、ドラムパッド２ａの打撃位置を指示する打撃位置指示画像データ等の各種データを記憶する。ここで、本実施形態における楽曲データ、音色特定テーブル、打撃位置指示画像データについて説明する。 Returning to FIG. 2, the description of the configuration of the drum device 1 will be continued. The amplifier 15 amplifies the drum tone signal and the song data tone signal input from the sound source 14 and outputs them to the speaker 16, and emits the drum or song tone signal from the speaker 16.
The storage unit 17 is composed of a non-volatile storage medium. The music data to be reproduced during the performance of the drum device 1, the tone color specifying table for specifying the tone to be emitted according to the hitting position, and the impact of the drum pad 2a Various data such as hitting position indicating image data indicating the position are stored. Here, the music data, the tone color specification table, and the striking position instruction image data in this embodiment will be described.

図４は、楽曲データ１１０の構成及びデータ例を示す図である。本実施形態における楽曲データ１１０は、ＭＩＤＩ(Musical Instrument Digital Interface)規格に準拠した楽曲データである。楽曲データ１１０は、楽曲名、楽曲に含まれる楽器パート、楽器パートの音色を示す音色情報(音色Ｄ１、Ｄ２、Ｇ、Ｐ、Ｖ)、楽曲の再生内容を表す演奏データ(ＰＤ１〜ＰＤ５)、各演奏データを再生するべき時刻を示す再生タイミング(Ｔ１〜Ｔ６)、再生時の音量(Ｖ２、Ｖ３)等の制御パラメータが対応づけられている。 FIG. 4 is a diagram illustrating a configuration of the music data 110 and a data example. The music data 110 in the present embodiment is music data that conforms to the MIDI (Musical Instrument Digital Interface) standard. The music data 110 includes a music name, musical instrument parts included in the music, timbre information (tones D1, D2, G, P, V) indicating the timbre of the musical instrument part, performance data (PD1 to PD5) representing the reproduction content of the music, Control parameters such as playback timing (T1 to T6) indicating the time at which each performance data should be played back, and volume (V2, V3) during playback are associated with each other.

なお、ドラムの音色Ｄ１は、アコースティックドラムの例えば、スネアドラムのドラムヘッドの中心をスティックで叩いたときの音であり、音色Ｄ２は、ドラムヘッドの端、即ち、リム近くをスティックで叩いたときの音を示している。また、演奏データには、再生タイミングで再生すべきパート毎の音高や発音及び消音等のイベントデータが定義されている。再生タイミングは、図示しないクロック発生器から供給されるＭＩＤＩクロックに準じたクロック数で表され、楽曲の再生開始時点からクロックをカウントし、カウント値が再生タイミングで示されるクロック数に達したタイミングで当該再生タイミングに対応する演奏データを音源に繰り返し出力することで、楽曲の演奏音が放音され、楽曲の再生が行われる。 The tone D1 of the drum is a sound when the center of the drum head of an acoustic drum, for example, a snare drum is hit with a stick, and the tone D2 is when the end of the drum head, that is, near the rim is hit with a stick. Shows the sound. In the performance data, event data such as pitches, sound generation and mute for each part to be reproduced at the reproduction timing is defined. The reproduction timing is represented by the number of clocks according to the MIDI clock supplied from a clock generator (not shown). The clock is counted from the reproduction start point of the music and the count value reaches the number of clocks indicated by the reproduction timing. By repeatedly outputting performance data corresponding to the reproduction timing to the sound source, the musical performance sound is emitted and the musical composition is reproduced.

この例では、楽曲Ａにドラム、ギター、ピアノ、バイオリンの楽器パートが含まれている。ドラム以外の楽器パートについては、再生タイミングＴ１〜Ｔ６の間、各楽器パートに対応する演奏データＰＤ３、４、５を再生し、ドラムパートについては、Ｔ１〜Ｔ３と、Ｔ４〜Ｔ６の間は音色Ｄ１の演奏データＰＤ１を再生し、Ｔ３〜Ｔ４の間は音色Ｄ２の演奏データＰＤ２を再生するように構成されている。
なお、本実施形態では、説明の便宜上、ドラムパートは特定ドラム、例えばスネアドラムの音色について定義されている例について説明するが、複数のドラムの各音色が定義されていてもよい。 In this example, the musical piece A includes drum, guitar, piano, and violin instrument parts. For musical instrument parts other than drums, performance data PD3, 4 and 5 corresponding to each musical instrument part are reproduced during reproduction timings T1 to T6, and for drum parts, timbre is reproduced between T1 to T3 and T4 to T6. The performance data PD1 of D1 is reproduced, and the performance data PD2 of timbre D2 is reproduced between T3 and T4.
In the present embodiment, for convenience of explanation, an example in which the drum part is defined for the tone color of a specific drum, for example, a snare drum, will be described, but each tone color of a plurality of drums may be defined.

次に、音色特定テーブルについて図５を用いて説明する。図５に示すように、音色特定テーブル１２０は、音色Ｄ１及び音色Ｄ２を示す音色情報と、ドラムパッド２ａのＣ領域及びＯ領域を示す打撃領域とが対応づけられている。音色特定テーブル１２０は、打撃位置に対応する打撃領域が特定された際に読み出され、特定された打撃領域に対応する音色情報が読み出される。 Next, the tone color specification table will be described with reference to FIG. As shown in FIG. 5, in the timbre specification table 120, the timbre information indicating the timbre D1 and the timbre D2 is associated with the striking area indicating the C area and the O area of the drum pad 2a. The timbre specification table 120 is read when a striking area corresponding to the striking position is identified, and timbre information corresponding to the identified striking area is read out.

次に、本実施形態における打撃位置指示画像データについて説明する。図６は、ドラムパッド２ａに投影される打撃位置指示画像の例を示している。図６(ａ)及び(ｂ)に示す打撃位置指示画像は、ドラムパッド２ａの打撃面のＣ領域及びＯ領域の大きさと対応する画像となるように投影される。図６(ａ)は、Ｃ領域を打撃位置として指示する場合の打撃位置指示画像を示しており、図６(ｂ)は、Ｏ領域を打撃位置として指示する場合の打撃位置指示画像の例を示している。本実施形態では、打撃すべき領域が演奏者に認識できるように、例えば、Ｃ領域又はＯ領域の部分を点滅させたり、色を変える等して打撃位置指示画像を表示させる。また、いずれの領域も打撃すべきでないときには画像を投影しないようにしてもよいし、打撃しないことを示す画像を表示させるようにしてもよい。 Next, the hitting position instruction image data in this embodiment will be described. FIG. 6 shows an example of an impact position instruction image projected on the drum pad 2a. 6A and 6B are projected so as to be images corresponding to the sizes of the C area and the O area of the hitting surface of the drum pad 2a. FIG. 6A shows a batting position instruction image when the C area is designated as the batting position, and FIG. 6B shows an example of the batting position instruction image when the O area is designated as the batting position. Show. In the present embodiment, for example, the striking position instruction image is displayed by blinking the C region or the O region or changing the color so that the player can recognize the region to be struck. Further, when no area should be hit, an image may not be projected, or an image indicating that no hit may be displayed.

図２に戻り、ドラム装置１の構成の説明を続ける。操作部１８は、ドラム装置１の電源のオン／オフを切り換える電源スイッチや、楽曲選択や音量等の変更操作を行うための操作ボタンを含んで構成されており、演奏者によって操作された内容を示す操作信号をＣＰＵ１１へ送出する。Ａ／Ｄ変換部１９は、ドラムパッド２ａに設けられた圧電センサＳ０〜Ｓ４(以下、各圧電センサを区別しない場合には、単に圧電センサと言う)の各々と１対１に接続されており、接続された圧電センサから出力された検出信号をＡ／Ｄ変換し、各Ａ／Ｄ変換部１９が接続されている各ポートを介してＣＰＵ１１へ出力する。 Returning to FIG. 2, the description of the configuration of the drum device 1 will be continued. The operation unit 18 includes a power switch for switching on / off the power of the drum device 1 and operation buttons for performing operations such as selecting a music piece and changing the sound volume. The operation signal shown is sent to the CPU 11. The A / D conversion unit 19 is connected to each of the piezoelectric sensors S0 to S4 (hereinafter simply referred to as “piezoelectric sensors” if they are not distinguished) provided on the drum pad 2a in a one-to-one relationship. The detection signal output from the connected piezoelectric sensor is A / D converted and output to the CPU 11 via each port to which each A / D converter 19 is connected.

＜動作＞
次に、本実施形態におけるドラム装置１の動作について説明する。図７は、ドラム装置１の動作フローである。なお、以下の説明において、ドラム装置１の電源スイッチは演奏者によって電源がオンに設定されており、楽曲Ａの選択操作がなされているものとして説明する。 <Operation>
Next, the operation of the drum device 1 in the present embodiment will be described. FIG. 7 is an operation flow of the drum device 1. In the following description, it is assumed that the power switch of the drum device 1 is turned on by the performer and that the music A is selected.

まず、ドラム装置１における打撃位置指示画像の表示処理について図７(ａ)の動作フローを用いて説明する。なお、打撃位置指示画像表示処理と後述の打撃時における発音処理は、割り込み処理により並行して処理される。ドラム装置１のＣＰＵ１１は、演奏者によって選択された楽曲Ａの楽曲データ１１０を記憶部１７から読み出し、楽曲データ１１０に定義されている再生タイミングに従って、楽器パートの演奏データの読み出しを開始し、読み出した演奏データをＲＡＭ１３に順次記憶する(ステップＳ１１)。 First, the process of displaying the striking position instruction image in the drum device 1 will be described using the operation flow of FIG. Note that the striking position instruction image display processing and the sound generation processing at the time of striking described later are processed in parallel by the interrupt processing. The CPU 11 of the drum device 1 reads the music data 110 of the music A selected by the performer from the storage unit 17, starts reading the performance data of the instrument part according to the playback timing defined in the music data 110, and reads it out. The performance data thus stored is sequentially stored in the RAM 13 (step S11).

また、ＣＰＵ１１は、ＲＡＭ１３に記憶した演奏データのうち、ドラムパート以外の演奏データについては音源１４に順次送出する。音源１４は、受付けたドラムパート以外の演奏データに対応する楽音信号を生成してアンプ１５に送出し、アンプ１５において増幅された楽音信号をスピーカ１６から放音する(ステップＳ１２)。これにより、ドラムパート以外の演奏音が放音される。 Also, the CPU 11 sequentially sends performance data other than the drum part among the performance data stored in the RAM 13 to the sound source 14. The sound source 14 generates a musical sound signal corresponding to performance data other than the accepted drum part, sends it to the amplifier 15, and emits the musical sound signal amplified by the amplifier 15 from the speaker 16 (step S12). Thereby, performance sounds other than the drum part are emitted.

続いて、ＣＰＵ１１は、記憶部１７に記憶されている音色特定テーブル１２０を参照し、ドラムパートの各再生タイミングにおいて発音させるべき音色の音色情報に対応するドラムパッド２ａの打撃領域を特定し、特定した打撃領域を打撃指示するための打撃位置指示画像データを記憶部１７から読み出してプロジェクタ４に送出する。プロジェクタ４は、ＣＰＵ１１から入力された打撃位置指示画像データをドラムパッド２ａの裏面側から投影し、打撃面に打撃位置指示画像を表示する(ステップＳ１３)。ＣＰＵ１１は、楽曲Ａの演奏データの再生が終了するまで継続して打撃位置指示画像の表示処理を行い(ステップＳ１４：ＮＯ)、楽曲Ａの再生が終了した場合には打撃位置指示画像の表示処理を終了する(ステップＳ１４：ＹＥＳ)。 Subsequently, the CPU 11 refers to the timbre identification table 120 stored in the storage unit 17 to identify and identify the striking area of the drum pad 2a corresponding to the timbre information of the timbre to be generated at each reproduction timing of the drum part. The hit position instruction image data for instructing hitting the hit area is read from the storage unit 17 and sent to the projector 4. The projector 4 projects the striking position instruction image data input from the CPU 11 from the back side of the drum pad 2a, and displays the striking position instruction image on the striking surface (step S13). The CPU 11 continuously performs the process of displaying the striking position instruction image until the reproduction of the performance data of the music piece A is completed (step S14: NO). When the reproduction of the music piece A is completed, the display process of the striking position instruction image is performed. Is ended (step S14: YES).

これにより、演奏者は、ドラムパッド２ａの打撃面に表示される打撃位置指示画像を確認し、打撃位置指示画像で指示された打撃領域(Ｃ領域又はＯ領域)を楽曲Ａの演奏に合わせて打撃する操作を行う。 As a result, the performer confirms the striking position instruction image displayed on the striking surface of the drum pad 2a, and matches the striking area (C area or O area) designated by the striking position instruction image with the performance of the music piece A. Do the operation to hit.

次に、上述した打撃位置指示画像の表示処理と並行して行われる、打撃時の発音処理の動作について図７(ｂ)の動作フローを用いて説明する。
演奏者によってドラムパッド２ａの打撃面が打撃された場合、即ち、ドラムパッド２ａに設けられている圧電センサから各圧電センサに対応するＡ／Ｄ変換部１９から一定の閾値以上の検出信号が送出され、各Ａ／Ｄ変換部１９においてＡ／Ｄ変換された検出値を各Ａ／Ｄ変換部１９が接続されたポートを介して受付けた場合(ステップＳ２１：ＹＥＳ)、ＣＰＵ１１は、ドラムパッド２ａに対する打撃動作を検出し、センサ毎の検出値をＲＡＭ１３に順次記憶する。そして、ＣＰＵ１１は、圧電センサ毎の検出値が極大値となる時刻を計測し、第１圧電センサ、第２圧電センサ、第３圧電センサを特定し、極大値となる時間差に応じて打撃領域を特定する(ステップＳ２２)。即ち、第１圧電センサが圧電センサＳ０であれば、Ｃ領域を特定し、第１圧電センサが圧電センサＳ０でない場合には、第１圧電センサと第２圧電センサの時間差ΔＴ１と第２圧電センサと第３圧電センサの時間差ΔＴ２を求める。そして、第１圧電センサと第２圧電センサの相対位置と、第２圧電センサと第３圧電センサとの相対位置とに対応する打撃領域特定テーブルにおいて、時間差ΔＴ１と時間差ΔＴ２に対応する打撃領域を特定する。 Next, the operation of the sound generation process at the time of hitting performed in parallel with the above-described hitting position instruction image display process will be described with reference to the operation flow of FIG.
When the strike surface of the drum pad 2a is hit by the performer, that is, a detection signal of a certain threshold value or more is transmitted from the A / D converter 19 corresponding to each piezoelectric sensor from the piezoelectric sensor provided on the drum pad 2a. When the detection value A / D converted by each A / D conversion unit 19 is received via a port to which each A / D conversion unit 19 is connected (step S21: YES), the CPU 11 determines that the drum pad 2a The detection value for each sensor is sequentially stored in the RAM 13. And CPU11 measures the time when the detection value for every piezoelectric sensor becomes maximum value, specifies the 1st piezoelectric sensor, the 2nd piezoelectric sensor, and the 3rd piezoelectric sensor, and sets a hitting field according to the time difference which becomes maximum value. Specify (step S22). That is, if the first piezoelectric sensor is the piezoelectric sensor S0, the region C is specified. If the first piezoelectric sensor is not the piezoelectric sensor S0, the time difference ΔT1 between the first piezoelectric sensor and the second piezoelectric sensor and the second piezoelectric sensor. And a time difference ΔT2 between the third piezoelectric sensor and the third piezoelectric sensor. Then, in the striking area specifying table corresponding to the relative position between the first piezoelectric sensor and the second piezoelectric sensor and the relative position between the second piezoelectric sensor and the third piezoelectric sensor, the striking area corresponding to the time difference ΔT1 and the time difference ΔT2 is indicated. Identify.

ＣＰＵ１１は、記憶部１７に記憶されている音色特定テーブル１２０を参照し、ステップＳ２２において特定した打撃領域に対応する音色を特定する(ステップＳ２３)。そして、ＣＰＵ１１は、ステップＳ２３において特定した音色に対応するドラム音の楽音信号を音源１４において生成し、音源１４において生成されたドラム音の楽音信号がアンプ１５に送出されてスピーカ１６から放音される(ステップＳ２４)。 The CPU 11 refers to the timbre specification table 120 stored in the storage unit 17 and specifies the timbre corresponding to the striking area specified in step S22 (step S23). Then, the CPU 11 generates a tone signal of the drum sound corresponding to the tone color specified in step S23 in the sound source 14, and the tone signal of the drum sound generated in the sound source 14 is sent to the amplifier 15 and emitted from the speaker 16. (Step S24).

なお、ステップＳ２１において、演奏者によってドラムパッド２ａの打撃面が打撃されない場合、即ち、ドラムパッド２ａに設けられている各圧電センサから一定の閾値以上の電圧値を示す検出信号が出力されなかった場合には(ステップＳ２１：ＮＯ)、ＣＰＵ１１は、ドラム音の放音を行わずドラム音の発音処理を終了する。 In step S21, if the player does not strike the striking surface of the drum pad 2a, that is, no detection signal indicating a voltage value equal to or greater than a certain threshold is output from each piezoelectric sensor provided on the drum pad 2a. In this case (step S21: NO), the CPU 11 ends the drum sound generation process without releasing the drum sound.

本実施形態では、楽曲中のドラムパート部分の演奏データは再生せず、ドラムパートの演奏タイミングで打撃すべきドラムパッド２ａの打撃領域を指示する打撃位置指示画像をドラムパッド２ａの打撃面に表示させることができる。そのため、演奏者は、ドラムパッド２ａに表示された打撃位置指示画像を視認しながら、楽曲に合わせてドラム演奏を行うことができ、ドラム装置１をドラム演奏の練習に役立てることができる。また、ドラムパッド２ａの打撃領域に応じて異なる音を放音させることができるので、アコースティックドラムを演奏するようにドラム演奏することができる。 In the present embodiment, the performance data of the drum part portion in the music is not reproduced, and the striking position instruction image indicating the striking area of the drum pad 2a to be hit at the drum part performance timing is displayed on the striking surface of the drum pad 2a. Can be made. Therefore, the performer can perform the drum performance according to the music while visually recognizing the striking position instruction image displayed on the drum pad 2a, and can use the drum apparatus 1 for practice of the drum performance. Further, since different sounds can be emitted depending on the striking area of the drum pad 2a, it is possible to perform the drum as if playing an acoustic drum.

＜変形例＞
以上、本発明の実施形態について説明したが、本発明は上述した実施形態に限るものではなく、以下の変形例も含まれる。 <Modification>
As mentioned above, although embodiment of this invention was described, this invention is not restricted to embodiment mentioned above, The following modifications are also contained.

（１）上述の実施形態では、打撃位置指示画像としてドラムパッド２ａの打撃領域を指示する画像を表示する例であったが、ドラムパッド２ａに表示させる画像として、予め設定されたドラムの楽譜を示す画像を表示してもよい。実施形態のように、楽曲に含まれるドラムパート部分の楽譜を示す画像を表示する場合には、再生される楽曲の再生タイミングと各再生タイミングに演奏されるドラムパートの楽譜を示す楽譜画像データを予め記憶部１７に記憶しておく。そして、ＣＰＵ１１は、ドラムパートの演奏データの再生タイミングが示すＭＩＤＩクロックと同期するように、１小節等の一定の単位でドラムパッド２ａに順次表示させる楽譜画像データをプロジェクタ４に対して入力し、プロジェクタ４において楽譜画像データを順次投影する。このようにして楽譜画像データをドラムパッド２ａに表示した例を図８に示す。図８に示すように、ドラムパッド２ａの打撃面には、楽譜画像データを表示する表示領域２００が予め設定されており、表示領域２００において、楽譜画像データに基づく一定単位の楽譜画像２０１が順次表示される。また、楽譜画像２０１において、例えば、スネアドラムとタムタムなど、複数のドラムの楽譜２０１ａ、２０１ｂが含まれている場合には、ＣＰＵ１１は、自装置において予め設定されているドラムの楽譜(音符)２０１ａを選択し、選択した楽譜(音符)２０１ａが演奏対象であることを示す楽譜指示画像２１０を表示する。なお、演奏対象の楽譜(音符)を示す楽譜指示画像は、演奏対象外と演奏対象の楽譜を識別できる態様であれば図８の楽譜指示画像２１０以外の態様(色分けや点滅等)で表してもよい。 (1) In the above-described embodiment, the image indicating the hit area of the drum pad 2a is displayed as the hit position indication image. However, a preset drum score is used as the image to be displayed on the drum pad 2a. An image may be displayed. When displaying an image showing the score of a drum part included in a song as in the embodiment, the score image data indicating the playback timing of the song to be played and the score of the drum part played at each playback timing is displayed. Pre-stored in the storage unit 17. Then, the CPU 11 inputs score image data to be sequentially displayed on the drum pad 2a in a fixed unit such as one measure to the projector 4 so as to synchronize with the MIDI clock indicated by the reproduction timing of the performance data of the drum part, The projector 4 sequentially projects the score image data. An example in which the musical score image data is displayed on the drum pad 2a in this way is shown in FIG. As shown in FIG. 8, a display area 200 for displaying musical score image data is set in advance on the striking surface of the drum pad 2a. In the display area 200, a musical score image 201 in a certain unit based on the musical score image data is sequentially provided. Is displayed. When the score image 201 includes, for example, a plurality of drum scores 201a and 201b such as a snare drum and a tom tom, the CPU 11 sets a drum score (note) 201a set in advance in its own apparatus. And a score instruction image 210 indicating that the selected score (note) 201a is a performance target is displayed. Note that the musical score instruction image indicating the musical score to be played (notes) is expressed in a form (color coding, blinking, etc.) other than the musical score instruction image 210 in FIG. Also good.

（２）また、上述の実施形態に係るドラム装置１は、単体のドラムの音を発音する例であったが、複数のドラムの音を発音させるように構成してもよい。この場合は、図９(ａ)に示すように、例えば、ドラムパッド２ａにおいて、３つのドラム(スネアドラム、タムタム、バスドラム)の音が割当てられた領域Ａ１、Ａ２、Ａ３を予め設定し、各領域における打撃を検出する圧電センサを各々の領域の中心に設けておく。そして、楽曲データにおいて、各ドラムの音色、再生タイミング、演奏データが設定されている場合、ＣＰＵ１１は、スネアドラムの再生タイミングにおいて、図９(ｂ)に示すように、スネアドラムの音色が割当てられたドラムパッド２ａの領域Ａ１と対応するように、領域Ａ１の打撃を指示する打撃位置指示画像２００ａ1をプロジェクタ４により投影し、領域Ａ１以外の領域には、変形例(１)と同様の楽譜画像２０１とスネアドラムの楽譜を示す楽譜指示画像２１０を投影する。また、タムタムの再生タイミングにおいては、図９(ｃ)に示すように、タムタムの音色が割当てられた領域Ａ２に対応するように、領域Ａ２の打撃を指示する打撃位置指示画像２００ａ２をプロジェクタ４により投影し、領域Ａ２以外の領域には、楽譜画像２０１とタムタムの楽譜を示す楽譜指示画像２１０を投影する。バスドラムの場合も、上記スネアドラム及びタムタムの場合と同様に、領域Ａ３の打撃を指示する打撃位置指示画像と楽譜画像２０１及びバスドラムの楽譜を指示する楽譜指示画像２１０をドラムパッド２ａに表示する。
なお、上記の例は、楽曲データにおいて各ドラムの打撃タイミングが異なるよう構成されている例であるが、複数ドラムを同時に打撃するよう楽曲データが構成されている場合には、打撃すべきドラムの音が割当てられた各領域と対応するように、打撃位置指示画像をドラムパッド２ａに表示し、楽譜画像２０１及び楽譜指示画像２１０を表示しないようにしてもよい。また、上記の例では、打撃位置指示画像と共に楽譜画像２０１及び楽譜指示画像２１０を表示したが、各ドラムの再生タイミングと同期するように、打撃位置指示画像のみを表示させるようにしてもよい。 (2) In addition, the drum device 1 according to the above-described embodiment is an example of generating a single drum sound, but may be configured to generate a plurality of drum sounds. In this case, as shown in FIG. 9A, for example, in the drum pad 2a, areas A1, A2, and A3 to which sounds of three drums (snare drum, tom tom, and bass drum) are assigned are set in advance. A piezoelectric sensor for detecting a hit in each region is provided at the center of each region. When the tone color, playback timing, and performance data of each drum are set in the music data, the CPU 11 is assigned the tone color of the snare drum at the playback timing of the snare drum as shown in FIG. 9B. A hitting position instruction image 200a1 for instructing hitting of the area A1 is projected by the projector 4 so as to correspond to the area A1 of the drum pad 2a. 201 and a score instruction image 210 showing the score of the snare drum are projected. Also, at the tom tom reproduction timing, as shown in FIG. 9C, the hitting position instruction image 200a2 for instructing the hitting of the area A2 is displayed by the projector 4 so as to correspond to the area A2 to which the tom tom tone is assigned. The score image 201 and the score instruction image 210 showing the tom-tum score are projected onto the area other than the area A2. In the case of the bass drum, as in the case of the snare drum and the tom tom, the striking position instruction image instructing the striking of the area A3, the score image 201, and the score instruction image 210 instructing the score of the bass drum are displayed on the drum pad 2a. To do.
The above example is an example in which the hit timing of each drum is different in the music data. However, if the music data is configured to hit a plurality of drums at the same time, The striking position instruction image may be displayed on the drum pad 2a so as to correspond to each region to which the sound is assigned, and the score image 201 and the score instruction image 210 may not be displayed. In the above example, the musical score image 201 and the musical score instruction image 210 are displayed together with the striking position instruction image. However, only the striking position instruction image may be displayed so as to be synchronized with the reproduction timing of each drum.

（３）また、上述した変形例(１)(２)で説明した図８及び図９のように楽譜画像を表示した際、どの楽譜(音符)が打撃されたかを楽譜画像と共に表示するようにしてもよい。この場合には、実際にドラムパッド２ａが打撃された位置を圧電センサからの出力値に基づいて検出し、検出した打撃位置における音と対応する楽譜画像の音符を特定し、楽譜画像において特定した音符を示すように構成する。 (3) Also, when a score image is displayed as shown in FIGS. 8 and 9 described in the above-described modifications (1) and (2), which score (musical note) is struck is displayed together with the score image. May be. In this case, the position where the drum pad 2a is actually hit is detected based on the output value from the piezoelectric sensor, the note of the score image corresponding to the sound at the detected hit position is specified, and specified in the score image. Configure to show musical notes.

（４）また、上述の実施形態では、楽曲に含まれるドラムパートを発音しない例について説明したが、ドラムパートの演奏データを再生して発音させるようにしてもよい。なお、この場合には、ドラムパートに予め設定されている音量より小さい音量で発音させてもよい。 (4) In the above-described embodiment, the example in which the drum part included in the music is not sounded has been described. However, the performance data of the drum part may be reproduced and sounded. In this case, the drum part may be sounded at a volume lower than the volume set in advance.

（５）また、上述の実施形態では、楽曲を再生し、楽曲におけるドラムパートと同期させて打撃位置指示画像をドラムパッド２ａに表示する例であったが、例えば、楽曲に対応する風景画像や人物画像等、予め楽曲に対応づけられた画像をドラムパッド２ａに表示させるようにしてもよい。この場合には、楽曲毎に対応する画像データを記憶部１７に記憶するように構成する。 (5) In the above-described embodiment, the music is played and the striking position instruction image is displayed on the drum pad 2a in synchronization with the drum part in the music. However, for example, a landscape image corresponding to the music, You may make it display the image previously matched with music, such as a person image, on the drum pad 2a. In this case, the image data corresponding to each piece of music is stored in the storage unit 17.

（６）また、上述の実施形態では、打撃位置指示画像を表示することにより、ドラムパッド２ａにおいて打撃すべき位置を教示する例であったが、演奏者によって打撃された位置に応じて予め設定されている画像を表示し、打撃された位置が適切であるか否か評価するようにしてもよい。この場合、楽曲中のあるタイミングでドラムパッド２ａを打撃すべき位置と、打撃すべき位置が打撃されたときに表示する第１画像データと、打撃すべき位置が打撃されなかったときに表示する第２画像データとを対応づけて記憶部１７に記憶しておく。そして、ドラム装置１において楽曲を再生し、予め楽曲に設定されたタイミングで演奏者によって打撃された位置が、当該タイミングで打撃すべき打撃位置であれば第１画像データをプロジェクタ４により投影してドラムパッド２ａに表示し、打撃すべき打撃位置でなければ第２画像データをプロジェクタ４により投影してドラムパッド２ａに表示する。このような構成によりドラム装置１をゲーム機として用いることができる。例えば、演奏者毎に、打撃すべきタイミングで打撃すべき位置が打撃できたか否かを点数化し、ゲーム終了時において各演奏者の点数を示す画像をドラムパッド２ａに表示させるようにしてもよい。 (6) In the above-described embodiment, an example of teaching the position to be hit on the drum pad 2a by displaying the hitting position instruction image is an example, but it is set in advance according to the position hit by the player. It is also possible to display a displayed image and evaluate whether or not the hit position is appropriate. In this case, the position where the drum pad 2a should be struck at a certain timing in the music, the first image data displayed when the position to be struck is struck, and the position when the position to be struck is not struck. The second image data is stored in the storage unit 17 in association with it. Then, the music is reproduced in the drum device 1, and the first image data is projected by the projector 4 if the position hit by the performer at the timing set in advance in the music is the hitting position to be hit at the timing. If it is displayed on the drum pad 2a and it is not a hit position to be hit, the second image data is projected by the projector 4 and displayed on the drum pad 2a. With such a configuration, the drum device 1 can be used as a game machine. For example, each player may be scored as to whether or not the position to be struck can be struck at the timing to be struck, and an image indicating the score of each player may be displayed on the drum pad 2a at the end of the game. .

（７）また、上述した実施形態は、単体のドラムの例について説明したが、ドラムセットにおいて、どのドラムを打撃すべきかを指示する指示画像を表示するようにしてもよい。この場合のドラムセットは、上述した実施形態と同様にプロジェクタ４が各々設けられた複数種類のドラムで構成されており、いずれかのドラム内には、各ドラムに設けられたプロジェクタ４に対して画像の投影を指示する制御装置が設けられるよう構成する。制御装置は、実施形態と同様に楽曲データを再生し、楽曲における各ドラムの演奏データの再生タイミングと同期するように、打撃対象のドラムに設けられたプロジェクタ４に対して画像の投影を指示する。制御装置によって画像の投影を指示されたプロジェクタ４は、指示されたタイミングで予め設定された画像を当該プロジェクタが設けられているドラムのドラムパッド２ａに表示させる。なお、ドラムパッド２ａに表示させる画像は、例えば、ドラムパッド２ａの全面又は一部に投影してもよく、打撃すべきドラムであることを示す画像であればよい。また、楽曲と同期させるのではなく、ジャズ等の曲のジャンル及びテンポの条件に応じて予め定められた打撃すべきドラムを順次指示するようにしてもよい。この場合には、曲のジャンル及びテンポの条件と、各条件に応じて打撃すべきドラムの順序とを制御装置において予め設定しておく。そして、演奏者によって選択された条件に応じて、打撃すべきドラムの順を示すように、各ドラムに設けられたプロジェクタにより予め設定された画像を表示する。例えば、ある条件において、打撃順序が１タムタム→２フロアタム→３スネアドラムとして設定されている場合、１：赤色、２：黄色、３：青色のように、打撃順序に応じて表示する画像の色を変えて表示してもよいし、打撃順序に応じて画像を変えて表示してもよい。 (7) In the above-described embodiment, an example of a single drum has been described. However, an instruction image instructing which drum should be hit in a drum set may be displayed. The drum set in this case is composed of a plurality of types of drums each provided with a projector 4 as in the above-described embodiment, and any one of the drums includes a projector 4 provided for each drum. A control device for instructing projection of an image is provided. The control device reproduces the music data as in the embodiment, and instructs the projector 4 provided on the drum to be hit to project an image so as to synchronize with the reproduction timing of the performance data of each drum in the music. . The projector 4 instructed to project an image by the control device displays an image set in advance at the instructed timing on the drum pad 2a of the drum provided with the projector. The image displayed on the drum pad 2a may be projected onto the entire surface or a part of the drum pad 2a, for example, as long as it is an image indicating that the drum is to be hit. Further, instead of synchronizing with the music, a drum to be struck in advance according to the genre and tempo conditions of the music such as jazz may be sequentially designated. In this case, the genre and tempo conditions of the song and the order of drums to be hit according to each condition are set in advance in the control device. Then, in accordance with the conditions selected by the performer, an image preset by a projector provided on each drum is displayed so as to indicate the order of drums to be hit. For example, under certain conditions, when the striking order is set as 1 tom tom → 2 floor tom → 3 snare drum, the color of the image displayed according to the striking order, such as 1: red, 2: yellow, 3: blue May be displayed, or the image may be changed according to the hitting order.

（８）また、上述した実施形態では、電子ドラムのドラムパッド２ａに画像を表示させる例について説明したが、光を拡散反射するドラムヘッドを有するアコースティックドラムに、実施形態と同様の構成を適用してもよい。 (8) In the above-described embodiment, an example in which an image is displayed on the drum pad 2a of the electronic drum has been described. However, the same configuration as that of the embodiment is applied to an acoustic drum having a drum head that diffuses and reflects light. May be.

（９）また、上述した実施形態では、ドラムパッド２ａの裏面に５つの圧電センサを設ける例について説明したが、圧電センサを設ける位置や圧電センサの数はこれに限定されない。例えば、実施形態の図３におけるＳ１〜Ｓ４が設けられているドラムパッド２ａの裏面外周において、圧電センサ間の角度が１２０°となるように３つの圧電センサを設け、各圧電センサから出力された極大値の到達時間の差に基づいて打撃位置を特定するようにしてもよい。 (9) In the above-described embodiment, an example in which five piezoelectric sensors are provided on the back surface of the drum pad 2a has been described. However, the positions where the piezoelectric sensors are provided and the number of piezoelectric sensors are not limited thereto. For example, three piezoelectric sensors are provided on the outer periphery of the back surface of the drum pad 2a on which S1 to S4 in FIG. 3 of the embodiment are provided so that the angle between the piezoelectric sensors is 120 °, and output from each piezoelectric sensor. The hitting position may be specified based on the difference in arrival time of the maximum values.

（１０）また、上述した実施形態では、ドラム装置１のパッド体２の内部にプロジェクタ４を設ける例について説明したが、ドラム装置１のパッド体２の下側にプロジェクタ４を設けるように構成してもよい。この場合のパッド体２は、実施形態と同様のドラムパッド２ａを用い、ドラムパッド２ａに対向する胴部２ｂの底面部には、ドラムパッド２ａが打撃動作されたときの振動を受け、プロジェクタ４から投影される画像の光を散乱するスナッピー等の部材を設けてもよい。これにより、演奏者がドラムパッドを打撃した際、プロジェクタ４から投影された光が部材によって散乱し、ドラムパッド２ａの打撃面等からドラム装置１の周囲や天井に漏れた光による映像効果を得ることができる。 (10) In the above-described embodiment, the example in which the projector 4 is provided inside the pad body 2 of the drum device 1 has been described. However, the projector 4 is configured to be provided below the pad body 2 of the drum device 1. May be. In this case, the pad body 2 uses the same drum pad 2a as in the embodiment. The bottom surface of the body 2b facing the drum pad 2a receives vibrations when the drum pad 2a is struck, and the projector 4 You may provide members, such as a snappy, which scatters the light of the image projected from. Thereby, when the performer strikes the drum pad, the light projected from the projector 4 is scattered by the member, and the image effect is obtained by the light leaking from the striking surface of the drum pad 2a to the periphery of the drum device 1 and the ceiling. be able to.

（１１）上述した実施形態及び変形例では、ドラムを例にして説明したが、和太鼓など、打撃動作によって音を発音するものであればドラムに限らない。 (11) In the above-described embodiments and modifications, the drum has been described as an example. However, the drum and the like are not limited to drums as long as sound is generated by a striking operation such as a Japanese drum.

１・・・ドラム、２・・・パッド体、２ａ・・・ドラムパッド、２ｂ・・・胴部、３・・・脚部、４・・・プロジェクタ、１１・・・ＣＰＵ、１２・・・ＲＯＭ、１３・・・ＲＡＭ、１４・・・音源、１５・・・アンプ、１６・・・スピーカ、１７・・・記憶部、１８・・・操作部、１９・・・Ａ／Ｄ変換部、Ｓ０，Ｓ１，Ｓ２，Ｓ３，Ｓ４・・・圧電センサ DESCRIPTION OF SYMBOLS 1 ... Drum, 2 ... Pad body, 2a ... Drum pad, 2b ... Trunk part, 3 ... Leg part, 4 ... Projector, 11 ... CPU, 12 ... ROM, 13 ... RAM, 14 ... sound source, 15 ... amplifier, 16 ... speaker, 17 ... storage unit, 18 ... operation unit, 19 ... A / D conversion unit, S0, S1, S2, S3, S4 ... Piezoelectric sensors

Claims

表面からの打撃を受けて振動する打撃面を有し、前記打撃面の裏面から投影される画像を前記打撃面に表示する打撃面部と、
前記打撃面に対する打撃動作を検出する打撃動作検出手段と、
前記打撃動作検出手段の検出結果に応じた音を発音する発音手段と、
前記打撃面の裏面側に配置され、前記打撃面に前記打撃動作に関する画像を投射する表示手段と
を備えることを特徴とする演奏装置。 A striking surface portion that has a striking surface that vibrates in response to a striking from the front surface, and displays an image projected from the back surface of the striking surface on the striking surface;
A striking motion detecting means for detecting a striking motion on the striking surface;
A sounding means for generating a sound according to the detection result of the hitting motion detecting means;
A performance device, comprising: a display unit that is disposed on a back surface side of the striking surface and projects an image relating to the striking motion onto the striking surface.

前記打撃動作検出手段は、検出した打撃動作に基づいて前記打撃面における打撃位置を特定し、
前記発音手段は、前記打撃動作検出手段により特定された前記打撃位置に応じた音を発音し、
前記表示手段は、予め定められたタイミングで出力すべき音に対応する、前記打撃面における打撃位置を指示する打撃位置指示画像を投射することを特徴とする請求項１記載の演奏装置。 The striking motion detection means specifies a striking position on the striking surface based on the detected striking motion,
The sound generation means generates a sound corresponding to the hitting position specified by the hitting motion detection means,
2. The performance apparatus according to claim 1, wherein the display unit projects a striking position instruction image that indicates a striking position on the striking surface corresponding to a sound to be output at a predetermined timing.

楽曲データを再生する再生手段を備え、
前記表示手段は、前記再生手段により再生される前記楽曲データの進行に応じて定められた前記タイミングで前記打撃位置指示画像を前記打撃面に投射することを特徴とする請求項２記載の演奏装置。 A reproduction means for reproducing the music data;
3. The performance apparatus according to claim 2, wherein the display unit projects the hitting position instruction image onto the hitting surface at the timing determined according to the progress of the music data played back by the playing unit. .

前記表示手段は、前記再生手段により再生される前記楽曲データの進行に対応する前記楽曲データの楽譜を示す楽譜画像と共に、当該楽譜において打撃すべき音を指示する画像を投射することを特徴とする請求項３記載の演奏装置。 The display unit projects a score image indicating a score of the music data corresponding to the progress of the music data played by the playback unit and an image indicating a sound to be hit in the score. The performance device according to claim 3.

前記打撃動作検出手段は、検出した打撃動作に基づいて前記打撃面における打撃位置を特定し、
前記表示手段は、前記打撃位置に応じて予め定められた画像を前記打撃面に投射することを特徴とする請求項１記載の演奏装置。 The striking motion detection means specifies a striking position on the striking surface based on the detected striking motion,
2. The performance apparatus according to claim 1, wherein the display unit projects a predetermined image on the striking surface according to the striking position.