JPH0736446A - Musical performance guide device - Google Patents
Musical performance guide deviceInfo
- Publication number
- JPH0736446A JPH0736446A JP5201140A JP20114093A JPH0736446A JP H0736446 A JPH0736446 A JP H0736446A JP 5201140 A JP5201140 A JP 5201140A JP 20114093 A JP20114093 A JP 20114093A JP H0736446 A JPH0736446 A JP H0736446A
- Authority
- JP
- Japan
- Prior art keywords
- image
- key
- performance
- keyboard
- pressed
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Electrophonic Musical Instruments (AREA)
- Closed-Circuit Television Systems (AREA)
- Auxiliary Devices For Music (AREA)
Abstract
Description
【0001】[0001]
【産業上の利用分野】本発明は、演奏誘導装置に関し、
詳しくは、鍵盤楽器等の押鍵する鍵及び押鍵する手の形
や運指等を映像として映し出して演奏誘導する演奏誘導
装置に関する。BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a performance guidance device,
More specifically, the present invention relates to a performance guidance device that guides a performance by projecting a key to be depressed, a shape of a hand to be depressed, a fingering or the like of a keyboard musical instrument as an image.
【0002】[0002]
【従来の技術】電子鍵盤楽器においては、従来から、種
々の演奏誘導装置を備えたものが出現している。2. Description of the Related Art Conventionally, electronic keyboard musical instruments having various performance guidance devices have appeared.
【0003】例えば、鍵盤の各鍵の上部にLED(Ligh
t Emitting Diode)を備え、次に押鍵する鍵の上部のL
EDを点灯させることにより、演奏誘導するものがあ
る。For example, an LED (Ligh
t Emitting Diode), and L above the key to be pressed next
There is a thing that guides the performance by lighting the ED.
【0004】また、押鍵するのにどの指を使用するかを
演奏誘導するのに、人の指の形とその各指にLEDを設
けた絵を電子鍵盤楽器に設け、次の音符を演奏する指に
対応するLEDを点灯させて、演奏誘導するものがあ
る。Further, in order to guide which finger is to be used to play a key, a picture of a human finger shape and an LED provided on each finger is provided on an electronic keyboard instrument to play the next note. There is one in which an LED corresponding to a finger to be turned on is turned on to guide a performance.
【0005】さらに、コンピュータの表示画面上に鍵盤
の絵を表示出力し、その鍵盤の絵の中から次に押鍵する
鍵を指し示すものがある。Further, there is one in which a picture of a keyboard is displayed and output on a display screen of a computer, and the key to be pressed next is indicated from the picture of the keyboard.
【0006】[0006]
【発明が解決しようとする課題】しかしながら、このよ
うな従来の演奏誘導装置にあっては、次に押鍵する鍵に
対応するLEDを点灯させることにより演奏誘導し、ま
た、人の指の形の絵に設けたLEDを点灯させることに
より演奏誘導し、あるいはコンピュータ画面の鍵盤の絵
の中から次に押鍵する鍵を指し示すことにより演奏誘導
しているのみであったため、押鍵する鍵と押鍵する指と
の関連性が分かり難く、特に、鍵盤楽器においては、演
奏曲の進行に適した指運び、すなわち、前回押鍵する鍵
の位置と押鍵する指及び今回押鍵する鍵の位置と押鍵す
る指、さらには、次回押鍵する鍵の位置と押鍵する指と
の関係から設定される最適な指運びが重要な演奏技術で
あるにもかかわらず、指運びの情報については何等得る
ことができず、演奏技術の向上を図る上で、なお改良の
余地があった。However, in such a conventional performance guidance device, performance guidance is provided by turning on the LED corresponding to the key to be pressed next, and the shape of the human finger is also used. The key to be pressed is the key to be pressed because the LED is provided in the picture to guide the performance, or the key to be pressed next is guided from the picture on the keyboard of the computer screen. It is difficult to understand the relationship with the finger to be pressed.In particular, in the case of keyboard instruments, it is possible to carry a finger that is suitable for the progression of the performance song, that is, the position of the key to be pressed last time and the finger to be pressed and the key to be pressed this time Despite the important performance technique, the optimal finger movement set based on the position, the finger to be pressed, and the relationship between the position of the key to be pressed next time and the finger to be pressed next is important information about finger movement. Can not get anything, acting In improving the technology still has room for improvement.
【0007】そこで、本発明は、演奏イメージをそのま
ま演奏誘導して、押鍵する鍵や指だけでなく、指運びま
で演奏誘導することのできる演奏誘導装置を提供するこ
とを目的としている。SUMMARY OF THE INVENTION Therefore, an object of the present invention is to provide a performance guide device which can guide a performance image as it is to guide not only a key to be pressed or a finger but also a finger movement.
【0008】[0008]
【課題を解決するための手段】本発明は、少なくとも演
奏曲に対応した運指情報を含む手の形の映像及び押鍵す
る鍵を指定する情報からなる演奏指示映像を記憶する記
憶手段と、前記記憶手段に記憶されている演奏指示映像
を対応する演奏曲の進行に合わせて読み出す読出手段
と、前記読出手段の読み出した演奏指示映像を表示出力
する表示手段と、を備えることにより、上記目的を達成
している。According to the present invention, there is provided storage means for storing a performance instruction image composed of an image of a hand shape including fingering information corresponding to at least a piece of music to be played and information designating a key to be depressed. By providing a reading means for reading out the performance instruction image stored in the storage means in accordance with the progress of the corresponding musical piece and a display means for displaying and outputting the performance instruction image read out by the reading means, the above-mentioned object is achieved. Has been achieved.
【0009】また、請求項2に記載するように、前記演
奏誘導装置は、鍵盤楽器に近接して設置され少なくとも
鍵盤、鍵盤上の手及び指の演奏の実映像を撮影する撮影
手段と、前記読出手段の読み出した演奏指示映像を前記
撮影手段の撮影した実映像と重ね合わせて前記表示手段
に表示出力させる映像合成手段と、を、さらに備えるこ
とにより、上記目的を達成している。According to a second aspect of the present invention, the performance guiding device is installed in the vicinity of a keyboard instrument, and a photographing means for photographing at least a real image of the performance of the keyboard and the hands and fingers on the keyboard, The above object is achieved by further comprising: a video synthesizing unit that superimposes the performance instruction image read by the reading unit on the real image captured by the image capturing unit and causes the display unit to display and output the image.
【0010】さらに、請求項3に記載するように、前記
演奏誘導装置は、前記表示手段に表示されている実映像
の鍵盤の大きさに合わせて、前記演奏指示映像の鍵盤の
映像の大きさや位置を調整する調整手段を、さらに備え
ることにより、上記目的を達成している。Further, according to a third aspect of the present invention, the performance guidance device adjusts the size of the keyboard image of the performance instruction image in accordance with the keyboard size of the actual image displayed on the display means. The above object is achieved by further comprising an adjusting means for adjusting the position.
【0011】この場合、前記調整手段は、例えば、請求
項4に記載するように、前記表示手段に表示されている
実映像の鍵盤の鍵の数に合わせて、前記演奏指示映像の
鍵盤の映像から任意の領域を切り出して、映像の大きさ
や位置を調整するものであってもよい。In this case, the adjusting means may, for example, as described in claim 4, match the number of keys of the keyboard of the actual image displayed on the display means with the image of the keyboard of the performance instruction image. It is also possible to cut out an arbitrary area from and adjust the size and position of the image.
【0012】また、請求項5に記載するように、前記記
憶手段は、前記押鍵する鍵を指定する情報としての今回
押鍵する鍵の映像と次回押鍵する鍵の映像を異なる映像
として記憶するとともに、前記手の形の映像としての押
鍵に使用する指の映像と他の指の映像を異なる映像とし
て記憶するものであってもよい。Further, as described in claim 5, the storage means stores the image of the key to be pressed this time and the image of the key to be pressed next time as different images as information for designating the key to be pressed. In addition, the image of the finger used for the key depression as the image of the hand shape and the image of the other finger may be stored as different images.
【0013】さらに、請求項6に記載するように、前記
表示手段は、カラー表示が可能で、前記記憶手段は、前
記押鍵する鍵を指定する情報としての今回押鍵する鍵の
映像と次回押鍵する鍵の映像を異なる色の映像として記
憶するとともに、前記手の形の映像としての押鍵に使用
する指の映像と他の指の映像を異なる色の映像として記
憶するものであってもよい。Further, as described in claim 6, the display means is capable of color display, and the storage means is an image of the key to be pressed this time and the next time as the information for designating the key to be pressed. An image of a key to be pressed is stored as an image of a different color, and an image of a finger used to press the key as the image of the hand and an image of another finger are stored as images of different colors. Good.
【0014】[0014]
【作用】本発明によれば、演奏曲の進行に合わせて、少
なくとも該演奏曲に対応した運指情報を含む手の形及び
押鍵する鍵を指定する情報からなる演奏指示映像を表示
手段に表示出力するので、押鍵する鍵及び指運びを含む
手の形等を視点を移動することなく、演奏イメージその
ままで演奏誘導することができ、演奏練習の効率を向上
させることができる。According to the present invention, in accordance with the progress of a musical piece to be played, a playing instruction image consisting of at least a hand shape including fingering information corresponding to the musical piece and information for designating a key to be pressed is displayed on the display means. Since the information is displayed and output, it is possible to guide the performance of the key to be pressed and the shape of the hand including the finger movement without moving the viewpoint, and to improve the performance of the performance practice as it is.
【0015】また、撮影手段により撮影した少なくとも
鍵盤、鍵盤上の手及び指からなる演奏の実映像を演奏指
示映像と重ね合わせて表示出力させているので、実際の
指運びを含む手の形を演奏指示映像と比較しながら練習
することができ、より一層練習効率を向上させることが
できる。Further, since the actual image of the performance consisting of at least the keyboard, the hand and the fingers on the keyboard taken by the imaging means is superposed on the performance instruction image and displayed and outputted, the shape of the hand including the actual finger movement can be displayed. You can practice while comparing with the performance instruction video, and you can further improve the practice efficiency.
【0016】さらに、表示手段に表示されている実映像
の鍵盤の大きさに合わせて、演奏指示映像の鍵盤の映像
の大きさや位置を調整しているので、実際の鍵盤の大き
さや鍵数に合わせて、演奏指示映像を調整することがで
き、種々のタイプの鍵盤楽器に適用することができる。Furthermore, since the size and position of the keyboard image of the performance instruction image are adjusted according to the keyboard size of the actual image displayed on the display means, the actual keyboard size and number of keys can be adjusted. In addition, the performance instruction image can be adjusted and applied to various types of keyboard musical instruments.
【0017】また、今回押鍵する鍵と次回押鍵する鍵と
を色を変える等の異なる映像として表示出力させるとと
もに、押鍵に使用する指と他の指とを色を変える等の異
なる映像として表示出力させているので、指運びや次に
押鍵する鍵等をより一層分かり易くすることができ、よ
り一層練習効率を向上させることができる。Further, the key to be pressed this time and the key to be pressed next time are displayed and output as different images such as different colors, and different images such as changing the colors of the finger used for key depression and other fingers. Since it is displayed and displayed as, it is possible to make it easier to understand the finger movement, the key to be pressed next, and the like, and it is possible to further improve the practice efficiency.
【0018】[0018]
【実施例】以下、実施例に基づいて具体的に説明する。[Examples] Specific examples will be described below.
【0019】図1〜図12は、本発明の演奏誘導装置の
一実施例を示す図である。1 to 12 are views showing an embodiment of the performance guidance device of the present invention.
【0020】図1は、その演奏誘導装置1を適用したシ
ステム構成図であり、演奏誘導装置1は、本体2、カメ
ラ3及び表示部4等を備えている。FIG. 1 is a system configuration diagram to which the performance guide device 1 is applied. The performance guide device 1 includes a main body 2, a camera 3, a display unit 4, and the like.
【0021】表示部4の前には、鍵盤楽器5が設置され
ており、練習者6が鍵盤楽器5の練習を行う。A keyboard instrument 5 is installed in front of the display unit 4, and a practitioner 6 practices the keyboard instrument 5.
【0022】鍵盤楽器5には、複数の黒鍵と白鍵から成
る鍵盤7が設けられている。The keyboard instrument 5 is provided with a keyboard 7 composed of a plurality of black keys and white keys.
【0023】本体2には、操作部8が設けられており、
操作部8には、テンポを上げたりあるいは下げたり調整
するためのテンポキー9a、9b、後述する演奏練習す
る曲の演奏指示映像の逆戻しを行う逆戻しキー10a、
演奏指示映像の停止を行うストップキー10b、演奏指
示映像の一時停止を行う一時停止キー10c、演奏指示
映像の動作開始を行うプレイキー10d及び演奏指示映
像の早送りを行う早送りキー10e等の制御キーが設け
られているとともに、アジャスト(ADJUST)キー
として、後述する演奏指示映像の位置や倍率を調整する
カーソルキー11及びこのカーソルキー11により調整
する演奏指示映像のモードを設定するポジション(PO
SITION)キー12とズーム(ZOOM)キー13
等が設けられている。The main body 2 is provided with an operating portion 8,
The operation section 8 includes tempo keys 9a and 9b for adjusting the tempo up and down, a reverse key 10a for reversely returning a performance instruction image of a music to be practiced, which will be described later.
Control keys such as a stop key 10b for stopping the performance instruction image, a pause key 10c for temporarily stopping the performance instruction image, a play key 10d for starting the operation of the performance instruction image, and a fast-forward key 10e for fast-forwarding the performance instruction image. Is provided, and as an ADJUST key, a cursor key 11 for adjusting the position and magnification of a performance instruction image, which will be described later, and a position (PO) for setting the mode of the performance instruction image adjusted by the cursor key 11.
SITION key 12 and ZOOM key 13
Etc. are provided.
【0024】カメラ3としては、例えば、通常のビデオ
カメラが使用されており、カメラ3は、鍵盤楽器5上に
設けられて、鍵盤楽器5の鍵盤7及び鍵盤7を演奏する
練習者6の手や指を映し出す。カメラ3は、映し出した
実映像をケーブル14を介して本体2に出力する。As the camera 3, for example, an ordinary video camera is used, and the camera 3 is provided on the keyboard instrument 5 and the keyboard 7 of the keyboard instrument 5 and the hands of the practitioner 6 playing the keyboard 7. Or show your finger. The camera 3 outputs the projected real image to the main body 2 via the cable 14.
【0025】表示部4としては、例えば、通常のカラー
テレビ受像器が使用されており、表示部4には、本体2
からケーブル15を介してカメラ3の撮影した実映像
と、本体2が生成する演奏指示映像が入力される。表示
部4は、後述するように、その画面4aに本体2から入
力される実映像と演奏指示映像を重ね合わせて表示出力
する。As the display unit 4, for example, a normal color television receiver is used, and the display unit 4 has a main body 2
From the above, the actual image captured by the camera 3 and the performance instruction image generated by the main body 2 are input via the cable 15. As will be described later, the display unit 4 superimposes the actual image input from the main body 2 and the performance instruction image on the screen 4a, and outputs the superimposed image.
【0026】本体2は、図2に示すように、回路構成さ
れており、演奏指示画像記憶部20、正規化部21、エ
ンコーダ22、画像合成部23及びCPU(Central Pr
ocessing Unit) 24等を備えている。このCPU24
に操作部8の各キーが接続されており、画像合成部23
にカメラ3及び表示部4が接続されている。As shown in FIG. 2, the main body 2 has a circuit structure and includes a performance instruction image storage unit 20, a normalization unit 21, an encoder 22, an image synthesis unit 23, and a CPU (Central Pr.
Ocessing Unit) 24 etc. This CPU 24
Each key of the operation unit 8 is connected to the
The camera 3 and the display unit 4 are connected to.
【0027】演奏指示画像記憶部20は、演奏指示情報
を演奏曲毎に複数記憶しており、この演奏指示情報とし
ては、押鍵位置情報、押鍵順序情報、演奏する指の運
び、すなわち運指情報を含む押鍵する手の映像及び当該
曲のテンポ情報等を記憶している。The performance instruction image storage unit 20 stores a plurality of performance instruction information for each music piece to be played. As the performance instruction information, key pressing position information, key pressing order information, carrying of a finger to be played, that is, luck. The image of the hand of the key to be pressed including the finger information, the tempo information of the song, and the like are stored.
【0028】例えば、演奏指示画像記憶部20は、演奏
指示情報として、今回押鍵すべき鍵及び次回押鍵すべき
鍵を表示部4に表示出力するための鍵の映像を記憶して
おり、この鍵の映像としては、白鍵の各形状に対応した
鍵の映像及び黒鍵の形状に対応した鍵の映像をそれぞれ
記憶している。For example, the performance instruction image storage unit 20 stores, as the performance instruction information, a video image of a key for displaying and outputting the key to be pressed this time and the key to be pressed next time on the display unit 4, As the key image, a key image corresponding to each shape of the white key and a key image corresponding to the shape of the black key are stored.
【0029】また、演奏指示画像記憶部20は、演奏指
示情報として、今回押鍵すべき鍵や次回押鍵すべき鍵を
カメラ3の映像の鍵盤7の鍵の位置に対応させて表示部
4に表示させるための押鍵位置情報及び今回押鍵すべき
鍵と次回押鍵すべき鍵とを区別するための押鍵順序情
報、例えば、図3に示すように、今回押鍵する鍵(図3
中左側の鍵)には、赤色(図3中では、薄いハッチング
で表示)を、次回押鍵する押鍵する鍵(図3中右側の
鍵)には、青色(図3中では、濃いハッチングで表示)
を、記憶している。Further, the performance instruction image storage unit 20 stores, as the performance instruction information, the key to be pressed this time or the key to be pressed next time in correspondence with the position of the key of the keyboard 7 of the image of the camera 3 on the display unit 4. Key pressing position information to be displayed on the screen and key pressing order information for distinguishing between the key to be pressed this time and the key to be pressed next time, for example, as shown in FIG. Three
The middle left key is red (indicated by light hatching in FIG. 3), and the next key to be pressed (right key in FIG. 3) is blue (dark hatching in FIG. 3). (Displayed with)
I remember.
【0030】さらに、演奏指示画像記憶部20は、図4
から図6に示すように、演奏指示映像31として、運指
情報を含む手の形の映像を記憶しており、またどの指で
現在押鍵するかを当該手の形の映像の指の色を他の待機
する指の色と異ならせて表示する押鍵指情報を記憶して
いる。特に、演奏曲に適切な指の運びを示すために、図
5及び図6に示すように、各運指毎に手の指の形の映像
を記憶している。この場合にも、どの指で押鍵するかを
指の色を他の指の色と異ならせることにより表示する。
なお、図5は、いわゆる指くぐりといわれる運指であ
り、親指(1指)が人差し指(2指)をかいくぐって押
鍵するものである。そして、図6は、いわゆる指ごえと
いわれる運指であり、中指(3指)が人差し指及び親指
を飛び越えて押鍵するものである。Further, the performance instruction image storage section 20 is shown in FIG.
As shown in FIG. 6, a hand-shaped image including fingering information is stored as the performance instruction image 31, and the finger color of the hand-shaped image indicates which finger is currently pressed. It stores the key-depression finger information that is displayed in a different color from that of the other waiting fingers. In particular, in order to show the proper finger movement for a musical piece, as shown in FIGS. 5 and 6, a finger-shaped image is stored for each finger. Also in this case, which finger is used to indicate the key is displayed by making the color of the finger different from the color of the other fingers.
Note that FIG. 5 shows a so-called finger-passing, in which a thumb (1 finger) goes through an index finger (2 fingers) to press a key. FIG. 6 shows a so-called fingering, in which the middle finger (three fingers) jumps over the index finger and thumb and presses the key.
【0031】そして、演奏指示画像記憶部20は、上記
演奏指示情報のうち演奏指示映像31、例えば、上記押
鍵する指を表示する手の映像を、例えば、コンピュータ
グラフィックスによる映像として演奏曲毎に複数曲分記
憶しており、演奏曲が選択されると、CPU24が、当
該演奏曲に対応した映像を順次読み出して、表示部4に
表示出力させる。Then, the performance instruction image storage section 20 uses the performance instruction image 31 of the performance instruction information, for example, the image of the hand displaying the finger to be depressed as an image by computer graphics for each song. When a performance song is selected, the CPU 24 sequentially reads out images corresponding to the performance song and causes the display unit 4 to display and output.
【0032】また、演奏指示画像記憶部20は、演奏指
示情報を最小テンポクロック毎に記憶しており、CPU
24は、テンポクロックの割り込みが入る毎に、演奏指
示画像記憶部20から演奏指示情報を読み出して、その
うちの演奏指示映像31を表示部4に表示出力させる。
したがって、演奏誘導装置1は、テンポクロックによ
り、演奏誘導処理の進行を制御し、後述するポーズ処
理、ストップ処理及びプレイ処理等をこのテンポクロッ
クの割り込みを禁止するか許可するかにより、制御して
いる。The performance instruction image storage unit 20 stores performance instruction information for each minimum tempo clock, and the CPU
Each time the tempo clock interrupt occurs, the unit 24 reads the performance instruction information from the performance instruction image storage unit 20 and causes the display unit 4 to display and output the performance instruction image 31.
Therefore, the performance guidance device 1 controls the progress of the performance guidance process by the tempo clock, and controls the pause process, stop process, play process, and the like, which will be described later, depending on whether the tempo clock interrupt is prohibited or permitted. There is.
【0033】なお、演奏指示画像記憶部20に記憶する
映像としては、上記押鍵する鍵を表示する情報及び手の
映像をその基本パターンの映像のみ記憶して、曲に合わ
せて順次その基本パターンの映像の読出順序を変更させ
るようにしてもよい。演奏指示画像記憶部20が上記基
本パターンの映像のみ記憶する場合には、曲毎に押鍵情
報と運指の手順を示す情報を演奏指示画像記憶部20に
記憶し、この押鍵情報と運指の手順を示す情報に基づい
て、CPU24が基本パターンを演奏指示画像記憶部2
0から読み出す。As the image stored in the performance instruction image storage section 20, only the information of the key to be pressed and the image of the hand are stored, and only the image of the basic pattern is stored, and the basic pattern is sequentially stored according to the music. The video reading order may be changed. When the performance instruction image storage unit 20 stores only the image of the basic pattern, key pressing information and information indicating a fingering procedure are stored in the performance instruction image storage unit 20 for each music, and the key pressing information and the key operation information are stored. Based on the information indicating the procedure of the finger, the CPU 24 sets the basic pattern to the performance instruction image storage unit 2.
Read from 0.
【0034】上記演奏指示画像記憶部20から読み出さ
れた演奏指示映像31は、正規化部21に出力され、正
規化部21は、図8及び図9に示すように、演奏指示画
像記憶部20から読み出された演奏指示映像31をCP
U24からの指示に基づいてカメラ3で撮影された実映
像30と一致させるためのトリミングと縦横倍率を変更
することによりその縮尺や位置を調整して、エンコーダ
22に出力する。The performance instruction image 31 read out from the performance instruction image storage unit 20 is output to the normalization unit 21, which normalizes the performance instruction image storage unit as shown in FIGS. 8 and 9. CP of the performance instruction image 31 read from 20
Based on an instruction from U24, the scale and position are adjusted by changing the trimming and vertical / horizontal magnification for matching with the actual video image 30 captured by the camera 3, and output to the encoder 22.
【0035】すなわち、演奏指示画像記憶部20には、
例えば、図8及び図9に示すような61鍵の標準鍵用の
鍵盤の輪郭を示す鍵盤線画像32が記憶されており、こ
の鍵盤線画像32が61鍵を表示部4の表示画面4a全
体に表示出力する映像である場合、図1に示した鍵盤楽
器5の鍵盤7が、図7に示すように、49鍵の標準鍵で
あり、この鍵盤7を表示部4の表示画面4a全体に表示
する倍率にカメラ3が設置されていると、図8に示すよ
うに、実映像30と演奏指示画像記憶部20からの鍵盤
線画像32は、その倍率や鍵位置が異なることとなる。That is, the performance instruction image storage unit 20 is
For example, as shown in FIGS. 8 and 9, there is stored a keyboard line image 32 showing the outline of the keyboard for 61 standard keys, and this keyboard line image 32 indicates 61 keys as a whole of the display screen 4a of the display unit 4. 1 is a standard key of 49 keys, as shown in FIG. 7, and this keyboard 7 is displayed on the entire display screen 4a of the display unit 4. If the camera 3 is installed at the magnification to be displayed, as shown in FIG. 8, the magnification and the key position of the real image 30 and the keyboard line image 32 from the performance instruction image storage unit 20 are different.
【0036】そこで、鍵盤線画像32全体を、49/6
1倍し、C4鍵の位置を実映像30のC4鍵の位置に合
わせる必要がある。また、実映像30が49鍵であって
も、標準鍵ではなく、ミニ鍵盤である場合には、さら
に、鍵盤線画像32の縦横比を調整する必要がある。Therefore, the entire keyboard line image 32 is 49/6.
It is necessary to multiply by 1 to match the position of the C4 key with the position of the C4 key of the real video 30. Further, even if the actual image 30 has 49 keys, if it is not the standard key but the mini keyboard, it is necessary to further adjust the aspect ratio of the keyboard line image 32.
【0037】そのため、正規化部21は、演奏指示画像
記憶部20から入力される鍵盤線画像32をCPU24
からの指示に基づいて位置調整及び倍率調整し、図9に
示すように、鍵盤線画像32を実映像30に一致させる
調整処理を行う。Therefore, the normalization unit 21 uses the keyboard line image 32 input from the performance instruction image storage unit 20 as the CPU 24.
The position adjustment and the magnification adjustment are performed based on the instruction from, and the adjustment processing for matching the keyboard line image 32 with the actual image 30 is performed as shown in FIG.
【0038】このとき、CPU24は、操作部8からの
操作信号に基づいて正規化部21に鍵盤線画像32の調
整指示を行う。At this time, the CPU 24 instructs the normalization section 21 to adjust the keyboard line image 32 based on the operation signal from the operation section 8.
【0039】このようにして位置調整及び倍率調整が行
われると、その調整データが正規化部21に設定され、
以降、正規化部21は、この設定された調整データに基
づいて演奏指示画像記憶部20からの演奏指示映像31
を正規化して、エンコーダ22に出力する。When the position adjustment and the magnification adjustment are performed in this way, the adjustment data is set in the normalizing section 21,
After that, the normalization unit 21 performs the performance instruction image 31 from the performance instruction image storage unit 20 based on the set adjustment data.
Is normalized and output to the encoder 22.
【0040】エンコーダ22は、正規化部21から入力
されるディジタルの演奏指示映像31をビデオ信号に変
換し、画像合成部23に出力する。The encoder 22 converts the digital performance instruction image 31 input from the normalization unit 21 into a video signal and outputs it to the image synthesis unit 23.
【0041】画像合成部23には、さらに、カメラ3の
撮影した鍵盤楽器5の鍵盤7の実画像30が入力されて
おり、画像合成部23は、実画像30にエンコーダ22
から入力される演奏指示映像31をスーパーインポーズ
等により合成して、表示部4に出力する。An actual image 30 of the keyboard 7 of the keyboard instrument 5 taken by the camera 3 is further input to the image synthesizing section 23, and the image synthesizing section 23 converts the actual image 30 into an encoder 22.
The performance instruction image 31 input from the is synthesized by superimposing or the like and output to the display unit 4.
【0042】表示部4は、画像合成部23から入力され
るビデオ映像をその表示画面4aに表示出力する。The display unit 4 displays and outputs the video image input from the image synthesizing unit 23 on its display screen 4a.
【0043】CPU24は、ROM(Read Only Memor
y)やRAM(Random Access Memory)等を備え、RO
M内には演奏誘導装置1としてのプログラムや各種シス
テムデータが予め格納されている。CPU24は、RA
Mをワークメモリとして使用して、操作部8の操作に応
じて、正規化部21による正規化処理を行ったり、RO
M内のプログラムに従って演奏誘導装置1の各部を制御
し、演奏誘導処理を行う。The CPU 24 is a ROM (Read Only Memory).
y), RAM (Random Access Memory), etc.
A program as the performance guide device 1 and various system data are stored in advance in M. CPU 24 is RA
Using M as a work memory, the normalization processing is performed by the normalization unit 21 according to the operation of the operation unit 8, and RO
Each part of the performance guidance device 1 is controlled according to the program in M to perform performance guidance processing.
【0044】次に、作用を説明する。Next, the operation will be described.
【0045】演奏誘導装置1は、鍵盤の映像及び運指情
報を含む手の形の映像等の演奏指示映像31を表示部4
に表示出力することにより、演奏誘導し、特に、本実施
例の演奏誘導装置1は、演奏指示映像31をカメラ3の
撮影した鍵盤楽器5の鍵盤7の実映像30に重ねて映し
出すことにより演奏誘導するところにその特徴がある。The performance guidance device 1 displays a performance instruction image 31 such as a keyboard image and a hand-shaped image including fingering information on the display unit 4.
The performance guidance apparatus 1 of the present embodiment performs the performance guidance by displaying and outputting the performance instruction video 31 on the real picture 30 of the keyboard 7 of the keyboard musical instrument 5 captured by the camera 3. There is a feature in guiding.
【0046】以下、この演奏誘導処理について図10及
び図11のフローチャートに基づいて説明する。The performance guidance process will be described below with reference to the flowcharts of FIGS. 10 and 11.
【0047】演奏誘導装置1は、電源が投入されると、
各種レジスタのクリア等の初期化処理を行った後、制御
キーがオンかどうかチェックし(ステップS1)、オフ
のときには、操作部8のカーソルキー11を走査して、
カーソルキー11からの入力信号があるかどうかによ
り、カーソルキー11が操作されたかどうかチェックす
る(ステップS2)。When the power is turned on, the performance guiding device 1
After performing initialization processing such as clearing various registers, it is checked whether or not the control key is on (step S1). When the control key is off, the cursor key 11 of the operation unit 8 is scanned,
Whether or not the cursor key 11 has been operated is checked depending on whether or not there is an input signal from the cursor key 11 (step S2).
【0048】ステップS2で、カーソルキー11が操作
されていないときには、ステップS1に戻って、停止中
かどうかチェックする。When the cursor key 11 is not operated in step S2, the process returns to step S1 and it is checked whether or not it is stopped.
【0049】ステップS2で、カーソルキー11が操作
されたときには、演奏指示映像31、特に、鍵盤線画像
32の出力指示を行い(ステップS3)、演奏指示画像
記憶部20から鍵盤線画像32を読み出して、正規化部
21、エンコーダ22及び画像合成部23を介して表示
部4に表示出力する。When the cursor key 11 is operated in step S2, an instruction to output the performance instruction image 31, particularly the keyboard line image 32 is issued (step S3), and the keyboard line image 32 is read from the performance instruction image storage unit 20. Then, it is displayed and output to the display unit 4 via the normalization unit 21, the encoder 22, and the image synthesis unit 23.
【0050】鍵盤線画像32の出力指示を行うと、操作
部8を走査して、モード設定がポジションであるかズー
ムであるかをポジションキー12とズームキー13のい
ずれが投入されているかを走査することによりチェック
し(ステップS4)、ポジションモードであると、操作
部8のカーソルキー11の操作に対応した方向で、かつ
カーソルキー11の操作に対応した量だけ、鍵盤線画像
32の中心位置を移動して、中心位置データを更新する
(ステップS5)。When the keyboard line image 32 is instructed to be output, the operation unit 8 is scanned to determine whether the mode setting is position or zoom and which of the position key 12 and the zoom key 13 is turned on. By doing so (step S4), in the position mode, the center position of the keyboard line image 32 is moved in the direction corresponding to the operation of the cursor key 11 of the operation unit 8 and by the amount corresponding to the operation of the cursor key 11. It moves to update the center position data (step S5).
【0051】そして、この更新した演奏指示映像31の
中心位置データを正規化部21にセットして、ステップ
S1に戻る(ステップS6)。Then, the center position data of the updated performance instruction image 31 is set in the normalizing section 21, and the process returns to step S1 (step S6).
【0052】一方、ステップS4で、ズームモードであ
ると、操作部8のカーソルキー11の操作に基づいて鍵
盤線画像32の倍率データを更新し(ステップS7)、
この更新した倍率データを正規化部21にセットして、
ステップS1に戻る(ステップS6)。On the other hand, if it is the zoom mode in step S4, the magnification data of the keyboard line image 32 is updated based on the operation of the cursor key 11 of the operation unit 8 (step S7),
Set the updated magnification data in the normalization unit 21,
The process returns to step S1 (step S6).
【0053】すなわち、演奏誘導処理が停止していると
きには、ポジションキー12あるいはズームキー13に
よりモード選択され、カーソルキー11が投入される
と、そのときのモードに応じて、表示部4に表示出力す
る演奏指示映像31の中心位置を変更し、あるいは演奏
指示映像31の倍率を変更する。That is, when the performance guidance process is stopped, the mode is selected by the position key 12 or the zoom key 13, and when the cursor key 11 is pressed, the display is output on the display unit 4 according to the mode at that time. The center position of the performance instruction image 31 is changed, or the magnification of the performance instruction image 31 is changed.
【0054】したがって、図8に示したように、カメラ
3で撮影した鍵盤7の実映像30と演奏指示映像31、
特に、鍵盤線画像32とが合わないときに、カーソルキ
ー11及びポジションキー12とズームキー13を操作
することにより、演奏指示映像31の表示部4の表示画
面4a上での位置や大きさを調整し、実映像30に一致
させることができる。また、この設定した演奏指示映像
31の中心位置及び倍率を正規化部21にセットして、
以降の正規化処理を自動的に行わせることができる。Therefore, as shown in FIG. 8, the actual image 30 of the keyboard 7 and the performance instruction image 31, which are taken by the camera 3,
In particular, when the keyboard line image 32 does not match, the cursor key 11, the position key 12 and the zoom key 13 are operated to adjust the position and size of the performance instruction image 31 on the display screen 4a of the display unit 4. However, it can be matched with the real image 30. Further, the center position and the magnification of the performance instruction image 31 thus set are set in the normalizing section 21,
The subsequent normalization processing can be automatically performed.
【0055】このように、表示部4に表示されている実
映像30の鍵盤7の大きさに合わせて、図8及び図9に
示したように、演奏指示映像31の鍵盤の映像の大きさ
や位置を調整することができるので、実際の鍵盤7の大
きさや鍵数及び鍵盤7のタイプに合わせて、演奏指示映
像31を調整することができ、種々のタイプの鍵盤楽器
5に適用することができる。As described above, in accordance with the size of the keyboard 7 of the actual image 30 displayed on the display unit 4, as shown in FIGS. 8 and 9, the size of the keyboard image of the performance instruction image 31 and the like. Since the position can be adjusted, the performance instruction image 31 can be adjusted according to the actual size of the keyboard 7, the number of keys, and the type of the keyboard 7, and it can be applied to various types of keyboard instruments 5. it can.
【0056】このようにして、演奏指示映像31の位置
調整と倍率調整という正規化処理が完了し、ステップS
1で、制御キーがオンされていると、制御キーとしてテ
ンポキー9a、9b、プレイキー10d、ポーズキー1
0cあるいはストップキー10bのいずれがオンされて
いるかをチェックする(ステップS8、S9)。In this way, the normalization processing of position adjustment and magnification adjustment of the performance instruction image 31 is completed, and step S
When the control key is turned on in 1, the tempo keys 9a and 9b, the play key 10d, and the pause key 1 are used as control keys.
It is checked which of 0c and the stop key 10b is turned on (steps S8 and S9).
【0057】テンポキー9a、9bが投入されると、テ
ンポキー9a、9bとしてテンポを上げるテンポキー9
aが投入されたか、テンポを下げるテンポキー9bが投
入されたかに応じて、すなわち、テンポの+/−に応じ
て、テンポデータを変更し、ステップS1に戻る(ステ
ップS10)。When the tempo keys 9a and 9b are turned on, the tempo keys 9a and 9b are used to increase the tempo.
The tempo data is changed according to whether a is input or the tempo key 9b for decreasing the tempo is input, that is, according to +/- of the tempo, and the process returns to step S1 (step S10).
【0058】すなわち、演奏指示画像記憶部20には、
上述のように、演奏曲に対応した演奏指示情報がテンポ
毎記憶されており、CPU24は、テンポクロックに同
期して、演奏指示情報を読み出して、演奏誘導してい
る。そこで、このテンポクロックの発生タイミングを上
記処理により調整して、演奏誘導のテンポを調整してい
る。That is, the performance instruction image storage unit 20 stores
As described above, the performance instruction information corresponding to the performance music is stored for each tempo, and the CPU 24 reads the performance instruction information in synchronization with the tempo clock to guide the performance. Therefore, the tempo for performance guidance is adjusted by adjusting the timing of generation of this tempo clock by the above processing.
【0059】次に、ステップS9で、投入されたキーが
ストップキー10b、ポーズキー10cあるいはプレイ
キー10dのいずれであるかにより、演奏指示画像記憶
部20から演奏指示映像31を読み出すための再生ポイ
ンタの位置や演奏誘導処理の進行を制御するテンポクロ
ックの割り込みを制御することにより、各投入されたキ
ーに対応した処理を行う(ステップS11〜S13)。Next, in step S9, a reproduction pointer for reading the performance instruction image 31 from the performance instruction image storage section 20 is selected depending on whether the input key is the stop key 10b, the pause key 10c or the play key 10d. By controlling the interruption of the tempo clock that controls the position and the progress of the performance guidance process, the process corresponding to each inserted key is performed (steps S11 to S13).
【0060】すなわち、ストップキー10bが投入され
たときには、再生ポインタを停止状態にリセットし(ス
テップS11)、テンポクロックの割り込みを禁止し
て、ステップS1に戻る(ステップS12)。すなわ
ち、ストップキー10bが投入されたときには、再生ポ
インタを当該演奏曲の演奏指示情報の先頭アドレスに戻
し、次にプレイキー10dが投入されたときに当該演奏
曲の最初の演奏指示情報から演奏誘導処理を行えるよう
にするとともに、テンポクロックの割り込みを禁止し
て、演奏指示映像31の進行を停止する。That is, when the stop key 10b is pressed, the reproduction pointer is reset to the stopped state (step S11), the tempo clock interrupt is prohibited, and the process returns to step S1 (step S12). That is, when the stop key 10b is pressed, the playback pointer is returned to the start address of the performance instruction information of the performance song, and when the play key 10d is next pressed, performance guidance is started from the first performance instruction information of the performance song. The processing is enabled, the tempo clock interrupt is prohibited, and the progress of the performance instruction image 31 is stopped.
【0061】また、ステップS9で、ポーズキー10c
が投入されたときには、再生ポインタは、そのままの位
置に保持したまま、テンポクロックの割り込みのみを禁
止して、ステップS1に戻る(ステップS12)。すな
わち、ポーズキー10cが投入されたときに、再生ポイ
ンタをそのままにして、次に、プレイキー10dが投入
されたときには、ポーズキー10cが投入された時点で
停止した当該演奏曲の演奏指示映像31の位置から演奏
誘導処理を行えるようにするとともに、テンポクロック
の割り込みを禁止して、演奏指示映像31の進行を停止
する。In step S9, the pause key 10c
When is input, only the tempo clock interrupt is prohibited while the reproduction pointer is held at the same position, and the process returns to step S1 (step S12). That is, when the pause key 10c is turned on, the reproduction pointer is left as it is, and when the play key 10d is next turned on, the position of the performance instruction image 31 of the performance song stopped when the pause key 10c is turned on. Then, the performance guidance process is performed, the tempo clock interruption is prohibited, and the progress of the performance instruction image 31 is stopped.
【0062】さらに、ステップS9で、プレイキー10
dが投入されたときには、ポーズやストップ等により停
止していたテンポクロックの割り込みの禁止を解除し
て、ステップS1に戻る(ステップS13)。Further, in step S9, the play key 10
When d is turned on, the prohibition of the tempo clock interrupt that has been stopped due to a pause or stop is released, and the process returns to step S1 (step S13).
【0063】すなわち、プレイキー10dが投入された
ときには、テンポクロックの割り込みを許可し、そのと
き再生ポインタの位置するアドレスの演奏指示映像31
を演奏指示画像記憶部20から読み出して、正規化部2
1、エンコーダ22及び画像合成部23を介して表示部
4に出力し、表示部4の表示画面4aに演奏指示映像3
1をカメラ3からの実映像30に重ねて表示出力させ
る。That is, when the play key 10d is turned on, the interruption of the tempo clock is permitted, and at that time, the performance instruction image 31 of the address where the reproduction pointer is located.
Is read from the performance instruction image storage unit 20, and the normalization unit 2
1, output to the display unit 4 via the encoder 22 and the image synthesizing unit 23, and the performance instruction image 3 is displayed on the display screen 4a of the display unit 4.
1 is displayed on the actual image 30 from the camera 3 and output.
【0064】このテンポクロックの割り込みが許可され
ると、CPU24は、図11に割り込み処理のフローチ
ャートとして示すように、再生ポインタを演奏指示画像
記憶部20に出力するという割り込み処理を行い(ステ
ップT1)、演奏指示画像記憶部20から当該再生ポイ
ンタに対応する演奏指示情報を読み出して、演奏誘導を
行う。When this tempo clock interrupt is permitted, the CPU 24 performs an interrupt process of outputting a reproduction pointer to the performance instruction image storage section 20 as shown in a flowchart of the interrupt process in FIG. 11 (step T1). The performance instruction information corresponding to the reproduction pointer is read from the performance instruction image storage unit 20 to guide the performance.
【0065】上記表示部4には、図12に示すように、
鍵盤楽器5の鍵盤7の実映像30に、押鍵する鍵の映
像、運指を示す手の形の映像及び今回押鍵する鍵や次回
押鍵する鍵の映像等の演奏指示映像31が重ね合わされ
て表示出力される。すなわち、図7に示した鍵盤7や鍵
盤7上で押鍵している練習者の手等の実映像30に、図
3から図6及び図9に示した演奏指示映像31を重ね合
わせた映像が順次演奏曲の進行に合わせて、表示部4に
表示され、この演奏曲の進行をテンポキー9a、9bに
より調整することができる。On the display unit 4, as shown in FIG.
The actual image 30 of the keyboard 7 of the keyboard instrument 5 is overlaid with the image of the key to be pressed, the image of the shape of a hand showing fingering, and the performance instruction image 31 such as the image of the key to be pressed this time or the key to be pressed next time. Are displayed and output. That is, an image in which the performance image 30 shown in FIG. 3 to FIG. 6 and FIG. 9 is superimposed on the actual image 30 such as the keyboard 7 shown in FIG. Are sequentially displayed on the display unit 4 in accordance with the progress of the musical composition, and the progress of the musical composition can be adjusted by the tempo keys 9a and 9b.
【0066】したがって、演奏誘導装置1は、表示部4
の表示により、演奏曲の進行に合わせて、現在押鍵する
鍵や次に押鍵する鍵を知らせることができるだけでな
く、どの指を使用して、どのような指運びをして押鍵す
ればよいかを知らせることができ、演奏イメージそのま
まで演奏誘導することができる。その結果、演奏練習の
効率を向上させることができる。Therefore, the performance guidance device 1 has the display unit 4
Not only can you tell which key is currently pressed or which key is to be pressed as the playing song progresses, but also which finger is used, what kind of finger movement is performed and the key is pressed. You can let them know what you want to do, and you can guide the performance without changing the performance image. As a result, the efficiency of performance practice can be improved.
【0067】また、実映像30と重ね合わせて演奏指示
映像31を表示出力させているので、実際の指運びや手
の形等を演奏指示映像31と比較しながら練習すること
ができ、より一層練習効率を向上させることができる。Further, since the performance instruction image 31 is displayed and output so as to be superimposed on the real image 30, it is possible to practice while comparing the actual finger movements and the shape of the hand with the performance instruction image 31. Practice efficiency can be improved.
【0068】また、表示部4として、カラーテレビ受像
器を使用し、今回押鍵する鍵と次回押鍵する鍵とを色を
換えて表示出力するとともに、押鍵に使用する指を他の
指とは色を換えて表示出力しているので、指運びや次に
押鍵する鍵等をより一層分かり易くすることができ、よ
り一層練習効率を向上させることができる。As the display unit 4, a color television receiver is used, and the key to be pressed this time and the key to be pressed next time are displayed in different colors, and the finger used for key pressing is changed to another finger. Since the display is output with the color changed, it is possible to make it easier to understand the finger movement, the key to be pressed next, and the like, and it is possible to further improve the practice efficiency.
【0069】なお、上記実施例においては、演奏指示画
像記憶部20に、コンピュータグラフィックスによる映
像を記憶しているが、これに限るものではなく、例え
ば、見本となる実際の演奏を撮影したビデオ映像をデジ
タイズしたものに、押鍵指を指示する情報(指の色を変
える等の情報)等の各種演奏指示情報を付加したもので
あってもよい。この場合、演奏指示映像31を実映像3
0にインポーズした際、より自然な映像となり、指運び
等をより一層分かり易いものとすることができる。In the above embodiment, the performance instruction image storage unit 20 stores the computer graphics image, but the present invention is not limited to this. For example, a video of an actual performance as a sample is taken. It is also possible to add various performance instruction information such as information for instructing a key to be pressed (information for changing the color of the finger) to the digitized image. In this case, the performance instruction image 31 is changed to the actual image 3
When the image is placed at 0, the image becomes more natural, and the finger movement can be more easily understood.
【0070】また、上記実施例においては、演奏指示画
像記憶部20に押鍵する鍵や運指情報を含む手の形及び
押鍵する鍵等の映像を演奏指示情報として記憶している
が、演奏指示情報としては、これらのみに限るものでは
なく、例えば、演奏曲の譜面や押鍵の強弱に関する情報
等をも記憶するようにしてもよい。この場合、これらの
譜面や押鍵の強弱情報をも、表示部4に同時に表示する
ようにすると、より一層効果的な演奏練習を行うことが
できる。In the above embodiment, the performance instruction image storage unit 20 stores, as the performance instruction information, the image of the key to be depressed, the shape of the hand including the fingering information, and the key to be depressed. The performance instruction information is not limited to these, and for example, information on the musical score of the musical composition, the strength of key depression, and the like may be stored. In this case, if the musical score and the strength of key depression are also displayed on the display unit 4 at the same time, more effective performance practice can be performed.
【0071】[0071]
【発明の効果】本発明によれば、押鍵する鍵及び押鍵す
る指や指運びを含む手の形等の演奏指示映像を演奏イメ
ージそのままで表示出力して演奏誘導することができる
ので、演奏練習の効率を向上させることができる。According to the present invention, since the performance instruction image such as the key to be depressed and the shape of the finger to be depressed or the shape of the hand including the finger movement can be displayed and output as the performance image as it is, it is possible to guide the performance. The efficiency of performance practice can be improved.
【0072】また、鍵盤や鍵盤上の手及び指等の演奏実
映像を演奏指示映像と重ね合わせて表示出力させている
ので、実際の指運びを含む手の形等を演奏指示映像と比
較しながら練習することができ、より一層練習効率を向
上させることができる。Further, since the actual performance image of the keyboard and the hands and fingers on the keyboard is displayed and output in combination with the performance instruction image, the shape of the hand including the actual finger movement is compared with the performance instruction image. While practicing, you can further improve your practice efficiency.
【0073】さらに、表示されている実映像の鍵盤の大
きさに合わせて、演奏指示映像の鍵盤の映像の大きさや
位置を調整しているので、適切な演奏指示映像を表示す
ることができるとともに、種々のタイプの鍵盤楽器に適
用することができる。Furthermore, since the size and position of the keyboard image of the performance instruction image are adjusted in accordance with the size of the keyboard of the displayed actual image, an appropriate performance instruction image can be displayed. , Can be applied to various types of keyboard instruments.
【0074】また、今回押鍵する鍵と次回押鍵する鍵と
を色を変える等の異なる映像として表示出力させたり、
押鍵に使用する指を他の指と色を変える等の異なる映像
として表示出力させているので、指運びや次に押鍵する
鍵等をより一層分かり易くすることができ、より一層練
習効率を向上させることができる。Also, the key to be pressed this time and the key to be pressed next time can be displayed and output as different images such as by changing colors.
Since the finger used for key depression is displayed and output as a different image such as changing the color from other fingers, it is possible to make it easier to understand the finger movement and the key to be pressed next, and more practice efficiency. Can be improved.
【図面の簡単な説明】[Brief description of drawings]
【図1】本発明による演奏誘導装置の一実施例を適用し
たシステム構成図。FIG. 1 is a system configuration diagram to which an embodiment of a performance guidance device according to the present invention is applied.
【図2】図1の演奏誘導装置の回路ブロック図。FIG. 2 is a circuit block diagram of the performance guidance device of FIG.
【図3】押鍵情報により表示を変化させた演奏指示映像
としての鍵を示す図。FIG. 3 is a diagram showing a key as a performance instruction image whose display is changed according to key depression information.
【図4】押鍵する指の表示を他の指と変化させた演奏指
示映像としての手を示す図。FIG. 4 is a diagram showing a hand as a performance instruction image in which the display of the finger to be pressed is changed from that of the other finger.
【図5】運指の一例として指くぐりを示す図。FIG. 5 is a diagram showing a finger passing as an example of fingering.
【図6】運指の一例として指ごえを示す図。FIG. 6 is a diagram showing a finger grip as an example of fingering.
【図7】実映像の一例を示す図。FIG. 7 is a diagram showing an example of a real image.
【図8】鍵盤線画像が実映像と合っていない状態を示す
図。FIG. 8 is a diagram showing a state in which the keyboard line image does not match the actual image.
【図9】鍵盤線画像を実映像に合わせて位置調整及び倍
率調整した状態を示す図。FIG. 9 is a diagram showing a state in which a keyboard line image is adjusted in position and magnification according to an actual image.
【図10】演奏誘導装置による演奏誘導処理を示すフロ
ーチャート。FIG. 10 is a flowchart showing performance guidance processing by the performance guidance device.
【図11】演奏誘導装置によるテンポクロックの割り込
み処理を示すフローチャート。FIG. 11 is a flowchart showing tempo clock interrupt processing by the performance guidance device.
【図12】実映像と演奏指示映像により演奏誘導を行っ
ている状態の表示部の表示内容を示す図。FIG. 12 is a diagram showing display contents of a display unit in a state where performance guidance is performed by an actual image and a performance instruction image.
1 演奏誘導装置 2 本体 3 カメラ 4 表示部 5 鍵盤楽器 6 練習者 7 鍵盤 8 操作部 9a、9b テンポキー 10a 逆戻しキー 10b ストップキー 10c 一時停止キー 10d プレイキー 10e 早送りキー 11 カーソルキー 12 ポジションキー 13 ズームキー 20 演奏指示画像記憶部 21 正規化部 22 エンコーダ 23 画像合成部 24 CPU 1 Performance guidance device 2 Main body 3 Camera 4 Display section 5 Keyboard instrument 6 Practitioner 7 Keyboard 8 Operation section 9a, 9b Tempo key 10a Reverse key 10b Stop key 10c Pause key 10d Play key 10e Fast forward key 11 Cursor key 12 Position key 13 Zoom key 20 Performance instruction image storage unit 21 Normalization unit 22 Encoder 23 Image synthesis unit 24 CPU
Claims (6)
む手の形の映像及び押鍵する鍵を指定する情報からなる
演奏指示映像を記憶する記憶手段と、 前記記憶手段に記憶されている演奏指示映像を対応する
演奏曲の進行に合わせて読み出す読出手段と、 前記読出手段の読み出した演奏指示映像を表示出力する
表示手段と、 を備えたことを特徴とする演奏誘導装置。1. Storage means for storing a performance instruction image composed of an image of a hand shape including fingering information corresponding to at least a musical piece to be played and information for designating a key to be depressed, and the storage means. A performance guide device comprising: a reading unit that reads out the performance instruction image in accordance with the progress of the corresponding music piece; and a display unit that displays and outputs the performance instruction image read by the reading unit.
手及び指の演奏の実映像を撮影する撮影手段と、 前記読出手段の読み出した演奏指示映像を前記撮影手段
の撮影した実映像と重ね合わせて前記表示手段に表示出
力させる映像合成手段と、 を、さらに備えたことを特徴とする演奏誘導装置。2. The performance guide device is installed in the vicinity of a keyboard musical instrument, and is provided with a photographing means for photographing at least an actual image of the performance of the keyboard and the hands and fingers on the keyboard, and a performance instruction image read by the reading means. A performance guide device, further comprising: an image synthesizing unit for superimposing the actual image captured by the image capturing unit on the display unit for output.
されている実映像の鍵盤の大きさに合わせて、前記演奏
指示映像の鍵盤の映像の大きさや位置を調整する調整手
段を、さらに備えたことを特徴とする請求項2記載の演
奏誘導装置。3. The performance guidance device further comprises adjusting means for adjusting the size and position of the keyboard image of the performance instruction image in accordance with the keyboard size of the actual image displayed on the display means. The performance guidance device according to claim 2, wherein the performance guidance device is provided.
ている実映像の鍵盤の鍵の数に合わせて、前記演奏指示
映像の鍵盤の映像から任意の領域を切り出して、映像の
大きさや位置を調整することを特徴とする請求項3記載
の演奏誘導装置。4. The adjusting means cuts out an arbitrary region from the keyboard image of the performance instruction image in accordance with the number of keys on the keyboard of the actual image displayed on the display means, and adjusts the size of the image. The performance guide device according to claim 3, wherein the position is adjusted.
る情報としての今回押鍵する鍵の映像と次回押鍵する鍵
の映像を異なる映像として記憶するとともに、前記手の
形の映像としての押鍵に使用する指の映像と他の指の映
像を異なる映像として記憶することを特徴とする請求項
1から請求項4のいずれかに記載の演奏誘導装置。5. The storage means stores the image of the key to be pressed this time and the image of the key to be pressed next time as different images as information for designating the key to be pressed, and the image of the hand shape. The performance guidance device according to any one of claims 1 to 4, wherein a video image of a finger used for depressing a key and a video image of another finger are stored as different video images.
記記憶手段は、前記押鍵する鍵を指定する情報としての
今回押鍵する鍵の映像と次回押鍵する鍵の映像を異なる
色の映像として記憶するとともに、前記手の形の映像と
しての押鍵に使用する指の映像と他の指の映像を異なる
色の映像として記憶することを特徴とする請求項1から
請求項5のいずれかに記載の演奏誘導装置。6. The display means is capable of color display, and the storage means uses different colors for the image of the key to be pressed this time and the image of the key to be pressed next time as the information for designating the key to be pressed. 6. The image of the finger used for key depression as the image of the hand and the image of the other finger are stored as images of different colors while being stored as the image of 1. The performance guide device according to any one of the above.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP20114093A JP3528003B2 (en) | 1993-07-20 | 1993-07-20 | Performance guiding device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP20114093A JP3528003B2 (en) | 1993-07-20 | 1993-07-20 | Performance guiding device |
Publications (2)
Publication Number | Publication Date |
---|---|
JPH0736446A true JPH0736446A (en) | 1995-02-07 |
JP3528003B2 JP3528003B2 (en) | 2004-05-17 |
Family
ID=16436070
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP20114093A Expired - Lifetime JP3528003B2 (en) | 1993-07-20 | 1993-07-20 | Performance guiding device |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP3528003B2 (en) |
Cited By (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000056781A (en) * | 1998-08-06 | 2000-02-25 | Taito Corp | Musical tone playing learning apparatus and karaoke sing-along machine |
JP2000148168A (en) * | 1998-11-13 | 2000-05-26 | Taito Corp | Musical instrument play learning device and karaoke device |
JP2001324919A (en) * | 2000-03-24 | 2001-11-22 | Casio Comput Co Ltd | Performance operation display device, and recording medium |
JP2002091430A (en) * | 2001-07-18 | 2002-03-27 | Casio Comput Co Ltd | Playing action display device and recording medium |
JP2002099276A (en) * | 2001-07-18 | 2002-04-05 | Casio Comput Co Ltd | Playing action display device and recording medium |
JP2005024781A (en) * | 2003-06-30 | 2005-01-27 | Casio Comput Co Ltd | Musical performance recording device, musical performance recording and reproducing device, and program |
US6915488B2 (en) | 2000-06-01 | 2005-07-05 | Konami Corporation | Operation instruction system and computer readable storage medium to be used for the same |
JP2005181912A (en) * | 2003-12-24 | 2005-07-07 | Ims:Kk | Photographic seal delivering apparatus and its control method |
JP2005196072A (en) * | 2004-01-09 | 2005-07-21 | Yamaha Corp | Rendition information display method, device and system |
JP2005250378A (en) * | 2004-03-08 | 2005-09-15 | Yamaha Corp | Image generating apparatus and musical instrument |
JP2006010805A (en) * | 2004-06-23 | 2006-01-12 | Casio Comput Co Ltd | Performance instruction apparatus and performance instruction program |
US7009100B2 (en) | 2002-08-20 | 2006-03-07 | Casio Computer Co., Ltd. | Performance instruction apparatus and performance instruction program used in the performance instruction apparatus |
JP2006091633A (en) * | 2004-09-27 | 2006-04-06 | Casio Comput Co Ltd | Musical performance evaluation system and program of performance evaluation processing |
DE19743008B4 (en) * | 1996-09-27 | 2007-02-22 | Yamaha Corp., Hamamatsu | keyboard |
JP2010085820A (en) * | 2008-10-01 | 2010-04-15 | Yamaha Corp | Electronic musical instrument, and program for achieving its control method |
JP2010107852A (en) * | 2008-10-31 | 2010-05-13 | Yamaha Corp | Electronic musical device, computer device connected to the device, and program for realizing respective control method |
JP2014045796A (en) * | 2012-08-29 | 2014-03-17 | Konami Digital Entertainment Co Ltd | Guide system, control method used for the same, and computer program |
JP2015516594A (en) * | 2012-04-05 | 2015-06-11 | ブライアント,ジャクリーン | Apparatus and method for assisting learning |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10332490B2 (en) | 2012-09-25 | 2019-06-25 | William Frederick Moyer | Piano systems and methods for the enhanced display of the hands of a pianist |
-
1993
- 1993-07-20 JP JP20114093A patent/JP3528003B2/en not_active Expired - Lifetime
Cited By (20)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE19743008B4 (en) * | 1996-09-27 | 2007-02-22 | Yamaha Corp., Hamamatsu | keyboard |
JP2000056781A (en) * | 1998-08-06 | 2000-02-25 | Taito Corp | Musical tone playing learning apparatus and karaoke sing-along machine |
JP2000148168A (en) * | 1998-11-13 | 2000-05-26 | Taito Corp | Musical instrument play learning device and karaoke device |
JP2001324919A (en) * | 2000-03-24 | 2001-11-22 | Casio Comput Co Ltd | Performance operation display device, and recording medium |
US6915488B2 (en) | 2000-06-01 | 2005-07-05 | Konami Corporation | Operation instruction system and computer readable storage medium to be used for the same |
JP2002091430A (en) * | 2001-07-18 | 2002-03-27 | Casio Comput Co Ltd | Playing action display device and recording medium |
JP2002099276A (en) * | 2001-07-18 | 2002-04-05 | Casio Comput Co Ltd | Playing action display device and recording medium |
US7009100B2 (en) | 2002-08-20 | 2006-03-07 | Casio Computer Co., Ltd. | Performance instruction apparatus and performance instruction program used in the performance instruction apparatus |
JP2005024781A (en) * | 2003-06-30 | 2005-01-27 | Casio Comput Co Ltd | Musical performance recording device, musical performance recording and reproducing device, and program |
JP2005181912A (en) * | 2003-12-24 | 2005-07-07 | Ims:Kk | Photographic seal delivering apparatus and its control method |
JP2005196072A (en) * | 2004-01-09 | 2005-07-21 | Yamaha Corp | Rendition information display method, device and system |
JP4507602B2 (en) * | 2004-01-09 | 2010-07-21 | ヤマハ株式会社 | Performance information display method, performance information display device, and performance information display system |
JP2005250378A (en) * | 2004-03-08 | 2005-09-15 | Yamaha Corp | Image generating apparatus and musical instrument |
JP4529489B2 (en) * | 2004-03-08 | 2010-08-25 | ヤマハ株式会社 | Image generating apparatus and musical instrument |
JP2006010805A (en) * | 2004-06-23 | 2006-01-12 | Casio Comput Co Ltd | Performance instruction apparatus and performance instruction program |
JP2006091633A (en) * | 2004-09-27 | 2006-04-06 | Casio Comput Co Ltd | Musical performance evaluation system and program of performance evaluation processing |
JP2010085820A (en) * | 2008-10-01 | 2010-04-15 | Yamaha Corp | Electronic musical instrument, and program for achieving its control method |
JP2010107852A (en) * | 2008-10-31 | 2010-05-13 | Yamaha Corp | Electronic musical device, computer device connected to the device, and program for realizing respective control method |
JP2015516594A (en) * | 2012-04-05 | 2015-06-11 | ブライアント,ジャクリーン | Apparatus and method for assisting learning |
JP2014045796A (en) * | 2012-08-29 | 2014-03-17 | Konami Digital Entertainment Co Ltd | Guide system, control method used for the same, and computer program |
Also Published As
Publication number | Publication date |
---|---|
JP3528003B2 (en) | 2004-05-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP3528003B2 (en) | Performance guiding device | |
US7514622B2 (en) | Musical sound production apparatus and musical | |
US6915488B2 (en) | Operation instruction system and computer readable storage medium to be used for the same | |
JPH0877694A (en) | Operating chip unit | |
US5931680A (en) | Score information display apparatus | |
KR20170138135A (en) | Method of helping piano performance and based on augemented reality and apparatus performing the same | |
US7009100B2 (en) | Performance instruction apparatus and performance instruction program used in the performance instruction apparatus | |
JP2007121355A (en) | Playing system | |
JPWO2019130592A1 (en) | Audio equipment | |
KR920004103B1 (en) | Electronic musical instrument | |
US7504572B2 (en) | Sound generating method | |
JP2005241877A (en) | Fingering instruction apparatus and program | |
JP6217275B2 (en) | Song data display device, song data display method and program | |
JP2004198761A (en) | Musical performance training apparatus and program for musical performance training processing | |
JPH0869282A (en) | Automatic playing device | |
JP3931603B2 (en) | Performance learning apparatus and performance learning processing program | |
JPH1020870A (en) | Karaoke sing-along device | |
JP2006208959A (en) | Karaoke playing apparatus | |
JP2003066957A (en) | Performance practice device and performance practice processing program | |
JP2006091633A (en) | Musical performance evaluation system and program of performance evaluation processing | |
JP3945307B2 (en) | Performance guide method, apparatus thereof, and program | |
JPH0981151A (en) | Chord progressing editing device | |
JP2879098B2 (en) | Video game machine and sound signal generating method thereof | |
JP3139081B2 (en) | Electronic musical instrument parameter setting device | |
WO2004070543A2 (en) | Electronic image visualization system and communication methodologies |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20040127 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20040209 |
|
R150 | Certificate of patent (=grant) or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (prs date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090305 Year of fee payment: 5 |
|
FPAY | Renewal fee payment (prs date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100305 Year of fee payment: 6 |
|
FPAY | Renewal fee payment (prs date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110305 Year of fee payment: 7 |
|
FPAY | Renewal fee payment (prs date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110305 Year of fee payment: 7 |
|
FPAY | Renewal fee payment (prs date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120305 Year of fee payment: 8 |
|
FPAY | Renewal fee payment (prs date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130305 Year of fee payment: 9 |