JPH0736446A - Musical performance guide device - Google Patents
Musical performance guide deviceInfo
- Publication number
- JPH0736446A JPH0736446A JP5201140A JP20114093A JPH0736446A JP H0736446 A JPH0736446 A JP H0736446A JP 5201140 A JP5201140 A JP 5201140A JP 20114093 A JP20114093 A JP 20114093A JP H0736446 A JPH0736446 A JP H0736446A
- Authority
- JP
- Japan
- Prior art keywords
- image
- key
- performance
- keyboard
- pressed
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Electrophonic Musical Instruments (AREA)
- Closed-Circuit Television Systems (AREA)
- Auxiliary Devices For Music (AREA)
Abstract
Description
【０００１】[0001]
【産業上の利用分野】本発明は、演奏誘導装置に関し、
詳しくは、鍵盤楽器等の押鍵する鍵及び押鍵する手の形
や運指等を映像として映し出して演奏誘導する演奏誘導
装置に関する。BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a performance guidance device,
More specifically, the present invention relates to a performance guidance device that guides a performance by projecting a key to be depressed, a shape of a hand to be depressed, a fingering or the like of a keyboard musical instrument as an image.
【０００２】[0002]
【従来の技術】電子鍵盤楽器においては、従来から、種
々の演奏誘導装置を備えたものが出現している。2. Description of the Related Art Conventionally, electronic keyboard musical instruments having various performance guidance devices have appeared.
【０００３】例えば、鍵盤の各鍵の上部にＬＥＤ（Ligh
t Emitting Diode）を備え、次に押鍵する鍵の上部のＬ
ＥＤを点灯させることにより、演奏誘導するものがあ
る。For example, an LED (Ligh
t Emitting Diode), and L above the key to be pressed next
There is a thing that guides the performance by lighting the ED.
【０００４】また、押鍵するのにどの指を使用するかを
演奏誘導するのに、人の指の形とその各指にＬＥＤを設
けた絵を電子鍵盤楽器に設け、次の音符を演奏する指に
対応するＬＥＤを点灯させて、演奏誘導するものがあ
る。Further, in order to guide which finger is to be used to play a key, a picture of a human finger shape and an LED provided on each finger is provided on an electronic keyboard instrument to play the next note. There is one in which an LED corresponding to a finger to be turned on is turned on to guide a performance.
【０００５】さらに、コンピュータの表示画面上に鍵盤
の絵を表示出力し、その鍵盤の絵の中から次に押鍵する
鍵を指し示すものがある。Further, there is one in which a picture of a keyboard is displayed and output on a display screen of a computer, and the key to be pressed next is indicated from the picture of the keyboard.
【０００６】[0006]
【発明が解決しようとする課題】しかしながら、このよ
うな従来の演奏誘導装置にあっては、次に押鍵する鍵に
対応するＬＥＤを点灯させることにより演奏誘導し、ま
た、人の指の形の絵に設けたＬＥＤを点灯させることに
より演奏誘導し、あるいはコンピュータ画面の鍵盤の絵
の中から次に押鍵する鍵を指し示すことにより演奏誘導
しているのみであったため、押鍵する鍵と押鍵する指と
の関連性が分かり難く、特に、鍵盤楽器においては、演
奏曲の進行に適した指運び、すなわち、前回押鍵する鍵
の位置と押鍵する指及び今回押鍵する鍵の位置と押鍵す
る指、さらには、次回押鍵する鍵の位置と押鍵する指と
の関係から設定される最適な指運びが重要な演奏技術で
あるにもかかわらず、指運びの情報については何等得る
ことができず、演奏技術の向上を図る上で、なお改良の
余地があった。However, in such a conventional performance guidance device, performance guidance is provided by turning on the LED corresponding to the key to be pressed next, and the shape of the human finger is also used. The key to be pressed is the key to be pressed because the LED is provided in the picture to guide the performance, or the key to be pressed next is guided from the picture on the keyboard of the computer screen. It is difficult to understand the relationship with the finger to be pressed.In particular, in the case of keyboard instruments, it is possible to carry a finger that is suitable for the progression of the performance song, that is, the position of the key to be pressed last time and the finger to be pressed and the key to be pressed this time Despite the important performance technique, the optimal finger movement set based on the position, the finger to be pressed, and the relationship between the position of the key to be pressed next time and the finger to be pressed next is important information about finger movement. Can not get anything, acting In improving the technology still has room for improvement.
【０００７】そこで、本発明は、演奏イメージをそのま
ま演奏誘導して、押鍵する鍵や指だけでなく、指運びま
で演奏誘導することのできる演奏誘導装置を提供するこ
とを目的としている。SUMMARY OF THE INVENTION Therefore, an object of the present invention is to provide a performance guide device which can guide a performance image as it is to guide not only a key to be pressed or a finger but also a finger movement.
【０００８】[0008]
【課題を解決するための手段】本発明は、少なくとも演
奏曲に対応した運指情報を含む手の形の映像及び押鍵す
る鍵を指定する情報からなる演奏指示映像を記憶する記
憶手段と、前記記憶手段に記憶されている演奏指示映像
を対応する演奏曲の進行に合わせて読み出す読出手段
と、前記読出手段の読み出した演奏指示映像を表示出力
する表示手段と、を備えることにより、上記目的を達成
している。According to the present invention, there is provided storage means for storing a performance instruction image composed of an image of a hand shape including fingering information corresponding to at least a piece of music to be played and information designating a key to be depressed. By providing a reading means for reading out the performance instruction image stored in the storage means in accordance with the progress of the corresponding musical piece and a display means for displaying and outputting the performance instruction image read out by the reading means, the above-mentioned object is achieved. Has been achieved.
【０００９】また、請求項２に記載するように、前記演
奏誘導装置は、鍵盤楽器に近接して設置され少なくとも
鍵盤、鍵盤上の手及び指の演奏の実映像を撮影する撮影
手段と、前記読出手段の読み出した演奏指示映像を前記
撮影手段の撮影した実映像と重ね合わせて前記表示手段
に表示出力させる映像合成手段と、を、さらに備えるこ
とにより、上記目的を達成している。According to a second aspect of the present invention, the performance guiding device is installed in the vicinity of a keyboard instrument, and a photographing means for photographing at least a real image of the performance of the keyboard and the hands and fingers on the keyboard, The above object is achieved by further comprising: a video synthesizing unit that superimposes the performance instruction image read by the reading unit on the real image captured by the image capturing unit and causes the display unit to display and output the image.
【００１０】さらに、請求項３に記載するように、前記
演奏誘導装置は、前記表示手段に表示されている実映像
の鍵盤の大きさに合わせて、前記演奏指示映像の鍵盤の
映像の大きさや位置を調整する調整手段を、さらに備え
ることにより、上記目的を達成している。Further, according to a third aspect of the present invention, the performance guidance device adjusts the size of the keyboard image of the performance instruction image in accordance with the keyboard size of the actual image displayed on the display means. The above object is achieved by further comprising an adjusting means for adjusting the position.
【００１１】この場合、前記調整手段は、例えば、請求
項４に記載するように、前記表示手段に表示されている
実映像の鍵盤の鍵の数に合わせて、前記演奏指示映像の
鍵盤の映像から任意の領域を切り出して、映像の大きさ
や位置を調整するものであってもよい。In this case, the adjusting means may, for example, as described in claim 4, match the number of keys of the keyboard of the actual image displayed on the display means with the image of the keyboard of the performance instruction image. It is also possible to cut out an arbitrary area from and adjust the size and position of the image.
【００１２】また、請求項５に記載するように、前記記
憶手段は、前記押鍵する鍵を指定する情報としての今回
押鍵する鍵の映像と次回押鍵する鍵の映像を異なる映像
として記憶するとともに、前記手の形の映像としての押
鍵に使用する指の映像と他の指の映像を異なる映像とし
て記憶するものであってもよい。Further, as described in claim 5, the storage means stores the image of the key to be pressed this time and the image of the key to be pressed next time as different images as information for designating the key to be pressed. In addition, the image of the finger used for the key depression as the image of the hand shape and the image of the other finger may be stored as different images.
【００１３】さらに、請求項６に記載するように、前記
表示手段は、カラー表示が可能で、前記記憶手段は、前
記押鍵する鍵を指定する情報としての今回押鍵する鍵の
映像と次回押鍵する鍵の映像を異なる色の映像として記
憶するとともに、前記手の形の映像としての押鍵に使用
する指の映像と他の指の映像を異なる色の映像として記
憶するものであってもよい。Further, as described in claim 6, the display means is capable of color display, and the storage means is an image of the key to be pressed this time and the next time as the information for designating the key to be pressed. An image of a key to be pressed is stored as an image of a different color, and an image of a finger used to press the key as the image of the hand and an image of another finger are stored as images of different colors. Good.
【００１４】[0014]
【作用】本発明によれば、演奏曲の進行に合わせて、少
なくとも該演奏曲に対応した運指情報を含む手の形及び
押鍵する鍵を指定する情報からなる演奏指示映像を表示
手段に表示出力するので、押鍵する鍵及び指運びを含む
手の形等を視点を移動することなく、演奏イメージその
ままで演奏誘導することができ、演奏練習の効率を向上
させることができる。According to the present invention, in accordance with the progress of a musical piece to be played, a playing instruction image consisting of at least a hand shape including fingering information corresponding to the musical piece and information for designating a key to be pressed is displayed on the display means. Since the information is displayed and output, it is possible to guide the performance of the key to be pressed and the shape of the hand including the finger movement without moving the viewpoint, and to improve the performance of the performance practice as it is.
【００１５】また、撮影手段により撮影した少なくとも
鍵盤、鍵盤上の手及び指からなる演奏の実映像を演奏指
示映像と重ね合わせて表示出力させているので、実際の
指運びを含む手の形を演奏指示映像と比較しながら練習
することができ、より一層練習効率を向上させることが
できる。Further, since the actual image of the performance consisting of at least the keyboard, the hand and the fingers on the keyboard taken by the imaging means is superposed on the performance instruction image and displayed and outputted, the shape of the hand including the actual finger movement can be displayed. You can practice while comparing with the performance instruction video, and you can further improve the practice efficiency.
【００１６】さらに、表示手段に表示されている実映像
の鍵盤の大きさに合わせて、演奏指示映像の鍵盤の映像
の大きさや位置を調整しているので、実際の鍵盤の大き
さや鍵数に合わせて、演奏指示映像を調整することがで
き、種々のタイプの鍵盤楽器に適用することができる。Furthermore, since the size and position of the keyboard image of the performance instruction image are adjusted according to the keyboard size of the actual image displayed on the display means, the actual keyboard size and number of keys can be adjusted. In addition, the performance instruction image can be adjusted and applied to various types of keyboard musical instruments.
【００１７】また、今回押鍵する鍵と次回押鍵する鍵と
を色を変える等の異なる映像として表示出力させるとと
もに、押鍵に使用する指と他の指とを色を変える等の異
なる映像として表示出力させているので、指運びや次に
押鍵する鍵等をより一層分かり易くすることができ、よ
り一層練習効率を向上させることができる。Further, the key to be pressed this time and the key to be pressed next time are displayed and output as different images such as different colors, and different images such as changing the colors of the finger used for key depression and other fingers. Since it is displayed and displayed as, it is possible to make it easier to understand the finger movement, the key to be pressed next, and the like, and it is possible to further improve the practice efficiency.
【００１８】[0018]
【実施例】以下、実施例に基づいて具体的に説明する。[Examples] Specific examples will be described below.
【００１９】図１〜図１２は、本発明の演奏誘導装置の
一実施例を示す図である。1 to 12 are views showing an embodiment of the performance guidance device of the present invention.
【００２０】図１は、その演奏誘導装置１を適用したシ
ステム構成図であり、演奏誘導装置１は、本体２、カメ
ラ３及び表示部４等を備えている。FIG. 1 is a system configuration diagram to which the performance guide device 1 is applied. The performance guide device 1 includes a main body 2, a camera 3, a display unit 4, and the like.
【００２１】表示部４の前には、鍵盤楽器５が設置され
ており、練習者６が鍵盤楽器５の練習を行う。A keyboard instrument 5 is installed in front of the display unit 4, and a practitioner 6 practices the keyboard instrument 5.
【００２２】鍵盤楽器５には、複数の黒鍵と白鍵から成
る鍵盤７が設けられている。The keyboard instrument 5 is provided with a keyboard 7 composed of a plurality of black keys and white keys.
【００２３】本体２には、操作部８が設けられており、
操作部８には、テンポを上げたりあるいは下げたり調整
するためのテンポキー９ａ、９ｂ、後述する演奏練習す
る曲の演奏指示映像の逆戻しを行う逆戻しキー１０ａ、
演奏指示映像の停止を行うストップキー１０ｂ、演奏指
示映像の一時停止を行う一時停止キー１０ｃ、演奏指示
映像の動作開始を行うプレイキー１０ｄ及び演奏指示映
像の早送りを行う早送りキー１０ｅ等の制御キーが設け
られているとともに、アジャスト（ＡＤＪＵＳＴ）キー
として、後述する演奏指示映像の位置や倍率を調整する
カーソルキー１１及びこのカーソルキー１１により調整
する演奏指示映像のモードを設定するポジション（ＰＯ
ＳＩＴＩＯＮ）キー１２とズーム（ＺＯＯＭ）キー１３
等が設けられている。The main body 2 is provided with an operating portion 8,
The operation section 8 includes tempo keys 9a and 9b for adjusting the tempo up and down, a reverse key 10a for reversely returning a performance instruction image of a music to be practiced, which will be described later.
Control keys such as a stop key 10b for stopping the performance instruction image, a pause key 10c for temporarily stopping the performance instruction image, a play key 10d for starting the operation of the performance instruction image, and a fast-forward key 10e for fast-forwarding the performance instruction image. Is provided, and as an ADJUST key, a cursor key 11 for adjusting the position and magnification of a performance instruction image, which will be described later, and a position (PO) for setting the mode of the performance instruction image adjusted by the cursor key 11.
SITION key 12 and ZOOM key 13
Etc. are provided.
【００２４】カメラ３としては、例えば、通常のビデオ
カメラが使用されており、カメラ３は、鍵盤楽器５上に
設けられて、鍵盤楽器５の鍵盤７及び鍵盤７を演奏する
練習者６の手や指を映し出す。カメラ３は、映し出した
実映像をケーブル１４を介して本体２に出力する。As the camera 3, for example, an ordinary video camera is used, and the camera 3 is provided on the keyboard instrument 5 and the keyboard 7 of the keyboard instrument 5 and the hands of the practitioner 6 playing the keyboard 7. Or show your finger. The camera 3 outputs the projected real image to the main body 2 via the cable 14.
【００２５】表示部４としては、例えば、通常のカラー
テレビ受像器が使用されており、表示部４には、本体２
からケーブル１５を介してカメラ３の撮影した実映像
と、本体２が生成する演奏指示映像が入力される。表示
部４は、後述するように、その画面４ａに本体２から入
力される実映像と演奏指示映像を重ね合わせて表示出力
する。As the display unit 4, for example, a normal color television receiver is used, and the display unit 4 has a main body 2
From the above, the actual image captured by the camera 3 and the performance instruction image generated by the main body 2 are input via the cable 15. As will be described later, the display unit 4 superimposes the actual image input from the main body 2 and the performance instruction image on the screen 4a, and outputs the superimposed image.
【００２６】本体２は、図２に示すように、回路構成さ
れており、演奏指示画像記憶部２０、正規化部２１、エ
ンコーダ２２、画像合成部２３及びＣＰＵ（Central Pr
ocessing Unit） ２４等を備えている。このＣＰＵ２４
に操作部８の各キーが接続されており、画像合成部２３
にカメラ３及び表示部４が接続されている。As shown in FIG. 2, the main body 2 has a circuit structure and includes a performance instruction image storage unit 20, a normalization unit 21, an encoder 22, an image synthesis unit 23, and a CPU (Central Pr.
Ocessing Unit) 24 etc. This CPU 24
Each key of the operation unit 8 is connected to the
The camera 3 and the display unit 4 are connected to.
【００２７】演奏指示画像記憶部２０は、演奏指示情報
を演奏曲毎に複数記憶しており、この演奏指示情報とし
ては、押鍵位置情報、押鍵順序情報、演奏する指の運
び、すなわち運指情報を含む押鍵する手の映像及び当該
曲のテンポ情報等を記憶している。The performance instruction image storage unit 20 stores a plurality of performance instruction information for each music piece to be played. As the performance instruction information, key pressing position information, key pressing order information, carrying of a finger to be played, that is, luck. The image of the hand of the key to be pressed including the finger information, the tempo information of the song, and the like are stored.
【００２８】例えば、演奏指示画像記憶部２０は、演奏
指示情報として、今回押鍵すべき鍵及び次回押鍵すべき
鍵を表示部４に表示出力するための鍵の映像を記憶して
おり、この鍵の映像としては、白鍵の各形状に対応した
鍵の映像及び黒鍵の形状に対応した鍵の映像をそれぞれ
記憶している。For example, the performance instruction image storage unit 20 stores, as the performance instruction information, a video image of a key for displaying and outputting the key to be pressed this time and the key to be pressed next time on the display unit 4, As the key image, a key image corresponding to each shape of the white key and a key image corresponding to the shape of the black key are stored.
【００２９】また、演奏指示画像記憶部２０は、演奏指
示情報として、今回押鍵すべき鍵や次回押鍵すべき鍵を
カメラ３の映像の鍵盤７の鍵の位置に対応させて表示部
４に表示させるための押鍵位置情報及び今回押鍵すべき
鍵と次回押鍵すべき鍵とを区別するための押鍵順序情
報、例えば、図３に示すように、今回押鍵する鍵（図３
中左側の鍵）には、赤色（図３中では、薄いハッチング
で表示）を、次回押鍵する押鍵する鍵（図３中右側の
鍵）には、青色（図３中では、濃いハッチングで表示）
を、記憶している。Further, the performance instruction image storage unit 20 stores, as the performance instruction information, the key to be pressed this time or the key to be pressed next time in correspondence with the position of the key of the keyboard 7 of the image of the camera 3 on the display unit 4. Key pressing position information to be displayed on the screen and key pressing order information for distinguishing between the key to be pressed this time and the key to be pressed next time, for example, as shown in FIG. Three
The middle left key is red (indicated by light hatching in FIG. 3), and the next key to be pressed (right key in FIG. 3) is blue (dark hatching in FIG. 3). (Displayed with)
I remember.
【００３０】さらに、演奏指示画像記憶部２０は、図４
から図６に示すように、演奏指示映像３１として、運指
情報を含む手の形の映像を記憶しており、またどの指で
現在押鍵するかを当該手の形の映像の指の色を他の待機
する指の色と異ならせて表示する押鍵指情報を記憶して
いる。特に、演奏曲に適切な指の運びを示すために、図
５及び図６に示すように、各運指毎に手の指の形の映像
を記憶している。この場合にも、どの指で押鍵するかを
指の色を他の指の色と異ならせることにより表示する。
なお、図５は、いわゆる指くぐりといわれる運指であ
り、親指（１指）が人差し指（２指）をかいくぐって押
鍵するものである。そして、図６は、いわゆる指ごえと
いわれる運指であり、中指（３指）が人差し指及び親指
を飛び越えて押鍵するものである。Further, the performance instruction image storage section 20 is shown in FIG.
As shown in FIG. 6, a hand-shaped image including fingering information is stored as the performance instruction image 31, and the finger color of the hand-shaped image indicates which finger is currently pressed. It stores the key-depression finger information that is displayed in a different color from that of the other waiting fingers. In particular, in order to show the proper finger movement for a musical piece, as shown in FIGS. 5 and 6, a finger-shaped image is stored for each finger. Also in this case, which finger is used to indicate the key is displayed by making the color of the finger different from the color of the other fingers.
Note that FIG. 5 shows a so-called finger-passing, in which a thumb (1 finger) goes through an index finger (2 fingers) to press a key. FIG. 6 shows a so-called fingering, in which the middle finger (three fingers) jumps over the index finger and thumb and presses the key.
【００３１】そして、演奏指示画像記憶部２０は、上記
演奏指示情報のうち演奏指示映像３１、例えば、上記押
鍵する指を表示する手の映像を、例えば、コンピュータ
グラフィックスによる映像として演奏曲毎に複数曲分記
憶しており、演奏曲が選択されると、ＣＰＵ２４が、当
該演奏曲に対応した映像を順次読み出して、表示部４に
表示出力させる。Then, the performance instruction image storage section 20 uses the performance instruction image 31 of the performance instruction information, for example, the image of the hand displaying the finger to be depressed as an image by computer graphics for each song. When a performance song is selected, the CPU 24 sequentially reads out images corresponding to the performance song and causes the display unit 4 to display and output.
【００３２】また、演奏指示画像記憶部２０は、演奏指
示情報を最小テンポクロック毎に記憶しており、ＣＰＵ
２４は、テンポクロックの割り込みが入る毎に、演奏指
示画像記憶部２０から演奏指示情報を読み出して、その
うちの演奏指示映像３１を表示部４に表示出力させる。
したがって、演奏誘導装置１は、テンポクロックによ
り、演奏誘導処理の進行を制御し、後述するポーズ処
理、ストップ処理及びプレイ処理等をこのテンポクロッ
クの割り込みを禁止するか許可するかにより、制御して
いる。The performance instruction image storage unit 20 stores performance instruction information for each minimum tempo clock, and the CPU
Each time the tempo clock interrupt occurs, the unit 24 reads the performance instruction information from the performance instruction image storage unit 20 and causes the display unit 4 to display and output the performance instruction image 31.
Therefore, the performance guidance device 1 controls the progress of the performance guidance process by the tempo clock, and controls the pause process, stop process, play process, and the like, which will be described later, depending on whether the tempo clock interrupt is prohibited or permitted. There is.
【００３３】なお、演奏指示画像記憶部２０に記憶する
映像としては、上記押鍵する鍵を表示する情報及び手の
映像をその基本パターンの映像のみ記憶して、曲に合わ
せて順次その基本パターンの映像の読出順序を変更させ
るようにしてもよい。演奏指示画像記憶部２０が上記基
本パターンの映像のみ記憶する場合には、曲毎に押鍵情
報と運指の手順を示す情報を演奏指示画像記憶部２０に
記憶し、この押鍵情報と運指の手順を示す情報に基づい
て、ＣＰＵ２４が基本パターンを演奏指示画像記憶部２
０から読み出す。As the image stored in the performance instruction image storage section 20, only the information of the key to be pressed and the image of the hand are stored, and only the image of the basic pattern is stored, and the basic pattern is sequentially stored according to the music. The video reading order may be changed. When the performance instruction image storage unit 20 stores only the image of the basic pattern, key pressing information and information indicating a fingering procedure are stored in the performance instruction image storage unit 20 for each music, and the key pressing information and the key operation information are stored. Based on the information indicating the procedure of the finger, the CPU 24 sets the basic pattern to the performance instruction image storage unit 2.
Read from 0.
【００３４】上記演奏指示画像記憶部２０から読み出さ
れた演奏指示映像３１は、正規化部２１に出力され、正
規化部２１は、図８及び図９に示すように、演奏指示画
像記憶部２０から読み出された演奏指示映像３１をＣＰ
Ｕ２４からの指示に基づいてカメラ３で撮影された実映
像３０と一致させるためのトリミングと縦横倍率を変更
することによりその縮尺や位置を調整して、エンコーダ
２２に出力する。The performance instruction image 31 read out from the performance instruction image storage unit 20 is output to the normalization unit 21, which normalizes the performance instruction image storage unit as shown in FIGS. 8 and 9. CP of the performance instruction image 31 read from 20
Based on an instruction from U24, the scale and position are adjusted by changing the trimming and vertical / horizontal magnification for matching with the actual video image 30 captured by the camera 3, and output to the encoder 22.
【００３５】すなわち、演奏指示画像記憶部２０には、
例えば、図８及び図９に示すような６１鍵の標準鍵用の
鍵盤の輪郭を示す鍵盤線画像３２が記憶されており、こ
の鍵盤線画像３２が６１鍵を表示部４の表示画面４ａ全
体に表示出力する映像である場合、図１に示した鍵盤楽
器５の鍵盤７が、図７に示すように、４９鍵の標準鍵で
あり、この鍵盤７を表示部４の表示画面４ａ全体に表示
する倍率にカメラ３が設置されていると、図８に示すよ
うに、実映像３０と演奏指示画像記憶部２０からの鍵盤
線画像３２は、その倍率や鍵位置が異なることとなる。That is, the performance instruction image storage unit 20 is
For example, as shown in FIGS. 8 and 9, there is stored a keyboard line image 32 showing the outline of the keyboard for 61 standard keys, and this keyboard line image 32 indicates 61 keys as a whole of the display screen 4a of the display unit 4. 1 is a standard key of 49 keys, as shown in FIG. 7, and this keyboard 7 is displayed on the entire display screen 4a of the display unit 4. If the camera 3 is installed at the magnification to be displayed, as shown in FIG. 8, the magnification and the key position of the real image 30 and the keyboard line image 32 from the performance instruction image storage unit 20 are different.
【００３６】そこで、鍵盤線画像３２全体を、４９／６
１倍し、Ｃ４鍵の位置を実映像３０のＣ４鍵の位置に合
わせる必要がある。また、実映像３０が４９鍵であって
も、標準鍵ではなく、ミニ鍵盤である場合には、さら
に、鍵盤線画像３２の縦横比を調整する必要がある。Therefore, the entire keyboard line image 32 is 49/6.
It is necessary to multiply by 1 to match the position of the C4 key with the position of the C4 key of the real video 30. Further, even if the actual image 30 has 49 keys, if it is not the standard key but the mini keyboard, it is necessary to further adjust the aspect ratio of the keyboard line image 32.
【００３７】そのため、正規化部２１は、演奏指示画像
記憶部２０から入力される鍵盤線画像３２をＣＰＵ２４
からの指示に基づいて位置調整及び倍率調整し、図９に
示すように、鍵盤線画像３２を実映像３０に一致させる
調整処理を行う。Therefore, the normalization unit 21 uses the keyboard line image 32 input from the performance instruction image storage unit 20 as the CPU 24.
The position adjustment and the magnification adjustment are performed based on the instruction from, and the adjustment processing for matching the keyboard line image 32 with the actual image 30 is performed as shown in FIG.
【００３８】このとき、ＣＰＵ２４は、操作部８からの
操作信号に基づいて正規化部２１に鍵盤線画像３２の調
整指示を行う。At this time, the CPU 24 instructs the normalization section 21 to adjust the keyboard line image 32 based on the operation signal from the operation section 8.
【００３９】このようにして位置調整及び倍率調整が行
われると、その調整データが正規化部２１に設定され、
以降、正規化部２１は、この設定された調整データに基
づいて演奏指示画像記憶部２０からの演奏指示映像３１
を正規化して、エンコーダ２２に出力する。When the position adjustment and the magnification adjustment are performed in this way, the adjustment data is set in the normalizing section 21,
After that, the normalization unit 21 performs the performance instruction image 31 from the performance instruction image storage unit 20 based on the set adjustment data.
Is normalized and output to the encoder 22.
【００４０】エンコーダ２２は、正規化部２１から入力
されるディジタルの演奏指示映像３１をビデオ信号に変
換し、画像合成部２３に出力する。The encoder 22 converts the digital performance instruction image 31 input from the normalization unit 21 into a video signal and outputs it to the image synthesis unit 23.
【００４１】画像合成部２３には、さらに、カメラ３の
撮影した鍵盤楽器５の鍵盤７の実画像３０が入力されて
おり、画像合成部２３は、実画像３０にエンコーダ２２
から入力される演奏指示映像３１をスーパーインポーズ
等により合成して、表示部４に出力する。An actual image 30 of the keyboard 7 of the keyboard instrument 5 taken by the camera 3 is further input to the image synthesizing section 23, and the image synthesizing section 23 converts the actual image 30 into an encoder 22.
The performance instruction image 31 input from the is synthesized by superimposing or the like and output to the display unit 4.
【００４２】表示部４は、画像合成部２３から入力され
るビデオ映像をその表示画面４ａに表示出力する。The display unit 4 displays and outputs the video image input from the image synthesizing unit 23 on its display screen 4a.
【００４３】ＣＰＵ２４は、ＲＯＭ（Read Only Memor
y）やＲＡＭ（Random Access Memory）等を備え、ＲＯ
Ｍ内には演奏誘導装置１としてのプログラムや各種シス
テムデータが予め格納されている。ＣＰＵ２４は、ＲＡ
Ｍをワークメモリとして使用して、操作部８の操作に応
じて、正規化部２１による正規化処理を行ったり、ＲＯ
Ｍ内のプログラムに従って演奏誘導装置１の各部を制御
し、演奏誘導処理を行う。The CPU 24 is a ROM (Read Only Memory).
y), RAM (Random Access Memory), etc.
A program as the performance guide device 1 and various system data are stored in advance in M. CPU 24 is RA
Using M as a work memory, the normalization processing is performed by the normalization unit 21 according to the operation of the operation unit 8, and RO
Each part of the performance guidance device 1 is controlled according to the program in M to perform performance guidance processing.
【００４４】次に、作用を説明する。Next, the operation will be described.
【００４５】演奏誘導装置１は、鍵盤の映像及び運指情
報を含む手の形の映像等の演奏指示映像３１を表示部４
に表示出力することにより、演奏誘導し、特に、本実施
例の演奏誘導装置１は、演奏指示映像３１をカメラ３の
撮影した鍵盤楽器５の鍵盤７の実映像３０に重ねて映し
出すことにより演奏誘導するところにその特徴がある。The performance guidance device 1 displays a performance instruction image 31 such as a keyboard image and a hand-shaped image including fingering information on the display unit 4.
The performance guidance apparatus 1 of the present embodiment performs the performance guidance by displaying and outputting the performance instruction video 31 on the real picture 30 of the keyboard 7 of the keyboard musical instrument 5 captured by the camera 3. There is a feature in guiding.
【００４６】以下、この演奏誘導処理について図１０及
び図１１のフローチャートに基づいて説明する。The performance guidance process will be described below with reference to the flowcharts of FIGS. 10 and 11.
【００４７】演奏誘導装置１は、電源が投入されると、
各種レジスタのクリア等の初期化処理を行った後、制御
キーがオンかどうかチェックし（ステップＳ１）、オフ
のときには、操作部８のカーソルキー１１を走査して、
カーソルキー１１からの入力信号があるかどうかによ
り、カーソルキー１１が操作されたかどうかチェックす
る（ステップＳ２）。When the power is turned on, the performance guiding device 1
After performing initialization processing such as clearing various registers, it is checked whether or not the control key is on (step S1). When the control key is off, the cursor key 11 of the operation unit 8 is scanned,
Whether or not the cursor key 11 has been operated is checked depending on whether or not there is an input signal from the cursor key 11 (step S2).
【００４８】ステップＳ２で、カーソルキー１１が操作
されていないときには、ステップＳ１に戻って、停止中
かどうかチェックする。When the cursor key 11 is not operated in step S2, the process returns to step S1 and it is checked whether or not it is stopped.
【００４９】ステップＳ２で、カーソルキー１１が操作
されたときには、演奏指示映像３１、特に、鍵盤線画像
３２の出力指示を行い（ステップＳ３）、演奏指示画像
記憶部２０から鍵盤線画像３２を読み出して、正規化部
２１、エンコーダ２２及び画像合成部２３を介して表示
部４に表示出力する。When the cursor key 11 is operated in step S2, an instruction to output the performance instruction image 31, particularly the keyboard line image 32 is issued (step S3), and the keyboard line image 32 is read from the performance instruction image storage unit 20. Then, it is displayed and output to the display unit 4 via the normalization unit 21, the encoder 22, and the image synthesis unit 23.
【００５０】鍵盤線画像３２の出力指示を行うと、操作
部８を走査して、モード設定がポジションであるかズー
ムであるかをポジションキー１２とズームキー１３のい
ずれが投入されているかを走査することによりチェック
し（ステップＳ４）、ポジションモードであると、操作
部８のカーソルキー１１の操作に対応した方向で、かつ
カーソルキー１１の操作に対応した量だけ、鍵盤線画像
３２の中心位置を移動して、中心位置データを更新する
（ステップＳ５）。When the keyboard line image 32 is instructed to be output, the operation unit 8 is scanned to determine whether the mode setting is position or zoom and which of the position key 12 and the zoom key 13 is turned on. By doing so (step S4), in the position mode, the center position of the keyboard line image 32 is moved in the direction corresponding to the operation of the cursor key 11 of the operation unit 8 and by the amount corresponding to the operation of the cursor key 11. It moves to update the center position data (step S5).
【００５１】そして、この更新した演奏指示映像３１の
中心位置データを正規化部２１にセットして、ステップ
Ｓ１に戻る（ステップＳ６）。Then, the center position data of the updated performance instruction image 31 is set in the normalizing section 21, and the process returns to step S1 (step S6).
【００５２】一方、ステップＳ４で、ズームモードであ
ると、操作部８のカーソルキー１１の操作に基づいて鍵
盤線画像３２の倍率データを更新し（ステップＳ７）、
この更新した倍率データを正規化部２１にセットして、
ステップＳ１に戻る（ステップＳ６）。On the other hand, if it is the zoom mode in step S4, the magnification data of the keyboard line image 32 is updated based on the operation of the cursor key 11 of the operation unit 8 (step S7),
Set the updated magnification data in the normalization unit 21,
The process returns to step S1 (step S6).
【００５３】すなわち、演奏誘導処理が停止していると
きには、ポジションキー１２あるいはズームキー１３に
よりモード選択され、カーソルキー１１が投入される
と、そのときのモードに応じて、表示部４に表示出力す
る演奏指示映像３１の中心位置を変更し、あるいは演奏
指示映像３１の倍率を変更する。That is, when the performance guidance process is stopped, the mode is selected by the position key 12 or the zoom key 13, and when the cursor key 11 is pressed, the display is output on the display unit 4 according to the mode at that time. The center position of the performance instruction image 31 is changed, or the magnification of the performance instruction image 31 is changed.
【００５４】したがって、図８に示したように、カメラ
３で撮影した鍵盤７の実映像３０と演奏指示映像３１、
特に、鍵盤線画像３２とが合わないときに、カーソルキ
ー１１及びポジションキー１２とズームキー１３を操作
することにより、演奏指示映像３１の表示部４の表示画
面４ａ上での位置や大きさを調整し、実映像３０に一致
させることができる。また、この設定した演奏指示映像
３１の中心位置及び倍率を正規化部２１にセットして、
以降の正規化処理を自動的に行わせることができる。Therefore, as shown in FIG. 8, the actual image 30 of the keyboard 7 and the performance instruction image 31, which are taken by the camera 3,
In particular, when the keyboard line image 32 does not match, the cursor key 11, the position key 12 and the zoom key 13 are operated to adjust the position and size of the performance instruction image 31 on the display screen 4a of the display unit 4. However, it can be matched with the real image 30. Further, the center position and the magnification of the performance instruction image 31 thus set are set in the normalizing section 21,
The subsequent normalization processing can be automatically performed.
【００５５】このように、表示部４に表示されている実
映像３０の鍵盤７の大きさに合わせて、図８及び図９に
示したように、演奏指示映像３１の鍵盤の映像の大きさ
や位置を調整することができるので、実際の鍵盤７の大
きさや鍵数及び鍵盤７のタイプに合わせて、演奏指示映
像３１を調整することができ、種々のタイプの鍵盤楽器
５に適用することができる。As described above, in accordance with the size of the keyboard 7 of the actual image 30 displayed on the display unit 4, as shown in FIGS. 8 and 9, the size of the keyboard image of the performance instruction image 31 and the like. Since the position can be adjusted, the performance instruction image 31 can be adjusted according to the actual size of the keyboard 7, the number of keys, and the type of the keyboard 7, and it can be applied to various types of keyboard instruments 5. it can.
【００５６】このようにして、演奏指示映像３１の位置
調整と倍率調整という正規化処理が完了し、ステップＳ
１で、制御キーがオンされていると、制御キーとしてテ
ンポキー９ａ、９ｂ、プレイキー１０ｄ、ポーズキー１
０ｃあるいはストップキー１０ｂのいずれがオンされて
いるかをチェックする（ステップＳ８、Ｓ９）。In this way, the normalization processing of position adjustment and magnification adjustment of the performance instruction image 31 is completed, and step S
When the control key is turned on in 1, the tempo keys 9a and 9b, the play key 10d, and the pause key 1 are used as control keys.
It is checked which of 0c and the stop key 10b is turned on (steps S8 and S9).
【００５７】テンポキー９ａ、９ｂが投入されると、テ
ンポキー９ａ、９ｂとしてテンポを上げるテンポキー９
ａが投入されたか、テンポを下げるテンポキー９ｂが投
入されたかに応じて、すなわち、テンポの＋／−に応じ
て、テンポデータを変更し、ステップＳ１に戻る（ステ
ップＳ１０）。When the tempo keys 9a and 9b are turned on, the tempo keys 9a and 9b are used to increase the tempo.
The tempo data is changed according to whether a is input or the tempo key 9b for decreasing the tempo is input, that is, according to +/- of the tempo, and the process returns to step S1 (step S10).
【００５８】すなわち、演奏指示画像記憶部２０には、
上述のように、演奏曲に対応した演奏指示情報がテンポ
毎記憶されており、ＣＰＵ２４は、テンポクロックに同
期して、演奏指示情報を読み出して、演奏誘導してい
る。そこで、このテンポクロックの発生タイミングを上
記処理により調整して、演奏誘導のテンポを調整してい
る。That is, the performance instruction image storage unit 20 stores
As described above, the performance instruction information corresponding to the performance music is stored for each tempo, and the CPU 24 reads the performance instruction information in synchronization with the tempo clock to guide the performance. Therefore, the tempo for performance guidance is adjusted by adjusting the timing of generation of this tempo clock by the above processing.
【００５９】次に、ステップＳ９で、投入されたキーが
ストップキー１０ｂ、ポーズキー１０ｃあるいはプレイ
キー１０ｄのいずれであるかにより、演奏指示画像記憶
部２０から演奏指示映像３１を読み出すための再生ポイ
ンタの位置や演奏誘導処理の進行を制御するテンポクロ
ックの割り込みを制御することにより、各投入されたキ
ーに対応した処理を行う（ステップＳ１１〜Ｓ１３）。Next, in step S9, a reproduction pointer for reading the performance instruction image 31 from the performance instruction image storage section 20 is selected depending on whether the input key is the stop key 10b, the pause key 10c or the play key 10d. By controlling the interruption of the tempo clock that controls the position and the progress of the performance guidance process, the process corresponding to each inserted key is performed (steps S11 to S13).
【００６０】すなわち、ストップキー１０ｂが投入され
たときには、再生ポインタを停止状態にリセットし（ス
テップＳ１１）、テンポクロックの割り込みを禁止し
て、ステップＳ１に戻る（ステップＳ１２）。すなわ
ち、ストップキー１０ｂが投入されたときには、再生ポ
インタを当該演奏曲の演奏指示情報の先頭アドレスに戻
し、次にプレイキー１０ｄが投入されたときに当該演奏
曲の最初の演奏指示情報から演奏誘導処理を行えるよう
にするとともに、テンポクロックの割り込みを禁止し
て、演奏指示映像３１の進行を停止する。That is, when the stop key 10b is pressed, the reproduction pointer is reset to the stopped state (step S11), the tempo clock interrupt is prohibited, and the process returns to step S1 (step S12). That is, when the stop key 10b is pressed, the playback pointer is returned to the start address of the performance instruction information of the performance song, and when the play key 10d is next pressed, performance guidance is started from the first performance instruction information of the performance song. The processing is enabled, the tempo clock interrupt is prohibited, and the progress of the performance instruction image 31 is stopped.
【００６１】また、ステップＳ９で、ポーズキー１０ｃ
が投入されたときには、再生ポインタは、そのままの位
置に保持したまま、テンポクロックの割り込みのみを禁
止して、ステップＳ１に戻る（ステップＳ１２）。すな
わち、ポーズキー１０ｃが投入されたときに、再生ポイ
ンタをそのままにして、次に、プレイキー１０ｄが投入
されたときには、ポーズキー１０ｃが投入された時点で
停止した当該演奏曲の演奏指示映像３１の位置から演奏
誘導処理を行えるようにするとともに、テンポクロック
の割り込みを禁止して、演奏指示映像３１の進行を停止
する。In step S9, the pause key 10c
When is input, only the tempo clock interrupt is prohibited while the reproduction pointer is held at the same position, and the process returns to step S1 (step S12). That is, when the pause key 10c is turned on, the reproduction pointer is left as it is, and when the play key 10d is next turned on, the position of the performance instruction image 31 of the performance song stopped when the pause key 10c is turned on. Then, the performance guidance process is performed, the tempo clock interruption is prohibited, and the progress of the performance instruction image 31 is stopped.
【００６２】さらに、ステップＳ９で、プレイキー１０
ｄが投入されたときには、ポーズやストップ等により停
止していたテンポクロックの割り込みの禁止を解除し
て、ステップＳ１に戻る（ステップＳ１３）。Further, in step S9, the play key 10
When d is turned on, the prohibition of the tempo clock interrupt that has been stopped due to a pause or stop is released, and the process returns to step S1 (step S13).
【００６３】すなわち、プレイキー１０ｄが投入された
ときには、テンポクロックの割り込みを許可し、そのと
き再生ポインタの位置するアドレスの演奏指示映像３１
を演奏指示画像記憶部２０から読み出して、正規化部２
１、エンコーダ２２及び画像合成部２３を介して表示部
４に出力し、表示部４の表示画面４ａに演奏指示映像３
１をカメラ３からの実映像３０に重ねて表示出力させ
る。That is, when the play key 10d is turned on, the interruption of the tempo clock is permitted, and at that time, the performance instruction image 31 of the address where the reproduction pointer is located.
Is read from the performance instruction image storage unit 20, and the normalization unit 2
1, output to the display unit 4 via the encoder 22 and the image synthesizing unit 23, and the performance instruction image 3 is displayed on the display screen 4a of the display unit 4.
1 is displayed on the actual image 30 from the camera 3 and output.
【００６４】このテンポクロックの割り込みが許可され
ると、ＣＰＵ２４は、図１１に割り込み処理のフローチ
ャートとして示すように、再生ポインタを演奏指示画像
記憶部２０に出力するという割り込み処理を行い（ステ
ップＴ１）、演奏指示画像記憶部２０から当該再生ポイ
ンタに対応する演奏指示情報を読み出して、演奏誘導を
行う。When this tempo clock interrupt is permitted, the CPU 24 performs an interrupt process of outputting a reproduction pointer to the performance instruction image storage section 20 as shown in a flowchart of the interrupt process in FIG. 11 (step T1). The performance instruction information corresponding to the reproduction pointer is read from the performance instruction image storage unit 20 to guide the performance.
【００６５】上記表示部４には、図１２に示すように、
鍵盤楽器５の鍵盤７の実映像３０に、押鍵する鍵の映
像、運指を示す手の形の映像及び今回押鍵する鍵や次回
押鍵する鍵の映像等の演奏指示映像３１が重ね合わされ
て表示出力される。すなわち、図７に示した鍵盤７や鍵
盤７上で押鍵している練習者の手等の実映像３０に、図
３から図６及び図９に示した演奏指示映像３１を重ね合
わせた映像が順次演奏曲の進行に合わせて、表示部４に
表示され、この演奏曲の進行をテンポキー９ａ、９ｂに
より調整することができる。On the display unit 4, as shown in FIG.
The actual image 30 of the keyboard 7 of the keyboard instrument 5 is overlaid with the image of the key to be pressed, the image of the shape of a hand showing fingering, and the performance instruction image 31 such as the image of the key to be pressed this time or the key to be pressed next time. Are displayed and output. That is, an image in which the performance image 30 shown in FIG. 3 to FIG. 6 and FIG. 9 is superimposed on the actual image 30 such as the keyboard 7 shown in FIG. Are sequentially displayed on the display unit 4 in accordance with the progress of the musical composition, and the progress of the musical composition can be adjusted by the tempo keys 9a and 9b.
【００６６】したがって、演奏誘導装置１は、表示部４
の表示により、演奏曲の進行に合わせて、現在押鍵する
鍵や次に押鍵する鍵を知らせることができるだけでな
く、どの指を使用して、どのような指運びをして押鍵す
ればよいかを知らせることができ、演奏イメージそのま
まで演奏誘導することができる。その結果、演奏練習の
効率を向上させることができる。Therefore, the performance guidance device 1 has the display unit 4
Not only can you tell which key is currently pressed or which key is to be pressed as the playing song progresses, but also which finger is used, what kind of finger movement is performed and the key is pressed. You can let them know what you want to do, and you can guide the performance without changing the performance image. As a result, the efficiency of performance practice can be improved.
【００６７】また、実映像３０と重ね合わせて演奏指示
映像３１を表示出力させているので、実際の指運びや手
の形等を演奏指示映像３１と比較しながら練習すること
ができ、より一層練習効率を向上させることができる。Further, since the performance instruction image 31 is displayed and output so as to be superimposed on the real image 30, it is possible to practice while comparing the actual finger movements and the shape of the hand with the performance instruction image 31. Practice efficiency can be improved.
【００６８】また、表示部４として、カラーテレビ受像
器を使用し、今回押鍵する鍵と次回押鍵する鍵とを色を
換えて表示出力するとともに、押鍵に使用する指を他の
指とは色を換えて表示出力しているので、指運びや次に
押鍵する鍵等をより一層分かり易くすることができ、よ
り一層練習効率を向上させることができる。As the display unit 4, a color television receiver is used, and the key to be pressed this time and the key to be pressed next time are displayed in different colors, and the finger used for key pressing is changed to another finger. Since the display is output with the color changed, it is possible to make it easier to understand the finger movement, the key to be pressed next, and the like, and it is possible to further improve the practice efficiency.
【００６９】なお、上記実施例においては、演奏指示画
像記憶部２０に、コンピュータグラフィックスによる映
像を記憶しているが、これに限るものではなく、例え
ば、見本となる実際の演奏を撮影したビデオ映像をデジ
タイズしたものに、押鍵指を指示する情報（指の色を変
える等の情報）等の各種演奏指示情報を付加したもので
あってもよい。この場合、演奏指示映像３１を実映像３
０にインポーズした際、より自然な映像となり、指運び
等をより一層分かり易いものとすることができる。In the above embodiment, the performance instruction image storage unit 20 stores the computer graphics image, but the present invention is not limited to this. For example, a video of an actual performance as a sample is taken. It is also possible to add various performance instruction information such as information for instructing a key to be pressed (information for changing the color of the finger) to the digitized image. In this case, the performance instruction image 31 is changed to the actual image 3
When the image is placed at 0, the image becomes more natural, and the finger movement can be more easily understood.
【００７０】また、上記実施例においては、演奏指示画
像記憶部２０に押鍵する鍵や運指情報を含む手の形及び
押鍵する鍵等の映像を演奏指示情報として記憶している
が、演奏指示情報としては、これらのみに限るものでは
なく、例えば、演奏曲の譜面や押鍵の強弱に関する情報
等をも記憶するようにしてもよい。この場合、これらの
譜面や押鍵の強弱情報をも、表示部４に同時に表示する
ようにすると、より一層効果的な演奏練習を行うことが
できる。In the above embodiment, the performance instruction image storage unit 20 stores, as the performance instruction information, the image of the key to be depressed, the shape of the hand including the fingering information, and the key to be depressed. The performance instruction information is not limited to these, and for example, information on the musical score of the musical composition, the strength of key depression, and the like may be stored. In this case, if the musical score and the strength of key depression are also displayed on the display unit 4 at the same time, more effective performance practice can be performed.
【００７１】[0071]
【発明の効果】本発明によれば、押鍵する鍵及び押鍵す
る指や指運びを含む手の形等の演奏指示映像を演奏イメ
ージそのままで表示出力して演奏誘導することができる
ので、演奏練習の効率を向上させることができる。According to the present invention, since the performance instruction image such as the key to be depressed and the shape of the finger to be depressed or the shape of the hand including the finger movement can be displayed and output as the performance image as it is, it is possible to guide the performance. The efficiency of performance practice can be improved.
【００７２】また、鍵盤や鍵盤上の手及び指等の演奏実
映像を演奏指示映像と重ね合わせて表示出力させている
ので、実際の指運びを含む手の形等を演奏指示映像と比
較しながら練習することができ、より一層練習効率を向
上させることができる。Further, since the actual performance image of the keyboard and the hands and fingers on the keyboard is displayed and output in combination with the performance instruction image, the shape of the hand including the actual finger movement is compared with the performance instruction image. While practicing, you can further improve your practice efficiency.
【００７３】さらに、表示されている実映像の鍵盤の大
きさに合わせて、演奏指示映像の鍵盤の映像の大きさや
位置を調整しているので、適切な演奏指示映像を表示す
ることができるとともに、種々のタイプの鍵盤楽器に適
用することができる。Furthermore, since the size and position of the keyboard image of the performance instruction image are adjusted in accordance with the size of the keyboard of the displayed actual image, an appropriate performance instruction image can be displayed. , Can be applied to various types of keyboard instruments.
【００７４】また、今回押鍵する鍵と次回押鍵する鍵と
を色を変える等の異なる映像として表示出力させたり、
押鍵に使用する指を他の指と色を変える等の異なる映像
として表示出力させているので、指運びや次に押鍵する
鍵等をより一層分かり易くすることができ、より一層練
習効率を向上させることができる。Also, the key to be pressed this time and the key to be pressed next time can be displayed and output as different images such as by changing colors.
Since the finger used for key depression is displayed and output as a different image such as changing the color from other fingers, it is possible to make it easier to understand the finger movement and the key to be pressed next, and more practice efficiency. Can be improved.
【図面の簡単な説明】[Brief description of drawings]
【図１】本発明による演奏誘導装置の一実施例を適用し
たシステム構成図。FIG. 1 is a system configuration diagram to which an embodiment of a performance guidance device according to the present invention is applied.
【図２】図１の演奏誘導装置の回路ブロック図。FIG. 2 is a circuit block diagram of the performance guidance device of FIG.
【図３】押鍵情報により表示を変化させた演奏指示映像
としての鍵を示す図。FIG. 3 is a diagram showing a key as a performance instruction image whose display is changed according to key depression information.
【図４】押鍵する指の表示を他の指と変化させた演奏指
示映像としての手を示す図。FIG. 4 is a diagram showing a hand as a performance instruction image in which the display of the finger to be pressed is changed from that of the other finger.
【図５】運指の一例として指くぐりを示す図。FIG. 5 is a diagram showing a finger passing as an example of fingering.
【図６】運指の一例として指ごえを示す図。FIG. 6 is a diagram showing a finger grip as an example of fingering.
【図７】実映像の一例を示す図。FIG. 7 is a diagram showing an example of a real image.
【図８】鍵盤線画像が実映像と合っていない状態を示す
図。FIG. 8 is a diagram showing a state in which the keyboard line image does not match the actual image.
【図９】鍵盤線画像を実映像に合わせて位置調整及び倍
率調整した状態を示す図。FIG. 9 is a diagram showing a state in which a keyboard line image is adjusted in position and magnification according to an actual image.
【図１０】演奏誘導装置による演奏誘導処理を示すフロ
ーチャート。FIG. 10 is a flowchart showing performance guidance processing by the performance guidance device.
【図１１】演奏誘導装置によるテンポクロックの割り込
み処理を示すフローチャート。FIG. 11 is a flowchart showing tempo clock interrupt processing by the performance guidance device.
【図１２】実映像と演奏指示映像により演奏誘導を行っ
ている状態の表示部の表示内容を示す図。FIG. 12 is a diagram showing display contents of a display unit in a state where performance guidance is performed by an actual image and a performance instruction image.
１ 演奏誘導装置 ２ 本体 ３ カメラ ４ 表示部 ５ 鍵盤楽器 ６ 練習者 ７ 鍵盤 ８ 操作部 ９ａ、９ｂ テンポキー １０ａ 逆戻しキー １０ｂ ストップキー １０ｃ 一時停止キー １０ｄ プレイキー １０ｅ 早送りキー １１ カーソルキー １２ ポジションキー １３ ズームキー ２０ 演奏指示画像記憶部 ２１ 正規化部 ２２ エンコーダ ２３ 画像合成部 ２４ ＣＰＵ 1 Performance guidance device 2 Main body 3 Camera 4 Display section 5 Keyboard instrument 6 Practitioner 7 Keyboard 8 Operation section 9a, 9b Tempo key 10a Reverse key 10b Stop key 10c Pause key 10d Play key 10e Fast forward key 11 Cursor key 12 Position key 13 Zoom key 20 Performance instruction image storage unit 21 Normalization unit 22 Encoder 23 Image synthesis unit 24 CPU
Claims (6)
む手の形の映像及び押鍵する鍵を指定する情報からなる
演奏指示映像を記憶する記憶手段と、 前記記憶手段に記憶されている演奏指示映像を対応する
演奏曲の進行に合わせて読み出す読出手段と、 前記読出手段の読み出した演奏指示映像を表示出力する
表示手段と、 を備えたことを特徴とする演奏誘導装置。1. Storage means for storing a performance instruction image composed of an image of a hand shape including fingering information corresponding to at least a musical piece to be played and information for designating a key to be depressed, and the storage means. A performance guide device comprising: a reading unit that reads out the performance instruction image in accordance with the progress of the corresponding music piece; and a display unit that displays and outputs the performance instruction image read by the reading unit.
手及び指の演奏の実映像を撮影する撮影手段と、 前記読出手段の読み出した演奏指示映像を前記撮影手段
の撮影した実映像と重ね合わせて前記表示手段に表示出
力させる映像合成手段と、 を、さらに備えたことを特徴とする演奏誘導装置。2. The performance guide device is installed in the vicinity of a keyboard musical instrument, and is provided with a photographing means for photographing at least an actual image of the performance of the keyboard and the hands and fingers on the keyboard, and a performance instruction image read by the reading means. A performance guide device, further comprising: an image synthesizing unit for superimposing the actual image captured by the image capturing unit on the display unit for output.
されている実映像の鍵盤の大きさに合わせて、前記演奏
指示映像の鍵盤の映像の大きさや位置を調整する調整手
段を、さらに備えたことを特徴とする請求項２記載の演
奏誘導装置。3. The performance guidance device further comprises adjusting means for adjusting the size and position of the keyboard image of the performance instruction image in accordance with the keyboard size of the actual image displayed on the display means. The performance guidance device according to claim 2, wherein the performance guidance device is provided.
ている実映像の鍵盤の鍵の数に合わせて、前記演奏指示
映像の鍵盤の映像から任意の領域を切り出して、映像の
大きさや位置を調整することを特徴とする請求項３記載
の演奏誘導装置。4. The adjusting means cuts out an arbitrary region from the keyboard image of the performance instruction image in accordance with the number of keys on the keyboard of the actual image displayed on the display means, and adjusts the size of the image. The performance guide device according to claim 3, wherein the position is adjusted.
る情報としての今回押鍵する鍵の映像と次回押鍵する鍵
の映像を異なる映像として記憶するとともに、前記手の
形の映像としての押鍵に使用する指の映像と他の指の映
像を異なる映像として記憶することを特徴とする請求項
１から請求項４のいずれかに記載の演奏誘導装置。5. The storage means stores the image of the key to be pressed this time and the image of the key to be pressed next time as different images as information for designating the key to be pressed, and the image of the hand shape. The performance guidance device according to any one of claims 1 to 4, wherein a video image of a finger used for depressing a key and a video image of another finger are stored as different video images.
記記憶手段は、前記押鍵する鍵を指定する情報としての
今回押鍵する鍵の映像と次回押鍵する鍵の映像を異なる
色の映像として記憶するとともに、前記手の形の映像と
しての押鍵に使用する指の映像と他の指の映像を異なる
色の映像として記憶することを特徴とする請求項１から
請求項５のいずれかに記載の演奏誘導装置。6. The display means is capable of color display, and the storage means uses different colors for the image of the key to be pressed this time and the image of the key to be pressed next time as the information for designating the key to be pressed. 6. The image of the finger used for key depression as the image of the hand and the image of the other finger are stored as images of different colors while being stored as the image of 1. The performance guide device according to any one of the above.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP20114093A JP3528003B2 (en) | 1993-07-20 | 1993-07-20 | Performance guiding device |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP20114093A JP3528003B2 (en) | 1993-07-20 | 1993-07-20 | Performance guiding device |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH0736446A true JPH0736446A (en) | 1995-02-07 |
| JP3528003B2 JP3528003B2 (en) | 2004-05-17 |
Family
ID=16436070
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP20114093A Expired - Lifetime JP3528003B2 (en) | 1993-07-20 | 1993-07-20 | Performance guiding device |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP3528003B2 (en) |
Cited By (18)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2000056781A (en) * | 1998-08-06 | 2000-02-25 | Taito Corp | Musical tone playing learning apparatus and karaoke sing-along machine |
| JP2000148168A (en) * | 1998-11-13 | 2000-05-26 | Taito Corp | Musical instrument play learning device and karaoke device |
| JP2001324919A (en) * | 2000-03-24 | 2001-11-22 | Casio Comput Co Ltd | Performance operation display device, and recording medium |
| JP2002091430A (en) * | 2001-07-18 | 2002-03-27 | Casio Comput Co Ltd | Playing action display device and recording medium |
| JP2002099276A (en) * | 2001-07-18 | 2002-04-05 | Casio Comput Co Ltd | Playing action display device and recording medium |
| JP2005024781A (en) * | 2003-06-30 | 2005-01-27 | Casio Comput Co Ltd | Musical performance recording device, musical performance recording and reproducing device, and program |
| US6915488B2 (en) | 2000-06-01 | 2005-07-05 | Konami Corporation | Operation instruction system and computer readable storage medium to be used for the same |
| JP2005181912A (en) * | 2003-12-24 | 2005-07-07 | Ims:Kk | Photographic seal delivering apparatus and its control method |
| JP2005196072A (en) * | 2004-01-09 | 2005-07-21 | Yamaha Corp | Rendition information display method, device and system |
| JP2005250378A (en) * | 2004-03-08 | 2005-09-15 | Yamaha Corp | Image generating apparatus and musical instrument |
| JP2006010805A (en) * | 2004-06-23 | 2006-01-12 | Casio Comput Co Ltd | Performance instruction apparatus and performance instruction program |
| US7009100B2 (en) | 2002-08-20 | 2006-03-07 | Casio Computer Co., Ltd. | Performance instruction apparatus and performance instruction program used in the performance instruction apparatus |
| JP2006091633A (en) * | 2004-09-27 | 2006-04-06 | Casio Comput Co Ltd | Musical performance evaluation system and program of performance evaluation processing |
| DE19743008B4 (en) * | 1996-09-27 | 2007-02-22 | Yamaha Corp., Hamamatsu | keyboard |
| JP2010085820A (en) * | 2008-10-01 | 2010-04-15 | Yamaha Corp | Electronic musical instrument, and program for achieving its control method |
| JP2010107852A (en) * | 2008-10-31 | 2010-05-13 | Yamaha Corp | Electronic musical device, computer device connected to the device, and program for realizing respective control method |
| JP2014045796A (en) * | 2012-08-29 | 2014-03-17 | Konami Digital Entertainment Co Ltd | Guide system, control method used for the same, and computer program |
| JP2015516594A (en) * | 2012-04-05 | 2015-06-11 | ブライアント，ジャクリーン | Apparatus and method for assisting learning |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US10332490B2 (en) | 2012-09-25 | 2019-06-25 | William Frederick Moyer | Piano systems and methods for the enhanced display of the hands of a pianist |
-
1993
- 1993-07-20 JP JP20114093A patent/JP3528003B2/en not_active Expired - Lifetime
Cited By (20)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| DE19743008B4 (en) * | 1996-09-27 | 2007-02-22 | Yamaha Corp., Hamamatsu | keyboard |
| JP2000056781A (en) * | 1998-08-06 | 2000-02-25 | Taito Corp | Musical tone playing learning apparatus and karaoke sing-along machine |
| JP2000148168A (en) * | 1998-11-13 | 2000-05-26 | Taito Corp | Musical instrument play learning device and karaoke device |
| JP2001324919A (en) * | 2000-03-24 | 2001-11-22 | Casio Comput Co Ltd | Performance operation display device, and recording medium |
| US6915488B2 (en) | 2000-06-01 | 2005-07-05 | Konami Corporation | Operation instruction system and computer readable storage medium to be used for the same |
| JP2002091430A (en) * | 2001-07-18 | 2002-03-27 | Casio Comput Co Ltd | Playing action display device and recording medium |
| JP2002099276A (en) * | 2001-07-18 | 2002-04-05 | Casio Comput Co Ltd | Playing action display device and recording medium |
| US7009100B2 (en) | 2002-08-20 | 2006-03-07 | Casio Computer Co., Ltd. | Performance instruction apparatus and performance instruction program used in the performance instruction apparatus |
| JP2005024781A (en) * | 2003-06-30 | 2005-01-27 | Casio Comput Co Ltd | Musical performance recording device, musical performance recording and reproducing device, and program |
| JP2005181912A (en) * | 2003-12-24 | 2005-07-07 | Ims:Kk | Photographic seal delivering apparatus and its control method |
| JP2005196072A (en) * | 2004-01-09 | 2005-07-21 | Yamaha Corp | Rendition information display method, device and system |
| JP4507602B2 (en) * | 2004-01-09 | 2010-07-21 | ヤマハ株式会社 | Performance information display method, performance information display device, and performance information display system |
| JP2005250378A (en) * | 2004-03-08 | 2005-09-15 | Yamaha Corp | Image generating apparatus and musical instrument |
| JP4529489B2 (en) * | 2004-03-08 | 2010-08-25 | ヤマハ株式会社 | Image generating apparatus and musical instrument |
| JP2006010805A (en) * | 2004-06-23 | 2006-01-12 | Casio Comput Co Ltd | Performance instruction apparatus and performance instruction program |
| JP2006091633A (en) * | 2004-09-27 | 2006-04-06 | Casio Comput Co Ltd | Musical performance evaluation system and program of performance evaluation processing |
| JP2010085820A (en) * | 2008-10-01 | 2010-04-15 | Yamaha Corp | Electronic musical instrument, and program for achieving its control method |
| JP2010107852A (en) * | 2008-10-31 | 2010-05-13 | Yamaha Corp | Electronic musical device, computer device connected to the device, and program for realizing respective control method |
| JP2015516594A (en) * | 2012-04-05 | 2015-06-11 | ブライアント，ジャクリーン | Apparatus and method for assisting learning |
| JP2014045796A (en) * | 2012-08-29 | 2014-03-17 | Konami Digital Entertainment Co Ltd | Guide system, control method used for the same, and computer program |
Also Published As
| Publication number | Publication date |
|---|---|
| JP3528003B2 (en) | 2004-05-17 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP3528003B2 (en) | Performance guiding device | |
| US7514622B2 (en) | Musical sound production apparatus and musical | |
| US6915488B2 (en) | Operation instruction system and computer readable storage medium to be used for the same | |
| JPH0877694A (en) | Operating chip unit | |
| US5931680A (en) | Score information display apparatus | |
| KR20170138135A (en) | Method of helping piano performance and based on augemented reality and apparatus performing the same | |
| US7009100B2 (en) | Performance instruction apparatus and performance instruction program used in the performance instruction apparatus | |
| JP2007121355A (en) | Playing system | |
| JPWO2019130592A1 (en) | Audio equipment | |
| KR920004103B1 (en) | Electronic musical instrument | |
| US7504572B2 (en) | Sound generating method | |
| JP2005241877A (en) | Fingering instruction apparatus and program | |
| JP6217275B2 (en) | Song data display device, song data display method and program | |
| JP2004198761A (en) | Musical performance training apparatus and program for musical performance training processing | |
| JPH0869282A (en) | Automatic playing device | |
| JP3931603B2 (en) | Performance learning apparatus and performance learning processing program | |
| JPH1020870A (en) | Karaoke sing-along device | |
| JP2006208959A (en) | Karaoke playing apparatus | |
| JP2003066957A (en) | Performance practice device and performance practice processing program | |
| JP2006091633A (en) | Musical performance evaluation system and program of performance evaluation processing | |
| JP3945307B2 (en) | Performance guide method, apparatus thereof, and program | |
| JPH0981151A (en) | Chord progressing editing device | |
| JP2879098B2 (en) | Video game machine and sound signal generating method thereof | |
| JP3139081B2 (en) | Electronic musical instrument parameter setting device | |
| WO2004070543A2 (en) | Electronic image visualization system and communication methodologies |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20040127 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20040209 |
|
| R150 | Certificate of patent (=grant) or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (prs date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090305 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (prs date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100305 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (prs date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110305 Year of fee payment: 7 |
|
| FPAY | Renewal fee payment (prs date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110305 Year of fee payment: 7 |
|
| FPAY | Renewal fee payment (prs date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120305 Year of fee payment: 8 |
|
| FPAY | Renewal fee payment (prs date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130305 Year of fee payment: 9 |