JP2002099276A - Playing action display device and recording medium - Google Patents
Playing action display device and recording mediumInfo
- Publication number
- JP2002099276A JP2002099276A JP2001217442A JP2001217442A JP2002099276A JP 2002099276 A JP2002099276 A JP 2002099276A JP 2001217442 A JP2001217442 A JP 2001217442A JP 2001217442 A JP2001217442 A JP 2001217442A JP 2002099276 A JP2002099276 A JP 2002099276A
- Authority
- JP
- Japan
- Prior art keywords
- data
- finger
- variable
- value
- timing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Auxiliary Devices For Music (AREA)
- Electrophonic Musical Instruments (AREA)
Abstract
Description
【0001】[0001]
【発明の属する技術分野】本発明は、鍵盤などの演奏操
作の対象となる演奏操作子群に対し、演奏の進行に応じ
て操作していく際の動作を表示するための技術に関す
る。BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a technique for displaying an operation of a performance operation group, such as a keyboard, to be operated as the performance progresses.
【0002】[0002]
【従来の技術および発明が解決しようとする課題】現在
では、多くの鍵盤楽器に、演奏の進行に応じて押鍵(操
作)すべき鍵を順次、ユーザ(演奏者)に通知していく
ナビゲーション機能が搭載されている。しかし、ナビゲ
ーション機能を利用するユーザの多くは技術的に未熟で
あり、そのナビゲーション機能によって次に押鍵すべき
鍵を知ることができても、その鍵をどの指で押鍵すべき
かが判らないのが実状である。このことから、鍵の押鍵
に使うべき指を表示する装置(演奏動作表示装置)を搭
載した鍵盤楽器も製品化されている。その演奏動作表示
装置を利用することにより、指の運び方を意識した演奏
を行えるため、ユーザにとってはより効率的な練習(学
習)を行うことができる。2. Description of the Related Art At present, many keyboard musical instruments sequentially notify a user (player) of a key to be pressed (operated) in accordance with the progress of performance. Features are installed. However, many users who use the navigation function are technically inexperienced, and even though the navigation function can know the key to be pressed next, it does not know which finger to press the key. This is the actual situation. For this reason, keyboard musical instruments equipped with a device for displaying a finger to be used for depressing a key (performance operation display device) have been commercialized. By using the performance operation display device, it is possible to perform a performance conscious of how to carry a finger, so that a more efficient practice (learning) can be performed for the user.
【0003】演奏動作表示装置の多くは、次の押鍵(操
作)に使うべき指を単に表示するだけである。しかし、
押鍵(操作)すべき鍵への指の運び方は、その鍵に単に
指を運ぶだけではない。別の指の下をくぐらせて指を運
んだり、別の指の上をまたいで指を運んだりすることも
ある。これは、単に指だけを表示した場合、その指をど
のように運んで押鍵(操作)するべきなのかをユーザが
直ちに理解できるとは限らないことを意味する。このこ
とから、例えば特開平10−39739号公報に開示さ
れているように、使う指だけでなく、その指の運び方を
より理解しやすい形で表示する演奏動作表示装置が創案
されている。Many of the performance operation display devices merely display a finger to be used for the next key press (operation). But,
Carrying a finger to a key to be pressed (operated) is not merely a matter of carrying a finger to the key. Sometimes they carry a finger under another finger, or carry a finger across another finger. This means that when only a finger is displayed, the user cannot always immediately understand how to carry the finger and depress (operate) the key. For this reason, as disclosed in, for example, Japanese Patent Application Laid-Open No. 10-39939, a performance operation display device has been devised that displays not only the finger to be used but also how to carry the finger in a more easily understood form.
【0004】その特開平10−39739号公報に開示
された従来の演奏動作表示装置では、押鍵時の手指(手
首から先の部分)を表示することにより、押鍵に使うべ
き指をどのような形で使うべきかをユーザに知らせるよ
うになっている。しかし、次に押鍵すべき鍵が現在、押
鍵している鍵と離れているような場合、普通、手や指を
大きく動かさなければならない。これは、押鍵時の手指
を表示しても、その表示された手指の形にどのようにし
て移行させるのかをユーザが直ちに理解できるとは限ら
ないことを意味する。このため、従来の演奏動作表示装
置には、全体的な手指の動作が判りにくいという問題点
があった。[0004] In the conventional performance display apparatus disclosed in Japanese Patent Application Laid-Open No. 10-39939, the finger to be used for key-depression is displayed by displaying the finger at the time of key-depression (the part beyond the wrist). It informs the user what to use. However, when the key to be pressed next is separated from the key currently being pressed, the hand or finger usually has to be moved greatly. This means that even when the finger at the time of key depression is displayed, the user cannot always immediately understand how to shift to the displayed finger shape. For this reason, the conventional performance display apparatus has a problem in that it is difficult to understand the overall movement of the fingers.
【0005】なお、上記従来の演奏動作表示装置では、
コンピュータ・グラフィクス(以降、CGと略記する)
技術を用いて、押鍵に使う指を動かしている。その指の
動きにより、押鍵に使うべき指をユーザは知ることがで
きる。しかし、その指の動きは、押鍵時の手指の形を作
った後の動きである。このため、その指の動きによっ
て、押鍵時の手指の形にどのようにして移行させるかを
ユーザに知らせることはできない。また、演奏中におけ
る実際の手指の動きにおいて、押鍵動作を開始するタイ
ミングは、その直前に押鍵された手指の位置及び状態に
よって異なる。つまり直前の押鍵位置が次の押鍵位置か
ら離れている場合、あるいは手指の状態が直前の押鍵時
の手指の状態と大きく異なっている場合などは、押鍵動
作を開始するタイミングを早めに行なっている。こうし
た手指の移行開始のタイミングなどは、単に押鍵後の手
指の状態を表示するだけの従来の演奏動作表示装置で
は、ユーザーに認識させることができなかった。[0005] In the above-mentioned conventional performance operation display device,
Computer graphics (hereinafter abbreviated as CG)
Using technology, he moves his finger for key press. By the movement of the finger, the user can know the finger to be used for key pressing. However, the movement of the finger is a movement after the finger is shaped when the key is pressed. For this reason, it is not possible to inform the user how to shift to the shape of the finger at the time of key depression by the movement of the finger. In addition, in the actual movement of the finger during the performance, the timing of starting the key pressing operation differs depending on the position and the state of the finger pressed immediately before the key pressing operation. In other words, when the previous key-depression position is far from the next key-depression position, or when the state of the finger is significantly different from the state of the finger at the time of the previous key-depression, the timing of starting the key-depression operation is advanced. I have done it. The conventional performance operation display device, which merely displays the state of the finger after the key is pressed, cannot be recognized by the user at the timing of the start of the finger transition.
【0006】本発明の課題は、演奏中における手指の動
作をユーザが容易に理解できる形で表示するための技術
を提供することにある。An object of the present invention is to provide a technique for displaying a finger movement during a performance in a form that can be easily understood by a user.
【0007】[0007]
【課題を解決するための手段】本発明の演奏操作表示装
置は、演奏操作子群上で発生させるべきイベントの内容
を表すイベントデータ、該イベントの発生タイミングを
示す時間データ、及び該イベントの発生に使用すべき指
を指定する指データを少なくとも有するデータ群を単位
楽音・運指データとして構成されている楽音・運指デー
タを取得する楽音・運指データ取得手段と、楽音・運指
データ取得手段にて取得された楽音・運指データに基づ
いて、少なくとも演奏操作子群上の手指の位置を表わす
動作制御データを生成する動作制御データ生成手段と、
動作制御データ生成手段により生成された動作制御デー
タにて表わされる当該手指の位置に移行を開始すべき動
作タイミングを、直前の手指の位置から当該手指の位置
まで移行するに要する動作時間に基づいて決定する動作
タイミング決定手段と、動作制御データ生成手段からの
動作制御データ及び動作タイミング決定手段からの動作
タイミングに基づいて、演奏操作子群を操作していく手
指の動作を動画表示する動作表示手段と、を具備する。According to the present invention, there is provided a performance operation display device, comprising: event data representing the content of an event to be generated on a performance operator group; time data representing the occurrence timing of the event; Tone / fingering data acquiring means for acquiring tone / fingering data configured as a unit tone / fingering data with a data group having at least finger data designating a finger to be used, and tone / fingering data acquiring Operation control data generating means for generating operation control data representing at least the position of the finger on the performance operator group based on the musical sound / fingering data obtained by the means;
The operation timing to start shifting to the position of the finger represented by the operation control data generated by the operation control data generating means is determined based on the operation time required to shift from the position of the immediately preceding finger to the position of the finger. Motion timing determining means for determining, and motion display means for displaying a motion of a finger operating a performance operator group based on motion control data from the motion control data generating means and motion timing from the motion timing determining means in a moving image And
【0008】なお、上記構成において、手指の位置に移
行を開始すべき動作タイミングは、演奏操作子群中の演
奏操作子を操作開始すべきタイミングであり、動作時間
は、演奏操作子の操作を解除するに要する時間と演奏操
作子の操作を終了するに要する時間であることが望まし
い。In the above configuration, the operation timing at which the shift to the finger position is to be started is the timing at which the operation of the performance operator in the performance operator group is to be started, and the operation time is determined by the operation of the performance operator. Desirably, it is the time required to cancel and the time required to end the operation of the performance operator.
【0009】また、動作タイミング決定手段は、楽音・
運指データに含まれる時間データに基づいて、いずれか
の演奏操作子の操作を解除した後別の演奏操作子が操作
を終了するまでに要する実動作時間が、動作時間より大
きいか否か判別する判別手段と、判別手段により大きい
と判別された場合は、演奏操作子が操作を終了したタイ
ミングから演奏操作子の操作を解除するに要する時間を
減算したタイミングを、判別手段により小さいと判別さ
れた場合は、演奏操作子が操作解除を終了するタイミン
グに演奏操作子の操作を解除するに要する時間を加算し
たタイミングを、手指の位置に移行を開始すべき動作タ
イミングとする制御手段と、を含むことが望ましい。Further, the operation timing determining means includes a
Based on the time data included in the fingering data, it is determined whether or not the actual operation time required for releasing one of the performance operators and ending the operation of another performance operator is longer than the operation time. If the discriminating means and the discriminating means determine that the timing is greater, the timing obtained by subtracting the time required to release the operation of the playing operator from the timing at which the performance operator has completed the operation is determined to be smaller by the discriminating means. In this case, the control means sets the timing obtained by adding the time required for releasing the operation of the performance operator to the timing at which the performance operator ends the operation release to be the operation timing to start shifting to the finger position. It is desirable to include.
【0010】さらに制御手段は、判別手段により小さい
と判別された場合でかつ演奏操作子の操作を解除するに
要する時間が実時間と比較して所定割合以上大きい場合
には、演奏操作子が操作解除を終了するタイミングに加
算する演奏操作子の操作を解除するに要する時間を圧縮
することが望ましい。[0010] Further, the control means, if the discriminating means has determined that it is smaller, and if the time required to release the operation of the performance operator is greater than the real time by a predetermined ratio or more, It is desirable to reduce the time required to release the operation of the performance operator, which is added to the timing at which the release ends.
【0011】本発明の記録媒体は、演奏操作の対象とな
る演奏操作子群上で発生させるべきイベントの内容を表
すイベントデータ、該イベントの発生タイミングを示す
時間データ、及び該イベントの発生に使用すべき指を指
定する指データを少なくとも有するデータ群を単位楽音
・運指データとして構成されている楽音・運指データを
取得する楽音・運指データ取得手段と、楽音・運指デー
タ取得手段にて取得された楽音・運指データに基づい
て、少なくとも演奏操作子群上の手指の位置表わす動作
制御データを生成する動作制御データ生成手段と、動作
制御データ生成手段により生成された動作制御データに
て表わされる当該手指の位置に移行を開始すべき動作タ
イミングを、直前の手指の位置から当該手指の位置まで
移行するに要する動作時間に基づいて決定する動作タイ
ミング決定手段と、動作制御データ生成手段からの動作
制御データ及び動作タイミング決定手段からの動作タイ
ミングに基づいて、演奏操作子群を操作していく手指の
動作を動画表示する動作表示手段と、を実現させるプロ
グラムを記録している。[0011] The recording medium of the present invention is used for event data representing the content of an event to be generated on a performance operator group to be played, time data indicating the timing of occurrence of the event, and data used for generation of the event. A data group having at least finger data for designating a finger to be played; a musical sound / fingering data acquiring means for acquiring musical sound / fingering data configured as unit musical sound / fingering data; and a musical sound / fingering data acquiring means. Operation control data generating means for generating operation control data representing at least the position of the finger on the performance operator group based on the musical tone / fingering data obtained by the operation, and operation control data generated by the operation control data generation means. The movement timing required to start shifting to the position of the finger represented by て is the movement required to shift from the position of the immediately preceding finger to the position of the finger. Motion timing determining means for determining based on time, and motion display of a finger operating a performance operator group based on motion control data from motion control data generating means and motion timing from motion timing determining means And a program for realizing the operation display means.
【0012】本発明では、手指を複数のパート(オブジ
ェクト)に分け、楽音・運指データを基に、演奏操作子
群上で生じるイベント単位で、イベントを生じさせた後
(演奏操作子群が鍵盤であれば押鍵終了時、或いは離鍵
後が対応)の手指の状態を各パート毎に求め、該求めた
状態にパート単位で順次、移行させることにより、手指
による演奏動作を動画表示する。そのようにして、演奏
動作の一連の流れを動画で表現することにより、ユーザ
に演奏中における手指の動作を容易に理解させることが
可能となる。また、イベント単位で手指の状態を確定さ
せることから、長い時間をかけて1イベントを生じさせ
るための指の動作を表現するようなことは回避される。
その結果、動画表示させる演奏動作もより自然な形とな
る。また、曲の速さに合わせて手指の移行開始及び移行
終了のタイミングを変更しており、演奏される曲の速度
が変っても、それに応じた手指の動作表示をユーザーに
理解させることができる。In the present invention, a finger is divided into a plurality of parts (objects), and an event is generated in units of events generated on a performance operator group based on musical sound / fingering data. For the keyboard, the state of the finger at the end of key press or after the key release) is obtained for each part, and by sequentially shifting to the obtained state for each part, the performance operation by the finger is displayed as a moving image. . In this way, by expressing a series of flows of the performance operation in a moving image, it is possible for the user to easily understand the finger operation during the performance. Further, since the state of the finger is determined for each event, it is possible to avoid expressing the movement of the finger for generating one event over a long time.
As a result, the performance operation for displaying a moving image also becomes more natural. Further, the timing of the start and end of the transition of the finger is changed according to the speed of the music, so that even if the speed of the music to be played changes, the user can understand the operation display of the finger according to the change. .
【0013】[0013]
【発明の実施の形態】以下、本発明の実施の形態につい
て、図面を参照しながら詳細に説明する。図1は、本実
施の形態による演奏動作表示装置の回路構成図である。
この演奏動作表示装置は、後述する楽音・運指データを
外部から取得し、取得した楽音・運指データに基づいて
演奏中の手指の動作を動画で表示する装置として実現さ
れている。Embodiments of the present invention will be described below in detail with reference to the drawings. FIG. 1 is a circuit configuration diagram of the performance operation display device according to the present embodiment.
This performance operation display device is realized as a device that acquires musical sound / fingering data, which will be described later, from the outside, and displays the motion of a finger during performance in a moving image based on the acquired musical sound / fingering data.
【0014】上記演奏動作表示装置は、図1に示すよう
に、装置全体の制御を行うCPU101と、そのCPU
101が実行するプラグラムや各種制御データ(画像表
示用の各種データを含む)などを格納したROM102
と、そのCPU101がワーク用に用いるRAM103
と、上記楽音・運指データを含む各種データを取得する
ためのデータ入力部104と、CPU101から送られ
たデータを画面上に表示する表示部105と、ユーザが
操作の対象とする操作部106と、CPU101の指示
に従って楽音の波形データを生成する音源107と、そ
の音源107が出力した波形データをサウンドに変換し
て放音するサウンドシステム108と、CPU101を
各部102〜107と接続するバス109と、を備えて
構成されている。As shown in FIG. 1, the performance operation display device includes a CPU 101 for controlling the entire apparatus, and a CPU for controlling the CPU.
ROM 102 storing programs to be executed by 101, various control data (including various data for image display), etc.
And a RAM 103 used by the CPU 101 for work.
A data input unit 104 for acquiring various data including the musical tone / fingering data; a display unit 105 for displaying data transmitted from the CPU 101 on a screen; and an operation unit 106 to be operated by the user A sound source 107 that generates waveform data of musical sounds in accordance with instructions from the CPU 101, a sound system 108 that converts the waveform data output by the sound source 107 into sound and emits the sound, and a bus 109 that connects the CPU 101 to the units 102 to 107. And is provided.
【0015】上記データ入力部104は、例えばフロッ
ピー(登録商標)ディスクドライブ(FDD)である。
表示部105は、例えばCRT、或いは液晶表示装置な
どの表示装置である。操作部106は、例えば各種スイ
ッチやキー等の複数の操作子、及びそれら操作子への操
作を検出する検出回路から構成された入力装置である。
サウンドシステム108は、例えばD/Aコンバータ、
アンプ、及びスピーカからなるシステムである。なお、
データ入力部104は、外部機器が出力した信号を少な
くとも受信できるインターフェース、或いは所定のネッ
トワークとの通信を行う通信制御装置であっても良い。The data input unit 104 is, for example, a floppy (registered trademark) disk drive (FDD).
The display unit 105 is a display device such as a CRT or a liquid crystal display device. The operation unit 106 is an input device including a plurality of operators such as various switches and keys, and a detection circuit that detects an operation on the operators.
The sound system 108 includes, for example, a D / A converter,
This is a system including an amplifier and a speaker. In addition,
The data input unit 104 may be an interface that can receive at least a signal output from an external device, or a communication control device that performs communication with a predetermined network.
【0016】上記楽音・運指データは、図2に示すよう
に、楽音データに運指データを付加する形で構成されて
いる。楽音データは、通常は演奏の再生に使用される演
奏データ(シーケンスデータ)であり、楽音の音階(音
高)データ、その楽音の発音が開始(ノートオンイベン
ト)か消音(ノートオフイベント)かを含むイベントの
種別を表す種別データ、及び楽音の音高データと種別デ
ータによって特定されるイベントが発生したタイミング
を示す時間データを1単位のデータ(以降、便宜的に単
位楽音データと呼ぶ)として、その単位楽音データをイ
ベントの発生順に並べた形で構成されている。運指デー
タは、単位楽音データ毎に付加された、その単位楽音デ
ータが表すイベントを発生させるために用いるべき指を
示す指番号データからなるデータである。指番号とし
て、親指には0、人差し指には1、中指には2、薬指に
は3、小指には4がそれぞれ割り当てられている。As shown in FIG. 2, the tone and fingering data is constituted by adding fingering data to tone data. The musical tone data is performance data (sequence data) which is usually used for playing a performance, and includes musical scale (pitch) data of the musical tone and whether the tone is started (note-on event) or muted (note-off event). The type data representing the type of the event including the data, and the pitch data of the musical tone and the time data indicating the timing at which the event specified by the type data occurred are defined as one unit of data (hereinafter referred to as unit musical tone data for convenience). The unit musical tone data is arranged in the order of occurrence of the event. The fingering data is finger number data indicating a finger to be used for generating an event represented by the unit musical sound data, which is added to each unit musical sound data. As finger numbers, 0 is assigned to the thumb, 1 to the index finger, 2 to the middle finger, 3 to the ring finger, and 4 to the little finger.
【0017】上記運指データには、通常、指番号データ
の他に、少なくとも、動かす指が右手か左手かを示す手
データが存在し、単位楽音データ毎に、それらのデータ
が付加される。しかし、ここでは、混乱を避けて理解を
容易とするために、右手のみに着目して手データ等は考
慮しないことにする。上記時間データは、イベント間の
時間間隔(デルタタイム)でそのイベントの発生タイミ
ングを表すデータであり、種別データ、及び音高データ
は、例えばMIDIデータを構成するデータである。The fingering data usually includes at least hand data indicating whether the finger to be moved is the right hand or the left hand, in addition to the finger number data, and these data are added to each unit tone data. However, here, in order to avoid confusion and facilitate understanding, only the right hand will be focused on and hand data and the like will not be considered. The time data is data representing the occurrence timing of the event at a time interval (delta time) between the events, and the type data and the pitch data are data constituting, for example, MIDI data.
【0018】なお、上記楽音データ(演奏データ)で
は、楽音の発音開始(オン)、その楽音の消音(オフ)
をそれぞれ別のイベントとして扱い、楽音の発音期間は
それらのイベントによって指定されるようになっている
が、楽音データはそれらのイベントを一つにまとめたも
のであっても良い。即ち単位楽音データは、例えば音高
データ、その音高データで指定される楽音の発音開始タ
イミングを指定する時間データ、及びその楽音を発音さ
せている時間長(ゲートタイム)を指定する時間長デー
タから構成されるものであっても良い。このことから明
らかなように、楽音データの形式は特に限定されるもの
ではない。In the above tone data (performance data), tone generation starts (ON) and the tone is muted (OFF).
Are treated as separate events, and the tone generation period of the musical tone is specified by those events. However, the musical tone data may be a collection of those events. That is, the unit musical tone data includes, for example, pitch data, time data for specifying a sound generation start timing of a musical tone specified by the pitch data, and time length data for specifying a time length (gate time) for generating the musical sound. May be configured. As is clear from this, the format of the musical sound data is not particularly limited.
【0019】以上の構成において、その動作を説明す
る。CPU101は、電源がオンされると、ROM10
3に格納されているプログラムを読み出して実行するこ
とにより、装置全体の制御を開始し、表示部105には
初期画面を表示させる。以降は、ユーザの操作部106
への操作に応じて制御を行う。The operation of the above configuration will be described. When the power is turned on, the CPU 101
By reading and executing the program stored in the program 3, control of the entire apparatus is started, and an initial screen is displayed on the display unit 105. Hereinafter, the user operation unit 106
The control is performed in accordance with the operation to.
【0020】CPU101は、その初期画面を表示させ
るための画像データを、例えばRAM103を作業用に
使用して、ROM102から読み出した複数の画像デー
タを用いて生成する。そのようにして生成された初期画
面の画像データを送られた表示部105は、それを特に
は図示しないメモリ(例えばデュアルポートRAM)に
格納する。それ以降における表示内容の全体的、或いは
部分的な変更は、例えばCPU101が、そのメモリに
格納された画像データ中でデータを書き換えるべき部分
の画像データをROM102から読み出すか、或いはそ
れを用いて生成し、そのようにして得た画像データを、
そのメモリ中の画像データを書き換えるべき部分に上書
きすることで行われる。そのようにして、CPU101
は、表示部105に、表示すべき画面やメッセージ、後
述する演奏動作を表現する手指などを必要に応じて表示
させる。The CPU 101 generates image data for displaying the initial screen by using a plurality of image data read from the ROM 102 using, for example, the RAM 103 for work. The display unit 105 to which the image data of the initial screen thus generated is sent is stored in a memory (not shown) (for example, a dual port RAM). For example, the CPU 101 reads, from the ROM 102, image data of a portion of the image data stored in the memory where data should be rewritten, or generates the image data using the whole or partial change of the display content thereafter. And the image data thus obtained is
This is performed by overwriting the image data in the memory with the portion to be rewritten. Thus, the CPU 101
Causes the display unit 105 to display a screen or a message to be displayed, a finger expressing a performance operation to be described later, or the like, as necessary.
【0021】ユーザが操作部106を操作してフロッピ
ー(登録商標)ディスク(FD)に格納されたファイル
のデータの読み出しを指示した場合、その旨を示すデー
タが操作部106からバス109を介してCPU101
に送られる。そのデータを受け取ったCPU101は、
データ入力部(FDD)104に対しそれの読み出しを
指示するコマンドを送り、その後にデータ入力部104
から送られるそのファイルのデータをRAM103に格
納する。そのようにして、楽音・運指データを含め、ユ
ーザが指定したデータをファイル単位でFDから取得す
る。When the user operates the operation unit 106 to instruct reading of data of a file stored in a floppy (registered trademark) disk (FD), data indicating this is transmitted from the operation unit 106 via the bus 109. CPU 101
Sent to Upon receiving the data, the CPU 101
A command to instruct the data input unit (FDD) 104 to read the data is sent to the data input unit (FDD) 104.
Is stored in the RAM 103. In this way, data specified by the user, including musical sound and fingering data, is obtained from the FD in file units.
【0022】CPU101にデータを読み出させるファ
イルの指定は、特に詳細な説明は省略するが、操作部1
06を操作してファイル名を入力するか、或いはFDに
格納されたファイルの一覧を表示部105に表示させ
て、そのなかからファイルを選択することで行うように
なっている。その一覧に表示させるファイル名は、CP
U101が、データ入力部104にFDに格納されたフ
ァイル名を読み出させて受け取ったものである。The specification of the file from which the CPU 101 reads data is omitted, although a detailed description is omitted.
The user can input a file name by operating 06 or display a list of files stored in the FD on the display unit 105 and select a file from the list. The file name to be displayed in the list is CP
U101 is obtained by causing the data input unit 104 to read out the file name stored in the FD.
【0023】特開平10−39739号公報に開示され
た従来の演奏動作表示装置のように、基本的には押鍵時
における手指の形だけを表示させるのでは、その形に移
行するまでの手指の動かし方をユーザは理解しにくい。
このことから、本実施の形態では、イベント単位で、そ
れまでの手指の状態から、そのイベントを生じさせる手
指の状態に移行するまでの動作を動画で表示するように
している。即ち手をどこからどこまで移動させるか、ど
の指の状態をどのように変化せるか、といったことを動
画で表示するようにしている。そのようにして、演奏中
における一連の手指の動作を細かく表示した場合、どの
ように手指を動作させれば良いのかを考えさせることな
くユーザに理解させることができる。As in the conventional performance display apparatus disclosed in Japanese Patent Application Laid-Open No. 10-39939, basically, only the shape of the finger at the time of key depression is displayed. It is difficult for the user to understand how to move.
For this reason, in the present embodiment, the operation from the state of the finger up to that point to the state of the finger causing the event is displayed as a moving image in event units. That is, a moving image is displayed to indicate where to move the hand from and how to change the state of which finger. In this way, when a series of finger movements during a performance are displayed in detail, the user can be understood without having to think about how to move the fingers.
【0024】演奏中における手指の動作を動画で表示さ
せるためには、そのためのデータ(以降、動作制御デー
タと呼ぶ)を生成しなければならない。そのデータは、
楽音・運指データから生成するが、対象となる楽音・運
指データによってはその生成に重い負荷がかかる。これ
は、動作制御データを生成しつつ、楽音・運指データ
(楽音データ)を再生させようとすると、楽音の発音や
画像の表示に不具合を生じさせる可能性があることを意
味する。即ち、楽音を発音させるべきタイミングで発音
させられなかったり、手指の動作をスムーズに表示させ
られないといったことが生じる可能性がある。このこと
から、本実施の形態では、動作制御データの生成は楽音
・運指データの再生とは別に行うようにしている。In order to display the motion of a finger during a performance in a moving image, data (hereinafter referred to as motion control data) for the motion must be generated. The data is
Although it is generated from the musical sound / fingering data, the generation of the target musical sound / fingering data requires a heavy load. This means that reproducing the musical sound / fingering data (musical sound data) while generating the operation control data may cause a problem in generating the musical sound and in displaying the image. That is, there is a possibility that a tone cannot be produced at a timing at which a musical tone should be produced, or a movement of a finger cannot be displayed smoothly. For this reason, in the present embodiment, the operation control data is generated separately from the reproduction of the musical sound / fingering data.
【0025】動作制御データの生成は、例えばRAM1
03にファイル形式で格納された楽音・運指データを対
象に行うようにしている。ユーザが操作部106を操作
して、RAM103に格納された楽音・運指データのな
かから一つを指定(選択)し、動作制御データの生成を
指示した場合、CPU101は、以下のようにしてユー
ザが指定した楽音・運指データの動作制御データを生成
する。なお、楽音・運指データの指定方法は、基本的に
FDから読み出すファイルを指定する場合と同じであ
る。The operation control data is generated, for example, in the RAM 1
03 is performed on the musical sound / fingering data stored in a file format. When the user operates the operation unit 106 to designate (select) one of the musical tones and fingering data stored in the RAM 103 and instruct generation of operation control data, the CPU 101 performs the following operation. The operation control data of the musical sound / fingering data specified by the user is generated. The method of designating the musical sound / fingering data is basically the same as the method of designating the file to be read from the FD.
【0026】図3は、表示用の手指の構造を説明する図
である。身体の各部は、関節を曲げて動かすことができ
る。これは、手指においても同じである。このことか
ら、本実施の形態では、図3に示すように、手首から先
を、手と5本の指に分けている。各指は、3関節の曲げ
動作が行えることから、3つの部分に更に分けている。
以降、表示する手指については、実際の手指のそれと区
別するために「パート」を最後に付けて表記することに
する。FIG. 3 is a view for explaining the structure of the display finger. Each part of the body can bend and move its joints. This is the same for fingers. For this reason, in the present embodiment, as shown in FIG. 3, the tip of the wrist is divided into a hand and five fingers. Each finger is further divided into three parts because three fingers can perform a bending operation.
Hereinafter, the fingers to be displayed will be described with a “part” added to the end to distinguish them from those of the actual fingers.
【0027】図3中の301〜306は、各部分を動か
すうえでの基点である。具体的には、基点301は手パ
ートの基点であり、手首(の関節)に対応する。基点3
02は親指パートの基点であり、その第1関節に対応す
る。基点303〜306は、それぞれ、人差し指パー
ト、中指パート、薬指パート、及び小指パートの基点で
あり、対応している指の第1関節に対応する。Reference numerals 301 to 306 in FIG. 3 are reference points for moving each part. Specifically, the base point 301 is the base point of the hand part, and corresponds to (the joint of) the wrist. Base point 3
02 is the base point of the thumb part and corresponds to the first joint thereof. The base points 303 to 306 are the base points of the index finger part, the middle finger part, the ring finger part, and the little finger part, respectively, and correspond to the first joint of the corresponding finger.
【0028】手パートの状態は、基点301のx、y、
z軸上における各位置hx、hy、hzの他に、z軸の
周りの回転角hrzで管理している。それらを示す値
は、それぞれ、用意した変数に代入させることで保持さ
せている。それにより、3次元で手の動きを表現するよ
うになっている。z軸の周りの回転角hrzは、手パー
トの基点301から中指パートの基点304までの長さ
Laをx軸上に投影させた際に、基点304が投影され
たx軸上の位置から基点301が投影されたx軸上の位
置を引いて得られる長さがその長さLaと一致する状態
が基準(0度)である。例えば図3に向かって左回りが
正、右回りが負である。そのようにして、図3中の鍵盤
300との相対的な位置関係を任意に変更できるように
している。なお、x軸、或いは/及び、y軸の周りの回
転角を更に考慮しても良い。上記hx、hy、hz、及
びhrzを保持させる変数については、以降、そのシン
ボルを最後に付加して表記する(変数hx、等)ことに
する。The states of the hand parts are x, y,
In addition to the positions hx, hy, hz on the z-axis, the rotation angle hrz about the z-axis is managed. Values indicating these are held by assigning them to prepared variables. Thereby, hand movements are expressed in three dimensions. The rotation angle hrz around the z-axis is determined by projecting the length La from the base point 301 of the hand part to the base point 304 of the middle finger part on the x-axis, from the position on the x-axis where the base point 304 is projected. The reference (0 degree) is a state in which the length obtained by subtracting the position on the x-axis where 301 is projected matches the length La. For example, the counterclockwise direction in FIG. 3 is positive, and the clockwise direction is negative. Thus, the relative positional relationship with the keyboard 300 in FIG. 3 can be arbitrarily changed. Note that a rotation angle around the x-axis and / or the y-axis may be further considered. The variables holding hx, hy, hz, and hrz will be described by adding the symbols at the end (variable hx, etc.).
【0029】各指には、上記したように3つの関節があ
る。このことから、第1関節だけでなく、第2及び第3
関節も基点とし、第1関節と第2関節間、第2関節と第
3関節間、及び第3関節から先を、それぞれ一つのパー
トとしている。ここでは、それらのパートをそれぞれ、
指第1パート、指第2パート、及び指第3パートと呼ぶ
ことにする。それらの長さL1、L2、及びL3は、指
毎にその長さが異なることから、各指パート毎に定めて
いる。Each finger has three joints as described above. From this, not only the first joint, but also the second and third joints
The joint is also used as a base point, and the part between the first joint and the second joint, the part between the second joint and the third joint, and the part beyond the third joint are each one part. Here, each of those parts,
The first finger part, the second finger part, and the third finger part will be called. The lengths L1, L2, and L3 are determined for each finger part since the lengths differ for each finger.
【0030】指の第1関節は2方向(曲げたり伸ばした
りする方向と、開いたり閉じたりする方向)に動き、他
の第2、及び第3関節は一方向にのみ動く。このことか
ら、指第1パートの状態は、第1関節に対応する基点上
におけるz軸の周りの回転角frzと、手の甲から手の
ひらに向けてそれを折り曲げた角度frx1とで管理し
ている。指第2パート、及び指第3パートは、それぞ
れ、第2関節、及び第3関節に対応する基点上におい
て、それを手の甲から手のひらに向けて折り曲げた角度
frx2、及びfrx3で管理している。そのようにし
て、指の間を広げたり狭めたり、指を伸ばしたり曲げた
りといった動作を模倣できるようにしている。なお、指
第1〜第3パートの状態を管理するための角度frx1
〜frx3は、例えば基点を介してつながっている2つ
のパートが直線となる状態を基準(0度)として表した
ものである。このため、例えば手の甲と指の第2関節ま
でが直線状となった状態では、角度frx1は0とな
る。以降は、角度frx1〜3の何れかを変化させる動
きを指(指パート)の縦の動き、回転角frzを変化さ
せる動きを指(指パート)の横の動きとも呼ぶことにす
る。The first joint of the finger moves in two directions (bending and stretching and opening and closing), and the other second and third joints move only in one direction. From this, the state of the first part of the finger is managed by the rotation angle frz about the z-axis on the base point corresponding to the first joint and the angle frx1 obtained by bending it from the back of the hand to the palm. The finger second part and the finger third part are managed on the base points corresponding to the second joint and the third joint, respectively, at angles frx2 and frx3 obtained by bending them from the back of the hand toward the palm. In this way, it is possible to imitate a movement such as widening or narrowing the space between the fingers, and stretching or bending the fingers. An angle frx1 for managing the states of the first to third parts of the finger
~ Frx3 represents, for example, a state in which two parts connected via a base point become a straight line as a reference (0 degree). Therefore, for example, in a state where the back of the hand and the second joint of the finger are linear, the angle frx1 is 0. Hereinafter, a motion that changes any of the angles frx1 to frx1 will be referred to as a vertical motion of the finger (finger part), and a motion that changes the rotation angle frz will be referred to as a horizontal motion of the finger (finger part).
【0031】上記frz、及びfrx1〜3の値は、そ
れぞれ、用意した変数に代入させることで保持させてい
る。それらの値は各指パート毎に保持しなければならな
いことから、その変数は配列変数とし、指番号で指定さ
れる要素に、対応する値を代入させている。以降、fr
z、及びfrx1〜3を保持させる配列変数も、そのシ
ンボルを最後に付加して表記する(配列変数frz、
等)ことにする。The values of frz and frx1 to frx1 are held by substituting into the prepared variables. Since these values must be held for each finger part, the variables are array variables, and the corresponding values are assigned to the elements specified by the finger numbers. Hereafter, fr
z, and array variables that hold frx1 to frx1 to 3 are also described with their symbols added to the end (array variables frz,
Etc.).
【0032】各指パートの基点302〜306は、手パ
ートの基点(手首)301の位置の変化に伴って移動す
る。上記したように、各指パートは人間の指を模倣した
動きを表現させることができる。このため、鍵盤300
上の任意の鍵を押鍵するために手を移動させる動作や、
鍵を押鍵、或いは離鍵する指の動作、それらを組み合わ
せた動作を動画で表現することができる。その表現は、
鍵盤300を操作していく手指の各パートの動作を表示
することで行うことから、鍵盤300上の白鍵や黒鍵の
サイズやその並び、各鍵間の位置関係、などのデータは
予め変数などの形で用意している。The base points 302 to 306 of each finger part move with the change of the position of the base point (wrist) 301 of the hand part. As described above, each finger part can express a movement imitating a human finger. Therefore, the keyboard 300
Move your hand to press any key above,
A motion of a finger that presses or releases a key, or a motion that combines them can be represented by a moving image. The expression is
Since the operation of each part of the finger operating the keyboard 300 is performed by displaying the operation, the data such as the size of white keys and black keys on the keyboard 300, their arrangement, and the positional relationship between the keys are variables in advance. It is prepared in such a form.
【0033】図4は、手の移動範囲を説明する図であ
る。手パートは基点301によってその表示状態を管理
している。図4は、その基点301の位置として取りう
る範囲を示したものである。FIG. 4 is a diagram for explaining the range of movement of the hand. The display state of the hand part is managed by the base point 301. FIG. 4 shows a range that can be taken as the position of the base point 301.
【0034】鍵盤と手首との間のy軸上における距離
は、押鍵するのが白鍵か黒鍵かで異なる。当然のことな
がら、黒鍵を押鍵する場合は白鍵を押鍵する場合と比較
して距離は小さくなる。また、同じ白鍵、或いは黒鍵を
押鍵するとしても、複数の鍵を同時に押鍵するのか1鍵
だけを押鍵するのかによってその距離は変化する。複数
の鍵を同時に押鍵しているときには、各指の間を広げた
形となっているので、1鍵だけを押鍵しているときと比
較して鍵盤に近くなる。このようなことから、本実施の
形態では、鍵盤300から離した場合の基点301のy
軸上の位置としてYPOS1、その鍵盤300に近づけ
た場合の位置としてYPOS2を定めている。The distance between the keyboard and the wrist on the y-axis differs depending on whether the key is pressed with a white key or a black key. As a matter of course, when the black key is pressed, the distance is smaller than when the white key is pressed. Even if the same white key or black key is pressed, the distance varies depending on whether a plurality of keys are pressed simultaneously or only one key is pressed. When a plurality of keys are pressed at the same time, the space between the fingers is widened, so that it is closer to the keyboard than when only one key is pressed. For this reason, in the present embodiment, the y of the base point 301 when the key 301 is separated from the keyboard 300 is determined.
YPOS1 is defined as the position on the axis, and YPOS2 is determined as the position when the keyboard is approached.
【0035】一方、鍵盤と手首(手のひら)の間のz軸
上における距離も、複数の鍵を同時に押鍵するのか1鍵
だけを押鍵するのかによって変化する。複数の鍵を同時
に押鍵しているときには、手全体を鍵盤に向けて移動さ
せている形となっているので、その距離は小さくなる。
このようなことから、本実施の形態では、鍵盤300か
ら離した場合の基点301のz軸上の位置としてZPO
S1、その鍵盤300に近づけた場合の位置としてZP
OS2を定めている。そのような位置を定めて、白鍵、
或いは黒鍵を押鍵するのか、複数の鍵を押鍵するのか1
鍵を押鍵するのか、といった動作の違いを表現するよう
にしている。On the other hand, the distance on the z-axis between the keyboard and the wrist (palm) also changes depending on whether a plurality of keys are pressed simultaneously or only one key is pressed. When a plurality of keys are pressed at the same time, the entire hand is moved toward the keyboard, so that the distance is reduced.
For this reason, in the present embodiment, the ZPO
S1, ZP as the position when approaching the keyboard 300
OS2 is defined. By defining such a position, the white key,
Or whether to press a black key or multiple keys.
The difference in operation, such as whether to press a key, is expressed.
【0036】図3に示すように複数のパートに分割した
手指の動画表示は、各パートの状態を演奏の進行に応じ
て順次、変更させていくことで行っている。その動画表
示を実現させるための動画制御データは、本実施の形態
では2段階で生成している。ここでは、便宜的に、始め
の段階で生成したデータを動画制御データA、次の段階
で生成したデータを動画制御データBと呼ぶことにす
る。As shown in FIG. 3, a moving image of a finger divided into a plurality of parts is displayed by sequentially changing the state of each part according to the progress of the performance. In this embodiment, the moving image control data for realizing the moving image display is generated in two stages. Here, for convenience, the data generated in the first stage is referred to as moving image control data A, and the data generated in the next stage is referred to as moving image control data B.
【0037】上記動画制御データAは、CPU101
が、図2に示すような楽音・運指データの他に、各指パ
ートの長さ(指第1〜第3パートの長さ)やその手パー
トにおける配置、鍵盤300上の鍵の配置や各種鍵の形
状といった予め用意したデータ(パラメータ)を参照し
つつ生成する。CPU101は、楽音・運指データ中の
単位楽音データ、及びそれに付加された指番号データ、
更にはそれらによって指定される演奏の流れなどを解析
して、イベント単位でそれまでの手指の状態から次のイ
ベントを生じさせるために移行させる手指の状態を求
め、その後者の手指の状態を指定するデータ、即ちどの
パートの状態をどのように変化させるべきかを指定する
データをRAM103に保存する。手や指を動かす速さ
は、イベント間の時間間隔の長さに依存する。その時間
間隔が短いほど、手や指を速く動かさなければならな
い。このことから、イベント間の時間間隔を基に、パー
トの状態の変化を開始するタイミングやその変化を継続
している時間を決定し、それらを示すデータも合わせて
RAM103に保存する。そのようにして生成・保存し
たデータが動画制御データAである。なお、上記解析
は、例えば楽音データに付加された運指データの生成に
用いたアルゴリズムにより行われる。それにより、求め
た手指の状態が不自然な形とならないようになってい
る。The moving image control data A is transmitted to the CPU 101
However, in addition to the musical sound / fingering data as shown in FIG. 2, the length of each finger part (the length of the first to third parts of the finger), its arrangement in the hand part, the arrangement of keys on the keyboard 300, It is generated with reference to data (parameters) prepared in advance such as various key shapes. The CPU 101 executes the unit tone data in the tone and fingering data and the finger number data added thereto,
In addition, it analyzes the flow of the performance specified by them, finds the state of the finger to be shifted to generate the next event from the state of the previous finger in event units, and specifies the state of the latter finger The data to be changed, that is, data specifying which part should be changed in how and how to change it, is stored in the RAM 103. The speed at which you move your hand or finger depends on the length of the time interval between events. The shorter the time interval, the faster the hand or finger must move. Based on this, based on the time interval between events, the timing to start changing the state of the part and the time during which the change is continued are determined, and data indicating these is also stored in the RAM 103. The data generated and stored in this manner is the moving image control data A. The above analysis is performed by, for example, an algorithm used to generate fingering data added to the musical sound data. As a result, the obtained state of the finger does not become unnatural.
【0038】上記動画制御データAの生成によって、離
鍵イベントでは離鍵させる指パートの離鍵後の状態が決
定し、押鍵イベントでは指パートの押鍵時の状態の他
に、必要に応じて、その状態への移行に合わせて他のパ
ートの状態を決定する。他のパートの状態の決定とは、
例えば押鍵すべき鍵の位置やその種類(白鍵か黒鍵か)
に応じた手パートの移動や、押鍵中の鍵があれば、その
鍵を押鍵させている指パートはその鍵から離すことがで
きないことから、その手パートの移動に伴って指パート
間を広げたり狭くする、といったことである。CPU1
01は、その決定した状態に移行するまでを幾つかの段
階に分け、各段階毎にその状態を示すデータを生成し、
RAM103に動作制御データAとは別に保存する。そ
のようにして生成・保存したデータが動作補助データB
である。なお、本実施の形態では、後述するように、イ
ベント単位での動作制御データAの生成に連動して、動
作制御データBの生成も行うようにしている。By the generation of the moving image control data A, the state of the finger part to be released after the key release event is determined in the key release event. Then, the state of another part is determined according to the transition to that state. Determining the status of other parts
For example, the position of the key to be pressed and its type (white key or black key)
If the hand part is moved or the key part is being depressed, the finger part pressing the key cannot be released from the key. Is to make them wider or narrower. CPU1
01 divides the transition to the determined state into several stages, generates data indicating the state for each stage,
The data is stored in the RAM 103 separately from the operation control data A. The data generated and stored in this way is the operation auxiliary data B
It is. In the present embodiment, as described later, the operation control data B is also generated in conjunction with the generation of the operation control data A in event units.
【0039】図5は、上述したようにして生成・保存さ
れる動作制御データの構成を説明する図である。同図
(a)は動作制御データA、同図(b)は動作制御デー
タBを示す。FIG. 5 is a diagram for explaining the structure of the operation control data generated and stored as described above. 2A shows the operation control data A, and FIG. 2B shows the operation control data B.
【0040】動作制御データAは、図5(a)に示すよ
うに、値を変更すべき変数、或いは配列変数の要素を指
定するデータ(以降、変数指定データと呼ぶ)、変数、
或いは配列変数の要素の変更後の値である値データ、変
数、或いは配列変数の要素に対応するパートを動作させ
ている時間を示す動作時間データ、及びそのパートの動
作終了、或いは動作開始のタイミングを指定する時間デ
ータを、演奏上の1イベントに対応するデータ(それら
をまとめて単位動作データAと呼ぶことにする)として
構成されている。値データ、及び動作時間データは変数
指定データ毎に存在する。それにより、変数指定データ
が指定する変数、或いは配列変数の要素の値で指定され
るパートの状態は、独立に変化させられるようにしてい
る。単位動作データA中の時間データは、楽音・運指デ
ータ中の対応する単位楽音データ中の時間データと一致
する。なお、一組の変数指定データ、値データ、及び動
作時間データはパートの或る状態量をどのように変化さ
せるかを表していることから、以降、それらをまとめて
パート動作データと呼ぶことにする。As shown in FIG. 5A, the operation control data A includes data for designating a variable whose value is to be changed or an element of an array variable (hereinafter referred to as variable designation data), a variable,
Alternatively, value data that is a value after changing an element of an array variable, operation time data indicating a time during which a variable or a part corresponding to an element of an array variable is operated, and timing of ending or starting operation of the part Is configured as data corresponding to one event in the performance (these are collectively referred to as unit operation data A). The value data and the operation time data exist for each variable designation data. Thus, the state of the part specified by the variable specified by the variable specifying data or the value of the element of the array variable can be changed independently. The time data in the unit operation data A matches the time data in the corresponding unit tone data in the tone and fingering data. In addition, since a set of variable designation data, value data, and operation time data indicate how a certain state quantity of a part is changed, these are hereinafter collectively referred to as part operation data. I do.
【0041】図5(a)に示す動作制御データAは、図
2に示す楽音・運指データを基に生成されたものであ
り、以下のようなイベント、即ちパートの状態変化を生
じさせることを表している。図2も参照しつつ、時系列
に沿って説明する。The operation control data A shown in FIG. 5A is generated based on the musical sound and fingering data shown in FIG. 2, and causes the following event, that is, a change in the state of the part. Is represented. The description will be given in chronological order with reference to FIG.
【0042】図2に示すように、楽音・運指データ中の
最初の単位楽音データが指定するイベントは、音名が
「C3」の楽音の発音開始である。その「C3」は、鍵
番号(ノートナンバー)の64が対応する。このため、
そのイベントは、鍵盤号64の鍵の押鍵を表している。As shown in FIG. 2, the event specified by the first unit tone data in the tone / fingering data is the start of tone generation of the tone having the note name "C3". “C3” corresponds to 64 of the key number (note number). For this reason,
The event represents the depressing of a key on the keyboard 64.
【0043】そのイベントの発生は、時間データの値で
ある100で指定されるタイミングであり、その前には
イベントは存在していない。各パートには初期状態(対
応する変数、或いは配列変数の要素の初期値)を定めて
いる。このため、そのイベントが発生する様子を表示す
るには、指番号データで指定された人差し指パートで鍵
盤号64の鍵を押鍵させるまでに、その押鍵を行える位
置にまで手パートを移動させておかなければならない。
ここでは、変数hxの値を値データの100として得ら
れる位置に手パートを移動させなければならない。動作
制御データA中の最初の単位動作データAは、そのため
に生成されたものである。その端子動作データAでは、
時間データの値が0で動作時間データも0である。この
ため、それは、図6(a)に示すように、手パートは初
めから変数hxの値を100としたx軸上の位置に表示
させることを表している。The occurrence of the event is a timing designated by the value 100 of the time data, and no event exists before that. Each part defines an initial state (corresponding variable or initial value of an element of an array variable). Therefore, in order to display a state in which the event occurs, the hand part is moved to a position where the key can be pressed before the key of the keyboard No. 64 is pressed by the index finger part specified by the finger number data. Must be kept.
Here, the hand part must be moved to a position where the value of the variable hx is obtained as 100 of the value data. The first unit operation data A in the operation control data A is generated for that purpose. In the terminal operation data A,
The value of the time data is 0 and the operation time data is also 0. Therefore, as shown in FIG. 6A, this means that the hand part is displayed at a position on the x-axis where the value of the variable hx is 100 from the beginning.
【0044】なお、手パートは、最初の押鍵を行える位
置に初めから表示させなくても良い。例えば、予め定め
た位置に表示させた後、その押鍵を行うべきタイミング
となるまでに、その位置から押鍵を行える位置に移動さ
せても良い。時間データ、及び動作時間データの値は、
予め定めた単位時間で表したものであることから、その
値で指定される時間の単位は単位時間と呼ぶことにす
る。Note that the hand part does not have to be displayed at the position where the first key press can be performed. For example, after displaying at a predetermined position, the key may be moved from that position to a position where the key can be pressed by the time the key should be pressed. The value of time data and operation time data is
Since the time is expressed in a predetermined unit time, a unit of time specified by the value is called a unit time.
【0045】次の単位動作データAでは、時間データは
100、変数指定データは配列要素frx1[1]と配
列要素note[1]を指定し、値データは配列要素f
rx1[1]の値として10を、配列変数note
[1]の値として64をそれぞれ指定し、動作時間デー
タは配列要素frx1[1]では−5、配列要素not
e[1]では0となっている。これは、直前(最初)の
単位動作データAが表すイベントから100単位時間が
経過した後、人差し指パートを第1関節で曲げて鍵盤号
64の鍵を押鍵するイベントを発生させることを表して
いる。動作時間データの負の値は、その第1関節で曲げ
始めるのを時間データで指定されるタイミングより5単
位時間だけ早く開始させることを表している。それによ
り、直前のイベントから95単位時間が経過した後に、
人差し指パートは鍵盤号64の鍵に対する押鍵動作を開
始し、100単位時間が経過したときに押鍵が完了する
ことになっている。配列変数note[1]の動作時間
データの0は時間データが示すタイミングで楽音を発音
開始させることを表している。In the next unit operation data A, the time data is 100, the variable specifying data specifies the array element frx1 [1] and the array element note [1], and the value data is the array element f
rx1 [1] is set to 10 and the array variable note
64 is specified as the value of [1], and the operation time data is -5 for the array element frx1 [1], and the array element not is
It is 0 in e [1]. This means that after 100 unit time has elapsed from the event represented by the immediately preceding (first) unit operation data A, an event of bending the index finger part with the first joint and pressing the key of the keyboard No. 64 is generated. I have. A negative value of the operation time data indicates that the bending at the first joint is started five unit times earlier than the timing specified by the time data. As a result, after 95 units of time have passed since the last event,
The index finger part starts the key pressing operation on the key of the keyboard No. 64, and the key pressing is completed when 100 unit time has elapsed. A 0 in the operation time data of the array variable note [1] indicates that the musical sound is started to be generated at the timing indicated by the time data.
【0046】その次の単位動作データAでは、時間デー
タは50、変数指定データは配列要素frx1[1]と
配列要素note[1]を指定し、値データは配列要素
frx1[1]の値として0を、配列変数note
[1]の値として0をそれぞれ指定し、動作時間データ
は配列要素frx1[1]では2、配列要素note
[1]では0となっている。これは、直前の単位動作デ
ータAが表すイベントから50単位時間が経過した後、
それまで第1関節で曲げていた人差し指パートを伸ばし
て鍵盤号64の鍵を離鍵するイベントを発生させること
を表している。動作時間データの値は正である。それに
より、直前のイベントから50単位時間が経過した後
に、人差し指パートは伸び始めて鍵盤号64の鍵を離鍵
し、それから2単位時間が経過して元の位置に戻ること
になっている。配列変数note[1]の値データの0
は離鍵を表し、その動作時間データの0は時間データが
示すタイミングで楽音を消音させることを表している。In the next unit operation data A, the time data is 50, the variable designation data is the array element frx1 [1] and the array element note [1], and the value data is the value of the array element frx1 [1]. 0 to the array variable note
0 is specified as the value of [1], the operation time data is 2 in the array element frx1 [1], and the array element note is
In [1], it is 0. This is because 50 units of time have elapsed since the event represented by the immediately preceding unit operation data A,
This indicates that an event of releasing the key of the keyboard No. 64 by extending the index finger part bent by the first joint until then is generated. The value of the operation time data is positive. As a result, after 50 unit time has elapsed from the immediately preceding event, the index finger part begins to elongate, releases the key of the keyboard No. 64, and returns to the original position after 2 unit time has elapsed. 0 of the value data of the array variable note [1]
Indicates a key release, and 0 of the operation time data indicates that the musical sound is muted at the timing indicated by the time data.
【0047】このように、動作制御データA中の単位動
作データAは、イベント発生時に、どのパートをどの状
態に移行させるかを指定するだけでなく、その移行にか
ける時間を動作時間データによって指定するようになっ
ている。As described above, the unit operation data A in the operation control data A not only specifies which part should be shifted to which state when an event occurs, but also specifies the time required for the shift by the operation time data. It is supposed to.
【0048】一方の動作制御データBは、図5(b)に
示すように、値を変更すべき変数、或いは配列変数の要
素を指定する変数指定データ、変数、或いは配列変数の
要素の変更後の値である値データ、及び、変数指定デー
タとそれの値データによって指定される状態に変化させ
るタイミングを指定する時間データを、1段階の動作を
表現するデータ(それらをまとめて段階動作データと呼
ぶ)として構成されている。当然のことながら、段階動
作データ中の時間データの値は、対応する単位動作デー
タA中の時間データの値以下である、単位動作データA
を構成するパート動作データの数、即ち変数指定データ
が指定する変数、或いは配列変数の要素の数は、それま
での状態やイベントの内容などによって異なる。指パー
トを折り曲げるだけで済むのであれば一つの配列変数の
要素の値を変更するだけで済む。しかし、他の指パート
との間隔を広げて或る指パートを折り曲げるのであれ
ば、その指パートでは二つの要素の値を変更する必要が
ある。例えばその指パートが中指パートであり、人差し
指パートとの間隔を広げるのであれば、中指パートの外
側に位置する薬指パートや小指パートも、その中指パー
トの横の動きに合わせて、それぞれ、一つの要素の値を
変更しなければならない。このようなことから、図5
(b)には、各パート毎に、値の変更の対象となりうる
変数、及び配列変数の要素を示してある。親指パートの
frz、frx1〜3は、全て配列変数の要素であり、
明確に図示していないが、それらは人差し指パート、中
指パート、薬指パート、及び小指パートにも存在する。
各配列変数の要素は、指パートの指番号を引数として指
定される。As shown in FIG. 5B, one operation control data B is a variable whose value is to be changed, or variable designation data for designating an element of an array variable, a variable, or an element of an array variable after being changed. Value data, and variable designation data and time data designating the timing of changing to the state designated by the value data are represented by data expressing one-step operation (these are collectively referred to as step operation data). Call). Naturally, the value of the time data in the step operation data is equal to or less than the value of the time data in the corresponding unit operation data A.
, Ie, the number of variables specified by the variable specification data or the number of elements of the array variable, differs depending on the state up to that time, the content of the event, and the like. If you only need to bend the finger part, you only need to change the value of one array variable element. However, if a certain finger part is bent while widening the interval with another finger part, it is necessary to change the values of two elements in the finger part. For example, if the finger part is the middle finger part and the interval with the index finger part is to be increased, the ring finger part and the little finger part located outside the middle finger part will also be one each according to the horizontal movement of the middle finger part. You must change the value of the element. Because of this, FIG.
(B) shows variables that can be changed in value and elements of array variables for each part. The thumb part frz and frx1 to 3 are all array variable elements,
Although not explicitly shown, they also exist in the index finger part, the middle finger part, the ring finger part, and the little finger part.
The elements of each array variable are specified with the finger number of the finger part as an argument.
【0049】図5(b)に示す動作制御データBは図5
(a)に示す動作制御データAを基に生成したものであ
る。動作制御データA中で最初に位置する単位動作デー
タA中の動作時間データの値は0であり、2番目の単位
動作データA中の時間データの値は100、その単位動
作データA中で最初に位置するパート動作データ中の動
作時間データの値は5である。2番目、及び3番目の段
階動作データ中の時間データの値はそれぞれ95、2と
なっている。このことから明らかなように、それらの段
階動作データは2番目の単位動作データAを基に生成さ
れたものであり、人差し指パートによる押鍵動作を表現
するために、特には図示していないが、変数指定データ
によって配列要素frx1[1]が指定され、それに代
入すべき値が値データとして設定されている。The operation control data B shown in FIG.
This is generated based on the operation control data A shown in FIG. The value of the operation time data in the unit operation data A located first in the operation control data A is 0, the value of the time data in the second unit operation data A is 100, and the first in the unit operation data A The value of the operation time data in the part operation data located at is “5”. The values of the time data in the second and third stage operation data are 95 and 2, respectively. As is apparent from this, the step operation data is generated based on the second unit operation data A, and is not shown in the drawing in order to express the key pressing operation by the index finger part. The array element frx1 [1] is designated by the variable designation data, and the value to be assigned to it is set as value data.
【0050】図6は、手指の動作表示例を説明する図で
ある。図5に示す動作制御データに従って手指の各パー
トの状態を変化させていく様子を示したものである。図
6(a)において、楽音・運指データでは、楽音・運指
データによって指定される楽音の発音開始タイミング
(押鍵タイミング)、及びその消音タイミング(離鍵タ
イミング)を時間軸上に矢印で示してある。楽音の音名
(「C」や「F」など)は矢印の近傍に示してある。指
動作では、押鍵動作開始タイミング、及び離鍵動作開始
タイミングを時間軸上に矢印で示してある。その矢印の
近傍に表記した「1」や「2」などの数字は、押鍵、或
いは離鍵する指パートの指番号である。手x位置では、
手パートのx軸上の位置の時間変化を示してある。手y
位置、及び手z位置では、それぞれ、手パートのy軸
上、及びz軸上の位置の時間変化を示してある。手z位
置の時間軸に表記した0は、楽音・運指データの再生開
始時点を示している。なお、手x位置、手y位置、及び
手z位置は、それぞれ、初期位置からの移動を相対的に
示したものである。FIG. 6 is a view for explaining an example of a finger motion display. FIG. 6 shows how the state of each part of a finger is changed according to the operation control data shown in FIG. 5. In FIG. 6A, in the musical tone / fingering data, the sounding start timing (key pressing timing) of the musical tone specified by the musical tone / fingering data and the silencing timing (key release timing) are indicated by arrows on the time axis. Is shown. The names of musical tones ("C", "F", etc.) are shown near the arrows. In the finger operation, the key-pressing operation start timing and the key-release operation start timing are indicated by arrows on the time axis. Numerals such as “1” and “2” written near the arrow are the finger numbers of the finger parts to be pressed or released. At the hand x position,
The time change of the position on the x-axis of the hand part is shown. Hand y
The position and the hand z position show the time change of the position on the y axis and the z axis of the hand part, respectively. The 0 shown on the time axis of the hand z position indicates the reproduction start point of the musical sound / fingering data. Note that the hand x position, the hand y position, and the hand z position each relatively indicate movement from the initial position.
【0051】図6(a)に示すように、押鍵動作は、実
際に楽音を発音させるタイミングよりも前に開始し、離
鍵動作は、楽音の消音タイミングと合わせて開始するよ
うになっている。手パートのx軸上における位置は、音
名が「C」の鍵の離鍵動作開始後に、次に人差し指パー
トによって音名が「F」の鍵を押鍵できる位置に向かっ
て移動を開始し、その押鍵開始タイミングの前に移動を
完了させている。手パートのy軸上における位置は、親
指パート、人差し指パート、中指パート、及び薬指パー
トによって、それぞれ、発音される楽音の音名が「D
#」、「F」、「G」、及び「B」の鍵を同時に押鍵し
ていることを表現するために、「G」の鍵の離鍵後に鍵
盤300に向かって移動を開始し、即ち図4に示す位置
YPOS1から位置YPOS2に向かって移動を開始
し、それらの鍵の離鍵が開始するまでは位置YPOS2
にとどまり、その離鍵の開始後に位置YPOS2から位
置YPOS1に向かって移動を開始する。手パートのz
軸上における位置は、それらの鍵の押鍵動作開始から最
後の鍵の押鍵が終了するまでの間に鍵盤300に向かっ
て下降する。即ちその間に図4に示す位置ZPOS1か
ら位置ZPOS2に移動する。位置ZPOS2から位置
ZPOS1への移動は、それらの鍵の離鍵動作開始から
最後の鍵の離鍵が終了するまでの間に行われている。As shown in FIG. 6A, the key depressing operation is started before the timing of actually producing a musical tone, and the key releasing operation is started in synchronism with the musical tone muting timing. I have. The position of the hand part on the x-axis starts moving after the start of the key release operation of the key with the note name “C”, and then toward the position where the index finger part can press the key with the note name “F”. The movement is completed before the key-pressing start timing. The position of the hand part on the y-axis is such that the tone name of the musical tone to be pronounced by the thumb part, the index finger part, the middle finger part, and the ring finger part is “D”, respectively.
In order to express that the keys “#”, “F”, “G”, and “B” are being pressed at the same time, the player starts moving toward the keyboard 300 after releasing the key “G”, That is, movement from the position YPOS1 to the position YPOS2 shown in FIG. 4 is started, and the position YPOS2 is maintained until the key release is started.
, And starts moving from the position YPOS2 toward the position YPOS1 after the start of the key release. Hand part z
The position on the axis descends toward the keyboard 300 from the start of the key press operation of those keys to the end of the key press of the last key. That is, during that time, the position moves from the position ZPOS1 shown in FIG. 4 to the position ZPOS2. The movement from the position ZPOS2 to the position ZPOS1 is performed from the start of the key release operation of those keys to the end of the key release of the last key.
【0052】図6(b)は、図6(a)中の時点〜
における手パートの基点(手首)301の位置を示す図
である。それらの時点〜におけるxy平面上の位置
は、それぞれ、〜で示してある。FIG. 6 (b) shows the time points from FIG.
5 is a diagram showing the position of the base point (wrist) 301 of the hand part in FIG. The positions on the xy plane at those points in time are indicated by.
【0053】図6(b)に示すように、手パートは、始
めにで示す位置からで示す位置にまで移動する。次
には複数鍵を同時に押鍵するために、で示す位置に移
動する。そので示す位置とで示す位置が同じことか
ら明らかなように、複数鍵を押鍵している間はその位置
にとどまる。で示す位置はで示す位置と同じであ
る。このことから、複数鍵を離鍵後は、で示す位置か
らで示す位置に移動する。As shown in FIG. 6B, the hand part moves from the position shown at the beginning to the position shown at the position. Next, in order to depress a plurality of keys at the same time, it moves to the position indicated by. As is clear from the fact that the position indicated by the symbol and the position indicated by the same are the same, it remains at that position while a plurality of keys are pressed. The position indicated by is the same as the position indicated by. For this reason, after releasing a plurality of keys, the keys are moved from the position indicated by the symbol to the position indicated by the symbol.
【0054】上述したように、手パートを移動させた
り、各指パートの状態を変化させることで手指の動作を
動画で表現している。図7は、実際の表示例を示す図で
ある。As described above, the movement of the finger is represented by a moving image by moving the hand part or changing the state of each finger part. FIG. 7 is a diagram showing an example of an actual display.
【0055】図7に示すように、実際には、右手だけで
なく、左手も表示している。押鍵中か否かをユーザが判
りやすいように、押鍵中の鍵は他と表示色を変えて表現
している。その表示色の変更は、押鍵時(発音開始時)
から離鍵時(消音時)の間だけ行っても良いが、押鍵す
べき鍵を事前に通知する、或いは離鍵すべき鍵を事前に
通知する、といったことのために、表示色を複数の色に
変更するようにしても良い。なお、特に詳細な説明は省
略するが、本実施の形態では、手指の各パートのサイズ
の変更、即ち拡大、或いは縮小や、各パートの表示の透
過表示、或いはワイヤーフレーム表示への変更、表示角
度の変更、なども行えるようになっている。ユーザが実
際に操作する鍵盤を備えている場合には、ユーザの演奏
速度に応じて、楽音・運指データの再生速度(演奏動作
の表示速度を含む)を変更するようにしても良い。As shown in FIG. 7, not only the right hand but also the left hand are actually displayed. The key being pressed is represented in a different display color from the others so that the user can easily recognize whether or not the key is being pressed. The display color is changed when the key is pressed (when the sound starts)
May be performed only during the time of key release (at the time of mute). However, in order to notify a key to be pressed in advance or a key to be released in advance, a plurality of display colors are used. The color may be changed to Although not described in detail, in the present embodiment, the size of each part of the finger is changed, that is, enlarged or reduced, the display of each part is transparently displayed, or the display is changed to a wire frame display. You can also change the angle, etc. If the user has a keyboard that is actually operated, the reproduction speed of the tone and fingering data (including the display speed of the performance operation) may be changed according to the performance speed of the user.
【0056】図6に示すような手指パートの動作表示
は、ユーザが操作部106を操作して、RAM103に
格納された楽音・運指データの再生を指示した場合に行
われる。その指示をユーザが行うと、CPU101は、
楽音・運指データ(ここでは運指データを除いた部分で
ある楽音データのみが対象)とそれを基に生成した動作
制御データBを並行に処理する。それにより、楽音の発
音と同期した手指の各パートの動作を表示部105に表
示させる。本実施の形態では、それ以外に、楽音データ
から演奏内容を示す楽譜を表示するようになっている。The operation display of the finger part as shown in FIG. 6 is performed when the user operates the operation unit 106 to instruct reproduction of the musical sound / fingering data stored in the RAM 103. When the user gives the instruction, the CPU 101
The musical sound / fingering data (here, only the musical sound data excluding the fingering data) is processed in parallel with the operation control data B generated based on the data. Thereby, the operation of each part of the finger synchronized with the tone generation is displayed on the display unit 105. In the present embodiment, in addition, a musical score indicating the performance content from the musical sound data is displayed.
【0057】図8は、本実施の形態による演奏動作表示
装置の機能ブロック図である。図8に示すように、上記
演奏動作表示装置は、機能的に見て、基本的に、楽音・
運指データから動作制御データを生成するデータ生成部
801、及び楽音・運指データや動作制御データを再生
するリアルタイム処理部802から構成されている。デ
ータ生成部801において、楽音・運指データから動作
制御データを生成するのは動作制御データ生成部803
によって行われる。そのデータ生成部801には、図1
において、例えばCPU101、ROM102、RAM
103、データ入力部104、表示部105、及び操作
部106が対応する。FIG. 8 is a functional block diagram of the performance operation display device according to the present embodiment. As shown in FIG. 8, the performance operation display device basically has a musical tone
It comprises a data generation unit 801 for generating operation control data from fingering data, and a real-time processing unit 802 for reproducing musical sound / fingering data and operation control data. The operation control data generation unit 803 generates the operation control data from the musical sound / fingering data in the data generation unit 801.
Done by The data generation unit 801 includes FIG.
In, for example, CPU101, ROM102, RAM
103, the data input unit 104, the display unit 105, and the operation unit 106 correspond.
【0058】一方のリアルタイム処理部802は、デー
タ生成部801が生成した動作制御データや楽音データ
を処理するデータ送出部(シーケンス処理部)804、
そのデータ送出部804から送られた動作制御データに
従って手指の動作を表示する動作表示部805、それか
ら送られた楽音データに従って楽音を放音する音減歩8
06、及びそれから送られた楽音データに応じて楽譜を
表示する楽譜表示部807を備えたものである。図1に
おいて、例えばCPU101、ROM102、RAM1
03、表示部105、操作部106、音源107、及び
サウンドシステム108が対応する。One real-time processing section 802 includes a data transmission section (sequence processing section) 804 for processing the operation control data and tone data generated by the data generation section 801;
An operation display unit 805 that displays the operation of the finger according to the operation control data sent from the data transmission unit 804, and a sound reduction unit 8 that emits a tone according to the tone data sent from the operation display unit 805.
06 and a musical score display section 807 for displaying musical scores in accordance with musical tone data sent from the musical instrument. In FIG. 1, for example, a CPU 101, a ROM 102, a RAM 1
03, the display unit 105, the operation unit 106, the sound source 107, and the sound system 108 correspond.
【0059】次に、上述した動作制御データの生成やそ
の再生などを実現するCPU101の動作について、図
9〜図21に示す各種動作フローチャートを参照して詳
細に説明する。Next, the operation of the CPU 101 for realizing the generation and reproduction of the operation control data described above will be described in detail with reference to various operation flowcharts shown in FIGS.
【0060】図9は、動作制御データ生成処理の動作フ
ローチャートである。この生成処理は、ユーザが操作部
106を操作して、RAM103に格納された楽音・運
指データのなかから一つを指定(選択)し、動作制御デ
ータの生成を指示した場合に、CPU101が、ROM
102に格納されているプログラムを実行することで実
現される処理である。図8に示すデータ生成部801は
その生成処理を実行することによって実現される。始め
に図9を参照して、その生成処理について詳細に説明す
る。FIG. 9 is an operation flowchart of the operation control data generation process. In this generation processing, when the user operates the operation unit 106 to designate (select) one of the musical sound / fingering data stored in the RAM 103 and instruct the generation of the operation control data, the CPU 101 , ROM
The processing is realized by executing a program stored in the storage 102. The data generation unit 801 shown in FIG. 8 is realized by executing the generation processing. First, the generation process will be described in detail with reference to FIG.
【0061】この生成処理では、ユーザが指定した楽音
・運指データから単位楽音データ、及びそれに付加され
た指番号データを順次、読み出しながら、その単位楽音
データが表すイベントを指番号データが指定する指によ
って発生させる様子を表示するための動作制御データを
生成するようになっている。ここでは、単位楽音データ
が表すイベントの種類として、ノートオンイベント、及
びノートオフイベントに重点をおいて処理の流れを示し
てある。In this generation processing, the finger number data designates an event represented by the unit tone data while sequentially reading out the unit tone data and the finger number data added thereto from the tone and fingering data designated by the user. Operation control data for displaying a state generated by a finger is generated. Here, the flow of processing is shown with emphasis on note-on events and note-off events as the types of events represented by the unit tone data.
【0062】先ず、ステップ901では、初期設定を行
う。その初期設定により、各種変数には初期値が代入さ
れ、RAM103には動作制御データを格納する領域が
確保される。楽音・運指データから読み出す単位楽音デ
ータを管理するための変数peには、その先頭に位置す
る単位楽音データが格納されたアドレス値が代入され
る。First, at step 901, initialization is performed. By the initial setting, initial values are substituted for various variables, and an area for storing operation control data is secured in the RAM 103. The variable pe for managing the unit tone data read from the tone / fingering data is assigned an address value storing the unit tone data located at the head thereof.
【0063】ステップ901に続くステップ902で
は、楽音・運指データが終了したか否か判定する。例え
ば、楽音・運指データの最後には、そのデータの終了を
表すユニークなデータ(以降、エンドデータと呼ぶ)が
付加されている。このため、変数peの値が指定するデ
ータがそのエンドデータであった場合、判定はYESと
なり、ここで一連の処理を終了する。そうでない場合に
は、判定はNOとなってステップ903に移行する。In step 902 following step 901, it is determined whether or not the musical sound / fingering data has been completed. For example, at the end of the musical tone / fingering data, unique data indicating the end of the data (hereinafter referred to as end data) is added. Therefore, if the data specified by the value of the variable pe is the end data, the determination is YES, and a series of processing ends here. Otherwise, the determination is no and the process moves to step 903.
【0064】ステップ903では、変数tkoldに変
数tktimeの値を代入した後、その変数tktim
eに、それまでの値に変数peが指定する単位楽音デー
タの時間データの値を加算した値を代入する。続くステ
ップ904では、その変数peの値が指定する単位楽音
データが表すイベントがノートオンイベントか否か判定
する。その単位楽音データがノートオンイベントを表す
ものであった場合、判定はYESとなってステップ90
5に移行し、そうでない場合には、判定はNOとなって
ステップ915に移行する。なお、各単位楽音データの
時間データの値を累算していくことから明らかなよう
に、変数tktimeの値は楽音データの再生を開始し
てから経過した時間(絶対時間)で示す値である。In step 903, after substituting the value of the variable tktime for the variable tkold, the variable tktime
The value obtained by adding the value of the time data of the unit tone data specified by the variable pe to the previous value is substituted for e. In the following step 904, it is determined whether or not the event represented by the unit tone data specified by the value of the variable pe is a note-on event. If the unit tone data represents a note-on event, the determination is YES and the process goes to step 90.
If not, the determination is no and the process moves to step 915. Note that the value of the variable tktime is a value indicated by the time (absolute time) elapsed from the start of reproduction of the musical sound data, as is apparent from accumulating the value of the time data of each unit musical sound data. .
【0065】ステップ905〜909では、ノートオン
イベントを表す単位楽音データに対応するための処理が
行われる。先ず、ステップ905では、変数peの値で
指定される単位楽音データを基に、各種の設定を行う。
それにより、変数figに指番号データの値を代入し、
変数noteには音高データ(鍵盤号)を代入するとと
もに、それらの値から単位動作データAを生成して保存
する。そのような代入が終了した後はステップ906に
移行する。なお、ここで生成される単位動作データA
は、時間データ、変数figの値で指定される配列要素
note[fig]を指定する変数指定データ、及びそ
の配列要素note[fig]の値データ(変数fig
の値で指定される指パートに押鍵させる鍵のノートナン
バー)である(図5(a)参照)。In steps 905 to 909, processing is performed to correspond to the unit tone data representing the note-on event. First, in step 905, various settings are made based on the unit tone data specified by the value of the variable pe.
Thereby, the value of the finger number data is substituted for the variable fig,
The pitch data (keyboard number) is substituted for the variable "note", and the unit operation data A is generated from these values and stored. After the completion of such substitution, the process proceeds to step 906. The unit operation data A generated here
Are time data, variable specifying data specifying an array element note [fig] specified by the value of the variable fig, and value data of the array element note [fig] (variable fig
(Note number of the key to be pressed by the finger part specified by the value of) (see FIG. 5A).
【0066】ステップ906では、その変数peの値で
指定される単位楽音データが表すノートオンイベントの
発生時に、他のノートオンイベントが発生中か否か、即
ち他の鍵が押鍵されているか否か判定する。他の鍵が押
鍵されていない場合、判定はYESとなってステップ9
07に移行し、そうでない場合には、判定はNOとなっ
て後述するステップ909に移行する。なお、上記押鍵
の判定は、楽音・運指データが表す仮想的な演奏を想定
しての判定である。以降も便宜的に、特に断らない限
り、その想定で説明を行うことにする。In step 906, when a note-on event represented by the unit tone data specified by the value of the variable pe occurs, whether or not another note-on event is occurring, that is, whether or not another key has been pressed Determine whether or not. If no other key has been depressed, the determination is YES and step 9
07, otherwise, the determination is no and the process moves to step 909 described below. Note that the determination of the key press is a determination assuming a virtual performance represented by the musical sound / fingering data. Hereinafter, for convenience, the description will be made on the assumption unless otherwise specified.
【0067】ステップ907では、手パートのy軸上の
位置を決定する手のy位置処理を実行する。続くステッ
プ908では、手パートのz軸上の位置を決定する手の
z位置処理を実行する。その後に移行するステップ90
9では、他のイベントとの関係を考慮しつつ、単位楽音
データが表すノートオンイベントに応じて手指の各パー
トを動作させる内容を決定するノートオンメイン処理を
実行する。そのノートオンメイン処理を実行した後はス
テップ910に移行する。In step 907, a hand y-position process for determining the position of the hand part on the y-axis is executed. In the following step 908, z position processing of the hand for determining the position of the hand part on the z axis is executed. Step 90 to move to thereafter
In step 9, note-on main processing is performed to determine the contents for operating each part of the finger in accordance with the note-on event represented by the unit musical sound data, while considering the relationship with other events. After executing the note-on-main processing, the flow shifts to step 910.
【0068】ステップ910では、変数bchordに
「TRUE」を表す値が代入されているか否か判定す
る。直前のノートオンメイン処理の実行時に、単位楽音
データが表すノートイベントが和音を発音させるための
ものであると判定すると、その変数bchordには
「TRUE」を表す値が代入される。このため、ノート
オンメイン処理の実行時に単位楽音データが和音を発音
させるためのものと判定されていた場合、判定はYES
となってステップ913に移行する。そうでない場合に
は、判定はNOとなり、ステップ911に移行する。In step 910, it is determined whether or not a value representing "TRUE" has been substituted for the variable bchord. If it is determined during the immediately preceding note-on-main process that the note event represented by the unit tone data is for generating a chord, a value representing "TRUE" is substituted for the variable bchord. For this reason, if it is determined that the unit musical tone data is for generating a chord when executing the note-on main process, the determination is YES.
And the process moves to step 913. Otherwise, the determination is no and the process moves to step 911.
【0069】ステップ911では、手パートのx軸上の
位置を決定する手のx位置処理を実行する。続くステッ
プ912では、手パートのy軸上の位置を再度、決定す
る手のy位置再処理を実行する。その処理を実行した後
は、ステップ913でその他の処理を実行し、続くステ
ップ914で変数peに、次に対象となる単位楽音デー
タのアドレスを代入した後、上記ステップ902に戻
る。In step 911, x position processing of the hand for determining the position of the hand part on the x axis is executed. In the following step 912, the y-position re-processing of the hand for determining the position of the hand part on the y-axis is executed again. After executing this processing, other processing is executed in step 913. In step 914, the address of the next target musical tone data is substituted for the variable pe, and the process returns to step 902.
【0070】上記ステップ907〜909、911、9
12、及び後述するステップ917では、それぞれ、特
定の動作が伴うパラメータ(変数、或いは配列変数の要
素)に着目したパート動作データの生成が行われ、それ
が単位動作データAに追加される。それにより、ステッ
プ913に移行時には、手指の各パートをどのような状
態に移行させるかが確定するようになっている。このた
め、ステップ913では、単位動作データAから段階動
作データを生成し、それをRAM103に格納すること
を行っている。その生成は、本実施の形態では、動作時
間データで指定される時間間隔を複数に区切り、それま
での状態と移行後の状態の間を直線で補間することで行
っている。また、そのステップ913では、ノートオン
イベント、及びノートオフイベント以外のイベントを表
す単位楽音データの処理も行っている。Steps 907 to 909, 911 and 9
In step 12 and step 917 to be described later, part operation data focusing on parameters (variables or elements of array variables) accompanied by specific operations is generated, and the generated part operation data is added to the unit operation data A. Thus, when the process proceeds to step 913, the state in which each part of the finger is to be transferred is determined. Thus, in step 913, step operation data is generated from the unit operation data A and stored in the RAM 103. In the present embodiment, the generation is performed by dividing a time interval specified by the operation time data into a plurality of intervals and interpolating a straight line between the previous state and the state after the transition. In step 913, processing of unit tone data representing events other than the note-on event and the note-off event is also performed.
【0071】一方、上記ステップ904の判定がNOと
なって移行するステップ915では、変数peの値で指
定される単位楽音データがノートオフイベントを表して
いるか否か判定する。その単位楽音データがノートオフ
イベントを表している場合、判定はYESとなってステ
ップ916に移行する。そうでない場合には、上記ステ
ップ913に移行する。On the other hand, in step 915 to which the determination in step 904 is NO and the process proceeds, it is determined whether or not the unit tone data specified by the value of the variable pe represents a note-off event. If the unit tone data indicates a note-off event, the determination becomes YES and the flow shifts to step 916. If not, the process proceeds to step 913.
【0072】ステップ916では、変数peの値で指定
される単位楽音データを基に、各種の設定を行う。それ
により、変数figに指番号データの値を代入し、変数
noteには音高データ(鍵盤号)を代入するととも
に、それらの値から単位動作データAを生成して保存す
る。そのような代入が終了した後はステップ906に移
行する。なお、ここで生成される単位動作データAは、
時間データ、変数figの値で指定される配列要素no
te[fig]を指定する変数指定データ、及びその配
列要素note[fig]の値データ(ここでは離鍵な
ので0である)である。それに続くステップ917で
は、ノートオフイベント時に手指の各パートを動作させ
るための動作制御データ(単位動作データAに追加する
パート動作データ)を生成するノートオフメイン処理を
実行する。その後は上記ステップ910に移行する。At step 916, various settings are made based on the unit tone data specified by the value of the variable pe. Thus, the value of the finger number data is substituted for the variable fig, the pitch data (keyboard number) is substituted for the variable note, and the unit operation data A is generated and stored from those values. After the completion of such substitution, the process proceeds to step 906. The unit operation data A generated here is:
Array element no specified by time data, value of variable fig
Variable designation data designating te [fig] and value data of its array element note [fig] (here, it is 0 because it is a key release). In a subsequent step 917, a note-off main process for generating operation control data (part operation data added to the unit operation data A) for operating each part of the finger at the time of the note-off event is executed. Thereafter, the flow shifts to step 910.
【0073】上述したようにして、動作制御データ生成
処理では、動作制御データの生成の対象とする単位楽音
データ、及びそれに付加した指番号データを順次、変更
しながら動作制御データを生成する。それにより、動作
制御データは演奏上のイベント単位で生成するようにな
っている。As described above, in the operation control data generation processing, the operation control data is generated while sequentially changing the unit musical sound data for which the operation control data is to be generated and the finger number data added thereto. Thus, the operation control data is generated in event units in performance.
【0074】次に、上記動作制御データ生成処理内で実
行される各種サブルーチン処理について、図10〜図2
0に示すその動作フローチャートを参照しながら詳細に
説明する。Next, various subroutine processes executed in the operation control data generation process will be described with reference to FIGS.
This will be described in detail with reference to the operation flowchart shown in FIG.
【0075】図10は、上記ステップ907として実行
される手のy位置処理の動作フローチャートである。サ
ブルーチン処理では、始めに図10を参照して、手のy
位置処理について詳細に説明する。FIG. 10 is an operation flowchart of the hand y position processing executed as step 907. In the subroutine process, first, referring to FIG.
The position processing will be described in detail.
【0076】基点301のy軸上の位置を示す値は、変
数hynewに保持されている。この手のy位置処理で
は、基点301を次に配置すべき位置を求め、その位置
を示す値を変数hynewに代入することが行われる。The value indicating the position of the base point 301 on the y-axis is stored in the variable hynew. In this kind of y position processing, a position where the base point 301 is to be arranged next is obtained, and a value indicating the position is substituted into a variable hynew.
【0077】先ず、ステップ1001では、初期設定を
行い、変数hynewの値を変数hynowに代入す
る。続くステップ1002では、現在、対象としている
単位楽音データ、及び指番号データ以降のデータを読み
出し、次に全ての鍵が離鍵するまでに親指か小指が黒鍵
を押鍵するようになっているか否か判定する。次に全て
の鍵が離鍵するまでに、0、或いは4を指番号データと
する単位楽音データが存在していた場合、判定はYES
となってステップ1005に移行する。そうでない場合
には、判定はNOとなってステップ1003に移行す
る。First, in step 1001, initialization is performed, and the value of the variable hynew is substituted for the variable hynow. In the following step 1002, the current unit tone data and the data after the finger number data are read, and it is determined whether the thumb or the little finger presses the black key by the time all keys are released next time. Determine whether or not. Next, if unit tone data having 0 or 4 as finger number data exists before all keys are released, the determination is YES.
And the process moves to step 1005. Otherwise, the determination is no and the process moves to step 1003.
【0078】ステップ1003では、変数hynowに
位置YPOS1(図4参照)を示す値が代入されている
か否か判定する。その値が変数hynowに代入されて
いた場合、判定はYESとなり、ここで一連の処理を終
了する。そうでない場合には、判定はNOとなり、ステ
ップ1004で変数hynewに位置YPOS2を示す
値を代入し、直前の単位楽音データの処理タイミングか
ら今回の単位楽音データの処理タイミングまでに位置Y
POS1への移動を完了させるパート動作データを生成
し、それを単位動作データAに追加した後、一連の処理
を終了する。At step 1003, it is determined whether or not a value indicating the position YPOS1 (see FIG. 4) has been assigned to the variable hynow. If the value has been assigned to the variable hynow, the determination becomes YES, and the series of processing ends here. Otherwise, the determination is no, and in step 1004, a value indicating the position YPOS2 is substituted for the variable hynew, and the position YPOS is processed from the processing timing of the immediately preceding unit tone data to the processing timing of the current unit tone data.
After generating the part operation data for completing the movement to the POS 1 and adding it to the unit operation data A, a series of processing is ended.
【0079】一方、ステップ1002の判定がYESと
なって移行するステップ1005でも、変数hynow
に位置YPOS1(図4参照)を示す値が代入されてい
るか否か判定する。その値が変数hynowに代入され
ていなかった場合、判定はNOとなり、ここで一連の処
理を終了する。そうでない場合には、判定はYESとな
り、ステップ1006で変数hynewに位置YPOS
1を示す値を代入し、直前の単位楽音データの処理タイ
ミングから今回の単位楽音データの処理タイミングまで
に位置YPOS2への移動を完了させるパート動作デー
タを生成した後、一連の処理を終了する。On the other hand, also in step 1005 to which the determination in step 1002 is YES and the process proceeds, the variable hynow is also set.
It is determined whether or not a value indicating the position YPOS1 (see FIG. 4) has been assigned to. If the value has not been assigned to the variable hynow, the determination is NO, and the series of processing ends here. Otherwise, the determination is yes and at step 1006 the position YPOS is stored in the variable hynew.
After substituting a value indicating 1, generating part operation data for completing the movement to the position YPOS2 from the processing timing of the immediately preceding unit tone data to the processing timing of the current unit tone data, a series of processes is ended.
【0080】このように、手のy位置処理では、ユーザ
が親指、或いは小指を使って黒鍵を押鍵しなければなら
ない場合、手パートを位置YPOS2に移動させて、鍵
盤300に予め近づけるようにしている。今回を含め、
親指、及び小指を使うことなく、全ての鍵を離鍵してい
る状態となる場合、手パートは位置YPOS1に位置さ
せている。As described above, in the y-position processing of the hand, when the user has to depress the black key using the thumb or the little finger, the hand part is moved to the position YPOS2 so as to approach the keyboard 300 in advance. I have to. Including this time,
When all the keys are released without using the thumb and the little finger, the hand part is located at the position YPOS1.
【0081】親指、或いは小指を使って黒鍵を押鍵する
以外にも、指を大きく開いた形で複数の鍵を押鍵したり
すると、手と鍵盤との間のy軸上の距離は小さくなる。
そのようなことに対応するための手パートの基点301
のy軸上における位置調整は、ステップ912として実
行される手のy位置再処理で行っている。In addition to pressing the black key using the thumb or the little finger, when a plurality of keys are pressed with the finger widely opened, the distance between the hand and the keyboard on the y-axis becomes Become smaller.
The base point 301 of the hand part to deal with such a situation
The position adjustment on the y-axis is performed by re-processing the y position of the hand executed as step 912.
【0082】図11は、図9に示す動作制御データ生成
処理内でステップ908として実行される手のz位置処
理の動作フローチャートである。次に、図11を参照し
て、その処理について詳細に説明する。FIG. 11 is an operation flowchart of the z position processing of the hand executed as step 908 in the operation control data generation processing shown in FIG. Next, the processing will be described in detail with reference to FIG.
【0083】現時点において基点301が存在すべきz
軸上の位置を示す値は変数hznowに保持されてい
る。直前の単位楽音データを処理した際の変数tkti
meの値は変数tkoldに保持されている。手パート
の基点301は、図4に示すように、z軸上では位置Z
POS1、或いはZPOS2の何れかの位置をとる。手
のz位置処理の実行時は、押鍵されている鍵が存在して
いない状況である。Z at which base point 301 should exist at the present time
The value indicating the position on the axis is stored in the variable hznow. Variable tkti when processing the immediately preceding unit tone data
The value of me is stored in the variable tkold. The base point 301 of the hand part is located at a position Z on the z-axis as shown in FIG.
The position is either POS1 or ZPOS2. When the z-position process of the hand is executed, there is no key being pressed.
【0084】先ず、ステップ1101では、変数hzn
owに位置ZPOS1を示す値が代入されているか否か
判定する。その値が変数hznowに代入されていた場
合、判定はYESとなり、ここで一連の処理を終了す
る。そうでない場合には、即ち手パートの基点301が
位置ZPOS2に位置している場合には、判定はNOと
なり、ステップ1102に移行して、変数tkoldの
値が示すタイミングから変数tktimeの値が示すタ
イミングまでに、基点301を位置ZPOS2から位置
ZPOS1に移動させるパート動作データを作成し、そ
れを単位動作データAに追加する形でRAM103に格
納する。それが終了した後に一連の処理を終了する。First, in step 1101, the variable hzn
It is determined whether or not the value indicating the position ZPOS1 is substituted for ow. If the value has been assigned to the variable hznow, the determination is YES, and the series of processing ends here. Otherwise, that is, when the base point 301 of the hand part is located at the position ZPOS2, the determination is NO, and the process proceeds to step 1102, where the value of the variable tktime indicates the value from the timing indicated by the value of the variable tkold. By the timing, the part operation data for moving the base point 301 from the position ZPOS2 to the position ZPOS1 is created, and the part operation data is added to the unit operation data A and stored in the RAM 103. After that, a series of processing ends.
【0085】図12は、図9に示す動作制御データ生成
処理内でステップ909として実行されるノートオンメ
イン処理の動作フローチャートである。次に、図12を
参照して、その処理について詳細に説明する。FIG. 12 is an operation flowchart of the note-on-main processing executed as step 909 in the operation control data generation processing shown in FIG. Next, the processing will be described in detail with reference to FIG.
【0086】現在、処理対象としている単位楽音データ
を実際に処理、即ち再生する際に、和音(コード)が発
音中か否かを示す値(「TRUE」或いは「FALS
E」)は変数bchordに保持されている。和音が発
音中であれば、その和音を構成する楽音のなかで最後に
発音が開始する楽音の単位楽音データのアドレスは変数
pchordendに保持されている。ノートオンメイ
ン処理では、そのような変数を含む各種変数の値が参照
される。A value ("TRUE" or "FALS") indicating whether or not a chord (chord) is being generated at the time of actually processing, ie, reproducing, the unit musical tone data to be processed.
E ") is held in the variable bchord. If a chord is being generated, the address of the unit tone data of the musical tone whose tone starts last in the musical tones constituting the chord is held in the variable pholdend. In the note-on main processing, the values of various variables including such variables are referred to.
【0087】先ず、ステップ1201では、変数bch
ordの値が「TRUE」か否か判定する。処理対象と
している単位楽音データを再生する状況で和音を発音さ
せているとみなしていた場合、その変数bchordに
は「TRUE」が代入されていることから、判定はYE
Sとなってステップ1207に移行し、そうでない場合
には、判定はNOとなってステップ1202に移行す
る。First, in step 1201, the variable bch
It is determined whether the value of ord is “TRUE”. If it is considered that a chord is being generated in a situation where the unit musical sound data to be processed is reproduced, the determination is YE because “TRUE” is substituted for the variable bchord.
In S, the process proceeds to step 1207. Otherwise, the determination is NO and the process proceeds to step 1202.
【0088】ステップ1202では、変数ballof
fの値が「TRUE」か否か判定する。処理対象として
いる単位楽音データを再生する状況で押鍵されている鍵
が存在している場合、判定はNOとなってステップ12
06に移行する。そうでない場合には、判定はYESと
なってステップ1203に移行する。At step 1202, the variable ballof
It is determined whether the value of f is “TRUE”. If there is a key that has been depressed in a situation in which the unit musical sound data to be processed is reproduced, the determination is NO and step 12
Shift to 06. Otherwise, the determination is yes and the process moves to step 1203.
【0089】ステップ1203では、処理対象としてい
る単位楽音データ、及びそれに続く単位楽音データによ
って和音が発音されるか否か判定する和音判定処理を実
行する。その和音判定処理において、それらの単位楽音
データによって和音が発音されると判定すると、変数b
chordには「TRUE」が代入されることになる。
その実行後は、ステップ1204に移行する。In step 1203, a chord determination process is performed to determine whether or not a chord is to be produced by the unit tone data to be processed and the subsequent unit tone data. In the chord determination processing, when it is determined that a chord is to be generated by the unit musical tone data, the variable b
“TRUE” is substituted for “chord”.
After the execution, the process moves to step 1204.
【0090】ステップ1204では、変数bchord
の値が「TRUE」か否か判定する。上記和音判定処理
を実行した結果、新たに和音が発音されるとみなした場
合、判定はYESとなり、ステップ1205でその和音
を発音させる動作の内容を決定する和音動作処理を実行
した後、一連の処理を終了する。そうでない場合には、
判定はNOとなり、ステップ1206で押鍵動作の内容
を決定するノートオン動作処理を実行した後、一連の処
理を終了する。In step 1204, the variable bchord
Is determined to be “TRUE”. If it is determined that a new chord is to be generated as a result of executing the above-described chord determination processing, the determination becomes YES, and in step 1205, after performing the chord operation processing for determining the content of the operation for generating the chord, The process ends. If not,
The determination is NO, and after executing note-on operation processing for determining the content of the key pressing operation in step 1206, a series of processing ends.
【0091】一方、上記ステップ1201の判定がYE
Sとなって移行するステップ1207では、変数pch
ordendの値が変数peの値と等しいか否か判定す
る。変数peの値が指定する単位楽音データ、即ち現
在、処理対象としている単位楽音データが、和音を構成
しているとみなす楽音のなかで最後に発音される楽音の
発音開始を指示するものであった場合、判定はYESと
なり、ステップ1208で変数bchordに「FAL
SE」、変数pchordendにNULL(空値)を
それぞれ代入した後、一連の処理を終了する。そうでな
い場合には、判定はNOとなって、ここで一連の処理を
終了する。On the other hand, the determination in step 1201 is YE
In step 1207 to which the processing shifts to S, the variable pch
It is determined whether ordend is equal to the value of the variable pe. The unit tone data specified by the value of the variable pe, that is, the unit tone data currently being processed, instructs the start of the last tone to be pronounced among the tones considered to constitute a chord. In this case, the determination is YES, and the variable bchord is set to “FAL”
After “NU” (null value) is substituted for “SE” and the variable pholdend, a series of processing is ended. Otherwise, the determination is no and the series of processing ends here.
【0092】このように、ノートオンメイン処理では、
単位楽音データが発音開始を指示する楽音が和音を構成
しているか否かにより処理を分岐させている。それによ
り、和音を発音させるのか単に楽音を発音させるのかに
応じて、手指の各パートを動作させるようにしている。As described above, in the note-on-main processing,
The processing branches depending on whether or not the musical tone for which the unit musical tone data indicates the start of sound generation constitutes a chord. Thereby, each part of the finger is operated according to whether to generate a chord or simply generate a musical tone.
【0093】ここで、上記ノートオンメイン処理内で実
行される各種サブルーチン処理について、図13〜図1
5を参照して詳細に説明する。図13は、上記ステップ
1203として実行される和音判定処理の動作フローチ
ャートである。ノートオンメイン処理内で実行されるサ
ブルーチン処理では、図13を参照して、始めに和音判
定処理について詳細に説明する。Here, various subroutine processes executed in the note-on-main process will be described with reference to FIGS.
This will be described in detail with reference to FIG. FIG. 13 is an operation flowchart of the chord determination processing executed as step 1203. In the subroutine process executed in the note-on main process, first, the chord determination process will be described in detail with reference to FIG.
【0094】先ず、ステップ1301では、初期設定を
行う。その初期設定を行うことにより、変数tknex
tには、変数peの値で指定される単位楽音データ以降
で最初に楽音の発音開始を指示する単位楽音データの処
理タイミングを絶対時間で示す値が代入され、変数tk
nextoffには、変数peの値で指定される単位楽
音データ以降で最初に楽音の消音を指示する単位楽音デ
ータの処理タイミングを絶対時間で示す値が代入され
る。First, in step 1301, initialization is performed. By performing the initial setting, the variable tknex
A value indicating the processing timing of the unit tone data which instructs the start of tone generation first after the unit tone data specified by the value of the variable pe is substituted for t, and a variable tk is assigned.
A value indicating, in absolute time, the processing timing of the unit tone data that instructs to silence the tone first after the unit tone data specified by the value of the variable pe is assigned to nextoff.
【0095】ステップ1301に続くステップ1302
では、変数tknextの値が、変数tktimeの値
に変数tkchordの値を加算した値より小さいか否
か判定する。その変数tkchordには、和音を構成
しているか否か判定するうえで基準となる、楽音間の発
音開始間隔を示す値が代入されている。このことから、
その間隔以内に次の楽音の発音が開始する場合、判定は
YESとなってステップ1303に移行し、そうでない
場合には、判定はNOとなって、ここで一連の処理を終
了する。Step 1302 following step 1301
Then, it is determined whether the value of the variable tknext is smaller than a value obtained by adding the value of the variable tktime to the value of the variable tktime. A value indicating a sound generation start interval between musical tones, which is a reference for determining whether or not a chord is formed, is substituted into the variable tkchord. From this,
If the generation of the next musical tone starts within that interval, the determination is YES and the process moves to step 1303; otherwise, the determination is NO and the series of processes ends here.
【0096】ステップ1303では、変数tknext
offの値が、変数tktimeの値に変数tkcho
rdの値を加算した値より大きいか否か判定する。変数
tkchordの値が示す時間が経過する前に、消音さ
れる楽音が存在していない場合、判定はYESとなり、
ステップ1304で変数bchordに「TRUE」を
代入した後、一連の処理を終了する。そうでない場合に
は、判定はNOとなり、ここで一連の処理を終了する。In step 1303, the variable tknext
The value of off is replaced by the value of variable tkcho
It is determined whether the value of rd is greater than the value obtained by adding the values of rd. If there is no tone to be muted before the time indicated by the value of the variable tkchord has elapsed, the determination is YES,
After “TRUE” is substituted for the variable “bchord” in step 1304, a series of processing ends. Otherwise, the determination is no, and a series of processing ends here.
【0097】このように、本実施の形態では、変数tk
chordの値が示す時間内に複数の押鍵(ノートオン
イベント)があり、且つその時間内に離鍵(ノートオフ
イベント)が存在していなければ、その時間内に発音開
始される楽音は和音を構成しているとみなすようにして
いる。As described above, in the present embodiment, the variable tk
If there are a plurality of key presses (note-on events) within the time indicated by the value of chord and there is no key release (note-off event) within the time, the musical tone started to be generated within that time is a chord. Is to be regarded as constituting.
【0098】図14は、図12に示すノートオンメイン
処理内でステップ1205として実行される和音動作処
理の動作フローチャートである。次に図14を参照し
て、和音動作処理について詳細に説明する。FIG. 14 is an operation flowchart of the chord operation processing executed as step 1205 in the note-on main processing shown in FIG. Next, the chord operation processing will be described in detail with reference to FIG.
【0099】先ず、ステップ1401では、初期化処理
を実行する。その初期化処理を実行することにより、変
数tktime0には、変数tktimeの値が代入さ
れ、変数pe0には変数peの値が代入され、変数pc
hordendにはNULLが代入される。ステップ1
401に続くステップ1402以降は、変数pe0の値
を順次、インクリメントしながら、和音とみなす楽音の
範囲の特定や、その和音を鳴らす動作内容を決定するた
めの処理が行われる。First, in step 1401, initialization processing is executed. By executing the initialization process, the value of the variable tktime is substituted for the variable tktime0, the value of the variable pe is substituted for the variable pe0, and the variable pc
NULL is assigned to "holdend". Step 1
After step 1402 following step 401, a process for specifying the range of musical tones to be regarded as a chord and determining the operation content of the chord is performed while sequentially incrementing the value of the variable pe0.
【0100】ステップ1402では、楽音・運指データ
が終了したか否か判定する。変数pe0の値が指定する
データが楽音・運指データの最後に位置するエンドデー
タであった場合、判定はYESとなってステップ141
0に移行し、そうでない場合には、判定はNOとなって
ステップ1403に移行する。At step 1402, it is determined whether or not the musical sound / fingering data has been completed. If the data specified by the value of the variable pe0 is the end data located at the end of the musical sound / fingering data, the determination is YES and the step 141 is made.
If not, the determination is no and the process moves to step 1403.
【0101】ステップ1403では、変数pe0の値が
変数peの値と等しいか否か判定する。それらの値が等
しい場合、判定はYESとなってステップ1405に移
行する。そうでない場合には、判定はNOとなり、ステ
ップ1404で変数tktime0に、それまでの値に
変数pe0の値が指定する単位楽音データの時間データ
の値を加算した値を代入した後、そのステップ1405
に移行する。そのようにして、変数tktime0に
は、変数peの値が指定する単位楽音データ以降の単位
楽音データを処理すべきタイミングを絶対時間で示す値
が代入される。In step 1403, it is determined whether the value of the variable pe0 is equal to the value of the variable pe. If the values are equal, the determination is YES and the process moves to step 1405. Otherwise, the determination is no, and in step 1404, the value obtained by adding the value of the time data of the unit musical sound data designated by the value of the variable pe0 to the value up to that time is substituted for the variable tktime0.
Move to In this way, the value indicating the timing at which the unit tone data after the unit tone data specified by the value of the variable pe is to be processed is assigned to the variable tktime0 in absolute time.
【0102】ステップ1405では、変数tktime
0の値が、変数tktimeの値に変数tkchord
の値を加算した値よりも小さいか否か判定する。変数p
e0、及びpeの値がそれぞれ指定する単位楽音データ
の処理タイミングが、変数tkchordの値で指定さ
れる時間内でなかった場合、判定はNOとなって上記ス
テップ1410に移行する。そうでない場合には、判定
はYESとなってステップ1406に移行する。In step 1405, the variable tktime
The value of 0 changes the value of the variable tktime to the value of the variable tkchord.
It is determined whether the value is smaller than the value obtained by adding Variable p
If the processing timing of the unit tone data specified by the values of e0 and pe is not within the time specified by the value of the variable tkchord, the determination is NO and the process proceeds to step 1410. Otherwise, the determination is yes and the process moves to step 1406.
【0103】ステップ1406では、変数pe0の値が
指定する単位楽音データは押鍵(ノートオンイベント)
を表すものであるか否か判定する。その単位楽音データ
がノートオンイベントを表していた場合、判定はYES
となり、ステップ1407で変数pchordendに
変数pe0の値を代入し、続くステップ1408でノー
トオン動作処理を実行した後、ステップ1409に移行
する。そうでない場合には、判定はNOとなってそのス
テップ1409に移行する。At step 1406, the unit tone data specified by the value of the variable pe0 is a key press (note-on event).
Is determined. If the unit tone data represents a note-on event, the determination is YES
In step 1407, the value of the variable pe0 is substituted for the variable pholdend. In step 1408, note-on operation processing is performed. Otherwise, the determination is no and the process moves to step 1409.
【0104】ステップ1409では、変数pe0に次の
単位楽音データのアドレスを代入する。それを行った
後、上記ステップ1402に戻る。このように、ステッ
プ1402〜1409で形成される処理ループをステッ
プ1402の判定がYES、或いはステップ1405の
判定がNOとなるまで繰り返し実行することにより、変
数pchordendには、和音を構成するとみなす楽
音のなかで最後に発音が開始する楽音の単位楽音データ
のアドレス値が代入されることになる。In step 1409, the address of the next unit tone data is assigned to the variable pe0. After that, the process returns to step 1402. In this way, by repeatedly executing the processing loop formed in steps 1402 to 1409 until the determination in step 1402 is YES or the determination in step 1405 is NO, the variable pchordend contains the tone of the musical tone regarded as constituting a chord. Of these, the address value of the unit tone data of the tone whose tone generation starts last is substituted.
【0105】一方、ステップ1402の判定がYES、
或いはステップ1405の判定がNOとなって移行する
ステップ1410では、手パートがz軸上を移動してい
く動作(ここでは図4に示す位置ZPOS1から位置Z
POS2に移動していく動作である)を表現するパート
動作データを作成する。その動作データを作成すること
により、手パートの基点301が、変数tkstart
0の値が示すタイミングで移動を開始し、変数tkti
meの値が示すタイミングで位置YPOS2への移動が
終了するようにさせる。そのようなパート動作データを
単位動作データAに追加した後、一連の処理を終了す
る。On the other hand, if the determination in step 1402 is YES,
Alternatively, in step 1410 to which the determination in step 1405 is NO and the process proceeds, the hand part moves on the z-axis (here, from position ZPOS1 to position Z shown in FIG. 4).
(Movement to POS2). By creating the operation data, the base point 301 of the hand part is set to the variable tkstart.
The movement starts at the timing indicated by the value of 0, and the variable tkti
The movement to the position YPOS2 ends at the timing indicated by the value of me. After adding such part operation data to the unit operation data A, a series of processing is ended.
【0106】上記変数tkstart0の値が示すタイ
ミングは、和音を構成する楽音のなかで最初に発音され
る楽音を発音させる指パートの動作を開始するタイミン
グか、或いは各指パートの離鍵から押鍵に移行するまで
の時間が比較的に長ければ、変数tktimeの値か
ら、押鍵動作を開始してから押鍵するまでの基準時間を
示す値を引いた値が示すタイミングである。それによ
り、和音を鳴らす状況に応じて、それを鳴らすための手
指の各パートの動作を異ならせるようにしている。図6
に示す例では、変数tkstart0に前者の値が代入
された結果、親指パートの押鍵動作の開始に合わせて手
パートのz軸上の移動が開始し、そのz軸上の移動が
「D#」の楽音の発音開始時に終了していることを表し
ている。なお、その基準時間を示す値は変数tkcos
tに代入されている。離鍵動作を開始してからその動作
が完了するまでの基準時間を示す値は変数tkoffc
ostに代入されている。The timing indicated by the value of the variable tkstart0 is the timing at which the operation of the finger part for producing the first musical tone to be produced among the musical tones constituting the chord starts, or the timing at which the key is released from the release of each finger part. If the time until shifting to is relatively long, this is the timing indicated by the value obtained by subtracting the value indicating the reference time from the start of the key press operation to the key press from the value of the variable tktime. Thus, the operation of each part of the finger for sounding the chord is made different depending on the situation where the chord sounds. FIG.
In the example shown in FIG. 7, the former value is substituted for the variable tkstart0, and as a result, the hand part starts to move on the z-axis in synchronization with the start of the key-depressing operation of the thumb part, and the movement on the z-axis is represented by “D # ”At the start of the tone generation. Note that the value indicating the reference time is a variable tkcos
has been substituted for t. The value indicating the reference time from the start of the key release operation to the completion of the operation is a variable tkoffc.
ost.
【0107】次に、上記ステップ1408、或いは図1
2に示すノートオンメイン処理内でステップ1206と
して実行されるノートオン動作処理処理について、図1
5に示すその動作フローチャートを参照して詳細に説明
する。なお、この処理内では、単位楽音データに付加さ
れた指番号データは変数figに、その単位楽音データ
中の音高データは変数noteに代入されている。Next, step 1408 or FIG.
FIG. 1 shows the note-on operation processing executed as step 1206 in the note-on main processing shown in FIG.
This will be described in detail with reference to the operation flowchart shown in FIG. In this process, the finger number data added to the unit tone data is assigned to a variable fig, and the pitch data in the unit tone data is assigned to a variable note.
【0108】先ず、ステップ1501では、初期設定を
行う。その初期設定では、変数figの値を指番号デー
タとして付加された、ノートオフイベントを表す直前の
単位楽音データの処理タイミングを絶対時間で示す値を
求め、その求めた値を変数tkfoffに代入すること
が行われる。First, in step 1501, initialization is performed. In the initial setting, a value indicating, in absolute time, the processing timing of the unit musical sound data immediately before the note-off event to which the value of the variable fig is added as the finger number data is obtained, and the obtained value is substituted for the variable tkfoff. Is done.
【0109】ステップ1501に続くステップ1502
では、変数tktimeの値から変数tkfoffの値
を引いた値が、変数tkcostの値に変数tkoff
costの値を加算した値より小さいか否か判定する。
即ち変数figで指定される指パートの離鍵動作を開始
させてからその指パートを押鍵させるまでの時間が、離
鍵動作の基準時間と押鍵動作の基準時間を足した時間よ
りも短いか否か判定する。前者の時間が後者の時間より
も長い場合、判定はNOとなり、ステップ1503で変
数tkstartに、変数tktimeの値から変数t
koffcostの値を引いた値を代入した後、ステッ
プ1504に移行する。そうでない場合には、即ち離鍵
動作、或いは押鍵動作を基準時間で行わせる余裕がない
場合には、判定はYESとなってステップ1506に移
行する。Step 1502 following step 1501
Then, a value obtained by subtracting the value of the variable tkfoff from the value of the variable tktime becomes the value of the variable tkoff to the value of the variable tkcost.
It is determined whether the value of the cost is smaller than the value obtained by adding the cost.
That is, the time from the start of the key release operation of the finger part specified by the variable fig until the finger part is pressed is shorter than the time obtained by adding the reference time of the key release operation and the reference time of the key press operation. Is determined. If the former time is longer than the latter time, the determination is NO, and in step 1503, the variable tkstart is set to the variable tktime from the value of the variable tktime.
After substituting the value obtained by subtracting the value of koffcost, the process proceeds to step 1504. If not, that is, if there is no room for performing the key release operation or the key press operation in the reference time, the determination is YES and the process proceeds to step 1506.
【0110】ステップ1504では、変数tkend
に、押鍵動作が終了するタイミングを示す値として変数
tktimeの値を代入する。続くステップ1505で
は、変数figの値で指定される指パートが、変数tk
startの値が示すタイミングで変数noteの値が
示す鍵に対する押鍵動作を開始し、変数tkendの値
が示すタイミングでその動作を完了、即ち押鍵する動作
を行わせるためのパート動作データを作成し単位動作デ
ータAに追加する。そのパート動作データ中の動作時間
データの値が示す時間は、変数tkoffcostの値
が示す時間である。その作成・追加を行った後、一連の
処理を終了する。In step 1504, the variable tkend
Is substituted for the value of the variable tktime as a value indicating the timing at which the key pressing operation ends. In the following step 1505, the finger part specified by the value of the variable FIG is changed to the variable tk
A key pressing operation for the key indicated by the value of the variable "note" is started at the timing indicated by the value of "start", and the operation is completed at the timing indicated by the value of the variable "tkend", that is, the part operation data for performing the key pressing operation is created. Then, it is added to the unit operation data A. The time indicated by the value of the operation time data in the part operation data is the time indicated by the value of the variable tkoffcost. After the creation / addition, the series of processing is terminated.
【0111】手パートを移動させなければ変数figの
値で指定される指パートで鍵を押鍵させることができな
いこともある。各指パートの回転角frzは、その手パ
ートの位置が確定していなければ確定させることはでき
ない。このようなことから、ここでは単に押鍵する動作
を行わせるためのパート動作データだけを作成してい
る。指パートを横に動作させるためのパート動作データ
は、図9に示す動作制御データ生成処理内のステップ9
11の手のx位置処理を実行した際に、必要に応じて作
成する。ここで作成したパート動作データも必要に応じ
て修正する。Unless the hand part is moved, the key may not be pressed with the finger part specified by the value of the variable FIG. The rotation angle frz of each finger part cannot be determined unless the position of the hand part is determined. For this reason, here, only the part operation data for simply performing the key pressing operation is created. The part movement data for moving the finger part horizontally is stored in step 9 in the movement control data generation processing shown in FIG.
When the x position processing of the eleventh hand is executed, it is created as needed. The part operation data created here is also modified as necessary.
【0112】一方、上記ステップ1502の判定がYE
Sとなって移行するステップ1506では、変数tkt
imeの値から変数tkfoffの値を引いた値に0.
2を掛けた値が、変数tkoffcostの値よりも大
きいか否か判定する。離鍵開始から次の押鍵までの時間
に0.2を掛けて得られる時間が、離鍵動作の基準時間
よりも長い場合、判定はYESとなり、ステップ150
7で変数tkstartに、変数tkfoffの値に変
数tkoffcostの値を加算した値を代入した後、
上記ステップ1504に移行する。そうでない場合に
は、判定はNOとなり、ステップ1508で変数tks
tartに、変数tkoffcostの値に0.8を掛
けた値に変数tkfoffの値を加算した値を代入した
後、ステップ1504に移行する。その後にステップ1
505を実行した際に設定される動作時間データの値
は、ステップ1507からステップ1504に移行した
のであれば、変数tktimeの値から変数tkfof
fの値を減算し、その減算結果から更に変数tkoff
cosutの値を減算した値である。ステップ1508
からステップ1504に移行したのであれば、変数tk
timeの値から変数tkfoffの値を減算し、その
減算結果から更に、変数tkoffcosutの値に
0.8を掛けた値を減算した値である。On the other hand, the determination in step 1502 is YE
In step 1506 to which the process proceeds as S, the variable tkt
The value obtained by subtracting the value of the variable tkfoff from the value of im is 0.
It is determined whether the value multiplied by 2 is greater than the value of the variable tkoffcost. If the time obtained by multiplying the time from the start of key release to the next key press by 0.2 is longer than the reference time of the key release operation, the determination becomes YES and step 150 is performed.
After substituting the value of the variable tkoffcost for the value of the variable tkoffoff into the variable tkstart in step 7,
The process moves to step 1504. Otherwise, the determination is no and at step 1508 the variable tks
After the value obtained by adding the value of the variable tkoffoff to the value obtained by multiplying the value of the variable tkoffcost by 0.8 into start, the process proceeds to step 1504. Then step 1
If the value of the operation time data set when 505 is executed is changed from step 1507 to step 1504, the value of the variable tktime is used to determine the value of the variable tkfof.
The value of f is subtracted, and a variable tkoff is further obtained from the subtraction result.
This is a value obtained by subtracting the value of cost. Step 1508
From step 1504 to the variable tk
The value obtained by subtracting the value of the variable tkoffoff from the value of time and further subtracting a value obtained by multiplying the value of the variable tkoffcosut by 0.8 from the subtraction result.
【0113】このように、同じ指パートによる離鍵、押
鍵を短い時間内に行わせる場合、離鍵動作に要する時
間、及び押鍵動作に要する時間の少なくとも一方を調整
して、それらの動作を表現するようにしている。As described above, when a key release and a key press by the same finger part are performed within a short time, at least one of the time required for the key release operation and the time required for the key press operation is adjusted, and these operations are performed. Is expressed.
【0114】図12に示すノートオンメイン処理では、
上述した各種サブルーチン処理が実行される。それによ
り、指パートを押鍵させる動作を表現するためのパート
動作データをサブルーチン処理単位で生成し単位動作デ
ータAに追加している。それらのパート動作データで
は、変数hy、hz、配列変数hrx1〜3のうちの何
れかが値の変更対象である。In the note-on main processing shown in FIG.
The various subroutine processes described above are executed. As a result, part operation data for expressing the operation of depressing the finger part is generated in subroutine processing units and added to the unit operation data A. In these part operation data, any one of the variables hy and hz and the array variables hrx1 to 3 is an object whose value is to be changed.
【0115】図16は、図9に示す動作制御データ生成
処理内でステップ917として実行されるノートオフメ
イン処理の動作フローチャートである。次に、図16を
参照して、ノートオフメイン処理について詳細に説明す
る。FIG. 16 is an operation flowchart of the note-off main processing executed as step 917 in the operation control data generation processing shown in FIG. Next, the note-off main processing will be described in detail with reference to FIG.
【0116】現在、処理対象としている単位楽音データ
を実際に処理、即ち再生する際に、消音すべき和音(コ
ード)があるか否かを示す値(「TRUE」或いは「F
ALSE」)は変数bchordoffに保持されてい
る。その和音があれば、その和音を構成する楽音のなか
で最後に消音する楽音の単位楽音データのアドレスは変
数pchordendoffに保持されている。ノート
オフメイン処理では、そのような変数を含む各種変数の
値が参照される。A value ("TRUE" or "F") indicating whether or not there is a chord (chord) to be muted when the unit tone data to be processed is actually processed, that is, reproduced.
ALSE ") is held in the variable bchordoff. If there is a chord, the address of the unit tone data of the last tone to be silenced among the tones constituting the chord is held in the variable pchordendoff. In the note-off main processing, the values of various variables including such variables are referred to.
【0117】先ず、ステップ1601では、変数bch
ordoffの値が「TRUE」か否か判定する。処理
対象としている単位楽音データを再生する状況で消音す
べき和音があるとみなしていた場合、その変数bcho
rdoffには「TRUE」が代入されていることか
ら、判定はYESとなってステップ1606に移行し、
そうでない場合には、判定はNOとなってステップ16
02に移行する。First, in step 1601, the variable bch
It is determined whether the value of ordoff is “TRUE”. When it is considered that there is a chord to be silenced in a situation where the unit musical sound data to be processed is reproduced, the variable bcho
Since “TRUE” is substituted for rdoff, the determination is YES and the process moves to step 1606.
Otherwise, the determination is no and step 16
Move to 02.
【0118】ステップ1602では、処理対象としてい
る単位楽音データ、及びそれに続く単位楽音データによ
って和音が消音、即ちその和音の構成音が全て消音され
るか否か判定する和音オフ判定処理を実行する。その和
音オフ判定処理において、それらの単位楽音データによ
って和音が消音されると判定すると、変数bchord
offには「TRUE」が代入されることになる。その
実行後は、ステップ1603に移行する。In step 1602, a chord off judgment process is executed to judge whether the chord is muted by the unit tone data to be processed and the subsequent unit tone data, that is, whether or not all the constituent tones of the chord are muted. In the chord off determination processing, when it is determined that the chord is muted by the unit tone data, the variable bchord is determined.
“TRUE” is substituted for “off”. After the execution, the flow shifts to step 1603.
【0119】ステップ1603では、変数bchord
offの値が「TRUE」か否か判定する。上記和音オ
フ判定処理を実行した結果、和音を消音させると決定し
た場合、判定はYESとなり、ステップ1604でその
和音を消音させる動作の内容を決定する和音オフ動作処
理を実行した後、一連の処理を終了する。そうでない場
合には、判定はNOとなり、ステップ1605で離鍵動
作の内容を決定するノートオフ動作処理を実行した後、
一連の処理を終了する。In step 1603, the variable bchord
It is determined whether or not the value of “off” is “TRUE”. If it is determined that the chord is to be silenced as a result of the above-described chord off determination processing, the determination is YES, and after performing the chord off operation processing for determining the contents of the operation for silencing the chord in step 1604, To end. Otherwise, the determination is no, and after performing the note-off operation processing for determining the content of the key release operation in step 1605,
A series of processing ends.
【0120】一方、上記ステップ1601の判定がYE
Sとなって移行するステップ1606では、変数pch
ordendoffの値が変数peの値と等しいか否か
判定する。変数peの値が指定する単位楽音データ、即
ち現在、処理対象としている単位楽音データが、和音を
構成する楽音のなかで最後に消音される楽音の消音を指
示するものであった場合、判定はYESとなり、ステッ
プ1607で変数bchordoffに「FALS
E」、変数pchordendoffにNULLをそれ
ぞれ代入した後、一連の処理を終了する。そうでない場
合には、判定はNOとなって、ここで一連の処理を終了
する。On the other hand, the determination in step 1601 is YE
In step 1606 to which the process proceeds as S, the variable pch
It is determined whether or not the value of the orderoff is equal to the value of the variable pe. If the unit tone data specified by the value of the variable pe, that is, the unit tone data that is currently being processed, indicates that the tone to be silenced last among the tones constituting the chord is to be silenced. YES, and in step 1607, the variable bchordoff is set to “FALS”.
E ", NULL is substituted for the variable pchordendoff, and a series of processing is ended. Otherwise, the determination is no and the series of processing ends here.
【0121】このように、ノートオフメイン処理では、
単位楽音データが消音を指示する楽音が和音を構成して
いるか否かにより処理を分岐させている。それにより、
和音を構成する楽音を消音させるのか単に楽音を消音さ
せるのかに応じて、手指の各パートを動作させる内容を
決定している。As described above, in the note-off main processing,
The processing branches depending on whether or not the musical sound instructing the silencing of the unit musical sound data constitutes a chord. Thereby,
The content for operating each part of the finger is determined depending on whether the musical tones constituting the chord are to be muted or simply tones.
【0122】ここで、上記ノートオフメイン処理内で実
行される各種サブルーチン処理について、図17〜図1
9を参照して詳細に説明する。図17は、上記ステップ
1602として実行される和音オフ判定処理の動作フロ
ーチャートである。ノートオフメイン処理内で実行され
るサブルーチン処理では、図17を参照して、始めに和
音オフ判定処理について詳細に説明する。Here, various subroutine processes executed in the note-off main process will be described with reference to FIGS.
This will be described in detail with reference to FIG. FIG. 17 is an operation flowchart of the chord off determination processing executed as step 1602. In the subroutine processing executed in the note-off main processing, first, the chord off determination processing will be described in detail with reference to FIG.
【0123】先ず、ステップ1701では、初期設定を
行う。その初期設定を行うことにより、変数tknex
tには、変数peで指定される単位楽音データ以降で最
初に楽音の発音開始を指示する単位楽音データの処理タ
イミングを絶対時間で示す値が代入され、変数tkne
xtoffには、変数peで指定される単位楽音データ
以降で最初に楽音の消音を指示する単位楽音データの処
理タイミングを絶対時間で示す値が代入される。First, in step 1701, initialization is performed. By performing the initial setting, the variable tknex
A value indicating the processing timing of the unit tone data that instructs the start of tone generation first after the unit tone data specified by the variable pe is substituted for t, and the variable tkne
In xtoff, a value indicating the processing timing of the unit tone data which instructs to mute the tone first after the unit tone data specified by the variable pe is assigned in absolute time.
【0124】ステップ1701に続くステップ1702
では、変数tknextoffの値が、変数tktim
eの値に変数tkchordの値を加算した値より小さ
いか否か判定する。変数tkchordの値が示す時間
が経過する前に、消音される楽音が存在していない場
合、判定はNOとなり、ここで一連の処理を終了する。
そうでない場合には、判定はYESとなってステップ1
703に移行する。Step 1702 following step 1701
Then, the value of the variable tknextoff is changed to the variable tktim
It is determined whether the value is smaller than the value obtained by adding the value of the variable tkchord to the value of e. If there is no tone to be muted before the time indicated by the value of the variable tkchord has elapsed, the determination is NO, and a series of processing ends here.
Otherwise, the determination is yes and step 1
The process moves to 703.
【0125】ステップ1703では、変数tknext
の値が、変数tktimeの値に変数tkchordの
値を加算した値より大きいか否か判定する。変数tkc
hordの値が示す時間が経過する前に、次の楽音の発
音が開始する場合、判定はNOとなり、ここで一連の処
理を終了する。そうでない場合には、判定はYESとな
り、ステップ1704で変数bchordoffに「T
RUE」を代入した後、一連の処理を終了する。At step 1703, the variable tknext
Is greater than the value obtained by adding the value of the variable tktime to the value of the variable tktime. Variable tkc
If the next musical tone starts to be emitted before the time indicated by the value of hor has elapsed, the determination is NO, and a series of processing ends here. Otherwise, the determination is YES and at step 1704 the variable bchordoff is set to “T
After substituting “RUE”, a series of processing ends.
【0126】このように、本実施の形態では、変数tk
chordの値が示す時間内に複数の楽音の消音(ノー
トオンイベント)があり、且つその時間内に発音開始す
る楽音(ノートオフイベント)が存在していなければ、
和音の構成音とみなした楽音は消音すべき状況になった
としている。As described above, in the present embodiment, the variable tk
If a plurality of musical tones are muted (note-on event) within the time indicated by the value of chord and there is no musical tone (note-off event) that starts sounding within that time,
It is said that the musical tone regarded as a constituent sound of the chord has entered a situation where it should be muted.
【0127】図18は、図16に示すノートオフメイン
処理内でステップ1604として実行される和音オフ動
作処理の動作フローチャートである。次に図18を参照
して、和音オフ動作処理について詳細に説明する。FIG. 18 is an operation flowchart of the chord off operation processing executed as step 1604 in the note off main processing shown in FIG. Next, the chord off operation processing will be described in detail with reference to FIG.
【0128】先ず、ステップ1801では、初期化処理
を実行する。その初期化処理を実行することにより、変
数tktime0には、変数tktimeの値が代入さ
れ、変数pe0には変数peの値が代入され、変数pc
hordendoffにはNULLが代入される。ステ
ップ1801に続くステップ1802以降では、変数p
e0の値を順次、インクリメントしながら、和音とみな
す楽音の範囲の特定や、その和音を消音させる動作内容
を決定するための処理が行われる。First, at step 1801, initialization processing is executed. By executing the initialization process, the value of the variable tktime is substituted for the variable tktime0, the value of the variable pe is substituted for the variable pe0, and the variable pc
NULL is substituted for holdendoff. In step 1802 and subsequent steps following step 1801, the variable p
While sequentially incrementing the value of e0, a process of specifying a range of musical tones regarded as a chord and determining an operation content for silencing the chord is performed.
【0129】ステップ1802では、楽音・運指データ
が終了したか否か判定する。変数pe0の値が指定する
データが楽音・運指データの最後に位置するエンドデー
タであった場合、判定はYESとなってステップ181
0に移行し、そうでない場合には、判定はNOとなって
ステップ1803に移行する。At step 1802, it is determined whether or not the musical sound / fingering data has been completed. If the data specified by the value of the variable pe0 is the end data located at the end of the musical sound / fingering data, the determination is YES and the step 181 is performed.
If not, the determination is no and the process moves to step 1803.
【0130】ステップ1803では、変数pe0の値が
変数peの値と等しいか否か判定する。それらの値が等
しい場合、判定はYESとなってステップ1805に移
行する。そうでない場合には、判定はNOとなり、ステ
ップ1804で変数tktime0に、それまでの値に
変数pe0の値が指定する単位楽音データの時間データ
の値を加算した値を代入した後、そのステップ1805
に移行する。そのようにして、変数tktime0に
は、変数peの値が指定する単位楽音データ以降の単位
楽音データを処理すべきタイミングを絶対時間で示す値
が代入される。At step 1803, it is determined whether or not the value of the variable pe0 is equal to the value of the variable pe. If the values are equal, the determination is YES and the process moves to step 1805. Otherwise, the determination is no, and in step 1804, a value obtained by adding the value of the time data of the unit musical sound data designated by the value of the variable pe0 to the value up to that time is substituted for the variable tktime0, and then the step 1805 is performed.
Move to In this way, the value indicating the timing at which the unit tone data after the unit tone data specified by the value of the variable pe is to be processed is assigned to the variable tktime0 in absolute time.
【0131】ステップ1805では、変数tktime
0の値が、変数tktimeの値に変数tkchord
の値を加算した値よりも小さいか否か判定する。変数p
e0、及びpeの値がそれぞれ指定する単位楽音データ
の各処理タイミングが、変数tkchordの値で指定
される時間内でなかった場合、判定はNOとなって上記
ステップ1810に移行する。そうでない場合には、判
定はYESとなってステップ1806に移行する。At step 1805, the variable tktime
The value of 0 changes the value of the variable tktime to the value of the variable tkchord.
It is determined whether the value is smaller than the value obtained by adding Variable p
If the respective processing timings of the unit tone data specified by the values of e0 and pe are not within the time specified by the value of the variable tkchord, the determination is NO and the process proceeds to step 1810. Otherwise, the determination is yes and the process moves to step 1806.
【0132】ステップ1806では、変数pe0の値が
指定する単位楽音データは楽音の消音(ノートオフイベ
ント)を表すものであるか否か判定する。その単位楽音
データがノートオフイベントを表していた場合、判定は
YESとなり、ステップ1807で変数pchorde
ndoffに変数pe0の値を代入し、次にステップ1
808でノートオフ動作処理を実行した後、ステップ1
809に移行する。そうでない場合には判定はNOとな
り、そのステップ1809に移行する。In step 1806, it is determined whether or not the unit tone data specified by the value of the variable pe0 indicates a tone silence (note-off event). If the unit tone data represents a note-off event, the determination is YES, and in step 1807, the variable pchorde is set.
Substitute the value of the variable pe0 for ndoff, then step 1
After executing the note-off operation processing in 808, step 1
The process moves to 809. Otherwise, the determination is no and the process moves to step 1809.
【0133】ステップ1809では、変数pe0に次の
単位楽音データのアドレスを代入する。それを行った
後、上記ステップ1802に戻る。このように、ステッ
プ1802〜1809で形成される処理ループをステッ
プ1802の判定がYES、或いはステップ1805の
判定がNOとなるまで繰り返し実行することにより、変
数pchordendoffには、和音を構成するとみ
なす楽音のなかで最後に消音する楽音の単位楽音データ
のアドレス値が代入されることになる。At step 1809, the address of the next unit tone data is substituted for the variable pe0. After that, the process returns to step 1802. In this way, by repeatedly executing the processing loop formed in steps 1802 to 1809 until the determination in step 1802 is YES or the determination in step 1805 is NO, the variable pchordendoff contains a musical tone that is considered to constitute a chord. The address value of the unit tone data of the tone to be silenced last is substituted.
【0134】一方、ステップ1802の判定がYES、
或いはステップ1805の判定がNOとなって移行する
ステップ1810では、手パートがz軸上を移動してい
く動作(ここでは図4に示す位置ZPOS2から位置Z
POS1に移動していく動作である)内容を指定するパ
ート動作データを作成する。その動作データの作成は、
変数tktimeの値が示すタイミングで移動を開始
し、所定の速度で位置ZPOS1に達するように行う。
そのようにしてパート動作データを生成し単位動作デー
タAに追加した後、一連の処理を終了する。On the other hand, if the determination in step 1802 is YES,
Alternatively, in step 1810 to which the determination in step 1805 is NO and the process proceeds, the hand part moves on the z-axis (here, from position ZPOS2 to position Z shown in FIG. 4).
This is an operation of moving to POS1). Part operation data for specifying contents is created. The creation of the operation data
The movement is started at the timing indicated by the value of the variable tktime, and the movement is performed so as to reach the position ZPOS1 at a predetermined speed.
After the part operation data is generated and added to the unit operation data A in this manner, a series of processing is terminated.
【0135】和音の消音動作内容として、手パートをz
軸上における移動内容を指定するパート動作データは上
述したようにして生成される。それにより、図6に示す
例では、親指パートが「D#」の音高が割り当てられた
鍵の離鍵開始に合わせて、手パートのz軸上の移動が開
始している。As the contents of the chord silencing operation, the hand part
The part operation data for specifying the movement content on the axis is generated as described above. Thus, in the example shown in FIG. 6, the hand part starts moving on the z-axis in accordance with the start of key release of the key to which the pitch of the thumb part “D #” is assigned.
【0136】次に、上記ステップ1808、或いは図1
6に示すノートオフメイン処理内でステップ1605と
して実行されるノートオフ動作処理処理について、図1
9に示すその動作フローチャートを参照して詳細に説明
する。なお、この処理内では、単位楽音データに付加さ
れた指番号データは変数figに、その単位楽音データ
中の音高データは変数noteに代入されている。Next, step 1808 or FIG.
6 shows the note-off operation processing executed as step 1605 in the note-off main processing shown in FIG.
This will be described in detail with reference to the operation flowchart shown in FIG. In this process, the finger number data added to the unit tone data is assigned to a variable fig, and the pitch data in the unit tone data is assigned to a variable note.
【0137】先ず、ステップ1901では、初期設定を
行う。その初期設定では、変数peの値で指定される単
位楽音データ以降で、変数figの値が指番号データと
して付加されているノートオンイベントを表す単位楽音
データ中の音高データを抽出し、その抽出した音高デー
タを変数nextnoteに代入することなどが行われ
る。First, in step 1901, initialization is performed. In the initial setting, after the unit tone data specified by the value of the variable pe, the pitch data in the unit tone data representing the note-on event to which the value of the variable fig is added as the finger number data is extracted. Substitution of the extracted pitch data into the variable nextnote is performed.
【0138】ステップ1901に続くステップ1902
では、変数figの値が指定する指パートが押鍵に使用
中か否か判定する。変数noteの値で指定される楽音
を実際には発音させないような場合、即ちその楽音の発
音開始を指示する単位楽音データが存在していない、或
いはその単位楽音データが存在していても、それに変数
figの値が指番号データとして付加されていないよう
な場合、判定はNOとなり、ここで一連の処理を終了す
る。そうでない場合には、判定はYESとなってステッ
プ1903に移行する。Step 1902 following step 1901
Then, it is determined whether or not the finger part specified by the value of the variable FIG is being used for key depression. In the case where the tone specified by the value of the variable "note" is not actually emitted, that is, even if the unit tone data for instructing the start of the tone does not exist or the unit tone data exists, If the value of the variable FIG is not added as the finger number data, the determination is NO, and a series of processing ends. Otherwise, the determination is yes and the process moves to step 1903.
【0139】ステップ1903では、変数noteの値
が変数nextnoteの値と等しいか否か判定する。
それらの値が等しくない場合、即ちユーザがそれまで押
鍵していた鍵とは異なる鍵を同じ指で押鍵しなければな
らない場合、判定はNOとなってステップ1904に移
行し、変数figの値で指定される指パートが、変数t
ktimeの値で指定されるタイミングで離鍵動作を開
始させるパート動作データを生成した後、一連の処理を
終了する。その動作データは、離鍵動作を開始させる指
パートと隣の指パートとの間を広げさせていれば、その
間を狭くさせて弛緩状態に戻す動作も行わせるものであ
る。反対に、そうでない場合には、判定はYESとなっ
てステップ1905に移行し、変数figの値で指定さ
れる指パートが、変数tktimeの値で指定されるタ
イミングで単に離鍵動作を開始させるパート動作データ
を生成した後、一連の処理を終了する。その動作データ
では、離鍵動作を開始させる指パートと隣の指パートと
の間を広げさせていても、その間を狭くさせることは行
わせない。At step 1903, it is determined whether or not the value of the variable note is equal to the value of the variable nextnote.
If the values are not equal, that is, if the user must press a key different from the key previously pressed with the same finger, the determination is NO and the process proceeds to step 1904, where the variable fig The finger part specified by the value is the variable t
After generating the part operation data for starting the key release operation at the timing specified by the value of ktime, a series of processing is ended. If the movement data is expanded between the finger part for starting the key release operation and the next finger part, the operation for narrowing the space and returning to the relaxed state is also performed. On the other hand, otherwise, the determination is YES and the process moves to step 1905, where the finger part specified by the value of the variable fig simply starts the key release operation at the timing specified by the value of the variable tktime. After the part operation data is generated, a series of processing ends. In the operation data, even if the space between the finger part for starting the key release operation and the adjacent finger part is widened, the space between the finger parts is not narrowed.
【0140】このように、本実施の形態では、指パート
の離鍵後の状態は、それを次の押鍵に使用するか否かを
考慮して決定している。それにより、次の押鍵に使わな
い指パートをいつまでも広げた状態にしておくようなこ
とは回避させている。このため、指パートを離鍵開始時
から次の押鍵終了時まで単に動かすようなことは無くな
る。その結果、より自然な形で演奏動作を表現できるだ
けでなく、押鍵イベント、或いは離鍵イベントを発生さ
せる指パートの動作や、その動作に伴う他の指パートの
動作をより目立たせることができる。As described above, in the present embodiment, the state of the finger part after the key release is determined in consideration of whether or not to use it for the next key press. Thereby, it is avoided that the finger part not used for the next key press is kept in an extended state forever. Therefore, the finger part is not simply moved from the start of key release to the end of the next key press. As a result, not only can the performance action be expressed in a more natural form, but also the action of a finger part that generates a key press event or a key release event, and the action of other finger parts accompanying the action can be made more conspicuous. .
【0141】図16に示すノートオフメイン処理では、
上述した各種サブルーチン処理が実行される。それによ
り、指パートを離鍵させる動作を表現するためのパート
動作データをサブルーチン処理単位で生成し単位動作デ
ータAに追加している。それらの動作データでは、変数
hy、hz、配列変数hrx1〜3、及びfrzのうち
の何れかが値の変更対象である。In the note-off main processing shown in FIG.
The various subroutine processes described above are executed. As a result, part operation data for expressing an operation of releasing a finger part is generated in subroutine processing units and added to the unit operation data A. In the operation data, any one of the variables hy and hz, the array variables hrx1 to 3 and frz is a target whose value is to be changed.
【0142】図20は、図9に示す動作制御データ生成
処理内でステップ911として実行される手のx位置処
理の動作フローチャートである。次に、図20を参照し
て、手のx位置処理について詳細に説明する。FIG. 20 is an operation flowchart of the x position processing of the hand executed as step 911 in the operation control data generation processing shown in FIG. Next, the x position processing of the hand will be described in detail with reference to FIG.
【0143】先ず、ステップ2001では、指パートが
押鍵している、或いは押鍵する鍵、その配置、各指パー
トの長さ、などを基に、横方向に動かした際の各指パー
トの回転角frzのなかの最大角(の絶対値)が最小と
なる手パートの基点301(手首)を軸としたz軸の周
りの回転角hrzを求める。指を横に動かせる範囲は、
指毎に若干、異なる。このことから、その回転角hrz
は、指毎の横に動かせる範囲を考慮しつつ決定してい
る。それにより、各指パートが実際の指が横に動く範囲
を越えて横に動くのを回避させている。First, in step 2001, based on the key that the finger part is pressing or the key to be pressed, its arrangement, the length of each finger part, etc., each finger part is moved horizontally. The rotation angle hrz about the z-axis about the base point 301 (wrist) of the hand part where the maximum angle (absolute value) of the rotation angle frz is minimum is determined. The range where you can move your finger sideways is
Slightly different for each finger. From this, the rotation angle hrz
Is determined in consideration of the range in which each finger can be moved sideways. This prevents each finger part from moving laterally beyond the range in which the actual finger moves laterally.
【0144】ステップ2001を実行することにより、
手パート、及び各指パートのxy平面上での配置が確定
する。このことから、ステップ2001に続くステップ
2002では、各指パートが押鍵している、或いは押鍵
する鍵、その鍵の配置、各指パートの長さ、その回転角
frz、手パートの回転角hrz、及び手パートの長さ
La(図3参照)などを基に、手パートの基点301の
x軸上の位置hxを求める。その後はステップ2003
に移行する。By executing step 2001,
The arrangement of the hand part and each finger part on the xy plane is determined. From this, in step 2002 following step 2001, the key that each finger part is pressing or pressing, the key arrangement, the length of each finger part, the rotation angle frz, the rotation angle of the hand part The position hx on the x-axis of the base point 301 of the hand part is determined based on the hrz, the length La of the hand part (see FIG. 3), and the like. After that, step 2003
Move to
【0145】ステップ2003では、変数tkoldの
値で指定されるタイミングから変数tktimeの値で
指定されるタイミングまでに、手パートの基点301を
ステップ2002で求めた位置hxまで移動させたり、
ステップ2001で求めた回転角hrzにさせるパート
動作データをそれぞれ必要に応じて生成し単位動作デー
タAに追加する。位置hx、及び回転角hrzを共に変
化させる必要がなければ、それらのパート動作データは
作成しない。In step 2003, the base point 301 of the hand part is moved to the position hx determined in step 2002 from the timing specified by the value of the variable tkold to the timing specified by the value of the variable tktime.
Part operation data to be set to the rotation angle hrz determined in step 2001 is generated as necessary and added to the unit operation data A. If it is not necessary to change both the position hx and the rotation angle hrz, the part operation data is not created.
【0146】各指パートのxy平面上での配置が確定す
ることで、各指パートの回転角frzが確定し、押鍵さ
せている、或いは押鍵させる指パートは伸ばしたままで
良いのか、それとも第2関節、及び段3関節(第3関節
は第2関節での曲がりに応じて曲げる必要がある)で曲
げなければならないのか、といったことも確定する。押
鍵させる指パートを第2関節で曲げることになれば、そ
れを伸ばして押鍵させる場合と比較して、第1関節で曲
げる角度は小さくさせなければならない。このようなこ
とから、上記ステップ2003では、手パートの基点3
01の回転角をhrzとし、それを位置hxに移動させ
ることによって状態を変化させるべき指パートがあれ
ば、必要に応じて、指パートの状態を変化させるための
パート動作データを新たに作成したり、既に作成したパ
ート動作データを修正することも合わせて行っている。
それにより、他の指パートをくぐらせたり、或いはまた
いでの押鍵動作や、指パートの横の動作に応じて他の指
パートを横に動作させるといった動画表現を実現させて
いる。そのようなことを行うステップ2003の処理を
実行した後に一連の処理を終了する。When the arrangement of each finger part on the xy plane is determined, the rotation angle frz of each finger part is determined, and whether the key is depressed or the finger part to be depressed may be kept extended, or It is also determined whether the second joint and the third step joint (the third joint needs to be bent according to the bending at the second joint). When the finger part to be pressed is bent at the second joint, the angle at which the finger is bent at the first joint must be smaller than when the key part is extended and pressed. Therefore, in step 2003, the base point 3 of the hand part is set.
If there is a finger part whose state is to be changed by moving the rotation angle of 01 to hrz and moving it to the position hx, part operation data for changing the state of the finger part is newly created as necessary. In addition, they also modify already created part operation data.
Thereby, a moving image expression is realized in which another finger part is passed through, or a key is pressed across, or another finger part is moved horizontally in response to a lateral movement of the finger part. After performing the processing of step 2003 for performing such a thing, a series of processing ends.
【0147】上記手のx位置処理を実行すると、変数p
eの値で指定される単位楽音データが表すイベントの発
生時、或いはそのイベント後の手指の各パートの状態を
指定する各種変数、及び各種配列変数のなかで、変数h
yの除く全てのものの値が確定することになる。その変
数hyの値は、この手のx値処理の次にステップ912
として実行される手のy位置再処理によって確定され
る。When the x position processing of the hand is executed, the variable p
When the event represented by the unit tone data specified by the value of e occurs, or among various variables that specify the state of each part of the finger after the event, and among various array variables, the variable h
The values of everything except y will be determined. The value of the variable hy is set at step 912 after this kind of x value processing.
Is determined by the hand y-position reprocessing executed as
【0148】図21は、シーケンス処理の動作フローチ
ャートである。このシーケンス処理は、例えばユーザが
操作部106を操作して、予め指定(選択)した楽音・
運指データの再生を指示した場合に、CPU101が、
ROM102に格納されているプログラムを実行するこ
とで実現される処理である。図8に示すリアルタイム処
理部802はそのシーケンス処理を実行することによっ
て実現される。FIG. 21 is an operation flowchart of the sequence processing. This sequence processing is performed, for example, by operating the operation unit 106 by the user to select (select) a musical tone
When instructing reproduction of fingering data, the CPU 101
This processing is realized by executing a program stored in the ROM 102. The real-time processing unit 802 shown in FIG. 8 is realized by executing the sequence processing.
【0149】図5(b)に示す動作制御データBは、楽
音・運指データとは別の領域に格納されている。動作制
御データBを構成する段階動作データは、当然のことな
がら、楽音・運指データを構成する単位楽音データの数
よりも多く、その処理タイミングは、通常、単位楽音デ
ータの処理タイミングと一致しない。このようなことか
ら、動作制御データB、及び楽音・運指データは、それ
ぞれ、並行に処理している。The operation control data B shown in FIG. 5B is stored in an area different from the tone / fingering data. Naturally, the step operation data constituting the operation control data B is larger than the number of unit musical sound data constituting the musical sound / fingering data, and the processing timing thereof usually does not coincide with the processing timing of the unit musical sound data. . For this reason, the motion control data B and the musical sound / fingering data are processed in parallel.
【0150】先ず、ステップ2101では、変数tkt
imeE、tktimeM、及びclockにそれぞれ
0を代入したり、変数pe、及びpmにそれぞれ初期値
を代入するといった各種変数への値の代入や、特には図
示しないハードタイマが所定時間間隔で出力する割り込
み信号を有効にして、タイマインタラプト処理の実行禁
止を解除するといった初期設定を行う。その実行禁止を
解除することによって、変数clockの値は、タイマ
インタラプト処理が実行される度にインクリメントされ
る。First, in step 2101, the variable tkt
Substitution of values into various variables, such as substituting 0 for each of imageE, tktimeM, and clock, and substituting initial values for variables pe and pm, and interrupts output by a hard timer (not shown) at predetermined time intervals. Initialization is performed such that the signal is enabled and the prohibition of execution of the timer interrupt processing is released. By releasing the execution prohibition, the value of the variable clock is incremented each time the timer interrupt processing is executed.
【0151】ステップ2101に続くステップ2102
では、変数clockの値やテンポデータの値を用いた
演算を行って、変数clockの値を楽音・運指データ
中の時間データの単位で示す値を算出し、その算出結果
を変数tktimeに代入する。その後はステップ21
03に移行する。Step 2102 following step 2101
Then, an operation using the value of the variable clock and the value of the tempo data is performed to calculate a value indicating the value of the variable clock in the unit of time data in the musical sound / fingering data, and the calculation result is substituted into the variable tktime. I do. Then step 21
Shift to 03.
【0152】ステップ2103〜2109では、楽音・
運指データの再生に係わる処理が実行される。先ず、ス
テップ2103では、楽音・運指データが終了したか否
か判定する。変数peの値が指定するデータが楽音・運
指データの最後に位置するエンドデータであった場合、
判定はYESとなってステップ2110に移行し、そう
でない場合には、判定はNOとなってステップ2104
に移行する。In steps 2103 to 2109, the musical tone
Processing related to reproduction of fingering data is executed. First, in step 2103, it is determined whether or not the musical sound / fingering data has been completed. If the data specified by the value of the variable pe is the end data located at the end of the musical sound / fingering data,
The determination is YES and the process moves to step 2110; otherwise, the determination is NO and step 2104
Move to
【0153】ステップ2104では、変数peの値で指
定される単位楽音データ中の時間データの値を変数tk
timeEの値に加算した値が、変数tktimeの値
以上か否か判定する。変数tktimeEには、それま
でに処理した単位楽音データ中の時間データの値を累算
した値、即ち直前に処理した単位楽音データの処理タイ
ミングを絶対時間で示す値が代入されている。このた
め、変数peの値で指定される単位楽音データを処理す
べきタイミングとなった場合、判定はYESとなってス
テップ2105に移行する。そうでない場合には、判定
はNOとなってステップ2110に移行する。At step 2104, the value of the time data in the unit tone data specified by the value of the variable pe is set to the variable tk
It is determined whether the value added to the value of timeE is equal to or greater than the value of the variable tktime. To the variable tktimeE, a value obtained by accumulating the value of the time data in the unit tone data processed up to that time, that is, a value indicating the processing timing of the unit tone data processed immediately before in absolute time is substituted. Therefore, when it is time to process the unit tone data specified by the value of the variable pe, the determination is YES and the process moves to step 2105. Otherwise, the determination is no and the process moves to step 2110.
【0154】ステップ2105では、変数tktime
Eに、それまでの値に変数peの値が指定する単位楽音
データ中の時間データの値を加算した値を代入する。そ
れにより、次の単位時間データを処理すべきタイミング
を示す値を変数tktimeEに代入した後は、処理タ
イミングとなった単位楽音データをそれが表すイベント
の種類に応じて処理を行い、その処理による演奏の進行
に応じて、表示ページの切り換え、新たに発音させた楽
音に対応する音符の表示色の変更などを行い、更に変数
peに、それまでのアドレス値から1イベント分だけ進
めたアドレス値を代入した(以上、ステップ2106〜
2109)後、ステップ2110に移行する。なお、単
位楽音データの処理は、CPU101が、そのデータか
ら音源107に送出すべきコマンドを生成して送出する
ことで行われる。In step 2105, the variable tktime
A value obtained by adding the value of the time data in the unit musical sound data designated by the value of the variable pe to the previous value is substituted for E. Thereby, after substituting the value indicating the timing to process the next unit time data into the variable tktimeE, the unit musical tone data at the processing timing is processed according to the type of the event represented by the processing, and the processing In accordance with the progress of the performance, the display page is changed, the display color of the note corresponding to the newly generated musical tone is changed, and the address pe advanced by one event from the previous address value to the variable pe. (Steps 2106 to 2106 above)
2109) After that, the flow shifts to step 2110. The processing of the unit musical sound data is performed by the CPU 101 generating a command to be transmitted to the sound source 107 from the data and transmitting the generated command.
【0155】ステップ2110〜2115では、動作制
御データBに従って手指の各パートを動作させるための
処理が行われる。先ず、ステップ2110では、動作制
御データBが終了したか否か判定する。変数pmの値が
指定する段階動作データが動作制御データB中に存在し
ていない場合、判定はYESとなってステップ2115
に移行し、そうでない場合には、判定はNOとなってス
テップ2111に移行する。At steps 2110 to 2115, processing for operating each part of the finger is performed according to the operation control data B. First, in step 2110, it is determined whether or not the operation control data B has been completed. If the step operation data specified by the value of the variable pm does not exist in the operation control data B, the determination is YES and the step 2115 is executed.
Otherwise, the determination is no and the process moves to step 2111.
【0156】ステップ2111では、変数pmの値で指
定される段階動作データ中の時間データの値を変数tk
timeMの値に加算した値が、変数tktimeの値
以上か否か判定する。変数tktimeMには、上記変
数tktimeEと同様に、それまでに処理した段階動
作データ中の時間データの値を累算した値、即ち直前に
処理した段階動作データの処理タイミングを絶対時間で
示す値が代入されている。このため、変数pmの値で指
定される段階動作データを処理すべきタイミングとなっ
た場合、判定はYESとなってステップ2112に移行
する。そうでない場合には、判定はNOとなって上記ス
テップ2102に戻る。In step 2111, the value of the time data in the step operation data specified by the value of the variable pm is
It is determined whether the value added to the value of timeM is equal to or greater than the value of the variable tktime. Similarly to the variable tktimeE, the variable tktimeM contains a value obtained by accumulating the value of time data in the step operation data processed up to that time, that is, a value indicating the processing timing of the step operation data processed immediately before in absolute time. Has been assigned. Therefore, when it is time to process the step operation data specified by the value of the variable pm, the determination is YES and the process proceeds to step 2112. Otherwise, the determination is no and the process returns to step 2102.
【0157】ステップ2112では、変数tktime
Mに、それまでの値に変数pmの値が指定する段階動作
データ中の時間データの値を加算した値を代入する。そ
れにより、次の段階動作データを処理すべきタイミング
を示す値を変数tktimeMに代入すると、ステップ
2113に移行して、処理タイミングとなった段階動作
データに従って、手指の各パートのなかで状態を変化さ
せるべきパートの状態を変化させて演奏動作を示す表示
内容を更新する演奏動作表示更新処理を実行する。その
実行後は、ステップ2114で変数pmに、それまでの
アドレス値から1イベント分だけ進めたアドレス値を代
入した後、上記ステップ2102に戻る。なお、表示内
容の更新は、例えばCPU101が、表示部105のメ
モリに格納された画像データ中でデータを書き換えるべ
き部分の画像データをROM102から読み出すか、或
いはそれを用いて生成し、そのようにして得た画像デー
タを、そのメモリ中の画像データを書き換えるべき部分
に上書きすることで行われる。At step 2112, the variable tktime
The value obtained by adding the value of the time data in the step operation data specified by the value of the variable pm to the previous value is substituted for M. Accordingly, when the value indicating the timing at which the next step operation data is to be processed is substituted for the variable tktimeM, the flow shifts to step 2113 to change the state in each part of the finger according to the step operation data at the processing timing. A performance operation display update process is performed to update the display contents indicating the performance operation by changing the state of the part to be performed. After the execution, in step 2114, an address value advanced by one event from the previous address value is substituted for the variable pm, and the process returns to step 2102. The display content is updated, for example, by the CPU 101 reading out from the ROM 102 image data of a portion of the image data stored in the memory of the display unit 105 whose data is to be rewritten, or generating the image data by using the image data. This is performed by overwriting the image data obtained as described above on the portion of the memory where the image data is to be rewritten.
【0158】一方、上記ステップ2110の判定がYE
Sとなって移行するステップ2115では、楽音・運指
データが終了したか否か判定する。変数peの値が指定
するデータが楽音・運指データの最後に位置するエンド
データであった場合、判定はYESとなって一連の処理
を終了し、そうでない場合には、判定はNOとなって上
記ステップ2102に戻る。On the other hand, the determination in step 2110 is YE
In step 2115 to which the process proceeds as S, it is determined whether or not the musical sound / fingering data has been completed. If the data specified by the value of the variable pe is the end data located at the end of the musical sound / fingering data, the determination is YES and the series of processes is terminated; otherwise, the determination is NO. Then, the process returns to step 2102.
【0159】上述したシーケンス処理を実行することに
より、図7に示すような画像が表示部105に表示さ
れ、それに表示された手指の各パートが図6に示すよう
に動作することになる。By executing the above-described sequence processing, an image as shown in FIG. 7 is displayed on the display unit 105, and each part of the finger displayed thereon operates as shown in FIG.
【0160】なお、本実施の形態では、図6に示すよう
に、手パートは単位楽音データの処理タイミングで動作
を開始させることを基本としているが、必ずしもそうし
なくて良い。演奏中の動作としては、例えば横動作は押
鍵動作の開始前に完了するといった特徴がある(関口、
英保:仮想空間におけるピアノ演奏動作の生成と表示、
情報処理学会研究報告 Vol99、No.16(19
99))。このことから、例えば押鍵では、例えば手パ
ートや指パートの移動が完了した後に指パートを関節で
曲げての押鍵動作を開始するといったように、複数のフ
ェーズに分けて手指の各パートを動作させるようにして
も良い。In this embodiment, as shown in FIG. 6, the hand part is basically started to operate at the processing timing of the unit musical sound data, but this is not always necessary. As an operation during the performance, for example, there is a feature that the horizontal operation is completed before the start of the key pressing operation (Sekiguchi,
Eiho: Generation and display of piano performance in virtual space,
Information Processing Society of Japan, Vol 99, No. 16 (19
99)). For this reason, in key pressing, for example, after the movement of the hand part or the finger part is completed, each part of the finger is divided into a plurality of phases, such as starting the key pressing operation by bending the finger part with a joint. You may make it operate.
【0161】手パートの基点301がとれるz軸上の位
置は、位置ZPOS1、或いはZPOS2の2通りだけ
にしているが、その位置を3通り以上、或いは任意に設
定できるようにしても良い。そのようにした場合、指が
他の指をくぐる動作やまたぐ動作をより適切に表現でき
るようになる。The position on the z-axis at which the base point 301 of the hand part can be taken is only the position ZPOS1 or ZPOS2, but the position may be set to three or more positions or arbitrarily. In such a case, the movement of a finger passing through or straddling another finger can be more appropriately expressed.
【0162】また、本実施の形態では、演奏操作子群と
して鍵盤を想定し、その鍵盤に対する演奏動作を表示し
ているが、鍵盤以外の演奏操作子群に対する演奏動作を
表示するようにしても良い。Further, in this embodiment, a keyboard is assumed as a performance operator group, and the performance operation for the keyboard is displayed. However, the performance operation for a performance operator group other than the keyboard may be displayed. good.
【0163】本実施の形態は音源107や表示部105
を搭載した装置に本発明を適用したものであるが、本発
明を適用できる装置はそれらを搭載したものに限定され
るわけではない。音源107は無くても良く、表示部1
05についても、外部の表示装置と接続できるのであれ
ば、無くても良い。In the present embodiment, the sound source 107 and the display unit 105
Although the present invention is applied to a device equipped with, devices to which the present invention can be applied are not limited to those equipped with them. The sound source 107 may be omitted, and the display unit 1
05 may be omitted as long as it can be connected to an external display device.
【0164】上記演奏動作表示装置の動作を実現させる
ようなプログラムは、CD−ROM、フロッピー(登録
商標)ディスク、或いは光磁気ディスク等の記録媒体に
記録させて配布しても良い。或いは、公衆網等の通信回
線を用いて、そのプログラムの一部、若しくは全部を配
信するようにしても良い。そのようにした場合には、ユ
ーザはプログラムを取得して任意の演奏動作表示装置、
或いはコンピュータ等のデータ処理装置にロードするこ
とにより、その装置に本発明を適用させることができ
る。このことから、記録媒体は、プログラムを配信する
装置がアクセスできるものであっても良い。A program for realizing the operation of the performance operation display device may be recorded on a recording medium such as a CD-ROM, a floppy (registered trademark) disk, or a magneto-optical disk and distributed. Alternatively, part or all of the program may be distributed using a communication line such as a public network. In such a case, the user obtains the program and selects any performance operation display device,
Alternatively, the present invention can be applied to a data processing device such as a computer by loading the data into the device. For this reason, the recording medium may be one that can be accessed by an apparatus that distributes the program.
【0165】[0165]
【発明の効果】以上、説明したように本発明は、手指を
複数のパート(オブジェクト)に分け、楽音・運指デー
タを基に、演奏操作子群上で生じるイベント単位で、イ
ベントを生じさせた後の手指の状態を各パート毎に求
め、該求めた状態にパート単位で順次、移行させること
により、手指による演奏動作を動画表示する。このた
め、ユーザに演奏中における手指の動作を容易に理解さ
せることができる。また、手指の演奏動作表示開始のタ
イミングは、実際に直前の手指の位置から当該手指の位
置まで移行するに要する動作時間に基づいて決定するよ
うにしているため、手指の演奏動作表示は、より実際に
近いものとなり、ユーザーに演奏中の手指の動作をより
容易に理解させることができる。As described above, according to the present invention, a finger is divided into a plurality of parts (objects), and events are generated in units of events generated on a performance operator group based on musical sound / fingering data. After that, the state of the finger is obtained for each part, and the state is sequentially shifted to the obtained state for each part, so that the performance operation by the finger is displayed as a moving image. For this reason, the user can easily understand the finger movement during the performance. Further, since the timing of the start of the display of the performance of the finger is determined based on the operation time required to actually shift from the position of the immediately preceding finger to the position of the finger, the display of the performance of the finger is more likely to be displayed. This is close to the actual situation, and allows the user to more easily understand the movement of the finger during the performance.
【図1】本実施の形態による演奏動作表示装置の回路構
成図である。FIG. 1 is a circuit configuration diagram of a performance operation display device according to an embodiment.
【図2】楽音・運指データの構成を説明する図である。FIG. 2 is a diagram illustrating a configuration of musical sound / fingering data.
【図3】表示用の手指の構造を説明する図である。FIG. 3 is a diagram illustrating the structure of a finger for display.
【図4】手の移動範囲を説明する図である。FIG. 4 is a diagram illustrating a hand movement range.
【図5】動作制御データの構成を説明する図である。FIG. 5 is a diagram illustrating a configuration of operation control data.
【図6】手指の動作表示例を説明する図である。FIG. 6 is a diagram illustrating an example of a finger motion display.
【図7】実際の表示例を示す図である。FIG. 7 is a diagram showing an actual display example.
【図8】本実施の形態による演奏動作表示装置の機能ブ
ロック図である。FIG. 8 is a functional block diagram of the performance operation display device according to the present embodiment.
【図9】動作制御データ生成処理の動作フローチャート
である。FIG. 9 is an operation flowchart of an operation control data generation process.
【図10】手のy位置処理処理の動作フローチャートで
ある。FIG. 10 is an operation flowchart of a hand y position processing process.
【図11】手のz位置処理の動作フローチャートであ
る。FIG. 11 is an operation flowchart of a hand z-position process.
【図12】ノートオンメイン処理の動作フローチャート
である。FIG. 12 is an operation flowchart of a note-on main process.
【図13】和音判定処理の動作フローチャートである。FIG. 13 is an operation flowchart of a chord determination process.
【図14】和音動作処理の動作フローチャートである。FIG. 14 is an operation flowchart of a chord operation process.
【図15】ノートオン動作処理の動作フローチャートで
ある。FIG. 15 is an operation flowchart of a note-on operation process.
【図16】ノートオフメイン処理の動作フローチャート
である。FIG. 16 is an operation flowchart of a note-off main process.
【図17】和音オフ判定処理の動作フローチャートであ
る。FIG. 17 is an operation flowchart of chord off determination processing.
【図18】和音オフ動作処理の動作フローチャートであ
る。FIG. 18 is an operation flowchart of a chord off operation process.
【図19】ノートオフ動作処理の動作フローチャートで
ある。FIG. 19 is an operation flowchart of a note-off operation process.
【図20】手のx位置処理の動作フローチャートであ
る。FIG. 20 is an operation flowchart of a hand x-position process.
【図21】シーケンス処理の動作フローチャートであ
る。FIG. 21 is an operation flowchart of a sequence process.
101 CPU 102 ROM 103 RAM 104 データ入力部 105 表示部 106 操作部 107 音源 108 サウンドシステム 300 鍵盤 301〜306 基点 801 データ生成部 802 リアルタイム処理部 803 動作制御データ生成部 804 データ送出部 805 動作表示部 806 音源部 807 楽譜表示部 101 CPU 102 ROM 103 RAM 104 Data input unit 105 Display unit 106 Operation unit 107 Sound source 108 Sound system 300 Keyboard 301 to 306 Base point 801 Data generation unit 802 Real-time processing unit 803 Operation control data generation unit 804 Data transmission unit 805 Operation display unit 806 Sound source section 807 Music display section
Claims (5)
し、演奏の進行に応じて演奏者が操作していく際の動作
を表示する装置であって、 前記演奏操作子群上で発生させるべきイベントの内容を
表すイベントデータ、該イベントの発生タイミングを示
す時間データ、及び該イベントの発生に使用すべき指を
指定する指データを少なくとも有するデータ群を単位楽
音・運指データとして構成されている楽音・運指データ
を取得する楽音・運指データ取得手段と、 前記楽音・運指データ取得手段にて取得された楽音・運
指データに基づいて、少なくとも演奏操作子群上の手指
の位置を表わす動作制御データを生成する動作制御デー
タ生成手段と、 前記動作制御データ生成手段により生成された動作制御
データにて表わされる当該手指の位置に移行を開始すべ
き動作タイミングを、直前の手指の位置から当該手指の
位置まで移行するに要する動作時間に基づいて決定する
動作タイミング決定手段と、 前記動作制御データ生成手段からの動作制御データ及び
動作タイミング決定手段からの動作タイミングに基づい
て、前記演奏操作子群を操作していく手指の動作を動画
表示する動作表示手段と、 を含むことを特徴とする演奏動作表示装置。1. An apparatus for displaying an operation performed by a player in accordance with the progress of a performance with respect to a group of performance operators to be subjected to a performance operation. A data group including at least event data representing the content of the event to be caused, time data indicating the occurrence timing of the event, and finger data specifying a finger to be used for the occurrence of the event is configured as unit musical sound / fingering data. Music / fingering data acquisition means for acquiring the music / fingering data that is obtained, based on the music / fingering data acquired by the music / fingering data acquiring means, Motion control data generating means for generating motion control data representing a position, and shifting to the position of the finger represented by the motion control data generated by the motion control data generating means Operation timing determining means for determining the operation timing at which the operation is to be started based on the operation time required for shifting from the position of the immediately preceding finger to the position of the finger, and operation control data and operation timing from the operation control data generation means A performance operation display device, comprising: motion display means for displaying a moving image of a finger operating the performance operator group based on the operation timing from the determination means.
タイミングは、前記演奏操作子群中の演奏操作子を操作
開始すべきタイミングであり、前記動作時間は、前記演
奏操作子の操作を解除するに要する時間と前記演奏操作
子の操作を終了するに要する時間であることを特徴とす
る演奏動作表示装置。2. The operation timing at which the shift to the finger position is to be started is the timing at which operation of a performance operator in the performance operator group is to be started, and the operation time is determined by operating the performance operator. A performance operation display device comprising: a time required to cancel the operation and a time required to end the operation of the performance operator.
て、いずれかの前記演奏操作子の操作を解除した後別の
前記演奏操作子が操作を終了するまでに要する実動作時
間が、前記動作時間より大きいか否か判別する判別手段
と、 前記判別手段により大きいと判別された場合は、前記演
奏操作子が操作を終了したタイミングから前記演奏操作
子の操作を解除するに要する時間を減算したタイミング
を、前記判別手段により小さいと判別された場合は、前
記演奏操作子が操作解除を終了するタイミングに前記演
奏操作子の操作を解除するに要する時間を加算したタイ
ミングを、前記手指の位置に移行を開始すべき動作タイ
ミングとする制御手段と、 を含むことを特徴とする請求項2記載の演奏動作表示装
置。3. The operation timing determining means, based on time data included in the musical tone / fingering data, cancels the operation of any one of the performance operators and terminates the operation of another performance operator. Determining whether the actual operation time required to perform the operation is longer than the operation time; and determining that the actual operation time is longer than the operation time. If it is determined that the timing obtained by subtracting the time required to release the operation is smaller than the time determined by the determination means, the time required to release the operation of the performance operator at the timing when the performance operator ends the operation release 3. A performance operation table according to claim 2, further comprising: a control unit that sets a timing obtained by adding the operation timing to an operation timing to start shifting to the finger position. Indicating device.
さいと判別された場合でかつ前記演奏操作子の操作を解
除するに要する時間が前記実時間と比較して所定割合以
上大きい場合には、前記演奏操作子が操作解除を終了す
るタイミングに加算する前記演奏操作子の操作を解除す
るに要する時間を圧縮することを特徴とする請求項3記
載の演奏動作表示装置。4. The control means, when the determination means determines that the operation is smaller, and when the time required to release the operation of the performance operation element is larger than the actual time by a predetermined ratio or more, 4. The performance operation display device according to claim 3, wherein a time required for releasing the operation of the performance operator, which is added to a timing at which the performance operator ends the operation release, is compressed.
発生させるべきイベントの内容を表すイベントデータ、
該イベントの発生タイミングを示す時間データ、及び該
イベントの発生に使用すべき指を指定する指データを少
なくとも有するデータ群を単位楽音・運指データとして
構成されている楽音・運指データを取得する楽音・運指
データ取得手段と、 前記楽音・運指データ取得手段にて取得された楽音・運
指データに基づいて、少なくとも演奏操作子群上の手指
の位置表わす動作制御データを生成する動作制御データ
生成手段と、 前記動作制御データ生成手段により生成された動作制御
データにて表わされる当該手指の位置に移行を開始すべ
き動作タイミングを、直前の手指の位置から当該手指の
位置まで移行するに要する動作時間に基づいて決定する
動作タイミング決定手段と、 前記動作制御データ生成手段からの動作制御データ及び
動作タイミング決定手段からの動作タイミングに基づい
て、前記演奏操作子群を操作していく手指の動作を動画
表示する動作表示手段と、 を実現させるプログラムを記録した記録媒体。5. Event data representing the contents of an event to be generated on a performance operator group to be played,
Acquires musical sound / fingering data configured as a unit musical sound / fingering data with a data group having at least time data indicating the occurrence timing of the event and finger data designating a finger to be used for generating the event. Musical sound / fingering data acquiring means, and operation control for generating, based on the musical sound / fingering data acquired by the musical sound / fingering data acquiring means, operational control data representing at least the position of a finger on a performance operator group. The data generation means, and the operation timing to start shifting to the position of the finger represented by the operation control data generated by the operation control data generation means, from the position of the immediately preceding finger to the position of the finger Operation timing determining means for determining based on the required operation time; operation control data and operation type from the operation control data generating means; Based on the operation timing of the ring determining means, a recording medium recording a program for realizing the operation display means operating for the video display of the fingers continue to operate the performance operator group.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2001217442A JP3528051B2 (en) | 2001-07-18 | 2001-07-18 | Performance operation display device and recording medium |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2001217442A JP3528051B2 (en) | 2001-07-18 | 2001-07-18 | Performance operation display device and recording medium |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2000085310A Division JP3521838B2 (en) | 2000-03-24 | 2000-03-24 | Performance operation display device and recording medium |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2002099276A true JP2002099276A (en) | 2002-04-05 |
JP3528051B2 JP3528051B2 (en) | 2004-05-17 |
Family
ID=19051761
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2001217442A Expired - Fee Related JP3528051B2 (en) | 2001-07-18 | 2001-07-18 | Performance operation display device and recording medium |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP3528051B2 (en) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2013097089A (en) * | 2011-10-31 | 2013-05-20 | Casio Comput Co Ltd | Performance motion display device, method, and program |
JP2013160948A (en) * | 2012-02-06 | 2013-08-19 | Casio Comput Co Ltd | Performance operation displaying device, method and program |
CN103354088A (en) * | 2012-02-06 | 2013-10-16 | 卡西欧计算机株式会社 | Music playing movement display control device and method |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0736446A (en) * | 1993-07-20 | 1995-02-07 | Casio Comput Co Ltd | Musical performance guide device |
JPH1039739A (en) * | 1996-07-23 | 1998-02-13 | Nippon Steel Corp | Performance reproduction device |
JPH1091061A (en) * | 1996-07-16 | 1998-04-10 | Yamaha Corp | Playing instruction device and medium recorded with program |
JPH1165558A (en) * | 1997-08-21 | 1999-03-09 | Yamaha Corp | Parameter display device and music synthesizer |
JPH11126071A (en) * | 1997-10-21 | 1999-05-11 | Casio Comput Co Ltd | Playing fingering device |
-
2001
- 2001-07-18 JP JP2001217442A patent/JP3528051B2/en not_active Expired - Fee Related
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0736446A (en) * | 1993-07-20 | 1995-02-07 | Casio Comput Co Ltd | Musical performance guide device |
JPH1091061A (en) * | 1996-07-16 | 1998-04-10 | Yamaha Corp | Playing instruction device and medium recorded with program |
JPH1039739A (en) * | 1996-07-23 | 1998-02-13 | Nippon Steel Corp | Performance reproduction device |
JPH1165558A (en) * | 1997-08-21 | 1999-03-09 | Yamaha Corp | Parameter display device and music synthesizer |
JPH11126071A (en) * | 1997-10-21 | 1999-05-11 | Casio Comput Co Ltd | Playing fingering device |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2013097089A (en) * | 2011-10-31 | 2013-05-20 | Casio Comput Co Ltd | Performance motion display device, method, and program |
US8895829B2 (en) | 2011-10-31 | 2014-11-25 | Casio Computer Co., Ltd. | Music playing movement display device, method and recording medium |
JP2013160948A (en) * | 2012-02-06 | 2013-08-19 | Casio Comput Co Ltd | Performance operation displaying device, method and program |
CN103354088A (en) * | 2012-02-06 | 2013-10-16 | 卡西欧计算机株式会社 | Music playing movement display control device and method |
Also Published As
Publication number | Publication date |
---|---|
JP3528051B2 (en) | 2004-05-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP2705568B2 (en) | Automatic performance device | |
EP3462441B1 (en) | Singing voice edit assistant method and singing voice edit assistant device | |
JP6344578B2 (en) | How to play an electronic musical instrument | |
JP3968975B2 (en) | Fingering generation display method, fingering generation display device, and recording medium | |
JPH08115081A (en) | Musical score display device | |
JP3521838B2 (en) | Performance operation display device and recording medium | |
JP3528051B2 (en) | Performance operation display device and recording medium | |
JP4337288B2 (en) | Performance operation display device and program | |
JP3548825B2 (en) | Performance operation display device and recording medium | |
JPH1091061A (en) | Playing instruction device and medium recorded with program | |
JP2002099275A (en) | Playing action display device and recording medium | |
JP3972899B2 (en) | Music score display device | |
JP2003029743A (en) | Playing action display device, and recording medium | |
JP4123242B2 (en) | Performance signal processing apparatus and program | |
JP2002244657A (en) | Playing signal processor, storage medium, and method and program for playing signal processing | |
JP7107720B2 (en) | fingering display program | |
JP3267226B2 (en) | Automatic accompaniment device and medium recording automatic accompaniment control program | |
JP5277814B2 (en) | Electronic music apparatus and program | |
JP3052875B2 (en) | Sequence data editing method and sequencer | |
JP2003108119A (en) | Playing information display device and program | |
JP4162766B2 (en) | Performance information generating apparatus and automatic performance apparatus | |
JP3837994B2 (en) | Musical score data conversion apparatus and recording medium | |
JP2002366148A (en) | Device, method, and program for editing music playing data | |
JP3794303B2 (en) | Performance information editing apparatus and performance information editing program | |
JP5272599B2 (en) | Electronic music apparatus and program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20031128 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20040127 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20040209 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090305 Year of fee payment: 5 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100305 Year of fee payment: 6 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110305 Year of fee payment: 7 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110305 Year of fee payment: 7 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120305 Year of fee payment: 8 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130305 Year of fee payment: 9 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130305 Year of fee payment: 9 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140305 Year of fee payment: 10 |
|
LAPS | Cancellation because of no payment of annual fees |