JP6950180B2 - Musical tone data processing method and musical tone data processing device - Google Patents

Description

本発明は、楽音データ処理方法及び楽音データ処理装置に関するものである。 The present invention relates to a musical tone data processing method and a musical tone data processing apparatus.

従来、楽音データ（演奏データ）と楽譜上の記号位置とがあらかじめ対応付けられた演奏シーケンスデータに基づいて楽音を再生させる場合に、この楽譜を示す画像をタッチパネル付きの表示部に表示させた状態で、ユーザが任意の記号位置に対応する小節位置をタッチすることにより、このタッチされた小節位置に対応する楽音位置からの楽音を再生対象として指定できるようにした技術が知られている（特許文献１参照）。 Conventionally, when playing music based on performance sequence data in which music data (performance data) and symbol positions on the score are associated in advance, an image showing the score is displayed on a display unit with a touch panel. A technique is known in which a user can specify a musical score from a musical score position corresponding to the touched bar position as a reproduction target by touching a bar position corresponding to an arbitrary symbol position (patented). Reference 1).

特開２０１５−１８４４２０号公報Japanese Unexamined Patent Publication No. 2015-184420

しかしながら、上記従来技術において、タッチパネル付きの表示部に表示させる楽譜は、あらかじめ楽音データとの間で小節位置の対応関係が記憶されたものであり、このような対応関係が記憶されていない楽譜に基づいて再生対象となる楽音位置に対応する楽音をタッチ操作で指定することはできなかった。
本発明は、上記事情に鑑みてなされたものであり、楽音データ（音の波形）内の楽音位置（音の波形の各部の位置）と、記号データ（楽譜やコード譜などの記号の並び）が示す記号位置（記号の位置）との対応関係があらかじめ記憶されていなくても、記号データを用いて楽音データ内の対応する楽音を指定できる楽音データ処理方法及び楽音データ処理装置を提供することを目的とする。 However, in the above-mentioned conventional technique, the score to be displayed on the display unit with a touch panel is a score in which the correspondence relationship between the bar positions is stored in advance with the musical tone data, and the correspondence relationship is not stored. Based on this, it was not possible to specify the musical tone corresponding to the musical tone position to be reproduced by touch operation.
The present invention has been made in view of the above circumstances, and the musical tone position (position of each part of the musical tone waveform) in the musical tone data (sound waveform) and the symbol data (arrangement of symbols such as score and chord notation). To provide a musical tone data processing method and a musical tone data processing device capable of designating a corresponding musical tone in the musical tone data using symbol data even if the correspondence relationship with the symbol position (symbol position) indicated by is not stored in advance. With the goal.

上記目的を達成するために、本発明は、以下の構成によって把握される。
本発明の楽音データ処理方法及び楽音データ処理装置は、楽曲に係るコードの並びを示すコード譜である記号データが示す複数の記号の並びに対応するメロディ又はコード進行の配列と、楽曲に係る楽音データが示す音の波形に対応するメロディ又はコード進行の配列とを比較することにより、前記記号データにおける複数の記号それぞれの位置と前記楽音データにおける音の波形の各部の位置との対応関係を特定し、前記特定された対応関係に基づき、前記記号データを用いた処理と前記楽音データを用いた処理の実行を制御する。 In order to achieve the above object, the present invention is grasped by the following configuration.
The music sound data processing method and music sound data processing apparatus of the present invention are a chord staff indicating a sequence of chords related to a music, a plurality of symbols indicated by symbol data, an arrangement of corresponding melody or chord progressions, and music data related to the music. By comparing with the arrangement of the melody or chord progression corresponding to the sound waveform indicated by, the correspondence relationship between the position of each of the plurality of symbols in the symbol data and the position of each part of the sound waveform in the music data is specified. , The execution of the process using the symbol data and the process using the music sound data is controlled based on the specified correspondence.

本発明によれば、楽音データ内の楽音位置と、記号データが示す記号位置との対応関係があらかじめ記憶されていなくても、記号データを用いて楽音データ内の対応する楽音を指定できる楽音データ処理方法及び楽音データ処理装置を提供できる。 According to the present invention, even if the correspondence between the musical tone position in the musical tone data and the symbol position indicated by the symbol data is not stored in advance, the musical tone data can specify the corresponding musical tone in the musical tone data by using the symbol data. A processing method and a musical sound data processing apparatus can be provided.

楽音データ処理装置の概念図である。It is a conceptual diagram of a musical tone data processing apparatus. 記号データ及び楽音データが変換されるイメージを説明する説明図である。It is explanatory drawing explaining the image which the symbol data and the musical tone data are converted. 表示処理のフロー図である。It is a flow chart of a display process. 操作指示による制御のフロー図である。It is a flow chart of control by an operation instruction. 再生処理のフロー図である。It is a flow chart of a reproduction process. 検索処理のフロー図である。It is a flow chart of a search process. 表示画面の例を示す図である。It is a figure which shows the example of the display screen. コード進行が選択された状態における表示画面の例を示す図である。It is a figure which shows the example of the display screen in the state which chord progression is selected. 選択されたコード進行と一致するコード進行及び類似するコード進行の箇所が反転表示された状態における表示画面の例を示す図である。It is a figure which shows the example of the display screen in the state which the chord progression which matches the selected chord progression and the part of the similar chord progression are highlighted.

（実施形態）
以下、図面を参照して本発明を実施するための形態（以下、実施形態）について詳細に説明する。なお、実施形態の説明の全体を通して同じ要素には同じ番号を付している。 (Embodiment)
Hereinafter, embodiments for carrying out the present invention (hereinafter, embodiments) will be described in detail with reference to the drawings. The same elements are numbered the same throughout the description of the embodiment.

図１は楽音データ処理装置１の概念図である。
図２は、記号データＳ及び楽音データＭが変換されるイメージを説明する説明図である。 FIG. 1 is a conceptual diagram of a musical tone data processing device 1.
FIG. 2 is an explanatory diagram illustrating an image in which the symbol data S and the musical tone data M are converted.

楽音データ処理装置１は、例えば、電子楽器やスマートフォンやタブレット等のような、タッチパネルを搭載した装置に搭載される。 The musical sound data processing device 1 is mounted on a device equipped with a touch panel, such as an electronic musical instrument, a smartphone, a tablet, or the like.

図１に示すように、楽音データ処理装置１は、制御部１０と操作入力部２０と表示部３０と記憶部４０と発音部５０とスイッチ部６０と、を備える。なお、楽音データ処理装置１は、別途、記号データＳを記憶部４０に読み込むため、撮像画像から記号データＳを光学認識（画像認識）するためのカメラ等の認識部（不図示）やキーボード（不図示）を備えてもよい。 As shown in FIG. 1, the musical tone data processing device 1 includes a control unit 10, an operation input unit 20, a display unit 30, a storage unit 40, a sounding unit 50, and a switch unit 60. Since the music data processing device 1 separately reads the symbol data S into the storage unit 40, a recognition unit (not shown) such as a camera or a keyboard (not shown) for optically recognizing (image recognition) the symbol data S from the captured image. (Not shown) may be provided.

（制御部）
制御部１０は、ＲＯＭに記憶されたプログラムを実行してＲＡＭに記憶された各種データを処理することにより各種機能を実行する汎用のプロセッサなどで構成される。 (Control unit)
The control unit 10 is composed of a general-purpose processor or the like that executes various functions by executing a program stored in the ROM and processing various data stored in the RAM.

制御部１０は、詳細は後述するが、図２に示すように、楽曲に係る記号データＳが示す複数の記号の並びに対応するメロディ又はコード進行の配列と、楽曲に係る楽音データＭが示す音の波形に対応するメロディ又はコード進行の配列とを比較することにより、記号データＳにおける複数の記号それぞれの位置と楽音データＭにおける音の波形の各部の位置との対応関係を特定し、記号データＳにおけるいずれかの記号の位置を、記号位置ＰＳとしてユーザが指示することによって、特定された対応関係に基づき、記号位置ＰＳに対応する楽音データＭにおける音の波形の位置を、楽音位置ＰＭとして特定する処理を行う。 The control unit 10 will be described in detail later, but as shown in FIG. 2, the control unit 10 has an arrangement of a plurality of symbols indicated by the symbol data S related to the music, a corresponding melody or chord progression, and a sound indicated by the musical sound data M related to the music. By comparing with the arrangement of the melody or chord progression corresponding to the waveform of, the correspondence relationship between the position of each of the plurality of symbols in the symbol data S and the position of each part of the sound waveform in the musical sound data M is specified, and the symbol data By instructing the position of any symbol in S as the symbol position PS, the position of the sound waveform in the music data M corresponding to the symbol position PS is set as the music position PM based on the specified correspondence relationship. Perform the identification process.

制御部１０は、記号データＳ及び楽音データＭを取得し、取得した記号データＳが示す記号の並びを解析してメロディ又はコード進行の配列を示す第１解析データＳ’を生成し、取得した楽音データＭが示す音の波形を解析してメロディ又はコード進行の配列を示す第２解析データＭ’を生成し、第１解析データＳ’と第２解析データＭ’とを比較することにより、記号データＳにおける複数の記号それぞれの位置と楽音データＭにおける音の波形の各部の位置との対応関係を特定する処理を行う。 The control unit 10 acquires the symbol data S and the music sound data M, analyzes the sequence of symbols indicated by the acquired symbol data S, generates the first analysis data S'showing the arrangement of the melody or the chord progression, and acquires the first analysis data S'. By analyzing the waveform of the sound indicated by the music sound data M to generate the second analysis data M'showing the arrangement of the melody or the chord progression, and comparing the first analysis data S'and the second analysis data M' A process of specifying the correspondence between the position of each of the plurality of symbols in the symbol data S and the position of each part of the sound waveform in the music sound data M is performed.

制御部１０は、表示部３０の表示画面１００（図７から図９参照）に記号データＳが示す記号の並びを表示させた状態で、操作入力部２０によりユーザが指示操作した表示画面１００上の表示位置である小節位置Ｐに対応する第１解析データＳ’における位置を、記号位置ＰＳとして特定し、記号位置ＰＳ、第１解析データＳ’及び第２解析データＭ’に基づいて、記号位置ＰＳに対応する楽音データＭにおける位置を、楽音位置ＰＭとして特定する処理を行う。つまり、制御部１０は、記号データＳが示す記号の並びを表示部３０に表示した状態で、操作入力部２０によりユーザが記号位置ＰＳを指示する操作を行ったことに応じて、特定された対応関係に基づき、記号位置ＰＳに対応する楽音位置ＰＭを特定する処理を行う。 The control unit 10 is on the display screen 100 instructed and operated by the user by the operation input unit 20 in a state where the display screen 100 (see FIGS. 7 to 9) of the display unit 30 displays the sequence of symbols indicated by the symbol data S. The position in the first analysis data S'corresponding to the bar position P, which is the display position of, is specified as the symbol position PS, and the symbol is based on the symbol position PS, the first analysis data S', and the second analysis data M'. A process of specifying the position in the music sound data M corresponding to the position PS as the music sound position PM is performed. That is, the control unit 10 is specified in response to the user performing an operation of instructing the symbol position PS by the operation input unit 20 in a state where the sequence of symbols indicated by the symbol data S is displayed on the display unit 30. Based on the correspondence relationship, the process of specifying the musical tone position PM corresponding to the symbol position PS is performed.

第１解析データＳ’の生成は、例えば、記号データＳが示す記号の並びを、画像認識を用いた方法により解析することにより行われる。これにより、記号データＳの入力を簡単に行うことができる。 The first analysis data S'is generated, for example, by analyzing the sequence of symbols indicated by the symbol data S by a method using image recognition. Thereby, the symbol data S can be easily input.

第２解析データＭ’の生成は、例えば、楽音データＭが示す音の波形を、フーリエ変換を用いた方法により解析することにより行われる。これにより、楽音データＭが示す音の波形から音程がわかるので、メロディ又はコード進行の配列を示す第２解析データＭ’が簡単に解析できる。 The second analysis data M'is generated, for example, by analyzing the waveform of the sound indicated by the musical tone data M by a method using a Fourier transform. As a result, since the pitch can be known from the waveform of the sound indicated by the musical tone data M, the second analysis data M'indicating the arrangement of the melody or the chord progression can be easily analyzed.

制御部１０は、表示部３０に、楽曲に係る音符とコードの両方の並びが記された楽譜を記号データＳとして表示した状態で、操作入力部２０によりユーザが指示操作した記号位置ＰＳが音符とコードのどちらであるかを判断し、音符の位置が指示操作されたと判断された場合には、記号データＳが示す記号の並びに対応するメロディの配列と、楽音データＭが示す音の波形に対応するメロディの配列とを比較することにより、記号データＳにおける複数の記号それぞれの位置と楽音データＭにおける音の波形の各部の位置との対応関係を特定し、コードの位置が指示操作されたと判断された場合には、記号データＳが示す記号の並びに対応するコード進行の配列と、楽音データＭが示す音の波形に対応するコード進行の配列とを比較することにより、記号データＳにおける複数の記号それぞれの位置と楽音データＭにおける音の波形の各部の位置との対応関係を特定する処理を行う。 The control unit 10 displays the score on which both the notes and chords related to the music are arranged as symbol data S on the display unit 30, and the symbol position PS instructed and operated by the user by the operation input unit 20 is the note. When it is determined that the position of the note is indicated and manipulated, the arrangement of the symbols indicated by the symbol data S and the corresponding melody arrangement and the waveform of the sound indicated by the music sound data M are displayed. By comparing with the arrangement of the corresponding melody, the correspondence relationship between the position of each of the plurality of symbols in the symbol data S and the position of each part of the sound waveform in the musical note data M was specified, and the position of the chord was instructed. When it is determined, a plurality of symbols in the symbol data S are obtained by comparing the arrangement of the symbols indicated by the symbol data S and the arrangement of the corresponding chord progressions with the arrangement of the chord progressions corresponding to the waveform of the sound indicated by the musical note data M. The process of specifying the correspondence between the position of each of the symbols and the position of each part of the sound waveform in the music sound data M is performed.

制御部１０は、表示部３０に記号データＳを表示させた状態で、記号データＳにおける記号の範囲である記号範囲（開始小節位置Ｐｎから終了小節位置Ｐｎ＋ｋの範囲）が操作入力部２０によりユーザに指示操作された場合は、指示操作された記号範囲（開始小節位置Ｐｎから終了小節位置Ｐｎ＋ｋの範囲）の開始位置（開始小節位置Ｐｎ）に対応する楽音位置（開始楽音位置）と終了位置（終了小節位置Ｐｎ＋ｋ）に対応する楽音位置（終了楽音位置）とを特定し、楽音データＭにおける特定された開始位置に対応する楽音位置（開始楽音位置）から終了位置に対応する楽音位置（終了楽音位置）までを再生する処理を行う。 The control unit 10 displays the symbol data S on the display unit 30, and the operation input unit 20 sets the symbol range (the range from the start bar position Pn to the end bar position Pn + k), which is the range of the symbols in the symbol data S, to the user. When the instruction is operated, the musical tone position (start musical tone position) and the end position (starting musical tone position) corresponding to the start position (start measure position Pn) of the instructed operation symbol range (range from the start measure position Pn to the end measure position Pn + k). The musical tone position (end musical tone position) corresponding to the end bar position Pn + k) is specified, and the musical tone position (start musical tone position) corresponding to the specified start position in the musical tone data M to the musical tone position (end musical tone position) corresponding to the end position. Performs the process of reproducing up to the position).

制御部１０は、表示部３０に記号データＳを表示させた状態で、記号データＳにおける記号の範囲である記号範囲（開始小節位置Ｐｎから終了小節位置Ｐｎ＋ｋの範囲）を操作入力部２０によりユーザに指示操作させ、指示操作された記号範囲（開始小節位置Ｐｎから終了小節位置Ｐｎ＋ｋの範囲）に含まれる複数の記号の並びに対応する楽音データＭにおける音の波形の範囲である楽音範囲を検索する処理を行う。 With the symbol data S displayed on the display unit 30, the control unit 10 uses the operation input unit 20 to operate the symbol range (the range from the start bar position Pn to the end bar position Pn + k), which is the range of the symbols in the symbol data S. Searches for a music range that is a range of sound waveforms in the corresponding music data M and a plurality of symbols included in the symbol range (range from the start measure position Pn to the end measure position Pn + k). Perform processing.

（操作入力部）
操作入力部２０は、ユーザが記号位置ＰＳを指示する操作を行うものであり、例えば、タッチパッドやマウスのような入力装置である。
操作入力部２０と表示部３０とを組み合わせてタッチパネルとすると、表示された内容に対して直感的な入力操作ができるので好ましい。 (Operation input section)
The operation input unit 20 is for performing an operation in which the user instructs the symbol position PS, and is, for example, an input device such as a touch pad or a mouse.
It is preferable to combine the operation input unit 20 and the display unit 30 to form a touch panel because intuitive input operations can be performed on the displayed contents.

（表示部）
表示部３０は、記号データＳが示す記号の並びを表示するものであり、例えば、液晶パネルのような表示装置であり、表示画面１００（図７から図９参照）を有する。
操作入力部２０と表示部３０とを組み合わせてタッチパネルとすると、表示された内容に対して直感的な入力操作ができるので好ましい。 (Display part)
The display unit 30 displays a sequence of symbols indicated by the symbol data S, and is, for example, a display device such as a liquid crystal panel, and has a display screen 100 (see FIGS. 7 to 9).
It is preferable to combine the operation input unit 20 and the display unit 30 to form a touch panel because intuitive input operations can be performed on the displayed contents.

（記憶部）
記憶部４０は、記号データＳ及び楽音データＭを記憶する。記憶部４０は、ＲＯＭ４１とＲＡＭ４２とを備える。記号データＳは、制御部１０からの指令により記憶部４０から読み出されて、第１解析データＳ’に変換される。同様に、楽音データＭは、制御部１０からの指令により記憶部４０から読み出されて、第２解析データＭ’に変換される。第１解析データＳ’及び第２解析データＭ’は、主に、ＲＡＭ４２に一時的に記憶される。 (Memory)
The storage unit 40 stores the symbol data S and the musical tone data M. The storage unit 40 includes a ROM 41 and a RAM 42. The symbol data S is read from the storage unit 40 by a command from the control unit 10 and converted into the first analysis data S'. Similarly, the musical tone data M is read from the storage unit 40 by a command from the control unit 10 and converted into the second analysis data M'. The first analysis data S'and the second analysis data M'are mainly temporarily stored in the RAM 42.

（発音部）
発音部５０は、例えば、スピーカであり、楽音データＭの電気信号エネルギーを音波に変換して、外部に放射する音響機器であり、制御部１０からの指令により制御される。 (Pronunciation part)
The sounding unit 50 is, for example, a speaker, an audio device that converts the electrical signal energy of the musical tone data M into sound waves and radiates it to the outside, and is controlled by a command from the control unit 10.

（スイッチ部）
スイッチ部６０は、再生スイッチ（不図示）や検索スイッチ（不図示）や電源スイッチ等を備えるものである。スイッチ部６０は、例えば、押しボタンスイッチやシーソースイッチで構成される。スイッチ部６０からの検出信号は、制御部１０に送信される。なお、再生スイッチ（不図示）や検索スイッチ（不図示）は、表示部３０の表示画面１００に設けられる場合、なくてもよい。 (Switch part)
The switch unit 60 includes a playback switch (not shown), a search switch (not shown), a power switch, and the like. The switch unit 60 is composed of, for example, a push button switch or a seesaw switch. The detection signal from the switch unit 60 is transmitted to the control unit 10. The playback switch (not shown) and the search switch (not shown) may not be provided when the display screen 100 of the display unit 30 is provided.

次に、図２を用いて、記号データＳ及び楽音データＭが変換されるイメージを説明する。 Next, an image in which the symbol data S and the musical tone data M are converted will be described with reference to FIG.

記憶部４０に記憶される記号データＳは、例えば、図２の上段左に示すような、Ｆ＃ｍ７、Ｂｍ、Ｇなどの楽曲に係るコードの並びが紙面上に記されたコード譜である。なお、記号データＳは、コード譜に限らず、五線譜やタブ譜等のように楽曲を演奏記号や符号等の記号によって書き表した楽譜であってよく、コードや音符に沿って歌詞１０５（図７から図９参照）が付されていてもよい。また、記号データＳは、紙面上に記されたものに限らず、イメージデータやテキストデータ等のデジタルデータであってもよい。 The symbol data S stored in the storage unit 40 is, for example, a chord notation in which a sequence of chords related to music such as F # m7, Bm, and G is written on paper as shown in the upper left of FIG. .. The symbol data S is not limited to the chord notation, but may be a musical score in which the music is written by symbols such as performance symbols and signs, such as a staff notation and a tablature, and the lyrics 105 (FIG. 7) along with the chords and notes. (See FIG. 9) may be attached. Further, the symbol data S is not limited to the data written on the paper, and may be digital data such as image data or text data.

一方、楽音データＭは、例えば、図２の上段右に示すような、オーディオデータや音声データや波形データである。なお、楽音データＭは、ＭＩＤＩデータのようなデジタルデータであってよく、マイクから直接記録されたアナログデータであってもよい。 On the other hand, the musical sound data M is, for example, audio data, voice data, or waveform data as shown in the upper right of FIG. The musical tone data M may be digital data such as MIDI data, or may be analog data recorded directly from the microphone.

制御部１０は、記号データＳに基づき、前奏、メロディ（Ａメロ、Ｂメロ、Ｃメロ・・・等）又は間奏等を識別し、図２の中段左に示すような、記号位置ＰＳとコードＣＳとが関連付けられたコード進行を示す第１解析データＳ’を生成する。同様に、制御部１０は、楽音データＭに基づき、図２の中段右に示すような、楽音位置ＰＭとコードＣＭとが関連付けられたコード進行を示す第２解析データＭ’を生成する。 The control unit 10 identifies a prelude, a melody (A melody, B melody, C melody, etc.) or an interlude based on the symbol data S, and the symbol position PS and the chord as shown on the left in the middle of FIG. The first analysis data S'indicating the chord progression associated with the CS is generated. Similarly, based on the musical tone data M, the control unit 10 generates the second analysis data M'showing the chord progression in which the musical tone position PM and the chord CM are associated with each other, as shown in the middle right of FIG.

そして、制御部１０は、第１解析データＳ’におけるコードＣＳの配列と第２解析データＭ’におけるコードＣＭの配列とを比較し、配列が一致する部分を共通コードＣで表し、小節位置Ｐを示す共通番号を時系列的に順番に付していき、図２の下段に示すような、小節位置Ｐに対して記号位置ＰＳと楽音位置ＰＭと共通コードＣが関連付けられたデータテーブルＴ（図２参照）を作成する。 Then, the control unit 10 compares the sequence of the code CS in the first analysis data S'and the sequence of the code CM in the second analysis data M', represents the portion where the sequences match with the common code C, and represents the bar position P. The common numbers indicating the above are assigned in order in chronological order, and as shown in the lower part of FIG. 2, the data table T in which the symbol position PS, the music position PM, and the common code C are associated with each other at the bar position P ( (See Fig. 2).

（動作）
以下、楽音データ処理装置１における制御部１０による楽音データ処理方法の内容を、実施形態に基づいて、図２から図９を用いて説明する。
図３は、表示処理のフロー図である。図４は、操作指示による制御のフロー図である。図５は、再生処理のフロー図である。図６は、検索処理のフロー図である。図７は、表示画面１００の例を示す図である。図８は、コード進行（Ｃｎ，Ｃｎ＋ｋ）が選択された状態における表示画面１００の例を示す図である。図９は、選択されたコード進行（Ｃｎ，Ｃｎ＋ｋ）と一致するコード進行（Ｃｎ，Ｃｎ＋ｋ）’及び類似するコード進行（Ｃｎ，Ｃｎ＋ｋ）’’の箇所が反転表示された状態における表示画面１００の例を示す図である。
なお、以下では、記号データＳとしてコード譜を用いる場合で説明するが、コード譜に限らない。また、以下では、楽音データＭとしてオーディオデータ（ＭＩＤＩデータ、音声データ、波形データ等）を用いる場合で説明するが、オーディオデータに限らない。さらに、以下では、操作入力部２０と表示部３０との機能が一体化され、指先等で画面に触れることで入力を行うことが可能なタッチパネルを有するタブレットを使用することを前提として説明するが、操作入力部２０と表示部３０とを別に設けてもよく、その際、操作入力部２０をマウスのようなポインティングデバイスとし、ポインティングデバイスの動きに応じて表示部３０にポインタを表示するようにしてもよい。
また、以下では、第１解析データＳ’と第２解析データＭ’は、コード進行を示すものとしているが、コード進行に換えて、メロディとしてもよい。 (motion)
Hereinafter, the content of the musical tone data processing method by the control unit 10 in the musical tone data processing device 1 will be described with reference to FIGS. 2 to 9 based on the embodiment.
FIG. 3 is a flow chart of display processing. FIG. 4 is a flow chart of control according to an operation instruction. FIG. 5 is a flow chart of the reproduction process. FIG. 6 is a flow chart of the search process. FIG. 7 is a diagram showing an example of the display screen 100. FIG. 8 is a diagram showing an example of the display screen 100 in a state where the chord progression (Cn, Cn + k) is selected. FIG. 9 shows the display screen 100 in a state in which the chord progressions (Cn, Cn + k)'and similar chord progressions (Cn, Cn + k)'that match the selected chord progressions (Cn, Cn + k) are highlighted. It is a figure which shows an example.
In the following, the case where the chord staff is used as the symbol data S will be described, but the description is not limited to the chord staff. Further, although the case where audio data (MIDI data, audio data, waveform data, etc.) is used as the musical sound data M will be described below, the present invention is not limited to audio data. Further, in the following description, it is assumed that a tablet having a touch panel in which the functions of the operation input unit 20 and the display unit 30 are integrated and input can be performed by touching the screen with a fingertip or the like is used. , The operation input unit 20 and the display unit 30 may be provided separately. At that time, the operation input unit 20 is used as a pointing device such as a mouse, and a pointer is displayed on the display unit 30 according to the movement of the pointing device. You may.
Further, in the following, the first analysis data S'and the second analysis data M'show the chord progression, but the chord progression may be replaced with a melody.

（表示処理）
制御部１０による表示処理について、主に、図２、図３及び図７を用いて説明する。
（Ａ１）図３に示すように、まず、記号位置ＰＳとコードＣＳの情報を含むコード譜等の記号データＳを、手入力やスキャナや有線又は無線によるデータ転送等の手段によって読み込み、記憶部４０に記憶する（ステップＡ１）。なお、ＳＤカードやＵＳＢメモリ等のフラッシュメモリを制御部１０に直接接続して、そのフラッシュメモリを記憶部４０としてもよい。
（Ａ２）同様に、オーディオデータである楽音データＭを、記憶部４０に記憶する（ステップＡ２）。
（Ａ３）すると、制御部１０は、記号データＳ及び楽音データＭの各データの構成を解析する全体構成解析を行う（ステップＡ３）。詳細には、制御部１０は、記号データＳに基づき、前奏、メロディ（Ａメロ、Ｂメロ、Ｃメロ・・・等）又は間奏等を識別し、記号位置ＰＳとコードＣＳとが関連付けられたコード進行を示す第１解析データＳ’ （図２参照）を生成する。同様に、制御部１０は、楽音データＭに基づき、楽音位置ＰＭとコードＣＭとが関連付けられたコード進行を示す第２解析データＭ’ （図２参照）を生成する。
（Ａ４）次に、制御部１０は、第１解析データＳ’と第２解析データＭ’とを比較し、同期処理をする（ステップＡ４）。詳細には、コードＣＳ及びコードＣＭを、共通する小節位置Ｐに関連付ける。例えば、コードＣＳの配列とコードＣＭの配列とを比較し、両者が一致した共通コードＣである部分には、小節位置Ｐを示す共通番号を時系列的に順番に付していき、小節位置Ｐに対して記号位置ＰＳと楽音位置ＰＭと共通コードＣが関連付けられたデータテーブルＴ（図２参照）を作成する。
（Ａ５）そして、図７に示すように、制御部１０は、表示部３０の表示画面１００に、小節位置Ｐと共通コードＣとの関係（コード進行１０４）を示すコード譜を表示する（ステップＡ５）。
また、表示画面１００には、コード進行１０４の他に、再生ボタン１０１や検索ボタン１０２が表示される。
さらに、表示画面１００には、コード進行１０４に沿って、歌詞１０５が表示されてもよい。
なお、コード進行１０４に沿って音符（不図示）を表示してもよい。
このようにして、制御部１０は、読み込んだ記号データＳ及び楽音データＭに基づき、表示部３０を制御して、表示処理を行う。
これにより、楽音データＭ内の位置と、記号データＳが示す位置との対応関係があらかじめ記憶されていなくても、楽音データＭ内の位置と、記号データＳが示す位置とを関係付けられる。よって、楽音データＭ内の位置と、記号データＳが示す位置との対応関係があらかじめ記憶されていなくても、記号データＳを用いて楽音データＭ内の対応する楽音を指定できる。 (Display processing)
The display process by the control unit 10 will be mainly described with reference to FIGS. 2, 3 and 7.
(A1) As shown in FIG. 3, first, the symbol data S such as a chord notation containing the information of the symbol position PS and the code CS is read by means such as manual input, a scanner, or wired or wireless data transfer, and stored. Store in 40 (step A1). A flash memory such as an SD card or a USB memory may be directly connected to the control unit 10 and the flash memory may be used as the storage unit 40.
Similarly, the musical sound data M, which is audio data, is stored in the storage unit 40 (step A2).
(A3) Then, the control unit 10 performs an overall configuration analysis for analyzing the configurations of the symbol data S and the musical tone data M (step A3). Specifically, the control unit 10 identifies a prelude, a melody (A melody, B melody, C melody, etc.) or an interlude based on the symbol data S, and the symbol position PS and the chord CS are associated with each other. The first analysis data S'(see FIG. 2) showing the chord progression is generated. Similarly, the control unit 10 generates second analysis data M'(see FIG. 2) indicating the chord progression in which the musical tone position PM and the chord CM are associated with each other based on the musical tone data M.
(A4) Next, the control unit 10 compares the first analysis data S'and the second analysis data M'and performs synchronous processing (step A4). Specifically, chord CS and chord CM are associated with a common bar position P. For example, the sequence of the chord CS and the sequence of the chord CM are compared, and a common number indicating the bar position P is assigned in chronological order to the portion of the common chord C in which the two match, and the bar position is assigned. A data table T (see FIG. 2) in which the symbol position PS, the musical tone position PM, and the common code C are associated with P is created.
(A5) Then, as shown in FIG. 7, the control unit 10 displays a chord progression showing the relationship between the bar position P and the common chord C (chord progression 104) on the display screen 100 of the display unit 30 (step). A5).
Further, on the display screen 100, in addition to the chord progression 104, a play button 101 and a search button 102 are displayed.
Further, the lyrics 105 may be displayed on the display screen 100 along the chord progression 104.
Note (not shown) may be displayed along the chord progression 104.
In this way, the control unit 10 controls the display unit 30 based on the read symbol data S and the musical tone data M to perform the display process.
As a result, even if the correspondence between the position in the musical sound data M and the position indicated by the symbol data S is not stored in advance, the position in the musical sound data M and the position indicated by the symbol data S can be related. Therefore, even if the correspondence between the position in the musical tone data M and the position indicated by the symbol data S is not stored in advance, the corresponding musical tone in the musical tone data M can be specified by using the symbol data S.

（操作指示処理）
次に、制御部１０による操作指示処理について、主に、図４、図７、図８及び図９を用いて説明する。前提として、上述の表示処理により、表示部３０には既に図７に示すようなコード譜が表示されている。
（Ｂ１）図４に示すように、まず、制御部１０は、ユーザによるタッチパネルの操作を検出する（ステップＢ１）。
（Ｂ２）ここで、制御部１０は、検出された操作が初回であるか否かを判定し（ステップＢ２）、検出された操作が初回であれば（ステップＢ２の判定がＹｅｓの場合）、ステップＢ３に移行し、そうでなければ（ステップＢ２の判定がＮｏの場合）、ステップＢ７に移行する。
（Ｂ３）制御部１０は、関連するＲＡＭ４２を初期化し（ステップＢ３）、ステップＢ４に移行する。
（Ｂ４）制御部１０は、初回タッチ位置を保存し（ステップＢ４）、ステップＢ５に移行する。
（Ｂ５）制御部１０は、例えば、表示部３０の表示画面１００における初回タッチ位置に対応する箇所の色を反転させる等して、表示を更新し（ステップＢ５）、ステップＢ６に移行する。
（Ｂ６）制御部１０は、初回タッチ位置に最も近い小節位置Ｐを、開始小節位置Ｐｎ（図８参照）として保存し（ステップＢ６）、ステップＢ１に移行する。
（Ｂ７）制御部１０は、ユーザによってドラッグ操作がなされているか否かを判定し（ステップＢ７）、ドラッグ操作がなされていれば（ステップＢ７の判定がＹｅｓの場合）、ステップＢ８に移行し、そうでなければ（ステップＢ７の判定がＮｏの場合）、ステップＢ９に移行する。
（Ｂ８）制御部１０は、ステップＢ７でドラッグ位置（範囲）を保存した後、例えば、表示部３０におけるドラッグ位置（範囲）に対応する箇所の色を反転させる等して、表示を更新する（ステップＢ８）。
（Ｂ９）制御部１０は、ユーザによってタッチリリースがなされたか否かを判定し（ステップＢ９）、タッチリリースがなされれば（ステップＢ９の判定がＹｅｓの場合）、ステップＢ１０に移行し、そうでなければ（ステップＢ９の判定がＮｏの場合）、ステップＢ１２に移行する。
（Ｂ１０）制御部１０は、タッチリリースされた位置に最も近い小節位置Ｐを終了小節位置Ｐｎ＋ｋ（図８参照）として保存し（ステップＢ１０）、ステップＢ１１に移行する。
（Ｂ１１）制御部１０は、選択フラグをＯＮし（ステップＢ１１）、ステップＢ１に移行する。
（Ｂ１２）制御部１０は、例えば、スイッチ部６０における再生スイッチ（不図示）からの検出信号や画面に表示された再生ボタン１０１がタッチされたことを検出することにより、ユーザによって再生操作がなされたか否かを判定し（ステップＢ１２）、再生操作がなされれば（ステップＢ１２の判定がＹｅｓの場合）、ステップＢ１３に移行し、そうでなければ（ステップＢ１２の判定がＮｏの場合）、ステップＢ１４に移行する。
（Ｂ１３）制御部１０は、後述する再生処理を行い（ステップＢ１３）、制御を終了する。
（Ｂ１４）制御部１０は、例えば、スイッチ部６０における検索スイッチ（不図示）からの検出信号や画面に表示された検索ボタン１０２がタッチされたことを検出することにより、ユーザによって検索操作がなされたか否かを判定し（ステップＢ１４）、検索操作がなされれば（ステップＢ１４の判定がＹｅｓの場合）、ステップＢ１５に移行し、そうでなければ（ステップＢ１４の判定がＮｏの場合）、ステップＢ１に移行する。
（Ｂ１５）制御部１０は、後述する検索処理を行い（ステップＢ１５）、制御を終了する。 (Operation instruction processing)
Next, the operation instruction processing by the control unit 10 will be mainly described with reference to FIGS. 4, 7, 8 and 9. As a premise, the chord notation as shown in FIG. 7 is already displayed on the display unit 30 by the above-mentioned display process.
(B1) As shown in FIG. 4, first, the control unit 10 detects the operation of the touch panel by the user (step B1).
(B2) Here, the control unit 10 determines whether or not the detected operation is the first time (step B2), and if the detected operation is the first time (when the determination in step B2 is Yes), The process proceeds to step B3, and if not (when the determination in step B2 is No), the process proceeds to step B7.
(B3) The control unit 10 initializes the related RAM 42 (step B3) and proceeds to step B4.
(B4) The control unit 10 saves the first touch position (step B4), and shifts to step B5.
(B5) The control unit 10 updates the display (step B5) by, for example, reversing the color of the portion corresponding to the first touch position on the display screen 100 of the display unit 30, and proceeds to step B6.
(B6) The control unit 10 saves the bar position P closest to the first touch position as the start bar position Pn (see FIG. 8) (step B6), and shifts to step B1.
(B7) The control unit 10 determines whether or not the drag operation is performed by the user (step B7), and if the drag operation is performed (when the determination in step B7 is Yes), the process proceeds to step B8. If not (when the determination in step B7 is No), the process proceeds to step B9.
(B8) The control unit 10 updates the display after saving the drag position (range) in step B7, for example, by inverting the color of the portion corresponding to the drag position (range) in the display unit 30 (B8). Step B8).
(B9) The control unit 10 determines whether or not the touch release has been made by the user (step B9), and if the touch release is made (when the determination in step B9 is Yes), the process proceeds to step B10, and so on. If not (when the determination in step B9 is No), the process proceeds to step B12.
(B10) The control unit 10 saves the bar position P closest to the touch-released position as the end bar position Pn + k (see FIG. 8) (step B10), and proceeds to step B11.
(B11) The control unit 10 turns on the selection flag (step B11) and shifts to step B1.
(B12) The control unit 10 performs a reproduction operation by the user, for example, by detecting a detection signal from a reproduction switch (not shown) in the switch unit 60 or a touch of the reproduction button 101 displayed on the screen. If it is determined whether or not (step B12) and the reproduction operation is performed (if the determination in step B12 is Yes), the process proceeds to step B13, otherwise (if the determination in step B12 is No), the step Move to B14.
(B13) The control unit 10 performs a reproduction process described later (step B13), and ends the control.
(B14) The control unit 10 performs a search operation by the user by detecting, for example, a detection signal from a search switch (not shown) in the switch unit 60 or a touch of a search button 102 displayed on the screen. If it is determined whether or not (step B14) and a search operation is performed (if the determination in step B14 is Yes), the process proceeds to step B15, otherwise (if the determination in step B14 is No), step. Move to B1.
(B15) The control unit 10 performs a search process described later (step B15), and ends the control.

（再生処理）
次に、制御部１０による再生処理について、主に、図５、図７、図８及び図９を用いて説明する。
（Ｃ１）図５に示すように、制御部１０は、選択フラグ（ステップＢ１１参照）がＯＮであるか否かを判定し（ステップＣ１）、選択フラグがＯＮであれば（ステップＣ１の判定がＹｅｓの場合）、ステップＣ２に移行し、そうでなければ（ステップＣ１の判定がＮｏの場合）、ステップＣ５に移行する。
（Ｃ２）制御部１０は、データテーブルＴ（ステップＡ４参照）を参照し、開始小節位置Ｐｎに対応する開始楽音位置ＰＭｎを求め（ステップＣ２）、ステップＣ３に移行する。
（Ｃ３）制御部１０は、データテーブルＴ（ステップＡ４参照）を参照し、終了小節位置Ｐｎ＋ｋに対応する終了楽音位置ＰＭｎ＋ｋを求め（ステップＣ３）、ステップＣ４に移行する。
（Ｃ４）制御部１０は、開始楽音位置ＰＭｎから終了楽音位置ＰＭｎ＋ｋまでの範囲の特定された楽音位置ＰＭに基づく楽音データＭを再生するように、発音部５０を制御し（ステップＣ４）、制御を終了する。なお、再生は、ループするように繰り返し行われてもよい。また、制御は、所定時間又は所定回数の繰り返し再生がなされた後、終了するようにしてもよい。
（Ｃ５）制御部１０は、楽音データＭの全体を再生するように、発音部５０を制御し（ステップＣ５）、制御を終了する。なお、再生は、ループするように繰り返し行われてもよい。また、制御は、所定時間又は所定回数の繰り返し再生がなされた後、終了するようにしてもよい。 (Reproduction process)
Next, the reproduction process by the control unit 10 will be mainly described with reference to FIGS. 5, 7, 8 and 9.
(C1) As shown in FIG. 5, the control unit 10 determines whether or not the selection flag (see step B11) is ON (step C1), and if the selection flag is ON (the determination in step C1 is). If Yes), the process proceeds to step C2, otherwise (if the determination in step C1 is No), the process proceeds to step C5.
(C2) The control unit 10 refers to the data table T (see step A4), obtains the start musical tone position PMn corresponding to the start bar position Pn (step C2), and proceeds to step C3.
(C3) The control unit 10 refers to the data table T (see step A4), obtains the end musical tone position PMn + k corresponding to the end bar position Pn + k (step C3), and proceeds to step C4.
(C4) The control unit 10 controls and controls the sound unit 50 so as to reproduce the musical tone data M based on the specified musical tone position PM in the range from the start musical tone position PMn to the end musical tone position PMn + k (step C4). To finish. The reproduction may be repeated so as to loop. Further, the control may be terminated after the repeated reproduction is performed for a predetermined time or a predetermined number of times.
(C5) The control unit 10 controls the sounding unit 50 so as to reproduce the entire musical tone data M (step C5), and ends the control. The reproduction may be repeated so as to loop. Further, the control may be terminated after the repeated reproduction is performed for a predetermined time or a predetermined number of times.

（検索処理）
次に、制御部１０による検索処理について、主に、図６、図７、図８及び図９を用いて説明する。なお、以下の説明において、開始小節位置Ｐｎから終了小節位置Ｐｎ＋ｋに対応する、コードＣｎからコードＣｎ＋ｋまでのコードの配列であるコード進行（Ｃｎ，Ｃｎ＋ｋ）は、記号範囲及び楽音範囲に対応する。
（Ｄ１）図６に示すように、制御部１０は、選択フラグ（ステップＢ１１参照）がＯＮであるか否かを判定し（ステップＤ１）、選択フラグがＯＮであれば（ステップＤ１の判定がＹｅｓの場合）、ステップＤ２に移行し、そうでなければ（ステップＤ１の判定がＮｏの場合）、制御を終了する。
（Ｄ２）制御部１０は、データテーブルＴ（ステップＡ４参照）を参照し、開始小節位置Ｐｎから終了小節位置Ｐｎ＋ｋに対応する、コードＣｎからコードＣｎ＋ｋまでのコードの配列であるコード進行（Ｃｎ，Ｃｎ＋ｋ）（図９参照）を保存し（ステップＤ２）、ステップＤ３に移行する。
（Ｄ３）制御部１０は、データテーブルＴ（ステップＡ４参照）を参照し、保存したコード進行（Ｃｎ，Ｃｎ＋ｋ）と一致するコード進行（Ｃｎ，Ｃｎ＋ｋ）’又は対応するコード進行（Ｃｎ，Ｃｎ＋ｋ）’’を検索し（ステップＤ３）、ステップＤ４に移行する。なお、対応するコード進行（Ｃｎ，Ｃｎ＋ｋ）’’は、例えば、保存したコード進行を基調としたときの転調されたコード進行を含む。
（Ｄ４）制御部１０は、ステップＤ３で検索してヒットしたコード進行（Ｃｎ，Ｃｎ＋ｋ）’，（Ｃｎ，Ｃｎ＋ｋ）’’を保存した後、例えば、表示部３０におけるコード進行（Ｃｎ，Ｃｎ＋ｋ）’，（Ｃｎ，Ｃｎ＋ｋ）’’に対応する箇所の色を反転させる（図９参照）等して、表示を更新し（ステップＤ４）、制御を終了する。 (Search process)
Next, the search process by the control unit 10 will be mainly described with reference to FIGS. 6, 7, 8 and 9. In the following description, the chord progression (Cn, Cn + k), which is an array of chords from chord Cn to chord Cn + k, corresponding to the start bar position Pn to the end bar position Pn + k, corresponds to the symbol range and the musical tone range.
(D1) As shown in FIG. 6, the control unit 10 determines whether or not the selection flag (see step B11) is ON (step D1), and if the selection flag is ON (the determination in step D1 is). If Yes), the process proceeds to step D2, and if not (if the determination in step D1 is No), the control ends.
(D2) The control unit 10 refers to the data table T (see step A4), and is a chord progression (Cn,) which is an array of chords from chord Cn to chord Cn + k corresponding to the start bar position Pn to the end bar position Pn + k. Cn + k) (see FIG. 9) is saved (step D2), and the process proceeds to step D3.
(D3) The control unit 10 refers to the data table T (see step A4) and refers to the chord progression (Cn, Cn + k)'that matches the saved chord progression (Cn, Cn + k) or the corresponding chord progression (Cn, Cn + k). '' Is searched (step D3), and the process proceeds to step D4. The corresponding chord progression (Cn, Cn + k)'' includes, for example, a transposed chord progression based on the saved chord progression.
(D4) The control unit 10 saves the chord progression (Cn, Cn + k)', (Cn, Cn + k)'' searched and hit in step D3, and then, for example, the chord progression (Cn, Cn + k) in the display unit 30. The display is updated (step D4) by inverting the color of the portion corresponding to', (Cn, Cn + k)'' (see FIG. 9), and the control is terminated.

以上、本発明の好ましい実施形態について詳述したが、本発明に係る楽音データ処理装置１は上述した実施形態に限定されるものではなく、特許請求の範囲に記載された本発明の要旨の範囲内において、種々の変形、変化が可能である。 Although the preferred embodiment of the present invention has been described in detail above, the music data processing device 1 according to the present invention is not limited to the above-described embodiment, and the scope of the gist of the present invention described in the claims. Within, various deformations and changes are possible.

例えば、上記実施形態においては、ユーザが表示画面１００上で指示操作した小節位置Ｐに対応する楽音位置ＰＭから楽音を再生する場合を説明したが、これに限らず、小節位置Ｐと記号位置ＰＳと楽音位置ＰＭとは、それぞれ関連付けられているので、現在再生している楽音位置ＰＭに対応する小節位置Ｐを、楽曲の進行に合わせて、表示画面１００上で、例えば強調表示する等することにより、識別して表示することができる。つまり、制御部１０は、楽音データＭの再生中に、表示部３０に対して、再生位置を識別して表示させることができる。 For example, in the above embodiment, the case where the musical sound is reproduced from the musical sound position PM corresponding to the bar position P instructed and operated by the user on the display screen 100 has been described, but the present invention is not limited to this, and the bar position P and the symbol position PS are not limited to this. And the musical tone position PM are associated with each other, so that the bar position P corresponding to the currently playing musical tone position PM is highlighted, for example, on the display screen 100 according to the progress of the music. Can be identified and displayed. That is, the control unit 10 can identify and display the reproduction position on the display unit 30 during the reproduction of the musical tone data M.

例えば、制御部１０は、楽音データＭの再生中に、表示部３０に表示されている記号データＳにおける再生位置に対応する記号の位置を識別して表示させる処理を行うことができる。 For example, the control unit 10 can perform a process of identifying and displaying the position of the symbol corresponding to the reproduction position in the symbol data S displayed on the display unit 30 during the reproduction of the musical tone data M.

また、例えば、制御部１０は、表示部３０に音符とコード譜の両方が記された楽譜を表示した状態で、操作入力部２０によりユーザが指示操作した位置が音符とコード譜のどちらであるかをパターン認識等により判断し、この判断結果に基づいて、楽音データＭとの対応関係を特定することができる。 Further, for example, the control unit 10 displays a score in which both notes and chords are written on the display unit 30, and the position instructed and operated by the user by the operation input unit 20 is either a note or a chord notation. It can be determined by pattern recognition or the like, and the correspondence with the musical sound data M can be specified based on the determination result.

例えば、制御部１０は、第１解析データＳ’又は第２解析データＭ’における記号データＰＳが示す記号の並びに対応するコード進行、又は楽音データＭが示す音の波形に対応するコード進行が、規定のコード進行のパターンから外れる場合は、エラーを示す情報を出力してもよい。 For example, in the control unit 10, the chord progression corresponding to the sequence of symbols indicated by the symbol data PS in the first analysis data S'or the second analysis data M', or the chord progression corresponding to the sound waveform indicated by the musical tone data M is determined. If it deviates from the specified code progression pattern, information indicating an error may be output.

例えば、制御部１０は、第１解析データＳ’又は第２解析データＭ’における記号データＰＳが示す記号の並びに対応するコード進行が、規定のコード進行のパターンから外れる場合は、そのパターンから外れたコード進行を、最も類似する規定のコード進行のパターンに補正できるようにしてもよい。 For example, if the chord progression corresponding to the sequence of symbols indicated by the symbol data PS in the first analysis data S'or the second analysis data M'deviates from the specified chord progression pattern, the control unit 10 deviates from the pattern. The chord progression may be corrected to the most similar prescribed chord progression pattern.

例えば、制御部１０は、複数の楽曲それぞれに対応する複数の楽音データＭを取得し、取得された複数の楽音データＭの中から、記号データＳのメロディ又はコード進行の配列と、楽音データＭのメロディ又はコード進行の配列とが一致する楽音データＭを特定し、特定された楽音データＭを再生対象として指定する処理を行うことができる。
また、制御部１０は、再生対象として指定された楽音データＭを対象として、表示部３０に表示された記号データＳに対して指示操作された記号位置ＰＳに基づく再生制御を行うことができる。 For example, the control unit 10 acquires a plurality of musical tone data M corresponding to each of the plurality of songs, and from the acquired plurality of musical tone data M, an arrangement of the melody or chord progression of the symbol data S and the musical tone data M. It is possible to specify the musical tone data M that matches the arrangement of the melody or the chord progression of the above, and to specify the specified musical tone data M as the reproduction target.
Further, the control unit 10 can perform reproduction control based on the symbol position PS instructed and operated on the symbol data S displayed on the display unit 30 for the musical tone data M designated as the reproduction target.

例えば、制御部１０は、複数の楽曲それぞれに対応する複数の記号データＳを取得し、取得された複数の記号データＳの中から、楽音データＭのメロディ又はコード進行の配列と、記号データＳのメロディ又はコード進行の配列とが一致する記号データＳを特定し、特定された記号データＳを表示部３０に表示した状態で、操作入力部２０により記号位置ＰＳをユーザに指示操作させる処理を行うことができる。 For example, the control unit 10 acquires a plurality of symbol data S corresponding to each of the plurality of songs, and from the acquired plurality of symbol data S, an array of the melody or chord progression of the music sound data M and the symbol data S. A process of instructing the user to operate the symbol position PS by the operation input unit 20 in a state where the symbol data S that matches the arrangement of the melody or the chord progression of the above is specified and the specified symbol data S is displayed on the display unit 30. It can be carried out.

本発明の楽音データ処理方法及び楽音データ処理装置１によれば、楽曲に係る記号データＳが示す記号の並びに対応するメロディ又はコード進行１０４の配列と、楽曲に係る楽音データＭが示す音の波形に対応するメロディ又はコード進行の配列とを比較することにより、記号データＳにおける複数の記号それぞれの位置と楽音データＭにおける音の波形の各部の位置との対応関係を特定し、記号データＳにおける記号の位置である記号位置ＰＳをユーザが指示することによって、特定された対応関係に基づき、記号位置ＰＳに対応する楽音データにおける音の波形の位置を、楽音位置ＰＭとして特定するので、楽音データＭ内の位置と、記号データＳが示す位置との対応関係があらかじめ記憶されていなくても、記号データＳを用いて楽音データＭ内の対応する楽音を指定できる。 According to the music data processing method and the music data processing device 1 of the present invention, the arrangement of the symbols indicated by the symbol data S related to the music and the corresponding melody or chord progression 104, and the waveform of the sound indicated by the music data M related to the music. By comparing with the arrangement of the melody or chord progression corresponding to, the correspondence relationship between the position of each of the plurality of symbols in the symbol data S and the position of each part of the sound waveform in the music sound data M is specified, and the correspondence relationship in the symbol data S is specified. When the user instructs the symbol position PS, which is the position of the symbol, the position of the sound waveform in the music data corresponding to the symbol position PS is specified as the music position PM based on the specified correspondence relationship, so that the music data Even if the correspondence between the position in M and the position indicated by the symbol data S is not stored in advance, the corresponding music in the music data M can be specified by using the symbol data S.

本発明の楽音データ処理方法及び楽音データ処理装置１によれば、記号データＳ及び楽音データＭを取得し、取得した記号データＳが示す記号の並びを解析してメロディ又はコード進行の配列を示す第１解析データＳ’を生成し、取得した楽音データＭが示す音の波形を解析してメロディ又はコード進行の配列を示す第２解析データＭ’を生成し、第１解析データＳ’と第２解析データＭ’とを比較することにより、記号データＳにおける複数の記号それぞれの位置と楽音データＭにおける音の波形の各部の位置との対応関係を特定するので、記号データＳにおける指定箇所から、その箇所に対応する楽音データＭを再生したり、記号データＳにおけるコードと一致する又は対応するコードの部分を、記号データＳ又は楽音データＭの中から検索したりできる。よって、楽音データＭの再生する範囲を時刻で指定したりすることなく、楽譜等の記号データＳが表示された表示画面１００に対する直感的な操作によって、楽音データＭにおけるループ再生する範囲や検索したいコード進行を指定することができ、楽器練習や耳コピなどを行う際の手間を少なくできる。 According to the music sound data processing method and the music sound data processing apparatus 1 of the present invention, the symbol data S and the music sound data M are acquired, the sequence of symbols indicated by the acquired symbol data S is analyzed, and an arrangement of melody or chord progression is shown. The first analysis data S'is generated, the waveform of the sound indicated by the acquired music sound data M is analyzed to generate the second analysis data M'showing the arrangement of the melody or chord progression, and the first analysis data S'and the first 2 By comparing with the analysis data M', the correspondence between the position of each of the plurality of symbols in the symbol data S and the position of each part of the sound waveform in the music sound data M is specified. , The music sound data M corresponding to the portion can be reproduced, and the part of the code that matches or corresponds to the code in the symbol data S can be searched from the symbol data S or the music data M. Therefore, without specifying the reproduction range of the musical sound data M by the time, it is desired to search the range of the loop reproduction in the musical sound data M and the search by intuitive operation on the display screen 100 on which the symbol data S such as the musical score is displayed. You can specify the chord progression, and you can reduce the time and effort when practicing musical instruments and copying by ear.

本発明の楽音データ処理方法及び楽音データ処理装置１によれば、記号データＳは、楽曲に係るコードの並びを示すコード譜であるので、コード譜からはメロディが直接認識できなくても、記号データＳに基づき、記号データＳに対応する楽音データＭを再生し、メロディを認識できる。 According to the musical tone data processing method and the musical tone data processing apparatus 1 of the present invention, the symbol data S is a chord notation indicating the sequence of chords related to the music, and therefore, even if the melody cannot be directly recognized from the chord notation, the symbols Based on the data S, the musical tone data M corresponding to the symbol data S can be reproduced and the melody can be recognized.

本発明の楽音データ処理方法及び楽音データ処理装置１によれば、制御部１０は、特定された楽音位置ＰＭに基づいて楽音データＭを再生するので、楽音データＭ内の位置と、記号データＳが示す位置との対応関係があらかじめ記憶されていなくても、記号データＳを用いて楽音データＭ内の対応する楽音を再生できる。 According to the musical tone data processing method and the musical tone data processing device 1 of the present invention, the control unit 10 reproduces the musical tone data M based on the specified musical tone position PM, so that the position in the musical tone data M and the symbol data S Even if the correspondence relationship with the position indicated by is not stored in advance, the corresponding musical tone in the musical tone data M can be reproduced by using the symbol data S.

本発明の楽音データ処理方法及び楽音データ処理装置１によれば、記号データＳが示す記号の並びを表示部３０に表示した状態で、操作入力部２０によりユーザが記号位置ＰＳを指示する操作を行ったことに応じて、特定された対応関係に基づき、記号位置ＰＳに対応する楽音位置ＰＭを特定するので、ユーザが表示部３０を見ながら操作入力部２０を直感的に操作することができる。 According to the music sound data processing method and the music sound data processing device 1 of the present invention, the user instructs the symbol position PS by the operation input unit 20 in a state where the sequence of symbols indicated by the symbol data S is displayed on the display unit 30. Since the music position PM corresponding to the symbol position PS is specified based on the specified correspondence relationship according to what has been done, the user can intuitively operate the operation input unit 20 while looking at the display unit 30. ..

本発明の楽音データ処理方法及び楽音データ処理装置１によれば、表示部３０に、楽曲に係る音符とコードの両方の並びが記された楽譜を記号データＳとして表示した状態で、操作入力部２０によりユーザが指示操作した記号位置ＰＳが音符とコードのどちらであるかを判断し、音符の位置が指示操作されたと判断された場合には、記号データＳが示す記号の並びに対応するメロディの配列と、楽音データＭが示す音の波形に対応するメロディの配列とを比較することにより、記号データＳにおける複数の記号それぞれの位置と楽音データＭにおける音の波形の各部の位置との対応関係を特定し、コードの位置が指示操作されたと判断された場合には、記号データＳが示す記号の並びに対応するコード進行の配列と、楽音データＭが示す音の波形に対応するコード進行の配列とを比較することにより、記号データＳにおける複数の記号それぞれの位置と楽音データＭにおける音の波形の各部の位置との対応関係を特定するので、楽譜に音符とコード譜とが混在していても、記号データＳと楽音データＭとを適切に関係付けられる。 According to the music sound data processing method and the music sound data processing device 1 of the present invention, the operation input unit is in a state where the display unit 30 displays the score in which both the notes and chords related to the music are arranged as symbol data S. 20 determines whether the symbol position PS instructed and operated by the user is a note or a chord, and when it is determined that the position of the note is instructed and operated, the sequence of symbols indicated by the symbol data S and the corresponding melody By comparing the array with the array of melody corresponding to the sound waveform indicated by the music data M, the correspondence between the positions of the plurality of symbols in the symbol data S and the positions of each part of the sound waveform in the music data M. When it is determined that the chord position has been instructed and manipulated, the arrangement of the symbols indicated by the symbol data S and the corresponding chord progression array and the chord progression array corresponding to the sound waveform indicated by the music data M By comparing with, the correspondence between the position of each of the plurality of symbols in the symbol data S and the position of each part of the sound waveform in the music sound data M is specified. Also, the symbol data S and the music sound data M can be appropriately related.

本発明の楽音データ処理方法及び楽音データ処理装置１によれば、記号データＳが示す記号の並びに対応するコード進行、又は楽音データが示す音の波形に対応するコード進行が、規定のコード進行のパターンから外れる場合は、エラーを示す情報を出力するので、ユーザに対して、記号データＳ又は楽音データＭの修正や変更を促すことができる。 According to the music sound data processing method and the music sound data processing apparatus 1 of the present invention, the chord progression corresponding to the symbol sequence indicated by the symbol data S or the sound waveform indicated by the music sound data is defined as the chord progression. When it deviates from the pattern, information indicating an error is output, so that the user can be urged to correct or change the symbol data S or the musical sound data M.

本発明の楽音データ処理方法及び楽音データ処理装置１によれば、記号データＳが示す記号の並びに対応するコード進行、又は楽音データＭが示す音の波形に対応するコード進行が、規定のコード進行のパターンから外れる場合は、そのパターンから外れたコード進行を、最も類似する規定のコード進行のパターンに補正するので、ユーザに対して、記号データＳ又は楽音データＭにおける明らかな誤りの修正や変更を課すことがない。 According to the musical tone data processing method and the musical tone data processing apparatus 1 of the present invention, the chord progression corresponding to the sequence of the symbols indicated by the symbol data S or the corresponding chord progression or the chord progression corresponding to the sound waveform indicated by the musical tone data M is the specified chord progression. If it deviates from the pattern of, the chord progression deviating from that pattern is corrected to the most similar prescribed chord progression pattern, so that the user can correct or change an obvious error in the symbol data S or the musical tone data M. Do not impose.

本発明の楽音データ処理方法及び楽音データ処理装置１によれば、楽音データＭの再生中に、表示部３０に対して、再生位置を識別して表示させるので、ユーザは、現在再生している楽音位置ＰＭが、小節位置Ｐ又は記号位置ＰＳにおけるどの部分であるかをリアルタイムに目で追うことができる。 According to the musical tone data processing method and the musical tone data processing device 1 of the present invention, during the reproduction of the musical tone data M, the display unit 30 is made to identify and display the reproduction position, so that the user is currently reproducing the musical tone data. It is possible to visually follow in real time which part of the musical tone position PM is in the bar position P or the symbol position PS.

本発明の楽音データ処理方法及び楽音データ処理装置１によれば、楽音データＭの再生中に、表示部３０に表示されている記号データＳにおける再生位置に対応する記号の位置を識別して表示させるので、ユーザは、現在再生している楽音位置ＰＭが、記号位置ＰＳにおけるどの部分であるかをリアルタイムに目で追うことができる。 According to the musical tone data processing method and the musical tone data processing device 1 of the present invention, the position of the symbol corresponding to the reproduction position in the symbol data S displayed on the display unit 30 is identified and displayed during the reproduction of the musical tone data M. Therefore, the user can visually follow in real time which part of the symbol position PS the currently playing musical tone position PM is.

本発明の楽音データ処理方法及び楽音データ処理装置１によれば、表示部３０に記号データＳを表示させた状態で、記号データＳにおける記号の範囲である記号範囲が操作入力部２０によりユーザに指示操作された場合は、指示操作された記号範囲の開始位置に対応する楽音位置と終了位置に対応する楽音位置とを特定し、楽音データＭにおける特定された開始位置に対応する楽音位置から終了位置に対応する楽音位置までを再生するので、ユーザが表示部３０を見ながら操作入力部２０を直感的に操作することにより、再生したい範囲を指定して楽曲を再生することができる。 According to the musical tone data processing method and the musical tone data processing apparatus 1 of the present invention, in a state where the symbol data S is displayed on the display unit 30, the symbol range, which is the range of the symbols in the symbol data S, is transmitted to the user by the operation input unit 20. When the instruction is operated, the musical tone position corresponding to the start position and the musical tone position corresponding to the end position of the instruction-operated symbol range are specified, and the musical tone position is terminated from the musical tone position corresponding to the specified start position in the musical tone data M. Since the musical tone position corresponding to the position is reproduced, the user can intuitively operate the operation input unit 20 while looking at the display unit 30 to specify the range to be reproduced and reproduce the music.

本発明の楽音データ処理方法及び楽音データ処理装置１によれば、表示部３０に記号データＳを表示させた状態で、記号データＳにおける記号の範囲である記号範囲を操作入力部２０によりユーザに指示操作させ、指示操作された記号範囲に含まれる複数の記号の並びに対応する楽音データＭにおける音の波形の範囲である楽音範囲を検索するので、ユーザが表示部３０を見ながら操作入力部２０を直感的に操作することにより、検索したい楽曲の部分を検索できる。 According to the music sound data processing method and the music sound data processing device 1 of the present invention, in a state where the symbol data S is displayed on the display unit 30, the operation input unit 20 gives the user a symbol range which is a range of symbols in the symbol data S. Since the user is instructed to perform an instruction operation and searches for a music range that is a range of sound waveforms in the corresponding music data M and a plurality of symbols included in the instruction-operated symbol range, the user can look at the display unit 30 and search the operation input unit 20. You can search for the part of the song you want to search by intuitively operating.

本発明の楽音データ処理方法及び楽音データ処理装置１によれば、複数の楽曲それぞれに対応する複数の楽音データＭを取得し、取得された複数の楽音データＭの中から、記号データＳのメロディ又はコード進行の配列と、楽音データＭのメロディ又はコード進行の配列とが一致する楽音データＭを特定し、特定された楽音データＭを再生対象として指定するので、一つのコード譜等に対応する楽曲を、複数の楽曲の中から自動的に選択できる。
また、再生対象として指定された楽音データＭを対象として、表示部３０に表示された記号データＳに対して指示操作された記号位置ＰＳに基づく再生制御を行うので、一つのコード譜等に対応する楽曲を、複数の楽曲の中から自動的に選択し、再生できる。 According to the musical tone data processing method and the musical tone data processing device 1 of the present invention, a plurality of musical tone data M corresponding to each of a plurality of songs are acquired, and the melody of the symbol data S is obtained from the acquired plurality of musical tone data M. Alternatively, since the musical tone data M in which the arrangement of the chord progression and the melody of the musical tone data M or the arrangement of the musical tone data M match is specified and the specified musical tone data M is designated as the reproduction target, it corresponds to one chord notation or the like. A song can be automatically selected from multiple songs.
Further, since the reproduction control is performed based on the symbol position PS instructed and operated on the symbol data S displayed on the display unit 30 for the musical sound data M designated as the reproduction target, it corresponds to one chord notation or the like. You can automatically select and play the song you want to play from multiple songs.

本発明の楽音データ処理方法及び楽音データ処理装置１によれば、複数の楽曲それぞれに対応する複数の記号データＳを取得し、取得された複数の記号データＳの中から、楽音データＭのメロディ又はコード進行の配列と、記号データＳのメロディ又はコード進行の配列とが一致する記号データＳを特定し、特定された記号データＳを表示部３０に表示した状態で、操作入力部２０により記号位置ＰＳをユーザに指示操作させるので、一つの楽曲に対応するコード譜等を、複数のコード譜等の中から自動的に選択して表示できる。 According to the music sound data processing method and the music sound data processing device 1 of the present invention, a plurality of symbol data S corresponding to each of a plurality of songs are acquired, and the melody of the music sound data M is obtained from the acquired plurality of symbol data S. Alternatively, the symbol data S in which the arrangement of the chord progression and the melody of the symbol data S or the arrangement of the chord progression match is specified, and the specified symbol data S is displayed on the display unit 30, and the symbol is displayed by the operation input unit 20. Since the position PS is instructed and operated by the user, the chord notation or the like corresponding to one song can be automatically selected and displayed from a plurality of chord notations or the like.

本発明の楽音データ処理方法及び楽音データ処理装置１によれば、操作入力部２０及び表示部３０は、両者が組み合わされたタッチパネルであるので、操作入力部２０によって操作指示する小節位置Ｐが、表示部３０の表示画面１００に表示された記号位置ＰＳと一致し、指定箇所である記号位置ＰＳを視覚的に操作指示しやすい。 According to the music sound data processing method and the music sound data processing device 1 of the present invention, since the operation input unit 20 and the display unit 30 are touch panels in which both are combined, the bar position P instructed by the operation input unit 20 is set. It matches the symbol position PS displayed on the display screen 100 of the display unit 30, and it is easy to visually instruct the symbol position PS, which is a designated location.

以下に、この出願の願書に最初に添付した特許請求の範囲に記載した発明を付記する。付記に記載した請求項の項番は、この出願の願書に最初に添付した特許請求の範囲のとおりである。
＜請求項１＞
楽曲に係る記号データが示す複数の記号の並びに対応するメロディ又はコード進行の配列と、楽曲に係る楽音データが示す音の波形に対応するメロディ又はコード進行の配列とを比較することにより、前記記号データにおける複数の記号それぞれの位置と前記楽音データにおける音の波形の各部の位置との対応関係を特定し、
前記記号データにおけるいずれかの記号の位置を、記号位置としてユーザが指示することによって、前記特定された対応関係に基づき、前記記号位置に対応する前記楽音データにおける音の波形の位置を、楽音位置として特定することを特徴とする楽音データ処理方法。
＜請求項２＞
前記記号データ及び前記楽音データを取得し、
前記取得した記号データが示す記号の並びを解析してメロディ又はコード進行の配列を示す第１解析データを生成し、
前記取得した楽音データが示す音の波形を解析してメロディ又はコード進行の配列を示す第２解析データを生成し、
前記第１解析データと前記第２解析データとを比較することにより、前記記号データにおける複数の記号それぞれの位置と前記楽音データにおける音の波形の各部の位置との対応関係を特定する
ことを特徴とする請求項１に記載の楽音データ処理方法。
＜請求項３＞
前記記号データが示す記号の並びを、画像認識を用いた方法により解析してメロディ又はコード進行の配列を示す第１解析データを生成し、
前記楽音データが示す音の波形を、フーリエ変換を用いた方法により解析してメロディ又はコード進行の配列を示す第２解析データを生成する
ことを特徴とする請求項１又は請求項２に記載の楽音データ処理方法。
＜請求項４＞
前記記号データは、楽曲に係るコードの並びを示すコード譜である
ことを特徴とする請求項１から請求項３のいずれか１項に記載の楽音データ処理方法。
＜請求項５＞
前記記号データが示す記号の並びを表示部に表示した状態で、操作入力部によりユーザが記号位置を指示する操作を行ったことに応じて、前記特定された対応関係に基づき、前記記号位置に対応する前記楽音位置を特定し、
前記特定された前記楽音位置に基づいて前記楽音データを再生する
ことを特徴とする請求項１から請求項４のいずれか１項に記載の楽音データ処理方法。
＜請求項６＞
表示部に、楽曲に係る音符とコードの両方の並びが記された楽譜を前記記号データとして表示した状態で、操作入力部によりユーザが指示操作した記号位置が音符とコードのどちらであるかを判断し、音符の位置が指示操作されたと判断された場合には、前記記号データが示す記号の並びに対応するメロディの配列と、前記楽音データが示す音の波形に対応するメロディの配列とを比較することにより、前記記号データにおける複数の記号それぞれの位置と前記楽音データにおける音の波形の各部の位置との対応関係を特定し、コードの位置が指示操作されたと判断された場合には、前記記号データが示す記号の並びに対応するコード進行の配列と、前記楽音データが示す音の波形に対応するコード進行の配列とを比較することにより、前記記号データにおける複数の記号それぞれの位置と前記楽音データにおける音の波形の各部の位置との対応関係を特定する
ことを特徴とする請求項１から請求項５のいずれか１項に記載の楽音データ処理方法。
＜請求項７＞
前記記号データが示す記号の並びに対応するコード進行、又は前記楽音データが示す音の波形に対応するコード進行が、規定のコード進行のパターンから外れる場合は、エラーを示す情報を出力するか、あるいは、そのパターンから外れたコード進行を、最も類似する規定のコード進行のパターンに補正する
ことを特徴とする請求項１から請求項６のいずれか１項に記載の楽音データ処理方法。
＜請求項８＞
前記楽音データの再生中に、表示部に表示されている前記記号データにおける再生位置に対応する記号の位置を識別して表示させる
ことを特徴とする請求項１から請求項７のいずれか１項に記載の楽音データ処理方法。
＜請求項９＞
表示部に前記記号データを表示させた状態で、前記記号データにおける記号の範囲である記号範囲が操作入力部によりユーザに指示操作された場合は、
前記指示操作された記号範囲の開始位置に対応する楽音位置と終了位置に対応する楽音位置とを特定し、
前記楽音データにおける前記特定された開始位置に対応する楽音位置から終了位置に対応する楽音位置までを再生する
ことを特徴とする請求項１から請求項８のいずれか１項に記載の楽音データ処理方法。
＜請求項１０＞
表示部に前記記号データを表示させた状態で、前記記号データにおける記号の範囲である記号範囲を操作入力部によりユーザに指示操作させ、
前記指示操作された記号範囲に含まれる複数の記号の並びに対応する前記楽音データにおける音の波形の範囲である楽音範囲を検索する
ことを特徴とする請求項１から請求項８のいずれか１項に記載の楽音データ処理方法。
＜請求項１１＞
複数の楽曲それぞれに対応する複数の楽音データを取得し、
前記取得された複数の楽音データの中から、前記記号データのメロディ又はコード進行の配列と、前記楽音データのメロディ又はコード進行の配列とが一致する楽音データを特定し、
前記特定された楽音データを再生対象として指定し、
前記再生対象として指定された楽音データを対象として、表示部に表示された記号データに対して指示操作された記号位置に基づく再生制御を行う
ことを特徴とする請求項１から請求項１０のいずれか１項に記載の楽音データ処理方法。
＜請求項１２＞
前記操作入力部及び前記表示部は、両者が組み合わされたタッチパネルであり、
前記特定された記号データを前記表示部に表示した状態で、前記操作入力部により記号位置をユーザに指示操作させる
ことを特徴とする請求項５に記載の楽音データ処理方法。
＜請求項１３＞
請求項１から請求項１２のいずれか１項に記載の楽音データ処理方法を実行する制御部と、
前記記号データが示す記号の並びを表示する表示部と、
ユーザが前記記号位置を指示する操作を行う操作入力部と、を備える
ことを特徴とする楽音データ処理装置。 The inventions described in the claims originally attached to the application of this application are added below. The claim numbers given in the appendix are the scope of the claims originally attached to the application for this application.
<Claim 1>
By comparing the arrangement of a plurality of symbols indicated by the symbol data related to the music and the arrangement of the corresponding melody or chord progression with the arrangement of the melody or chord progression corresponding to the sound waveform indicated by the musical tone data related to the music, the symbols The correspondence between the position of each of the plurality of symbols in the data and the position of each part of the sound waveform in the musical sound data is specified.
By instructing the position of any symbol in the symbol data as the symbol position, the position of the sound waveform in the music data corresponding to the symbol position is set to the music position based on the specified correspondence relationship. A musical sound data processing method characterized by being specified as.
<Claim 2>
Acquire the symbol data and the musical tone data,
The sequence of symbols indicated by the acquired symbol data is analyzed to generate first analysis data indicating an array of melody or chord progression.
The waveform of the sound indicated by the acquired musical tone data is analyzed to generate a second analysis data indicating an array of melody or chord progression.
By comparing the first analysis data with the second analysis data, it is characterized in that the correspondence between the positions of the plurality of symbols in the symbol data and the positions of each part of the sound waveform in the musical tone data is specified. The musical sound data processing method according to claim 1.
<Claim 3>
The sequence of symbols indicated by the symbol data is analyzed by a method using image recognition to generate first analysis data showing an array of melody or chord progression.
The first or second aspect of claim 1, wherein the sound waveform indicated by the musical tone data is analyzed by a method using a Fourier transform to generate second analysis data showing an array of melody or chord progression. Musical tone data processing method.
<Claim 4>
The musical tone data processing method according to any one of claims 1 to 3, wherein the symbol data is a chord notation indicating a sequence of chords related to a musical piece.
<Claim 5>
In a state where the sequence of symbols indicated by the symbol data is displayed on the display unit, the operation input unit performs an operation of instructing the symbol position, and the symbol position is set to the symbol position based on the specified correspondence. Identify the corresponding musical tone position and
The musical tone data processing method according to any one of claims 1 to 4, wherein the musical tone data is reproduced based on the specified musical tone position.
<Claim 6>
In a state where the score in which both the notes and chords related to the music are arranged is displayed as the symbol data on the display unit, whether the symbol position instructed and operated by the user by the operation input unit is the note or the chord. If it is determined that the position of the note has been instructed, the arrangement of the symbols indicated by the symbol data and the arrangement of the corresponding melody are compared with the arrangement of the melody corresponding to the waveform of the sound indicated by the music data. By doing so, the correspondence between the position of each of the plurality of symbols in the symbol data and the position of each part of the sound waveform in the music sound data is specified, and when it is determined that the position of the chord is instructed, the above-mentioned By comparing the arrangement of the symbols indicated by the symbol data and the arrangement of the corresponding chord progressions with the arrangement of the chord progressions corresponding to the waveform of the sound indicated by the music sound data, the positions of the plurality of symbols in the symbol data and the music sound are compared. The music data processing method according to any one of claims 1 to 5, wherein the correspondence relationship with the position of each part of the sound waveform in the data is specified.
<Claim 7>
If the chord progression corresponding to the chord progression indicated by the symbol data or the chord progression corresponding to the sound waveform indicated by the musical tone data deviates from the specified chord progression pattern, information indicating an error is output or the chord progression is output. The music data processing method according to any one of claims 1 to 6, wherein the chord progression deviating from the pattern is corrected to the most similar prescribed chord progression pattern.
<Claim 8>
Any one of claims 1 to 7, wherein the position of the symbol corresponding to the reproduction position in the symbol data displayed on the display unit is identified and displayed during the reproduction of the musical tone data. Musical tone data processing method described in.
<Claim 9>
When the symbol data is displayed on the display unit and the symbol range, which is the range of the symbols in the symbol data, is instructed and operated by the user by the operation input unit,
The musical tone position corresponding to the start position and the musical tone position corresponding to the end position of the indicated and operated symbol range are specified, and the musical tone position is specified.
The musical tone data processing according to any one of claims 1 to 8, wherein the musical tone data from the musical tone position corresponding to the specified start position to the musical tone position corresponding to the end position is reproduced. Method.
<Claim 10>
With the symbol data displayed on the display unit, the user is instructed to operate the symbol range, which is the range of the symbols in the symbol data, by the operation input unit.
Any one of claims 1 to 8, wherein a musical tone range, which is a range of sound waveforms in the corresponding musical tone data, as well as a plurality of symbols included in the instruction-operated symbol range, is searched for. Musical tone data processing method described in.
<Claim 11>
Acquire multiple musical tone data corresponding to each of multiple songs,
From the acquired plurality of musical tone data, the musical tone data in which the arrangement of the melody or chord progression of the symbol data and the arrangement of the melody or chord progression of the musical sound data match is specified.
Designate the specified musical tone data as a playback target,
Any of claims 1 to 10, wherein the reproduction control based on the symbol position instructed and operated on the symbol data displayed on the display unit is performed on the music sound data designated as the reproduction target. The music data processing method according to item 1.
<Claim 12>
The operation input unit and the display unit are touch panels in which both are combined.
The musical sound data processing method according to claim 5, wherein the user is instructed to operate the symbol position by the operation input unit while the specified symbol data is displayed on the display unit.
<Claim 13>
A control unit that executes the musical tone data processing method according to any one of claims 1 to 12.
A display unit that displays the sequence of symbols indicated by the symbol data, and
A musical sound data processing device including an operation input unit for performing an operation in which a user indicates a symbol position.

１ 楽音データ処理装置
１０ 制御部
２０ 操作入力部
３０ 表示部
４０ 記憶部
Ｓ 記号データ
Ｓ’ 第１解析データ
Ｍ 楽音データ
Ｍ’ 第２解析データ
ＰＳ 記号位置
ＰＭ 楽音位置
Ｐ 小節位置
Ｃ コード（共通コード）
ＣＳ コード
ＣＭ コード
１００ 表示画面
１０１ 再生ボタン
１０２ 検索ボタン
１０４ コード進行
１０５ 歌詞 1 Musical sound data processing device 10 Control unit 20 Operation input unit 30 Display unit 40 Storage unit S Symbol data S'First analysis data M Musical sound data M'Second analysis data PS Symbol position PM Musical sound position P Measure position C code (common code) )
CS code CM code 100 Display screen 101 Play button 102 Search button 104 Chord progression 105 Lyrics

Claims (14)

楽曲に係るコードの並びを示すコード譜である記号データが示す複数の記号の並びに対応するメロディ又はコード進行の配列と、楽曲に係る楽音データが示す音の波形に対応するメロディ又はコード進行の配列とを比較することにより、前記記号データにおける複数の記号それぞれの位置と前記楽音データにおける音の波形の各部の位置との対応関係を特定し、
前記特定された対応関係に基づき、前記記号データを用いた処理と前記楽音データを用いた処理の実行を制御する、
楽音データ処理方法。 An array of a plurality of symbols indicated by symbol data, which is a chord notation indicating a sequence of chords related to a music, and an array of corresponding melody or chord progressions, and an array of melody or chord progressions corresponding to the sound waveform indicated by the musical tone data related to the music. By comparing with, the correspondence relationship between the position of each of the plurality of symbols in the symbol data and the position of each part of the sound waveform in the musical tone data is specified.
Based on the specified correspondence, the execution of the process using the symbol data and the process using the musical tone data is controlled.
Musical tone data processing method. 表示部に、楽曲に係る音符とコードの両方の並びが記された楽譜を記号データとして表示した状態で、操作入力部によりユーザが指示操作した記号位置が音符とコードのどちらであるかを判断し、
音符の位置が指示操作されたと判断された場合には、前記記号データが示す記号の並びに対応するメロディの配列と、楽曲に係る楽音データが示す音の波形に対応するメロディの配列とを比較することにより、前記記号データにおける複数の記号それぞれの位置と前記楽音データにおける音の波形の各部の位置との対応関係を特定し、
コードの位置が指示操作されたと判断された場合には、前記記号データが示す記号の並びに対応するコード進行の配列と、前記楽音データが示す音の波形に対応するコード進行の配列とを比較することにより、前記記号データにおける複数の記号それぞれの位置と前記楽音データにおける音の波形の各部の位置との対応関係を特定し、
前記特定された対応関係に基づき、前記記号データを用いた処理と前記楽音データを用いた処理の実行を制御する、
楽音データ処理方法。 In the state where the musical score in which both the notes and chords related to the music are arranged is displayed as symbol data on the display unit, the operation input unit determines whether the symbol position instructed and operated by the user is a note or a chord. death,
When it is determined that the position of the note has been instructed, the arrangement of the symbols indicated by the symbol data and the arrangement of the corresponding melody are compared with the arrangement of the melody corresponding to the waveform of the sound indicated by the musical tone data related to the music. Thereby, the correspondence relationship between the position of each of the plurality of symbols in the symbol data and the position of each part of the sound waveform in the musical tone data is specified.
When it is determined that the position of the chord is instructed, the arrangement of the symbols indicated by the symbol data and the corresponding arrangement of the chord progressions are compared with the arrangement of the chord progressions corresponding to the waveform of the sound indicated by the musical tone data. Thereby, the correspondence relationship between the position of each of the plurality of symbols in the symbol data and the position of each part of the sound waveform in the musical tone data is specified .
Based on the specified correspondence, the execution of the process using the symbol data and the process using the musical tone data is controlled.
Musical tone data processing method. 楽曲に係る記号データが示す複数の記号の並びに対応するメロディ又はコード進行の配列と、楽曲に係る楽音データが示す音の波形に対応するメロディ又はコード進行の配列とを比較することにより、前記記号データにおける複数の記号それぞれの位置と前記楽音データにおける音の波形の各部の位置との対応関係を特定し、
前記特定された対応関係に基づき、前記記号データが示す記号の並びに対応するコード進行、又は前記楽音データが示す音の波形に対応するコード進行が、規定のコード進行のパターンから外れる場合は、エラーを示す情報を出力するか、あるいは、規定のコード進行のパターンから外れたコード進行を、最も類似する規定のコード進行のパターンに補正する処理の実行を制御する、
楽音データ処理方法。 By comparing the arrangement of a plurality of symbols indicated by the symbol data related to the music and the arrangement of the corresponding melody or chord progression with the arrangement of the melody or chord progression corresponding to the sound waveform indicated by the musical tone data related to the music, the symbols The correspondence between the position of each of the plurality of symbols in the data and the position of each part of the sound waveform in the musical sound data is specified.
If the chord progression corresponding to the chord progression indicated by the symbol data or the chord progression indicated by the musical tone data deviates from the specified chord progression pattern based on the specified correspondence, an error occurs. Controls the execution of the process of correcting the chord progression that deviates from the prescribed chord progression pattern to the most similar prescribed chord progression pattern.
Musical tone data processing method. 前記特定された対応関係に基づき、前記楽音データにおいて再生される音の波形の位置と、前記記号データにおいて識別して表示される記号の位置とを一致させるように制御する、請求項１乃至３のいずれか一項に記載の楽音データ処理方法。 Claims 1 to 3 that control the position of the waveform of the sound reproduced in the musical tone data and the position of the symbol identified and displayed in the symbol data so as to match based on the specified correspondence. The musical sound data processing method according to any one of the above. 前記特定された対応関係に基づき、前記記号データにおいて指定された記号の位置と、前記楽音データにおいて再生される音の波形の位置とを一致させるように制御する、請求項１乃至４のいずれか一項に記載の楽音データ処理方法。 Any of claims 1 to 4, which controls the position of the symbol specified in the symbol data and the position of the waveform of the sound reproduced in the musical tone data so as to match based on the specified correspondence. The musical sound data processing method described in item 1. 前記記号データ及び前記楽音データを取得し、
前記取得した記号データが示す記号の並びを解析してメロディ又はコード進行の配列を示す第１解析データを生成し、
前記取得した楽音データが示す音の波形を解析してメロディ又はコード進行の配列を示す第２解析データを生成し、
前記第１解析データと前記第２解析データとを比較することにより、前記記号データにおける複数の記号それぞれの位置と前記楽音データにおける音の波形の各部の位置との対応関係を特定する、請求項１乃至５のいずれか一項に記載の楽音データ処理方法。 Acquire the symbol data and the musical tone data,
The sequence of symbols indicated by the acquired symbol data is analyzed to generate first analysis data indicating an array of melody or chord progression.
The waveform of the sound indicated by the acquired musical tone data is analyzed to generate a second analysis data indicating an array of melody or chord progression.
The claim that the correspondence relationship between the position of each of the plurality of symbols in the symbol data and the position of each part of the sound waveform in the musical tone data is specified by comparing the first analysis data and the second analysis data. The musical sound data processing method according to any one of 1 to 5. 前記記号データが示す記号の並びを、画像認識を用いた方法により解析してメロディ又はコード進行の配列を示す前記第１解析データを生成し、
前記楽音データが示す音の波形を、フーリエ変換を用いた方法により解析してメロディ又はコード進行の配列を示す前記第２解析データを生成する、請求項６に記載の楽音データ処理方法。 The sequence of symbols indicated by the symbol data is analyzed by a method using image recognition to generate the first analysis data showing an array of melody or chord progression.
The music data processing method according to claim 6, wherein the waveform of the sound indicated by the music data is analyzed by a method using Fourier transform to generate the second analysis data showing an arrangement of melody or chord progression. 前記記号データが示す記号の並びを表示部に表示した状態で、操作入力部によりユーザが記号位置を指示する操作を行ったことに応じて、前記特定された対応関係に基づき、前記記号位置に対応する楽音位置を特定し、
前記特定された前記楽音位置に基づいて前記楽音データを再生する、請求項１乃至７のいずれか１項に記載の楽音データ処理方法。 In a state where the sequence of symbols indicated by the symbol data is displayed on the display unit, the operation input unit performs an operation of instructing the symbol position, and the symbol position is set to the symbol position based on the specified correspondence. Identify the corresponding musical tone position and
The musical tone data processing method according to any one of claims 1 to 7, wherein the musical tone data is reproduced based on the specified musical tone position. 表示部に前記記号データを表示させた状態で、前記記号データにおける記号の範囲である記号範囲が操作入力部によりユーザに指示操作された場合は、前記指示操作された記号範囲の開始位置に対応する楽音位置と終了位置に対応する楽音位置とを特定し、
前記楽音データにおける前記特定された開始位置に対応する楽音位置から終了位置に対応する楽音位置までを再生する、請求項１乃至請求項８のいずれか１項に記載の楽音データ処理方法。 When the symbol range, which is the range of symbols in the symbol data, is instructed and operated by the user by the operation input unit while the symbol data is displayed on the display unit, it corresponds to the start position of the symbol range instructed and operated. Identify the musical tone position to be played and the musical tone position corresponding to the ending position,
The musical tone data processing method according to any one of claims 1 to 8, wherein the musical tone data from the musical tone position corresponding to the specified start position to the musical tone position corresponding to the end position is reproduced. 表示部に前記記号データを表示させた状態で、前記記号データにおける記号の範囲である記号範囲を操作入力部によりユーザに指示操作させ、
前記指示操作された記号範囲に含まれる複数の記号の並びに対応する前記楽音データにおける音の波形の範囲である楽音範囲を検索する、請求項１乃至請求項９のいずれか１項に記載の楽音データ処理方法。 With the symbol data displayed on the display unit, the user is instructed to operate the symbol range, which is the range of the symbols in the symbol data, by the operation input unit.
The musical tone according to any one of claims 1 to 9, which searches for a musical tone range which is a range of sound waveforms in the corresponding musical tone data as well as a plurality of symbols included in the instruction-operated symbol range. Data processing method. 複数の楽曲それぞれに対応する複数の楽音データを取得し、
前記取得された複数の楽音データの中から、前記記号データのメロディ又はコード進行の配列と、前記楽音データのメロディ又はコード進行の配列とが一致する楽音データを特定し、
前記特定された楽音データを再生対象として指定し、
前記再生対象として指定された楽音データを対象として、表示部に表示された記号データに対して指示操作された記号位置に基づく再生制御を行う、請求項１乃至請求項１０のいずれか１項に記載の楽音データ処理方法。 Acquire multiple musical tone data corresponding to each of multiple songs,
From the acquired plurality of musical tone data, the musical tone data in which the arrangement of the melody or chord progression of the symbol data and the arrangement of the melody or chord progression of the musical sound data match is specified.
Designate the specified musical tone data as a playback target,
10. The described music data processing method. 楽曲に係るコードの並びを示すコード譜である記号データが示す複数の記号の並びに対応するメロディ又はコード進行の配列と、楽曲に係る楽音データが示す音の波形に対応するメロディ又はコード進行の配列とを比較することにより、前記記号データにおける複数の記号それぞれの位置と前記楽音データにおける音の波形の各部の位置との対応関係を特定し、前記特定された対応関係に基づき、前記記号データを用いた処理と前記楽音データを用いた処理の実行を制御する制御部を備える楽音データ処理装置。 An arrangement of a plurality of symbols indicated by symbol data, which is a chord notation indicating the arrangement of chords related to a music, and an arrangement of corresponding melody or chord progressions, and an arrangement of melody or chord progressions corresponding to a sound waveform indicated by musical sound data related to the music. By comparing with and, the correspondence relationship between the position of each of the plurality of symbols in the symbol data and the position of each part of the sound waveform in the musical tone data is specified, and the symbol data is obtained based on the specified correspondence relationship. A musical sound data processing device including a control unit that controls the processing used and the execution of the processing using the musical sound data. 表示部に、楽曲に係る音符とコードの両方の並びが記された楽譜を記号データとして表示した状態で、操作入力部によりユーザが指示操作した記号位置が音符とコードのどちらであるかを判断し、
音符の位置が指示操作されたと判断された場合には、前記記号データが示す記号の並びに対応するメロディの配列と、楽曲に係る楽音データが示す音の波形に対応するメロディの配列とを比較することにより、前記記号データにおける複数の記号それぞれの位置と前記楽音データにおける音の波形の各部の位置との対応関係を特定し、
コードの位置が指示操作されたと判断された場合には、前記記号データが示す記号の並びに対応するコード進行の配列と、前記楽音データが示す音の波形に対応するコード進行の配列とを比較することにより、前記記号データにおける複数の記号それぞれの位置と前記楽音データにおける音の波形の各部の位置との対応関係を特定し、
前記特定された対応関係に基づき、前記記号データを用いた処理と前記楽音データを用いた処理の実行を制御する制御部を備える楽音データ処理装置。 In the state where the musical score in which both the notes and chords related to the music are arranged is displayed as symbol data on the display unit, the operation input unit determines whether the symbol position instructed and operated by the user is a note or a chord. death,
When it is determined that the position of the note has been instructed, the arrangement of the symbols indicated by the symbol data and the arrangement of the corresponding melody are compared with the arrangement of the melody corresponding to the waveform of the sound indicated by the musical tone data related to the music. Thereby, the correspondence relationship between the position of each of the plurality of symbols in the symbol data and the position of each part of the sound waveform in the musical tone data is specified.
When it is determined that the position of the chord is instructed, the arrangement of the symbols indicated by the symbol data and the corresponding arrangement of the chord progressions are compared with the arrangement of the chord progressions corresponding to the waveform of the sound indicated by the musical tone data. Thereby, the correspondence relationship between the position of each of the plurality of symbols in the symbol data and the position of each part of the sound waveform in the musical tone data is specified .
A musical tone data processing device including a control unit that controls execution of processing using the symbol data and processing using the musical tone data based on the specified correspondence. 楽曲に係る記号データが示す複数の記号の並びに対応するメロディ又はコード進行の配列と、楽曲に係る楽音データが示す音の波形に対応するメロディ又はコード進行の配列とを比較することにより、前記記号データにおける複数の記号それぞれの位置と前記楽音データにおける音の波形の各部の位置との対応関係を特定し、前記特定された対応関係に基づき、前記記号データが示す記号の並びに対応するコード進行、又は前記楽音データが示す音の波形に対応するコード進行が、規定のコード進行のパターンから外れる場合は、エラーを示す情報を出力するか、あるいは、規定のコード進行のパターンから外れたコード進行を、最も類似する規定のコード進行のパターンに補正する処理の実行を制御する制御部
を備える楽音データ処理装置。 By comparing the arrangement of a plurality of symbols indicated by the symbol data related to the music and the arrangement of the corresponding melody or chord progression with the arrangement of the melody or chord progression corresponding to the waveform of the sound indicated by the musical tone data related to the music, the symbols The correspondence between the positions of the plurality of symbols in the data and the positions of each part of the sound waveform in the musical tone data is specified, and based on the specified correspondence, the symbols indicated by the symbol data and the corresponding chord progressions, Alternatively, if the chord progression corresponding to the sound waveform indicated by the musical tone data deviates from the specified chord progression pattern, information indicating an error is output, or the chord progression deviating from the prescribed chord progression pattern is output. , A musical sound data processing device including a control unit that controls the execution of processing that corrects to the most similar prescribed chord progression pattern.

Images