JP2004118010A

JP2004118010A - 楽曲印象値自動付与装置

Info

Publication number: JP2004118010A
Application number: JP2002283389A
Authority: JP
Inventors: Tadahiko Kumamoto; 熊本　忠彦; Kimiko Uchimoto; 内元　公子
Original assignee: Communications Research Laboratory
Current assignee: Communications Research Laboratory
Priority date: 2002-09-27
Filing date: 2002-09-27
Publication date: 2004-04-15
Anticipated expiration: 2022-09-27
Also published as: JP3697515B2

Abstract

【課題】楽曲データを用いて楽曲印象値を自動的に付与する楽曲印象値自動付与装置を提供し、特に高精度な楽曲印象値の付与技術を提供する
【解決手段】コンピュータ処理可能な楽曲データ７を楽曲データ入力部９から入力し、物理的特徴量を抽出する楽曲基本特徴量抽出部１０、そのＮグラムを生成するＮグラム生成部１１、さらにＮグラム特徴量を生成するＮグラム特徴量生成部１２による各処理を行う。Ｎグラム特徴量から楽曲特徴量を抽出し、楽曲印象値演算部１３で楽曲印象値を算出する。
【選択図】　図１

Description

【０００１】
【発明の属する技術分野】
本発明は、楽曲データの処理装置に関するものであり、特に楽曲データから該楽曲の印象値を自動的に付与する装置に関わる。
【０００２】
【従来の技術】
音楽などの芸術作品に対する評価、例えばその作品に対する印象を決定することは、従来コンピュータなどの処理にはなじまないと考えられていた。そのため、例えば楽曲の印象によって作品の印象を分類するとしても、分類作業自体は人間が行うものであった。従って、まったく新しい楽曲に対して新しい印象値をコンピュータによって付与することが課題となっている。
【０００３】
本件出願人らをはじめとして、従来までの研究によると、コンピュータにおいて楽曲印象値を自動的に付与するということは、コンピュータが処理可能な楽曲データから、どのような楽曲特徴量を抽出し、どのような計算式を用いて、どのような楽曲印象値を出力するのか、という問題を中心に議論が進められている。
ここで、楽曲印象値とは、楽曲印象を数値化したものであり、楽曲特徴量とは、楽曲データから抽出し、楽曲印象値を計算するために用いられる物理的特徴量を指している。
【０００４】
従って、上記の課題は楽曲印象値の設計、楽曲特徴量の設計、楽曲印象値計算式の設計についての技術的課題と言うことができ、いくつかの研究が行われてきたが、いずれも断片的なものにとどまり、未だに全体的な設計が行われて的確な楽曲印象値を自動的に付与する装置は提供されていない。
【０００５】
例えば、楽曲印象値の設計において、非特許文献１によれば、ＳＤ（Ｓｅｍａｎｔｉｃ　Ｄｉｆｆｅｒｅｎｔｉａｌ）法に基づく主観評価実験データに対する因子分析の結果から、音楽感性空間と呼ばれる５次元の因子空間を構成し、ユーザが入力する印象と楽曲が有する印象とをこの空間内の座標値として表している。
【０００６】
しかしながら、因子軸の意味の解釈は人手によるので個人差があり、楽曲に付与された座標値が実際にどのような印象を表しているのかを端的に示すことは難しい。また、楽曲の印象を１つの点で表しているため、すべての印象尺度（非特許文献１のシステムでは８個）に何らかの値を入力しなければならず、印象尺度に対する評価として「どちらでもない（楽曲印象値が不定な状態）」を認めていない。
そのため、明るい楽曲を検索するつもりで、明るさに関する印象尺度の評価を「明るい」にしても、実際には明るさ以外の印象尺度に対して「どちらとも言えない」に相当する値（１点〜７点の７段階評価では４点）を持つ楽曲が検索されることになる。
【０００７】
【非特許文献１】池添剛、梶川嘉延、野村康雄：「音楽感性空間を用いた感性語による音楽データベース検索システム」　情処学論，４２，１２，ｐｐ．３２０１−３２１２（２００１）
【０００８】
また、楽曲特徴量の設計においては、非特許文献１〜３に発表された研究などがある。これらの研究をはじめとする従来の楽曲データを対象とする楽曲検索研究では、楽曲特徴量として、音の高さや強さ、長さ、リズムやテンポ、拍子、調性（短調／長調）等の音楽構成要素に対する平均や分散、時間的割合といった静的な特徴量を用いていることが多い。
しかしながら、本来時系列データである楽曲を静的な特徴量だけで表現するのは本質的に限界があるものと考えられる。
【０００９】
【非特許文献２】佐藤聡、菊地幸平、北上始：「音楽データを対象としたイメージ検索のための感情価の自動生成」、情処研報，データベースシステム１１８−８，情報学基礎５４−８，ｐｐ．５７−６４（１９９９）
【非特許文献３】佐藤聡、小川潤、堀野義博、北上始：「感情に基づく音楽作品検索システムの実現に向けての検討」、信学技報（音声），ＳＰ２０００−１３７，ｐｐ．５１−５６（２００１）
【００１０】
従来研究（非特許文献２〜４）でも、このような音の時間的推移を考慮した特徴量として、連続する３音の音の高さや長さの推移をパターン化したものなどが提案されているが、連続する音の数が一定であり、限定的な時間推移しか取り扱えなかった。
【００１１】
【非特許文献４】辻康博、星守、大森匡：「曲の局所パターン特徴量を用いた類似曲検索・感性語による検索」、信学技報（音声），ＳＰ９６−１２４，ｐｐ．１７−２４（１９９７）
【００１２】
【発明が解決しようとする課題】
本発明は上記従来の技術が有する問題に鑑みて創出されたものであって、楽曲データを用いて楽曲印象値を自動的に付与する楽曲印象値自動付与装置を提供することを課題とし、特に高精度な楽曲印象値の付与技術の提供を目的とする。
【００１３】
【課題を解決するための手段】
本発明は上記課題の解決を図るため、次のような手段を創出した。
すなわち、少なくともコンピュータ処理が可能な所定のデータ規格に基づく楽曲データに対して、当該楽曲が有する印象を自動的に数値化し、付与する楽曲印象値自動付与装置を提供する。
本装置は、楽曲データを入力する入力手段と、楽曲データにおける、楽曲印象に係る物理的特徴量である楽曲基本特徴量を抽出する楽曲基本特徴量抽出手段を備える。そして、楽曲基本特徴量から、Ｎグラムを生成するＮグラム生成手段と、異なりＮグラムを用いてＮグラム特徴量を生成するＮグラム特徴量生成手段と、Ｎグラム特徴量を用い、所定の楽曲印象値計算式による演算を行う楽曲印象値演算手段と、楽曲印象値を出力する出力手段とを備える。
【００１４】
ここで、前記Ｎグラム特徴量生成手段が、前記異なりＮグラムの相対出現頻度と、所定の重み値を乗じてＮグラム特徴量を生成してもよい。
【００１５】
前記楽曲印象値計算式が、重回帰式であってもよい。
【００１６】
楽曲印象値自動付与装置が、複数の印象尺度についての印象値を付与する構成において、Ｎグラム特徴量生成手段が、印象尺度毎にＮグラム特徴量を生成すると共に、楽曲印象値演算手段とが、該印象尺度毎に、該Ｎグラム特徴量を用いて演算を行う構成でもよい。
【００１７】
前記データ規格が、ＭＩＤＩ（ｍｕｓｉｃａｌ　ｉｎｓｔｒｕｍｅｎｔ　ｄｉｇｉｔａｌ　ｉｎｔｅｒｆａｃｅ）規格であってもよい。
【００１８】
本発明の楽曲印象値自動付与装置は、入力手段から楽曲データを入力し、楽曲データが含む複数のトラックチャンク及び／又はチャネルを分割し、各トラックチャンク及び／又はチャネル毎に楽曲基本特徴量抽出手段に出力するストリーム分割手段を備えてもよい。
【００１９】
楽曲基本特徴量が、音の高さ、音の強さ、音の長さ、音色情報とすることができる。
【００２０】
前記Ｎグラム特徴量生成手段において、複数のＮ値についてＮグラム特徴量を生成する構成でもよい。
【００２１】
印象尺度に、「静かな」・「落ち着いた」・「爽やかな」・「明るい」・「荘厳な」・「ゆったりとした」・「綺麗な」・「楽しい」・「気持ちが落ち着く」・「心が癒される」の少なくともいずれかの文言、又はその同意語、又はその反意語としてもよい。
【００２２】
【発明の実施の形態】
本発明の実施形態を図面に示した実施例に基づいて説明する。なお、実施形態は、本発明の主旨から逸脱しないかぎり適宜変更可能なものである。
図１には本発明による楽曲印象値自動付与装置（以下、本装置と呼ぶ。）の構成図を示すと共に、図２に該装置における処理のフローチャートを示す。
【００２３】
本装置（１）は、主に演算等の処理を司る中核であるＣＰＵ（２）と、ユーザーに対して処理内容や結果を示す表示装置であるモニタ（３）、ユーザーが本装置（１）の操作を行うキーボード（４）、及びＣＰＵと連動して作用するメモリ（５）や、データを記憶可能な外部記憶装置（６）から構成される。
このような構成の装置として公知のパーソナルコンピュータがあり、本装置（１）はパーソナルコンピュータ上に実装することが可能である。
【００２４】
このような本装置（１）を用い、本発明では標準ＭＩＤＩファイルを入力し、自動的に楽曲印象値を付与し、それを出力する技術を創出した。各処理は図２に示す通りであり、標準ＭＩＤＩファイル（２０）から楽曲の印象に係る物理的特徴量である楽曲基本特徴量を抽出（２１）し、それを用いて連続する楽曲基本特徴量の組み合わせからＮグラムを生成した後、必要に応じ、重みや出現頻度を用いてＮグラム特徴量を生成する。（２２）
楽曲の特徴を表すのに有効なものを選択して楽曲特徴量の抽出（２３）を行い、楽曲印象値計算式に用いる。この演算処理を行うことで、本発明が目的とする楽曲印象値（２５）が算出される。
本実施例において、実数値で各印象尺度毎に１個の楽曲印象値が出力される。
次に各処理について詳述する。
【００２５】
標準ＭＩＤＩファイル（２０）は、本装置（１）に備えた外部記憶手段に楽曲ＭＩＤＩデータ（７）として記録されている。図１においては別体としているが、同じく外部記憶手段であるハードディスク（６）内に記録してもよいし、ネットワーク接続された別のコンピュータにおける外部記憶手段に記録してもよい。
ＣＰＵ（２）は楽曲データ入力部（９）の処理によって楽曲ＭＩＤＩデータ（７）を読み出し、楽曲基本特徴量抽出部（１０）に送る。
【００２６】
楽曲基本特徴量抽出部（１０）において、標準ＭＩＤＩファイル形式（フォーマット０または１）のデータ（７）から各トラックチャンク及び各チャネル毎に楽曲基本特徴量を抽出するストリーム分割機能を有する。標準ＭＩＤＩデータ（７）の場合には、トラックチャンク及びチャネルが並列的に記載されているため、各ストリームを別個に切り分けて抽出し、それぞれを１つのストリームデータとする。
【００２７】
例えば、１トラックチャンク・３チャネルの楽曲からは３つのストリームデータが生成される。本実施例において、抽出される楽曲基本特徴量は、音の高さ、音の強さ、音の長さ、音色情報の４種類であり、それぞれノートナンバー値、オンベロシティ値、ノートオンメッセージからノートオフメッセージが到着するまでの時間（ミリ秒）、ＧＭ（Ｇｅｎｅｒａｌ　ＭＩＤＩ）規格に基づく音色番号に対応している。
【００２８】
ここで、楽曲基本特徴量の抽出例としてストリームデータの一例を図３に示す。ストリームデータ（３０）において、各行の第１列が音の長さ（３１）、第２列が音の高さ（３２）、第３列が音の強さ（３３）、第４列が音色情報（３４）に対応している。
また、同一トラックチャンク同一チャネルにおいて、２音以上が同時に発音している場合を「和音」と定義し、和音がある場合は、２音目以降の楽曲基本特徴量（音の長さを除く）を第５列以降（３５）（３６）（３７）に繰り返し記述する。
各チャネルにおいて、そのチャネル（例えば３８）の無音状態を休符と定義し、音の長さを０、音の長さ以外を記号「ｓ」で表す。
このように楽曲基本特徴量抽出部（１０）で抽出されたデータは、ハードディスク（６）に記録される。
【００２９】
Ｎグラム特徴量の生成（２２）は、Ｎグラム生成部（１１）及びＮグラム特徴量生成部（１２）において処理する。Ｎグラム特徴量は、後処理で用いる楽曲特徴量の候補となる特徴量であり、以下の手順で楽曲基本特徴量から生成される。
まず、Ｎグラム生成部（１１）では、ハードディスク（６）上の楽曲基本特徴量データを用い、各ストリ−ムデータから４種類の楽曲基本特徴量を分離し、音色情報からはｕｎｉｇｒａｍ（１グラム、Ｎ＝１）を、それ以外の特徴量からはＮグラム（Ｎ＝１，２，３，４，５）を生成する。
【００３０】
例えば、図３に示されたストリームデータ（３０）の音の高さからは図４のようなＮグラム（４０）（４１）（４２）（４３）（４４）が生成される。なお、和音（３９ａ）（３９ｂ）（３９ｃ）は、値の大きい順に並べ替えられ、リスト形式の入れ子（４５）として記述される。
生成された結果はハードディスク（６）などに記録する。
【００３１】
次に、Ｎグラム特徴量生成部（１２）において、音色情報以外の楽曲基本特徴量から生成されたＮグラムの各要素（ｘ_１ｘ_２・・ｘ_Ｎ）を表１、表２の抽象化ルールに基づいて置換する。
【００３２】
【表１】

【００３３】
【表２】

【００３４】
表１のルールは、各Ｎグラムの第１要素ｘ_１に適用され、楽曲基本特徴量の種類に応じてその要素を置換する。このとき、リスト形式の入れ子を１つの記号（例えば７９−７１−６２（４５））で記述するとともに、楽曲基本特徴量の種類を示すためのタグとして、音の高さならｈ、音の強さならｖ、音の長さならｄ）　を付加する（例えばｈ７９−７１−６２）。
【００３５】
一方、表２のルールは、各Ｎグラムの第２要素以降ｘ_ｉ（ｉ＝２，３，・・・，Ｎ）に適用され、その直前の要素ｘ_ｉ−１との比較結果に応じてｘ_ｉを対応する記号で置換する。
このとき、ｘ_ｉ−１とｘ_ｉの比較は、それぞれの最大値同士、最小値同士で行われるが、和音以外では最大値＝最小値として扱われる。
以上の処理の結果、例えば、図４のＮグラムは抽象化され、図５のようになる。
【００３６】
以上のようにして抽象化されたＮグラムの異なりＮグラムを、本稿では「Ｎグラム特徴量」と呼ぶ。そして、それぞれのＮグラム特徴量は、その相対出現頻度に重みｗを掛けたものを値として持つ。
但し、相対出現頻度は、楽曲基本特徴量の種類毎、Ｎグラム統計量のＮ値毎に計算され、小数点第４位で四捨五入される。例えば、図５のｂｉｇｒａｍ（５０）からは４つのＮグラム特徴量が生成され、（ｈｓ　ｓｘ）（５１）（５２）の相対出現頻度は０．４００、それ以外（５３）（５４）（５５）の相対出現頻度は０．２００となる。
【００３７】
一方、重みｗには表３に示すような３種類の重み付け方法を用意した。
本発明では以上のＮグラム生成部（１１）及びＮグラム特徴量生成部（１２）における処理によって、Ｎグラム特徴量を生成し、ハードディスク（６）に記録する。もっとも、本発明のＮグラム特徴量生成プロセスは、上記の構成による相対出現頻度や重みを用いることに限定されるものではなく、公知のＮグラム統計量の算出方法から逸脱しない範囲で任意に設定することができる。
【００３８】
【表３】

【００３９】
ここで、本発明の楽曲印象値自動付与装置（１）は、前記した楽曲特徴量及び楽曲印象値計算式を決めるため、具体的には、図６に示した設計手順に従って設計している。図に明らかなように、本設計手順は、本装置（１）を使用する際と極めて近い工程を含んでいる。以下、この流れに沿って、各手順を説明する。
楽曲が有する印象を数値化する際の基準となるデータを得るために、ＳＤ法に基づく主観評価実験（６５）として、以下のような印象評価実験を行った。
【００４０】
被験者は、男性３９名、女性６１名の計１００名であり、プロレベル（演奏家としての収入があるような人）１名、セミプロレベル（音楽大学などで専門的に勉強したような人）７名、アマチュアレベル（バンドやオーケストラ、合唱団などに入っているような人）２０名、趣味レベル（以上の条件には該当しないけれども一応演奏できるような人）４６名、未経験者（ほとんど演奏できないような人）２６名と音楽経験が豊かでない人も多数含まれている。
【００４１】
印象に基づく楽曲検索は、音楽経験の豊富な人というよりも、そうでない人に対して特に有効な検索手段であり、そういう人の音楽感性を反映したデータを利用することは本装置（１）を設計する上で重要なことと言える。
また、実験で用いた楽曲（６０）は標準ＭＩＤＩファイル形式のクラシック８０曲であり、インターネット上で公開されていたものを採用している。但し、実験時間の都合により、楽曲聴取に要する平均試聴時間が１分前後となるよう楽曲の長さを調整する。被験者は、各楽曲を２回まで試聴することができ、その間にすべての印象尺度に対し７段階評価もしくは「どちらでもない」の評価を行うことが求められる。
【００４２】
本装置（１）で用いる印象尺度は、任意に設定することができるが、例えば本件出願人が特願２００２−２０３６９４号において開示した印象尺度の設計方法に基づいて設計することができ、表４に示す１０個の印象尺度を用いる。
【００４３】
【表４】

【００４４】
ここで、各印象尺度の７段階評価結果に対し点数を割り振った。例えば、明るさに関する印象尺度では、「とても明るい」を７点、「明るい」を６点、「少し明るい」を５点、「どちらとも言えない」を４点、「少し暗い」を３点、「暗い」を２点、「とても暗い」を１点とし、「どちらでもない」は無得点とした。
これにより、各印象尺度において楽曲印象値がどのような印象を表現しているのか明確になるし、ユーザが入力する「どちらでもない」という評価結果をその印象尺度に関しては点がない状態だと考えれば、「どちらでもない（無得点）」と「どちらとも言えない（４点）」の区別が可能となる。
以上の結果得られた８００００個（１００人×８０曲×１０印象尺度）のデータから各楽曲毎の平均を求め、印象値データ（８００個＝８０曲×１０印象尺度）（６６）とした。但し、無得点のデータは事前に除外し、計算には用いなかった。
【００４５】
一方、８０曲の楽曲データ（６０）は本装置（１）の楽曲データ入力部（９）から入力され、上記の処理により楽曲基本特徴量抽出部（１０）において、楽曲基本特徴量の抽出（６１）が行われる。
同様に、上記処理によりＮグラム生成部（１１）及びＮグラム特徴量生成部（１２）において、Ｎグラム特徴量の生成（６２）を行う。
【００４６】
ここで、Ｎグラム特徴量生成部（１２）において、上記のように表１、表２の抽象化ルールに基づいて置換するが、表５には抽象化処理による異なりＮグラム数の変化を音の高さの場合を例に示す。
【００４７】
【表５】

【００４８】
表５に示したように、抽象化により異なりＮグラム（すなわちＮグラム特徴量）の数は約半分に減少しているが、それでもまだ１，０００のオーダーである。
本発明の設計で用いる重回帰分析の性質上、説明変数となるＮグラム特徴量の数は、目的変数である印象値データのサンプル数（ここでは楽曲データ数８０である。）よりも２個以上（３個以上が推奨されている）少なくなければならない。（非特許文献５参照。）
【００４９】
【非特許文献５】菅民郎：「多変量統計分析」、現代数学社、京都（２０００）
【００５０】
そこで本実施例においてはＮグラム特徴量生成部（１２）で、Ｎグラム特徴量の数が多くても７７個を超えないよう、以下のような方法でＮグラム特徴量の選択処理（６３）を行う。
まず、各楽曲におけるＮグラム特徴量の相対出現頻度がいずれの楽曲においても０．０１０未満であったＮグラム特徴量を除外した。この操作により、Ｎグラム特徴量の数は表６のように変化した。但し、この操作は音色情報に対しては行っていない。
【００５１】
【表６】

【００５２】
次に、Ｎグラム特徴量と印象値データとの相関係数を求め、その絶対値が大きかった特徴量（最大７７個）を重回帰分析のための説明変数として選択（６４）した。このとき、Ｎグラム特徴量のＮ値の組み合わせとして、ｕｎｉｇｒａｍのみ、ｂｉｇｒａｍのみ、ｂｉｇｒａｍとｔｒｉｇｒａｍ、ｂｉｇｒａｍから４−ｇｒａｍまで、ｂｉｇｒａｍから５−ｇｒａｍまでの５通りを用意したので、この５グループのそれぞれにおいてＮグラム特徴量の選択（６４）を行った。
【００５３】
楽曲特徴量及び楽曲印象値計算式を決定するために、上記で選択されたＮグラム特徴量（６４）を説明変数、印象尺度ｍ（ｍ＝１，２，・・・、１０）における楽曲印象値データ（ＳＤ法に基づく印象評価実験の結果）（６６）を目的変数とする重回帰分析（変数増加法）（６７）を行う。
このとき、説明変数に用いるＮグラム特徴量のＮ値の組み合わせは、５通りあり、重みタイプには上記のｗ_１，ｗ_２，ｗ_３の３種類を用いるので、結局、各印象尺度毎に１５回の重回帰分析（６７）を行う。
【００５４】
ここで、各印象尺度毎に１５回の重回帰分析を行うが、その中で自由度修正済み決定係数Ｒ^２‘が最も大きかった重回帰式を楽曲印象値計算式として採用し（６８）、その重回帰式を構成する説明変数（Ｎグラム特徴量）を楽曲特徴量（６９）と定義する。
【００５５】
自由度修正済み決定係数について簡単に説明すると、サンプル数と説明変数の数との差が小さい（すなわち自由度が低い）と、決定係数が大きくなる傾向がある。この不具合を修正したのが自由度修正済み決定係数であり、次の式で計算される。
【数式１】

ただし、Ｓ_ｅ：残差平方和、Ｓ_ｙｙ：偏差平方和、ｎ：サンプル数、ｑ：説明変数の数
なお、自由度修正済み決定係数については、非特許文献５に記載されている。
【００５６】
本設計方法において、各印象尺度において　　Ｒ^２‘が最大となるＮ値の組み合わせ及び重みタイプを、そのときのＲ^２‘とともに表７に示す。なお、表７は、Ｎ＝５のＮグラム特徴量（５−ｇｒａｍ）が用いられなかったことを示しており、Ｎグラム特徴量におけるＮ値としては４までで十分なことを示唆している。
【００５７】
【表７】

【００５８】
ここで、印象尺度１の場合を例に、設計された楽曲特徴量と楽曲印象値計算式（６９）の偏回帰係数及び定数項を表８に示す。印象尺度１の場合の重みタイプは表７よりｗ_１なので、楽曲から抽出される楽曲特徴量の相対出現頻度に重み１（表３参照）を掛けた値が楽曲印象値計算式（重回帰式）に代入され、その楽曲の印象尺度１における楽曲印象値が算出される。
【００５９】
【表８】

【００６０】
以上の繰り返しにより、各印象尺度毎の楽曲特徴量、楽曲印象値計算式（６９）が定義され、本装置（１）の設計が完了する。定義された印象尺度ごとの楽曲特徴量、楽曲印象値計算式は、外部記憶手段である印象値データベース（８）に記録され、本装置（１）の楽曲印象値演算部（１３）から随時呼び出し可能とする。
印象値データベースは、ハードディスク（６）上に設けてもよい。
【００６１】
以下、再び本装置（１）のフローチャート（図２）に基づいて説述する。
Ｎグラム特徴量生成部（１２）において生成（２２）され、ハードディスク（６）に記録されたＮグラム特徴量を用いて、次の楽曲印象値演算部（１３）において、楽曲印象値の演算を行う。
【００６２】
楽曲印象値演算部（１３）においては、まずＮグラム特徴量から各印象尺度毎の楽曲特徴量を印象値データベース（８）を参照して抽出（２３）し、同データベース（８）内の楽曲印象値計算式に代入し演算処理（２４）する。
該演算の結果は、実数値で各印象尺度毎に１個の楽曲印象値（２５）が楽曲印象値出力部（１４）から出力される。
【００６３】
図７には本発明で開発した楽曲印象値自動付与装置（１）のモニタ（３）に表示される画面（７０）の一例を示す。
楽曲ＭＩＤＩデータ（７）は楽曲１曲分のファイルを指定するときにはボタン（７１）を、複数の楽曲を収容したフォルダごと指定するときはボタン（７２）をキーボード（４）やマウス（図示しない）などで指示する。
【００６４】
「印象値の自動付与」ボタン（７３）を指示することにより、上記で指定されていれば当該楽曲ＭＩＤＩデータ（７）を、指定されていなければ、デフォルトで定義されたフォルダ内の楽曲ＭＩＤＩデータ（７）を、以上に説述したＣＰＵ（２）における各処理により処理し、最終的に楽曲印象値出力部（１４）が、規定のファイルｍｉｄｉ．ｉｗｔとしてハードディスク（６）に保存する。
【００６５】
ここで、ｍｉｄｉ．ｉｗｔは、ｃｓｖ（カンマ区切り）形式のファイルであり、１行１楽曲で、各行の第１要素に標準ＭＩＤＩファイル名（拡張子は含まない）、第ｍ＋１要素に印象尺度ｍに対する楽曲印象値という並びで登録される。
なお、本装置（１）の出力は、ハードディスク（６）への記録に限らず、任意の外部記憶装置、モニタ（３）などへの表示により行うこともできる。
また、本装置（１）は単独で用いるだけでなく、他の任意の装置、例えばジュークボックスや楽曲を検索する装置などに付属させてもよい。また、本装置にネットワークアダプタを備えてネットワーク上に設け、他の端末からアクセスできるようにしてもよい。
【００６６】
【発明の効果】
本発明は上記の構成を備えるので、次の効果を奏する。
本発明によれば、標準ＭＩＤＩデータなど、コンピュータで処理可能な楽曲データから楽曲基本特徴量を抽出し、Ｎグラムを生成すると共に、Ｎグラムのうち、異なりＮグラムを用いてＮグラム特徴量を生成することにより、コンピュータ処理に適した形態で当該楽曲の楽曲特徴を抽出することができる。
そして、該楽曲特徴量から所定の楽曲印象値計算式による演算を行うため、高精度な楽曲印象値の算出を行うことができる。
これにより、簡便・高速な処理が可能な楽曲印象値自動付与装置を提供することができる。
【図面の簡単な説明】
【図１】本発明による楽曲印象値自動付与装置の一実施例の構成図である。
【図２】本発明における一実施例の処理のフローチャートである。
【図３】楽曲基本特徴量の抽出例である。
【図４】生成されたＮグラムの一例である。
【図５】抽象化されたＮグラムの一例である。
【図６】本発明による楽曲印象値自動付与装置の設計方法のフローチャートである。
【図７】本発明による楽曲印象値自動付与装置の表示画面の一例である。
【符号の説明】
１　　　楽曲印象値自動付与装置
２　　　ＣＰＵ
３　　　モニタ
４　　　キーボード
５　　　メモリ
６　　　外部記憶手段（ハードディスク）
７　　　楽曲ＭＩＤＩデータ
８　　　印象値データベース
９　　　楽曲データ入力部
１０　　　楽曲基本特徴量抽出部
１１　　　Ｎグラム生成部
１２　　　Ｎグラム特徴量生成部
１３　　　楽曲印象値演算部
１４　　　楽曲印象値出力部

Claims

少なくともコンピュータ処理が可能な所定のデータ規格に基づく楽曲データに対して、当該楽曲が有する印象を自動的に数値化し、付与する楽曲印象値自動付与装置であって、該装置が、
楽曲データを入力する入力手段と、
該楽曲データにおける、楽曲印象に係る物理的特徴量である楽曲基本特徴量を抽出する楽曲基本特徴量抽出手段と、
該楽曲基本特徴量から、Ｎグラムを生成するＮグラム生成手段と、
該Ｎグラムのうち、異なりＮグラムを用いてＮグラム特徴量を生成するＮグラム特徴量生成手段と、
該Ｎグラム特徴量を用い、所定の楽曲印象値計算式による演算を行う楽曲印象値演算手段と、
楽曲印象値を出力する出力手段と
を備えることを特徴とする楽曲印象値自動付与装置。
前記Ｎグラム特徴量生成手段が、
前記異なりＮグラムの相対出現頻度と、所定の重み値を乗じてＮグラム特徴量を生成する
請求項１に記載の楽曲印象値自動付与装置。
前記楽曲印象値計算式が、
重回帰式である
請求項１又は２に記載の楽曲印象値自動付与装置。
前記楽曲印象値自動付与装置が、複数の印象尺度についての印象値を付与する構成において、
前記Ｎグラム特徴量生成手段が、該印象尺度毎にＮグラム特徴量を生成すると共に、
前記楽曲印象値演算手段とが、該印象尺度毎に、該Ｎグラム特徴量を用いて演算を行う
請求項１ないし３に記載の楽曲印象値自動付与装置。
前記データ規格が、ＭＩＤＩ（ｍｕｓｉｃａｌ　ｉｎｓｔｒｕｍｅｎｔ　ｄｉｇｉｔａｌ　ｉｎｔｅｒｆａｃｅ）規格である
請求項１ないし４に記載の楽曲印象値自動付与装置。
前記楽曲印象値自動付与装置において、
入力手段から楽曲データを入力し、楽曲データが含む複数のトラックチャンク及び／又はチャネルを分割し、各トラックチャンク及び／又はチャネル毎に楽曲基本特徴量抽出手段に出力する
ストリーム分割手段を備えた
請求項１ないし５に記載の楽曲印象値自動付与装置。
前記楽曲基本特徴量が、音の高さ、音の強さ、音の長さ、音色情報である
請求項１ないし６に記載の楽曲印象値自動付与装置。
前記Ｎグラム生成手段において、
複数のＮ値についてＮグラムを生成する
請求項１ないし７に記載の楽曲印象値自動付与装置。
前記印象尺度が、
「静かな」・「落ち着いた」・「爽やかな」・「明るい」・「荘厳な」・「ゆったりとした」・「綺麗な」・「楽しい」・「気持ちが落ち着く」・「心が癒される」
の少なくともいずれかの文言、又はその同意語、又はその反意語である
請求項１ないし８に記載の楽曲印象値自動付与装置。