JP6489261B2 - 音響解析方法および音響解析装置 - Google Patents
音響解析方法および音響解析装置 Download PDFInfo
- Publication number
- JP6489261B2 JP6489261B2 JP2018075348A JP2018075348A JP6489261B2 JP 6489261 B2 JP6489261 B2 JP 6489261B2 JP 2018075348 A JP2018075348 A JP 2018075348A JP 2018075348 A JP2018075348 A JP 2018075348A JP 6489261 B2 JP6489261 B2 JP 6489261B2
- Authority
- JP
- Japan
- Prior art keywords
- acoustic
- state
- states
- analysis
- markov model
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000004458 analytical method Methods 0.000 title claims description 107
- 238000012545 processing Methods 0.000 claims description 59
- 239000000470 constituent Substances 0.000 claims description 11
- 230000002123 temporal effect Effects 0.000 claims description 4
- OOYGSFOGFJDDHP-KMCOLRRFSA-N kanamycin A sulfate Chemical group OS(O)(=O)=O.O[C@@H]1[C@@H](O)[C@H](O)[C@@H](CN)O[C@@H]1O[C@H]1[C@H](O)[C@@H](O[C@@H]2[C@@H]([C@@H](N)[C@H](O)[C@@H](CO)O2)O)[C@H](N)C[C@@H]1N OOYGSFOGFJDDHP-KMCOLRRFSA-N 0.000 claims 2
- 230000007704 transition Effects 0.000 description 35
- 238000000034 method Methods 0.000 description 29
- 230000008569 process Effects 0.000 description 16
- 230000005236 sound signal Effects 0.000 description 16
- 238000000605 extraction Methods 0.000 description 12
- 230000008901 benefit Effects 0.000 description 9
- 238000010586 diagram Methods 0.000 description 5
- 230000000694 effects Effects 0.000 description 5
- 230000006870 function Effects 0.000 description 5
- 239000000284 extract Substances 0.000 description 4
- 239000011159 matrix material Substances 0.000 description 4
- 230000010365 information processing Effects 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 238000005070 sampling Methods 0.000 description 3
- 230000008859 change Effects 0.000 description 2
- 239000012141 concentrate Substances 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 230000009471 action Effects 0.000 description 1
- 238000013398 bayesian method Methods 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000009472 formulation Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000011160 research Methods 0.000 description 1
Images
Landscapes
- Auxiliary Devices For Music (AREA)
Description
図1は、本発明の第1実施形態に係る音響解析装置100の構成図である。図1に例示される通り、第1実施形態の音響解析装置100は、演算処理装置10と記憶装置12と表示装置14と入力装置16とを具備するコンピュータシステムで実現される。例えば携帯電話機またはスマートフォン等の可搬型の情報処理装置やパーソナルコンピュータ等の可搬型または据置型の情報処理装置が音響解析装置100として利用され得る。
図1の解析処理部24がD個の音響信号A1〜ADの間の時間軸上の対応を解析する処理(以下「時間軸対応解析」という)の具体例を以下に詳述する。図4は、時間軸対応解析の説明図である。図4に例示される通り、第1実施形態の時間軸対応解析では、第1マルコフモデルと第2マルコフモデルとが階層的に利用される。第1マルコフモデルおよび第2マルコフモデルは、特徴量x(d,t)の生成過程を複数の状態で記述する確率モデルである。第1マルコフモデルは、任意の状態間の遷移が許容されるエルゴード(Ergodic)型のマルコフモデルであり、第2マルコフモデルは、複数の状態の配列に沿う単方向(左→右)の遷移のみが許容されるleft-to-right型のマルコフモデルである。
本発明の第2実施形態を説明する。なお、以下に例示する各形態において作用や機能が第1実施形態と同様である要素については、第1実施形態の説明で使用した符号を流用して各々の詳細な説明を適宜に省略する。
各音響信号Adの各音符の継続長(1個の状態Z(n)に停留する時間長)は、演奏者の意図に応じて音響信号Ad毎に相違し得る。ただし、対象楽曲が共通する以上、各音響信号Adの音符の継続長の分布は、対象楽曲の楽譜上の継続長(音価)に集中するという傾向がある。以上の傾向を考慮して、第3実施形態では、各状態Z(n)の継続長の確率分布を明示的に規定したexplicit-duration型のマルコフモデルを、各音響信号Adの第2マルコフモデルとして利用する。
図6は、第4実施形態に係る音響解析装置100の構成図である。図6に例示される通り、第4実施形態の音響解析装置100の演算処理装置10は、第1実施形態と同様の要素(特徴抽出部22,解析処理部24,表示制御部26)に加えて音響処理部28として機能する。音響処理部28は、解析処理部24による解析結果を利用して各音響信号Adを処理する。
前述の各形態は多様に変形され得る。具体的な変形の態様を以下に例示する。以下の例示から任意に選択された2以上の態様は適宜に併合され得る。
Claims (8)
- 対象楽曲を相異なる演奏速度で演奏した演奏音を各々が表し、構成音の個数が共通する複数の音響信号について、前記複数の音響信号に共通する前記対象楽曲の進行を、前記対象楽曲の何れかの構成音が対応付けられた複数の状態で表現する基礎状態系列を、第1確率モデルにより生成し、
前記基礎状態系列が表現する前記複数の状態が配列された第2確率モデルにより、前記複数の音響信号の各々における時間軸上の対応を解析する
コンピュータにより実現される音響解析方法。 - 前記対応の解析においては、前記複数の音響信号の各々について、当該音響信号と前記基礎状態系列の各状態との時間的な対応を特定し、当該対応における前記各状態の境界の時点を特定する
請求項1の音響解析方法。 - 前記第1確率モデルは、任意の状態間を遷移可能なエルゴード型のマルコフモデルである
請求項1または請求項2の音響解析方法。 - 前記第2確率モデルは、前記基礎状態系列と共通の順序で同数の状態が配列されたleft-to-right型のマルコフモデルである
請求項1から請求項3の何れかの音響解析方法。 - 対象楽曲を相異なる演奏速度で演奏した演奏音を各々が表し、構成音の個数が共通する複数の音響信号について、前記複数の音響信号に共通する前記対象楽曲の進行を、前記対象楽曲の何れかの構成音が対応付けられた複数の状態で表現する基礎状態系列を、第1確率モデルにより生成し、前記基礎状態系列が表現する前記複数の状態が配列された第2確率モデルにより、前記複数の音響信号の各々における時間軸上の対応を解析する解析処理部
を具備する音響解析装置。 - 前記解析処理部は、前記複数の音響信号の各々について、当該音響信号と前記基礎状態系列の各状態との時間的な対応を特定し、当該対応における前記各状態の境界の時点を特定する
請求項5の音響解析装置。 - 前記第1確率モデルは、任意の状態間を遷移可能なエルゴード型のマルコフモデルである
請求項5または請求項6の音響解析装置。 - 前記第2確率モデルは、前記基礎状態系列と共通の順序で同数の状態が配列されたleft-to-right型のマルコフモデルである
請求項5から請求項7の何れかの音響解析装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018075348A JP6489261B2 (ja) | 2018-04-10 | 2018-04-10 | 音響解析方法および音響解析装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018075348A JP6489261B2 (ja) | 2018-04-10 | 2018-04-10 | 音響解析方法および音響解析装置 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014101405A Division JP6323159B2 (ja) | 2014-05-15 | 2014-05-15 | 音響解析装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2018106212A JP2018106212A (ja) | 2018-07-05 |
JP6489261B2 true JP6489261B2 (ja) | 2019-03-27 |
Family
ID=62787136
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018075348A Expired - Fee Related JP6489261B2 (ja) | 2018-04-10 | 2018-04-10 | 音響解析方法および音響解析装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6489261B2 (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2019230152A1 (ja) | 2018-06-01 | 2019-12-05 | 三井化学株式会社 | 歯科連結部材およびマウスピース |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4323029B2 (ja) * | 1999-10-21 | 2009-09-02 | ヤマハ株式会社 | 音声処理装置およびカラオケ装置 |
JP5088030B2 (ja) * | 2007-07-26 | 2012-12-05 | ヤマハ株式会社 | 演奏音の類似度を評価する方法、装置およびプログラム |
JP6296221B2 (ja) * | 2013-08-12 | 2018-03-20 | ヤマハ株式会社 | 音響信号のアライメント装置、アライメント方法及びコンピュータプログラム |
JP6281211B2 (ja) * | 2013-08-28 | 2018-02-21 | ヤマハ株式会社 | 音響信号のアライメント装置、アライメント方法及びコンピュータプログラム |
-
2018
- 2018-04-10 JP JP2018075348A patent/JP6489261B2/ja not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2018106212A (ja) | 2018-07-05 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6791258B2 (ja) | 音声合成方法、音声合成装置およびプログラム | |
JP2011013454A (ja) | 歌唱合成用データベース生成装置、およびピッチカーブ生成装置 | |
JP2017097176A (ja) | 音声合成装置および音声合成方法 | |
Verfaille et al. | Mapping strategies for gestural and adaptive control of digital audio effects | |
CN108766409A (zh) | 一种戏曲合成方法、装置和计算机可读存储介质 | |
CN104900231B (zh) | 语音检索装置以及语音检索方法 | |
Maestre et al. | Statistical modeling of bowing control applied to violin sound synthesis | |
CN104899240A (zh) | 声音检索装置、声音检索方法 | |
US11842720B2 (en) | Audio processing method and audio processing system | |
US20210366454A1 (en) | Sound signal synthesis method, neural network training method, and sound synthesizer | |
CN116504218A (zh) | 声音合成方法、声音合成*** | |
US20210350783A1 (en) | Sound signal synthesis method, neural network training method, and sound synthesizer | |
JP6489261B2 (ja) | 音響解析方法および音響解析装置 | |
JP2018077283A (ja) | 音声合成方法 | |
JP6323159B2 (ja) | 音響解析装置 | |
KR20150118974A (ko) | 음성 처리 장치 | |
JP2013164609A (ja) | 歌唱合成用データベース生成装置、およびピッチカーブ生成装置 | |
JP2017097332A (ja) | 音声合成装置および音声合成方法 | |
JP5157922B2 (ja) | 音声合成装置、およびプログラム | |
JP6834370B2 (ja) | 音声合成方法 | |
JP6683103B2 (ja) | 音声合成方法 | |
CN113255313B (zh) | 音乐生成方法、装置、电子设备和存储介质 | |
US20230419932A1 (en) | Information processing device and control method thereof | |
WO2023181570A1 (ja) | 情報処理方法、情報処理システムおよびプログラム | |
WO2020171036A1 (ja) | 音信号合成方法、生成モデルの訓練方法、音信号合成システムおよびプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20180410 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190108 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190123 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20190129 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20190211 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6489261 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
LAPS | Cancellation because of no payment of annual fees |