JP2000069600A - 音楽的臨場感形成装置の制御装置及び制御方法 - Google Patents

音楽的臨場感形成装置の制御装置及び制御方法

Info

Publication number
JP2000069600A
JP2000069600A JP11148861A JP14886199A JP2000069600A JP 2000069600 A JP2000069600 A JP 2000069600A JP 11148861 A JP11148861 A JP 11148861A JP 14886199 A JP14886199 A JP 14886199A JP 2000069600 A JP2000069600 A JP 2000069600A
Authority
JP
Japan
Prior art keywords
constraint
listener
sound source
musical
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
JP11148861A
Other languages
English (en)
Inventor
Olivier Delerue
ドゥレリュー、オリビエ
Francois Pachet
パシェ、フランソワ
Luc Steels
スティールズ、ルック
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony France SA
Original Assignee
Sony France SA
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony France SA filed Critical Sony France SA
Publication of JP2000069600A publication Critical patent/JP2000069600A/ja
Withdrawn legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
    • H04S7/30—Control circuits for electronic adaptation of the sound field
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S3/00—Systems employing more than two channels, e.g. quadraphonic
    • H04S3/002—Non-adaptive circuits, e.g. manually adjustable or static, for enhancing the sound image or the spatial distribution
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
    • H04S7/40—Visual indication of stereophonic sound image

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Acoustics & Sound (AREA)
  • Signal Processing (AREA)
  • Stereophonic System (AREA)
  • Electrophonic Musical Instruments (AREA)

Abstract

(57)【要約】 【課題】 音楽の一貫性を維持したままで、音源によっ
て生成される音楽の空間的特性を変更するために、音場
における複数の音源及び聴取者の位置を実時間で変更す
ることができるようにする。 【解決手段】 記憶装置１１は、複数の音源及び音源の
聴取者を表す音源及び聴取者の各位置に対応したデータ
を記憶する。ユーザインターフェイス１２は、ユーザが
聴取者又は音源を選択し、選択された聴取者又は音源に
対応した位置データの変更を指示するために設けられて
いる。制約解決装置１３は、ユーザによる位置データの
変更の指示に応じ、選択された聴取者又は音源以外の聴
取者又は音源に対応した位置データの少なくとも１つ
を、所定の制約に基づいて変更する。コマンド発生装置
１４は、制御データを、音源及び聴取者に対応した位置
データの関数として音楽的臨場感形成装置１に供給す
る。

Description

【発明の詳細な説明】
【０００１】
【発明の属する技術分野】本発明は、音楽的臨場感形成
装置の制御装置及び制御方法、並びに音楽的臨場感形成
装置とその制御装置から構成される音楽的臨場感形成シ
ステムに関し、特に、音源によって形成される空間的特
性を制御するために、聴取者に対する複数の音源の位置
を指示する制御装置及び制御方法に関する。
【０００２】
【従来の技術】従来より、様々な音楽的臨場感形成装置
が知られている。殆どの音楽的臨場感形成装置は、ソフ
トウェアを用いて、音が存在する音響環境（acoustic e
nvironment）、すなわち音場をシミュレートするように
なっている。これらの音楽的臨場感形成装置は、限られ
た数の知覚パラメータを用いて、人間の耳による音像の
知覚をモデル化するという心理音響学に基づいている。
このモデルでは、限られた数のスピーカを用いて、音像
が定位している感覚を再現する技術が用いられている。
このような技術は、通常、音響チャネル間の振幅の差
異、両耳の距離による音響チャネル間の遅延を用いると
ともに、距離感を再現する残響等の音響フィルタ技術を
用いている。
【０００３】ＩＲＣＡＭ（Institut de Recherche et C
oordination Acoustique/Musique）が開発したスペイシ
ャライザ（spatialiser）「ＳＰＡＴ（登録商標）」
は、音場を、聴取者に対する音源の相対的方向（azimut
h）、高さ（elevation）、標定角（orientation angl
e）等の知覚要因の組として定義する仮想音響プロセッ
サである。この仮想音響プロセッサは、それにヘッドホ
ン、１対のスピーカ、複数のスピーカ等の音響再生機器
を接続して、これらの知覚要因を反映した音楽を再生す
ることができる。
【０００４】ところで、上述した音楽的臨場感形成の技
術には、音楽の空間的特性を変更すると、音楽の一貫性
を必ずしも維持できるとは限らないという欠点がある。
【０００５】
【発明が解決しようとする課題】本発明は、上述した実
情に鑑みてなされたものであり、本発明の目的は、音楽
の一貫性を維持したままで、音源によって生成される音
楽の空間的特性を変更するために、音場における複数の
音源及び聴取者の位置を実時間で変更することができる
音楽的臨場感形成装置の制御装置及び制御方法を提供す
ることである。また、本発明は、この制御装置を用いた
音楽的臨場感形成システムを提供することである。
【０００６】
【課題を解決するための手段】上述した目的を達成する
ために、本発明に係る音楽的臨場感形成装置を制御する
音楽的臨場感形成装置の制御装置は、複数の音源及び音
源の聴取者を表す音源及び聴取者の各位置に対応したデ
ータを記憶した記憶手段と、ユーザが聴取者又は音源を
選択し、選択された聴取者又は音源に対応した位置デー
タの変更を指示するためのインターフェイス手段と、ユ
ーザによる位置データの変更の指示に応じ、選択された
聴取者又は音源以外の聴取者又は音源に対応した位置デ
ータの少なくとも１つを、所定の制約に基づいて変更す
る制約解決手段と、制御データを、音源及び聴取者に対
応した位置データの関数として音楽的臨場感形成装置に
供給する制御データ供給手段とを備える。
【０００７】したがって、本発明によれば、聴取者及び
／又は音源の位置に対して、所定の制約が課される。こ
の制約によって、音源から生成された音楽に対する所望
の特性が、音源の位置がユーザによって変更された後も
保たれる。
【０００８】典型的に、音楽的臨場感形成装置は、音源
によってそれぞれ生成される楽曲を表す所定の音楽デー
タを混合する遠隔制御が可能なミキサ装置である。
【０００９】インターフェイス手段は、聴取者及び音源
をグラフィカルに表示するグラフィカルインターフェイ
スと、ユーザの指示又は制約解決手段による位置データ
の変更に応じて、グラフィカルな表示の中の聴取者及び
／又は音源を移動する手段を備える。
【００１０】インターフェイス手段は、更に、ユーザに
所定の制約を選択的に活性化又は非活性化させる手段を
備える。制約解決手段は、ユーザによって活性化された
制約のみを用いる。
【００１１】また、インターフェイス手段は、ユーザに
よる位置データの変更を基本的な位置データの変更に分
割して、ユーザによって行われた基本的な位置データの
変更毎に、制約解決手段を起動する。
【００１２】典型的には、所定の制約は、２つの音源と
聴取者間のそれぞれの距離が常に一定の比率になるよう
に規定した制約と、各音源と聴取者間のそれぞれの距離
の総和が常に一定となるように規定した制約と、音源が
聴取者を中心とした所定範囲の半径内にあるように規定
した制約と、聴取者に対する音源の角度が所定の範囲内
にあるように規定した制約との少なくとも１つを含む。
【００１３】典型的には、制約解決手段は、位置データ
を位置データの少なくとも一部を変更する変数として有
する制約伝搬アルゴリズムを実行する。
【００１４】所定の制約は、関数制約及び／又は不等式
制約からなり、制約伝搬アルゴリズムは、制約が不等式
制約のときは、不等式制約が充足されているかを判定
し、制約が関数制約のときは、関数制約に含まれる変数
の１つの値の変更に応じて、他の変数に、関数制約が充
足されるような独断的な値を与え、不等式制約が充足さ
れないとき、又は関数制約が、その変数の１つに以前に
与えられた独断的な値のために充足されないときは、ユ
ーザによる位置の変更を拒絶して、終了する再帰アルゴ
リズムである。
【００１５】制御データは、聴取者に対する各音源の位
置に関するものである。すなわち、制御データは、各音
源と聴取者間の距離に基づく音量パラメータと、聴取者
に対する各音源の角度に基づくパノラマパラメータとか
らなる。
【００１６】又、本発明に係る音楽的臨場感形成システ
ムは、１つ以上の音源によって生成される音楽の空間的
特性を制御するものであり、各音源の位置と聴取者の位
置に基づく制御データを生成する上述した制御装置と、
制御データに基づいて、音源によってそれぞれ生成され
る楽曲を表す所定の音楽データを混合する音楽的臨場感
形成装置とを備える。
【００１７】本発明に係る音楽的臨場感形成システム
は、更に、音楽的臨場感形成装置で生成された混合音楽
データを再生する音響再生機器を備える。
【００１８】更に、本発明に係る音楽敵意臨場感形成装
置を制御する音楽的臨場感形成装置の制御方法は、複数
の音源及び音源の聴取者を表す音源及び聴取者の各位置
に対応したデータを記憶するステップと、ユーザがイン
ターフェイスを介して聴取者又は音源を選択し、選択さ
れた聴取者又は音源に対応した位置データの変更を指示
するステップと、ユーザによる位置データの変更の指示
に応じ、選択された聴取者又は音源以外の聴取者又は音
源に対応した位置データの少なくとも１つを、所定の制
約に基づいて変更する変更ステップと、制御データを、
音源及び聴取者に対応した位置データの関数として音楽
的臨場感形成装置に供給するステップとを有する。
【００１９】更に、本発明に係る音楽的臨場感形成方法
は、１つ以上の音源によって生成される音楽の空間的特
性を制御するものであり、上述した音楽的臨場感形成装
置の制御方法によって、各音源の位置と聴取者の位置に
基づく制御データを生成するステップと、制御データに
基づいて、音源によってそれぞれ生成される楽曲を表す
所定の音楽データを混合するステップとを有する。
【００２０】
【発明の実施の形態】以下、本発明に係る音楽的臨場感
形成装置の制御装置及び制御方法、並びに音楽的臨場感
形成装置とその制御装置から構成される音楽的臨場感形
成システムについて、図面を参照しながら説明する。
【００２１】図１は、本発明を適用した音楽的臨場感形
成システムの構成を示すブロック図である。
【００２２】音楽的臨場感形成システム（music spatia
lisation system）は、図１に示すように、音楽的臨場
感形成装置１と、この音楽的臨場感形成装置１を制御す
る制御装置１０とから構成される。さらに、制御装置１
０は、記憶装置１１と、ユーザインターフェイス１２
と、制約解決装置（constraint solver）１３と、コマ
ンド発生装置１４とを備える。
【００２３】記憶装置１１は、例えばメモリからなり、
音楽環境（musical setting）とその音楽環境の聴取者
を表す数値データを記憶している。この音楽環境は、楽
器等の複数の音源から構成されており、各音源は互いに
所定の距離をおいて配置されている。図２は、このよう
な音楽環境の具体例を示すものである。図２において
は、音楽環境は、コントラバス２１と、ドラム２２と、
サクソフォン２３とから形成されている。記憶装置１１
は、２次元座標（０，ｘ，ｙ）におけるコントラバス２
１、ドラム２２及びサクソフォン２３（以下、単に音源
２１〜２３という。）の各位置と、聴取者２４の位置と
を記憶している。聴取者２４は、図２に示すように、音
源２１〜２３の前に位置しており、音楽環境の中では、
コントラバス２１は、ドラム２２及びサクソフォン２３
の後ろに位置している。
【００２４】ユーザインターフェイス１２は、図３に示
す表示器３０を備え、この表示器３０には、音源２１〜
２３と聴取者２４がグラフィカルに表示されている。こ
こで、表示器３０上の音源２１〜２３及び聴取者２４の
表示をグラフィカルオブジェクトという。図３におい
て、表示器３０に表示されている各グラフィカルオブジ
ェクトには、図２における聴取者、音源といった対応す
る要素と同じ符号を付している。
【００２５】ユーザインターフェイス１２は、更に、マ
ウス等の入力デバイス（図示せず）を備えており、ユー
ザは、この入力デバイスを用いて、表示画面上で聴取者
２４及び音源２１〜２３の各グラフィカルオブジェクト
を移動することができる。ユーザが、表示器３０上の聴
取者２４又は音源２１〜２３のグラフィカルオブジェク
トの位置を変更すると、ユーザインターフェイス１２
は、変更後の位置を示すデータを制約解決装置１３に供
給する。
【００２６】制約解決装置１３は、聴取者２４及び音源
２１〜２３の位置を含む所定の制約に基づいた制約伝搬
アルゴリズム（constraint propagation algorithm）を
記憶している。この所定の制約は、音源２１〜２３によ
って生成される音楽が聴取者２４にとって満足できるも
のであるための属性である。具体的には、この所定の制
約は、音源２１〜２３によって生成される音楽の一貫性
を維持するように選択される。初期状態で、すなわち音
楽的臨場感形成システムの電源が投入されたとき、聴取
者２４及び音源２１〜２３の位置は、これらの所定の制
約を全て充足するように配置される。
【００２７】制約解決装置１３は、ユーザがユーザイン
ターフェイス１２を介してグラフィカルオブジェクトの
位置を変更し、この変更に関するデータが供給される
と、この変更を、グラフィカルオブジェクトに対応する
要素、すなわち聴取者２４又は音源２１〜２３の位置の
座標（０，ｘ，ｙ）における変更と見なす。そして、制
約解決装置１３は、それ以外の要素、すなわちユーザが
移動させなかった聴取者２４及び／又は音源２１〜２３
の座標（０，ｘ，ｙ）における新たな位置を計算して、
移動後も一部又は全ての所定の制約を充足しているかど
うかを確認する。
【００２８】ユーザが行った変更による音源２１〜２３
と聴取者２４の新たな位置及び制約解決装置１３による
制約伝搬アルゴリズムの実行結果は、コマンド発生装置
１４に供給される。コマンド発生装置１４は、これに応
じて、音楽的臨場感形成装置１が利用可能な数値パラメ
ータを算出する。数値パラメータは、例えば各音源２１
〜２３の音量パラメータ、パノラマ（ステレオ）等であ
る。図４に示すように、座標（０，ｘ，ｙ）における音
源２１〜２３の位置をＳ、聴取者２４の位置をＬとする
と、これらの数値パラメータは、以下のように算出され
る。
【００２９】音量パラメータ（Ｓ）＝Ｃst−ｄ パノラマパラメータ（Ｓ）＝Ｃst’×cos（β） ここで、Ｃstは所定の定数であり、ｄは座標（０，ｘ，
ｙ）における音源Ｓと聴取者Ｌ間の距離である。また、
Ｃst’は所定の定数であり、βは、音源Ｓと聴取者Ｌを
結ぶ直線と、座標（０，ｘ，ｙ）における縦座標軸ｙに
平行な直線Ｄとのなす角度である。
【００３０】制約解決装置１３によって求められた新た
な位置は、ユーザインターフェイス１２にも供給され、
ユーザインターフェイス１２は、表示器３０上における
音源２１〜２３のグラフィカルオブジェクトの配置を更
新する。そして、ユーザは、制約解決装置１３によって
聴取者２４及び／又は音源２１〜２３の位置が変更され
たことを、表示画面上で見ることができる。
【００３１】音楽的臨場感形成装置１として、例えば遠
隔制御可能なミキサ、ＩＲＣＡＭが開発したスペイシャ
ライザ「ＳＰＡＴ（登録商標）」等の従来の装置を用い
ることができる。音楽的臨場感形成装置１には、その入
力端子２を介して様々なサウンドトラックの信号、例え
ばコントラバス２１から発せられた音楽に対応する第１
のサウンドトラックの情報、ドラム２２から発せられた
音楽に対応する第２のサウンドトラックとの情報、サク
ソフォン２３から発せられた音楽に対応する第３のサウ
ンドトラックの情報が供給される。音楽的臨場感形成装
置１は、コマンド発生装置１４から供給される数値パラ
メータに基づいて、これら複数のサウンドトラックに含
まれる音楽情報を混合する。音楽的臨場感形成装置１に
は、スピーカを備える音響再生機器（図示せず）が接続
されている。音響再生機器は、音楽的臨場感形成装置１
によって混合された音楽情報が供給されると、画面上の
音楽環境において聴取者２４が聴取していると同様の音
楽を再生する。
【００３２】ところで、本発明を適用した音楽的臨場感
形成システムは、実時間で動作する。この音楽的臨場感
形成システムの電源を投入すると、音楽的臨場感形成装
置１は、記憶装置１１に初期状態として記憶されている
各音源２１〜２３及び聴取者２４の位置に対応する音楽
情報を出力し、ユーザインターフェイス１２は、音源２
１〜２３及び聴取者２４の各グラフィカルオブジェクト
を表示器３０に表示する。制約解決装置１３は、ユーザ
が表示器３０に表示されたグラフィカルオブジェクトの
位置を移動させる毎に動作する。制約解決装置１３は、
聴取者２４及び音源２１〜２３の新たな位置を決定し、
これらの位置を実時間でコマンド発生装置１４に供給す
る。すなわち、ユーザがユーザインターフェイス１２を
介して位置を移動させ、制約解決装置１３が、所定の制
約に画する解を見つけると、音楽的臨場感形成装置１
は、音響再生機器で再生される音楽の空間的特性が、ユ
ーザ及び制約解決装置１３によって行われた聴取者２４
及び音源２１〜２３の位置の変更に対応して実時間で変
化するように、音楽情報を変化させる。
【００３３】ここで、制約解決装置１３によって用いら
れる所定の制約について説明する。
【００３４】通常、音楽環境には複数、すなわちｎ個の
音源が存在する。２次元座標（０，ｘ，ｙ）における音
源の各位置をｐl〜ｐnで表す。同じ座標における聴取者
の位置をｌで表す。そして、これらの位置ｐl〜ｐn，ｌ
は、制約の変数である。
【００３５】ユーザは、ユーザインターフェイス１２を
介して、所定の制約を活性化又は非活性化するととも
に、制約解決装置１３において使用する所定の制約を選
択することができる。この目的のために、表示器３０に
は、図３に示すように、複数のアイコン３１が表示され
ており、ユーザは、これらのアイコン３１をマウスでク
リックして選択する。各アイコン３１に対して１つの制
約が対応している。ユーザは、１つの制約を活性化する
ことができるとともに、複数の制約を同時に活性化する
ことができる。
【００３６】各制約は、全ての変数ｐl〜ｐn，ｌを含む
必要はなく、一部の変数のみが含まれ、それ以外の変数
を含まないものもある。すなわち、制約は、音源と聴取
者の両方を含むものもあるし、音源のみを含むものもあ
る。聴取者の位置が課されない制約では、ユーザは、音
源の位置に対して聴取者の位置を自由に動かすことがで
きる。そして、制約解決装置１３は、ユーザによって聴
取者の位置が移動される毎に、制約に基づく問題（cons
trains-based problem）を解かずに、新たな位置をコマ
ンド発生装置１４に供給する。コマンド発生装置１４
は、音楽的臨場感形成装置１がその新たな位置で聴取者
が聴く音楽に対応した混合音楽情報を出力するように制
御する。同様に、ある特定の音源の位置が課されない制
約では、ユーザは、その音源の位置を自由に動かすこと
ができ、音響再生機器によって再生される音楽の空間的
特性を変更することができる。
【００３７】本発明において用いられる制約の具体例を
以下に示す。
【００３８】・グラフィカルオブジェクトを関連させる
制約 この制約は、制約が課せられる各音源と聴取者間の距離
が常に一定の比率となるように規定するものである。こ
の制約によって、音源のうちの１つが聴取者に近づく又
は遠ざかるようにドラッグされると、その他の音源は、
各音源のレベルバランスを一定に保つために、同じ比率
で近づく又は遠ざかる。この制約は、以下のように表さ
れる（ここで、各音源は制約が課せられているものとす
る）。
【００３９】‖ｐi−ｌ‖＝ａi,j‖ｐj−ｌ‖ ここで、ｐi及びｐjは、２つの異なる音源の位置であ
り、ａi,jは、所定の定数である。この制約では、聴取
者の位置は、値を変更することができる変数でなく、あ
る値を有するパラメータである。すなわち、この制約の
下では、聴取者の位置は自由に動かすことができ、制約
解決装置１３によって、音源の新たな位置が聴取者の現
在の位置ｌに基づき決定される。
【００４０】・グラフィカルオブジェクトを関連（リン
ク）させない制約 この制約は、制約が課せられる音源と聴取者間の各距離
の総和が一定となるように規定するものである。この制
約によって、制約が課せられた各音源の音響エネルギー
の合計が一定になる。したがって、ある音源が聴取者に
近づく又は遠ざかるようにドラッグされると、それ以外
の音源は聴取者から遠ざかる又は近づく。この制約は、
以下のように表される（ここで、全ての音源は制約が課
せられているものとする）。
【００４１】
【数１】
【００４２】これは、次式のように近似することができ
る。
【００４３】
【数２】
【００４４】また、この制約においても、聴取者の位置
は、変数ではなく、単にパラメータである。
【００４５】・半径を制限する制約 この制約は、聴取者から、制約が課せられる音源までの
距離が所定の範囲内にあるように規定するものである。
そして、範囲に上限と下限を設けるようにしてもよい。
各音源に課せられる半径の範囲は、表示器３０上のグラ
フィカル表示の範囲における聴取者のグラフィカルオブ
ジェクトを中心とする円によって規定される。この制約
の空間的な効果によって、制約が課せられた音源のレベ
ルが常にある範囲内に保たれる。この制約は、以下のよ
うに表される（ここで、各音源は制約が課せられている
ものとする）。
【００４６】‖ｐi−ｌ‖≧ａinf-i 及び／又は ‖ｐ
i−ｌ‖≦ａsup-i ここで、ａinf-iは、位置ｐiの音源に課された半径の下
限を示し、ａsup-iは、位置piの音源に課された半径の
上限を示す。
【００４７】・角度の制約 この制約は、制約が課せられる音源の聴取者に対する角
度が所定の範囲内にあるように規定するものである。
【００４８】本発明において用いられる所定の制約は、
関数制約と不等式制約の２種類の制約に分けられる。関
数制約は、Ｘ＋Ｙ＋Ｚ＝定数のような等式を用いて表さ
れる。不等式制約は、Ｘ＋Ｙ＋Ｚ＜定数のような不等式
を用いて表される。上述したグラフィカルオブジェクト
を関連させる制約とグラフィカルオブジェクトを関連さ
せない制約は、等式の制約であり、半径を制限する制約
と角度の制約は、不等式の制約である。
【００４９】上述したように、制約解決装置１３は、ユ
ーザが移動した聴取者又は音源の新たな位置が供給され
ると、ユーザによって活性化された制約に基づく伝搬制
約解決アルゴリズムを実行する。例えば、グラフィカル
オブジェクトを関連させない制約が活性化されていると
きは、制約解決装置１３は、図３に示すように機能す
る。すなわち、ユーザが、表示器３０上で、サクソフォ
ン２３のグラフィカルオブジェクトを聴取者２４のグラ
フィカルオブジェクトの方向、すなわち矢印Ａの方向に
動かすと、ユーザインターフェイス１２は、サクソフォ
ン２３の新たな位置を制約解決装置１３に供給し、それ
に応じて、制約解決装置１３は、コントラバス２１とド
ラム２２の新たな位置をユーザインターフェイス１２に
供給する。このコントラバス２１及びドラム２２の新た
な位置は、ユーザが活性化した制約を充足するように決
定される。ユーザインターフェイス１２は、ユーザにコ
ントラバス２１とドラム２２の新たな位置を示すため
に、表示器３０上においてこれらの音源を移動させる。
このグラフィカルオブジェクトを関連させない制約にお
いては、コントラバス２１及びドラム２２は、矢印Ｂ，
Ｃでそれぞれ示すように、聴取者から遠ざかる方向に動
く。
【００５０】同時に、制約解決装置１３は、ユーザが動
かした以外のそれ自身が求めた音源の位置、すなわちコ
ントラバス２１及びドラム２２の新たな位置をコマンド
発生装置１４に供給する。コマンド発生装置１４は、音
楽環境における複数の音源２１〜２３及び聴取者２４の
位置に基づいて、音楽的臨場感形成装置１が直接利用可
能な数値パラメータを算出する。そして、音楽的臨場感
形成装置１は、コマンド発生装置１４から供給される数
値パラメータの関数として、音楽環境によって生成され
る楽曲の空間的特性を変更する。
【００５１】制約解決装置１３は、ユーザが聴取者又は
音源を動かしても、制約に基づく問題の解を得ることが
できない場合がある。この場合、制約解決装置１３は、
ユーザインターフェイス１２に、ユーザが所望する位置
の変更は活性化されている制約では充足されないことを
ユーザに伝えるために、メッセージを表示器３０に表示
させる制御を行う。座標（０，ｘ，ｙ）における音源２
１〜２３又は聴取者２４に対応するユーザが表示器３０
上で動かしたグラフィカルオブジェクトは、元の位置に
戻され、それ以外、すなわちユーザが動かさなかったグ
ラフィカルオブジェクトの位置も変更されない。
【００５２】上述したように、ユーザによる位置の変更
に応じた聴取者及び／又は音源の新たな位置を決定する
ために制約解決装置１３が用いるアルゴリズムは、制約
伝搬アルゴリズムである。このアルゴリズムは、本質的
には再帰法(recursive manner)に基づくものであり、ユ
ーザの制御による変数の値の変更によって生じる摂動
（perturbation）を、この変数に制約を介してリンクさ
れた変数に伝搬するというものである。
【００５３】本発明に基づくアルゴリズムは、以下に示
す点で、従来の制約伝搬アルゴリズムとは異なる。
【００５４】・不等式制約は、単にチェックされるだけ
である。不等式制約が充足されない場合、アルゴリズム
は終了し、「解が見つかりません」というメッセージが
表示器３０に表示される。
【００５５】・各関数制約では、制約に含まれる変数の
うちの１つの摂動に応じて、任意の新たな値がそれ以外
の変数に与えられる。したがって、１つの制約に対し
て、１つの任意の解が決定される。これは、１つの制約
に対して全ての解を見つけるという従来の制約伝搬アル
ゴリズムとは異なる。
【００５６】・１つの変数が摂動されると、すなわち変
数の値がユーザによって変更され、又はアルゴリズムに
よって任意の新しい値が与えられると、この変数は、そ
のアルゴリズムの処理の間は、再び摂動されることはな
い。例えば、１つの変数が２つの異なる制約に含まれて
おり、このうちの第１の制約において、任意の新たな値
がこの変数に対して与えられた場合、アルゴリズムは、
第２の制約においては、その変数に既に与えられている
任意の新たな値を変更することはできない。アルゴリズ
ムが第２の制約においてその変数に与えようとしている
任意の新たな値が、第１の制約を充足するために選択さ
れた任意の新たな値と異なるときは、アルゴリズムは終
了し、「解が見つかりません」というメッセージが表示
器３０に表示される。
【００５７】ここで、本発明において用いられる再帰ア
ルゴリズムの詳細について、図５〜図１１を用いて説明
する。
【００５８】図５は、「全ての制約の伝搬」と称す処理
のフローチャートであり、パラメータとして、変数と値
New Valueを有する。この「全ての制約の伝搬」処理
は、本発明におけるアルゴリズムの主な流れを示してい
る。この処理におけるパラメータの組に含まれる変数Ｖ
は、ユーザが動かした聴取者又は音源（以下、要素とも
いう。）の座標（０，ｘ，ｙ）における位置に対応して
いる。この処理におけるパラメータの組に含まれる値Ne
w Valueは、ユーザによって変更された後の位置の値に
対応している。
【００５９】ステップS１は、初期化ステップであり、
この処理において用いられる様々な局所的な変数が初期
化される。具体的には、各変数ＶＡＲに対して、New Va
lue(VAR)がValue(VAR)とされ、New Value(V)が値New Va
lueとされ、ブール変数である結果が真（true）とされ
る。
【００６０】ステップＳ２において、変数Ｖを含む制約
の組の中の各制約Ｃに対して、後述の「１つの制約の伝
搬」と称する処理が呼び出される。具体的には、結果
を、各制約Ｃの「１つの制約の伝搬(C,V)」処理の結果
の論理積とする。
【００６１】ステップＳ３において、ユーザが活性化し
た全ての制約Ｃが充足されたかを判定することにより、
制約Ｃに基づく問題の解が見つかったかが判定される。
具体的には、結果が真であるかが判定され、該当すると
きはステップＳ４に進み、該当しないときはステップＳ
５に進む。
【００６２】ステップＳ４において、制約解決装置１３
により音源及び聴取者（要素）の元の位置が新たな位置
で置換され、新たな位置がユーザインターフェイス１２
及びコマンド発生装置１４に供給される。具体的には、
変数ＶＡＲがNew Value(VAR)とされる。
【００６３】一方、ステップＳ５において、ユーザが動
かした要素は、元の位置に戻され、それ以外の要素の位
置は変更されず、「解が見つかりません」というメッセ
ージが表示器３０に表示される。
【００６４】図６は、「１つの制約の伝搬」と称す処理
のフローチャートであり、パラメータとして、制約Ｃと
変数Ｖを有する。
【００６５】この「１つの制約の伝搬」処理では、ステ
ップＳ１１において、制約Ｃが関数制約か不等式制約か
が判定され、制約Ｃが関数制約である場合は、ステップ
Ｓ１２に進み、制約Ｃが不等式制約である場合は、ステ
ップＳ１３に進む。
【００６６】ステップＳ１２において、この制約Ｃに対
して、後述の「関数制約の伝搬」と称す処理が呼び出さ
れる。一方、ステップＳ１３において、この制約Ｃに対
して、後述の「不等式制約の伝搬」と称す処理が呼び出
される。
【００６７】図７は、「不等式制約の伝搬」と称す処理
のフローチャートであり、パラメータとして、制約Ｃを
有する。
【００６８】この「不等式制約の伝搬」では、ステップ
Ｓ２１において、制約解決装置１３は、不等式制約Ｃが
充足されているかを判定し、該当するときはステップＳ
２２に進み、該当しないときはステップＳ２３に進む。
【００６９】ステップＳ２２において、アルゴリズムが
続行される。一方、ステップＳ２３において、結果が偽
（false）とされ、図５におけるステップＳ５に戻り、
アルゴリズムが終了する。
【００７０】図８は、「関数制約の伝搬」と称す処理の
フローチャートであり、パラメータとして、制約Ｃと変
数Ｖを有する。
【００７１】この「関数制約の伝搬」処理では、ステッ
プＳ３１において、結果の初期化が行われる。具体的に
は、結果が真とされる。
【００７２】ステップＳ３２において、制約Ｃに含まれ
る変数の組の中の変数Ｖとは異なる各変数Ｖ’に対し
て、パラメータとして、制約Ｃ及び変数Ｖ，Ｖ’を有す
る後述の「値の演算」が呼び出されるとともに、「値の
演算」処理によって算出された値New Valueに基づいた
後述の「摂動」と称す処理が呼び出される。
【００７３】ここで、「値の演算」処理について説明す
る。
【００７４】「値の演算」処理の役割は、変数Ｖの新た
な値と、関数制約である制約Ｃに基づいて、変数Ｖ’に
任意の値を与えることである。理解しやすいように、そ
れぞれＸ，Ｙ，Ｚで表される３つの変数を含んだ制約の
一般的な例を用いて、この処理を説明する。変数Ｘ，
Ｙ，Ｚにリンクした関数制約は、次式で表される。
【００７５】Ｘ＋Ｙ＋Ｚ＝定数 変数Ｘの値が、ユーザによって変更されると、制約解決
装置１３は、制約の充足を維持するために、変数Ｙ，Ｚ
の値を変更する。Ｘの１つの値に対して、変数Ｙ，Ｚに
対する解は無限にある。本発明では、ユーザによって変
数Ｘの値が変更されると、変数Ｙ，Ｚに任意の値が与え
られ、１つの解が導かれる。例えば、変数Ｘの値がδだ
け増加されると、変数Ｙ，Ｚの各値をδ／２だけ増加す
るように決定することができる。
【００７６】このような任意の値への変更は、本発明に
おいては、二元でない制約、すなわち２つの変数を含む
制約に対して実行される。Ｘ＋Ｙ＝定数のような二元の
制約では、ユーザによって摂動される以外の変数の値
は、Ｙ＝定数−Ｘのように直接的に求めることができ
る。
【００７７】音源の位置に関する上述した関数制約、す
なわちグラフィカルオブジェクトを関連させる制約及び
グラフィカルオブジェクトを関連させない制約における
「値の演算」処理について説明する。
【００７８】制約が、グラフィカルオブジェクトを関連
させる制約である場合、「値の演算」処理は、次式に示
す比率の計算を含む。
【００７９】 比率＝‖NewValue(V)−Ｓ0‖／‖Value(V)−Ｓ0‖ ここで、NewValue(V)は、摂動された変数Ｖの新たな値
であり、Value(V)は、変数Ｖの元の値であり、Ｓ0は、
聴取者の位置である。すなわち、この比率は、変数Ｖで
表される音源と聴取者間の現在の距離を、変数Ｖで表さ
れる音源と聴取者間の元の距離で割ったものである。
【００８０】そして、変数Ｖ’に与えられる値NewValue
は、次のように算出される。
【００８１】NewValue＝（Value(V')−Ｓ0)×比率＋Ｓ0 ここで、Value(V')は、変数Ｖ’の元の値である。
【００８２】すなわち、変数Ｖの値の変更に応じて、グ
ラフィカルオブジェクトを関連させる制約によってリン
クされた変数Ｖ’の値が変更され、それに伴い、変数
Ｖ’で表される音源と聴取者間の距離が、変数Ｖの場合
と同じ比率で変えられる。
【００８３】一方、制約が、グラフィカルオブジェクト
を関連させない制約である場合、「値の演算」処理は、
上述した比率の演算と、すなわち、変数Ｖ’に与えられ
る新たな値NewValueを算出する演算とを含む。
【００８４】比率＝‖NewValue(V)−Ｓ0‖／‖Value(V)
−Ｓ0‖ NewValue=（Value(V')−Ｓ0）×比率1/(Nc-1)＋Ｓ0 ここで、Ｎcは、制約Ｃに含まれる変数の数である。
【００８５】すなわち、変数Ｖの値の変更に応じて、グ
ラフィカルオブジェクトを関連させない制約によって変
数Ｖにリンクされた各変数Ｖ’に、音源と聴取者間の距
離を一定に保つような任意の値が与えられる。
【００８６】すなわち、「関数制約の伝搬」処理のステ
ップＳ３２において、上述した「値の演算」処理によっ
て変数Ｖ’に新たな任意の値が与えられた後に、「摂
動」処理が実行される。「摂動」処理は、変数Ｖ’から
摂動を、制約Ｃとは異なる制約Ｃ’を介して変数Ｖ’に
リンクした全ての変数に伝搬するものである。
【００８７】図９は、「摂動」処理によって実現される
機能を説明するための図である。図９には、３つの変数
Ｘ，Ｙ，Ｚが座標（０，ｘ，ｙ）上に表されている。変
数Ｘ，Ｙ，Ｚは、例えばそれらの和が定数に等しい（Ｘ
＋Ｙ＋Ｚ＝定数）ことを規定した関数制約Ｃ１によって
互いにリンクしている。ユーザによって、変数Ｘの値が
δだけ変更されると、「値の演算」処理では、変数Ｙの
値が独断的にδ／２だけ変更される。しかしながら、こ
の変数Ｙは、所定の制約によって他の変数にリンクされ
ている場合がある。例えば、変数Ｙが、制約Ｃ２によっ
て変数Ｙ１，Ｙ２にリンクされ、制約Ｃ３によって変数
Ｙ３にリンクされている場合がある。この場合、変数Ｙ
の値がδ／２だけ変えられると、これに対応し、「摂
動」処理によって、一方で変数Ｙの摂動が変数Ｙ１，Ｙ
２に伝搬され、他方で変数Ｙの摂動が変数Ｙ３に伝搬さ
れる。この伝搬は、後述するように、再帰的に行われ
る。図９に示す変数Ｚは、図８のステップＳ３２におけ
る制約Ｃ１とは異なる制約によって変数Ｙにリンクされ
た全ての変数の処理が終わった後に、摂動される。この
方法を、深さ優先伝搬（depth first propagation）の
技術と称す。
【００８８】また、図９には、変数Ｙ３，Ｘを含む制約
Ｃ４が示されている。制約Ｃ３によって変数Ｙ３が摂動
されると、制約Ｃ４における「値の演算」処理によっ
て、変数Ｘの元の値に対して新たな値が決定される。と
ころで、この制約Ｃ４による変数Ｘの新たな値が、変数
Ｘの現在の値、すなわち制約Ｃ４が適用される前のδ分
既に摂動されている値と異なるときは、アルゴリズムは
終了され、「解が見つかりません」というメッセージが
表示器３０に表示される。換言すると、本発明では、変
数がユーザ又はアルゴリズムによって摂動されると、そ
の変数が再度摂動されることはない。
【００８９】図１０は、「摂動」処理のフローチャート
であり、パラメータとして、変数Ｖ、値New Value及び
制約Ｃを有する。これらの変数Ｖ、値New Value及び制
約Ｃは、「値の演算」処理及びパラメータとしての制約
Ｃによって算出される。
【００９０】先ず、ステップＳ４１において、結果が初
期化、すなわち真とされる。
【００９１】ステップＳ４２において、変数Ｖが既に摂
動されているかが判定される。すなわち、値NewValueを
算出する前に、既に新たな値がその変数に与えられてい
るかを判定する。そして、該当するときはステップＳ４
３に進み、該当しないときはステップＳ４５に進む。
【００９２】ステップＳ４３において、すなわち変数Ｖ
がまだ摂動されていないときは、ステップＳ４４におい
て、変数Ｖを含む制約の組の中の制約Ｃとは異なる各制
約Ｃ’に対して、「１つの制約の伝搬」処理が呼び出さ
れる。これは、図９における、変数Ｙと制約Ｃ２，Ｃ３
に関連して実行された深さ優先伝搬（depth first prop
agation）に対応している。
【００９３】一方、ステップＳ４５において、すなわち
変数Ｖが既に摂動されているときは、「値の演算」処理
によって算出される変数Ｖの値NewValueが、前の摂動に
おいて変数Ｖに与えられた新たな値に等しいかが判定さ
れる。そして、該当するときはステップＳ４７に進み、
該当しないときはステップＳ４６に進む。
【００９４】ステップＳ４７において、すなわち２つの
値が等しいとき、前の摂動において変数Ｖに与えられた
新たな値は、制約Ｃに基づく現在の摂動による値と等し
いので、結果が真とされ、このアルゴリズムが再帰的に
続行される。
【００９５】一方、ステップＳ４６において、すなわち
２つの値が異なるときは、「結果」が偽にされて、図５
のステップＳ５において、このアルゴリズムが終了す
る。
【００９６】本発明におけるアルゴリズムは、上述した
実施例では、ユーザが表示器３０上でグラフィカルオブ
ジェクトの位置を元の位置から新たな位置に変えるため
に用いられるものであると説明した。この場合、新たな
位置は元の位置の近くであるという仮定の下に、位置の
移動は単なる摂動であると見なしている。ところで、実
際には、ユーザは大幅にグラフィカルオブジェクトを移
動したい場合もある。本発明を適用した音楽的臨場感形
成システムにおいては、ユーザによって行われる位置の
大きな変更は、小さな位置の変更に分割でき、分割され
た小さな変更は、摂動であると見なすことができる。
【００９７】図１１は、この位置の変更の分割の具体例
を説明するための図である。図１１において、グラフィ
カルオブジェクトの元の位置をＰＴ０で示し、ユーザが
所望する最終位置をＰＴ１で表している。グラフィカル
オブジェクトが位置ＰＴ０から位置ＰＴ１に移動する
間、制約解決装置１３は、グラフィカルオブジェクトが
位置ＳＰmに移動される毎に、すなわち、基本的な位置
データの変更毎に、ユーザインターフェイス１２によっ
て起動される。ここで、ｍは、１〜ｍの範囲の整数であ
り、ＳＰmは、元の位置ＰＴ０と最終位置ＰＴ１の間の
複数の位置を順次表している。位置ＳＰmとそれに続く
位置ＳＰm+1との間において、制約解決装置１３は、Ｓ
Ｐmをそのグラフィカルオブジェクトに対応する変数の
元の値とし、ＳＰm+1を新たな値として、上述したアル
ゴリズムに基づいて、制約に基づく問題を解く。したが
って、ユーザからすると、本発明を適用した音楽的臨場
感形成システムは、ユーザの操作に対して連続的に反応
するように感じられる。例えば図３において、グラフィ
カルオブジェクトを関連させない制約では、ユーザがグ
ラフィカルオブジェクト２３を矢印Ａの方向に動かす
と、ほぼ同時に、グラフィカルオブジェクト２１，２２
が矢印Ｂ，Ｃの方向に動かされる。
【００９８】なお、本発明は上述した実施例に限定され
るものではなく、例えば上述の実施例では記憶装置１
１、ユーザインターフェイス１２、制約解決装置１３、
コマンド発生器１４を、個々に装置としているが、これ
らを１つのコンピュータで実現してもよい。
【００９９】
【発明の効果】以上説明したように、本発明に係る音楽
的臨場感形成装置の制御装置及び制御方法は、複数の音
源及び音源の聴取者を表す音源及び聴取者の各位置に対
応したデータを記憶する記憶装置１１と、ユーザが聴取
者又は音源を選択し、選択された聴取者又は音源に対応
した位置データの変更を指示するためのユーザインター
フェイス１２と、ユーザによる位置データの変更の指示
に応じ、選択された聴取者又は音源以外の聴取者又は音
源に対応した位置データの少なくとも１つを、所定の制
約に基づいて変更する制約解決装置１３と、制御データ
を、音源及び聴取者に対応した位置データの関数として
音楽的臨場感形成装置１に供給するコマンド発生装置１
４とを備える。これにより、音楽の一貫性を維持したま
まで、音源によって生成される音楽の空間的特性を変更
するために、音場における複数の音源及び聴取者の位置
を実時間で変更することができる。
【図面の簡単な説明】
【図１】本発明を適用した音楽的臨場感形成システムの
構成を示すブロック図である。
【図２】音楽環境及び聴取者からなる音場の具体例を示
す図である。
【図３】図２における音場が表示される表示器を示す図
である。
【図４】図１に示す音楽的臨場感形成装置の数値パラメ
ータを算出する方法を示す図である。
【図５】パラメータとして、変数Ｖ及び値New Valueを
有し、「全ての制約の伝搬」と称す処理を示すフローチ
ャートである。
【図６】パラメータとして、制約Ｃ及び変数Ｖを有し、
「１つの制約の伝搬」と称す処理を示すフローチャート
である。
【図７】パラメータとして、制約Ｃを有し、「不等式制
約の伝搬」と称す処理を示すフローチャートである。
【図８】パラメータとして、制約Ｃ及び変数Ｖを有し、
「関数制約の伝搬」と称す処理を示すフローチャートで
ある。
【図９】「摂動」処理によって実現される機能を説明す
るための図である。
【図１０】パラメータとして、変数Ｖ、値New Value及
び制約Ｃを有し、「摂動」と称す処理を示すフローチャ
ートである。
【図１１】図１に示すユーザインターフェイスによって
行われる位置の変更の分割の具体例を説明するための図
である。
【符号の説明】
１ 音楽的臨場感形成装置、１０ 制御装置、１１ 記
憶装置、１２ ユーザインターフェイス、１３ 制約解
決装置、１４コマンド発生装置
───────────────────────────────────────────────────── フロントページの続き (72)発明者 スティールズ、ルック フランス国 75005 パリ市 アミヨ通り ６番地ソニー コンピュータ サイエン ス研究所 パリオフィス内

Claims (26)

    【特許請求の範囲】
  1. 【請求項１】 音楽的臨場感形成装置を制御する音楽的
    臨場感形成装置の制御装置において、 複数の音源及び該音源の聴取者を表す音源及び聴取者の
    各位置に対応したデータを記憶した記憶手段と、 ユーザが上記聴取者又は音源を選択し、選択された聴取
    者又は音源に対応した位置データの変更を指示するため
    のインターフェイス手段と、 上記ユーザによる位置データの変更の指示に応じ、上記
    選択された聴取者又は音源以外の聴取者又は音源に対応
    した位置データの少なくとも１つを、所定の制約に基づ
    いて変更する制約解決手段と、 制御データを、上記音源及び聴取者に対応した位置デー
    タの関数として上記音楽的臨場感形成装置に供給する制
    御データ供給手段とを備える音楽的臨場感形成装置の制
    御装置。
  2. 【請求項２】 上記音楽的臨場感形成装置は、遠隔制御
    が可能なミキサ装置であることを特徴とする請求項１記
    載の音楽的臨場感形成装置の制御装置。
  3. 【請求項３】 上記インターフェイス手段は、上記聴取
    者及び音源をグラフィカルに表示するグラフィカルイン
    ターフェイスであることを特徴とする請求項１又は２記
    載の音楽的臨場感形成装置の制御装置。
  4. 【請求項４】 上記インターフェイス手段は、上記ユー
    ザの指示又は上記制約解決手段による位置データの変更
    に応じて、上記グラフィカルな表示の中の聴取者及び／
    又は音源を移動する手段を備えることを特徴とする請求
    項３記載の音楽的臨場感形成装置の制御装置。
  5. 【請求項５】 上記インターフェイス手段は、上記ユー
    ザに上記所定の制約を選択的に活性化又は非活性化させ
    る手段を備えることを特徴とする請求項１乃至４のいず
    れか１項記載の音楽的臨場感形成装置の制御装置。
  6. 【請求項６】 上記インターフェイス手段は、上記ユー
    ザによる位置データの変更を基本的な位置データの変更
    に分割して、上記ユーザによって行われた基本的な位置
    データの変更毎に、上記制約解決手段を起動することを
    特徴とする請求項１乃至５のいずれか１項記載の音楽的
    臨場感形成装置の制御装置。
  7. 【請求項７】 上記所定の制約は、２つの音源と聴取者
    間のそれぞれの距離が常に一定の比率になるように規定
    した制約と、各音源と聴取者間のそれぞれの距離の総和
    が常に一定となるように規定した制約と、音源が聴取者
    を中心とした所定範囲の半径内にあるように規定した制
    約と、聴取者に対する音源の角度が所定の範囲内にある
    ように規定した制約との少なくとも１つを含むことを特
    徴とする請求項１乃至６のいずれか１項記載の音楽的臨
    場感形成装置の制御装置。
  8. 【請求項８】 上記制約解決手段は、上記位置データを
    位置データの少なくとも一部を変更する変数として有す
    る制約伝搬アルゴリズムを実行することを特徴とする請
    求項１乃至７のいずれか１項記載の音楽的臨場感形成装
    置の制御装置。
  9. 【請求項９】 上記所定の制約は、関数制約及び／又は
    不等式制約からなり、上記制約伝搬アルゴリズムは、 上記制約が上記不等式制約のときは、該不等式制約が充
    足されているかを判定し、 上記制約が上記関数制約のときは、該関数制約に含まれ
    る変数の１つの値の変更に応じて、他の変数に、該関数
    制約が充足されるような独断的な値を与え、 上記不等式制約が充足されないとき、又は上記関数制約
    が、その変数の１つに以前に与えられた独断的な値のた
    めに充足されないときは、ユーザによる位置の変更を拒
    絶して、終了する再帰アルゴリズムであることを特徴と
    する請求項８記載の音楽的臨場感形成装置の制御装置。
  10. 【請求項１０】 上記制御データは、上記聴取者に対す
    る各音源の位置に関するものであることを特徴とする請
    求項１乃至９のいずれか１項記載の音楽的臨場感形成装
    置の制御装置。
  11. 【請求項１１】 上記制御データは、上記各音源と聴取
    者間の距離に基づく音量パラメータと、上記聴取者に対
    する各音源の角度に基づくパノラマパラメータとからな
    ることを特徴とする請求項１乃至１０のいずれか１項記
    載の音楽的臨場感形成装置の制御装置。
  12. 【請求項１２】 １つ以上の音源によって生成される音
    楽の空間的特性を制御する音楽的臨場感形成システムに
    おいて、 各音源の位置と聴取者の位置に基づく制御データを生成
    する請求項１乃至１１のいずれか１項記載の制御装置
    と、 上記制御データに基づいて、上記音源によってそれぞれ
    生成される楽曲を表す所定の音楽データを混合する音楽
    的臨場感形成装置とを備える音楽的臨場感形成システ
    ム。
  13. 【請求項１３】 上記音楽的臨場感形成装置で生成され
    た混合音楽データを再生する音響再生機器を備えること
    を特徴とする請求項１２記載の音楽的臨場感形成システ
    ム。
  14. 【請求項１４】 音楽敵意臨場感形成装置を制御する音
    楽的臨場感形成装置の制御方法において、 複数の音源及び該音源の聴取者を表す音源及び聴取者の
    各位置に対応したデータを記憶するステップと、 ユーザがインターフェイスを介して上記聴取者又は音源
    を選択し、選択された聴取者又は音源に対応した位置デ
    ータの変更を指示するステップと、 上記ユーザによる位置データの変更の指示に応じ、上記
    選択された聴取者又は音源以外の聴取者又は音源に対応
    した位置データの少なくとも１つを、所定の制約に基づ
    いて変更する変更ステップと、 制御データを、上記音源及び聴取者に対応した位置デー
    タの関数として上記音楽的臨場感形成装置に供給するス
    テップとを有する音楽的臨場感形成装置の制御方法。
  15. 【請求項１５】 上記音楽的臨場感形成装置域は、遠隔
    制御可能なミキサからなることを特徴とする請求項１４
    記載の音楽的臨場感形成装置の制御方法。
  16. 【請求項１６】 上記聴取者及び音源のグラフィカル表
    示を表示するステップを有すること特徴とする請求項１
    ４又は１５記載の音楽的臨場感形成装置の制御方法。
  17. 【請求項１７】 上記ユーザによる位置データの変更及
    び／又は上記変更ステップの実行による位置データの変
    更に応じて、上記グラフィカル表示の中の上記聴取者及
    び／又は各音源を移動するステップを有すること特徴と
    する請求項１６記載の音楽的臨場感形成装置の制御方
    法。
  18. 【請求項１８】 上記ユーザに上記所定の制約を活性化
    又は不活性化させるステップを有することを特徴とする
    請求項１４乃至１７のいずれか１項記載の音楽的臨場感
    形成装置の制御方法。
  19. 【請求項１９】 上記ユーザによる位置データの変更を
    基本的な位置データの変更に分割して、上記ユーザによ
    って行われた基本的な位置データの変更毎に、上記変更
    ステップを起動することを特徴とする請求項１４乃至１
    ８のいずれか１項記載の音楽的臨場感形成装置の制御方
    法。
  20. 【請求項２０】 上記所定の制約は、２つの音源と聴取
    者間のそれぞれの距離が常に一定の比率になるように規
    定した制約と、各音源と聴取者間のそれぞれの距離の総
    和が常に一定となるように規定した制約と、音源が聴取
    者を中心とした所定範囲の半径内にあるように規定した
    制約と、聴取者に対する音源の角度が所定の範囲内にあ
    るように規定した制約との少なくとも１つを含むことを
    特徴とする請求項１４乃至１９のいずれか１項記載の音
    楽的臨場感形成装置の制御方法。
  21. 【請求項２１】 上記変更ステップは、上記位置データ
    を位置データの少なくとも一部を変更する変数として有
    する制約伝搬アルゴリズムを実行するステップを有する
    ことを特徴とする請求項１４乃至２０のいずれか１項記
    載の音楽的臨場感形成装置の制御方法。
  22. 【請求項２２】 上記所定の制約は、関数制約及び／又
    は不等式制約からなり、上記制約伝搬アルゴリズムは、 上記制約が上記不等式制約のときは、該不等式制約が充
    足されているかを判定し、 上記制約が上記関数制約のときは、該関数制約に含まれ
    る変数の１つの値の変更に応じて、他の変数に、該関数
    制約が充足されるような独断的な値を与え、 上記不等式制約が充足されないとき、又は上記関数制約
    が、その変数の１つに以前に与えられた独断的な値のた
    めに充足されないときは、ユーザによる位置の変更を拒
    絶して、終了する再帰アルゴリズムであることを特徴と
    する請求項２１記載の音楽的臨場感形成装置の制御方
    法。
  23. 【請求項２３】 上記制御データは、上記聴取者に対す
    る各音源の位置に関するものであることを特徴とする請
    求項１４乃至２２のいずれか１項記載の音楽的臨場感形
    成装置の制御方法。
  24. 【請求項２４】 上記制御データは、上記各音源と聴取
    者間の距離に基づく音量パラメータと、上記聴取者に対
    する各音源の角度に基づくパノラマパラメータとからな
    ることを特徴とする請求項１４乃至２３のいずれか１項
    記載の音楽的臨場感形成装置の制御方法。
  25. 【請求項２５】 １つ以上の音源によって生成される音
    楽の空間的特性を制御する音楽的臨場感形成方法におい
    て、 請求項１４乃至２４のいずれか１項記載の音楽的臨場感
    形成装置の制御方法によって、上記各音源の位置と聴取
    者の位置に基づく制御データを生成するステップと、 上記制御データに基づいて、上記音源によってそれぞれ
    生成される楽曲を表す所定の音楽データを混合するステ
    ップとを有する音楽的臨場感形成方法。
  26. 【請求項２６】 上記混合音楽データを再生するステッ
    プを有する請求項２５記載の音楽的臨場感形成方法。
JP11148861A 1998-05-27 1999-05-27 音楽的臨場感形成装置の制御装置及び制御方法 Withdrawn JP2000069600A (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
EP98401266A EP0961523B1 (en) 1998-05-27 1998-05-27 Music spatialisation system and method
EP98401266.6 1998-05-27

Publications (1)

Publication Number Publication Date
JP2000069600A true JP2000069600A (ja) 2000-03-03

Family

ID=8235381

Family Applications (1)

Application Number Title Priority Date Filing Date
JP11148861A Withdrawn JP2000069600A (ja) 1998-05-27 1999-05-27 音楽的臨場感形成装置の制御装置及び制御方法

Country Status (4)

Country Link
US (1) US6826282B1 (ja)
EP (1) EP0961523B1 (ja)
JP (1) JP2000069600A (ja)
DE (1) DE69841857D1 (ja)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001306081A (ja) * 2000-03-17 2001-11-02 Sony France Sa 音楽的空間構成制御装置、音楽的臨場感形成装置、及び音楽的空間構成制御方法
JP2003257162A (ja) * 2002-02-27 2003-09-12 Yamaha Corp 音制御装置、音制御方法、プログラムおよび記録媒体
JP2006287836A (ja) * 2005-04-05 2006-10-19 Yamaha Corp パラメータ生成方法、パラメータ生成装置およびプログラム
JP2006287835A (ja) * 2005-04-05 2006-10-19 Yamaha Corp パラメータ生成方法、パラメータ生成装置およびプログラム
JP2007043320A (ja) * 2005-08-01 2007-02-15 Victor Co Of Japan Ltd 測距装置、音場設定方法、及びサラウンドシステム
JP2013223098A (ja) * 2012-04-16 2013-10-28 Fujitsu Ltd 音声処理装置、音声処理方法および音声処理プログラム
JPWO2018055860A1 (ja) * 2016-09-20 2019-07-04 ソニー株式会社 情報処理装置と情報処理方法およびプログラム
JP2019525221A (ja) * 2016-06-01 2019-09-05 エム． ダウニー、パトリック 音楽指導の方法
JP2022036231A (ja) * 2014-01-16 2022-03-04 ソニーグループ株式会社 音声処理装置および方法、並びにプログラム

Families Citing this family (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7085387B1 (en) 1996-11-20 2006-08-01 Metcalf Randall B Sound system and method for capturing and reproducing sounds originating from a plurality of sound sources
US6239348B1 (en) * 1999-09-10 2001-05-29 Randall B. Metcalf Sound system and method for creating a sound event based on a modeled sound field
US7158844B1 (en) * 1999-10-22 2007-01-02 Paul Cancilla Configurable surround sound system
FR2814891B1 (fr) * 2000-10-04 2003-04-04 Thomson Multimedia Sa Procede de reglages de niveau audio provenant de plusieurs canaux et dispositif de reglage
US20040131192A1 (en) 2002-09-30 2004-07-08 Metcalf Randall B. System and method for integral transference of acoustical events
US20040135974A1 (en) * 2002-10-18 2004-07-15 Favalora Gregg E. System and architecture for displaying three dimensional data
KR100542129B1 (ko) * 2002-10-28 2006-01-11 한국전자통신연구원 객체기반 3차원 오디오 시스템 및 그 제어 방법
US7222310B2 (en) * 2003-04-30 2007-05-22 Apple Computer, Inc. Graphical user interface(GUI), a synthesiser and a computer system including a GUI
US20040264704A1 (en) * 2003-06-13 2004-12-30 Camille Huin Graphical user interface for determining speaker spatialization parameters
US7636448B2 (en) * 2004-10-28 2009-12-22 Verax Technologies, Inc. System and method for generating sound events
WO2006091540A2 (en) * 2005-02-22 2006-08-31 Verax Technologies Inc. System and method for formatting multimode sound content and metadata
JP3863165B2 (ja) * 2005-03-04 2006-12-27 株式会社コナミデジタルエンタテインメント 音声出力装置、音声出力方法、ならびに、プログラム
JP4295798B2 (ja) * 2005-06-21 2009-07-15 独立行政法人科学技術振興機構 ミキシング装置及び方法並びにプログラム
US8020102B2 (en) * 2005-08-11 2011-09-13 Enhanced Personal Audiovisual Technology, Llc System and method of adjusting audiovisual content to improve hearing
US20100223552A1 (en) * 2009-03-02 2010-09-02 Metcalf Randall B Playback Device For Generating Sound Events
NL2006997C2 (en) * 2011-06-24 2013-01-02 Bright Minds Holding B V Method and device for processing sound data.
EP2922313B1 (en) * 2012-11-16 2019-10-09 Yamaha Corporation Audio signal processing device and audio signal processing system
KR102268933B1 (ko) 2013-03-15 2021-06-25 디티에스, 인코포레이티드 다수의 오디오 스템들로부터의 자동 다-채널 뮤직 믹스
KR102226817B1 (ko) * 2014-10-01 2021-03-11 삼성전자주식회사 콘텐츠 재생 방법 및 그 방법을 처리하는 전자 장치
CN109754814B (zh) * 2017-11-08 2023-07-28 阿里巴巴集团控股有限公司 一种声音处理方法、交互设备

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2651399B1 (fr) * 1989-08-29 1996-05-15 Thomson Consumer Electronics Procede et dispositif d'estimation et de codage hierarchise du mouvement de sequences d'images.
US5212733A (en) * 1990-02-28 1993-05-18 Voyager Sound, Inc. Sound mixing device
US5261043A (en) * 1991-03-12 1993-11-09 Hewlett-Packard Company Input and output data constraints on iconic devices in an iconic programming system
US5572248A (en) * 1994-09-19 1996-11-05 Teleport Corporation Teleconferencing method and system for providing face-to-face, non-animated teleconference environment
GB2294854B (en) * 1994-11-03 1999-06-30 Solid State Logic Ltd Audio signal processing
FR2738099B1 (fr) * 1995-08-25 1997-10-24 France Telecom Procede de simulation de la qualite acoustique d'une salle et processeur audio-numerique associe
FR2746247B1 (fr) * 1996-03-14 2002-04-05 Systeme electronique programmable restituant des effets de deplacement expressif de sources sonores et de perception tri-dimentionnelle
US6011851A (en) * 1997-06-23 2000-01-04 Cisco Technology, Inc. Spatial audio processing method and apparatus for context switching between telephony applications

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001306081A (ja) * 2000-03-17 2001-11-02 Sony France Sa 音楽的空間構成制御装置、音楽的臨場感形成装置、及び音楽的空間構成制御方法
JP4729186B2 (ja) * 2000-03-17 2011-07-20 ソニー フランス エスアー 音楽的空間構成制御装置、音楽的臨場感形成装置、及び音楽的空間構成制御方法
JP2003257162A (ja) * 2002-02-27 2003-09-12 Yamaha Corp 音制御装置、音制御方法、プログラムおよび記録媒体
JP2006287836A (ja) * 2005-04-05 2006-10-19 Yamaha Corp パラメータ生成方法、パラメータ生成装置およびプログラム
JP2006287835A (ja) * 2005-04-05 2006-10-19 Yamaha Corp パラメータ生成方法、パラメータ生成装置およびプログラム
JP2007043320A (ja) * 2005-08-01 2007-02-15 Victor Co Of Japan Ltd 測距装置、音場設定方法、及びサラウンドシステム
JP2013223098A (ja) * 2012-04-16 2013-10-28 Fujitsu Ltd 音声処理装置、音声処理方法および音声処理プログラム
JP2022036231A (ja) * 2014-01-16 2022-03-04 ソニーグループ株式会社 音声処理装置および方法、並びにプログラム
US11778406B2 (en) 2014-01-16 2023-10-03 Sony Group Corporation Audio processing device and method therefor
JP7367785B2 (ja) 2014-01-16 2023-10-24 ソニーグループ株式会社 音声処理装置および方法、並びにプログラム
JP2019525221A (ja) * 2016-06-01 2019-09-05 エム． ダウニー、パトリック 音楽指導の方法
JPWO2018055860A1 (ja) * 2016-09-20 2019-07-04 ソニー株式会社 情報処理装置と情報処理方法およびプログラム
JP7003924B2 (ja) 2016-09-20 2022-01-21 ソニーグループ株式会社 情報処理装置と情報処理方法およびプログラム

Also Published As

Publication number Publication date
EP0961523A1 (en) 1999-12-01
US6826282B1 (en) 2004-11-30
EP0961523B1 (en) 2010-08-25
DE69841857D1 (de) 2010-10-07

Similar Documents

Publication Publication Date Title
JP2000069600A (ja) 音楽的臨場感形成装置の制御装置及び制御方法
CN1797538B (zh) 用于使用户能够修改音频文件的方法和装置
US7068290B2 (en) Authoring system
US5850455A (en) Discrete dynamic positioning of audio signals in a 360° environment
US5812688A (en) Method and apparatus for using visual images to mix sound
US6490359B1 (en) Method and apparatus for using visual images to mix sound
JP4302792B2 (ja) オーディオ信号処理装置及びオーディオ信号処理方法
US20090285407A1 (en) Method and Apparatus for Providing Audio Motion Feedback in a Simulated Three-Dimensional Environment
US20200374645A1 (en) Augmented reality platform for navigable, immersive audio experience
US7859533B2 (en) Data processing apparatus and parameter generating apparatus applied to surround system
Çamcı et al. INVISO: a cross-platform user interface for creating virtual sonic environments
KR20240099500A (ko) 반주 생성 방법, 장치 및 저장 매체
Vaananen et al. Advanced AudioBIFS: Virtual acoustics modeling in MPEG-4 scene description
Brümmer Composition and perception in spatial audio
JP2005094271A (ja) 仮想空間音響再生プログラムおよび仮想空間音響再生装置
JP2956125B2 (ja) 音源情報制御装置
CA3044260A1 (en) Augmented reality platform for navigable, immersive audio experience
JP3739967B2 (ja) 音響ブラウジング装置及び方法
JP2006270425A (ja) 音声出力方法、音声出力プログラム、及び情報処理装置
Pachet et al. MusicSpace: a Constraint-Based Control System for Music Spatialization.
Jot et al. Scene description model and rendering engine for interactive virtual acoustics
Lengelé The Story and the Insides of a Spatial Performance Tool: Live 4 Life
CN115103293B (zh) 一种面向目标的声重放方法及装置
JP2003122374A (ja) サラウンド音響生成方法、その装置およびそのプログラム
Foss Employing the Processing Capability of Mixing Consoles and Audio Interfaces to Spatialize Sound

Legal Events

Date Code Title Description
A300 Application deemed to be withdrawn because no request for examination was validly filed

Free format text: JAPANESE INTERMEDIATE CODE: A300

Effective date: 20060801