JPWO2020187807A5

JPWO2020187807A5 -

Info

Publication number: JPWO2020187807A5
Application number: JP2021556235A
Authority: JP
Publication date: 2023-11-09
Anticipated expiration: 2040-03-16

Claims

受信機回路と、生成器回路と、レンダラ回路とを含む、オーディオ装置であって、
前記受信機回路は、信号を受信し、
前記信号は、オーディオシーンのためのデータを備え、
前記データは、入力オーディオソースデータと、音響オブジェクトデータとを備え、
前記入力オーディオソースデータは、少なくとも１つのオーディオソースのためであり、
前記音響オブジェクトデータは、少なくとも１つの音響オブジェクトのためであり、
前記音響オブジェクトデータは、音響カップリングデータおよび空間特性データを備え、
前記音響カップリングデータは、オーディオエネルギの振動／機械的エネルギへの変換、および／または、振動／機械的エネルギのオーディオエネルギへの変換の特性を示し、
前記生成器回路は、オブジェクトオーディオソースのためのオブジェクトオーディオソースデータを生成し、
前記オブジェクトオーディオソースデータは、前記音響オブジェクトによって前記オーディオシーンにおいて発せられるオーディオを表現し、
前記オーディオシーンにおいて発せられる前記オーディオは、前記少なくとも１つのオーディオソースからカップリングされ、
前記生成器回路は、前記音響カップリングデータ、前記空間特性データ、および前記入力オーディオソースデータに応答して前記オブジェクトオーディオソースデータを生成し、
前記レンダラ回路は、前記オーディオシーンをレンダリングし、前記レンダリングすることは、前記オブジェクトオーディオソースデータをレンダリングすることを含む、オーディオ装置。 An audio device comprising a receiver circuit, a generator circuit, and a renderer circuit, the audio device comprising:
The receiver circuit receives a signal;
the signal comprises data for an audio scene ;
the data comprises input audio source data and acoustic object data;
the input audio source data is for at least one audio source;
the acoustic object data is for at least one acoustic object;
The acoustic object data includes acoustic coupling data and spatial characteristic data ,
the acoustic coupling data is indicative of the conversion of audio energy to vibration/mechanical energy and/or the conversion of vibration/mechanical energy to audio energy ;
the generator circuit generates object audio source data for an object audio source;
the object audio source data represents audio emitted in the audio scene by the acoustic object ;
the audio emitted in the audio scene is coupled from the at least one audio source;
the generator circuit generates the object audio source data in response to the acoustic coupling data, the spatial characteristic data, and the input audio source data;
The audio device, wherein the renderer circuit renders the audio scene , and the rendering includes rendering the object audio source data.

前記生成器回路は、前記オブジェクトオーディオソースが前記空間特性データに応答して決定される空間的広がりを有するように前記オブジェクトオーディオソースを表現するために、前記オブジェクトオーディオソースデータを生成する、請求項１に記載のオーディオ装置。 5. The generator circuit generates the object audio source data to represent the object audio source such that the object audio source has a spatial extent determined in response to the spatial characteristic data. 1. The audio device according to 1.

前記生成器回路は、前記音響カップリングデータに応答して、前記オブジェクトオーディオソースデータのオーディオのためのオーディオレベルおよび周波数応答のうちの少なくとも１つを決定する、請求項１に記載のオーディオ装置。 2. The audio device of claim 1, wherein the generator circuit determines at least one of an audio level and a frequency response for audio of the object audio source data in response to the acoustic coupling data.

前記音響カップリングデータは、前記音響オブジェクトのためのカップリング係数の第１のセットを備え、
前記カップリング係数のセットは、前記音響オブジェクトのためのカップリング伝達関数を示す、請求項１に記載のオーディオ装置。 the acoustic coupling data comprises a first set of coupling coefficients for the acoustic object ;
Audio device according to claim 1 , wherein the set of coupling coefficients indicates a coupling transfer function for the acoustic object.

前記カップリング伝達関数は、前記音響オブジェクトの振動から、前記音響オブジェクトから発せられるオーディオへの伝達関数である、請求項４に記載のオーディオ装置。 The audio device according to claim 4, wherein the coupling transfer function is a transfer function from vibrations of the acoustic object to audio emitted from the acoustic object.

前記オブジェクトオーディオソースデータは、オーディオオブジェクトの振動および前記カップリング伝達関数から、前記音響オブジェクトによって前記オーディオシーンにおいて発せられるオーディオを表現する、請求項５に記載のオーディオ装置。 6. The audio device of claim 5, wherein the object audio source data represents audio emitted in the audio scene by the acoustic object from vibrations of the audio object and the coupling transfer function.

前記生成器回路は、前記音響オブジェクトの物理モデルに応答して前記振動を判定する、請求項６に記載のオーディオ装置。 7. The audio device of claim 6, wherein the generator circuit determines the vibration in response to a physical model of the acoustic object.

前記生成器回路は、時間変化する力に応答して前記振動を判定し、前記時間変化する力は、前記音響オブジェクトに加えられる、請求項６に記載のオーディオ装置。 7. The audio device of claim 6, wherein the generator circuit determines the vibration in response to a time -varying force , the time-varying force being applied to the acoustic object .

前記カップリング伝達関数は、前記音響オブジェクトに入射するオーディオから、前記音響オブジェクトの振動への伝達関数である、請求項４に記載のオーディオ装置。 5. The audio device according to claim 4, wherein the coupling transfer function is a transfer function from audio incident on the acoustic object to vibrations of the acoustic object.

前記生成器回路は、前記空間特性データによって示されるような前記音響オブジェクトの位置に対応する空間位置を有する前記オブジェクトオーディオソースを表現するために、前記オブジェクトオーディオソースデータを生成する、請求項１に記載のオーディオ装置。 2. The generator circuit of claim 1, wherein the generator circuit generates the object audio source data to represent the object audio source having a spatial position corresponding to a position of the acoustic object as indicated by the spatial characteristic data. Audio equipment as described.

前記生成器回路は、前記空間特性データによって示される前記少なくとも１つのオーディオソースの位置および前記音響オブジェクトの位置に応答して、前記オブジェクトオーディオソースデータを生成する、請求項１に記載のオーディオ装置。 2. The audio device of claim 1 , wherein the generator circuit generates the object audio source data in response to a position of the at least one audio source and a position of the acoustic object indicated by the spatial characteristic data.

前記オブジェクトオーディオソースデータは、前記空間特性データによって示されるリスニング位置および前記音響オブジェクトの位置に応答して生成される、請求項１に記載のオーディオ装置。 2. The audio device of claim 1, wherein the object audio source data is generated in response to a listening position and a position of the acoustic object indicated by the spatial characteristics data.

前記信号は、第２のオーディオソースのための入力オーディオソースデータを備え、
前記オブジェクトオーディオソースデータは、前記少なくとも１つのオーディオソースと前記第２のオーディオソースとからのオーディオの結合カップリングから、前記音響オブジェクトによって前記オーディオシーンにおいて発せられるオーディオを表現する、請求項１に記載のオーディオ装置。 the signal comprises input audio source data for a second audio source ;
2. The object audio source data represents audio emitted in the audio scene by the acoustic object from a joint coupling of audio from the at least one audio source and the second audio source. audio equipment.

データ生成器回路と、信号生成器回路と、送信機回路とを備える、オーディオ装置であって、
前記データ生成器回路は、オーディオシーンのためのデータを生成し、
前記データは、入力オーディオソースデータと、音響オブジェクトデータとを備え、
前記入力オーディオソースデータは、少なくとも１つのオーディオソースのためであり、
前記音響オブジェクトデータは、少なくとも１つの音響オブジェクトのためであり、
前記音響オブジェクトデータは、音響カップリングデータおよび空間特性データを備え、
前記音響カップリングデータは、オーディオエネルギの振動／機械的エネルギへの変換、および／または、振動／機械的エネルギのオーディオエネルギへの変換の特性を示し、
前記データ生成器回路は、データ信号を生成し、
前記データ信号は、前記オーディオシーンのための前記データを備え、
前記データ生成器回路は、前記データ信号を送信する、オーディオ装置。 An audio device comprising a data generator circuit, a signal generator circuit, and a transmitter circuit, the audio device comprising:
the data generator circuit generates data for an audio scene;
the data comprises input audio source data and acoustic object data ;
the input audio source data is for at least one audio source;
the acoustic object data is for at least one acoustic object;
The acoustic object data includes acoustic coupling data and spatial characteristic data,
the acoustic coupling data is indicative of the conversion of audio energy to vibration/mechanical energy and/or the conversion of vibration/mechanical energy to audio energy ;
the data generator circuit generates a data signal;
the data signal comprises the data for the audio scene;
The audio device , wherein the data generator circuit transmits the data signal.

オーディオを処理する方法であって、前記方法は、
信号を受信するステップと、オブジェクトオーディオソースのためのオブジェクトオーディオソースデータを生成するステップと、オーディオシーンをレンダリングするステップと
を有し、
前記信号は、オーディオシーンのためのデータを備え、
前記データは、入力オーディオソースデータと、音響オブジェクトデータとを備え、
前記入力オーディオソースデータは、少なくとも１つのオーディオソースのためであり、
前記音響オブジェクトデータは、前記オーディオシーンにおける少なくとも１つの音響オブジェクトのためであり、
前記音響オブジェクトデータは、音響カップリングデータおよび空間特性データを備え、
前記音響カップリングデータは、オーディオエネルギの振動／機械的エネルギへの変換、および／または、振動／機械的エネルギのオーディオエネルギへの変換の特性を示し、
前記オブジェクトオーディオソースデータは、前記音響オブジェクトによって前記オーディオシーンにおいて発せられるオーディオを表現し、
前記オーディオシーンにおいて発せられる前記オーディオは、前記少なくとも１つのオーディオソースからカップリングされ、
生成器回路は、前記音響カップリングデータ、前記空間特性データ、および前記入力オーディオソースデータに応答して、前記オブジェクトオーディオソースデータを生成し、
前記レンダリングするステップは、前記オブジェクトオーディオソースデータをレンダリングするステップを含む、方法。 A method of processing audio, the method comprising:
receiving a signal; generating object audio source data for the object audio source; and rendering an audio scene.
has
the signal comprises data for an audio scene;
the data comprises input audio source data and acoustic object data;
the input audio source data is for at least one audio source;
the acoustic object data is for at least one acoustic object in the audio scene;
The acoustic object data includes acoustic coupling data and spatial characteristic data ,
the acoustic coupling data is indicative of the conversion of audio energy to vibration/mechanical energy and/or the conversion of vibration/mechanical energy to audio energy ;
the object audio source data represents audio emitted in the audio scene by the acoustic object;
the audio emitted in the audio scene is coupled from the at least one audio source;
a generator circuit generates the object audio source data in response to the acoustic coupling data, the spatial characteristic data, and the input audio source data;
The method, wherein the rendering step includes rendering the object audio source data.

オーディオデータ信号を生成する方法であって、前記方法は、
オーディオシーンのためのデータを生成するステップであって、
前記データは、入力オーディオソースデータと、音響オブジェクトデータとを備え、
前記入力オーディオソースデータは、少なくとも１つのオーディオソースのためであり、
前記音響オブジェクトデータは、少なくとも１つの音響オブジェクトのためであり、
前記音響オブジェクトデータは、音響カップリングデータおよび空間特性データを備え、
前記音響カップリングデータは、オーディオエネルギの振動／機械的エネルギへの変換、および／または、振動／機械的エネルギのオーディオエネルギへの変換の特性を示す、データを生成するステップと、
前記オーディオデータ信号を生成するステップであって、前記オーディオデータ信号は、前記オーディオシーンのための前記データを備える、オーディオデータ信号を生成するステップと、
前記オーディオデータ信号を送信するステップとを有する、方法。 A method of generating an audio data signal, the method comprising:
a step of generating data for an audio scene ,
the data comprises input audio source data and acoustic object data;
the input audio source data is for at least one audio source;
the acoustic object data is for at least one acoustic object;
The acoustic object data includes acoustic coupling data and spatial characteristic data ,
generating data wherein the acoustic coupling data is indicative of the conversion of audio energy to vibration/mechanical energy and/or the conversion of vibration/mechanical energy to audio energy;
generating the audio data signal , the audio data signal comprising the data for the audio scene ;
transmitting the audio data signal.

コンピュータプログラムがプロセッサにおいて実行された場合、請求項１５に記載の方法を実行する、非一時的媒体に記憶されたコンピュータプログラム。 16. A computer program stored on a non-transitory medium that , when executed on a processor , performs the method of claim 15 .

コンピュータプログラムがプロセッサにおいて実行された場合、請求項１６に記載の方法を実行する、非一時的媒体に記憶されたコンピュータプログラム。 17. A computer program stored on a non-transitory medium that, when executed on a processor, performs the method of claim 16.

前記生成器回路は、前記音響カップリングデータに応答して、前記オブジェクトオーディオソースデータのオーディオのためのオーディオレベルおよび周波数応答のうちの少なくとも１つを決定する、請求項２に記載のオーディオ装置。 3. The audio device of claim 2, wherein the generator circuit determines at least one of an audio level and a frequency response for audio of the object audio source data in response to the acoustic coupling data.

前記生成器回路は、時間変化する力に応答して前記振動を判定し、前記時間変化する力は、前記音響オブジェクトに加えられる、請求項７に記載のオーディオ装置。 8. The audio device of claim 7, wherein the generator circuit determines the vibration in response to a time-varying force, the time-varying force being applied to the acoustic object.