JP2015530824A - オブジェクトに基づくオーディオのための反射音レンダリング - Google Patents
オブジェクトに基づくオーディオのための反射音レンダリング Download PDFInfo
- Publication number
- JP2015530824A JP2015530824A JP2015529981A JP2015529981A JP2015530824A JP 2015530824 A JP2015530824 A JP 2015530824A JP 2015529981 A JP2015529981 A JP 2015529981A JP 2015529981 A JP2015529981 A JP 2015529981A JP 2015530824 A JP2015530824 A JP 2015530824A
- Authority
- JP
- Japan
- Prior art keywords
- audio
- driver
- speaker
- sound
- content
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000009877 rendering Methods 0.000 title claims description 76
- 238000010304 firing Methods 0.000 claims description 77
- 238000000034 method Methods 0.000 claims description 60
- 230000008569 process Effects 0.000 claims description 29
- 238000009826 distribution Methods 0.000 claims description 23
- 238000004891 communication Methods 0.000 claims description 5
- 239000013589 supplement Substances 0.000 claims 1
- 238000012545 processing Methods 0.000 abstract description 32
- 230000003044 adaptive effect Effects 0.000 description 123
- 230000004044 response Effects 0.000 description 22
- 230000005236 sound signal Effects 0.000 description 21
- 230000006870 function Effects 0.000 description 17
- 239000000203 mixture Substances 0.000 description 17
- 230000000694 effects Effects 0.000 description 15
- 238000004422 calculation algorithm Methods 0.000 description 13
- 238000010586 diagram Methods 0.000 description 11
- 238000004091 panning Methods 0.000 description 10
- 238000013459 approach Methods 0.000 description 8
- 230000005540 biological transmission Effects 0.000 description 8
- 238000007726 management method Methods 0.000 description 8
- 238000002156 mixing Methods 0.000 description 8
- 230000008901 benefit Effects 0.000 description 7
- 230000008447 perception Effects 0.000 description 7
- 238000012805 post-processing Methods 0.000 description 7
- 238000003491 array Methods 0.000 description 6
- 230000008859 change Effects 0.000 description 6
- 238000009792 diffusion process Methods 0.000 description 6
- 238000005259 measurement Methods 0.000 description 6
- 238000013461 design Methods 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 5
- 230000007613 environmental effect Effects 0.000 description 5
- 238000007654 immersion Methods 0.000 description 5
- 239000011159 matrix material Substances 0.000 description 5
- 230000007246 mechanism Effects 0.000 description 5
- 230000000007 visual effect Effects 0.000 description 5
- 238000004458 analytical method Methods 0.000 description 4
- 230000002457 bidirectional effect Effects 0.000 description 4
- 230000001419 dependent effect Effects 0.000 description 4
- 238000001514 detection method Methods 0.000 description 4
- 210000003128 head Anatomy 0.000 description 4
- 230000033001 locomotion Effects 0.000 description 4
- 238000006243 chemical reaction Methods 0.000 description 3
- 235000009508 confectionery Nutrition 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 238000004806 packaging method and process Methods 0.000 description 3
- 238000003860 storage Methods 0.000 description 3
- 238000012546 transfer Methods 0.000 description 3
- 238000012935 Averaging Methods 0.000 description 2
- 241001025261 Neoraja caerulea Species 0.000 description 2
- 230000006978 adaptation Effects 0.000 description 2
- 230000019771 cognition Effects 0.000 description 2
- 230000006835 compression Effects 0.000 description 2
- 238000007906 compression Methods 0.000 description 2
- 230000008878 coupling Effects 0.000 description 2
- 238000010168 coupling process Methods 0.000 description 2
- 238000005859 coupling reaction Methods 0.000 description 2
- 210000000883 ear external Anatomy 0.000 description 2
- 239000000686 essence Substances 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- 238000001914 filtration Methods 0.000 description 2
- 230000014509 gene expression Effects 0.000 description 2
- 238000009434 installation Methods 0.000 description 2
- 239000000463 material Substances 0.000 description 2
- 239000002609 medium Substances 0.000 description 2
- 230000006855 networking Effects 0.000 description 2
- 230000008520 organization Effects 0.000 description 2
- 238000007781 pre-processing Methods 0.000 description 2
- 238000011160 research Methods 0.000 description 2
- 238000000926 separation method Methods 0.000 description 2
- 230000003068 static effect Effects 0.000 description 2
- 101001099542 Aspergillus niger Pectin lyase A Proteins 0.000 description 1
- 241000255925 Diptera Species 0.000 description 1
- 208000032041 Hearing impaired Diseases 0.000 description 1
- 238000007792 addition Methods 0.000 description 1
- 239000012572 advanced medium Substances 0.000 description 1
- 230000003416 augmentation Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 230000003139 buffering effect Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000001427 coherent effect Effects 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 230000003111 delayed effect Effects 0.000 description 1
- 210000005069 ears Anatomy 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 230000005669 field effect Effects 0.000 description 1
- 238000011049 filling Methods 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 239000003607 modifier Substances 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000036651 mood Effects 0.000 description 1
- 238000003908 quality control method Methods 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 238000012827 research and development Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000008054 signal transmission Effects 0.000 description 1
- 230000011664 signaling Effects 0.000 description 1
- 238000001228 spectrum Methods 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
- 230000026676 system process Effects 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
- 238000000844 transformation Methods 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
- H04S7/30—Control circuits for electronic adaptation of the sound field
- H04S7/301—Automatic calibration of stereophonic sound system, e.g. with test microphone
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R5/00—Stereophonic arrangements
- H04R5/04—Circuit arrangements, e.g. for selective connection of amplifier inputs/outputs to loudspeakers, for loudspeaker detection, or for adaptation of settings to personal preferences or hearing impairments
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R5/00—Stereophonic arrangements
- H04R5/02—Spatial or constructional arrangements of loudspeakers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S3/00—Systems employing more than two channels, e.g. quadraphonic
- H04S3/008—Systems employing more than two channels, e.g. quadraphonic in which the audio signals are in digital form, i.e. employing more than two discrete digital channels
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S5/00—Pseudo-stereo systems, e.g. in which additional channel signals are derived from monophonic signals by means of phase shifting, time delay or reverberation
- H04S5/005—Pseudo-stereo systems, e.g. in which additional channel signals are derived from monophonic signals by means of phase shifting, time delay or reverberation of the pseudo five- or more-channel type, e.g. virtual surround
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
- H04S7/30—Control circuits for electronic adaptation of the sound field
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R2205/00—Details of stereophonic arrangements covered by H04R5/00 but not provided for in any of its subgroups
- H04R2205/024—Positioning of loudspeaker enclosures for spatial sound reproduction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R2205/00—Details of stereophonic arrangements covered by H04R5/00 but not provided for in any of its subgroups
- H04R2205/026—Single (sub)woofer with two or more satellite loudspeakers for mid- and high-frequency band reproduction driven via the (sub)woofer
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S2400/00—Details of stereophonic systems covered by H04S but not provided for in its groups
- H04S2400/01—Multi-channel, i.e. more than two input channels, sound reproduction with two speakers wherein the multi-channel information is substantially preserved
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S2400/00—Details of stereophonic systems covered by H04S but not provided for in its groups
- H04S2400/11—Positioning of individual sound objects, e.g. moving airplane, within a sound field
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S2420/00—Techniques used stereophonic systems covered by H04S but not provided for in its groups
- H04S2420/01—Enhancing the perception of the sound image or of the spatial distribution using head related transfer functions [HRTF's] or equivalents thereof, e.g. interaural time difference [ITD] or interaural level difference [ILD]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S2420/00—Techniques used stereophonic systems covered by H04S but not provided for in its groups
- H04S2420/03—Application of parametric coding in stereophonic audio systems
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Stereophonic System (AREA)
- Circuit For Audible Band Transducer (AREA)
Abstract
Description
実施形態は、向上した聴衆没入、高い芸術的制御、並びにシステム柔軟性及び拡張性を可能にする、オーディオフォーマット及びレンダリング技術に基づく「空間オーディオシステム」又は「適応型オーディオシステム」として言及され得るサウンドフォーマット及び処理システムと共に動作するよう構成される反射音レンダリングシステムに関する。適応型オーディオシステム全体は、概して、オーディオ符号化分散(distribution)と、伝統的なチャネルに基づくオーディオ要素とオーディオオブジェクト符号化要素との両方を含む1又は複数のビットストリームを生成するよう構成される復号化システムとを有する。このような結合されたアプローチは、別個に用いられるチャネルに基づく若しくはオブジェクトに基づくアプローチに比べて、高いコーディング効率及びレンダリングの柔軟性を提供する。本発明の実施形態と関連して用いられ得る適応型オーディオシステムの一例は、米国仮特許出願番号第61/636,429号、2012年4月20日出願、名称「System and Method for Adaptive Audio Signal Generation, Coding and Rendering」に記載されている。該出願は、参照により全体が本願明細書に組み込まれる。
上述のように、適応型オーディオフォーマット及びシステムの初期実装は、新規なオーサリングツールを用いてオーサリングされ、適応型オーディオシネマエンコーダを用いてパッケージされ、及びPCM又は独自仕様の無損失コーデックを用いて既存のDCI(Digital Cinema Initiative)分配メカニズムを用いて分配されるコンテンツキャプチャ(オブジェクト及びチャネル)を含むデジタルシネマ(D−cinema)の環境である。この例では、オーディオコンテンツは、没入型空間オーディオシネマ経験を生成するために、デジタルシネマで復号化及びレンダリングされることを意図している。しかしながら、アナログサラウンドサウンド、デジタル多チャネルオーディオ、等のような以前のシネマの進歩と共に、家庭にいるユーザに直接に適応型オーディオフォーマットにより提供される向上したユーザ経験を供給する要請がある。これは、フォーマット及びシステムの特定の特徴がより限られた聴取環境での使用に適応されることを要求する。例えば、家庭、部屋、小さな公会堂、又は類似の場所は、映画館又は劇場環境と比べて削減された空間、音響特性、及び機器能力を有し得る。説明の目的で、用語「消費者に基づく環境」は、家、スタジオ、部屋、操作領域、公会堂、等のような本職の顧客又はプロによる使用のための聴取環境を有する任意の非映画館環境を含むことを意図する。オーディオコンテンツは、単独で調達されレンダリングされても良く、或いは、グラフィックコンテンツ、例えば静止画像、光ディスプレイ、ビデオ、等に関連付けられても良い。
適応型オーディオシステムの実装は、種々の異なる聴取環境で展開できる。これらは、オーディオ再生アプリケーションの3つの主要な分野、つまりホームシアターシステム、テレビジョン及びサウンドバー、及びヘッドフォンを有する。図5は、例示的なホームシアター環境における適応型オーディオシステムの展開を示す。図5のシステムは、適応型オーディオシステムにより提供され得るコンポーネント及び機能の上位集合を示す。特定の特徴は、拡張された経験を提供しながら、ユーザの必要に基づき削減又は除去されても良い。システム500は、種々の異なるキャビネット又はアレイ504の中に種々の異なるスピーカ及びドライバを有する。スピーカは、フロント、サイド及びアップワードファイアリング、並びに特定のオーディオ処理技術を用いるオーディオの動的仮想化を提供する個々のドライバを有する。図500は、標準的な9.1スピーカ構成で展開される多数のスピーカを示す。これらは、左及び右ハイトスピーカ(LH、RH)、左及び右スピーカ(L、R)、中央スピーカ(変更された中央スピーカとして示す)、並びに左及び右サラウンド及びバックスピーカ(LS、LR、LB及びRB、低周波数要素LFEは示さない)を含む。
適応型オーディオシステムの主要な検討事項は、スピーカ構成である。システムは、個別にアドレス可能なドライバを用いる。このようなドライバのアレイは、直接及び反射音源の両方の組合せを提供するよう構成される。システム制御部(例えば、A/V受信機、セットトップボックス)への双方向リンクは、オーディオ及び構成データをスピーカへ送信させ、スピーカ及びセンサ情報を制御部に返送させ、積極的な閉ループシステムを生成する。
一旦構成されると、スピーカは、レンダリングシステムに接続されなければならない。伝統的な相互接続は、通常、2種類ある。つまり、パッシブスピーカのためのスピーカレベル入力と、アクティブスピーカのためのラインレベル入力である。図4Cに示すように、適応型オーディオシステム450は、双方向相互接続機能を有する。この相互接続は、レンダリング段454と増幅器/スピーカ458及びマイクロフォン段460との間の物理及び論理接続のセット内に実装される。各スピーカキャビネット内の複数のドライバをアドレスする能力は、音源とスピーカとの間のこれらの知的相互接続によりサポートされる。双方向相互接続は、音源からスピーカ(レンダラ)への信号の送信が制御信号とオーディオ信号の両方を含むことを可能にする。スピーカから音源への信号は、制御信号とオーディオ信号の両方を有する。ここで、この例におけるオーディオ信号は、任意的な内蔵マイクロフォンから調達されるオーディオである。電力は、少なくともスピーカ/ドライバが別個に電力供給されない例では、双方向相互接続の部分として供給されても良い。
図4Cに示すように、適応型オーディオシステムの機能は、較正機能462を有する。この機能は、図10に示されるマイクロフォン1007及び相互接続1008リンクにより有効にされる。システム100の中のマイクロフォンコンポーネントの機能は、全体的なシステム応答を得るために、聴取環境内の個々のドライバの応答を測定することである。複数のマイクロフォントポロジは、この目的のために用いることができ、単一のマイクロフォン又はマイクロフォンのアレイを含む。最も単純な例は、聴取環境の中心に位置付けられた単一の全方向性測定マイクロフォンが、各ドライバの応答を測定するために用いられる場合である。聴取環境及び再生条件が更に精細な分析を保証する場合、代わりに複数のマイクロフォンを用いることができる。複数のマイクロフォンにとって最も都合の良い場所は、聴取環境内で用いられる特定のスピーカ構成の物理的スピーカキャビネット内である。各筐体内に設置されたマイクロフォンは、システムが聴取環境内の複数の位置で各ドライバの応答を測定できるようにする。このトポロジの代替は、聴取環境内のリスナの位置に大***置付けられた複数の全方向性測定マイクロフォンを用いることである。
聴取環境又は劇場全体に適応型オーディオシステムを実装する代わりに、テレビジョン、コンピュータ、ゲーム端末、又は類似の装置のような、より局所的なアプリケーション内で適応型オーディオシステムの態様を実装することも可能である。この例は、事実上、閲覧スクリーン又はモニタ表面に対応する平坦な面内に配列されるスピーカに依る。図13は、例示的なテレビジョン及びサウンドバー使用例における適応型オーディオシステムの使用を示す。概して、テレビジョン使用例は、空間分解能の点で制限され得る(つまり、サラウンド又はバックスピーカを有しない)、削減される場合の多い機器(TV、スピーカ、サウンドバースピーカ、等)品質及びスピーカ位置/構成に基づく没入型オーディオ経験を生成することの挑戦を提供する。図13のシステム1300は、標準的なテレビジョンの左及び右位置(TV−L及びTV−R)並びに左及び右アップワードファイアリングドライバ(TV−LH及びTV−RH)にあるスピーカを有する。テレビジョン1302は、サウンドバー1304又はある種のハイトアレイのスピーカも有しても良い。通常、テレビジョンスピーカのサイズ及び品質は、単独の又はホームシアタースピーカと比べて、コスト制約及び設計選択により削減される。しかしながら、動的仮想化の使用は、これらの欠点を克服するのを助ける。図13で、動的仮想化効果は、TV−L及びTV−Rスピーカについて示される。したがって、特定の聴取環境1308内にいる人々は、水平面内で個々にレンダリングされる適切なオーディオオブジェクトに関連する水平要素を聞くだろう。さらに、適切なオーディオオブジェクトに関連するハイト要素は、LH及びRHドライバにより送信される反射オーディオを通じて正しくレンダリングされる。テレビジョンL及びRスピーカにおけるステレオ仮想化の使用は、可能な没入型動的スピーカ仮想化ユーザ経験が適応型オーディオコンテンツにより提供されるオブジェクト空間情報に基づくスピーカ仮想化アルゴリズムパラメータの動的制御を通じて可能であるL及びRホームシアタースピーカと同様である。この動的仮想化は、聴取環境の側面に沿って移動するオブジェクトの知覚を生成するために用いられても良い。
一実施形態では、適応型オーディオシステムは、元の空間オーディオフォーマットからメタデータを生成するコンポーネントを有する。システム300の方法及びコンポーネントは、従来のチャネルに基づくオーディオ要素及びオーディオオブジェクト符号化要素の両方を含む1又は複数のビットストリームを処理するよう構成されるオーディオレンダリングシステムを有する。オーディオオブジェクト符号化要素を含む新しい拡張層が定められ、チャネルに基づくオーディオコーデックビットストリーム又はオーディオオブジェクトビットストリームのうちの1つに追加される。このアプローチは、既存のスピーカ及びドライバ設計又は個々にアドレス可能なドライバ及びドライバ定義を利用する次世代スピーカと一緒に使用するために、拡張層を含むビットストリームがレンダラにより処理できるようにする。空間オーディオプロセッサからの空間オーディオコンテンツは、オーディオオブジェクト、チャネル、及び位置メタデータを有する。オブジェクトは、レンダリングされるとき、位置メタデータ及び再生スピーカの位置に従って1又は複数のスピーカを割り当てられる。追加メタデータは、再生位置を変更するために、或いは再生のために使用されるべきスピーカを限定するために、オブジェクトに関連付けられても良い。メタデータは、空間パラメータ(例えば、位置、速度、強度、音質、等)を制御し並びに聴取環境内のどのドライバ若しくはスピーカが公開中に個々の音を再生するかを指定するレンダリングキューを提供するための技師のミキシング入力に応答して、オーディオワークステーション内で生成される。メタデータは、空間オーディオプロセッサによるパッケージング及び転送のためにワークステーションにおいて個々のオーディオデータに関連付けられる。
上述のように、適応型オーディオエコシステムは、コンテンツクリエイタがミックスの空間的意図(位置、大きさ、速度、等)をメタデータによりビットストリーム内に埋め込むことを可能にする。これは、オーディオの空間的再現における驚くべき量の柔軟性を可能にする。空間レンダリングの観点から、適応型オーディオフォーマットは、オーサリングシステムと同一でない再生システムのジオメトリにより引き起こされる空間的歪みを回避するために、コンテンツクリエイタが聴取環境内のスピーカの正確な位置にミックスを適応できるようにする。スピーカチャネルのオーディオのみが送信される現在のオーディオ再現システムでは、固定スピーカ位置以外の聴取環境内の位置について、コンテンツクリエイタの意図は不明である。現在のチャネル/スピーカの枠組みでは、分かっている情報は、特定のオーディオチャネルが聴取環境内の所定の位置を有する特定のスピーカへ送信されるべきであることのみである。適応型オーディオシステムでは、生成及び分配パイプラインを通じて伝達されるメタデータを用いて、再現システムは、コンテンツクリエイタの元の意図に合致するようにコンテンツを再現するためにこの情報を使用できる。例えば、異なるオーディオオブジェクトについて、スピーカ間の関係が分かっている。オーディオオブジェクトの空間位置を提供することにより、コンテンツクリエイタの意図が分かり、これは、スピーカの位置を含むスピーカ構成にマッピングできる。動的レンダリングオーディオレンダリングシステムにより、このレンダリングは、追加スピーカを追加することにより更新され向上できる。
幾つかの例では、オーディオオブジェクトは、適応型オーディオコンテンツの所望の成分であっても良い。しかしながら、帯域幅の制限に基づき、チャネル/スピーカオーディオ及びオーディオオブジェクトの両方を送信できなくても良い。過去に、行列符号化は、所与の分配システムで可能なより多くのオーディオ情報を伝達するために使用されてきた。例えば、これは、多チャネルオーディオがサウンドミキサにより生成されたがフィルムフォーマットはステレオオーディオを提供するだけだった映画の初期における場合である。行列符号化は、多チャネルオーディオを2つのステレオチャネルに知的にダウンミックスするために使用された。これは、次に、ステレオオーディオから多チャネルミックスの厳密な近似を再生成するために特定のアルゴリズムにより処理された。同様に、オーディオオブジェクトを基本スピーカチャネルに知的にダウンミックスすること、並びに適応型オーディオメタデータ及び高機能な時間及び周波数に敏感な次世代サラウンドアルゴリズムを通じて、オブジェクトを抽出しそれらを適応型オーディオレンダリングシステムで正しく空間的にレンダリングすることが可能である。
適応型オーディオエコシステムは、コンテンツクリエイタが、個々のオーディオオブジェクト生成し、再現システムへ伝達できるコンテンツに関する情報を追加することを可能にする。これは、再現の前にオーディオの処理において多くの柔軟性を可能にする。処理は、オブジェクト位置及び大きさに基づき、スピーカ仮想化の動的制御を通じて、オブジェクトの位置及び種類に適応され得る。スピーカ仮想化は、仮想スタイラスがリスナに知覚されるように、オーディオを処理する方法を表す。この方法は、多くの場合、ソースオーディオがサラウンドスピーカチャネルフィードを有する多チャネルオーディオであるとき、ステレオスピーカ再現のために用いられる。仮想スピーカ処理は、サラウンドスピーカチャネルオーディオを変更して、ステレオスピーカで再生されるとき、サラウンドオーディオ要素がリスナの横及び後ろに仮想化され、まるでそこに仮想スピーカが配置されているかのようにする。現在、サラウンドスピーカの意図される位置が固定されているので、仮想スピーカ位置の位置属性は静的である。しかしながら、適応型オーディオコンテンツでは、異なるオーディオオブジェクトの空間位置は、動的であり異なる(つまり、各オブジェクトに対してユニークである)。仮想スピーカ仮想化のような後処理は、各オブジェクトのスピーカ位置角度のようなパラメータを動的に制御し、次に幾つかの仮想化オブジェクトのレンダリングされた出力を結合してサウンドミキサの意図をより厳密に表現するより一層の没入型オーディオ経験を生成することにより、より一層情報に基づく方法で制御できる。
会話増強は、会話の可聴性及び/又は明瞭度が増大され及び/又は向上されるような、会話を含むオーディオを処理する方法を表す。多くの例では、会話に適用されるオーディオ処理は、非会話オーディオコンテンツ(つまり、音楽、環境効果、等)には不適切であり、好ましくない可聴アーティファクトを生じ得る。適応型オーディオにより、オーディオオブジェクトは、コンテンツ片の中に会話のみを含み、相応してラベル付けできる。したがって、レンダリングソリューションは、会話コンテンツにのみ会話増強を選択的に適用し得る。さらに、オーディオオブジェクトが会話のみである場合(及び会話と多のコンテンツとの混合ではない、よくある場合)、会話増強処理は、もっぱら会話を処理できる(それにより、任意の多のコンテンツに対して実行される任意の処理を制限する)。
本願は、米国仮特許出願番号61/695,893、出願日2012年8月31日の優先権の利益を主張する。該米国仮特許出願は参照されることにより本願明細書に組み込まれる。
本願明細書で言及される公報、特許、及び/又は特許出願は、参照により、各々個々の公報及び/又は特許出願が具体的に及び個々に参照により組み込まれるべきであると示されるように、それらの全体が本願明細書に組み込まれる。
Claims (22)
- 反射音要素を用いて音をレンダリングするシステムであって、
聴取環境に渡る分散のためのオーディオドライバのアレイであって、前記オーディオドライバのアレイのうちの少なくとも1つのドライバは、前記聴取環境内の聴取領域への反射のために、前記聴取環境の1又は複数の面に向けて音波を発するよう構成される、オーディオドライバのアレイと、
オーディオストリーム、及び前記オーディオストリームの各々に関連付けられ及び個々のオーディオストリームの前記聴取環境内の再生位置を指定する1又は複数のメタデータセットを受信し処理するよう構成されるレンダラであって、前記オーディオストリームは、1又は複数の反射オーディオストリーム及び1又は複数の直接オーディオストリームを有する、レンダラと、
前記レンダラに結合され、前記1又は複数のメタデータセットに従って前記オーディオドライバのアレイに対応する複数のオーディオフィードに前記オーディオストリームをレンダリングするよう構成される再生コンポーネントであって、前記1又は複数の反射オーディオストリームは前記少なくとも1つのドライバへ送信される、再生コンポーネントと、
を有するシステム。 - 前記オーディオストリームは、チャネルに基づくオーディオ又はオブジェクトに基づくオーディオとして識別され、前記チャネルに基づくオーディオの前記再生位置は、前記オーディオドライバのアレイの中のドライバのスピーカ指定を有し、前記オブジェクトに基づくオーディオの前記再生位置は、三次元空間内の位置を有する、請求項1に記載のシステム。
- 前記オーディオドライバのアレイの各オーディオドライバは、レンダラ及び前記再生コンポーネントにより用いられる通信プロトコルに従ってユニークにアドレス可能である、請求項2に記載のシステム。
- 前記少なくとも1つのオーディオドライバは、サイドファイアリングドライバ及びアップファイアリングドライバのうちの1つを有し、前記少なくとも1つのオーディオドライバは、スピーカ筐体内のスタンドアロンドライバ及び単一スピーカ筐体内の1又は複数のフロントファイアリングドライバの近くに置かれたドライバのうちの1つに更に実装される、請求項3に記載のシステム。
- 前記オーディオドライバのアレイは、所定のサラウンドサウンド構成に従って前記聴取環境に渡り分散されるドライバを有する、請求項4に記載のシステム。
- 前記聴取環境は、家庭環境を有し、前記レンダラ及び再生コンポーネントは、家庭オーディオシステムの部分を有し、さらに、前記オーディオストリームは、家庭環境での再生のために変換された映画コンテンツ、テレビジョンコンテンツ、ユーザの生成したコンテンツ、コンピュータゲームコンテンツ、及び音楽を有するグループから選択されるオーディオコンテンツを有する、請求項5に記載のシステム。
- 前記少なくとも1つのドライバへ送信される前記オーディオストリームに関連付けられるメタデータセットは、前記反射に関連する1又は複数の特性を定める、請求項5に記載のシステム。
- 前記メタデータセットは、空間オーディオ情報のオブジェクトに基づくストリームに関連するメタデータ要素を有する基本メタデータセットを補足し、前記オブジェクトに基づくストリームの前記メタデータ要素は、対応するオブジェクトに基づく音の前記再生を制御し、音位置、音幅、及び音速度のうちの1又は複数を有する空間パラメータを指定する、請求項7に記載のシステム。
- 前記メタデータセットは、前記空間オーディオ情報のチャネルに基づくストリームに関連付けられたメタデータ要素を更に有し、各チャネルに基づくストリームに関連付けられた前記メタデータ要素は、前記所定のサラウンドサウンド構成における前記オーディオドライバのサラウンドサウンドチャネルの指定を有する、請求項8に記載のシステム。
- 前記少なくとも1つのドライバは、前記聴取環境内に配置されるマイクロフォンに関連付けられ、前記マイクロフォンは、前記レンダラに結合される較正コンポーネントへ前記聴取環境の特性をカプセル化する構成オーディオ情報を送信するよう構成され、前記構成オーディオ情報は、前記少なくとも1つのオーディオドライバへ送信される前記オーディオストリームに関連付けられた前記メタデータセットを定め又は変更するために、前記レンダラにより用いられる、請求項7に記載のシステム。
- 前記少なくとも1つのドライバは、前記聴取環境の床面に対するサウンドファイアリング角に関して調整可能な筐体内の手動調整可能オーディオトランスデューサ、及び前記サウンドファイアリング角に関して自動的に調整可能な筐体内の電気的制御可能なオーディオトランスデューサ、のうちの1つを有する、請求項1に記載のシステム。
- 頭上ハイト又はサイド要素を有するオーディオコンテンツをシミューレトするために反射音を用いて音をレンダリングするシステムであって、
所定の構成で、聴取環境に渡り配置されるユニークにアドレス可能なオーディオドライバのアレイであって、前記アレイの少なくとも1つのオーディオドライバは、前記オーディオコンテンツの仮想化ハイト又はサイドキューを提供するよう構成される、アレイと、
メタデータに従って、前記オーディオコンテンツを有するオーディオストリームを、前記ユニークにアドレス可能なオーディオドライバのアレイに対応する複数のオーディオフィードにレンダリングするよう構成されるレンダラであって、前記メタデータは、どの個々のオーディオストリームがそれぞれのアドレス可能なオーディオドライバへ送信されるべきかを指定する、レンダラと、
を有するシステム。 - 前記アレイの前記少なくとも1つのオーディオドライバは、前記聴取環境内の聴取領域への反射のために、前記聴取環境の1又は複数の上面へ向けて音波を発するよう構成されるアップワードファイアリングドライバ、及び前記聴取領域への反射のために前記聴取環境の1又は複数の側面に向けて音波を発するよう構成されるサイドファイアリングドライバ、のうちの1つを有する、請求項12に記載のシステム。
- 前記オーディオドライバのアレイの各オーディオドライバは、前記オーディオドライバのアレイ、前記レンダラ、及び前記システムの1又は複数のオーディオコンポーネントを結合するネットワークにより用いられる通信プロトコルに従ってユニークにアドレス可能である、請求項13に記載のシステム。
- 前記通信プロトコルは、インターネットプロトコルを有する、請求項14に記載のシステム。
- 前記アレイの各オーディオドライバは、前記ネットワーク内の個々のオーディオドライバを識別するユニークな識別子を格納するよう構成される、請求項14に記載のシステム。
- 前記所定の構成は、所定のサラウンドサウンド構成を有する、請求項12に記載のシステム。
- 前記聴取環境は、家庭環境を有し、前記レンダラは、家庭オーディオシステムの部分を有し、さらに、前記オーディオストリームは、家庭環境での再生のために変換された映画コンテンツ、テレビジョンコンテンツ、ユーザの生成したコンテンツ、コンピュータゲームコンテンツ、及び音楽を有するグループから選択されるオーディオコンテンツを有する、請求項17に記載のシステム。
- 前記オーディオドライバのアレイに関連付けられ及び前記レンダラに結合される構成コンポーネントへ前記聴取環境の条件に関連する音を送信するよう構成される少なくとも1つのマイクロフォン、を更に有する請求項12に記載のシステム。
- 前記レンダラは、前記オーディオドライバのアレイを構成し及び較正するために、前記較正コンポーネントにより提供される情報を利用するよう更に構成される、請求項19に記載のシステム。
- 前記少なくとも1つのオーディオドライバは、前記聴取環境の床面に対するサウンドファイアリング角に関して調整可能な筐体内の手動調整可能オーディオトランスデューサ、及び前記サウンドファイアリング角に関して自動的に調整可能な筐体内の電気的制御可能なオーディオトランスデューサ、のうちの1つを有する、請求項13に記載のシステム。
- 前記アレイの前記少なくとも1つのオーディオドライバは、物理ドライバ位置からハイトキューを少なくとも部分的に除去し、反射スピーカ位置からのハイトキューで少なくとも部分的に置換するために補償されるアップワードドライバを有する、請求項13に記載のシステム。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201261695893P | 2012-08-31 | 2012-08-31 | |
US61/695,893 | 2012-08-31 | ||
PCT/US2013/056989 WO2014036085A1 (en) | 2012-08-31 | 2013-08-28 | Reflected sound rendering for object-based audio |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2015530824A true JP2015530824A (ja) | 2015-10-15 |
JP6167178B2 JP6167178B2 (ja) | 2017-07-19 |
Family
ID=49118825
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015529981A Active JP6167178B2 (ja) | 2012-08-31 | 2013-08-28 | オブジェクトに基づくオーディオのための反射音レンダリング |
Country Status (10)
Country | Link |
---|---|
US (3) | US9794718B2 (ja) |
EP (1) | EP2891337B8 (ja) |
JP (1) | JP6167178B2 (ja) |
KR (1) | KR101676634B1 (ja) |
CN (3) | CN107509141B (ja) |
BR (1) | BR112015004288B1 (ja) |
ES (1) | ES2606678T3 (ja) |
HK (1) | HK1205846A1 (ja) |
RU (1) | RU2602346C2 (ja) |
WO (1) | WO2014036085A1 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2017212548A (ja) * | 2016-05-24 | 2017-11-30 | 日本放送協会 | 音声信号処理装置、音声信号処理方法、及びプログラム |
Families Citing this family (119)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10158962B2 (en) * | 2012-09-24 | 2018-12-18 | Barco Nv | Method for controlling a three-dimensional multi-layer speaker arrangement and apparatus for playing back three-dimensional sound in an audience area |
KR20140047509A (ko) * | 2012-10-12 | 2014-04-22 | 한국전자통신연구원 | 객체 오디오 신호의 잔향 신호를 이용한 오디오 부/복호화 장치 |
EP2830332A3 (en) | 2013-07-22 | 2015-03-11 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Method, signal processing unit, and computer program for mapping a plurality of input channels of an input channel configuration to output channels of an output channel configuration |
US9560449B2 (en) | 2014-01-17 | 2017-01-31 | Sony Corporation | Distributed wireless speaker system |
US9369801B2 (en) | 2014-01-24 | 2016-06-14 | Sony Corporation | Wireless speaker system with noise cancelation |
US9402145B2 (en) | 2014-01-24 | 2016-07-26 | Sony Corporation | Wireless speaker system with distributed low (bass) frequency |
US9426551B2 (en) | 2014-01-24 | 2016-08-23 | Sony Corporation | Distributed wireless speaker system with light show |
US9866986B2 (en) | 2014-01-24 | 2018-01-09 | Sony Corporation | Audio speaker system with virtual music performance |
US9232335B2 (en) | 2014-03-06 | 2016-01-05 | Sony Corporation | Networked speaker system with follow me |
EP2925024A1 (en) | 2014-03-26 | 2015-09-30 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Apparatus and method for audio rendering employing a geometric distance definition |
CN106165452B (zh) | 2014-04-02 | 2018-08-21 | 韦勒斯标准与技术协会公司 | 音频信号处理方法和设备 |
US20150356212A1 (en) * | 2014-04-04 | 2015-12-10 | J. Craig Oxford | Senior assisted living method and system |
WO2015178950A1 (en) * | 2014-05-19 | 2015-11-26 | Tiskerling Dynamics Llc | Directivity optimized sound reproduction |
EP3152920B1 (en) * | 2014-06-03 | 2018-11-28 | Dolby Laboratories Licensing Corporation | Audio speakers having upward firing drivers for reflected sound rendering |
WO2015194075A1 (ja) * | 2014-06-18 | 2015-12-23 | ソニー株式会社 | 画像処理装置、画像処理方法及びプログラム |
US20170142178A1 (en) * | 2014-07-18 | 2017-05-18 | Sony Semiconductor Solutions Corporation | Server device, information processing method for server device, and program |
EP3001701B1 (en) * | 2014-09-24 | 2018-11-14 | Harman Becker Automotive Systems GmbH | Audio reproduction systems and methods |
US9774974B2 (en) * | 2014-09-24 | 2017-09-26 | Electronics And Telecommunications Research Institute | Audio metadata providing apparatus and method, and multichannel audio data playback apparatus and method to support dynamic format conversion |
KR102302148B1 (ko) | 2014-09-26 | 2021-09-14 | 애플 인크. | 구성가능한 구역을 구비한 오디오 시스템 |
EP3201916B1 (en) | 2014-10-01 | 2018-12-05 | Dolby International AB | Audio encoder and decoder |
EP3829185B1 (en) | 2014-10-10 | 2024-04-10 | Sony Group Corporation | Encoding device and method, reproduction device and method, and program |
EP3219115A1 (en) * | 2014-11-11 | 2017-09-20 | Google, Inc. | 3d immersive spatial audio systems and methods |
US10057707B2 (en) | 2015-02-03 | 2018-08-21 | Dolby Laboratories Licensing Corporation | Optimized virtual scene layout for spatial meeting playback |
US10567185B2 (en) | 2015-02-03 | 2020-02-18 | Dolby Laboratories Licensing Corporation | Post-conference playback system having higher perceived quality than originally heard in the conference |
CN105992120B (zh) * | 2015-02-09 | 2019-12-31 | 杜比实验室特许公司 | 音频信号的上混音 |
WO2016163833A1 (ko) * | 2015-04-10 | 2016-10-13 | 세종대학교산학협력단 | 컴퓨터 실행 가능한 사운드 트레이싱 방법, 이를 수행하는 사운드 트레이싱 장치 및 이를 저장하는 기록매체 |
US10299064B2 (en) | 2015-06-10 | 2019-05-21 | Harman International Industries, Incorporated | Surround sound techniques for highly-directional speakers |
DE102015008000A1 (de) * | 2015-06-24 | 2016-12-29 | Saalakustik.De Gmbh | Verfahren zur Schallwiedergabe in Reflexionsumgebungen, insbesondere in Hörräumen |
US9530426B1 (en) * | 2015-06-24 | 2016-12-27 | Microsoft Technology Licensing, Llc | Filtering sounds for conferencing applications |
GB2543275A (en) * | 2015-10-12 | 2017-04-19 | Nokia Technologies Oy | Distributed audio capture and mixing |
EP3128762A1 (en) | 2015-08-03 | 2017-02-08 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Soundbar |
CN107925813B (zh) * | 2015-08-14 | 2020-01-14 | 杜比实验室特许公司 | 具有不对称扩散以用于经反射声音再现的向上激发扩音器 |
US10978079B2 (en) | 2015-08-25 | 2021-04-13 | Dolby Laboratories Licensing Corporation | Audio encoding and decoding using presentation transform parameters |
US9930469B2 (en) | 2015-09-09 | 2018-03-27 | Gibson Innovations Belgium N.V. | System and method for enhancing virtual audio height perception |
AU2015410432B2 (en) | 2015-09-28 | 2021-06-17 | Razer (Asia-Pacific) Pte Ltd | Computers, methods for controlling a computer, and computer-readable media |
DK3678386T3 (da) | 2015-10-08 | 2022-01-10 | Bang & Olufsen As | Aktiv rumkompensation i et højttalersystem |
JP6620235B2 (ja) * | 2015-10-27 | 2019-12-11 | アンビディオ,インコーポレイテッド | サウンドステージ拡張のための機器及び方法 |
MX2015015986A (es) * | 2015-10-29 | 2017-10-23 | Lara Rios Damian | Sistema de audio y cine en su casa para techo. |
US10778160B2 (en) | 2016-01-29 | 2020-09-15 | Dolby Laboratories Licensing Corporation | Class-D dynamic closed loop feedback amplifier |
US11290819B2 (en) * | 2016-01-29 | 2022-03-29 | Dolby Laboratories Licensing Corporation | Distributed amplification and control system for immersive audio multi-channel amplifier |
WO2017132583A2 (en) | 2016-01-29 | 2017-08-03 | Dolby Laboratories Licensing Corporation | Multi-channel cinema amplifier with power-sharing, messaging and multi-phase power supply |
US9693168B1 (en) | 2016-02-08 | 2017-06-27 | Sony Corporation | Ultrasonic speaker assembly for audio spatial effect |
US9826332B2 (en) | 2016-02-09 | 2017-11-21 | Sony Corporation | Centralized wireless speaker system |
WO2017138807A1 (es) * | 2016-02-09 | 2017-08-17 | Lara Rios Damian | Proyector de video con sistema de audio de cine en su casa para techo |
US9591427B1 (en) * | 2016-02-20 | 2017-03-07 | Philip Scott Lyren | Capturing audio impulse responses of a person with a smartphone |
US9826330B2 (en) | 2016-03-14 | 2017-11-21 | Sony Corporation | Gimbal-mounted linear ultrasonic speaker assembly |
US9693169B1 (en) | 2016-03-16 | 2017-06-27 | Sony Corporation | Ultrasonic speaker assembly with ultrasonic room mapping |
EP3434023B1 (en) | 2016-03-24 | 2021-10-13 | Dolby Laboratories Licensing Corporation | Near-field rendering of immersive audio content in portable computers and devices |
US10325610B2 (en) | 2016-03-30 | 2019-06-18 | Microsoft Technology Licensing, Llc | Adaptive audio rendering |
US10785560B2 (en) | 2016-05-09 | 2020-09-22 | Samsung Electronics Co., Ltd. | Waveguide for a height channel in a speaker |
CN107396233A (zh) * | 2016-05-16 | 2017-11-24 | 深圳市泰金田科技有限公司 | 一体化多声道音箱 |
CN116709161A (zh) | 2016-06-01 | 2023-09-05 | 杜比国际公司 | 将多声道音频内容转换成基于对象的音频内容的方法及用于处理具有空间位置的音频内容的方法 |
CN105933630A (zh) * | 2016-06-03 | 2016-09-07 | 深圳创维-Rgb电子有限公司 | 电视机 |
KR102483042B1 (ko) * | 2016-06-17 | 2022-12-29 | 디티에스, 인코포레이티드 | 근거리/원거리 렌더링을 사용한 거리 패닝 |
US10779106B2 (en) | 2016-07-20 | 2020-09-15 | Dolby Laboratories Licensing Corporation | Audio object clustering based on renderer-aware perceptual difference |
US9794724B1 (en) | 2016-07-20 | 2017-10-17 | Sony Corporation | Ultrasonic speaker assembly using variable carrier frequency to establish third dimension sound locating |
KR20180033771A (ko) * | 2016-09-26 | 2018-04-04 | 엘지전자 주식회사 | 영상표시장치 |
US10262665B2 (en) * | 2016-08-30 | 2019-04-16 | Gaudio Lab, Inc. | Method and apparatus for processing audio signals using ambisonic signals |
CA3034916A1 (en) * | 2016-09-14 | 2018-03-22 | Magic Leap, Inc. | Virtual reality, augmented reality, and mixed reality systems with spatialized audio |
CN106448687B (zh) * | 2016-09-19 | 2019-10-18 | 中科超影(北京)传媒科技有限公司 | 音频制作及解码的方法和装置 |
US10237644B1 (en) * | 2016-09-23 | 2019-03-19 | Apple Inc. | Enhancing a listening experience by adjusting physical attributes of an audio playback system based on detected environmental attributes of the system's environment |
US10405125B2 (en) * | 2016-09-30 | 2019-09-03 | Apple Inc. | Spatial audio rendering for beamforming loudspeaker array |
DE102016118950A1 (de) * | 2016-10-06 | 2018-04-12 | Visteon Global Technologies, Inc. | Verfahren und Einrichtung zur adaptiven Audiowiedergabe in einem Fahrzeug |
US9854362B1 (en) | 2016-10-20 | 2017-12-26 | Sony Corporation | Networked speaker system with LED-based wireless communication and object detection |
US9924286B1 (en) | 2016-10-20 | 2018-03-20 | Sony Corporation | Networked speaker system with LED-based wireless communication and personal identifier |
US10075791B2 (en) | 2016-10-20 | 2018-09-11 | Sony Corporation | Networked speaker system with LED-based wireless communication and room mapping |
US10623857B2 (en) * | 2016-11-23 | 2020-04-14 | Harman Becker Automotive Systems Gmbh | Individual delay compensation for personal sound zones |
WO2018112335A1 (en) | 2016-12-16 | 2018-06-21 | Dolby Laboratories Licensing Corporation | Audio speaker with full-range upward firing driver for reflected sound projection |
CA3052791A1 (en) * | 2017-02-06 | 2018-08-09 | Savant Systems, Llc | A/v interconnection architecture including an audio down-mixing transmitter a/v endpoint and distributed channel amplification |
US10798442B2 (en) | 2017-02-15 | 2020-10-06 | The Directv Group, Inc. | Coordination of connected home devices to provide immersive entertainment experiences |
US10149088B2 (en) * | 2017-02-21 | 2018-12-04 | Sony Corporation | Speaker position identification with respect to a user based on timing information for enhanced sound adjustment |
US9820073B1 (en) | 2017-05-10 | 2017-11-14 | Tls Corp. | Extracting a common signal from multiple audio signals |
US20180357038A1 (en) * | 2017-06-09 | 2018-12-13 | Qualcomm Incorporated | Audio metadata modification at rendering device |
US10674303B2 (en) * | 2017-09-29 | 2020-06-02 | Apple Inc. | System and method for maintaining accuracy of voice recognition |
GB2569214B (en) | 2017-10-13 | 2021-11-24 | Dolby Laboratories Licensing Corp | Systems and methods for providing an immersive listening experience in a limited area using a rear sound bar |
US10531222B2 (en) | 2017-10-18 | 2020-01-07 | Dolby Laboratories Licensing Corporation | Active acoustics control for near- and far-field sounds |
US10499153B1 (en) | 2017-11-29 | 2019-12-03 | Boomcloud 360, Inc. | Enhanced virtual stereo reproduction for unmatched transaural loudspeaker systems |
WO2019136460A1 (en) * | 2018-01-08 | 2019-07-11 | Polk Audio, Llc | Synchronized voice-control module, loudspeaker system and method for incorporating vc functionality into a separate loudspeaker system |
WO2019149337A1 (en) * | 2018-01-30 | 2019-08-08 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Apparatuses for converting an object position of an audio object, audio stream provider, audio content production system, audio playback apparatus, methods and computer programs |
AU2019253134A1 (en) | 2018-04-09 | 2020-10-01 | Dolby International Ab | Methods, apparatus and systems for three degrees of freedom (3DoF+) extension of MPEG-H 3D audio |
US11004438B2 (en) | 2018-04-24 | 2021-05-11 | Vizio, Inc. | Upfiring speaker system with redirecting baffle |
WO2020012062A2 (en) | 2018-07-13 | 2020-01-16 | Nokia Technologies Oy | Multi-viewpoint multi-user audio user experience |
WO2020037280A1 (en) | 2018-08-17 | 2020-02-20 | Dts, Inc. | Spatial audio signal decoder |
WO2020037282A1 (en) | 2018-08-17 | 2020-02-20 | Dts, Inc. | Spatial audio signal encoder |
EP3617871A1 (en) * | 2018-08-28 | 2020-03-04 | Koninklijke Philips N.V. | Audio apparatus and method of audio processing |
EP3618464A1 (en) * | 2018-08-30 | 2020-03-04 | Nokia Technologies Oy | Reproduction of parametric spatial audio using a soundbar |
KR102671308B1 (ko) | 2018-10-16 | 2024-06-03 | 돌비 레버러토리즈 라이쎈싱 코오포레이션 | 저음 관리를 위한 방법 및 디바이스 |
US10623859B1 (en) | 2018-10-23 | 2020-04-14 | Sony Corporation | Networked speaker system with combined power over Ethernet and audio delivery |
US10575094B1 (en) | 2018-12-13 | 2020-02-25 | Dts, Inc. | Combination of immersive and binaural sound |
CA3199318A1 (en) | 2018-12-19 | 2020-06-25 | Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. | Apparatus and method for reproducing a spatially extended sound source or apparatus and method for generating a bitstream from a spatially extended sound source |
KR102019179B1 (ko) | 2018-12-19 | 2019-09-09 | 세종대학교산학협력단 | 사운드 트레이싱 장치 및 방법 |
US11095976B2 (en) | 2019-01-08 | 2021-08-17 | Vizio, Inc. | Sound system with automatically adjustable relative driver orientation |
JP2022522442A (ja) | 2019-02-27 | 2022-04-19 | ドルビー ラボラトリーズ ライセンシング コーポレイション | ハイトチャンネルスピーカ用音響反射器 |
EP3949438A4 (en) | 2019-04-02 | 2023-03-01 | Syng, Inc. | SYSTEMS AND METHODS FOR SPATIAL AUDIO REPRODUCTION |
US11943600B2 (en) | 2019-05-03 | 2024-03-26 | Dolby Laboratories Licensing Corporation | Rendering audio objects with multiple types of renderers |
CN114402631B (zh) * | 2019-05-15 | 2024-05-31 | 苹果公司 | 用于回放捕获的声音的方法和电子设备 |
US10743105B1 (en) | 2019-05-31 | 2020-08-11 | Microsoft Technology Licensing, Llc | Sending audio to various channels using application location information |
WO2020256745A1 (en) * | 2019-06-21 | 2020-12-24 | Hewlett-Packard Development Company, L.P. | Image-based soundfield rendering |
WO2021018378A1 (en) | 2019-07-29 | 2021-02-04 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Apparatus, method or computer program for processing a sound field representation in a spatial transform domain |
WO2021021460A1 (en) | 2019-07-30 | 2021-02-04 | Dolby Laboratories Licensing Corporation | Adaptable spatial audio playback |
EP4005235A1 (en) | 2019-07-30 | 2022-06-01 | Dolby Laboratories Licensing Corporation | Dynamics processing across devices with differing playback capabilities |
WO2021021707A1 (en) * | 2019-07-30 | 2021-02-04 | Dolby Laboratories Licensing Corporation | Managing playback of multiple streams of audio over multiple speakers |
GB2587357A (en) * | 2019-09-24 | 2021-03-31 | Nokia Technologies Oy | Audio processing |
TWI735968B (zh) * | 2019-10-09 | 2021-08-11 | 名世電子企業股份有限公司 | 音場型自然環境音效系統 |
CN112672084A (zh) * | 2019-10-15 | 2021-04-16 | 海信视像科技股份有限公司 | 显示装置及扬声器音效调整方法 |
US10924853B1 (en) | 2019-12-04 | 2021-02-16 | Roku, Inc. | Speaker normalization system |
FR3105692B1 (fr) * | 2019-12-24 | 2022-01-14 | Focal Jmlab | Enceinte de diffusion de son par reverberation |
KR20210098197A (ko) | 2020-01-31 | 2021-08-10 | 한림대학교 산학협력단 | 기계학습을 기반으로 하는 액체 속성 판별장치 및 이를 이용한 핸드폰 |
JPWO2021200260A1 (ja) * | 2020-04-01 | 2021-10-07 | ||
CN111641898B (zh) * | 2020-06-08 | 2021-12-03 | 京东方科技集团股份有限公司 | 发声装置、显示装置、发声控制方法及装置 |
US11586407B2 (en) * | 2020-06-09 | 2023-02-21 | Meta Platforms Technologies, Llc | Systems, devices, and methods of manipulating audio data based on display orientation |
US11317137B2 (en) * | 2020-06-18 | 2022-04-26 | Disney Enterprises, Inc. | Supplementing entertainment content with ambient lighting |
CN114650456B (zh) * | 2020-12-17 | 2023-07-25 | 深圳Tcl新技术有限公司 | 一种音频描述符的配置方法、***、存储介质及配置设备 |
US11521623B2 (en) | 2021-01-11 | 2022-12-06 | Bank Of America Corporation | System and method for single-speaker identification in a multi-speaker environment on a low-frequency audio recording |
CN112953613B (zh) * | 2021-01-28 | 2023-02-03 | 西北工业大学 | 一种基于智能反射面反向散射的车辆与卫星协作通信方法 |
TWI789955B (zh) * | 2021-10-20 | 2023-01-11 | 明基電通股份有限公司 | 多媒體播放裝置的音效管理系統及其管理方法 |
WO2023076039A1 (en) | 2021-10-25 | 2023-05-04 | Dolby Laboratories Licensing Corporation | Generating channel and object-based audio from channel-based audio |
KR102654949B1 (ko) * | 2022-08-01 | 2024-05-09 | 주식회사 제이디솔루션 | 초지향성 스피커가 탑재된 사운드바 |
EP4329327A1 (en) * | 2022-08-26 | 2024-02-28 | Bang & Olufsen A/S | Loudspeaker transducer arrangement |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002199487A (ja) * | 2000-12-26 | 2002-07-12 | Kenwood Corp | オーディオ装置 |
JP2009017137A (ja) * | 2007-07-03 | 2009-01-22 | Yamaha Corp | スピーカアレイ装置 |
JP2010258653A (ja) * | 2009-04-23 | 2010-11-11 | Panasonic Corp | サラウンドシステム |
JP2011066544A (ja) * | 2009-09-15 | 2011-03-31 | Nippon Telegr & Teleph Corp <Ntt> | ネットワーク・スピーカシステム、送信装置、再生制御方法、およびネットワーク・スピーカプログラム |
WO2011135283A2 (en) * | 2010-04-26 | 2011-11-03 | Cambridge Mechatronics Limited | Loudspeakers with position tracking |
Family Cites Families (57)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE2941692A1 (de) | 1979-10-15 | 1981-04-30 | Matteo Torino Martinez | Verfahren und vorrichtung zur tonwiedergabe |
DE3201455C2 (de) | 1982-01-19 | 1985-09-19 | Dieter 7447 Aichtal Wagner | Lautsprecherbox |
JPS60254992A (ja) * | 1984-05-31 | 1985-12-16 | Ricoh Co Ltd | 音響装置 |
US4890689A (en) * | 1986-06-02 | 1990-01-02 | Tbh Productions, Inc. | Omnidirectional speaker system |
US5199075A (en) * | 1991-11-14 | 1993-03-30 | Fosgate James W | Surround sound loudspeakers and processor |
US6577738B2 (en) * | 1996-07-17 | 2003-06-10 | American Technology Corporation | Parametric virtual speaker and surround-sound system |
US6229899B1 (en) * | 1996-07-17 | 2001-05-08 | American Technology Corporation | Method and device for developing a virtual speaker distant from the sound source |
JP4221792B2 (ja) * | 1998-01-09 | 2009-02-12 | ソニー株式会社 | スピーカ装置及びオーディオ信号送信装置 |
US6134645A (en) | 1998-06-01 | 2000-10-17 | International Business Machines Corporation | Instruction completion logic distributed among execution units for improving completion efficiency |
JP3382159B2 (ja) * | 1998-08-05 | 2003-03-04 | 株式会社東芝 | 情報記録媒体とその再生方法及び記録方法 |
JP3525855B2 (ja) * | 2000-03-31 | 2004-05-10 | 松下電器産業株式会社 | 音声認識方法及び音声認識装置 |
EP1532734A4 (en) * | 2002-06-05 | 2008-10-01 | Sonic Focus Inc | ACOUSTIC VIRTUAL REALITY ENGINE AND ADVANCED TECHNIQUES FOR IMPROVING THE DELIVERED SOUND |
KR100542129B1 (ko) * | 2002-10-28 | 2006-01-11 | 한국전자통신연구원 | 객체기반 3차원 오디오 시스템 및 그 제어 방법 |
FR2847376B1 (fr) * | 2002-11-19 | 2005-02-04 | France Telecom | Procede de traitement de donnees sonores et dispositif d'acquisition sonore mettant en oeuvre ce procede |
DE10321986B4 (de) | 2003-05-15 | 2005-07-14 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Vorrichtung und Verfahren zum Pegel-Korrigieren in einem Wellenfeldsynthesesystem |
JP4127156B2 (ja) * | 2003-08-08 | 2008-07-30 | ヤマハ株式会社 | オーディオ再生装置、ラインアレイスピーカユニットおよびオーディオ再生方法 |
JP4114584B2 (ja) * | 2003-09-25 | 2008-07-09 | ヤマハ株式会社 | 指向性スピーカ制御システム |
JP4114583B2 (ja) * | 2003-09-25 | 2008-07-09 | ヤマハ株式会社 | 特性補正システム |
JP4254502B2 (ja) * | 2003-11-21 | 2009-04-15 | ヤマハ株式会社 | アレースピーカ装置 |
US8170233B2 (en) * | 2004-02-02 | 2012-05-01 | Harman International Industries, Incorporated | Loudspeaker array system |
US20050177256A1 (en) * | 2004-02-06 | 2005-08-11 | Peter Shintani | Addressable loudspeaker |
JP2005223713A (ja) * | 2004-02-06 | 2005-08-18 | Sony Corp | 音響再生装置、音響再生方法 |
JP2005295181A (ja) * | 2004-03-31 | 2005-10-20 | Victor Co Of Japan Ltd | 音声情報生成装置 |
US8363865B1 (en) | 2004-05-24 | 2013-01-29 | Heather Bottum | Multiple channel sound system using multi-speaker arrays |
JP4127248B2 (ja) * | 2004-06-23 | 2008-07-30 | ヤマハ株式会社 | スピーカアレイ装置及びスピーカアレイ装置の音声ビーム設定方法 |
JP4214961B2 (ja) * | 2004-06-28 | 2009-01-28 | セイコーエプソン株式会社 | 超指向性音響システム及びプロジェクタ |
JP3915804B2 (ja) * | 2004-08-26 | 2007-05-16 | ヤマハ株式会社 | オーディオ再生装置 |
US8041061B2 (en) * | 2004-10-04 | 2011-10-18 | Altec Lansing, Llc | Dipole and monopole surround sound speaker system |
CA2598575A1 (en) * | 2005-02-22 | 2006-08-31 | Verax Technologies Inc. | System and method for formatting multimode sound content and metadata |
DE102005008343A1 (de) * | 2005-02-23 | 2006-09-07 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Vorrichtung und Verfahren zum Liefern von Daten in einem Multi-Renderer-System |
JP4682927B2 (ja) * | 2005-08-03 | 2011-05-11 | セイコーエプソン株式会社 | 静電型超音波トランスデューサ、超音波スピーカ、音声信号再生方法、超音波トランスデューサの電極の製造方法、超音波トランスデューサの製造方法、超指向性音響システム、および表示装置 |
JP4793174B2 (ja) * | 2005-11-25 | 2011-10-12 | セイコーエプソン株式会社 | 静電型トランスデューサ、回路定数の設定方法 |
US7606377B2 (en) * | 2006-05-12 | 2009-10-20 | Cirrus Logic, Inc. | Method and system for surround sound beam-forming using vertically displaced drivers |
US7676049B2 (en) * | 2006-05-12 | 2010-03-09 | Cirrus Logic, Inc. | Reconfigurable audio-video surround sound receiver (AVR) and method |
WO2007135581A2 (en) * | 2006-05-16 | 2007-11-29 | Koninklijke Philips Electronics N.V. | A device for and a method of processing audio data |
ES2289936B1 (es) | 2006-07-17 | 2009-01-01 | Felipe Jose Joubert Nogueroles | Muñeco con estructura interna flexible y posicionable. |
US8036767B2 (en) * | 2006-09-20 | 2011-10-11 | Harman International Industries, Incorporated | System for extracting and changing the reverberant content of an audio input signal |
US8855275B2 (en) * | 2006-10-18 | 2014-10-07 | Sony Online Entertainment Llc | System and method for regulating overlapping media messages |
JP4449998B2 (ja) * | 2007-03-12 | 2010-04-14 | ヤマハ株式会社 | アレイスピーカ装置 |
US8515759B2 (en) * | 2007-04-26 | 2013-08-20 | Dolby International Ab | Apparatus and method for synthesizing an output signal |
KR100902874B1 (ko) * | 2007-06-26 | 2009-06-16 | 버츄얼빌더스 주식회사 | 재질 스타일에 기초한 공간 음향 분석기 및 그 방법 |
EP2189009A1 (en) * | 2007-08-14 | 2010-05-26 | Koninklijke Philips Electronics N.V. | An audio reproduction system comprising narrow and wide directivity loudspeakers |
GB2457508B (en) * | 2008-02-18 | 2010-06-09 | Ltd Sony Computer Entertainmen | System and method of audio adaptaton |
EP2253148A1 (en) * | 2008-03-13 | 2010-11-24 | Koninklijke Philips Electronics N.V. | Speaker array and driver arrangement therefor |
US8315396B2 (en) * | 2008-07-17 | 2012-11-20 | Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. | Apparatus and method for generating audio output signals using object based metadata |
EP2175670A1 (en) * | 2008-10-07 | 2010-04-14 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Binaural rendering of a multi-channel audio signal |
CN102440003B (zh) * | 2008-10-20 | 2016-01-27 | 吉诺迪奥公司 | 音频空间化和环境仿真 |
US8351612B2 (en) * | 2008-12-02 | 2013-01-08 | Electronics And Telecommunications Research Institute | Apparatus for generating and playing object based audio contents |
KR20100062784A (ko) * | 2008-12-02 | 2010-06-10 | 한국전자통신연구원 | 객체 기반 오디오 컨텐츠 생성/재생 장치 |
GB2478834B (en) * | 2009-02-04 | 2012-03-07 | Richard Furse | Sound system |
US8577065B2 (en) * | 2009-06-12 | 2013-11-05 | Conexant Systems, Inc. | Systems and methods for creating immersion surround sound and virtual speakers effects |
KR101805212B1 (ko) * | 2009-08-14 | 2017-12-05 | 디티에스 엘엘씨 | 객체-지향 오디오 스트리밍 시스템 |
CN104822036B (zh) | 2010-03-23 | 2018-03-30 | 杜比实验室特许公司 | 用于局域化感知音频的技术 |
KR20120004909A (ko) | 2010-07-07 | 2012-01-13 | 삼성전자주식회사 | 입체 음향 재생 방법 및 장치 |
US9185490B2 (en) * | 2010-11-12 | 2015-11-10 | Bradley M. Starobin | Single enclosure surround sound loudspeaker system and method |
AU2012279357B2 (en) | 2011-07-01 | 2016-01-14 | Dolby Laboratories Licensing Corporation | System and method for adaptive audio signal generation, coding and rendering |
RS1332U (en) | 2013-04-24 | 2013-08-30 | Tomislav Stanojević | FULL SOUND ENVIRONMENT SYSTEM WITH FLOOR SPEAKERS |
-
2013
- 2013-08-28 ES ES13759397.6T patent/ES2606678T3/es active Active
- 2013-08-28 KR KR1020157005221A patent/KR101676634B1/ko active IP Right Grant
- 2013-08-28 BR BR112015004288-0A patent/BR112015004288B1/pt active IP Right Grant
- 2013-08-28 EP EP13759397.6A patent/EP2891337B8/en active Active
- 2013-08-28 CN CN201710759620.7A patent/CN107509141B/zh active Active
- 2013-08-28 CN CN201710759597.1A patent/CN107454511B/zh active Active
- 2013-08-28 RU RU2015111450/08A patent/RU2602346C2/ru active
- 2013-08-28 US US14/421,768 patent/US9794718B2/en active Active
- 2013-08-28 CN CN201380045330.6A patent/CN104604256B/zh active Active
- 2013-08-28 WO PCT/US2013/056989 patent/WO2014036085A1/en active Application Filing
- 2013-08-28 JP JP2015529981A patent/JP6167178B2/ja active Active
-
2015
- 2015-06-30 HK HK15106206.0A patent/HK1205846A1/xx unknown
-
2017
- 2017-09-26 US US15/716,434 patent/US10743125B2/en active Active
-
2020
- 2020-08-11 US US16/990,896 patent/US11277703B2/en active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002199487A (ja) * | 2000-12-26 | 2002-07-12 | Kenwood Corp | オーディオ装置 |
JP2009017137A (ja) * | 2007-07-03 | 2009-01-22 | Yamaha Corp | スピーカアレイ装置 |
JP2010258653A (ja) * | 2009-04-23 | 2010-11-11 | Panasonic Corp | サラウンドシステム |
JP2011066544A (ja) * | 2009-09-15 | 2011-03-31 | Nippon Telegr & Teleph Corp <Ntt> | ネットワーク・スピーカシステム、送信装置、再生制御方法、およびネットワーク・スピーカプログラム |
WO2011135283A2 (en) * | 2010-04-26 | 2011-11-03 | Cambridge Mechatronics Limited | Loudspeakers with position tracking |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2017212548A (ja) * | 2016-05-24 | 2017-11-30 | 日本放送協会 | 音声信号処理装置、音声信号処理方法、及びプログラム |
Also Published As
Publication number | Publication date |
---|---|
US20210029482A1 (en) | 2021-01-28 |
CN107509141A (zh) | 2017-12-22 |
BR112015004288B1 (pt) | 2021-05-04 |
RU2602346C2 (ru) | 2016-11-20 |
US20150350804A1 (en) | 2015-12-03 |
WO2014036085A1 (en) | 2014-03-06 |
US9794718B2 (en) | 2017-10-17 |
US10743125B2 (en) | 2020-08-11 |
CN107454511B (zh) | 2024-04-05 |
EP2891337A1 (en) | 2015-07-08 |
KR101676634B1 (ko) | 2016-11-16 |
HK1205846A1 (en) | 2015-12-24 |
US11277703B2 (en) | 2022-03-15 |
CN107509141B (zh) | 2019-08-27 |
EP2891337B8 (en) | 2016-12-14 |
CN104604256A (zh) | 2015-05-06 |
BR112015004288A2 (pt) | 2017-07-04 |
KR20150038487A (ko) | 2015-04-08 |
US20180020310A1 (en) | 2018-01-18 |
EP2891337B1 (en) | 2016-10-05 |
CN107454511A (zh) | 2017-12-08 |
JP6167178B2 (ja) | 2017-07-19 |
RU2015111450A (ru) | 2016-10-20 |
CN104604256B (zh) | 2017-09-15 |
ES2606678T3 (es) | 2017-03-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11277703B2 (en) | Speaker for reflecting sound off viewing screen or display surface | |
US11178503B2 (en) | System for rendering and playback of object based audio in various listening environments | |
JP5985063B2 (ja) | レンダラーと個々に指定可能なドライバのアレイとの間の通信のための双方向相互接続 | |
JP6186436B2 (ja) | 個々に指定可能なドライバへの上方混合されたコンテンツの反射されたおよび直接的なレンダリング |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20160205 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20160405 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160627 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20161206 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170324 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20170331 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20170606 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20170626 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6167178 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |