JP7208126B2 - マルチチャンネル信号を符号化又は復号化するための装置と方法 - Google Patents

マルチチャンネル信号を符号化又は復号化するための装置と方法 Download PDF

Info

Publication number
JP7208126B2
JP7208126B2 JP2019182675A JP2019182675A JP7208126B2 JP 7208126 B2 JP7208126 B2 JP 7208126B2 JP 2019182675 A JP2019182675 A JP 2019182675A JP 2019182675 A JP2019182675 A JP 2019182675A JP 7208126 B2 JP7208126 B2 JP 7208126B2
Authority
JP
Japan
Prior art keywords
channel
channels
processing
mch
processed
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2019182675A
Other languages
English (en)
Other versions
JP2020034920A (ja
Inventor
サッシャ ディック
フローリアン シュウ
ニコラウス レッテルバッハ
トビアス シュヴェーグラー
リヒャルト フューク
ジョーハン ヒルペアト
マティアス ノイズィンガー
Original Assignee
フラウンホッファー－ゲゼルシャフト ツァ フェルダールング デァ アンゲヴァンテン フォアシュンク エー．ファオ
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by フラウンホッファー－ゲゼルシャフト ツァ フェルダールング デァ アンゲヴァンテン フォアシュンク エー．ファオ filed Critical フラウンホッファー－ゲゼルシャフト ツァ フェルダールング デァ アンゲヴァンテン フォアシュンク エー．ファオ
Publication of JP2020034920A publication Critical patent/JP2020034920A/ja
Priority to JP2023000472A priority Critical patent/JP2023052219A/ja
Application granted granted Critical
Publication of JP7208126B2 publication Critical patent/JP7208126B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/02—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/008—Multichannel audio signal coding or decoding using interchannel correlation to reduce redundancy, e.g. joint-stereo, intensity-coding or matrixing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S3/00—Systems employing more than two channels, e.g. quadraphonic
    • H04S3/008—Systems employing more than two channels, e.g. quadraphonic in which the audio signals are in digital form, i.e. employing more than two discrete digital channels
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S2400/00—Details of stereophonic systems covered by H04S but not provided for in its groups
    • H04S2400/01—Multi-channel, i.e. more than two input channels, sound reproduction with two speakers wherein the multi-channel information is substantially preserved

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computational Linguistics (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Health & Medical Sciences (AREA)
  • Mathematical Physics (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)
  • Error Detection And Correction (AREA)
  • Stereophonic System (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Description

本発明は、オーディオコーディング／復号化に関し、特にチャンネル間信号の依存性を利用するオーディオコーディングに関する。
オーディオコーディングは、オーディオ信号において、余剰のもの及び不要なものの利用を解決する圧縮領域である。ＭＰＥＧ ＵＳＡＣ［ＩＳＯ／ＩＥＣ ２３００３－３：２０１２ 情報技術 ＭＰＥＧオーディオ技術 パート３：統合した音声符号化とオーディオコーディング］において、２つのチャンネルのジョイントステレオ符号化は、ＭＰＳ ２－１－２、又は帯域制限若しくは全帯域残差信号を伴う統合ステレオのような複雑な予測を使用して行われる。ＭＰＥＧ環境［ＩＳＯ／ＩＥＣ ２３００３－１：２００７ 情報技術 ＭＰＥＧオーディオ技術 パート１：ＭＰＥＧ環境］は、残差信号の送信を有する／有しないマルチチャンネルオーディオのジョイントコーディングのために、ＯＴＴとＴＴＴボックスとを段階的に結合する。ＭＰＥＧ－Ｈクワッドチャンネル要素は、固定された４×４リミックスツリーを構築する複雑な予測／ＭＳステレオボックスによって、後に続くＭＰＳ ２－１－２ステレオボックスを段階的に適用する。ＡＣ４［ＥＴＳＩ ＴＳ １０３ １９０ Ｖ１．１．１（２０１４－０４）デジタルオーディオ圧縮（ＡＣ－４）標準］は、送信された混合行列や後のジョイントステレオ符号化情報を介して送信されたチャンネルをリミックスすることを許容する新しい３、４、５のチャンネル要素を取り入れる。さらに、以前の発表は、強化されたマルチチャンネルオーディオコーディングのために、カルーネン・レーベ変換（ＫＬＴ）のような直交変換を使用することを提案する。［Yang, Dai and Ai, Hongmei and Kyriakakis, Chris and Kuo, C.-C. Jay, 2001: Adaptive Karhunen-Loeve Transform for Enhanced Multichannel Audio Coding, http://ict.usc.edu/pubs/Adaptive%20Karhunen-Loeve%20Transform%20for%20Enhanced %20Multichannel%20Audio%20Coding.pdf］
３Ｄオーディオの環境で、ラウドスピーカーチャンネルは、水平及び垂直のチャンネル対の結果となるいくつかの高い層によって分配される。ＵＳＡＣにおいて定義づけられるように、２つのチャンネルだけのジョイントコーディングは、チャンネル間の空間的及び知覚的な関係を考慮するのに十分ではない。ＭＰＥＧ環境は、追加の前／後処理ステップで適用され、残りの信号は、例えば、右と左の間の垂直の残りの信号との間の依存性を利用するために、ジョイントステレオ符号化の可能性なしに個々に送信される。ＡＣ－４において、専用のＮチャンネル要素は、ジョイントコーディングパラメータの効果的な符号化を許容するが、新しい没入型再生シナリオ（７．１＋４、２２．２）で提案されているように、より多くのチャンネルを持つ一般的なスピーカーの設定は失敗するように導入されている。ＭＰＥＧ－Ｈクワッドチャンネル要素は、４チャンネルのみに制限され、任意のチャンネルに動的に適用することはできず、チャンネル数をあらかじめ構成し、固定される。
本発明の目的は、改良された符号化／復号化の概念を提供することである。
この目的は、請求項１による少なくとも３つのチャンネル有するマルチチャンネル信号を符号化するための装置、請求項１２による符号化されたチャンネルと、少なくとも第１及び第２マルチチャンネルパラメータとを有する符号化されたマルチチャンネルを復号化するための装置、請求項２１による少なくとも３つのチャンネルを有するマルチチャンネル信号を符号化するための方法、請求項２２によって符号化されたチャンネルと、少なくとも第１及び第２マルチチャンネルパラメータとを有する符号化されたマルチチャンネル信号を復号化するための方法、又は請求項２３によるコンピュータプログラムによって達成される。
実施の形態は、少なくとも３つのチャンネルを有するマルチチャンネル信号を符号化するための装置を備える。その装置は、反復プロセッサーと、チャンネルエンコーダーと、出力インターフェースとを備える。反復プロセッサーは、第１反復ステップにおいて、最高値を有する又は閾値より上の値を有する組を選択し、マルチチャンネル処理操作を使用して選択された組を処理して、選択された組についての第１マルチチャンネルパラメータ（ＭＣＨ＿ＰＡＲ１）を導出する、及び第１の処理されたチャンネルを導出するために、第１反復ステップにおいて、少なくとも３つのチャンネルのそれぞれの組の間のチャンネル間相関値を計算するよう構成される。さらに、反復プロセッサーは、第２反復ステップにおいて、処理されたチャンネルの少なくとも１つを使用して、計算、選択、処理を実行して、第２マルチチャンネルパラメータ及び第２の処理されたチャンネルを導出するよう構成される。チャンネルエンコーダーは、反復プロセッサーによって実行される反復処理から生じたチャンネルを符号化して符号化されたチャンネルを得るよう構成される。出力インターフェースは、符号化されたチャンネルと、第１及び第２マルチチャンネルパラメータとを有する符号化されたマルチチャンネル信号を生成するよう構成される。
別の実施の形態は、符号化されたマルチチャンネル信号を復号化するための装置を備え、符号化されたマルチチャンネル信号は、符号化されたチャンネルと、第１及び第２マルチチャンネルパラメータとを有する。装置は、チャンネルデコーダーとマルチチャンネルプロセッサーとを備える。チャンネルデコーダーは、符号化されたチャンネルを復号化して、復号化されたチャンネルを得るよう構成される。マルチチャンネルプロセッサーは、第２マルチチャンネルパラメータによって識別された復号化されたチャンネルの第２の組を使用して、及び第２マルチチャンネルパラメータを使用してマルチチャンネル処理を実行して、処理されたチャンネルを得るように構成され、第１マルチチャンネルパラメータによって識別されたチャンネルの第１の組を使用して、及び第１マルチチャンネルパラメータを使用して、別のマルチチャンネル処理を実行するよう構成され、チャンネルの第１の組は、少なくとも１つの処理されたチャンネルを備える。
固定された信号経路（例えば、ステレオコーディングツリー）を使用する一般的なマルチチャンネル符号化概念とは対照的に、本発明の実施の形態は、マルチチャンネル入力信号の少なくとも３つの入力チャンネルの特徴に適合する動的信号経路を使用する。詳細には、反復プロセッサー１０２は、第１反復ステップにおいて、最高値又は閾値より上の値を有する組を選択するために、少なくとも３つのチャンネルＣＨ１からＣＨ３のそれぞれの組の間のチャンネル間相関値に基づいて、及び、第２反復ステップにおいて、最高値又は閾値より上の値を有する組を選択するために、少なくとも３つのチャンネルのそれぞれの組と、対応する以前に処理されたチャンネルの間のチャンネル間相関値に基づいて、信号経路（例えば、ステレオツリー）を構築するように適合しうる。
別の実施の形態は、少なくとも３つのチャンネルを有するマルチチャンネル信号を符号化するための方法を備える。その方法は、以下を備える。
－第１反復ステップにおいて、少なくとも３つのチャンネルのそれぞれの組の間のチャンネル間相関値を計算するステップと、第１反復ステップにおいて、最高値を有する又は閾値より上の値を有する組を選択するステップと、選択された組のための第１マルチチャンネルパラメータを導出するため、及び、第１の処理されたチャンネルを導出するためにマルチチャンネル処理操作を使用して選択された組を処理するステップ。
－第２マルチチャンネルパラメータと第２の処理されたチャンネルとを得るために、処理されたチャンネルの少なくとも１つを使用して、第２反復ステップにおいて、計算するステップと、選択するステップと、処理するステップとを実行するステップ。
－符号化されたチャンネルを得るために、反復プロセッサーによって実行された反復処理から生じたチャンネルを符号化するステップ。
－符号化されたチャンネルと、第１及び第２マルチチャンネルパラメータとを有する符号化されたマルチチャンネル信号を生成するステップ。
別の実施の形態は、符号化されたチャンネルと、第１及び第２マルチチャンネルパラメータとを有する符号化されたマルチチャンネル信号を復号化するための方法を備える。その方法は、以下を備える。
－復号化されたチャンネルを得るために、符号化されたチャンネルを復号化するステップ
－処理されたチャンネルを得るために、第２マルチチャンネルパラメータによって識別された復号化されたチャンネルの第２の組を使用して、及び第２マルチチャンネルパラメータを使用してマルチチャンネル処理を実行するステップと、第１マルチチャンネルパラメータによって識別されたチャンネルの第１の組を使用して、及び第１マルチチャンネルパラメータを使用して、別のマルチチャンネル処理を実行するステップを含み、チャンネルの第１の組は少なくとも１つの処理されたチャンネルを備える。
本発明の実施の形態は、添付している図を参照して、本願明細書に記載される。
図１は、本発明の実施の形態に従う、少なくとも３つチャンネルを有するマルチチャンネル信号を符号化するための装置の概略的なブロック図を示す。 図２は、本発明の実施の形態に従う、少なくとも３つチャンネルを有するマルチチャンネル信号を符号化するための装置の概略的なブロック図を示す。 図３は、本発明の実施の形態に従う、ステレオボックスの概略的なブロック図を示す。 図４は、本発明の実施の形態に従う、符号化されたチャンネルと、少なくとも第１及び第２マルチチャンネルパラメータを有する符号化されたマルチチャンネル信号を復号化するための装置の概略的なブロック図を示す。 図５は、本発明の実施の形態に従う、少なくとも３つのチャンネルを有するマルチチャンネル信号を符号化するための方法のフローチャートを示す。 図６は、本発明の実施の形態に従う、符号化されたチャンネルと、少なくとも第１及び第２マルチチャンネルパラメータとを有する符号化されたマルチチャンネル信号を復号化するための方法のフローチャートを示す。
等しい若しくは等価である要素、又は等しい若しくは等価である機能を有する要素は、等しい若しくは等価の参照番号によって、後に説明される。
後の説明において、複数の詳細は、本発明の実施の形態の説明を通してより詳細に述べられている。しかしながら、当業者にとって、本発明の実施の形態は、これらの特定の詳細なしで実行しうることは明らかであろう。他の例では、本発明の実施の形態を不明瞭となることを避けるため、周知の構造や機器は、詳細よりもむしろブロック図で示す。加えて、以下に説明する異なる実施の形態の特徴は、特記しない限り、互いに組み合しうる。
図１は、少なくとも３つのチャンネルＣＨ１からＣＨ３を有するマルチチャンネル信号１０１を符号化するための装置（エンコーダー）の概略的なブロック図を示す。装置１００は、反復プロセッサー１０２と、チャンネルエンコーダー１０４と、出力インターフェース１０６とを備える。
反復プロセッサー１０２は、第１反復ステップにおいて、最高値を有する又は閾値より上の値を有する組を選択するため、及びマルチチャンネル処理操作を使用して選択された組を処理して、選択された組のための第１マルチチャンネルパラメータＭＣＨ＿ＰＡＲ１を導出するために、及び第１の処理されたチャンネルＰ１とＰ２とを導出するために、第１反復ステップにおいて、少なくとも３つのチャンネルＣＨ１からＣＨ３のそれぞれの組の間のチャンネル間相関値を計算するよう構成される。さらに、反復プロセッサー１０２は、第２反復ステップにおいて、少なくとも１つの処理されたチャンネルＰ１又はＰ２を使用して計算、選択、処理を実行して、第２マルチチャンネルパラメータＭＣＨ＿ＰＡＲ２、及び第２の処理されたチャンネルＰ３とＰ４を導出するように構成される。
例えば、図１に示すように、反復プロセッサー１０２は、第１反復ステップにおいて、少なくとも３つのチャンネルＣＨ１からＣＨ３の第１の組の間のチャンネル間相関値を計算しうり、第１の組は第１チャンネルＣＨ１と第２チャンネルＣＨ２からなり、少なくとも３つのチャンネルＣＨ１からＣＨ３の第２の組の間のチャンネル間相関値を計算しうり、第２の組は第２チャンネルＣＨ２と第３チャンネルＣＨ３からなり、そして、少なくとも３つのチャンネルＣＨ１からＣＨ３の第３の組の間のチャンネル間相関値を計算しうり、第３の組は第１チャンネルＣＨ１と第３チャンネルＣＨ３からなる。
図１で、反復プロセッサー１０２は、第１反復ステップにおいて、最も高いチャンネル間相関値を有する第３の組を選択し、選択された組のための第１マルチチャンネルパラメータＭＣＨ＿ＰＡＲ１を導出するために、及び第１の処理されたチャンネルＰ１とＰ２を導出するために、マルチチャンネル処理操作を使用して、選択された組、すなわち、第３の組を処理するように、第１反復ステップにおいて、第１チャンネルＣＨ１と第３チャンネルＣＨ３とから成る第３の組は、最も高いチャンネル間相関値を備えると推測される。
さらに、第２反復ステップにおいて、最も高いチャンネル間相関値を有する又は閾値より上の値を有する組を選択するために、反復プロセッサー１０２は、第２反復ステップにおいて、少なくとも３つのチャンネルＣＨ１からＣＨ３と、処理されたチャンネルＰ１とＰ２とのそれぞれの組の間のチャンネル間相関値を計算するよう構成しうる。したがって、反復プロセッサー１０２は、第２反復ステップ（又は、任意の別の反復ステップ）において、第１反復ステップの選択された組を選択しないように構成しうる。
図１において示される例を参照すると、反復プロセッサー１０２は、第１チャンネルＣＨ１と第１の処理されたチャンネルＰ１とから成る第４の組の間のチャンネル間相関値と、第１チャンネルＣＨ１と第２の処理されたチャンネルＰ２とから成る第５の組の間のチャンネル間相関値と、第２チャンネルＣＨ２と第１の処理されたチャンネルＰ１とから成る第６の組の間のチャンネル間相関値と、第２チャンネルＣＨ２と第２の処理されたチャンネルＰ２とから成る第７の組の間のチャンネル間相関値と、第３チャンネルＣＨ３と第１の処理されたチャンネルＰ１とから成る第８の組の間のチャンネル間相関値と、第３チャンネルＣＨ３と第２の処理されたチャンネルＰ２とから成る第９の組の間のチャンネル間相関値と、第１の処理されたチャンネルＰ１と第２の処理されたチャンネルＰ２とから成る第１０の組の間のチャンネル間相関値とを更に計算しうる。
図１で、反復プロセッサー１０２は、第２反復ステップにおいて、第６の組を選択し、選択された組のための第２マルチチャンネルパラメータＭＣＨ＿ＰＡＲ２を導出するために、及び第２の処理されたチャンネルＰ３とＰ４を導出するために、マルチチャンネル処理操作を使用して、選択された組、例えば、第６の組を処理するように、第２反復ステップにおいて、第２チャンネルＣＨ２と第１の処理されたチャンネルＰ１とから成る第６の組は、最も高いチャンネル間相関値を備えると推測される。
反復プロセッサー１０２は、組のレベル差が閾値よりも小さいときのみ、組を選択するように構成しうり、閾値は、４０ｄＢ、２５ｄＢ、１２ｄＢよりも小さい、又は６ｄＢよりも小さい。したがって、２５又は４０ｄＢの閾値は、３又は０．５度の回転角度に対応する。
反復プロセッサー１０２は、正規化された整数相関値を計算するよう構成されうり、正規化された整数相関値が例えば０．２より大きい又は好ましくは０．３のとき、反復プロセッサー１０２は、一組を選択するよう構成しうる。
さらに、反復プロセッサー１０２は、マルチチャンネル処理から生じたチャンネルを、チャンネルエンコーダー１０４へ提供しうる。例えば、図１を参照すると、反復プロセッサー１０２は、第３の処理されたチャンネルＰ３と、第２反復ステップにおいて実行されたマルチチャンネル処理から生じた第４の処理されたチャンネルＰ４と、第１反復ステップにおいて実行されたマルチチャンネル処理から生じた第２の処理されたチャンネルＰ２を、チャンネルエンコーダー１０４へ提供しうる。したがって、反復プロセッサー１０２は、それらの処理されたチャンネルを、チャンネルエンコーダー１０４へ提供しうるだけであり、後の反復ステップにおいて（さらに）処理されない。図１で示すように、第１の処理されたチャンネルＰ１は、第２反復ステップにおいて、さらに処理されるので、チャンネルエンコーダー１０４へ提供されない。
チャンネルエンコーダー１０４は、符号化されたチャンネルＥ１からＥ３を得るために、反復プロセッサー１０２によって実行された反復処理（又はマルチチャンネル処理）から生じたチャンネルＰ２からＰ４を符号化するよう構成しうる。
例えば、チャンネルエンコーダー１０４は、反復処理（又はマルチチャンネル処理）から生じたチャンネルＰ２からＰ４を符号化するために、モノラルエンコーダー（又はモノラルボックス、又はモノラルツール）１２０＿１から１２０＿３を使用するよう構成しうる。モノラルボックスは、より少ないビットが、より大きいエネルギー（又はより大きい振幅）を有するチャンネルを符号化するためよりも、より小さいエネルギー（又はより小さい振幅）を有するチャンネルを符号化するために要求されるように、チャンネルを符号化するよう構成しうる。モノラルボックス１２０＿１から１２０＿３は、例えば、変換ベースのオーディオエンコーダーとすることもできる。さらに、チャンネルエンコーダー１０４は、反復処理（又はマルチチャンネル処理）から生じるチャンネルＰ２からＰ４を符号化するために、ステレオエンコーダー（例えば、パラメトリックステレオエンコーダー、又はロッシーステレオエンコーダー）を使用するよう構成しうる。
出力インターフェース１０６は、符号化されたチャンネルＥ１からＥ３と、第１及び第２マルチチャンネルパラメータＭＣＨ＿ＰＡＲ１とＭＣＨ＿ＰＡＲ２とを有するマルチチャンネル信号１０７を生成し、符号化するよう構成しうる。
例えば、出力インターフェース１０６は、シリアル信号又はシリアルビットストリームのように符号化されたマルチチャンネル信号１０７を生成するように構成しうり、そのため、第２マルチチャンネルパラメータＭＣＨ＿ＰＡＲ２は、第１マルチチャンネルパラメータＭＣＨ＿ＰＡＲ１の前に符号化された信号１０７に含まれるようにする。したがって、図４に関して後に説明する実施の形態のデコーダーは、第１マルチチャンネルパラメータＭＣＨ＿ＰＡＲ１の前に第２マルチチャンネルパラメータＭＣＨ＿ＰＡＲ２を受信するだろう。
図１において、反復プロセッサー１０２は、第１反復ステップにおけるマルチチャンネル処理操作と、第２反復ステップにおけるマルチチャンネル処理操作との、２つのマルチチャンネル処理操作を例示的に実行する。当然ながら、反復プロセッサー１０２も、後の反復処理において、別のマルチチャンネル処理操作を実行しうる。したがって、反復プロセッサー１０２は、反復終了基準に達するまで、反復ステップを実行するよう構成しうる。反復終了基準は、最大反復ステップ数が等しい、若しくはマルチチャンネル信号１０１のすべてのチャンネル数が２倍より大きい、又はチャンネル間相関値が、閾値よりも大きい値を有しないとき、閾値は好ましくは０．２よりも大きい、若しくは閾値は好ましくは０．３であるときである。別の実施の形態において、反復終了基準は、最大反復ステップ数が等しい、若しくはマルチチャンネル信号１０１のすべてのチャンネル総数がより多い、チャンネル間相関値が、閾値よりも大きい値を有しないとき、閾値は好ましくは０．２よりも大きいとき、若しくは閾値は好ましくは０．３である。
図示するために、第１反復ステップ及び第２反復ステップにおいて、反復プロセッサー１０２によって実行されるマルチチャンネル処理操作は、処理ボックス１１０及び１１２によって、図１において例示的に図示される。処理ボックス１１０及び１１２は、ハードウェア又はソフトウェアで実行されうる。処理ボックス１１０及び１１２は、例えば、ステレオボックスである。
したがって、チャンネル間信号依存性は、既知のジョイントステレオコーディングツールを階層的に適用することによって利用しうる。以前のＭＰＥＧの方法とは対照的に、処理される信号組は、固定信号経路（例えば、ステレオコーディングツリー）によって予め決定されるのではなく、入力信号特性に適応するように動的に変更しうる。実際のステレオボックスの入力は、（１）チャンネルＣＨ１からＣＨ３のような未処理のチャンネル、又は（２）処理された信号Ｐ１からＰ４のような前述のステレオボックスの出力、又は（３）未処理のチャンネル及び前述のステレオボックスの出力の結合が可能である。
ステレオボックス１１０及び１１２の内部の処理は、（ＵＳＡＣの複合予測ボックスのような）予測ベース、又はＫＬＴ／ＰＣＡベース（入力チャンネルは、エネルギー圧縮を最大化するために、すなわち、信号エネルギーを１つのチャンネルに集中させるために、エンコーダーにおいて（例えば、２×２回転行列を介して）回転させられ、デコーダーにおいて、回転させられた信号が、元の入力信号方向に再変換されるだろう）のどちらかであるだろう。
エンコーダー１００の可能な実装において、（１）エンコーダーは、すべてのチャンネルの組の間でもチャンネル間相関を計算し、入力信号から１つの適切な信号組を選択し、選択されたチャンネルにステレオツールを適用する。（２）エンコーダーは、すべてのチャンネル（処理された中間出力チャンネルと同様に未処理のチャンネルも含む）間のチャンネル間相関を再計算し、入力信号から１つの適切な信号組を選択し、選択されたチャンネルにステレオツールを適用する。そして、（３）エンコーダーは、すべてのチャンネル間相関が閾値以下になるまで、又は、もし変換の最大数が適用される場合は、ステップ（２）を繰り返す。
すでに述べたように、エンコーダー１００によって処理された信号組、又はより正確な反復プロセッサー１０２は、固定信号経路（例えば、ステレオコーディングツリー）によって予め決定されるのではなく、入力信号特性に適応するように動的に変更しうる。したがって、エンコーダー１００（又は、反復プロセッサー１０２）は、マルチチャンネル（入力）信号１０１の少なくとも３つのチャンネルＣＨ１からＣＨ３に応じて、ステレオツリーを構築するよう構成しうる。言い換えれば、エンコーダー１００（又は、反復プロセッサー１０２）は、チャンネル間相関（例えば、第１反復ステップにおいて、最高値又は閾値より上の値を有する組を選択するために、第１反復ステップにおいて、少なくとも３つのチャンネルＣＨ１からＣＨ３のそれぞれの組の間のチャンネル間相関値を計算することによって、及び、第２反復ステップにおいて、最高値又は閾値より上の値を有する組を選択するために、第２反復ステップにおいて、少なくとも３つのチャンネルと、前に処理されたチャンネルとのそれぞれの組の間のチャンネル間相関値を計算することによって）に基づいてステレオツリーを構築するよう構成しうる。１つのステップアプローチにしたがって、おそらく処理された以前の反復において、すべてのチャンネルの相関を含むおそらく各反復について、相関行列を計算しうる。
上記で示すように、反復プロセッサー１０２は、第１反復ステップにおいて、選択された組のための第１マルチチャンネルパラメータＭＣＨ＿ＰＡＲ１を導出して、第２反復ステップにおいて、選択された組のための第２マルチチャンネルパラメータＭＣＨ＿ＰＡＲ２を導出するよう構成しうる。第１マルチチャンネルパラメータＭＣＨ＿ＰＡＲ１は、第１反復ステップにおいて選択されたチャンネルの組を識別する（又は伝える）第１チャンネル組識別（又はインデックス）を備えうり、第２マルチチャンネルパラメータＭＣＨ＿ＰＡＲ２は、第２反復ステップにおいて選択されたチャンネルの組を識別する（又は伝える）第２チャンネル組識別（又はインデックス）を備えうる。
以下では、入力信号の効果的なインデックス付けが規定されている。例えば、チャンネル組は、チャンネルの総数に応じて、それぞれの組に対する特有のインデックスを使用して効果的に伝えうる。例えば、６つのチャンネルに対する組のインデックス付けは以下の表において示されうる。
Figure 0007208126000001
例えば、上表において、インデックス５は、第１チャンネルと第２チャンネルとからなる組を伝えうる。同様に、インデックス６は、第１チャンネルと第３チャンネルとからなる組を伝えうる。
ｎ個のチャンネルに対する可能なチャンネル組のインデックスの総数は、以下によって計算されうる。
numPairs = numChannels*(numChannels-1)/2
それゆえに、１つのチャンネル組を伝えるために必要なビット数は、以下となる。
numBits = floor(log2(numPairs-1))+1
さらに、エンコーダー１００は、チャンネルマスクを使用しうる。マルチチャンネルツールの構造は、ツールがアクティブなチャンネルを示すチャンネルマスクを含みうる。したがって、ＬＦＥ（ＬＦＥ＝低音増強／増大チャンネル）は、インデックス付けし、より効果的な符号化を許容するチャンネルから取り除きうる。例えば、１１．１に設定するために、これは、１２＊１１／２＝６６から１１＊１０／２＝５５へインデックス付けするチャンネル組の数を減らし、７ビットの代わりに６ビットで伝えることを許容する。このメカニズムは、モノオブジェクト（例えば、多言語トラック）であることが意図されたチャンネルを除外するためにも使用できる。チャンネルマスク（チャンネルマスク）の復号化において、チャンネルマップ（チャンネルマップ）は、チャンネルの組のインデックスの再マッピングをデコーダーチャンネルへ許容するよう、生成されうる。
さらに、反復プロセッサー１０２は、第１のフレームについて、複数の選択された組の指示を導出するように構成され、出力インターフェース１０６は、マルチチャンネル信号１０７に、第１のフレームの後に続く第２のフレームのために、第２のフレームが、第１のフレームと同じ複数の選択された組の指示を有することを示すキープインジケーターを含むよう構成しうる。
キープインジケーター、又はキープツリーフラグは、新しいツリーには送信されないが、最後のステレオツリーが使用されることを伝えるために使用しうる。もし、チャンネル相関特性がより長い時間静止しているなら、これは、同じステレオツリー構成の複数の送信を避けるために使用しうる。
図２は、ステレオボックス１１０、１１２の概略的なブロック図を示す。ステレオボックス１１０、１１２は、第１の入力信号Ｉ１と第２の入力信号Ｉ２とに対する入力、及び第１の出力信号Ｏ１と第２の入力信号Ｏ２とに対する出力を備える。図２において示すように、入力信号Ｉ１及びＩ２からの出力信号Ｏ１及びＯ２の依存性は、ｓ－パラメータＳ１からＳ４によって示される。
反復プロセッサー１０２は、（別の）処理されたチャンネルを導出するため、入力チャンネル及び／又は処理されたチャンネル上でマルチチャンネル処理操作を実行するために、ステレオボックス１１０、１１２を使用できる（又は、備えることができる）。例えば、反復プロセッサー１０２は、市販の予想ベース又はＫＬＴ（カルーネン・レーベ変換）ベースの回転ステレオボックス１１０、１１２を使用するよう構成しうる。
市販のエンコーダー（又は、エンコーダー側のステレオボックス）は、以下の式に基づいて出力信号Ｏ１とＯ２とを得るために、入力信号Ｉ１とＩ２とを符号化するよう構成しうる。
Figure 0007208126000002
市販のデコーダー（又は、デコーダー側のステレオボックス）は、以下の式に基づいて出力信号Ｏ１とＯ２とを得るために、入力信号Ｉ１とＩ２とを復号化するよう構成しうる。
Figure 0007208126000003
予測ベースのエンコーダー（又は、エンコーダー側のステレオボックス）は、以下の式に基づいて出力信号Ｏ１とＯ２とを得るために、入力信号Ｉ１とＩ２とを符号化するよう構成しうる。
Figure 0007208126000004
ｐは予測係数である。
予測ベースのデコーダー（又は、デコーダー側のステレオボックス）は、以下の式に基づいて出力信号Ｏ１とＯ２とを得るために、入力信号Ｉ１とＩ２とを復号化するよう構成しうる。
Figure 0007208126000005
ＫＬＴベースの回転エンコーダー（又は、エンコーダー側のステレオボックス）は、以下の式に基づいて出力信号Ｏ１とＯ２とを得るために、入力信号Ｉ１とＩ２とを符号化するよう構成しうる。
Figure 0007208126000006
ＫＬＴベースの回転デコーダー（又は、デコーダー側のステレオボックス）は、以下の式（逆回転）に基づいて出力信号Ｏ１とＯ２とを得るために、入力信号Ｉ１とＩ２とを復号化するよう構成しうる。
以下において、ＫＬＴベースの回転のための回転角度αの計算は示される。
ＫＬＴベースの回転のための回転角度αは、以下のように定義されうる。
Figure 0007208126000007
ｃxyは正規化されていない相関行列の入力であり、ｃ11、ｃ22はチャンネルエネルギーである。
これは、分数の分子内の負の相関と、分数の分母内の負のエネルギーの差異との間を区別できるようにａｔａｎ２関数を使用して実行しうる。
alpha = 0.5*atan2(2*correlation[ch1][ch2],
(correlation[ch1][ch1] - correlation[ch2][ch2]))
さらに、反復プロセッサー１０２は、複数のバンドを備える各チャンネルのフレームを使用してチャンネル間相関を計算して、複数のバンドについて１つのチャンネル間の相関値が得られるように構成しうる。反復プロセッサー１０２は、複数のバンドのそれぞれに対して、マルチチャンネル処理を実行して、複数のバンドのそれぞれに対して、第１又は第２マルチチャンネルパラメータが得られように構成しうる。
したがって、反復プロセッサー１０２は、マルチチャンネル処理においてステレオパラメータを計算するよう構成され、反復プロセッサー１０２は、ステレオパラメータが、ステレオ量子化器（例えば、ＫＬＴベース回転エンコーダ）によって定義されるゼロに量子化された閾値より高いバンド内において、ステレオ処理のみを実行するよう構成される。ステレオパラメータは、例えばＭＳ Ｏｎ／Ｏｆｆ、又は回転角度、又は予測係数であるだろう。
例えば、反復プロセッサー１０２は、マルチチャンネル処理において回転角度を計算するよう構成され、反復プロセッサー１０２は、回転角度が、回転角度量子化器（例えば、ＫＬＴベース回転エンコーダ）によって定義されるゼロに量子化された閾値より高いバンド内において、回転処理のみを実行するよう構成される。
したがって、エンコーダー１００（又は、出力インターフェース１０６）は、完全なスペクトル（フルバンドボックス）に対する１つのパラメータ、又はスペクトルの一部に対する複数の周波数依存パラメータのどちらかのように、変換／回転情報を送信するよう構成しうる。
エンコーダー１００は、次の表に基づくビットストリーム１０７を生成するよう構成しうる。
表１‐mpegh3daExtElementConfig()のシンタックス

Figure 0007208126000008
表２１‐MCCConfig()のシンタックス
Figure 0007208126000009
表３２‐MultichannelCodingBoxBandWise()のシンタックス
Figure 0007208126000010
表４‐MultichannelCodingBoxFullband()のシンタックス
Figure 0007208126000011
表５‐MultichannelCodingFrame()のシンタックス
Figure 0007208126000012
表６‐usacExtElementTypeの値
Figure 0007208126000013
表７‐拡張ペイロード符号化のためのデータブロックの解釈
Figure 0007208126000014
図３は、１つの実施の形態による、反復プロセッサー１０２の概略的なブロック図である。図３に示される実施の形態において、マルチチャンネル信号１０１は、６つのチャンネル、すなわち、左チャンネルＬ、右チャンネルＲ、左サラウンドチャンネルＬｓ、右サラウンドチャンネルＲｓ、正面チャンネルＣ、低音増幅チャンネルＬＦＥを有する５．１チャンネル信号である。
図３において示すように、ＬＦＥチャンネルは、反復プロセッサー１０２によって処理されない。ＬＦＥチャンネルと他の５つのチャンネルＬ、Ｒ、Ｌｓ、Ｒｓ、Ｃのそれぞれとの間のチャンネル間相関値が小さい、又は、チャンネルマスクがＬＦＥチャンネルを処理しないことを示すので、これが当てはまる場合があり、以下のように仮定される。
第１反復ステップにおいて、最高値を有する又は閾値より上の値を有する組を選択するために、反復プロセッサー１０２は、第１反復ステップにおいて、５つのチャンネルＬ、Ｒ、Ｌｓ、Ｒｓ、Ｃのそれぞれの組の間のチャンネル間相関値を計算する。図３において、反復プロセッサー１０２が、第１及び第２の処理されたチャンネルＰ１とＰ２とを導出するために、マルチチャンネル操作を処理する操作を実行するステレオボックス（又はステレオツール）１１０を使用して、左チャンネルＬと右チャンネルＲとを処理するように、左チャンネルＬと右チャンネルＲとが、最高値を有すると仮定される。
第２反復ステップにおいて、最高値を有する又は閾値より上の値を有する組を選択するために、反復プロセッサー１０２は、第２反復ステップにおいて、５つのチャンネルＬ、Ｒ、Ｌｓ、Ｒｓ、Ｃと、処理されたチャンネルＰ１とＰ２とのそれぞれの組の間のチャンネル間相関値を計算する。図３において、反復プロセッサー１０２が、第３及び第４の処理されたチャンネルＰ３とＰ４とを導出するために、ステレオボックス（又はステレオツール）１１２を使用して、左サラウンドチャンネルＬｓと右サラウンドチャンネルＲｓとを処理するように、左サラウンドチャンネルＬｓと右サラウンドチャンネルＲｓとが、最高値を有すると仮定される。
第３反復ステップにおいて、最高値を有する又は閾値より上の値を有する組を選択するために、反復プロセッサー１０２は、第３反復ステップにおいて、５つのチャンネルＬ、Ｒ、Ｌｓ、Ｒｓ、Ｃと、処理されたチャンネルＰ１からＰ４とのそれぞれの組の間のチャンネル間相関値を計算する。図３において、反復プロセッサー１０２が、第５及び第６の処理されたチャンネルＰ５とＰ６とを導出するために、ステレオボックス（又はステレオツール）１１４を使用して、第１の処理されたチャンネルＰ１と第３の処理されたチャンネルＰ３とを処理するように、第１の処理されたチャンネルＰ１と第３の処理されたチャンネルＰ３とが最高値を有すると仮定される。
第４反復ステップにおいて、最高値を有する又は閾値より上の値を有する組を選択するために、反復プロセッサー１０２は、第４反復ステップにおいて、５つのチャンネルＬ、Ｒ、Ｌｓ、Ｒｓ、Ｃと、処理されたチャンネルＰ１からＰ６とのそれぞれの組の間のチャンネル間相関値を計算する。図３において、反復プロセッサー１０２が、第７及び第８の処理されたチャンネルＰ７とＰ８とを導出するために、ステレオボックス（又はステレオツール）１１５を使用して、第５の処理されたチャンネルＰ５と正面チャンネルＣとを処理するように、第５の処理されたチャンネルＰ５と正面チャンネルＣとが最高値を有すると仮定される。
ステレオボックス１１０から１１６は、ＭＳステレオボックスとすることができる。すなわち、中間／側面のステレオ音響効果ボックスが、中間チャンネルと側面チャンネルとに提供するよう構成される。中間チャンネルは、ステレオボックスの入力チャンネル間の合計であり、側面チャンネルは、ステレオボックスの入力チャンネル間の差である。さらに、ステレオボックス１１０から１１６は、回転ボックス又はステレオ予測ボックスとすることができる。
図３において、第１の処理されたチャンネルＰ１、及び第３の処理されたチャンネルＰ３、及び第５の処理されたチャンネルＰ５は中間チャンネルとすることができ、第２の処理されたチャンネルＰ２、及び第４の処理されたチャンネルＰ４、及び第６の処理されたチャンネルＰ６は中間チャンネルとすることができる。
さらに、図３において示すように、反復プロセッサー１０２は、第２反復ステップにおいて、及び、該当する場合には以後のどの反復ステップにおいて、入力チャンネルＬ、Ｒ、Ｌｓ、Ｒｓ、Ｃ、及び、処理されたチャンネルの中間チャンネルＰ１、Ｐ３、Ｐ５（だけ）、を使用して、計算、選択、処理を実行するよう構成されうる。言い換えれば、反復プロセッサー１０２は、第２反復ステップ、及び、該当する場合には以後のどの反復ステップにおいて計算、選択、処理するときに、処理されたチャンネルの側面のチャンネルＰ１、Ｐ３、Ｐ５を使用しないように構成しうる。
図４は、符号化されたチャンネルＥ１からＥ３と、少なくとも第１及び第２マルチチャンネルパラメータＭＣＨ＿ＰＡＲ１とＭＣＨ＿ＰＡＲ２とを有する符号化されたマルチチャンネル信号１０７を復号化するために装置（デコーダー）２００の概略的なブロック図を示す。装置２００は、チャンネルデコーダー２０２とマルチチャンネルプロセッサー２０４とを備える。
チャンネルデコーダー２０２は、Ｄ１からＤ３の復号化されたチャンネルを得るために、符号化されたチャンネルＥ１からＥ３を復号化するよう構成される。
例えば、チャンネルデコーダー２０２は、少なくとも３つのモノラルデコーダー（又はモノラルボックス又はモノラルツール）２０６＿１から２０６＿３を備えることができ、それぞれのモノラルデコーダー２０６＿１から２０６＿３は、それぞれの復号化されたチャンネルＥ１からＥ３を得るために、少なくとも３つの符号化されたチャンネルＥ１からＥ３の１つを復号化するよう構成しうる。モノラルデコーダー２０６＿１から２０６＿３は、例えば、変換ベースのオーディオデコーダーとすることができる。
マルチチャンネルプロセッサー２０４は、処理されたチャンネルを得るために、第２マルチチャンネルパラメータＭＣＨ＿ＰＡＲ２によって識別される復号化されたチャンネルの第２の組を使用して、及び第２マルチチャンネルパラメータＭＣＨ＿ＰＡＲ２を使用して、マルチチャンネル処理を実行し、第１マルチチャンネルパラメータＭＣＨ＿ＰＡＲ１によって識別されるチャンネルの第１の組を使用して、及び第１マルチチャンネルパラメータＭＣＨ＿ＰＡＲ１を使用して、別のマルチチャンネル処理を実行するように構成され、チャンネルの第１の組が、少なくとも１つの処理されたチャンネルを備える。
例示の方法によって図４において示すように、復号化されたチャンネルの第２の組は、第１の復号化されたチャンネルＤ１と第２の復号化されたチャンネルＤ２とから成ることを、第２マルチチャンネルパラメータＭＣＨ＿ＰＡＲ２は、示しうる（又は信号が送られうる）。したがって、マルチチャンネルプロセッサー２０４は、処理されたチャンネルＰ１*とＰ２*とを得るために、第１の復号化されたチャンネルＤ１と第２の復号化されたチャンネルＤ２（第２マルチチャンネルパラメータＭＣＨ＿ＰＡＲ２によって識別される）からなる復号化されたチャンネルの第２の組を使用して、及び、第２マルチチャンネルパラメータＭＣＨ＿ＰＡＲ２を使用して、マルチチャンネル処理を実行する。第１マルチチャンネルパラメータＭＣＨ＿ＰＡＲ１は、復号化されたチャンネルの第１の組は、第１の処理されたチャンネルＰ１*と第３の復号化されたチャンネルＤ３とからなることを示しうる。したがって、マルチチャンネルプロセッサー２０４は、処理されたチャンネルＰ３*とＰ４*を得るために、第１の処理されたチャンネルＰ１*と第３の復号化されたチャンネルＤ３（第１マルチチャンネルパラメータＭＣＨ＿ＰＡＲ１によって識別される）からなる復号化されたチャンネルの第１の組を使用して、及び、第１マルチチャンネルパラメータＭＣＨ＿ＰＡＲ１を使用して、別のマルチチャンネル処理を実行する。
さらに、マルチチャンネルプロセッサー２０４は、第３の処理されたチャンネルＰ３*を第１チャンネルＣＨ１として、第４の処理されたチャンネルＰ４*を第３チャンネルＣＨ３として、第２の処理されたチャンネルＰ２*を第２チャンネルＣＨ２として提供しうる。
図４において示されるデコーダー２００が、図１において示されるエンコーダー１００から符号化されたマルチチャンネル信号１０７を受信すると仮定すると、デコーダー２００の第１の復号化されたチャンネルＤ１は、エンコーダー１００の第３の処理されたチャンネルＰ３と等価であり、デコーダー２００の第２の復号化されたチャンネルＤ２は、エンコーダー１００の第４の処理されたチャンネルＰ４と等価であり、デコーダー２００の第３の復号化されたチャンネルＤ３は、エンコーダー１００の第２の処理されたチャンネルＰ２と等価である。さらに、デコーダー２００の第１の処理されたチャンネルＰ１*は、エンコーダー１００の第１の処理されたチャンネルＰ１と等価である
さらに、符号化されたマルチチャンネル信号１０７は、直列信号とすることができ、第２マルチチャンネルパラメータＭＣＨ＿ＰＡＲ２は、第１マルチチャンネルパラメータＭＣＨ＿ＰＡＲ１の前に、デコーダー２００で受信される。その場合において、マルチチャンネルプロセッサー２０４は、マルチチャンネルパラメータＭＣＨ＿ＰＡＲ１及びＭＣＨ＿ＰＡＲ２が、デコーダーによって受信された順番で、復号化されたチャンネルを実行するよう構成しうる。図４において示す例において、デコーダーは、第１マルチチャンネルパラメータＭＣＨ＿ＰＡＲ１の前に、第２マルチチャンネルパラメータＭＣＨ＿ＰＡＲ２を受信し、したがって、第１マルチチャンネルパラメータＭＣＨ＿ＰＡＲ１によって識別される復号化されたチャンネルの第１の組（第１の処理されたチャンネルＰ１*と第３の復号化されたチャンネルＤ３とからなる）を使用してマルチチャンネル処理を実行する前に、第２マルチチャンネルパラメータＭＣＨ＿ＰＡＲ２によって識別される復号化されたチャンネルの第２の組（第１及び第２の復号化されたチャンネルＤ１とＤ２とからなる）を使用してマルチチャンネル処理を実行する。
図４において、マルチチャンネルプロセッサー２０４は、２つのマルチチャンネル処理操作を見本として実行する。図示するために、マルチチャンネルプロセッサー２０４によって実行されるマルチチャンネル処理操作は、図４において処理ボックス２０８と２１０によって示される。処理ボックス２０８と２１０は、ハードウェア又はソフトウェアにおいて、実装しうる。処理ボックス２０８と２１０は、例えば、市販のデコーダー（又は、デコーダー側のステレオボックス）、又は予測ベースのデコーダー（又は、デコーダー側のステレオボックス）、又はＫＬＴベースの回転デコーダー（又は、デコーダー側のステレオボックス）のように、エンコーダー１００を参照して上述したように、ステレオボックスとすることができる。
例えば、エンコーダー１００は、ＫＬＴベースの回転エンコーダー（又はエンコーダー側のステレオボックス）を使用することができる。その場合において、エンコーダー１００は、第１及び第２マルチチャンネルパラメータＭＣＨ＿ＰＡＲ１とＭＣＨ＿ＰＡＲ２とを導出することができ、その結果、第１及び第２マルチチャンネルＭＣＨ＿ＰＡＲ１とＭＣＨ＿ＰＡＲ２とは、回転角度を備える。回転角度は、差動的に符号化しうる。それゆえに、デコーダー２００のマルチチャンネルプロセッサー２０４は、差動的に符号化された回転角度を差動的に復号化するために差動的なデコーダーを備えうる。
装置２００は、符号化されたマルチチャンネル信号１０７を受信及び処理し、符号化されたチャンネルＥ１からＥ３を、チャンネルデコーダー２０２へ提供し、第１及び第２マルチチャンネルパラメータＭＣＨ＿ＰＡＲ１とＭＣＨ＿ＰＡＲ２とをマルチチャンネルプロセッサー２０４へ提供するよう構成されるインプットインターフェース２１２をさらに備える。
すでに述べたように、キープインジケータ（又はキープツリーフラグ）は、新しいツリーが送信されないことを伝えるために使用しうるが、最後のステレオツリーが、使用される必要がある。もし、チャンネル相関特性が長い時間静止している場合、これは、同じステレオツリー構成の複数の送信を避けるために使用しうる。
それゆえに、符号化されたマルチチャンネル信号１０７が、第１のフレームに対して、第１又は第２マルチチャンネルパラメータＭＣＨ＿ＰＡＲ１とＭＣＨ＿ＰＡＲ２、及び、第１のフレームに続く、第２のフレームに対して、キープインジケーターを備えるとき、マルチチャンネルプロセッサー２０４は、第２のフレームにおいて、第１のフレームについて使用されるように、同じ第２の組又は同じ第１の組のチャンネルにマルチチャンネル処理又は別のマルチチャンネル処理を実行するよう構成しうる。
マルチチャンネル処理及び別のマルチチャンネル処理は、ステレオパラメータを使用するステレオ処理を含みうる。復号化されたチャンネルＤ１からＤ３の個々のスケールファクタバンド又はスケールファクタバンドのグループについて、第１ステレオパラメータは、第１マルチチャンネルパラメータＭＣＨ＿ＰＡＲ１が含まれ、第２ステレオパラメータは、第２マルチチャンネルパラメータＭＣＨ＿ＰＡＲ２が含まれる。それゆえに、第１ステレオパラメータ及び第２ステレオパラメータは、回転角度や予測係数のような、同じ型にすることができる。もちろん、第１ステレオパラメータ及び第２ステレオパラメータは、異なる型にすることができる。例えば、第１ステレオパラメータは、回転角度とすることができ、第２ステレオパラメータは、予測係数とすることができる。また、その逆もできる。
さらに、第１又は第２マルチチャンネルパラメータＭＣＨ＿ＰＡＲ１とＭＣＨ＿ＰＡＲ２とは、どのスケールファクタバンドがマルチチャンネル処理されていて、どのスケールファクタバンドがマルチチャンネル処理されていないかを示すマルチチャンネル処理マスクを備えうる。したがって、マルチチャンネルプロセッサー２０４は、マルチチャンネル処理マスクによって示されるスケールファクタバンドにおいて、マルチチャンネル処理が実行されないように構成しうる。
第１及び第２マルチチャンネルパラメータＭＣＨ＿ＰＡＲ１とＭＣＨ＿ＰＡＲ２とは、チャンネル組識別（又はインデックス）をそれぞれ含みうる。マルチチャンネルプロセッサー２０４は、予測された復号化ルール又は符号化されたマルチチャンネル信号で示される復号化ルールを使用してチャンネル組識別（又はインデックス）を復号化するよう構成しうる。
例えば、チャンネル組は、エンコーダー１００を参照して上述したように、チャンネルの総数に応じて、それぞれの組に対して、固有のインデックスを使用して、効果的に信号を送られうる。
さらに、復号化ルールは、ハフマン復号化ルールとすることができ、マルチチャンネルプロセッサー２０４は、チャンネル組識別のハフマン復号化を実行するよう構成しうる。
符号化されたマルチチャンネル信号１０７は、マルチチャンネル処理が許可された復号化された復号化されたチャンネルのサブグループだけを示し、且つ、マルチチャンネル処理が許可されていない少なくとも１つの復号化されたチャンネルを示す、マルチチャンネル処理許容インジケータを更に備える。したがって、マルチチャンネルプロセッサー２０４は、マルチチャンネル処理許容インジケータによって示されるように、マルチチャンネル処理が許容されない、少なくとも１つの復号化されたチャンネルについて、いかなるマルチチャンネル処理も実行しないように構成される。
例えば、マルチチャンネル信号が、５．１チャンネル信号であるとき、マルチチャンネル処理許容インジケータは、マルチチャンネル処理が５つのチャンネル、すなわち、右Ｒ、左Ｌ、右サラウンドＲｓ、左サラウンドＬＳ、正面Ｃを許容するだけであることを示しうり、マルチチャンネル処理は、ＬＦＥチャンネルを許容しない。
復号化処理（チャンネル組インデックスの復号化）のために、以下のＣコードは使用されうる。したがって、すべてのチャンネル組に対して、アクティブなＫＬＴ処理を有するチャンネル数（ｎＣｈａｎｎｅｌｓ）と現在のフレームのチャンネル組の数（ｎｕｍＰａｉｒｓ）とが、必要とされる。
Figure 0007208126000015
非バンド角度に対する予測係数を復号化するために、以下のＣコードは使用されうる。
Figure 0007208126000016
非バンドＫＬＴ角度に対する予測係数を復号化するために、以下のＣコードは使用されうる。
Figure 0007208126000017
異なるプラットフォームでの三角関数の浮動小数点の違いを避けるために、角度インデックスを直接ｓｉｎ／ｃｏｓに変換するための以下のルックアップテーブルは使用しうる。
Figure 0007208126000018
マルチチャンネルコーディングの復号化のために、以下のＣコードはＫＬＴ回転に基づく手法に使用しうる。
Figure 0007208126000019
バンド処理のために、以下のＣコードを使用しうる。
Figure 0007208126000020
ＫＬＴ回転の適用のために、以下のＣコードを使用しうる。
Figure 0007208126000021
図５は、少なくとも３つのチャンネルを有するマルチチャンネル信号を符号化するための方法３００のフローチャートである。方法３００は、第１反復ステップにおいて、少なくとも３つのチャンネルそれぞれの組の間のチャンネル間相関値を計算し、第１反復ステップにおいて、最高値を有する又は閾値より上の値を有する組を選択し、選択された組のための第１マルチチャンネルパラメータを導出するため、及び、第１の処理されたチャンネルを導出するために、マルチチャンネル処理操作を使用して選択された組を処理するステップ３０２と、第２マルチチャンネルパラメータと第２の処理されたチャンネルとを導出するために、処理されたチャンネルの少なくとも１つを使用して、第２反復ステップにおいて、計算、選択、処理を実行するステップ３０４と、符号化されたチャンネルを得るために、反復プロセッサーによって実行された反復処理から生じたチャンネルを符号化するステップ３０６と、符号化されたチャンネルと、第１及び第２マルチチャンネルパラメータとを有する符号化されたマルチチャンネル信号を生成するステップ３０８とを備える。
図６は、符号化されたチャンネルと、少なくとも第１及び第２マルチチャンネルパラメータとを有する符号化されたマルチチャンネル信号を復号化するための方法４００のフローチャートを示す。方法４００は、復号化されたチャンネルを得るために、符号化されたチャンネルを復号化するステップ４０２と、処理されたチャンネルを得るために、第２マルチチャンネルパラメータによって識別された復号化されたチャンネルの第２の組を使用して、及び第２マルチチャンネルパラメータを使用して、マルチチャンネル処理を実行し、第１マルチチャンネルパラメータによって識別されたチャンネルの第１の組を使用して、及び第１マルチチャンネルパラメータを使用して、マルチチャンネル処理を実行するステップ４０４と、を備え、チャンネルの第１の組は、少なくとも１つの処理されたチャンネルを備える。
本発明は、ブロックが実際の又は論理的なハードウェア要素を示すブロック図との関係において述べられているけれども、本発明は、コンピュータ実装方法によって実装もすることができる。後者の場合、ブロックは、これらのステップが、対応する論理的又は物理的なハードウェアブロックによって実行される機能性を示す対応する方法ステップを示す。
いくつかの態様が、装置との関係において述べられているけれども、これらの態様が、対応する方法の説明も示すことは明らかであり、ブロック又は装置が、方法ステップ又は方法ステップの特徴に相当する。同様に、方法ステップとの関係において述べられる態様は、対応するブロック又はアイテムの説明、又は対応する装置の特徴も示す。方法ステップのいくつか又はすべては、例えば、マイクロプロセッサー、又はプログラム可能なコンピュータ、又は電子回路のような、ハードウェア装置によって（又は使用して）実行されうる。いくつかの実施の形態において、最も重要な方法ステップのうち１つ以上は、このような装置によって実行されうる。
本発明の送信又は符号化された信号は、デジタル記録媒体に保存されうり、又は無線送信媒体若しくはインターネットのような有線送信媒体のような送信媒体で送信されうる。
特定の実装要求に応じて、本発明の実施の形態は、ハードウェアにおいて、または、ソフトウェアにおいて実装しうる。実装は、それぞれの方法を実行されるように、プログラム可能なコンピュータシステムと協働するか、（又は協働することができる）保存された電気的に読み込み可能な制御信号を有する、デジタル記録媒体、例えば、フロッピー（登録商標）ディスク、ＤＶＤ、ブルーレイディスク（登録商標）、ＣＤ、ＲＯＭ、ＰＲＯＭ、ＥＰＲＯＭ、ＥＥＰＲＯＭ（登録商標）またはＦＬＡＳＨメモリを使用して実行しうる。このように、デジタル記憶媒体は、コンピュータに読み込み可能である。
本発明によるいくつかの実施の形態は、本願明細書において記載された方法の１つが実行されるように、プログラム可能なコンピュータシステムと協働することができる電気的に読み込み可能な制御信号を有するデータ記録媒体を備える。
一般的に、本発明の実施の形態は、プログラムコードを有するコンピュータプログラム製品として実装しうる。そして、コンピュータプログラム製品がコンピュータ上で動くときに、プログラムコードは、方法の１つを実行するために動作される。プログラムコードは、例えば、機械読み取り可能な媒体に保存されうる。
他の実施の形態は、本願明細書において記載されている方法の１つを実行するためのコンピュータプログラムを備え、機械読み取り可能な媒体に保存される。
言い換えれば、本発明の方法の実施の形態は、したがって、コンピュータプログラムがコンピュータ上で実行するときに、本願明細書において記載されている方法の１つを実行するためのプログラムコードを有するコンピュータプログラムである。
本発明の方法の別の実施形態は、したがって、本願明細書において記載されている方法の１つを実行するためのコンピュータプログラムを備え、そこに記録されるデータ記録媒体（又はデジタル記憶媒体のような非一過性の記録媒体、又はコンピュータ可読媒体）である。データ記録媒体、デジタル記憶媒体、又は記録媒体は、たいていは明白及び／又は非一時的である。
本発明の方法の別の実施形態は、したがって、本願明細書において記載されている方法の１つを実行するためのコンピュータプログラムを示すデータストリーム又は一連の信号である。例えば、データストリーム又は一連の信号は、データ通信接続を経て、例えばインターネットを経て、送信されるよう構成しうる。
別の実施の形態は、本願明細書において記載されている方法の１つを行うように構成、又は、適合された、例えばコンピュータのような処理手段又はプログラム可能な論理装置を備える。
別の実施の形態は、本願明細書において記載されている方法の１つを実行するためのコンピュータプログラムがインストールされるコンピュータを備える。
本発明による別の実施の形態は、本願明細書において記載される方法の１つを実行するためのコンピュータプログラムを受信装置に（例えば、電子的もしくは、光学的に）送信するよう構成される装置またはシステムを備える。受信装置は、例えば、コンピュータ、モバイル機器、メモリ装置または類似の装置でもよい。装置またはシステムは、例えば、コンピュータプログラムを受信装置に送信するためのファイルサーバを備えていてもよい。
いくつかの実施の形態では、プログラム可能な論理装置（例えば、現場でプログラム可能なゲートアレイ）が、本願明細書において記載される方法の機能のいくつか又は全てを実行するために使用しうる。いくつかの実施の形態では、現場でプログラム可能なゲートアレイは、本願明細書において記載される方法の１つを実行するために、マイクロプロセッサーと協働できる。一般に、方法は、いかなるハードウェア装置によって、好ましくは、実行しうる。
上述した実施の形態は、本発明の原理を表すだけである。本願明細書に記載された構成及び詳細の修正及び変形は、当業者には明らかであることが理解される。したがって、本発明は、添付の特許請求の範囲によってのみ限定され、本願明細書の実施の形態の記述及び説明のための特定の詳細によっては限定されないことが意図される。

Claims (16)

  1. 少なくとも３つのチャンネル（ＣＨ１：ＣＨ３）を有するマルチチャンネル信号（１０１）を符号化するための装置（１００）であって、
    第１反復ステップにおいて、前記少なくとも３つのチャンネル（ＣＨ１：ＣＨ３）のそれぞれの組の間のチャンネル間相関値を計算し、前記第１反復ステップにおいて、最高値を有する、又は閾値より上の値を有する組を選択し、マルチチャンネル処理操作（１１０、１１２）を使用して前記選択された組を処理して、前記選択された組についての第１マルチチャンネルパラメータ（ＭＣＨ＿ＰＡＲ１）を導出する、及び処理されたチャンネル（Ｐ１、Ｐ２）の第１の組を導出するための反復プロセッサー（１０２）であって、
    前記反復プロセッサー（１０２）は、第２反復ステップにおいて、前記少なくとも３つのチャンネル（ＣＨ１：ＣＨ３）の未処理のチャンネル及び前記処理されたチャンネル（Ｐ１、Ｐ２）のうちの少なくとも１つを使用して、前記計算、前記選択、前記処理を実行して、第２マルチチャンネルパラメータ（ＭＣＨ＿ＰＡＲ２）及び処理されたチャンネル（Ｐ３、Ｐ４）の第２の組を導出するように構成される、反復プロセッサー（１０２）と、
    前記反復プロセッサー（１０２）が実行する反復処理から生じたチャンネル（Ｐ２：Ｐ４）を符号化して符号化されたチャンネル（Ｅ１：Ｅ３）を得るためのチャンネルエンコーダーであって、前記反復処理から生じた、前記チャンネルエンコーダーに供給されるチャンネル（Ｐ２：Ｐ４）の数は、前記反復プロセッサー（１０２）に入力されるチャンネル（ＣＨ１：ＣＨ３）の数と等しい、チャンネルエンコーダーと、
    前記符号化されたチャンネル（Ｅ１：Ｅ３）と、前記第１及び前記第２マルチチャンネルパラメータ（ＭＣＨ＿ＰＡＲ１、ＭＣＨ＿ＰＡＲ２）とを有する符号化されたマルチチャンネル信号（１０７）を生成するための出力インターフェース（１０６）と、
    を備える装置（１００）。
  2. 前記出力インターフェース（１０６）は、シリアルビットストリームとして、且つ、前記第２マルチチャンネルパラメータ（ＭＣＨ＿ＰＡＲ２）が前記符号化された信号内において前記第１マルチチャンネルパラメータ（ＭＣＨ＿ＰＡＲ１）の前にあるように、前記符号化されたマルチチャンネル信号（１０７）を生成するように構成される、請求項１に記載する装置（１００）。
  3. 前記反復プロセッサー（１０２）は、前記選択された組からの回転角度計算を使用する回転処理と、予測処理とを含むグループのうちの少なくとも１つを含むステレオ処理を実行するよう構成される、請求項１又は請求項２の１つに記載する装置（１００）。
  4. 前記第１マルチチャンネルパラメータ（ＭＣＨ＿ＰＡＲ１）は、前記第１反復ステップについて前記選択された組において、前記チャンネルの第１の識別を含み、前記第２マルチチャンネルパラメータ（ＭＣＨ＿ＰＡＲ２）は、前記第２反復ステップの選択された組において前記チャンネルの第２の識別を含む、請求項１ないし請求項３の１つに記載する装置（１００）。
  5. 前記反復プロセッサー（１０２）は、複数のバンドを備える各チャンネルのフレームを使用してチャンネル間相関を計算して、前記複数のバンドについて１つのチャンネル間の相関値が得られるように構成され、
    前記反復プロセッサー（１０２）は、前記複数のバンドのそれぞれに対して前記マルチチャンネル処理を実行して、前記複数のバンドのそれぞれについて、前記第１又は前記第２マルチチャンネルパラメータ（ＭＣＨ＿ＰＡＲ１、ＭＣＨ＿ＰＡＲ２）が得られるように構成される、請求項１ないし請求項４の１つに記載する装置（１００）。
  6. 前記反復プロセッサー（１０２）は、第１のフレームについて、複数の選択された組の指示を導出するよう構成され、前記出力インターフェース（１０６）は、前記マルチチャンネル信号（１０７）に、前記第１のフレームに続く第２のフレームのために、前記第２のフレームが前記第１のフレームと同じ複数の選択された組の指示を有することを示すキープインジケーターを含むよう構成される、請求項１ないし請求項５の１つに記載する装置（１００）。
  7. 前記反復プロセッサー（１０２）は、前記組内のレベル差が閾値よりも小さいときのみ前記組を選択するように構成され、前記閾値は４０ｄＢ、若しくは２５ｄＢ、若しくは１２ｄＢよりも小さい、又は６ｄＢよりも小さい、請求項１ないし請求項６の１つに記載する装置（１００）。
  8. 前記反復プロセッサー（１０２）は正規化された相関値を計算するよう構成され、前記反復プロセッサー（１０２）は、前記相関値が０．２よりも大きい時に、組を選択するよう構成される、請求項１ないし請求項７の１つに記載する装置（１００）。
  9. 前記反復プロセッサー（１０２）は、前記マルチチャンネル処理において、ステレオパラメータを計算するよう構成され、前記反復プロセッサー（１０２）は、ステレオパラメータが、ステレオパラメータ量子化器によって定義されるゼロに量子化された閾値よりも高いバンド内においてのみ、ステレオ処理を行うように構成される、請求項１ないし請求項８の１つに記載する装置（１００）。
  10. 前記反復プロセッサー（１０２）は前記マルチチャンネル処理において、回転角度を計算するよう構成され、前記反復プロセッサー（１０２）は、回転角度が、デコーダー側のゼロに逆量子化された閾値よりも高いバンド内においてのみ、回転処理を行うように構成される、請求項１ないし請求項９の１つに記載する装置（１００）。
  11. 符号化されたチャンネル（Ｅ１：Ｅ３）と、少なくとも第１及び第２マルチチャンネルパラメータ（ＭＣＨ＿ＰＡＲ１、ＭＣＨ＿ＰＡＲ２）とを有する符号化されたマルチチャンネル信号（１０７）を復号化するための装置（２００）であって、
    前記符号化されたチャンネル（Ｅ１：Ｅ３）を復号化して復号化されたチャンネル（Ｄ１：Ｄ３）を得るためのチャンネルデコーダー（２０２）と、
    前記第２マルチチャンネルパラメータ（ＭＣＨ＿ＰＡＲ２）によって識別された前記復号化されたチャンネル（Ｄ１：Ｄ３）の第２の組を使用して、及び前記第２マルチチャンネルパラメータ（ＭＣＨ＿ＰＡＲ２）を使用してマルチチャンネル処理を実行して、処理されたチャンネル（Ｐ１*、Ｐ２*）を得るための、並びに、前記第１マルチチャンネルパラメータ（ＭＣＨ＿ＰＡＲ１）によって識別されたチャンネル（Ｄ１：Ｄ３、Ｐ１*、Ｐ２*）の第１の組を使用して、及び前記第１マルチチャンネルパラメータ（ＭＣＨ＿ＰＡＲ１）を使用して、別のマルチチャンネル処理を実行するためのマルチチャンネルプロセッサー（２０４）であって、チャンネルの前記第１の組は少なくとも１つの処理されたチャンネル（Ｐ１*、Ｐ２*）を備え、前記マルチチャンネル処理から生じて前記マルチチャンネルプロセッサー（２０４）から出力される処理されたチャンネルの数は、前記マルチチャンネルプロセッサー（２０４）に入力される復号化されたチャンネル（Ｄ１：Ｄ３）と等しい、マルチチャンネルプロセッサー（２０４）と、
    を備える、装置（２００）。
  12. 前記マルチチャンネル処理及び前記別のマルチチャンネル処理は、ステレオパラメータを使用するステレオ処理を含み、前記復号化されたチャンネル（Ｄ１：Ｄ３）の個々のスケールファクタバンド又はスケールファクタバンドのグループについて、第１ステレオパラメータが前記第１マルチチャンネルパラメータ（ＭＣＨ＿ＰＡＲ１）に含まれ、第２ステレオパラメータが前記第２マルチチャンネルパラメータ（ＭＣＨ＿ＰＡＲ２）に含まれる、請求項１１に記載する装置（２００）。
  13. 前記第１又は前記第２マルチチャンネルパラメータ（ＭＣＨ＿ＰＡＲ１、ＭＣＨ＿ＰＡＲ２）は、どのスケールファクタバンドがマルチチャンネル処理されていて、どのスケールファクタバンドがマルチチャンネル処理されていないかを示すマルチチャンネル処理マスクを備え、
    前記マルチチャンネルプロセッサー（２０４）は、前記マルチチャンネル処理マスクによって示される前記スケールファクタバンドにおいて、前記マルチチャンネル処理をしないように構成される、請求項１１または請求項１２の１つに記載する装置（２００）。
  14. 少なくとも３つのチャンネルを有するマルチチャンネル信号を符号化するための方法（３００）であって、前記方法は、
    第１反復ステップにおいて、前記少なくとも３つのチャンネルのそれぞれの組の間のチャンネル間相関値を計算するステップ（３０２）と、第１反復ステップにおいて、最高値を有する又は閾値より上の値を有する組を選択するステップと、前記選択された組のための第１マルチチャンネルパラメータを導出するため、及び、処理されたチャンネルの第１の組を導出するために、マルチチャンネル処理操作を使用して前記選択された組を処理するステップと、
    第２マルチチャンネルパラメータと処理されたチャンネルの第２の組とを導出するために、第２反復ステップにおいて、前記少なくとも３つのチャンネルの未処理のチャンネル及び少なくとも１つの前記処理されたチャンネルを使用して、前記計算するステップと、前記選択するステップと、前記処理するステップとを実行するステップ（３０４）と、
    符号化されたチャンネルを得るために、反復処理によって生じたチャンネルを符号化するステップ（３０６）であって、前記反復処理から生じたチャンネルの数は前記反復処理が施されるチャンネルの数に等しい、符号化するステップ（３０６）と、
    前記符号化されたチャンネルと前記第１及び前記第２マルチチャンネルパラメータとを有する符号化されたマルチチャンネル信号を生成するステップ（３０８）と
    を含む、方法（３００）。
  15. 符号化されたチャンネル、並びに少なくとも第１及び第２マルチチャンネルパラメータを有する符号化されたマルチチャンネル信号を復号化する方法（４００）であって、前記方法は、
    復号化されたチャンネルを得るために前記符号化されたチャンネルを復号化するステップ（４０２）と、
    処理されたチャンネルを得るために、前記第２マルチチャンネルパラメータによって識別された前記復号化されたチャンネルの第２の組を使用して、及び前記第２マルチチャンネルパラメータを使用して、マルチチャンネル処理を実行するステップ（４０４）と、前記第１マルチチャンネルパラメータによって識別されたチャンネルの第１の組を使用して、及び前記第１マルチチャンネルパラメータを使用して、別のマルチチャンネル処理を実行するステップを含み、チャンネルの前記第１の組は少なくとも１つの処理されたチャンネルを備え、前記マルチチャンネル処理から生じる処理されたチャンネルの数は前記マルチチャンネル処理が施される復号化されたチャンネルの数に等しい、
    方法（４００）。
  16. コンピュータ又はプロセッサー上で動作するとき、請求項１４の前記マルチチャンネル信号を符号化する前記方法、又は請求項１５の符号化されたマルチチャンネル信号を復号化する前記方法を実行するためのコンピュータプログラム。
JP2019182675A 2015-03-09 2019-10-03 マルチチャンネル信号を符号化又は復号化するための装置と方法 Active JP7208126B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2023000472A JP2023052219A (ja) 2015-03-09 2023-01-05 マルチチャンネル信号を符号化又は復号化するための装置と方法

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
EP15158234 2015-03-09
EP15158234.3 2015-03-09
EP15172492.9A EP3067885A1 (en) 2015-03-09 2015-06-17 Apparatus and method for encoding or decoding a multi-channel signal
EP15172492.9 2015-06-17

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2017548015A Division JP6600004B2 (ja) 2015-03-09 2016-03-08 マルチチャンネル信号を符号化又は復号化するための装置と方法

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2023000472A Division JP2023052219A (ja) 2015-03-09 2023-01-05 マルチチャンネル信号を符号化又は復号化するための装置と方法

Publications (2)

Publication Number Publication Date
JP2020034920A JP2020034920A (ja) 2020-03-05
JP7208126B2 true JP7208126B2 (ja) 2023-01-18

Family

ID=52692421

Family Applications (3)

Application Number Title Priority Date Filing Date
JP2017548015A Active JP6600004B2 (ja) 2015-03-09 2016-03-08 マルチチャンネル信号を符号化又は復号化するための装置と方法
JP2019182675A Active JP7208126B2 (ja) 2015-03-09 2019-10-03 マルチチャンネル信号を符号化又は復号化するための装置と方法
JP2023000472A Pending JP2023052219A (ja) 2015-03-09 2023-01-05 マルチチャンネル信号を符号化又は復号化するための装置と方法

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2017548015A Active JP6600004B2 (ja) 2015-03-09 2016-03-08 マルチチャンネル信号を符号化又は復号化するための装置と方法

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2023000472A Pending JP2023052219A (ja) 2015-03-09 2023-01-05 マルチチャンネル信号を符号化又は復号化するための装置と方法

Country Status (17)

Country Link
US (4) US10388289B2 (ja)
EP (3) EP3067885A1 (ja)
JP (3) JP6600004B2 (ja)
KR (1) KR102109159B1 (ja)
CN (2) CN107592937B (ja)
AR (1) AR103873A1 (ja)
AU (1) AU2016231238B2 (ja)
BR (6) BR112017019187A2 (ja)
CA (1) CA2978818C (ja)
ES (1) ES2769032T3 (ja)
MX (1) MX364419B (ja)
PL (1) PL3268959T3 (ja)
PT (1) PT3268959T (ja)
RU (1) RU2711055C2 (ja)
SG (1) SG11201707180SA (ja)
TW (1) TWI584271B (ja)
WO (1) WO2016142375A1 (ja)

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3067885A1 (en) * 2015-03-09 2016-09-14 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Apparatus and method for encoding or decoding a multi-channel signal
CN106710600B (zh) * 2016-12-16 2020-02-04 广州广晟数码技术有限公司 多声道音频信号的去相关编码方法和装置
US10650834B2 (en) * 2018-01-10 2020-05-12 Savitech Corp. Audio processing method and non-transitory computer readable medium
WO2019143867A1 (en) 2018-01-18 2019-07-25 Dolby Laboratories Licensing Corporation Methods and devices for coding soundfield representation signals
AU2019298307A1 (en) * 2018-07-04 2021-02-25 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Multisignal audio coding using signal whitening as preprocessing
US10547927B1 (en) * 2018-07-27 2020-01-28 Mimi Hearing Technologies GmbH Systems and methods for processing an audio signal for replay on stereo and multi-channel audio devices
US11361776B2 (en) 2019-06-24 2022-06-14 Qualcomm Incorporated Coding scaled spatial components
US11538489B2 (en) * 2019-06-24 2022-12-27 Qualcomm Incorporated Correlating scene-based audio data for psychoacoustic audio coding
CN112233682B (zh) * 2019-06-29 2024-07-16 华为技术有限公司 一种立体声编码方法、立体声解码方法和装置
CN112151045B (zh) 2019-06-29 2024-06-04 华为技术有限公司 一种立体声编码方法、立体声解码方法和装置
CN113948095A (zh) * 2020-07-17 2022-01-18 华为技术有限公司 多声道音频信号的编解码方法和装置
CN114023338A (zh) 2020-07-17 2022-02-08 华为技术有限公司 多声道音频信号的编码方法和装置
EP4243015A4 (en) * 2021-01-27 2024-04-17 Samsung Electronics Co., Ltd. AUDIO PROCESSING APPARATUS AND METHOD
CN115410584A (zh) * 2021-05-28 2022-11-29 华为技术有限公司 多声道音频信号的编码方法和装置

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006323314A (ja) 2005-05-20 2006-11-30 Matsushita Electric Ind Co Ltd マルチチャネル音声信号をバイノーラルキュー符号化する装置
JP2008511848A (ja) 2004-09-03 2008-04-17 フラウンホッファー−ゲゼルシャフト ツァ フェルダールング デァ アンゲヴァンテン フォアシュンク エー．ファオ 符号化されたマルチチャネル信号を発生するための装置および方法並びに符号化されたマルチチャネル信号を復号化するための装置および方法
JP2009530652A (ja) 2006-03-15 2009-08-27 フランス テレコム 主成分分析に基づくマルチチャネルオーディオ信号の段階的な符号化のための装置および方法
JP2011501544A (ja) 2007-10-17 2011-01-06 フラウンホッファー−ゲゼルシャフト ツァ フェルダールング デァ アンゲヴァンテン フォアシュンク エー．ファオ ダウンミックスを用いたオーディオコーディング
WO2011080916A1 (ja) 2009-12-28 2011-07-07 パナソニック株式会社 音声符号化装置および音声符号化方法
US20130077793A1 (en) 2010-03-29 2013-03-28 Samsung Electronics Co., Ltd. Method and apparatus for down-mixing multi-channel audio
JP2015011076A (ja) 2013-06-26 2015-01-19 日本放送協会 音響信号符号化装置、音響信号符号化方法、および音響信号復号化装置
JP6600004B2 (ja) 2015-03-09 2019-10-30 フラウンホッファー−ゲゼルシャフト ツァ フェルダールング デァ アンゲヴァンテン フォアシュンク エー．ファオ マルチチャンネル信号を符号化又は復号化するための装置と方法

Family Cites Families (45)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3404837B2 (ja) * 1993-12-07 2003-05-12 ソニー株式会社 多層符号化装置
US5956674A (en) * 1995-12-01 1999-09-21 Digital Theater Systems, Inc. Multi-channel predictive subband audio coder using psychoacoustic adaptive bit allocation in frequency, time and over the multiple channels
SE519981C2 (sv) * 2000-09-15 2003-05-06 Ericsson Telefon Ab L M Kodning och avkodning av signaler från flera kanaler
US7502743B2 (en) * 2002-09-04 2009-03-10 Microsoft Corporation Multi-channel audio encoding and decoding with multi-channel transform selection
JP4369140B2 (ja) * 2003-02-17 2009-11-18 パナソニック株式会社 オーディオ高能率符号化装置、オーディオ高能率符号化方法、オーディオ高能率符号化プログラム及びその記録媒体
US7447317B2 (en) * 2003-10-02 2008-11-04 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V Compatible multi-channel coding/decoding by weighting the downmix channel
DE102004009628A1 (de) * 2004-02-27 2005-10-06 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Vorrichtung und Verfahren zum Beschreiben einer Audio-CD und Audio-CD
KR101183857B1 (ko) * 2004-06-21 2012-09-19 코닌클리케 필립스 일렉트로닉스 엔.브이. 다중 채널 오디오 신호를 인코딩/디코딩하기 위한 방법 및 장치
DE102004043521A1 (de) * 2004-09-08 2006-03-23 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Vorrichtung und Verfahren zum Erzeugen eines Multikanalsignals oder eines Parameterdatensatzes
KR100682904B1 (ko) * 2004-12-01 2007-02-15 삼성전자주식회사 공간 정보를 이용한 다채널 오디오 신호 처리 장치 및 방법
US7573912B2 (en) * 2005-02-22 2009-08-11 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschunng E.V. Near-transparent or transparent multi-channel encoder/decoder scheme
JP4809370B2 (ja) * 2005-02-23 2011-11-09 テレフオンアクチーボラゲット エル エム エリクソン（パブル） マルチチャネル音声符号化における適応ビット割り当て
DE102005010057A1 (de) * 2005-03-04 2006-09-07 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Vorrichtung und Verfahren zum Erzeugen eines codierten Stereo-Signals eines Audiostücks oder Audiodatenstroms
ATE470930T1 (de) * 2005-03-30 2010-06-15 Koninkl Philips Electronics Nv Skalierbare mehrkanal-audiokodierung
US7961890B2 (en) 2005-04-15 2011-06-14 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung, E.V. Multi-channel hierarchical audio coding with compact side information
US7983922B2 (en) * 2005-04-15 2011-07-19 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Apparatus and method for generating multi-channel synthesizer control signal and apparatus and method for multi-channel synthesizing
US8185403B2 (en) * 2005-06-30 2012-05-22 Lg Electronics Inc. Method and apparatus for encoding and decoding an audio signal
ES2433316T3 (es) * 2005-07-19 2013-12-10 Koninklijke Philips N.V. Generación de señales de audio de multiples canales
WO2007055463A1 (en) * 2005-08-30 2007-05-18 Lg Electronics Inc. Apparatus for encoding and decoding audio signal and method thereof
CN101297353B (zh) * 2005-10-26 2013-03-13 Lg电子株式会社 编码和解码多声道音频信号的方法及其装置
KR100888474B1 (ko) * 2005-11-21 2009-03-12 삼성전자주식회사 멀티채널 오디오 신호의 부호화/복호화 장치 및 방법
KR101218776B1 (ko) * 2006-01-11 2013-01-18 삼성전자주식회사 다운믹스된 신호로부터 멀티채널 신호 생성방법 및 그 기록매체
US8027479B2 (en) * 2006-06-02 2011-09-27 Coding Technologies Ab Binaural multi-channel decoder in the context of non-energy conserving upmix rules
WO2008006108A2 (en) * 2006-07-07 2008-01-10 Srs Labs, Inc. Systems and methods for multi-dialog surround audio
EP2068307B1 (en) * 2006-10-16 2011-12-07 Dolby International AB Enhanced coding and parameter representation of multichannel downmixed object coding
JP2008129250A (ja) * 2006-11-20 2008-06-05 National Chiao Tung Univ Ａａｃのためのウィンドウ切り替え方法およびｍ／ｓ符号化の帯域決定方法
US8295494B2 (en) * 2007-08-13 2012-10-23 Lg Electronics Inc. Enhancing audio with remixing capability
KR101450940B1 (ko) * 2007-09-19 2014-10-15 텔레폰악티에볼라겟엘엠에릭슨(펍) 멀티채널 오디오의 조인트 인핸스먼트
US8249883B2 (en) * 2007-10-26 2012-08-21 Microsoft Corporation Channel extension coding for multi-channel source
WO2009146734A1 (en) * 2008-06-03 2009-12-10 Nokia Corporation Multi-channel audio coding
KR101137361B1 (ko) * 2009-01-28 2012-04-26 엘지전자 주식회사 오디오 신호 처리 방법 및 장치
US9105264B2 (en) * 2009-07-31 2015-08-11 Panasonic Intellectual Property Management Co., Ltd. Coding apparatus and decoding apparatus
US9031850B2 (en) * 2009-08-20 2015-05-12 Gvbb Holdings S.A.R.L. Audio stream combining apparatus, method and program
KR101646650B1 (ko) * 2009-10-15 2016-08-08 오렌지 최적의 저-스루풋 파라메트릭 코딩/디코딩
EP2375409A1 (en) * 2010-04-09 2011-10-12 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Audio encoder, audio decoder and related methods for processing multi-channel audio signals using complex prediction
US8908874B2 (en) * 2010-09-08 2014-12-09 Dts, Inc. Spatial audio encoding and reproduction
CN103262158B (zh) 2010-09-28 2015-07-29 华为技术有限公司 对解码的多声道音频信号或立体声信号进行后处理的装置和方法
TWI517028B (zh) * 2010-12-22 2016-01-11 傑奧笛爾公司 音訊空間定位和環境模擬
WO2013156814A1 (en) * 2012-04-18 2013-10-24 Nokia Corporation Stereo audio signal encoder
EP2717265A1 (en) * 2012-10-05 2014-04-09 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Encoder, decoder and methods for backward compatible dynamic adaption of time/frequency resolution in spatial-audio-object-coding
KR101984115B1 (ko) 2013-03-05 2019-05-31 프라운호퍼 게젤샤프트 쭈르 푀르데룽 데어 안겐반텐 포르슝 에.베. 오디오 신호 처리를 위한 다채널 다이렉트-앰비언트 분해를 위한 장치 및 방법
US9659569B2 (en) * 2013-04-26 2017-05-23 Nokia Technologies Oy Audio signal encoder
EP2830333A1 (en) * 2013-07-22 2015-01-28 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Multi-channel decorrelator, multi-channel audio decoder, multi-channel audio encoder, methods and computer program using a premix of decorrelator input signals
TWI671734B (zh) * 2013-09-12 2019-09-11 瑞典商杜比國際公司 在包含三個音訊聲道的多聲道音訊系統中之解碼方法、編碼方法、解碼裝置及編碼裝置、包含用於執行解碼方法及編碼方法的指令之非暫態電腦可讀取的媒體之電腦程式產品、包含解碼裝置及編碼裝置的音訊系統
CN110992964B (zh) * 2014-07-01 2023-10-13 韩国电子通信研究院 处理多信道音频信号的方法和装置

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008511848A (ja) 2004-09-03 2008-04-17 フラウンホッファー−ゲゼルシャフト ツァ フェルダールング デァ アンゲヴァンテン フォアシュンク エー．ファオ 符号化されたマルチチャネル信号を発生するための装置および方法並びに符号化されたマルチチャネル信号を復号化するための装置および方法
JP2006323314A (ja) 2005-05-20 2006-11-30 Matsushita Electric Ind Co Ltd マルチチャネル音声信号をバイノーラルキュー符号化する装置
JP2009530652A (ja) 2006-03-15 2009-08-27 フランス テレコム 主成分分析に基づくマルチチャネルオーディオ信号の段階的な符号化のための装置および方法
JP2011501544A (ja) 2007-10-17 2011-01-06 フラウンホッファー−ゲゼルシャフト ツァ フェルダールング デァ アンゲヴァンテン フォアシュンク エー．ファオ ダウンミックスを用いたオーディオコーディング
WO2011080916A1 (ja) 2009-12-28 2011-07-07 パナソニック株式会社 音声符号化装置および音声符号化方法
US20130077793A1 (en) 2010-03-29 2013-03-28 Samsung Electronics Co., Ltd. Method and apparatus for down-mixing multi-channel audio
JP2015011076A (ja) 2013-06-26 2015-01-19 日本放送協会 音響信号符号化装置、音響信号符号化方法、および音響信号復号化装置
JP6600004B2 (ja) 2015-03-09 2019-10-30 フラウンホッファー−ゲゼルシャフト ツァ フェルダールング デァ アンゲヴァンテン フォアシュンク エー．ファオ マルチチャンネル信号を符号化又は復号化するための装置と方法

Also Published As

Publication number Publication date
EP3506259A1 (en) 2019-07-03
RU2711055C2 (ru) 2020-01-14
EP3067885A1 (en) 2016-09-14
US11955131B2 (en) 2024-04-09
BR122023021774A2 (pt) 2023-12-26
CA2978818A1 (en) 2016-09-15
EP3268959A1 (en) 2018-01-17
PT3268959T (pt) 2019-11-11
CN112233684A (zh) 2021-01-15
JP2023052219A (ja) 2023-04-11
US10388289B2 (en) 2019-08-20
BR122023021855A2 (pt) 2023-12-26
BR112017019187A2 (pt) 2018-04-24
US11508384B2 (en) 2022-11-22
CA2978818C (en) 2020-09-22
TW201642248A (zh) 2016-12-01
JP2018513402A (ja) 2018-05-24
JP2020034920A (ja) 2020-03-05
PL3268959T3 (pl) 2020-01-31
CN112233684B (zh) 2024-03-19
RU2017134964A3 (ja) 2019-04-05
BR122023021787A2 (pt) 2023-12-26
AR103873A1 (es) 2017-06-07
KR102109159B1 (ko) 2020-05-12
BR122023021817A2 (pt) 2023-12-26
RU2017134964A (ru) 2019-04-05
KR20170130458A (ko) 2017-11-28
EP3268959B1 (en) 2019-08-14
CN107592937B (zh) 2021-02-23
BR122023021854A2 (pt) 2023-12-26
US20230134993A1 (en) 2023-05-04
MX2017011495A (es) 2018-01-25
TWI584271B (zh) 2017-05-21
AU2016231238B2 (en) 2018-08-02
WO2016142375A1 (en) 2016-09-15
JP6600004B2 (ja) 2019-10-30
AU2016231238A1 (en) 2017-09-21
US20210012783A1 (en) 2021-01-14
US10762909B2 (en) 2020-09-01
ES2769032T3 (es) 2020-06-24
MX364419B (es) 2019-04-25
US20190333524A1 (en) 2019-10-31
SG11201707180SA (en) 2017-10-30
CN107592937A (zh) 2018-01-16
US20180090151A1 (en) 2018-03-29

Similar Documents

Publication Publication Date Title
JP7208126B2 (ja) マルチチャンネル信号を符号化又は復号化するための装置と方法
JP6735053B2 (ja) マルチチャネル符号化におけるステレオ充填装置及び方法
JP6346278B2 (ja) ジョイント符号化残留信号を用いたオーディオエンコーダ、オーディオデコーダ、方法、およびコンピュータプログラム
JP6105159B2 (ja) オーディオ・エンコーダおよびデコーダ
JP6248186B2 (ja) オーディオ・エンコードおよびデコード方法、対応するコンピュータ可読媒体ならびに対応するオーディオ・エンコーダおよびデコーダ
US20240249732A1 (en) Apparatus and Method for Encoding or Decoding a Multi-Channel Signal
JP5990954B2 (ja) オーディオ符号化装置、オーディオ符号化方法、オーディオ符号化用コンピュータプログラム、オーディオ復号装置、オーディオ復号方法ならびにオーディオ復号用コンピュータプログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20191101

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20201117

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20210212

A524 Written submission of copy of amendment under article 19 pct

Free format text: JAPANESE INTERMEDIATE CODE: A524

Effective date: 20210517

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20211012

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20220106

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220411

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220524

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20220822

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20221122

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20221206

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230105

R150 Certificate of patent or registration of utility model

Ref document number: 7208126

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150