BRPI0615899B1 - Unidade decodificadora espacial, dispositivo decodificador espacial, sistema de áudio, dispositivo de consumidor, e método para produzir um par de canais de saída binaurais - Google Patents

Unidade decodificadora espacial, dispositivo decodificador espacial, sistema de áudio, dispositivo de consumidor, e método para produzir um par de canais de saída binaurais Download PDF

Info

Publication number
BRPI0615899B1
BRPI0615899B1 BRPI0615899-4A BRPI0615899A BRPI0615899B1 BR PI0615899 B1 BRPI0615899 B1 BR PI0615899B1 BR PI0615899 A BRPI0615899 A BR PI0615899A BR PI0615899 B1 BRPI0615899 B1 BR PI0615899B1
Authority
BR
Brazil
Prior art keywords
binaural
unit
channels
parameters
spatial
Prior art date
Application number
BRPI0615899-4A
Other languages
English (en)
Inventor
Dirk J. Breebaart
Original Assignee
Koninklijke Philips N.V.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Family has litigation
First worldwide family litigation filed litigation Critical https://patents.darts-ip.com/?family=37682599&utm_source=***_patent&utm_medium=platform_link&utm_campaign=public_patent_search&patent=BRPI0615899(B1) "Global patent litigation dataset” by Darts-ip is licensed under a Creative Commons Attribution 4.0 International License.
Application filed by Koninklijke Philips N.V. filed Critical Koninklijke Philips N.V.
Publication of BRPI0615899A2 publication Critical patent/BRPI0615899A2/pt
Publication of BRPI0615899B1 publication Critical patent/BRPI0615899B1/pt

Links

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/008Multichannel audio signal coding or decoding using interchannel correlation to reduce redundancy, e.g. joint-stereo, intensity-coding or matrixing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S3/00Systems employing more than two channels, e.g. quadraphonic
    • H04S3/002Non-adaptive circuits, e.g. manually adjustable or static, for enhancing the sound image or the spatial distribution
    • H04S3/004For headphones
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • HELECTRICITY
    • H03ELECTRONIC CIRCUITRY
    • H03MCODING; DECODING; CODE CONVERSION IN GENERAL
    • H03M7/00Conversion of a code where information is represented by a given sequence or number of digits to a code where the same, similar or subset of information is represented by a different sequence or number of digits
    • H03M7/30Compression; Expansion; Suppression of unnecessary data, e.g. redundancy reduction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S3/00Systems employing more than two channels, e.g. quadraphonic
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S3/00Systems employing more than two channels, e.g. quadraphonic
    • H04S3/002Non-adaptive circuits, e.g. manually adjustable or static, for enhancing the sound image or the spatial distribution
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S7/00Indicating arrangements; Control arrangements, e.g. balance control
    • H04S7/30Control circuits for electronic adaptation of the sound field
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2499/00Aspects covered by H04R or H04S not otherwise provided for in their subgroups
    • H04R2499/10General applications
    • H04R2499/11Transducers incorporated or for use in hand-held devices, e.g. mobile phones, PDA's, camera's
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S2400/00Details of stereophonic systems covered by H04S but not provided for in its groups
    • H04S2400/01Multi-channel, i.e. more than two input channels, sound reproduction with two speakers wherein the multi-channel information is substantially preserved
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S2420/00Techniques used stereophonic systems covered by H04S but not provided for in its groups
    • H04S2420/01Enhancing the perception of the sound image or of the spatial distribution using head related transfer functions [HRTF's] or equivalents thereof, e.g. interaural time difference [ITD] or interaural level difference [ILD]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S2420/00Techniques used stereophonic systems covered by H04S but not provided for in its groups
    • H04S2420/03Application of parametric coding in stereophonic audio systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Signal Processing (AREA)
  • Computational Linguistics (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Mathematical Physics (AREA)
  • Theoretical Computer Science (AREA)
  • Stereophonic System (AREA)

Abstract

unidade decodificadora espacial, dispositivo decodificaior espacial, sistema de áudio, dispositivo de consumidor, método para produzir um par de canais de saída binaurais, e, produto de programa de computador uma unidade decodificadora espacial (23) é arranjada para transformar um ou mais canais de áudio (s; 1, r) em um par de canais de saída binaurais (lb, rb). o dispositivo compreende uma unidade de conversão de parâmetros (234) para converter os parâmetros espaciais (sp) em parâmetros binaurais (bp) contendo informação binaural contendo informação binaural. o dispositivo adicionalmente compreende uma unidade de síntese espacial (232) para transformar os canais de áudio (l, r) em um par de sinais binaurais (lb, rb) enquanto usando os parâmetros binaurais (bp). a unidade de síntese espacial (232) preferencialmente opera em um domínio de transformada, tal como o domínio de qmf.

Description

UNIDADE DECODIFICADORA ESPACIAL, DISPOSITIVO DECODIFICADOR ESPACIAL, SISTEMA DE ÁUDIO, DISPOSITIVO DE CONSUMIDOR, E MÉTODO PARA PRODUZIR UM PAR DE CANAIS DE SAÍDA BINAURAIS [001] A presente invenção se refere à codificação de áudio. Mais em particular, a presente invenção se refere a um dispositivo para e um método de converter um sinal de entrada de áudio em um sinal de saída binaural, onde o sinal de entrada compreende, pelo menos, um canal de áudio e parâmetros representando canais adicionais.
[002] É bem conhecido, gravar e reproduzir sinais de áudio binaural, isto, sinais de áudio que contem informação direcional específica para a qual o ouvido humano é sensível. Gravações binaurais são tipicamente feitas usando dois microfones montados em uma cabeça humana de manequim, tal que o som gravado corresponde ao som capturado pelo ouvido humano e inclui qualquer influência devia a forma da cabeça e das orelhas. Gravações binaurais deferem das gravações em estéreo (isto é, estereofônicas), nas quais a reprodução de um gravação binaural requer um fone de ouvido, e onde a gravação em estéreo é feita para reprodução por alto-falantes. Enquanto uma gravação binaural permite a reprodução de toda informação espacial usando somente dois canais, uma gravação em estéreo não forneceria a mesma percepção espacial.
[003] Gravações de canal dual regular (estereofônico) ou múltiplos canais (e.g., 5.1) podem ser transformados em gravações binaurais convolucionando cada sinal regular com um conjunto de funções de transferência perceptuais. Tais funções de transferência perceptuais
Petição 870190012174, de 05/02/2019, pág. 5/41
2/30 modelam a influência do ouvido humano, e possivelmente outros objetos, no sinal. Um tipo bem conhecido de funções de transferência perceptual e a assim chamada função de transferência relacionada à cabeça (HRTF). Um tipo alternativo de função de transferência perceptual, que também leva em conta reflexões causadas pelas paredes, teto e piso de uma sala, é a Resposta de Impulso de Espaço Binaural (BRIR).
[004] No caso de sinais de múltiplo canal, transformando os sinal em sinais de gravação binaural com um conjunto de funções perceptuais, tipicamente, implica em convolução das funções perceptuais com os sinais de todos os canais. Como uma convolução típica, é exigida computacionalmente, os sinais e o HRTF são tipicamente transformados para o domínio da freqüência (Fourier) onde a convolução é substituída por uma multiplicação muito menos exigente computacionalmente.
[005] É ainda bem conhecido, reduzir o número de canais de áudio, a serem transmitidos ou armazenados para representar o número original de canais, de um menor número de canais e parâmetros indicativo das relações entre os canais originais. Assim sendo, um conjunto de sinais estéreo pode ser representado por um canal único (mono) mais um número de parâmetros espaciais associados, enquanto um conjunto de sinais 5.1 podem ser representados por dois canais e um conjunto de parâmetros espaciais associados, ou mesmo por um canal único mais os parâmetros espaciais associados. Esta mistura descendente ” de múltiplos canais de áudio em codificadores espaciais, e o correspondente mistura ascendente ” de sinais de áudio em decodificadores
Petição 870190012174, de 05/02/2019, pág. 6/41
3/30 espaciais, é tipicamente, realizado em um domínio de transformada ou domínio de sub banda, por exemplo, o domínio QMF (Filtro espelho em quadratura).
[006] O Pedido de Patente do Tratado de Cooperação de Patente WO2004/028204 descreve um sistema para gerar sinais binaurais usando Funções de Transferência Relacionada à Cabeça; o documento The reference Model Architecture for MPEG Spatial Audio Coding”, Herre et al; Audio Engineering Society Convention Paper, New York; 28 de Maio de 2005; XP009059973 descreve a arquitetura de Modelo de Referência MPEG; o documento Synthetic Ambiance in Parametric Stereo coding” Endegard et al; Preprints of papers presented at the AES Convention, 8 de Maio de 2004, páginas 1-12, XP008048096 descreve um exemplo de código estéreo paramétrico; e o documento MP3 Surround: Efficient and Compatible Coding of Multi-Channel Audio”; Herre at al. Audio Engineering Society, Convention Preprint, 8 de Maio de 2004; XP002338414 descreve exemplos codificação de MP3 Surround.
[007] Quando canais de entrada são feitos com mistura descendente são para ser convertido em canais de saída binaurais. A abordagem da Arte Anterior é para primeiro misturar ascendentemente os canais de entrada usando um decodificador espacial para produzir canais intermediários feitos com mistura ascendente, e então converter esses canais intermediários feitos com mistura ascendente em canais binaurais. Este procedimento tipicamente produz cinco ou sei canais intermediários, que então tem de ser reduzidos a dois canais binaurais. Primeiro expandindo e então reduzindo o número de canais, não é, claramente, eficiente e aumenta a complexidade computacional. Em adição, reduzindo os cinco ou
Petição 870190012174, de 05/02/2019, pág. 7/41
4/30 seis canais intermediários significa para reprodução em altofalante de múltiplo canal para apenas dois canais, significa que para reprodução binaural inevitavelmente introduz artefatos e por conseguinte, diminui a qualidade do som.
[008] O domínio de QMF referenciado acima é similar, mas não idêntico, ao domínio da freqüência (transformada de Fourier). Se um decodificador espacial é para produzir sinais de saída binaurais, os sinais de áudio feitos com mistura descendente primeiro teriam de ser transformados para o domínio de QMF para misturar ascendentemente, então ser inversamente transformado de QMF, para produzir sinais intermediários de domínio do tempo, subseqüentemente ser transformado para o domínio da freqüência por multiplicação com o HRTF (transformado por Fourier), e finalmente ser inversamente transformado para produzir sinais de saída no domínio do tempo. Será claro que este procedimento não é eficiente, já que várias transformadas precisam ser efetuadas em sucessão.
[009] O número de computação envolvido nesta abordagem da Arte Anterior tornaria isto muito difícil de projetar um dispositivo de consumidor de mão, tal com um tocador de MP3 portátil, capaz de produzi sinais de saída binaurais a partir de sinais de áudio feitos com mistura descendente. Mesmo, se tal a um dispositivo pudesse ser implementado, seu tempo de bateria seria bem curto devido á carga computacional requerida.
[010] É um objeto da presente invenção contornar esse e outros problemas da Arte anterior e fornecer uma unidade decodificadora espacial capaz de produzir um ar de canais de saída binaurais a partir de um conjunto de
Petição 870190012174, de 05/02/2019, pág. 8/41
5/30 canais de áudio feitos com mistura descendente representado por um ou mais canais de entrada de áudio e um conjunto de parâmetros espaciais associados, o qual decodificador tem uma eficiência aumentada.
[011]
Conseqüentemente, a presente invenção fornece uma unidade decodificadora espacial para reproduzir um par de canais de saída binaurais usando parâmetros espaciais e um ou mais canais de entrada de áudio, dispositivo compreendendo uma unidade de conversão de parâmetro para converter os parâmetros espaciais em parâmetros binaurais usando funções de transferência perceptuais parametrizadas, os parâmetros binaurais dependendo tanto dos parâmetros espaciais quanto das funções de transferência perceptuais parametrizadas;
uma única unidade de transformada para transformar o único canal de entrada de áudio em um canal de áudio transformado; uma unidade de desfazer correlação para descorrelacionar o canal de áudio transformado para gerar um sinal descorrelacionado transformado; e uma unidade de síntese espacial para sintetizar um par de canais binaurais transformados aplicando os parâmetros binaurais ao canal de áudio transformado (S) e ao sinal descorrelacionado transformado; e um par de unidades de transformada inversa para inversamente transformar os canais binaurais transformados no par de canais de saída binaurais.
[012] Convertendo os parâmetros espaciais em parâmetros binaurais, a unidade de síntese espacial pode diretamente sintetizar um par de canais binaurais, sem requerer uma unidade de síntese binaural adicional. Como nenhuns sinais intermediários supérfluos são produzidos, os
Petição 870190012174, de 05/02/2019, pág. 9/41
6/30 requisitos computacionais são reduzidos enquanto a introdução de artefatos é substancialmente eliminada.
[013] Na unidade decodificadora espacial da presente invenção, a síntese dos canais binaurais pode ser realizada no domínio da transformada, por exemplo, o domínio da QMF m sem requere passos adicionais de transformação do domínio da freqüência e a subseqüente transformação inversa para o domínio do tempo. Como dois passos de transformada podem ser omitidos, ambos o número de computações e os requisitos de memória são significantemente reduzidos. A unidade decodificadora espacial da presente invenção pode, por conseguinte, de modo relativo, facilmente ser implementada em um dispositivo de consumidor portátil.
[014] Ainda mais, na unidade decodificadora espacial da presente invenção, canais binaurais são produzidos diretamente a partir dos canais feitos com mistura descendente, cada canal binaural compreendendo sinais binaurais para reprodução binaural usando um fone de ouvido ou um dispositivo similar. A unidade de conversão de parâmetros deriva os parâmetros binaurais usados para produzir os canais binaurais dos parâmetros espaciais (isto é, misturar ascendentemente). Esta derivação dos parâmetros binaurais envolve funções de transferência perceptuais parametrizadas, tais como HRTFs (Head-Related Transfer Functions) e / ou Binaural Room IMplusr Responses (BRIBs). De acordo com a presente invenção, por conseguinte, o processamento das funções de transferência perceptual é efetuado no domínio do parâmetro, enquanto na Arte Anterior este processamento era realizado no domínio do tempo ou domínio da freqüência. Isto pode resultar em uma redução
Petição 870190012174, de 05/02/2019, pág. 10/41
7/30 adicional da complexidade já que a resolução no domínio do parâmetro é tipicamente mais baixa do que a resolução no domínio do tempo o do domínio da freqüência.
[015] É preferido que a unidade de conversão de parâmetros seja arranjada para combinar no domínio do parâmetro, de modo a determinar os parâmetros binaurais, todas as contribuições de função de transferência perceptual que os canais de áudio de entrada (misturar descendentemente) fariam para os canais binaurais. Em outras palavras, os parâmetros espaciais e as funções de transferência perceptuais parametrizadas são combinados em tal uma maneira que os parâmetros combinados resultam em um sinal de saída binaural tendo propriedades estatísticas similares àquelas obtidas no método da Arte Anterior envolvendo sinais intermediários feitos com mistura ascendente.
[016] Em uma modalidade preferida, a unidade decodificadora espacial da presente invenção ainda compreende uma ou mais unidades de transformada para transformar os canais de entrada de áudio em canais de entrada de áudio transformados, e um par de unidades de transformada inversa transformando inversamente os canais binaurais sintetizados nos pares de canais de saída binaurais, onde a unidade de síntese espacial é arranjada para operar em um domínio de transformada ou domínio de sub banda, preferencialmente o domínio de QMF.
[017] A unidade decodificadora espacial da presente invenção pode compreender duas unidades de transformada, a unidade de conversão de parâmetros sendo arranjada para utilizar parâmetros de função de transferência perceptual envolvendo três canais somente, dois desses três
Petição 870190012174, de 05/02/2019, pág. 11/41
8/30 canais incorporando as contribuições dos canis de frente e de trás compostos. Em tal uma modalidade, a unidade de conversão de parâmetros pode ser arranjada para processar parâmetros de nível de canal (e.g., CLD), de coerência de canal (e.g., ICC), de prognóstico de canal (e.g., CPC) e / ou de fase (e.g., IPD).
[018] A unidade decodificadora espacial da presente invenção compreende somente uma unidade de transformada única, e ainda compreende uma unidade de desfazer correlação para desfazer a correlação da saída do canal único transformado pela unidade de transformada única. Em tal uma modalidade, a unidade de conversão de parâmetros
pode ser arranjada para processar parâmetros de nível de
canal (e.g., CLD), de coerência de canal (e.g., ICC), e / ou
de fase (e.g., IPD) .
[019] A unidade decodificadora espacial da
presente invenção pode, adicionalmente, compreender uma unidade de reverberação de estéreo. Tal uma unidade de reverberação de estéreo pode ser arranjada para operar no domínio do tempo ou em um domínio de transformada ou domínio de sub banda (e.g., QMF).
[020] A presente invenção também fornece um dispositivo decodificador espacial para produzir um par de canais de saída binaurais de uma seqüência de bits de entrada em, o dispositivo compreendendo, uma unidade de desmultiplexação, para desmultiplexar a seqüência de bit de entrada em um único canal de mistura descendente e parâmetros de sinal, uma unidade decodificadora de mistura descendente para decodificar o único canal de mistura descendente, e uma unidade decodificadora espacial para produzir um par de
Petição 870190012174, de 05/02/2019, pág. 12/41
9/30 canais de saída binaurais usando os parâmetros espaciais e o único canal de mistura descendente.
[021] Em adição, a presente invenção fornece um dispositivo de consumidor e um sistema de áudio compreendendo uma unidade decodificadora espacial e / ou um dispositivo decodificador espacial como definido acima. A presente invenção ainda fornece um método produzir um par de canais de saída binaurais usando parâmetros espaciais e um único canal de entrada de áudio, o método compreendendo os passos de converter os parâmetros espaciais em parâmetros binaurais usando as funções de transferência perceptuais parametrizadas, os parâmetros binaurais dependendo tanto dos parâmetros espaciais quanto das funções de transferência perceptuais parametrizadas; transformar o único canal de entrada de áudio em um canal de áudio transformado; descorrelacionar o canal de áudio transformado para gerar um sinal descorrelacionado transformado; e sintetizar um par de canais binaurais transformados aplicando os parâmetros binaurais ao canal de áudio transformado (S) e ao sinal descorrelacionado transformado e inversamente transformar os canais binaurais transformados no par de canais de saída binaurais.
[022] Aspectos adicionais do método de acordo com a presente invenção ficarão aparentes a partir da descrição abaixo.
[023] A presente invenção adicionalmente fornece um produto de programa de computador para realizar o método como definido acima. Um produto de programa de computador pode compreender um conjunto de instruções executáveis de computador armazenadas em um portador de
Petição 870190012174, de 05/02/2019, pág. 13/41
10/30 dados, tal como operação e manutenção um CD ou um DVD. O conjunto de instruções executáveis de computador, que permite a um computador programável realizar o método como definido acima, pode também estar disponível para descarga de um servidor remoto, por exemplo, via Internet.
[024] A presente invenção ainda ser explicada abaixo com referência as modalidades exemplares ilustrada nos desenho anexos, nos quais:
[025] Fig. 1 esquematicamente mostra a
aplicação de funções de transferência relacionada a cabeça de
acordo com coma Arte Anterior.
[026] Fig. 2 esquematicamente mostra um
dispositivo codificador de áudio espacial de acordo com a
Arte Anterior.
[027] Fig. 3 esquematicamente mostra um
dispositivo decodificador de áudio espacial de acordo com a
Arte Anterior acoplada a um dispositivo de síntese binaural.
[028] Fig. 4 esquematicamente mostra um
dispositivo decodificador de áudio espacial de acordo com a
Arte Anterior.
[029] Fig. 5 esquematicamente mostra um
dispositivo decodificador de áudio espacial de acordo com a
presente invenção.
[030] Fig. 6 esquematicamente mostra um
dispositivo decodificador de áudio espacial de acordo com a
presente invenção.
[031] Fig. 7 esquematicamente mostra uma
unidade decodificadora da Fig . 6, fornecida com uma unidade
de reverberação de domínio de transformada.
[032] Fig. 8 esquematicamente mostra uma
Petição 870190012174, de 05/02/2019, pág. 14/41
11/30 unidade decodificadora da Fig. 6, fornecida com uma unidade de reverberação de domínio de tempo.
[033] Fig. 9 esquematicamente mostra um dispositivo de consumidor fornecido com um dispositivo decodificador de áudio espacial de acordo com a presente invenção.
[034] A aplicação de funções de transferência perceptuais, tais como Head-Related Transfer functions (HRTFs), de acordo com a Arte Anterior é esquematicamente ilustrada na Fig. 1. O dispositivo de síntese binaural 3 é mostrado para compreender seis unidades de HRTF 31, cada contendo a função de transferência para uma combinação específica de um canal de entrada e um canal de saída. No exemplo mostrado, há três canais de áudio ch1, ch2 e ch3, que pode corresponder aos canais l (esquerdo), c (centro), e r (direito). O primeiro canal chl é alimentado em duas unidades
de HRTF 31 contendo HRTF (1, L) e HRTF (1, R)
respectivamente . Neste exemplo, HRTF (1, L) é a função de
transferência relacionada a cabeça que determina a
contribuição do primeiro canal para o sinal binaural
esquerdo.
[035] Aqueles com habilidade na arte conhecerão
gravações podem ambas que HRTFs ser determinados fazendo (estéreo) regulares e gravações binaurais, e derivar uma função de transferência que representa a forma da gravação binaural relativa a gravação regular. Gravações binaurais são feitas usando dois microfones montados em uma cabeça humana de manequim, tal que o som gravado corresponde ao som capturado pelo ouvido humano e inclui qualquer influência devido a forma da cabeça e das orelhas, e mesmo a presença de
Petição 870190012174, de 05/02/2019, pág. 15/41
12/30 cabelo e ombros.
[036] Se o processamento de HRTF ocorre no domínio do tempo, os HRTFs são convolucionados com os (domínio do tempo) sinais de áudio dos canais. Tipicamente, contudo, os HRTFs são transformados para o domínio da freqüência, e as funções de transferência resultantes e o espectro de freqüência dos sinais de áudio são então multiplicados (unidades de transformada de Fourier e unidades de transformada de Fourier inversa não são mostradas na Fig. 1). Técnicas de Sobreposição-e-Adição (OLA) adequadas envolvendo sobreposição de quadros de tempo pode ser usado para acomodar HRTFs tendo um maior comprimento do que quadro de Transformada de Fourier Rápida (FFT).
[037] Após o processamento de HRTF pela unidade de HRTF 31 apropriada, os sinais esquerdo e direito resultantes são adicionados por um respectivo adicionador 32 para render o (domínio do tempo) sinal binaural esquerdo lb e o sinal binaural direito rb.
[038] Os dispositivos de síntese binaural 3 da Fig. 1 exemplares da Arte Anterior tem três canais de entrada. Sistemas de áudio presente hoje em dia, freqüentemente têm cinco ou seis canais, com é o caso nos assim chamados sistemas 5.1. Contudo, de modo a reduzir a quantidade de dados a serem transferidos e / ou armazenados, os múltiplos canais de áudio são tipicamente reduzidos ( feitos com mistura descendente ”) para um ou dois canais. Um número de parâmetros de sinal indicativo das propriedades e relações mútuas dos canais originais permitem uma expansão ( mistura ascendente ”) de um ou dois canais para o número original de canais. Um dispositivo codificador espacial 1
Petição 870190012174, de 05/02/2019, pág. 16/41
13/30 exemplar de acordo com a Arte Anterior é esquematicamente mostrada na Fig. 2.
[039] O dispositivo codificador espacial 1 compreende uma unidade (SE) de codificação espacial 11, uma unidade (DE) de decodificação espacial 12 e um de multiplexador (Mux) 13. A unidade de codificação espacial 11 recebe cinco canais de entrada de áudio lf (frontal esquerdo), lr (traseiro esquerdo), rf (frontal direito), rr (traseiro direito) e c (central). A unidade de codificação espacial 11 faz mistura descendente os cinco canais de entrada para produzir dois canais l (esquerdo) e r (direito), assim como parâmetros de sinal sistema de potência (é notado que a unidade de codificação espacial 11 pode produzir um canal único em vez de dois canais l e r). Na modalidade mostrada, onde cinco canais são feitos com mistura descendente para dois canais (uma assim chamada configuração de 5-2-5), os parâmetros de sinal sp podem, por exemplo, compreender:
Parâmetro Descrição
CPC1 Parâmetro de prognóstico / energia para conversão de 2 para 3
CPC2 Parâmetro de prognóstico / energia para conversão de 2 para 3
CLDi Diferença de nível frontal esquerdo versus
traseiro esquerdo
CLDr Diferença de nível frontal direito versus traseiro direito
ICCi Correlação esquerdo frontal esquerdo versus traseiro
ICCr Correlação frontal direito versus traseiro
direito
ICCf Parâmetro de correlação parâmetro conversão
de 2 para 3
CLDlfe Diferença de nível centro versus lfe (se
aplicável)
Petição 870190012174, de 05/02/2019, pág. 17/41
14/30 [040] E notado que lfe ” é um canal de extremidade frontal baixa (sub-woofer) opcional, e que os canais traseiro ” são também conhecidos como canais surround ”.
[041] Os dois canais feitos com mistura descendente l e r produzidos pela unidade de codificação espacial 11 são alimentados para a unidade (DE) de decodificação espacial 12, que tipicamente usa um tipo de codificação objetivada na redução da quantidade de dados. Assim sendo, os canais feitos com mistura descendente codificados l e r, e os parâmetros de sinal sistema de potência, são multiplexados pela unidade de multiplexador 13 para produzir uma seqüência de bs.
[042] Em uma modalidade alternativa (não mostrada), cinco (ou seis) canais são feitos com mistura descendente para um canal (mono) único (uma assim chamada configuração de 5-1-5), e os parâmetros de sinal sistema de potência podem, por exemplo, compreender:
Parâmetro Descrição
CPCfs Diferença de nível esquerdo versus traseiro
CPCfc Diferença de nível esquerdo versus centro
CLDf Diferença de nível frontal esquerdo versus frontal direito
CLDS Diferença de nível traseiro esquerdo versus direito traseiro
ICCfs
ICCfc
ICCf
ICCs
CLDlfe
Correlação frontal versus traseiro
Correlação frontal versus centro
Correlação frontal esquerdo frontal versus traseiro
Correlação direito traseiro esquerdo versus traseiro
Diferença de nível centro versus lfe (se
aplicável)___________________________________________ [043] Nesta modalidade alternativa, o canal de mistura descendente codificado s, assim como os parâmetros de
Petição 870190012174, de 05/02/2019, pág. 18/41
15/30 sinal sp, também são multiplexados pela unidade de multiplexador 13 para produzir uma seqüência de bits de saída bs.
[044] Se esta seqüência de bit bs foi para ser usada para produzir um par de canais binaurais, a abordagem da Arte Anterior seria para primeiro misturar ascendentemente os dois canais feitos de mistura descendente l e r (ou, alternativamente, o canal único feito com mistura descendente) para produzir os cinco ou seis canais originais, e então converte esses cinco ou seis canais em dois canais binaurais. Um exemplo desta abordagem da Arte Anterior é ilustrado na Fig. 3.
[045] O dispositivo decodificador espacial 2' de acordo com a Arte Anterior compreende uma unidade (Demux) de desmultiplexador 21', uma unidade de decodificação de misturar descendentemente 22', e uma unidade decodificadora espacial 23'. Um dispositivo de síntese binaural 3 é acoplado a unidade decodificadora espacial 23' do dispositivo decodificador espacial 2'.
[046] A unidade de desmultiplexador 21' recebe uma seqüência de bits bs, que pode ser idêntica à seqüência de bits bs da Fig. 2, e parâmetros de sinal de sp e dois canais feitos com mistura descendente codificados. Os parâmetros de sinal sp são enviados para a unidade decodificadora espacial 23', enquanto os canais feitos com mistura descendente codificados são primeiro decodificados pela unidade de decodificação de misturar descendentemente 22' para produzir os canais feitos com mistura descendente decodificados l e r. A unidade decodificadora espacial 23' essencialmente realiza as operações inversas da unidade de
Petição 870190012174, de 05/02/2019, pág. 19/41
16/30 codificação espacial 11 na Fig. 2 e emite cinco canais de áudio. Esses cinco canais de áudio são alimentados para o dispositivo de síntese binaural 3, que pode terminal uma estrutura similar ao dispositivo 3 da Fig. 1, mas com unidades de HRTF 31 adicionais para acomodar todos os cinco canais. Como no exemplo da Fig. 1, o dispositivo de síntese binaural 3 emite dois canais binaurais lb (binaural esquerdo) e rb (binaural direito).
[047] Uma estrutura exemplar da unidade decodificadora espacial 23' da Arte Anterior é mostrado na Fig. 4. A unidade 23' da Fig. 4 compreende uma unidade de misturar ascendentemente de dois para três 230', três unidades (SS) de síntese espacial 232' e três unidades (D) de desfazer correlação 239'. A unidade de misturar ascendentemente de dois para três 230' recebe os canais de feitos com mistura descendente l & r e os parâmetros de sinal sp, e produz três canais l, r e ce. Cada um desses canais é alimentado para uma unidade de desfazer correlação 239' que produz uma versão desfeita de correlação dos respectivos canais. Cada canal l, r e ce, sua respectiva versão desfeita de correlação, e parâmetros de sinal sp associados são alimentados para uma respectiva unidade (ou misturar ascendentemente) de síntese espacial 232'. A unidades de síntese espacial 232' recebendo o canal l, por exemplo, emite o sistema canais de saída lf (frontal esquerdo) e lr (traseiro esquerdo). As unidades de síntese espacial 232', tipicamente, efetuam uma multiplicação de matriz, os parâmetros da matriz sendo determinados pelos parâmetros de sinal sp.
[048] É notado que no exemplo da Fig. 4, seis
Petição 870190012174, de 05/02/2019, pág. 20/41
17/30 canais de saída são produzidos. Em algumas modalidades, a terceira unidade de desfazer correlação 239' e a terceira unidade de síntese espacial 232' pode ser omitida, assim sendo, produzindo somente cinco canais de saída. Em todas as modalidades, contudo, a unidade de síntese espacial 23' da Arte Anterior produzirá mais do que dois canais de saída. É ainda notado que qualquer unidade de transformada (QMF) e unidade de transformada (QMF) inversa foram omitidas do exemplo meramente ilustrativo da Fig. 4 por de questão de clareza da ilustração. Em modalidades reais, a decodificação espacial seria realizada em um domínio de transformada, tais como o domínio de QMF.
[049] A configuração da Fig. 3 não é eficiente. O dispositivo decodificador espacial 2' converte dois canais feitos com mistura descendente (l e r) em cinco canais (intermediários) feitos com mistura ascendente, enquanto o dispositivo de síntese binaural 3 então reduz os cinco canais feitos com mistura ascendente para dois canais binaurais. Em adição, a mistura ascendente na unidade decodificadora espacial 23' é tipicamente realizada em um domínio de sub banda, tal com o domínio de QMF (Filtro espelho em quadratura). Contudo, o dispositivo de síntese binaural 3 tipicamente processa sinais no domínio da freqüência (isto, transformada de Fourier). Como esses dois domínios não são idênticos, o dispositivo decodificador espacial 2' primeiro transforma os sinais dos canais de feitos com mistura descendente no domínio de QMF, processa os sinais transformados, e então transforma os sinais feitos com mistura ascendente de volta para o domínio do tempo. Subseqüentemente, o dispositivo de síntese binaural 3
Petição 870190012174, de 05/02/2019, pág. 21/41
18/30 transforma todos (cinco no presente exemplo) esses sinais feitos com mistura ascendente no domínio da freqüência, processa os sinais transformado, e então transforma imagem sinais binaurais de volta no domínio do tempo. Será claro que o esforço computacional envolvido é considerável, e que um processamento de sinal mais eficiente é desejado, em particular quando estéreo processamento é para ser realizado em dispositivos de mão.
[050] A presente invenção fornece um processamento muito mais eficiente integrando o dispositivo de síntese binaural no dispositivo decodificador espacial e eficientemente realizando o processamento binaural no parâmetro. Um exemplo de uma unidade decodificadora espacial é esquematicamente mostrado na Fig. 5, enquanto um dispositivo decodificador binaural e espacial combinado de acordo com a presente invenção (referenciada como dispositivo decodificador espacial por questão de brevidade) é ilustrado na Fig. 6 .
[051] A unidade decodificadora espacial 23 mostrada na Fig. 5 compreende unidades de transformada 231, um unidade (SS) de síntese espacial 232, unidades de transformada inversa 233, um unidade (PC) de conversão de parâmetro 234 e uma unidade (Mem) de memória 235. No exemplo da Fig. 5, a unidade decodificadora espacial 23 compreende duas unidades de transformada 231, mas em outros exemplos somente uma única unidade de transformada 231 (como na Fig. 6), ou mais do que duas unidades de transformada 231 podem estar presente, dependendo do número de canais feitos com mistura descendente.
[052] Cada uma das unidades de transformada 231
Petição 870190012174, de 05/02/2019, pág. 22/41
19/30 recebe um canal de mistura descendente l e r respectivamente (ver também Fig. 3) . Cada unidade de transformada 231 é arranjada para transformar o (sinal do) respectivo canal em um domínio de transformada ou sub banda adequada, no presente exemplo, o com de QMF. Os canais L e R transformados de QMF, são alimentados para a unidade de síntese espacial 232 que preferencialmente realiza uma operação de matriz nos sinais dos canais L e R para produzir os canais Largura de banda e RB binaural do domínio da transformada. As unidades de transformada inversa 233 realizam a transformada inversa, no presente exemplo, uma transformada de QMF inversa, para produzir os canais lb e rb binaural do domínio do tempo.
[053] A unidade de síntese espacial 232 pode ser similar ou idêntico a 'unidade de síntese espacial 232' da Arte Anterior da Fig. 4. Contudo, os parâmetros usados por esta unidade são diferentes daqueles usados na Arte Anterior. Mais em particular, a unidade de conversão de parâmetro 234 converte os parâmetros de sinal sp convencionais em parâmetros binaurais usando parâmetros de HRTF hp armazenado na unidade de memória 235. Estes parâmetros HRTF podem compreender:
[054] - um nível medi por banda de freqüência para a função de transferência esquerda com uma função de azimute (angulo em plano horizontal), elevação (angulo em um plano vertical), e distância, [055] - um nível médio por banda de freqüência á a função de transferência direita como uma função de azimute, elevação e distância, e [056] - uma diferença de fase ou tempo média por banda de freqüência á a função de transferência direita
Petição 870190012174, de 05/02/2019, pág. 23/41
20/30 como uma função de azimute, elevação e distância.
[057] Em adição, os parâmetros a seguir podem ser incluídos:
[058] - uma medida de coerência das funções de transferência de esquerda e direita por banda de freqüência de HRTF com uma função de azimute, elevação e distância, e / ou [059] - parâmetros de fase absoluta e/ou tempo para as funções de transferência de esquerda e direita como uma função de azimute, elevação e distância.
[060] Os parâmetros de HRTF reais usados podem depender da modalidade particular.
[061] A unidade de síntese espacial 232 pode determinar os canais Lb e Rb binaural usando as seguintes fórmulas:
Lb[k, m] = H. V 'L[jt,»!]·
K A ^22
[062] onde o índice k denota o índice de banda (freqüência) híbrido de QMF e o índice m denota o índice (tempo) de pedaço de QMF. Os parâmetros h±j da matriz Hk são determinados posição parâmetros binaurais (bp na Fig. 5). Como indicado k, a matriz Hk pode depender da banda híbrida de QMF. Em um exemplo, a unidade de conversão de parâmetro (234 na Fig. 5) produz os parâmetros binaurais que são então convertidos nos parâmetros de matriz h±j pela unidade de síntese espacial 232. Em outro exemplo, os parâmetros de matriz são idênticos aos parâmetros binaurais produzidos pela unidade de conversão de parâmetro (234 na Fig. 5) e podem ser diretamente aplicados pela unidade de síntese espacial 232 sem serem convertidos.
Petição 870190012174, de 05/02/2019, pág. 24/41
21/30 [063]
Os parâmetros h±j da mátria
Hk podem ser determinados na seguinte maneira no caso de dois canais feitos com mistura descendente (configuração unidade decodificador espacial da
ARte Anterior da
Fig. 4, uma unidade decodificadora de 2 para 3 230' converte os dois canais (entrada) feitos com mistura descendente em três saída 1 entrada canais 1, r e ce (será entendido que r, tipicamente não serão idênticos e rede, por esta razão os aos canais canais os canais de entrada, de de na descrição a seguir, serão nomeados lo [064]
De acordo com um exemplo, a unidade de conversão de parâmetro (234 nas Figs.
utilizar os parâmetros da função de transferência perceptual onde a contribuição de somente três canais somente (e.g., 1, traseiros são grupados juntos para melhorar a eficiência.
[065]
A operação da unidade de misturar ascendentemente de dois para três 230' pode ser descrita pela operação da matriz a seguir:
Ύ X V
r Wi, ™2Ϊ Λ.
c «31.
[066] (2) com entradas de matriz mij dependente dos parâmetros espaciais.
A relação de parâmetros espaciais e entradas de matriz é idêntica aquelas de um decodificador surround de
MPEG de
5.1. Para cada um dos três sinais resultantes o efeito é determinado da função de transferência perceptual (no presente exemplo: HRTF)
Petição 870190012174, de 05/02/2019, pág. 25/41
22/30 parâmetros que correspondem a posição (percebida) desejada dessas fontes de som. Para o canal central (c), os parâmetros espaciais da posição de fonte de som podem ser diretamente aplicados, resultando em distribuidor sinais de saída por centro, 1b (c) e rB(c):
w
λΟ). L — _C(c)e-JÜ(í)/í
[067] Como pode ser observado da equação (3), o processamento de parâmetro HRTF consiste de uma multiplicação do sinal com os níveis de potência médios Pi e Pr correspondendo a posição de fonte de som do canal central, enquanto a diferença de fase é distribuída simetricamente. Este processo é efetuado independentemente para cada banda de QMF, usando de um lado, o mapeamento dos parâmetros de HRTF para o banco de filtro de QMF, e no outro lado, mapeando dos parâmetros espaciais para a banda de QMF.
[068] Para o canal esquerdo (1) , os parâmetros de HRTF dos canais frontal esquerdo e traseiro esquerdo são combinados em uma única contribuição, usando os pesos w±f e Wrf. Os parâmetros compostos resultantes simulam o efeito de ambos, os canais frontais e traseiros em um senso estatístico. As seguintes equações são usadas para gerar o par de saída binaural (1b, rb) para o canal esquerdo:
M0 7M0’
_M0. /0(0.
com ¢4) (5)
Petição 870190012174, de 05/02/2019, pág. 26/41
23/30
CLD
[070] (8)
Em modo similar, a saída binaural para o canal direito é obtida de acordo com:
‘W W
.w.
com
P).
(10) ου (12) (13).
W,(r) = ?/() _ ]0Wiç ~ 1 + 10tWr;|° =_____!_____ + [θση'/|0 [071] É notado que, em ambos os casos, o termo de modificação de fase é aplicado à traseira contra lateral em ambos os casos. Ainda mais, já que o sistema auditivo humano é largamente não sensitivo a fase binaural para freqüências acima de aproximadamente 2kHz, o termo de modificação de fase somente precisa ser aplicado em região de
Petição 870190012174, de 05/02/2019, pág. 27/41
24/30 freqüência baixa. Então para o restante do intervalo de freqüência, basta processamento real valorizado (assumindo mij com real valorizado) .
[072] É ainda notado que as equações acima assumem adição incoerente dos sinais filtrados (HRTF) de lf e lr. Uma possível extensão seria incluir os parâmetros (ICC) de Coerência Inter-Canal transmitidos de lf e lr (e de lf e rr) nas equações, bem com para ter em conta para correlação frontal / traseiro.
[073] Todos os passos de processamento acima podem ser combinados no domínio do parâmetro para resultar em uma única matriz estação de comunicação móvel 2 x 2 de domínio de sinal:
V _ ' J3' ^12 V
Λ. /*21 ^22 _ Λ.
com
= ^1^49 + ^^40+^^(0 (15a)
Kl = (0 + W22 lfi (0 + 111 (0 (15b)
= ^11^49 + ^21^40 + ^^40 (15c)
*22 = ^,2^49 + ^22^40 + *31^40 (15d).
[074] A presente invenção essencialmente processa a informação binaural (isto é HRTF) no domínio do para, em vez de no domínio da freqüência ou do tempo como na Arte Anterior. Nesta maneira, economia computacional significante pode ser obtida.
[075] 0 dispositivo decodificador espacial 2, de acordo com a presente invenção mostrada meramente por meio de exemplo não limitante na Fig. 6 compreende uma unidade (Demux) de desmultiplexação 21, uma unidade de decodificação
Petição 870190012174, de 05/02/2019, pág. 28/41
25/30 de misturar descendentemente 22, e um unidade de decodificação espacial / binaural unidade decodificadora espacial 23. A unidade de desmultiplexação 21 e a unidade de decodificação de misturar descendentemente 22 podem ser similar a unidade de desmultiplexação 21' e unidade de decodificação de misturar descendentemente 22' da Arte anterior mostrada na Fig. 3. A unidade decodificadora espacial 23 da Fig. 6 é idêntica a unidade decodificadora espacial 23 da Fig. 5, com a exceção do número de canais feitos com mistura descendente e unidades de transformada associadas. Como a unidade decodificadora espacial da Fig. 6 é arranjada parâmetro um canal de mistura descendente único s, somente uma unidade de transformada 231 única é fornecida enquanto uma unidade (D) de desfazer correlação 239 foi adicionada para produzir uma versão desfeita de correlação D do (domínio da transformada) sinal feito com mistura descendente S. Os parâmetros binaurais bp produzido pela unidade de conversão de parâmetro 234, tipicamente difere daquele na modalidade da Fig. 5, já que os parâmetros de sinal sp associados com um canal de mistura descendente único s, tipicamente difere daquele associado com dois canais feitos com mistura descendente.
[076] Na configuração da Fig. 6, a entrada do decodificador binaural compreende um sinal de entrada mono s, acompanhado por parâmetros espaciais sp. A unidade de síntese binaural gera um sinal de saída estéreo com propriedades estatísticas que se aproximam daquelas propriedades que resultariam do processamento de HRTF da entrada original 5.1, que pode ser descrito por:
Petição 870190012174, de 05/02/2019, pág. 29/41
26/30 lh =Hi + )®rf + Hi(lr)®Ir + Hí(Rr)®RrkHi(e)®c (16) r;. = //r (//) ®lf + IIf (rf)®rf + IIt(ir)®lr +II t(rr) ®rr + II f (é)®c (17) [077] Dado os parâmetros espaciais que descrevem as propriedades estatísticas e inter-relações dos canais lf, rf, lrr, rr e c, e os parâmetros das respostas de impulso de HRTF, é possível estimar as propriedades estatísticas (isto é, uma aproximação dos parâmetros binaurais) do par de saída binaural lb, rb da mesma forma. Mais, especificamente, a energia média (para cada canal), a diferença de fase média, e a coerência podem ser estimadas e subseqüentemente re-instaladas por meio de desfazer correlação e operação de matriz do sinal de entrada mono.
[078] Os parâmetros binaurais compreendem uma (relativa) mudança de nível para cada um dos dois canais de saída binaurais (e então define um parâmetro de Diferença de Nível de Canal) , uma (média) diferença de fase e uma medida de coerência (por transformada no domínio do tempo / freqüência).
[079] Como um primeiro passo, as potências relativas (com relação a potência do sinal de entrada mono) dos cinco (ou seis) sinais (5.1) de canal são computados usando os parâmetros de CLD transmitidos. A potência relativa do canal frontal esquerdo é dada por:
σ* -r.íCLD^CLD^ÇCLD,) (18), com η (CLD) =
(19).
Petição 870190012174, de 05/02/2019, pág. 30/41
27/30 r2(CLD) = 1 + 1οα,ϋ.Ίθ (20).
[080] Similarmente, as potências relativas de outros canais são dadas por:
d/ =r,(CLDar|(CLDfcy2(CLDr)(21a) rt>r/CLDJr2(CLDfc)(21b) o>r2(CLDftX(CLD,)(21c)
C^ÍCLDJ^CLDJ (21 d) [081] 0 valor esperado da potência relativa Cl2 do canal de saída binaural (com relação ao canal de entrada mono), o valor esperado da potência relativa cr2 do canal de saída binaural direita, e o valor esperado do produto cruzado LbRb* pode então ser calculado. A coerência da saída binaural
(ICCb) é então dada por:
ICC^ |(m;)| (22)
e o angulo de faze médio (IODb) é dado por:
MV = arg((LX)) (23)
[082] A diferença de nível de canal (CLDB) da
saída binaural é dada por:
CLD, =,0iog(S) (24)
[083] Finalmente, o ganho (linear) global da
saída binaural comparado com a entrada montante, gs, é dado
por:
S B \ (25)
[084] Os coeficientes de matriz requerido para
Petição 870190012174, de 05/02/2019, pág. 31/41
28/30 re-instalar os parâmetros de IPDb, CLDb, ICCb e gs na matriz binaural são simplesmente obtidos de um decodificador estéreo paramétrico convencional, estendido com ganhos globais gs:
6,, — Sbcl + β) cxpQTPD# / 2)(26a) í = Sbc/.senfa + β) expt/IPD Λ / 2) (2 6b) cos(-<z + PJexpf-jTPD^ /2)(26c) ^2 = g^senC-a + β )cxp(-y[PDfl / 2)(26d) com α =0.5arc«>s(ICCB)(27) = arctan (28)
[085] (29) (30)
Modalidades adicionais da unidade decodificadora espacial da presente invenção pode conter uma unidade de reverberação.
Foi encontrado que adicionando reverberação melhora a distância percebida quando som binaural é produzido.
Por esta razão, unidade decodificadora espacial da Fig. 7 é fornecida com uma unidade de reverberação de estéreo 237 conectada em paralelo com as unidade de síntese espacial 232. A unidade de reverberação de estéreo 237 da Fig. 7 recebe o sinal S feito com mistura descendente único do domínio da transformada de QMF e emite dois sinais de reverberação, que são adicionados aos sinais binaurais de domínio da transformada (canais LB e
Petição 870190012174, de 05/02/2019, pág. 32/41
29/30
LR na Fig. 6) através das unidades de adição 238. Os sinais combinados são então transformados inversamente pelas unidades de transformada inversa 233 antes de serem emitidos.
[086] Na moda da Fig. 8, a unidade de reverberação de estéreo 237 é arranjada para produzir uma reverberação no domínio do tempo e recebe o sinal s feito com mistura descendente único no domínio do tempo. A unidade de reverberação de estéreo 237 emite sinais de reverberação no domínio do tempo, que são adicionados aos sinais no domínio do tempo dos canais binaurais lb e rb através das unidades de adição 238. Qualquer modalidade fornece uma reverberação adequada.
[087] A presente invenção adicionalmente fornece um dispositivo de consumidor, tal com um dispositivo de consumidor de mão, e um sistema de áudio compreendendo uma unidade decodificadora espacial ou dispositivo decodificador espacial como definido acima. O dispositivo de consumidor de mão pode ser constituído por um tocador de MP3 ou dispositivo similar. Um dispositivo de consumidor é esquematicamente ilustrado na Fig. 9. O dispositivo de consumidor 50 é mostrado para compreender um dispositivo decodificador espacial 2 de acordo com a presente invenção (ver Fig. 6).
[088] A presente invenção é baseada na introspecção que a complexidade computacional de um dispositivo decodificador espacial combinado e um dispositivo de síntese modificando binaural pode ser significantemente reduzida os parâmetros espaciais de acordo com a informação binaural.
Isto permite ao dispositivo decodificador realizar decodificação espacial e processamento de função de transferência perceptual efetivamente na mesma
Petição 870190012174, de 05/02/2019, pág. 33/41
30/30 operação de processamento de sinal, enquanto evitando a introdução de quaisquer artefatos.
[089] É notado que quaisquer termos usados neste documento não devem ser interpretados a fim de limitar o escopo da presente invenção. Em particular, as palavras compreende ” e compreendendo ” não são significativas para excluir quaisquer elementos não especificamente colocados. Elementos (circuito) único podem ser substituídos por elementos (circuito) múltiplos ou com seus equivalentes.
[090] Deve ser entendido por aqueles com habilidade na arte que a presente invenção não é limitada as modalidades ilustradas acima e que muitas modificações e adições podem ser feitas sem fugir do escopo da invenção como definida nas reivindicações anexas.

Claims (12)

  1. REIVINDICAÇÕES
    1. UNIDADE DECODIFICADORA ESPACIAL (23) para produzir um par de canais de saída binaurais (lb, rb) usando parâmetros espaciais (sp) e um único canal de entrada de áudio (s), caracterizada por compreender:
    - uma unidade de conversão de parâmetro (234) para converter os parâmetros espaciais (sp) em parâmetros binaurais (bp) usando funções de transferência perceptuais parametrizadas (hp), os parâmetros binaurais dependendo tanto dos parâmetros espaciais quanto das funções de transferência perceptuais parametrizadas;
    - uma única unidade de transformada (231) para transformar o único canal de entrada de áudio (s) em um canal de áudio transformado (S);
    - uma unidade de desfazer correlação (239) para descorrelacionar o canal de áudio transformado (S) para gerar um sinal descorrelacionado transformado (D);
    - uma unidade de síntese espacial (232) para sintetizar um par de canais binaurais transformados (Lb, Rb) aplicando os parâmetros binaurais (bp) ao canal de áudio transformado (S) e ao sinal descorrelacionado transformado (D); e
    - um par de unidades de transformada inversa (233) para inversamente transformar os canais binaurais transformados (Lb, Rb) no par de canais de saída binaurais (lb, rb).
  2. 2. UNIDADE, de acordo com a reivindicação 1, caracterizada pela unidade de conversão de parâmetro (234) ser arranjada para combinar, no domínio do parâmetro, de modo a determinar os parâmetros binaurais, todas contribuições de
    Petição 870190012174, de 05/02/2019, pág. 35/41
    2/4 função de transferência perceptual, que os canais de entrada de áudio fariam para os canais binaurais.
  3. 3. UNIDADE, de acordo com a reivindicação 1, caracterizada pela unidade de conversão de parâmetro (234) ser arranjada para processar parâmetros de nível de canal (CLD), de coerência de canal (ICC) e/ou de fase (IPD).
  4. 4. UNIDADE, de acordo com a reivindicação 1, caracterizada por compreender uma unidade de reverberação de estéreo (237) arranjada operar no domínio do tempo.
  5. 5. UNIDADE, de acordo com a reivindicação 1, caracterizada por ainda compreender uma unidade de reverberação de estéreo (237) arranjada operar em um domínio de transformada ou domínio de sub banda, tal como o domínio de QMF.
  6. 6. UNIDADE, de acordo com a reivindicação 1, caracterizada pela unidade de conversão de parâmetro (234) compreender:
    - meio para determinar potências relativas para uma pluralidade de canais de áudio virtuais em resposta aos parâmetros espaciais (sp) e ao único canal de entrada de áudio (s);
    - meio para estimar propriedades estatísticas dos canais de saída binaurais (lb, rb) em resposta às potências relativas para a pluralidade de canais de áudio virtuais; e
    - meio para determinar os parâmetros binaurais (bp) em resposta às propriedades estatísticas estimadas dos canais de saída binaurais (lb, rb).
  7. 7. UNIDADE, de acordo com a reivindicação 6, caracterizada pelas propriedades estatísticas compreenderem uma energia média dos canais binaurais transformados (Lb,
    Petição 870190012174, de 05/02/2019, pág. 36/41
    3/4
    Rb), uma diferença de fase média dos canais binaurais transformados (Lb, Rb) e uma coerência dos canais binaurais transformados (Lb, Rb).
  8. 8. DISPOSITIVO DECODIFICADOR ESPACIAL (2) para produzir um par de canais de saída binaurais (lb, rb) a partir de uma sequência de bits de entrada (bs), caracterizado por compreender:
    - uma unidade de desmultiplexação (21), para desmultiplexar a sequência de bit de entrada em um único canal de mistura descendente e parâmetros espaciais (sp),
    - uma unidade decodificadora de mistura descendente (22) para decodificar o único canal de mistura descendente (s), e
    - uma unidade decodificadora espacial (23) , conforme definida na reivindicação 1.
  9. 9. DISPOSITIVO, de acordo com a reivindicação 8, caracterizado pela unidade decodificadora espacial (23) compreender uma unidade de reverberação (237).
  10. 10. SISTEMA DE ÁUDIO, caracterizado por compreender uma unidade decodificadora espacial (23), conforme definida na reivindicação 1 e/ou um dispositivo decodificador espacial (2), conforme definido na reivindicação 8.
  11. 11. DISPOSITIVO DE CONSUMIDOR, caracterizado por compreender uma unidade decodificadora espacial (23), conforme definida na reivindicação 1 e/ou um dispositivo decodificador espacial (2), conforme definido na reivindicação 8.
  12. 12. MÉTODO PARA PRODUZIR UM PAR DE CANAIS DE SAÍDA BINAURAIS (lb, rb) usando parâmetros espaciais (sp) e um único canal de entrada de áudio (s), caracterizado por
    Petição 870190012174, de 05/02/2019, pág. 37/41
    4/4 compreender os passos de:
    - converter os parâmetros espaciais (sp) em parâmetros binaurais (bp) usando as funções de transferência perceptuais parametrizadas (hp), os parâmetros binaurais dependendo tanto dos parâmetros espaciais quanto das funções de transferência perceptuais parametrizadas;
    - transformar o único canal de entrada de áudio (s) em um canal de áudio transformado (S);
    - descorrelacionar o canal de áudio transformado (S) para gerar um sinal descorrelacionado transformado (D);
    - sintetizar um par de canais binaurais transformados (Lb, Rb) aplicando os parâmetros binaurais (bp) ao canal de áudio transformado (S) e ao sinal descorrelacionado transformado (D); e
    - inversamente transformar os canais binaurais transformados (Lb, Rb) no par de canais de saída binaurais (lb, rb).
BRPI0615899-4A 2005-09-13 2006-08-31 Unidade decodificadora espacial, dispositivo decodificador espacial, sistema de áudio, dispositivo de consumidor, e método para produzir um par de canais de saída binaurais BRPI0615899B1 (pt)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
EP05108405 2005-09-13
EP05108405.1 2005-09-13
EP06110231 2006-02-21
EP06110231.5 2006-02-21
PCT/IB2006/053040 WO2007031896A1 (en) 2005-09-13 2006-08-31 Audio coding

Publications (2)

Publication Number Publication Date
BRPI0615899A2 BRPI0615899A2 (pt) 2011-05-31
BRPI0615899B1 true BRPI0615899B1 (pt) 2019-07-09

Family

ID=37682599

Family Applications (1)

Application Number Title Priority Date Filing Date
BRPI0615899-4A BRPI0615899B1 (pt) 2005-09-13 2006-08-31 Unidade decodificadora espacial, dispositivo decodificador espacial, sistema de áudio, dispositivo de consumidor, e método para produzir um par de canais de saída binaurais

Country Status (9)

Country Link
US (1) US8654983B2 (pt)
EP (1) EP1927266B1 (pt)
JP (2) JP5587551B2 (pt)
KR (2) KR101512995B1 (pt)
CN (1) CN101263742B (pt)
BR (1) BRPI0615899B1 (pt)
RU (1) RU2419249C2 (pt)
TW (1) TWI415111B (pt)
WO (1) WO2007031896A1 (pt)

Families Citing this family (56)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2007032647A1 (en) 2005-09-14 2007-03-22 Lg Electronics Inc. Method and apparatus for decoding an audio signal
EP1969901A2 (en) * 2006-01-05 2008-09-17 Telefonaktiebolaget LM Ericsson (publ) Personalized decoding of multi-channel surround sound
US9009057B2 (en) * 2006-02-21 2015-04-14 Koninklijke Philips N.V. Audio encoding and decoding to generate binaural virtual spatial signals
US7965848B2 (en) * 2006-03-29 2011-06-21 Dolby International Ab Reduced number of channels decoding
US8374365B2 (en) 2006-05-17 2013-02-12 Creative Technology Ltd Spatial audio analysis and synthesis for binaural reproduction and format conversion
US8379868B2 (en) 2006-05-17 2013-02-19 Creative Technology Ltd Spatial audio coding based on universal spatial cues
US8712061B2 (en) 2006-05-17 2014-04-29 Creative Technology Ltd Phase-amplitude 3-D stereo encoder and decoder
WO2009001277A1 (en) * 2007-06-26 2008-12-31 Koninklijke Philips Electronics N.V. A binaural object-oriented audio decoder
CN101884065B (zh) * 2007-10-03 2013-07-10 创新科技有限公司 用于双耳再现和格式转换的空间音频分析和合成的方法
WO2009046460A2 (en) * 2007-10-04 2009-04-09 Creative Technology Ltd Phase-amplitude 3-d stereo encoder and decoder
WO2009046909A1 (en) 2007-10-09 2009-04-16 Koninklijke Philips Electronics N.V. Method and apparatus for generating a binaural audio signal
DE102007051308B4 (de) 2007-10-26 2013-05-16 Siemens Medical Instruments Pte. Ltd. Verfahren zum Verarbeiten eines Mehrkanalaudiosignals für ein binaurales Hörgerätesystem und entsprechendes Hörgerätesystem
CN101188878B (zh) * 2007-12-05 2010-06-02 武汉大学 立体声音频信号的空间参数量化及熵编码方法和所用***
US8639368B2 (en) * 2008-07-15 2014-01-28 Lg Electronics Inc. Method and an apparatus for processing an audio signal
KR20100035121A (ko) * 2008-09-25 2010-04-02 엘지전자 주식회사 신호 처리 방법 및 이의 장치
EP2169664A3 (en) 2008-09-25 2010-04-07 LG Electronics Inc. A method and an apparatus for processing a signal
EP2169666B1 (en) 2008-09-25 2015-07-15 Lg Electronics Inc. A method and an apparatus for processing a signal
JP5326465B2 (ja) * 2008-09-26 2013-10-30 富士通株式会社 オーディオ復号方法、装置、及びプログラム
EP2175670A1 (en) * 2008-10-07 2010-04-14 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Binaural rendering of a multi-channel audio signal
JP5325988B2 (ja) * 2008-10-14 2013-10-23 ヴェーデクス・アクティーセルスカプ 補聴器システムにおいてバイノーラル・ステレオにレンダリングする方法および補聴器システム
KR101499785B1 (ko) 2008-10-23 2015-03-09 삼성전자주식회사 모바일 디바이스를 위한 오디오 처리 장치 및 그 방법
JP5309944B2 (ja) * 2008-12-11 2013-10-09 富士通株式会社 オーディオ復号装置、方法、及びプログラム
KR101342425B1 (ko) * 2008-12-19 2013-12-17 돌비 인터네셔널 에이비 다중-채널의 다운믹싱된 오디오 입력 신호에 리버브를 적용하기 위한 방법 및 다중-채널의 다운믹싱된 오디오 입력 신호에 리버브를 적용하도록 구성된 리버브레이터
EP2380364B1 (en) * 2008-12-22 2012-10-17 Koninklijke Philips Electronics N.V. Generating an output signal by send effect processing
CN101521012B (zh) * 2009-04-08 2011-12-28 武汉大学 Mdct域信号能量与相位补偿方法及其装置
EP2489040A1 (fr) * 2009-10-16 2012-08-22 France Telecom Decodage parametrique stereo optimise
KR20110072650A (ko) * 2009-12-23 2011-06-29 삼성전자주식회사 오디오 장치 및 이의 오디오 신호 전송 방법, 그리고 오디오 시스템
TWI486068B (zh) 2010-09-13 2015-05-21 Htc Corp 行動電子裝置與其聲音播放方法
KR101697550B1 (ko) * 2010-09-16 2017-02-02 삼성전자주식회사 멀티채널 오디오 대역폭 확장 장치 및 방법
CN102438188A (zh) * 2010-09-29 2012-05-02 宏达国际电子股份有限公司 移动电子装置与其声音播放方法
FR2976759B1 (fr) * 2011-06-16 2013-08-09 Jean Luc Haurais Procede de traitement d'un signal audio pour une restitution amelioree.
EP2727380B1 (en) 2011-07-01 2020-03-11 Dolby Laboratories Licensing Corporation Upmixing object based audio
EP2645748A1 (en) * 2012-03-28 2013-10-02 Thomson Licensing Method and apparatus for decoding stereo loudspeaker signals from a higher-order Ambisonics audio signal
KR20130137903A (ko) 2012-06-08 2013-12-18 삼성전자주식회사 음향 출력 장치, 오디오 처리 장치, 음향 출력 방법 및 오디오 처리 방법
US9601122B2 (en) 2012-06-14 2017-03-21 Dolby International Ab Smooth configuration switching for multichannel audio
CN104904239B (zh) 2013-01-15 2018-06-01 皇家飞利浦有限公司 双耳音频处理
KR102150955B1 (ko) 2013-04-19 2020-09-02 한국전자통신연구원 다채널 오디오 신호 처리 장치 및 방법
CN108806704B (zh) 2013-04-19 2023-06-06 韩国电子通信研究院 多信道音频信号处理装置及方法
CN110223702B (zh) * 2013-05-24 2023-04-11 杜比国际公司 音频解码***和重构方法
FR3009158A1 (fr) * 2013-07-24 2015-01-30 Orange Spatialisation sonore avec effet de salle
US9319819B2 (en) 2013-07-25 2016-04-19 Etri Binaural rendering method and apparatus for decoding multi channel audio
CN105531761B (zh) * 2013-09-12 2019-04-30 杜比国际公司 音频解码***和音频编码***
US9961469B2 (en) 2013-09-17 2018-05-01 Wilus Institute Of Standards And Technology Inc. Method and device for audio signal processing
KR101804744B1 (ko) 2013-10-22 2017-12-06 연세대학교 산학협력단 오디오 신호 처리 방법 및 장치
EP4246513A3 (en) * 2013-12-23 2023-12-13 Wilus Institute of Standards and Technology Inc. Audio signal processing method and parameterization device for same
EP3122073B1 (en) 2014-03-19 2023-12-20 Wilus Institute of Standards and Technology Inc. Audio signal processing method and apparatus
CN106165452B (zh) 2014-04-02 2018-08-21 韦勒斯标准与技术协会公司 音频信号处理方法和设备
US9462406B2 (en) 2014-07-17 2016-10-04 Nokia Technologies Oy Method and apparatus for facilitating spatial audio capture with multiple devices
BR112017003218B1 (pt) * 2014-12-12 2021-12-28 Huawei Technologies Co., Ltd. Aparelho de processamento de sinal para aprimorar um componente de voz dentro de um sinal de áudio multicanal
WO2016116160A1 (en) 2015-01-22 2016-07-28 Sonova Ag Hearing assistance system
EP4002888A1 (en) 2015-02-12 2022-05-25 Dolby Laboratories Licensing Corporation Headphone virtualization
KR101964106B1 (ko) 2015-02-16 2019-04-01 후아웨이 테크놀러지 컴퍼니 리미티드 오디오 신호 처리 장치 및 오디오 신호를 필터링하는 방법
CA3219512A1 (en) 2015-08-25 2017-03-02 Dolby International Ab Audio encoding and decoding using presentation transform parameters
EA201992556A1 (ru) 2015-10-08 2021-03-31 Долби Лэборетериз Лайсенсинг Корпорейшн Аудиодекодер и способ декодирования
CN106199187B (zh) * 2016-07-18 2018-11-13 电子科技大学 一种多音信号相对相位的测试方法
CN109195063B (zh) * 2018-08-24 2020-04-17 重庆清文科技有限公司 一种立体声发生***及方法

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6111958A (en) * 1997-03-21 2000-08-29 Euphonics, Incorporated Audio spatial enhancement apparatus and methods
JP4499206B2 (ja) * 1998-10-30 2010-07-07 ソニー株式会社 オーディオ処理装置及びオーディオ再生方法
KR100416757B1 (ko) * 1999-06-10 2004-01-31 삼성전자주식회사 위치 조절이 가능한 가상 음상을 이용한 스피커 재생용 다채널오디오 재생 장치 및 방법
JP2001057699A (ja) * 1999-06-11 2001-02-27 Pioneer Electronic Corp オーディオ装置
FI113147B (fi) * 2000-09-29 2004-02-27 Nokia Corp Menetelmä ja signaalinkäsittelylaite stereosignaalien muuntamiseksi kuulokekuuntelua varten
US7116787B2 (en) * 2001-05-04 2006-10-03 Agere Systems Inc. Perceptual synthesis of auditory scenes
US7583805B2 (en) 2004-02-12 2009-09-01 Agere Systems Inc. Late reverberation-based synthesis of auditory scenes
US20030035553A1 (en) * 2001-08-10 2003-02-20 Frank Baumgarte Backwards-compatible perceptual coding of spatial cues
JP3435156B2 (ja) * 2001-07-19 2003-08-11 松下電器産業株式会社 音像定位装置
WO2004028204A2 (en) * 2002-09-23 2004-04-01 Koninklijke Philips Electronics N.V. Generation of a sound signal
JP2004128854A (ja) * 2002-10-02 2004-04-22 Matsushita Electric Ind Co Ltd 音響再生装置
US20040234067A1 (en) * 2003-05-19 2004-11-25 Acoustic Technologies, Inc. Distributed VAD control system for telephone
JP4124702B2 (ja) * 2003-06-11 2008-07-23 日本放送協会 立体音響信号符号化装置、立体音響信号符号化方法および立体音響信号符号化プログラム
JP4271588B2 (ja) * 2004-01-08 2009-06-03 シャープ株式会社 ディジタルデータの符号化方法および符号化装置
KR101183862B1 (ko) * 2004-04-05 2012-09-20 코닌클리케 필립스 일렉트로닉스 엔.브이. 스테레오 신호를 처리하기 위한 방법 및 디바이스, 인코더 장치, 디코더 장치 및 오디오 시스템
JP2005352396A (ja) * 2004-06-14 2005-12-22 Matsushita Electric Ind Co Ltd 音響信号符号化装置および音響信号復号装置
KR101120911B1 (ko) * 2004-07-02 2012-02-27 파나소닉 주식회사 음성신호 복호화 장치 및 음성신호 부호화 장치
PL1769655T3 (pl) * 2004-07-14 2012-05-31 Koninl Philips Electronics Nv Sposób, urządzenie, urządzenie kodujące, urządzenie dekodujące i system audio
WO2006011367A1 (ja) * 2004-07-30 2006-02-02 Matsushita Electric Industrial Co., Ltd. オーディオ信号符号化装置および復号化装置

Also Published As

Publication number Publication date
JP5698189B2 (ja) 2015-04-08
RU2419249C2 (ru) 2011-05-20
CN101263742B (zh) 2014-12-17
JP2009508157A (ja) 2009-02-26
TWI415111B (zh) 2013-11-11
US8654983B2 (en) 2014-02-18
EP1927266B1 (en) 2014-05-14
CN101263742A (zh) 2008-09-10
EP1927266A1 (en) 2008-06-04
KR101562379B1 (ko) 2015-10-22
KR20150008932A (ko) 2015-01-23
US20080205658A1 (en) 2008-08-28
TW200721111A (en) 2007-06-01
JP5587551B2 (ja) 2014-09-10
JP2012181556A (ja) 2012-09-20
WO2007031896A1 (en) 2007-03-22
BRPI0615899A2 (pt) 2011-05-31
KR101512995B1 (ko) 2015-04-17
KR20080047446A (ko) 2008-05-28
RU2008114359A (ru) 2009-10-20

Similar Documents

Publication Publication Date Title
BRPI0615899B1 (pt) Unidade decodificadora espacial, dispositivo decodificador espacial, sistema de áudio, dispositivo de consumidor, e método para produzir um par de canais de saída binaurais
ES2461601T3 (es) Procedimiento y aparato para generar una señal de audio binaural
JP4944902B2 (ja) バイノーラルオーディオ信号の復号制御
EP3444815B1 (en) Multiplet-based matrix mixing for high-channel count multichannel audio
JP4589962B2 (ja) レベル・パラメータを生成する装置と方法、及びマルチチャネル表示を生成する装置と方法
ES2524428T3 (es) Decodificador de señales de audio, procedimiento para decodificar una señal de audio y programa de computación que utiliza etapas en cascada de procesamiento de objetos de audio
JP5255702B2 (ja) 多チャネルオーディオ信号のバイノーラル・レンダリング
BRPI0706306A2 (pt) método e aparelho para a sintetização de um sinal de áudio binaural; método;.método para sintetização de um sinal de áudio estéreo; decodificador de áudio paramétrico; produto de programa de computador, armazenado em uma mìdia legìvel por computador e executável em um dispositivo de processamento de dados, para processar um sinal de aúdio parametricamente codificado que compreende, ao menos, um sinal combinado de uma pluralidade de canais de áudio e um ou mais conjuntos de informação correspondentes que descrevem uma imagem sonora de canal múltiplo; método para gerar um sinal de áudio parametricamente codificado; codificador de áudio paramétrico para gerar um sinal áudio parametricamente codificado; produto de programa de computador, armazenado em uma mìdia legìvel por computador e executável em um dispositivo de processamento de dados, para gerar um sinal de áudio parametricamente codificado
BRPI0707969A2 (pt) codificador e decodificador de áudio, métodos de codificação e de decodificação de áudio, e para transmitir e receber um sinal de áudio, receptor para receber um sinal de áudio, transmissor e método para transmitir um fluxo de dados de saìda, sistema de transmissão para transmitir um sinal de áudio, produto de programa de computador, dispositivos de gravação e de execução de áudio, e, fluxo de dados de áudio para um sinal, e, meio de armazenamento
PT2372701E (pt) Codificação aprimorada e representação de parâmetros de codificação de objeto de downmix multicanal
BR112016001136B1 (pt) Método para processamento de um sinal áudio, unidade de processamento do sinal, renderizador binauricular, codificador áudio e descodificador áudio
BRPI0621530A2 (pt) número reduzido de decodificação de canais
TWI313857B (en) Apparatus for generating a parameter representation of a multi-channel signal and method for representing multi-channel audio signals
BRPI0621485A2 (pt) decodificador e método para extrair sinal de down mix de fone de ouvido, decodificador para extrair sinal de down mix estéreo espacial, receptor ou reprodutor e método de recepção ou reprodução de áudio e mìdia de armazenamento
BRPI0913460B1 (pt) Aparelho e método para prover um conjunto de indicadores espaciais na base de um sinal de microfone e aparelho para prover um sinal de áudio de dois canais e um conjunto de indicadores espaciais
BRPI0719884B1 (pt) método, aparelho e mídia legível por computador para decodificar um sinal de áudio
BR112016016008B1 (pt) Método para renderizar um sinal de áudio
BRPI0518507B1 (pt) Informações auxiliares compactas para a codificação paramétrica de áudio espacial

Legal Events

Date Code Title Description
B08F Application dismissed because of non-payment of annual fees [chapter 8.6 patent gazette]

Free format text: REFERENTE A 3A ANUIDADE.

B08G Application fees: restoration [chapter 8.7 patent gazette]
B25D Requested change of name of applicant approved

Owner name: KONINKLIJKE PHILIPS N.V. (NL)

B25G Requested change of headquarter approved

Owner name: KONINKLIJKE PHILIPS N.V. (NL)

B06T Formal requirements before examination [chapter 6.20 patent gazette]
B15K Others concerning applications: alteration of classification

Free format text: A CLASSIFICACAO ANTERIOR ERA: H04S 3/00

Ipc: H04S 3/00 (1980.01), H04S 7/00 (1980.01)

B06F Objections, documents and/or translations needed after an examination request according [chapter 6.6 patent gazette]
B09A Decision: intention to grant [chapter 9.1 patent gazette]
B16A Patent or certificate of addition of invention granted [chapter 16.1 patent gazette]

Free format text: PRAZO DE VALIDADE: 10 (DEZ) ANOS CONTADOS A PARTIR DE 09/07/2019, OBSERVADAS AS CONDICOES LEGAIS. (CO) 10 (DEZ) ANOS CONTADOS A PARTIR DE 09/07/2019, OBSERVADAS AS CONDICOES LEGAIS