PT2842313T

PT2842313T - Fluxo de dados escaláveis e entidade de rede

Info

Publication number: PT2842313T
Application number: PT137172532T
Authority: PT
Inventors: Marpe Detlev; Schierl Thomas; George Valeri; Henkel Anastasia; Grüneberg Karsten; Skupin Robert
Original assignee: Ge Video Compression Llc
Priority date: 2012-04-13
Filing date: 2013-04-15
Publication date: 2016-12-22
Also published as: ES2607438T3; BR122020007621B1; IL261381B; KR101686088B1; KR20190057418A; CN108322752B; US10694198B2; BR112014025496A2; PH12017501900A1; IL295693B2; KR20170140434A; EP3481068B1; MX2023001435A; PT2842318T; KR102171208B1; IL295693B1; CL2014002739A1; CN108540814B; FI3793200T3; PL2842313T3

Description

DESCRIÇÃO

FLUXO DE DADOS ESCALÁVEIS E ENTIDADE DE REDE A presente invenção diz respeito a fluxos de dados escaláveis, tais como fluxos de video escaláveis, e a entidades de rede que lidam com tais fluxos de dados escaláveis, tais como, por exemplo, um descodificador ou MANE (elemento de rede ciente de média) .

De uma perspetiva de transporte, a adaptação de fluxos de bits de video na dimensão temporal ou outras dimensões é altamente desejável, tendo já sido identificada e abordada na padronização de H.264/AVC. A encapsulação de dados de video em unidades de Camadas de Abstração de Rede (NAL) e a decisão de conceção de sinalizar muitos parâmetros importantes mas bastante invariantes fora do fluxo de bits de video em denominados Conjuntos de Parâmetros refletem esta compreensão. As extensões de

Codificação de Video Escalável (SVC) e Codificação de Video Multivista (MVC) de H.264/AVC permitem adaptação para além da dimensão temporal, mas uma falta de extensibilidade na especificação de base de H.264/AVC conduziu a abordagens complicadas para estender a sintaxe de nivel elevado de H.264/AVC de um modo retrocompativel. Em H.264/AVC e suas extensões, a sinalização de pontos de operação ao longo das dimensões de escalabilidade é efetuada através de extensões de cabeçalho de unidades NAL que incluem um byte extra para esta finalidade. A mesma informação é proporcionada pelas denominadas unidades NAL de prefixo para unidades NAL que contêm dados de video de H.264/AVC puros e constituem a denominada camada de base. Um mecanismo para estender a informação proporcionada via Conjunto de Parâmetros de Sequências (SPS) da camada de base para as camadas intensificadas, com codificação pelas extensões de H.264/AVC, é estabelecido via denominados Conjuntos de Parâmetros de Sequências de Subconjuntos (SSPS).

Enquanto o desenvolvimento da especificação de base de HEVC ainda decorre, esforços no sentido de uma extensão de codificação de video 3D já estão a ser empreendidos para assegurar uma sintaxe extensível na especificação de base no início. É necessário planear cuidadosamente estes denominados ganchos escaláveis na especificação de base para perdurarem no tempo. Os parágrafos seguintes apresentam uma visão global do estado atual da sintaxe de Nível Elevado (HL) de HEVC e dos conceitos que presentemente estão sob discussão. 0 estado atual da padronização de HEVC é o seguinte:

Durante a especificação de base de HEVC decorrente e as extensões 3D, numerosos participantes fizeram propostas acerca do modo como proceder a partir da sintaxe de HL como especificada em H.264/AVC. 0 resultado está refletido no esboço do trabalho corrente da especificação e nas numerosas contribuições dos participantes individuais. Os parágrafos seguintes apresentam uma visão global da discussão atual.

Como afirmado acima, a sinalização de pontos de operação dentro das dimensões de escalabilidade de um fluxo de bits de vídeo SVC ou MVC requer extensões (específicas) dos cabeçalhos de unidades NAL de H.264/AVC. Esta solução é considerada suja, pois requer um esforço extra, por exemplo, para analisar múltiplas e diferentes estruturas de cabeçalhos de unidades NAL e requerer unidades NAL de prefixo para sinalizar a camada de base. Em consequência, foi feito um esforço para assegurar que a sintaxe de cabeçalhos de unidades NAL de HEVC de base é suficientemente versátil para satisfazer as necessidades das extensões futuras da especificação de base.

Na sintaxe de uma unidade NAL tal como no presente esboço de trabalho, um consenso corrente foi utilizar um cabeçalho de unidades NAL de dois bytes. No primeiro byte, nal_ref_flag é sinalizado com um bit em oposição aos dois bits de nal_ref_idc em H.264/AVC, pois esta caracteristica de HL não tem sido extensamente utilizada em aplicações. Em consequência, o elemento de sintaxe nal_unit_type tem mais um bit para sinalizar o tipo da unidade NAL, que permite um total de 64 tipos distinguíveis. 0 segundo byte do cabeçalho de unidades NAL é dividido em duas partes, em que lc bits são utilizados para sinalizar temporal_id da unidade NAL uma vez que a escalabilidade temporal já está permitida na especificação de base. Os restantes 5 bits do segundo byte são reservados para serem iguais a um dentro de um fluxo de bits conforme a HEVC. A compreensão atual da utilização dos restantes 5 bits é que podem ser utilizados para sinalizar identificadores de escalabilidade em futuras extensões, por exemplo, para um elemento de sintaxe layer_id.

Enquanto o Conjunto de Parâmetros de Imagens (PPS) e Conjunto de Parâmetros de Sequências como definidos na corrente especificação de base de HEVC são relativamente semelhantes ao que foi anteriormente especificado em H.264/AVC, dois novos Conjuntos de Parâmetros, referidos como Conjunto de Parâmetros de Adaptação (APS) e Conjunto de Parâmetros de Vídeo (VPS), foram introduzidos em HEVC, dos quais apenas o VPS é relevante para o conteúdo deste documento. 0 Conjunto de Parâmetros de Vídeo devia sinalizar parâmetros tais como o número de nível/camada (por exemplo, temporal) presente no fluxo de bits de video e o perfil e nivel para todos os pontos de operação contidos. Outros parâmetros a serem sinalizados incluem as dependências entre camadas escaláveis, de forma muito semelhante ao modo como é sinalizado nas mensagens SEI de informação de escalabilidade de SVC.

Apresenta-se abaixo uma breve explicação adicional relativamente à semântica da unidade NAL e sintaxe do Conjunto de Parâmetros de Video. profile_idc e level_idc indicam o perfil e nivel aos quais se conforma a sequência de video codificada. max_temporal_layers_minusl+ 1 especifica o número máximo de camadas temporais presentes na sequência. 0 valor de max_temporal_layers_minusl situar-se-á no intervalo de 0 até 7, inclusive. more_rbsp_data( ) é especificado do modo seguinte.

Se não houver mais dados no RBSP, o valor de retorno de more_rbsp_data( ) é igual a FALSO. - De outro modo, os dados de RBSP são pesquisados quanto ao último bit (menos significativo, mais à direita) igual a 1 que está presente no RBSP. Dada a posição deste bit, que é o primeiro bit (rbsp stop one bit) da estrutura de sintaxe rbsp_trailing_bits( ), aplica-se o seguinte. - Se houver mais dados num RBSP antes da estrutura de sintaxe rbsp_trailing_bits( ), o valor de retorno de more_rbsp_data( ) é igual a VERDADEIRO. - De outro modo, o valor de retorno de more_rbsp_data( ) é igual a FALSO. nal_ref_flag igual a 1 especifica que o conteúdo da unidade NAL contém um conjunto de parâmetros de sequências, um conjunto de parâmetros de imagens, um conjunto de parâmetros de adaptação ou um segmento de uma imagem de referência.

Para sequências de video codificadas conformes a um ou mais dos perfis especificados no Anexo 10 que são descodificadas utilizando o processo de descodificação especificado nas cláusulas 2-9, nal_ref_flag igual a 0 para uma unidade NAL que contém um segmento indica que o segmento faz parte de uma imagem não de referência. nal_ref_flag será igual a 1 para unidades NAL de conjunto de parâmetros de sequências, conjunto de parâmetros de imagens ou conjunto de parâmetros de adaptação. Quando nal_ref_flag é igual a 0 para uma unidade NAL com nal_unit_type igual a 1 ou 4 de uma imagem particular, será igual a 0 para todas as unidades NAL com nal_unit_type igual a 1 ou 4 da imagem. nal_ref_flag será igual a 1 para unidades NAL com nal_unit_type igual a 5. nal_ref_flag será igual a 0 para todas as unidades NAL com nal_unit_type igual a 6, 9, 10, 11 ou 12. nal_unit_type especifica o tipo de estrutura de dados de RBSP contidos na unidade NAL como especificado na Tabela 1.

Os descodificadores irão ignorar (remover do fluxo de bits e desperdiçar) o conteúdo de todas as unidades NAL que utilizaram valores reservados de nal_unit_type.

Tabela 1 - códigos possíveis (não é uma lista exaustiva) de tipos de unidades NAL e classes de tipos de unidades NAL

Um "perfil" é um subconjunto da totalidade da sintaxe do fluxo de bits. Dentro das fronteiras impostas pela sintaxe de um determinado perfil ainda é possível requerer uma variação muito grande do desempenho de codificadores e descodificadores dependendo dos valores tomados por elementos de sintaxe no fluxo de bits, tais como o tamanho especificado das imagens descodificadas. Em muitas aplicações, presentemente não é prático nem económico implementar um descodificador capaz de lidar com todas as utilizações hipotéticas da sintaxe dentro de um perfil particular.

Para lidar com este problema, "níveis" são especificados dentro de cada perfil. Um nível é um conjunto especificado de restrições impostas a valores dos elementos de sintaxe no fluxo de bits. Estas restrições podem ser meros limites a valores. Alternativamente, podem tomar a forma de restrições impostas a combinações aritméticas de valores (por exemplo, largura da imagem multiplicada pela altura da imagem multiplicada pelo número de imagens descodificadas por segundo). nível: Um conjunto definido de restrições impostas aos valores que podem ser tomados pelos elementos de sintaxe e variáveis. 0 mesmo conjunto de níveis é definido para todos os perfis, em que a maior parte dos aspetos da definição de cada nível é comum ao longo de diferentes perfis. Implementações individuais podem suportar, dentro de restrições especificadas, um nível diferente para cada perfil suportado. Num contexto diferente, nível é o valor de um coeficiente de transformada antes do escalamento. perfil: Um subconjunto especificado da sintaxe.

No desenvolvimento da extensão de codificação de vídeo 3D para HEVC, também foi proposto desviar certos parâmetros do cabeçalho de segmentos para o Delimitador de Unidades de Acesso (AUD), uma unidade NAL que opcionalmente ocorre no início de uma nova Unidade de Acesso (AU) em H.264/AVC.

Outra proposta durante a especificação da extensão de codificação de vídeo 3D para HEVC consiste em sinalizar as dependências entre pontos de operação através de indireção entre SPSs. 0 cabeçalho de unidades NAL deve conter uma referência a um SPS e dentro de cada SPS existe uma referência ao SPS de base relativo. Esta indireção (potencialmente em cascata) tem de ser resolvida até ao SPS para o nível (temporal, ...) mais baixo. Tal abordagem coloca uma carga elevada em dispositivos, tais como um MANE, para pesquisarem em profundidade o fluxo de bits e manterem uma quantidade substancial de informação disponível para a finalidade de identificar pontos de operação.

Kang J W et al: "Simple NAL Unit Header For HEVC"; ISO/IEC JTC1/SC29/WG11/ m23263 descreve a presença de uma informação de escalabilidade no cabeçalho de unidades NAL para facilitar a adaptação simples ao nivel de pacotes.

Em qualquer caso, ainda seria favorável dispor de uma solução que facilitasse, ou tornasse mais eficiente, a manipulação de fluxos de dados escaláveis por entidades de rede.

Este objetivo é atingido pelo assunto de qualquer uma das reivindicações independentes anexadas.

Uma descoberta básica da presente invenção é que a manipulação de fluxos de dados escaláveis por entidades de rede torna-se menos complexa se, no fluxo de dados, pacotes que de facto contêm dados forem acompanhados de pacotes de um tipo de pacote diferente que tenha um descritor de eixos de escalabilidade que define o número de eixos de escalabilidade e um seu significado semântico. Tomando esta medida, é suficiente que os pacotes que contêm dados compreendam um identificador de ponto de operação que identifica um ponto de operação associado a um pacote respetivo dentro do espaço de escalabilidade abrangido pelo eixo de escalabilidade. Tomando esta medida, os identificadores de pontos de operação dos pacotes proporcionam informação suficiente a uma entidade de rede de modo a associar estes pacotes ao seu ponto de operação no espaço de escalabilidade, desde que a entidade de rede tenha acesso a este descritor de eixos de escalabilidade proporcionado pelo pacote do tipo de pacote predeterminado. Com efeito, a técnica permite reduzir a quantidade de dados a serem consumidos para a maior parte dos pacotes, pois os identificadores de pontos de operação apenas têm de realizar uma tarefa de identificação. 0 descritor de eixos de escalabilidade pode ser transmitido de modo menos frequente. Ao mesmo tempo, a entidade de rede também tem de desempenhar menos frequentemente a tarefa pesada de analisar/ler o descritor de eixos de escalabilidade, desse modo reduzindo o overhead para a entidade de rede. Por outro lado, de acordo com uma forma de realização da presente invenção, a entidade de rede é capaz de interpretar os identificadores de pontos de operação pelo menos de modo a distinguir pacotes do ponto de operação mais baixo na ordem sequencial de pontos de operação, isto é, pacotes da camada de base, de outros pacotes, isto é, pacotes pertencentes a pontos de operação posicionados mais acima na ordem sequencial de pontos de operação, isto é, pacotes de camadas "intensificadas".

De acordo com outro aspeto da presente invenção, uma descoberta básica da presente invenção é que a manipulação de fluxos de dados escaláveis por entidades de rede pode tornar-se mais eficiente se foram disponibilizados descritores de nivel e/ou perfil utilizando pacotes diferentes dos pacotes que contêm dados, em que os descritores de perfil e/ou nivel são divididos num primeiro conjunto que sinaliza explicitamente a definição do conjunto de opções de codificação disponíveis e/ou gama de valores de elementos de sintaxe disponíveis para um respetivo ponto de operação, e um segundo conjunto de descritores de perfil e/ou nível que sinaliza a definição do conjunto de opções de codificação disponíveis e/ou gama de valores de elementos de sintaxe disponíveis para os seus respetivos pontos de operação por referência a outro descritor de perfil e/ou nível. Através desta medida, o comprimento da totalidade da sequência de descritores de perfil e/ou nível é mantido num valor mais baixo, desse modo salvaguardando overhead de transmissão bem como overhead de análise.

Formas de realização preferenciais do presente pedido são descritas abaixo com referência às figuras. Formas de realização vantajosas são o assunto de reivindicações dependentes. Entre as figuras;

Fig. la mostra um diagrama esguemático de um fluxo de dados no gual está codificado um conteúdo de média;

Fig. lb ilustra esguematicamente uma composição de fluxos de dados escaláveis;

Fig. lc ilustra esguematicamente uma composição de fluxos de dados escaláveis de acordo com outro exemplo;

Fig. 2 mostra um diagrama esguemático de um cenário em gue uma entidade de rede recebe um fluxo de dados completo;

Fig.3a ilustra pontos de operação dentro de uma escalabilidade bidimensional (por exemplo, temporal e espacial)

Fig. 3b ilustra um conceito new_profile_level_flag Fig. 4 mostra uma sintaxe de cabeçalho de unidades NAL para HEVC ;

Fig. 5 mostra uma sintaxe de VPS;

Fig. 6 mostra uma sintaxe vps_extension_data();

Fig. 7 mostra um diagrama esguemático de um fluxo de dados de acordo com um exemplo;

Fig. 8 mostra um diagrama de fluxo para um exemplo para partição do elemento de sintaxe de comprimento fixo de bits ou seguência de bits, respetivamente;

Fig. 9 mostra um diagrama de fluxo para um modo de operação de uma entidade de rede exemplificativa;

Fig. 10 mostra outro modo de operação de uma entidade de rede; Fig. 11 mostra uma sintaxe de unidades NAL;

Fig. 12 mostra uma sintaxe de SPS;

Fig. 13 mostra uma sintaxe de VPS, e

Fig. 14 mostra uma sintaxe de dados de extensão de VPS.

Para facilitar a compreensão das formas de realização esboçadas abaixo, relativamente às Figs. 1 e 2, descrevem-se primeiramente as caracteristicas especificas de fluxos de dados escaláveis e os problemas na manipulação de fluxos de dados escaláveis resultantes destas caracteristicas especificas. A Fig. la ilustra um fluxo de dados 10 no gual está codificado um conteúdo de média, tal como, por exemplo, conteúdo de áudio, conteúdo de video, conteúdo de imagem, conteúdo de malha 3D ou semelhantes. 0 conteúdo de média pode variar no tempo, em que o fluxo de dados representa o conteúdo de média numa sequência de selos temporais, tais como imagem de um video, blocos de transformadas ou quadros de um sinal de áudio ou semelhantes.

Como mostrado na Fig. la, o fluxo de dados 10 compreende ou é composto por pacotes 12. O tamanho dos pacotes pode ser igual ou diferente. Cada pacote compreende um identificador do tipo de pacote 14. Cada identificador do tipo de pacote 14 identifica um tipo de pacote associado a um pacote respetivo 12, de entre uma pluralidade de tipos de pacotes. A pluralidade de tipos de pacotes compreende tipos de pacotes que contêm dados. Na Fig. la, por exemplo, é exemplificativamente mostrado que os pacotes dentro da porção de fluxo de dados 10 mostrada exemplif icativamente na Fig. la são de um tal tipo de pacotes que contêm dados, aqui exemplificativamente designados "A". Para além de tais tipos de pacotes que contêm dados, pode haver outros pacotes de outros tipos de pacotes que não contêm dados que contribuem de facto para uma representação codificada do conteúdo de média, mas outros dados tais como, por exemplo, dados ou informações suplementares quanto à origem do conteúdo de média ou semelhantes.

Pelo menos cada pacote de um tipo de pacotes que contêm dados, tais como A, compreende um identificador de ponto de operação 16 que identifica um ponto de operação associado a um pacote respetivo, de entre uma pluralidade de pontos de operação, dentro de um espaço de escalabilidade abrangido por um número n de eixos de escalabilidade, com 0 > n, em que os pontos de operação têm uma ordem sequencial de pontos de operação definida entre eles. Para tornar isto claro refere-se a Fig. lb. Os pontos de operação são ilustrados por círculos 18. São distribuídos ou dispostos dentro do espaço de escalabilidade 20 abrangido pelos eixos de escalabilidade, em que, na Fig. lb, para fins ilustrativos, apenas se mostram dois de tais eixos de espaços de escalabilidade 22a e 22b. A Fig. lb ilustra a composição de fluxos de dados escaláveis, tais como o fluxo de dados escaláveis 10. Os pacotes 12, cujo identificador de ponto de operação identifica o ponto de operação 1, contêm dados que, em conjunto, formam uma representação codificada do conteúdo de média nesse ponto de operação 1. Aqui, de modo exemplificativo, o ponto de operação 1 forma um tipo de representação básica, isto é, uma quantidade minima de informação respeitante ao conteúdo de média é proporcionada pelos dados dos pacotes de ponto de operação 1. No caso de um video, por exemplo, os dados destes pacotes representam uma representação codificada do conteúdo de média a baixa resolução espacial e SNR mais baixo, por exemplo. Ao combinar os dados contidos pelos pacotes pertencentes ao ponto de operação 1 com os dados contidos pelos pacotes 12 de ponto de operação 2 como ilustrado pela linha fechada 24, os dados derivados deste modo originam uma representação codificada do conteúdo de média, cuja reconstrução excede um pouco a representação obtida por conteúdo de média reconstruído apenas dos pacotes de ponto de operação 1, tal como, por exemplo, em SNR ou resolução espacial. A característica do conteúdo de média relacionada com a qual a representação codificada é estendida por adição dos dados de pacotes de ponto de operação 2 aos dados dos pacotes de ponto de operação 1 é o significado semântico do eixo 2 na Fig. lb e a escala do eixo 22b é uma escala ordinal que procede à triagem dos pontos de operação 18 de acordo com este significado semântico.

Na Fig. lb, por exemplo, o eixo 22b refere-se à resolução espacial, ao passo que o eixo 22a se refere à qualidade de SNR. No entanto, também podem ser disponibilizados outros significados semânticos de eixos de escalabilidade. Por exemplo, os dados adicionais de pacotes de outro ponto de operação podem adicionar informação à versão apta a ser reconstruída do conteúdo de média que não estava disponível anteriormente, isto é, antes da adição destes dados, tal como, por exemplo, outra visão, outro canal de áudio, um mapa de profundidade ou semelhantes.

Em conformidade, a Fig. lb ilustra igualmente, por outras linhas fechadas 24, que a representação codificada básica do conteúdo de média pode estender-se ao longo do eixo 22b bem como ao longo de 22a. Por outras palavras, a adição de dados de pacotes 12 de um certo ponto de operação a dados de pacotes de outro ponto de operação ou uma combinação 24 de dados de pacotes de outros pontos de operação conduz a uma nova combinação de dados que, de acordo com um dos eixos de escalabilidade 22a ou 22b, excede a representação obtida sem esta adição, e este efeito sequencial é mostrado pelas setas 26, que, em conformidade, formam uma ordem sequencial de pontos de operação entre os pontos de operação 18, que conduz através do espaço de escalabilidade 20.

Agora, imagine que uma entidade de rede recebe tal fluxo de dados completo. A Fig. 2 mostra tal cenário. A entidade de rede é mostrada como um bloco 28 e é, por exemplo, um descodificador ou um MANE. Na Fig. 2, a entidade de rede 2 8 recebe um fluxo de dados completo 10, isto é, um fluxo de dados que compreende todos os pacotes de dados incluindo todos os pacotes de dados que contêm dados de todos os pontos de operação. A entidade de rede 28 tem a tarefa de dotar um recetor 30 de um conteúdo de média. Na Fig. 2, a entidade de rede 28 exemplif icat ivamente utiliza uma transmissão sem fios 32 para dirigir o conteúdo de média para o recetor 30. A entidade de rede 28 é, por exemplo, uma entidade de gestão de mobilidade. Em tal cenário, a entidade de rede 28 tem de lidar com capacidades de transmissão variáveis no tempo para o recetor 30. Isto é, há períodos de tempo em que a capacidade de transmissão não é suficiente para transferir o fluxo de dados completo 10 para o recetor 30 de modo a ser reproduzido em tempo real, por exemplo. Assim, a entidade de rede 28 tem de "reduzir" o fluxo de dados 10 de modo a proporcionar ao recetor 30 uma versão ou representação resumida do conteúdo de média. Não obstante, por exemplo, a capacidade de transmissão ser insuficiente para transmitir o fluxo de dados completo 10, a capacidade de transmissão pode ainda assim ser suficiente para transmitir o fluxo de dados 10 com omissão de pacotes 12 de ponto de operação 5, por exemplo.

Deve notar-se que também há outros cenários em que uma entidade de rede 28 tem de prescindir de alguns dos pacotes 12 para cumprir algumas restrições impostas externamente. A este respeito, a Fig. 2 é meramente exemplificativa.

No entanto, para realizar a tarefa ainda agora mencionada de reduzir o fluxo de dados, a entidade de rede 28 tem de inspecionar pelo menos porções do fluxo de dados. As porções a serem inspecionadas incluem os identificadores de pontos de operação 16. Tal coloca um fardo muito grande sobre a entidade de rede 28 e, em conformidade, seria favorável manter este overhead baixo. As formas de realização descritas a seguir atingem este objetivo.

Outro aspeto com que lidam as formas de realização descritas daqui em diante refere-se ao facto de as capacidades de um descodificador destinado a descodificar o fluxo de dados poderem aumentar enquanto se estende a ordem sequencial de pontos de operação. Descodificadores de nível baixo, por exemplo, podem ter capacidades menores, isto é, têm menor perfil e/ou menor nível, como explicado na parte introdutória da especificação.

Assim, a adição de alguns dados de pacotes de um certo ponto de operação pode portanto ser restringida a descodificadores que cumpram algum critério de perfil mínimo e/ou nível mínimo e, em conformidade, será favorável que entidades de rede, tais como um descodificador ou alguma entidade de rede que dirija o fluxo de dados para um descodificador, consigam compreender os requisitos de perfil e/ou nível associados aos pontos de operação 18 de um modo simples mas, por outro lado, com uma baixa taxa de consumo. No entanto, antes de iniciar a descrição destas formas de realização, nota-se o seguinte. Em particular, a nomenclatura aplicada nas formas de realização descritas a seguir difere da terminologia usada na descrição relativamente às Figs, la até 2. Para ser mais específico, as formas de realização descritas a seguir representam implementações específicas de formas de realização do presente pedido ajustadas para serem aplicadas no próximo padrão de HEVC. Em conformidade, os pacotes acima mencionados são designados abaixo como unidades NAL, cujo cabeçalho de unidades NAL compreende um identificador de ponto de operação que, de acordo com formas de realização relacionadas com um primeiro aspeto do presente pedido, é adicionalmente especificado por um descritor de eixos de escalabilidade num certo tipo de unidade NAL, nomeadamente unidades NAL de VPS. No entanto, as formas de realização específicas descritas agora podem ser facilmente transferidas para outros tipos de codecs. A este respeito, será entendido que as seguintes formas de realização são meramente ilustrativas.

De modo semelhante, apesar de a Fig. lb sugerir combinações 24 que meramente formam subconjuntos apropriados entre si de modo que cada combinação é um subconjunto apropriado de todas as outras combinações 24, uma de um subconjunto apropriado ou um superconjunto apropriado das outras combinações 24 ou um superconjunto de todas as outras combinações 24 é opcional. A Fig. lc, por exemplo, mostra um caso em que a sequencialidade do ponto de operação 18, isto é, a propriedade de ter uma ordem sequencial de pontos de operação definida entre eles, deve ser entendida como abrangendo casos em que as combinações também compreendem o caso em que uma combinação não é um subconjunto apropriado nem um superconjunto apropriado da outra combinação.

Na Fig. lc, por exemplo, a combinação 24 resultante da adição dos dados de pacotes de ponto de operação 4 aos dados da combinação de pacotes de pontos de operação 1 e 2 apresenta sobreposição com a combinação 24 resultante da adição dos dados de pacotes de ponto de operação lc à combinação de dados de pacotes de pontos de operação 1 e 2 de modo meramente parcial, sendo a interceção formada pela última combinação, isto é, a combinação de pontos de operação 1 e 2. Deste modo, a ordem sequencial de pontos de operação compreende uma ramificação no ponto de operação 2. A seguinte forma de realização apresenta uma sintaxe de nivel elevado que inclui um cabeçalho de unidades NAL e uma sintaxe de VPS que permite a sinalização de informação de escalabilidade de um modo que será útil em descodificadores de video, extratores de fluxo de bits de video ou dispositivos de rede para adaptação. 0 cabeçalho de unidades NAL inclui um identificador de escalabilidade que permite a sinalização até três dimensões de escalabilidade.

Antes de descrever mais pormenorizadamente a sintaxe de VPS, é apresentada uma visão global relativamente à Fig. 3a e 3b. Os conceitos podem ser utilizados, por exemplo, no padrão de HEVC. 0 new_profile_level_flag, apresentado abaixo, é utilizado para sinalizar que um certo ponto de operação dentro das dimensões de escalabilidade do video (por exemplo, temporal, espacial ou qualquer outra) utiliza um perfil ou nivel diferente dos pontos de operação anteriormente descritos. A Fig. 3a mostra os diferentes pontos de operação dentro de uma sequência de video escalável espacial e temporal de acordo com os seus identificadores escaláveis (temporal_id e layer_id). A Fig. 3a ilustra pontos de operação dentro de uma escalabilidade bidimensional (por exemplo, temporal e espacial). 0 Perfil e Nível necessários para descrever capacidades de descodificadores em termos de ferramentas de codificação suportadas, regime de macroblocos e assim por diante, podem variar com cada ponto de operação, que depende fortemente da escalabilidade utilizada. Em circuitos fechados que sinalizam o perfil e nível ou parâmetros adicionais de pontos de operação, o new_profile_level_flag é utilizado para sinalizar se está presente um novo perfil e nível relativamente aos pontos de operação anteriormente descritos ou se o perfil e nível de um ponto de operação específico tem de ser herdado dos anteriormente descritos por referência explícita.

Outro aspeto descrito abaixo refere-se a uma lista adaptável de elementos de sintaxe de perfil e nível. 0 Perfil, Nível e opcionalmente outros parâmetros de pontos de operação em conjuntos de parâmetros são proporcionados via ciclos while que permitem uma adaptação direta, isto é, a exclusão ou eliminação de certos pontos de operação bem como a sua adição sem alterar outros elementos de sintaxe dentro da sintaxe determinada, isto é, dentro do VPS. Tal é efetuado utilizando o elemento de sintaxe more_rbsp_data() que permite um ciclo while que não tem necessidade de sinalização do número absoluto de camadas e desse modo facilita a adaptação de conjuntos de parâmetros. A Fig. 3b ilustra um conceito new_profile_level_flag.

Outro aspeto descrito abaixo refere-se a Cenários de camadas. 0 cenário de camadas representa modos de sinalizar uma interpretação dos cinco bits reservados no segundo byte do cabeçalho de unidades NAL que pode ser utilizada em extensões de HEVC como identificador de camadas escaláveis layer_id num contexto escalável.

Nas abordagens de cenários de camadas, um identificador de cenário é sinalizado no cabeçalho de unidades NAL que permite que um descodif icador ou MANE interprete os cinco bits reservados como identificador separado uni- ou multidimensional para codificações de video que apresentam uma ou múltiplas dimensões de escalabilidade, tais como temporal e espacial, espacial e multivista ou outras. Uma descrição pormenorizada da dimensão escalável e dos pontos de operação contidos é apresentada através do VPS, ao passo que o cabeçalho de unidades NAL apenas proporciona informação sobre como interpretar os cinco bits reservados da sintaxe do cabeçalho de unidades NAL para derivar um ou mais identificadores escaláveis. A sintaxe de VPS descrita a seguir proporciona meios para sinalizar o perfil e nivel de cada ponto de operação e é concebida para permitir adaptação direta imediata. As secções seguintes apresentam pormenores desta sintaxe. A sintaxe proposta de cabeçalho de unidades NAL é descrita em primeiro lugar. 0 segundo byte do cabeçalho de unidades NAL é utilizado para sinalizar um denominado cenário de camadas (layer scenario) e um identificador de escalabilidade (layer_id) que identifica um ponto de operação no contexto do cenário de camadas. A Fig. 4 apresenta a sintaxe de cabeçalho de unidades NAL para HEVC com os novos elementos de sintaxe layer_scenario e layer_id. 0 elemento de sintaxe layer_scenario sinaliza o cenário de dimensões de escalabilidade, por exemplo, uma dimensão de escalabilidade para utilizar apenas escalabilidade temporal (por exemplo, escalabilidade temporal tal como na especificação de base de HEVC) ou combinar dois tipos de escalabilidade (por exemplo, temporal e espacial). 0 elemento de sintaxe layer_id descreve o ponto de operação de uma unidade NAL especifica dentro das dimensões de escalabilidade sinalizadas e tem de ser interpretado de acordo com o elemento de sintaxe layer_scenario.

No caso de nenhuma ou de uma dimensão de escalabilidade, isto é, layer_scenario com um valor de zero, o valor de layer_id pode ser interpretado como um número inteiro não sinalizado, listando os pontos de operação em ordem consecutiva de acordo com as suas dependências de descodificação e importância. No caso de nenhuma escalabilidade, todas as unidades NAL devem ter um valor de layer_id de zero para sinalizar que não há nenhum procedimento de adaptação hierárquica importante e todas as unidades NAL têm a mesma importância.

Com duas dimensões de escalabilidade, isto é, layer_scenario com um valor de um, o valor de layer_id pode ser interpretado como duas variáveis de número inteiro não sinalizado de 3 bits. Os primeiros três bits dão o ponto de operação da unidade NAL na primeira dimensão de escalabilidade, por exemplo, temporal, e os sequndos 3 bits dão o ponto de operação da unidade NAL na sequnda dimensão de escalabilidade, por exemplo, espacial.

Quando layer scenario tiver um valor de dois, o valor de layer_id pode ser interpretado como uma variável de número inteiro não sinalizado de 2 bits que dá o ponto de operação na primeira dimensão de escalabilidade, seguido de uma variável de número inteiro não sinalizado de 4 bits que descreve o ponto de operação na segunda dimensão de escalabilidade. Este cenário pode ser benéfico quando a quantidade de camadas de uma dimensão é maior do que na outra dimensão.

Dadas três dimensões de escalabilidade, o correspondente valor de layer_scenario é três, e o valor do elemento de sintaxe layer_id pode ser interpretado como três variáveis de número inteiro não sinalizado de 2 bits que dão o ponto de operação de acordo com as três dimensões de escalabilidade utilizadas, por exemplo, escalabilidade temporal, espacial e multivista. A Tabela 2 apresenta uma visão global dos valores de layer scenario e apresenta a interpretação correspondente de layer_id.

Tabela 2: Visão global de valores de layer_scenário.

A correspondente sintaxe de conjunto de parâmetros de vídeo é descrita a seguir. A sintaxe do Conjunto de Parâmetros de Vídeo tem de ser ajustada para sinalizar o perfil e nível para cada ponto de operação no espaço de escalabilidade possivelmente tridimensional e proporciona meios para a sua adaptação de um modo direto para refletir o nível corrente de adaptação do fluxo de bits de vídeo. Tal é efetuado utilizando o elemento de sintaxe vps_extension_data() para a sinalização do perfil e nivel de unidades NAL que utilizam qualquer tipo de escalabilidade, por exemplo, temporal, espacial ou outras. Adicionalmente, proporciona informação detalhada para a interpretação do elemento de sintaxe layer_id dentro do cabeçalho de unidades NAL. A sintaxe de VPS determinada é apresentada na Fig. 5. A Fig. 5 sinaliza o perfil e nivel para unidades NAL que não utilizam qualquer tipo de escalabilidade, isto é, dados de video codificados de acordo com a especificação de base de HEVC com o nivel temporal mais baixo.

Além disso, o elemento de sintaxe layer_id_type é dado para permitir uma compreensão mais detalhada das dimensões de escalabilidade descritas com o elemento de sintaxe layer_id dentro da sintaxe de cabeçalho de unidades NAL. A Tabela lc especifica as dimensões de escalabilidade reais sinalizadas em layer id para o elemento de sintaxe layer id type. Para a especificação de base de HEVC, só é necessário definir escalabilidade temporal. Uma extensão de escalabilidade de HEVC futura irá consequentemente especificar outros valores de layer_id_type para as suas necessidades especificas, por exemplo, 1: escalabilidade temporal, 2: escalabilidade espacial para uma extensão do tipo SVC de HEVC.

Tal permite que qualquer dispositivo que possua o VPS interprete completamente o ponto de operação de uma unidade NAL dentro das dimensões de escalabilidade conhecidas, ao passo que dispositivos que não tenham acesso ao VPS ainda podem efetuar uma adaptação correta do fluxo de bits de video mas sem conhecimento das dimensões de escalabilidade reais.

Tabela 3: layer_id_type e descrição pormenorizada da dimensão de escalabilidade em layer_id

Descrições de pontos de operação que utilizam escalabilidade quaisquer dimensões (por exemplo, nivel temporal > 0, escalabilidade espacial ...) são dadas através da sintaxe vps_extension_data() como apresentado na Fig. 6. Cada ponto de operação é identificado via o seu próprio layer_id. O new profile level flag permite a sinalização explicita de perfil e nivel da operação descrita ou sinalização implícita por referência a outra descrição de ponto de operação pelo seu layer_id utilizando o elemento de sintaxe ref_layer. A utilização da sintaxe vps_extension_data() permite a adaptação de um modo direto, pois pontos de operação são explicitamente referidos e podem ser omitidos por exclusão de um número fixo de bytes. Sempre que a sintaxe vps_extension_data() omitida não for referida por outra descrição de ponto de operação, não é necessário alterar nenhuns bits do VPS para além dos omitidos, o que simplifica consideravelmente a adaptação imediata.

Assim, utilizando a nomenclatura aplicada relativamente às Figs, la até lc, as formas de realização específicas agora esboçadas descrevem um fluxo de dados composto como representado na Fig. 7. O fluxo de dados que é geralmente indicado utilizando o sinal de referência 10 tem um conteúdo de média aí codificado, tal como, como designado acima, áudio, vídeo ou outro conteúdo de média. O fluxo de dados 10 compreende pacotes 12 denominados unidades NAL. Cada pacote 12 compreende um identificador do tipo de pacote, nomeadamente nal_unit_type, que identifica um tipo de pacote associado a um pacote respetivo 12 de entre uma pluralidade de tipos de pacotes. Cada pacote 12 que tem um tipo de pacote de entre um primeiro conjunto da pluralidade de tipos de pacotes a ele associado, tais como todas as unidades NAL, compreende um identificador de ponto de operação 34, nomeadamente a combinação de layer_scenario e layer_id, que identifica um ponto de operação 18 associado ao respetivo pacote 12, de entre uma pluralidade de pontos de operação 18 dentro do espaço de escalabilidade 20 abranqido por um número n de eixos de escalabilidade 22a, b com 0 > n, em que os pontos de operação 18 têm uma ordem sequencial de pontos de operação definida entre eles. A este respeito, deve notar-se que não é necessário que cada unidade NAL ou pacote 12 tenha um identificador de ponto de operação 34. Ao invés, pode haver pacotes 12 de um certo tipo de pacote que são de natureza qeral no que se refere aos pontos de operação e, em conformidade, não compreendem nenhum identificador de ponto de operação.

No entanto, na forma de realização da Fig. 7, cada pacote 12 que tem um tipo de pacote de entre um segundo conjunto dos tipos de pacotes a ele associado, nomeadamente as unidades NAL não de VPS, contém adicionalmente dados 36 que contribuem para uma representação codificada do conteúdo de média no ponto de operação 18 associado a um pacote respetivo juntamente com pacotes 12 que têm qualquer ponto de operação a eles associado que precede o ponto de operação associado ao respetivo pacote ou iguala o ponto de operação associado ao respetivo pacote de acordo com a ordem sequencial de pontos de operação. Refere-se a descrição das Figs, lb e Fig. lc quanto a pormenores a este respeito.

Cada pacote que tem um tipo de pacote predeterminado disjunto do segundo conjunto de tipos de pacotes a ele associado tem um descritor de eixos de escalabilidade 38 que define o número n e um significado semântico do um ou mais eixos de escalabilidade, em que o descritor de eixos de escalabilidade 38 é representado por layer_id_type que ocorre nas unidades NAL de VPS, isto é, unidades NAL 12 em que a porção de dados rbsp 40 é preenchida de acordo com a sintaxe de VPS 42.

Como também descrito acima, cada pacote de VPS também pode compreender uma sequência de descritores de perfil e/ou nivel 44, nomeadamente vps_extension_data, individualmente associada a pelo menos um subconjunto da pluralidade de pontos de operação 18, tais como, por exemplo, os principais em termos da ordem sequencial de pontos de operação. Cada descritor de perfil e/ou nivel 44 define um conjunto de opções de codificação disponíveis, isto é, um perfil mínimo a ser suportado para fins de reconstrução e/ou uma qama de valores de elementos de sintaxe disponíveis, isto é, um nível mínimo requerido para reconstrução, a que obedece uma sintaxe de pacotes 12 que têm o ponto de operação associado ao respetivo descritor de perfil e/ou nível 44, a ele associado. Por outras palavras, a combinação de dados resultante da adição dos dados de pacotes de um certo ponto de operação 18 a dados de pacotes associados a um ou a uma combinação de outros pontos de operação 18 pode ser reconstruída apenas para descodificadores que suportem o respetivo perfil e/ou nível.

Um primeiro conjunto dos descritores de perfil e/ou nível 44 sinaliza especificamente a definição do conjunto de opções de codificação disponíveis e/ou qama de valores de elementos de sintaxe disponíveis, nomeadamente aqueles para os quais o elemento de sintaxe new_profile_level_flag, isto é, flag 46, é iqual a 1. Um sequndo conjunto não vazio e disjunto dos descritores de perfil e/ou nível 44 sinaliza a definição do conjunto de opções de codificação disponíveis e/ou qama de valores de elementos de sintaxe disponíveis por referência a outro descritor de perfil e/ou nível 44 precedente, nomeadamente aqueles para os quais new profile level flag é igual a 0. Na Fig. 6, a sinalização explícita de perfil é efetuada utilizando o elemento de sintaxe profile_idc em 48, ao passo que o elemento de sintaxe levei ide representa um indicador de nível 50. A referência a outro descritor de perfil e/ou nível 44 no caso de new_profile_level_flag=0 é efetuada utilizando um elemento de sintaxe ref_layer_id 52. Obviamente, a utilização de descritores de perfil e/ou nível 44 de referência reduz o tamanho necessário para transmitir a sequência 54 de descritores de perfil e/ou nível, e este aspeto, como adicionalmente esboçado abaixo, pode ser explorado independentemente da utilização conjunta do identificador de ponto de operação 34 e do descritor de eixos de escalabilidade 38. Não obstante a sequência 54 de descritores de perfil e/ou nível 44 poder ser sequencialmente associada, na ordem sequencial de pontos de operação, ao pelo menos subconjunto de pluralidade de pontos de operação, tal não é necessariamente o caso. Ao invés, cada descritor de perfil e/ou nível pode ter um campo 56, nomeadamente layer_id, que identifica o ponto de operação 18 ao qual está associado o respetivo descritor de perfil e/ou nível 44. A entidade de rede que lida com o fluxo de dados 10 pode averiguar a ordem sequencial de pontos de operação definida entre os pontos de operação 18 da ordem dos campos dos descritores de perfil e/ou nível 44 na sequência 54. No entanto, alternativamente, a ordem sequencial de pontos de operação pode ser conhecida da entidade de rede por defeito dependendo, por exemplo, do descritor de eixos de escalabilidade. Para ser ainda mais preciso, a ordem dos pontos de operação identificados pelos campos 56 e a sequência dos descritores de perfil e/ ou nível 44 podem ser utilizadas por uma entidade de rede tal como a entidade de rede 2 8 da Fig. 2, de modo a derivar a ordem sequencial de pontos de operação. O campo 56 pode identificar os respetivos pontos de operação utilizando uma sequência de bits que é comum aos identificadores de pontos de operação 34. Na forma de realização esboçada abaixo, por exemplo, todos os identificadores de pontos de operação 34 tinham um elemento de sintaxe de comprimento fixo de bits, nomeadamente layer_id, e um elemento de sintaxe de cenário, nomeadamente layer_scenario, em que o elemento de sintaxe de cenário sinaliza n e uma associação de n partições do elemento de sintaxe de comprimento fixo de bits aos n eixos de escalabilidade, em que o elemento de sintaxe de comprimento fixo de bits é comum ou iqualmente construído para a sequência de bits de campos 56. A Fig. 8 mostra ilustrativamente um exemplo para a partição do elemento de sintaxe de comprimento fixo de bits ou sequência de bits 60 de campos 56 ou elemento de sintaxe de comprimento fixo de bits do identificador de ponto de operação 34 num número diferente de partições de acordo com três estados diferentes 62 do elemento de sintaxe de cenário 64, com as partições exemplificativamente mostradas com uma linha tracejada para um primeiro estado, uma linha tracejada-ponteada para um sequndo estado e linhas ponteadas para um terceiro estado. Isto é, uma entidade de rede que interpreta o elemento de sintaxe de comprimento fixo de bits ou sequência de bits 60 pode identificar o ponto de operação correto identificado pelo respetivo elemento de sintaxe de comprimento fixo de bits ou sequência de bits 60 por utilização dos bits contidos nas partições individuais como componentes no espaço de escalabilidade n-dimensional 20.

Na forma de realização descrita abaixo, a sequência de bits utilizada para o elemento de sintaxe ref layer id 52 utiliza a mesma sequência de bits como mostrado na Fiq. 8. Alternativamente, pode ter sido utilizado um apontador relativo definido em unidades de posições hierárquicas na ordem sequencial de pontos de operação. Por exemplo, a entidade de rede pode meramente adicionar ref_layer_id em bits ao elemento de sintaxe layer_id 56 de modo a aceder ou obter o layer_id do ponto de operação ao qual se refere o corrente descritor de perfil e/ou nível 44 de modo a adotar o identificador de perfil e/ou identificador de nivel profile_idc e/ou level_idc 48 e/ou 50 para o corrente ponto de operação.

Na forma de realização descrita acima, o descritor de eixos de escalabilidade 38, nomeadamente layer_id_type, forma um elemento de sintaxe cujos possíveis estados estão individualmente associados a diferentes combinações de valores para n e o correspondente significado semântico dos n eixos de escalabilidade. Isto é, estados possíveis do descritor de eixos de escalabilidade são individualmente mapeados em diferentes (n) significado (1), ...., significado (n) (em que se refere a tabela 3) . Isto é, utilizando o descritor de eixos de escalabilidade 38, uma entidade de rede que lê o fluxo de dados conhece a semântica do significado da propriedade para a qual os valores dentro das partições na Fig. 8 estão em medida ordinal. No entanto, uma entidade de rede que ainda não tenha tido uma oportunidade de ler com êxito uma unidade NAL de VCL pode no entanto pelo menos basear-se na característica ordinal dos valores nas partições de sequência de bits 60 de identificadores de pontos de operação 34 obtidos utilizando a partição de acordo com o elemento de sintaxe de cenário 64, de modo a decidir possíveis reduções do fluxo de dados no processamento do fluxo de dados.

Antes de prosseguir para a forma de realização seguinte especif icamente esboçada, é de notar que, de acordo com os aspetos adicionais mencionados acima do presente pedido, o descritor de eixos de escalabilidade 38 pode ser omitido com inclusão da sua semântica, por exemplo, nos identificadores de pontos de operação 34, que, no entanto e em conformidade, terão de consumir mais bits em comparação com as formas de realização descritas agora mesmo. No entanto e ainda assim, tais formas de realização alternativas ainda serão vantajosas no sentido de que a sequência 54 acima descrita de descritores de perfil e/ou nível 44 está presente, o que envolve sinalização explícita de descritores de perfil e/ou nivel 44 bem como sinalização/referência indireta de descritores de perfil e/ou nivel 44 .

No entanto, relativamente à descrição acima, deve notar-se que podem ser efetuadas várias modificações nas formas de realização esboçadas acima. Por exemplo, o número de bits escolhido no exemplo acima para o elemento de sintaxe de comprimento fixo ou sequência de bits 60, nomeadamente 6, pode ser alterado de modo a ser maior ou menor. Uma nota semelhante é válida no que se refere ao número de possíveis eixos de escalabilidade n ajustável pelo elemento de sintaxe de cenário 64: o conjunto de estados possíveis foi (1, 2, 3), mas também pode ser contemplado um conjunto diferente de possíveis números inteiros para n.

Apenas para completar a descrição, a Fig. 9 mostra o modo de operação de uma entidade de rede que, por exemplo, lê a sequência de descritores de perfil e/ou nível 44. Em primeiro lugar, o campo do primeiro descritor de perfil e/ou nível 44 na lista 54 é lido no passo 66. Em seguida, a entidade de rede verifica, no passo 68, se o corrente descritor de perfil e/ou nível 44, cujo campo foi lido no passo 66, sinaliza explicitamente o perfil e/ou nível ou os sinaliza indiretamente. De acordo com a forma de realização acima, o passo 68 envolve ler o elemento de sintaxe reserved_zero_one_bit, em que a decisão real depende do valor do elemento de sintaxe: a sinalização explícita é indicada por new profile level flag ser igual a 1 e a sinalização indireta por o elemento de sintaxe ser igual a 0.

No caso da sinalização explícita, a entidade de rede lê, no passo 70, o identificador de perfil e/ou nível 58/50 e associa-o ao ponto de operação identificado pelo campo lido no passo 66. No entanto, no caso de sinalização indireta, a entidade de rede lê, no passo 72, do fluxo de dados, o campo de referência 52 e adota, no passo 74, o identificador de perfil e/ou nivel associado ao ponto de operação identificado por este campo de referência 52 como identificador de perfil e/ou nivel do ponto de operação identificado pelo campo lido no passo 66. Estes passos são depois repetidos até a sequência de descritores de perfil e/ou nivel 44 ter sido rastreada.

De modo semelhante, a Fig. 10 ilustra o modo de operação de uma entidade de rede que tira partido daquelas formas de realização descritas acima, em que o descritor de eixos de escalabilidade 38 completa a informação proporcionada pelos identificadores de pontos de operação 34 nos pacotes individuais. Como mostrado na Fig. 10, em primeiro lugar o identificador de ponto de operação de um pacote corrente é lido no passo 76. Tal é efetuado para todos os pacotes 12. Além disso, a entidade de rede inspeciona as unidades NAL de VPS de modo a ler a partir das mesmas, no passo 78, o descritor de eixos de escalabilidade. Os dois passos 76 e 78 são realizados de cada vez que um pacote respetivo do respetivo tipo de pacote é encontrado pela entidade de rede. De cada vez que um identificador de ponto de operação é lido no passo 76, a entidade de rede distingue, no passo 80, entre os casos em que o descritor de eixos de escalabilidade ainda não foi lido, desse modo não estando disponível, ou já foi lido, desse modo estando disponível. No caso da disponibilidade, a entidade de rede interpreta o identificador de ponto de operação do pacote corrente de acordo com o descritor de eixos de escalabilidade lido no passo 78 no passo 82. Após a interpretação, a entidade de rede conhece o significado do eixo de escalabilidade e pode atuar em conformidade. Em particular, independentemente da disponibilidade ou falta desta, a entidade de rede seleciona pacotes de entre pacotes 12, no passo 84, de modo a selecionar aqueles pacotes a serem descodificados ou a serem dirigidos para um recetor, tal como um recetor 30. O passo 84 pode depender de dados externos, tais como, por exemplo, dados que indicam a capacidade do recetor de reproduzir dados de média, tais como resolução espacial reprodutível máxima, profundidade máxima de bits de píxeis do monitor e assim por diante. No caso de a interpretação não estar disponível devido à falta de disponibilidade do descritor de eixos de escalabilidade, a entidade de rede 28 pode ser configurada para atuar defensivamente, por exemplo, meramente processando adicionalmente os pacotes pertencentes ao ponto de operação mais baixo de acordo com a ordem sequencial de pontos de operação.

Mais uma vez, a entidade de rede 28 pode ser um descodificador, um transcodificador, uma entidade de rede ciente de média, tal como uma entidade de gestão de mobilidade, ou semelhantes.

Além disso, uma entidade que gere qualquer uma das formas de realização para um fluxo de dados descrito acima, tal como um codificador ou semelhantes, pode ser configurada para alternar as unidades NAL de VPS entre os pacotes que contêm dados de modo suficientemente frequente para manter baixas as durações de tempo, em que uma entidade de rede enfrenta os problemas de falta de disponibilidade que ocorrerem se o descritor de eixos de escalabilidade ainda não estiver disponível, como descrito relativamente à Fig. 10.

Para uma entidade de rede que lê a sequência de identificadores de perfil e/ou nível 44, faz-se notar que tal entidade de rede pode ser configurada, para além do processo da Fig. 10 ou alternativamente a este, para fornecer uma seleção entre os pacotes 12 com base no conjunto de opções de codificação disponíveis e/ou gama de valores de elementos de sintaxe disponíveis associados aos pontos de operação individuais: por exemplo, a entidade de rede pode excluir pontos de operação cujo perfil e/ou nível requeridos excedam o perfil máximo e/ou nível máximo do próprio no caso de a entidade de rede ser um descodif icador, por exemplo, ou de o recetor com o qual a entidade de rede comunica, no caso de a entidade de rede ser, por exemplo, uma MME.

Por outras palavras, o que foi descrito relativamente à Fig. 4 até 6 é um fluxo de dados no qual está codificado um conteúdo de média, em que o fluxo de dados compreende pacotes (comparar unidades NAL), em que cada pacote compreende um identificador do tipo de pacote nal_unit_type que identifica um tipo de pacote associado ao respetivo pacote de entre uma pluralidade de tipos de pacotes, em que cada pacote que tem um tipo de pacote de entre um primeiro conjunto da pluralidade de tipos de pacotes a ele associado (por exemplo, todas as unidades NAL) compreende um identificador de ponto de operação layer_scenario e layer_id que identifica um ponto de operação associado ao respetivo pacote de entre uma pluralidade de pontos de operação dentro de um espaço de escalabilidade abrangido por um número n de eixos de escalabilidade, com 0<n, em que os pontos de operação têm uma ordem sequencial de pontos de operação definida entre eles, em que cada pacote que tem qualquer tipo de pacote de entre um segundo conjunto do primeiro conjunto de tipos de pacotes a ele associado (por exemplo, unidades NAL não de VPS) contém adicionalmente dados que contribuem para uma representação codificada do conteúdo de média no ponto de operação associado ao respetivo pacote juntamente com os pacotes que têm qualquer ponto de operação a eles associado que precede o ponto de operação associado ao respetivo pacote ou iguala o ponto de operação associado ao respetivo pacote, em que cada pacote (comparar unidades NAL de VPS) que tem um tipo de pacote predeterminado disjunto (isto é, externo) do segundo conjunto a ele associado tem um descritor de eixos de escalabilidade (comparar layer_id_type) que define o número do um ou mais eixos de escalabilidade e um seu significado semântico.

Outro exemplo do fluxo de dados, em que cada um dos pacotes que têm o tipo de pacote predeterminado a eles associado, também compreende uma sequência de descritores de perfil e/ou nivel vps extension data individualmente associada a pelo menos um subconjunto (por exemplo, os principais, em termos da ordem sequencial de pontos de operação) da pluralidade de pontos de operação, em que cada descritor de perfil e/ou nivel define um conjunto de opções de codificação disponíveis (comparar perfil) e/ou uma qama de valores de elementos de sintaxe disponíveis (comparar nível) aos quais obedece uma sintaxe de pacotes com o ponto de operação associado ao respetivo descritor de perfil e/ou nível, a ele associado, em que um primeiro conjunto dos descritores de perfil e/ou nível sinaliza explicitamente a definição do conjunto de opções de codificação disponíveis e/ou qama de valores de elementos de sintaxe disponíveis, (comparar new_profile_level_flag=l) e um sequndo conjunto não vazio e disjunto dos descritores de perfil e/ou nível sinaliza a definição do conjunto de opções de codificação disponíveis e/ou qama de valores de elementos de sintaxe disponíveis por referência a outro descritor de perfil e/ou nível precedente (comparar new_profile_level_flag=l).

Noutro exemplo do fluxo de dados, a sequência de descritores de perfil e/ou nível é sequencialmente associada, na ordem sequencial de pontos de operação, ao pelo menos subconjunto (por exemplo, os principais em termos da ordem sequencial de pontos de operação) da pluralidade de pontos de operação.

Noutro exemplo do fluxo de dados, cada descritor de perfil e/ou nível tem um campo (comparar layer_id) que identifica o ponto de operação ao qual está associado o respetivo descritor de perfil e/ou nível (isto é, juntamente com 4), em que a ordem sequencial de pontos de operação pode ser derivada da sequência de descritores de perfil e/ou nível.

Noutro exemplo do fluxo de dados, em cada descritor de perfil e/ou nível, o campo identifica o ponto de operação ao qual está associado o respetivo descritor de perfil e/ou nivel utilizando uma sequência de bits comum aos identificadores de pontos de operação que identifica o ponto de operação ao qual está associado o respetivo descritor de perfil e/ou nivel.

Noutro exemplo do fluxo de dados, todos os identificadores de pontos de operação têm um elemento de sintaxe de comprimento fixo de bits (comparar layer_id) e um elemento de sintaxe de cenário (comparar layer_scenario), em que o elemento de sintaxe de cenário sinaliza n e uma associação (mas sem significado semântico) de n partições do elemento de sintaxe de comprimento fixo de bits aos n eixos de escalabilidade, em que a sequência de bits é comum ao elemento de sintaxe de comprimento fixo de bits.

Noutro exemplo do fluxo de dados, o segundo conjunto não vazio e disjunto dos descritores de perfil e/ou nivel sinaliza a definição do conjunto de opções de codificação disponíveis e/ou gama de valores de elementos de sintaxe disponíveis por referência a outro descritor de perfil e/ou nível precedente utilizando uma sinalização explícita do campo do descritor de perfil e/ou nível referenciado, ou utilizando um apontador relativo definido em unidades de posições hierárquicas na ordem sequencial de pontos de operação (em que a segunda alternativa é uma alternativa à descrição acima).

De acordo com outro aspeto do fluxo de dados, todos os identificadores de pontos de operação têm um elemento de sintaxe de comprimento fixo de bits e um elemento de sintaxe de cenário, em que o elemento de sintaxe de cenário sinaliza n e uma associação de n partições do elemento de sintaxe de comprimento fixo de bits aos n eixos de escalabilidade de modo que a enésima porção é uma medida ordinal de uma posição do respetivo ponto de operação ao longo do enésimo eixo de escalabilidade.

De acordo com outro aspeto do fluxo de dados, o descritor de eixos de escalabilidade (comparar layer id type) compreende um elemento de sintaxe cujos possíveis estados estão individualmente associados a diferentes combinações de valores para n e significado semântico do correspondente significado semântico dos n eixos de escalabilidade (isto é, uma função mapeia {n, significado(1), significado(n) } em (1...max. estado possível de layer_id_type}).

Noutro fluxo de dados no qual está codificado um conteúdo de média, o fluxo de dados compreende pacotes, em que cada pacote compreende um identificador do tipo de pacote que identifica um tipo de pacote associado ao respetivo pacote de entre uma pluralidade de tipos de pacotes, em que cada pacote que tem um tipo de pacote de entre um primeiro conjunto da pluralidade de tipos de pacotes a ele associado compreende um identificador de ponto de operação que identifica um ponto de operação associado ao respetivo pacote de entre uma pluralidade de pontos de operação dentro de um espaço de escalabilidade abrangido por um número n de eixos de escalabilidade, com 0<n, em que os pontos de operação têm uma ordem sequencial de pontos de operação definida entre eles, em que cada pacote com qualquer tipo de pacote de entre um segundo conjunto do primeiro conjunto de tipos de pacotes a ele associado contém adicionalmente dados que contribuem para uma representação codificada do conteúdo de média no ponto de operação associado ao respetivo pacote juntamente com os pacotes que têm qualquer ponto de operação a eles associado que precede o ponto de operação associado ao respetivo pacote, ou é igual ao ponto de operação associado ao respetivo pacote, em que cada pacote que tem um tipo de pacote predeterminado disjunto (externo) do segundo conjunto a ele associado compreende uma sequência de descritores de perfil e/ou nível individualmente associada a pelo menos um subconjunto (por exemplo, os principais em termos da ordem sequencial de pontos de operação) da pluralidade de pontos de operação, em que cada descritor de perfil e/ou nivel define um conjunto de opções de codificação disponíveis e/ou uma gama de valores de elementos de sintaxe disponíveis aos quais obedece uma sintaxe de pacotes com o ponto de operação associado ao respetivo descritor de perfil e/ou nível, a ele associado, em que um primeiro conjunto dos descritores de perfil e/ou nível sinaliza explicitamente a definição do conjunto de opções de codificação disponíveis e/ou gama de valores de elementos de sintaxe disponíveis, e um segundo conjunto não vazio e disjunto dos descritores de perfil e/ou nível sinaliza a definição do conjunto de opções de codificação disponíveis e/ou gama de valores de elementos de sintaxe disponíveis por referência a outro descritor de perfil e/ou nível precedente.

Noutro exemplo do fluxo de dados, cada descritor de perfil e/ou nível tem um campo que identifica o ponto de operação ao qual está associado o respetivo descritor de perfil e/ou nível.

Noutro exemplo do fluxo de dados, em cada descritor de perfil e/ou nível, o campo identifica o ponto de operação ao qual está associado o respetivo descritor de perfil e/ou nível utilizando uma sequência de bits comum aos identificadores de pontos de operação que identifica o ponto de operação ao qual está associado o respetivo descritor de perfil e/ou nível.

Noutro exemplo do fluxo de dados, todos os identificadores de pontos de operação têm um elemento de sintaxe de comprimento fixo de bits e um elemento de sintaxe de cenário, em que o elemento de sintaxe de cenário sinaliza n e uma associação de n partições do elemento de sintaxe de comprimento fixo de bits aos n eixos de escalabilidade, em que a sequência de bits é comum ao elemento de sintaxe de comprimento fixo de bits.

Noutro exemplo do fluxo de dados, o segundo conjunto não vazio e disjunto dos descritores de perfil e/ou nivel sinaliza a definição do conjunto de opções de codificação disponíveis e/ou gama de valores de elementos de sintaxe disponíveis por referência a outro descritor de perfil e/ou nível precedente utilizando uma sinalização explícita do campo do descritor de perfil e/ou nível referenciado, ou utilizando um apontador relativo definido em unidades de posições hierárquicas na ordem sequencial de pontos de operação.

Noutro exemplo do fluxo de dados, todos os identificadores de pontos de operação têm uma flag que sinaliza se os mesmos pertencem ao primeiro conjunto dos descritores de perfil e/ou nível que sinalizam explicitamente a definição do conjunto de opções de codificação disponíveis e/ou gama de valores de elementos de sintaxe disponíveis, e o segundo conjunto não vazio e disjunto dos descritores de perfil e/ou nível sinaliza a definição do conjunto de opções de codificação disponíveis e/ou gama de valores de elementos de sintaxe disponíveis por referência a outro descritor de perfil e/ou nível precedente.

Outro aspeto pode ter uma entidade de rede (por exemplo, descodificador ou MANE) para processar um fluxo de dados no qual está codificado um conteúdo de média, em que o fluxo de dados compreende pacotes, em que cada pacote compreende um identificador do tipo de pacote que identifica um tipo de pacote associado ao respetivo pacote de entre uma pluralidade de tipos de pacotes, em que cada pacote que tem um tipo de pacote de entre um primeiro conjunto da pluralidade de tipos de pacotes a ele associado compreende um identificador de ponto de operação que identifica um ponto de operação associado ao respetivo pacote de entre uma pluralidade de pontos de operação dentro de um espaço de escalabilidade abrangido por um número n de eixos de escalabilidade, com 0<n, em que os pontos de operação têm uma ordem sequencial de pontos de operação definida entre eles, em que cada pacote que tem qualquer tipo de pacote de entre um segundo conjunto do primeiro conjunto de tipos de pacotes a ele associado contém adicionalmente dados que contribuem para uma representação codificada do conteúdo de média no ponto de operação associado ao respetivo pacote juntamente com os pacotes que têm qualquer ponto de operação a eles associado que precede o ponto de operação associado ao respetivo pacote ou iguala o ponto de operação associado ao respetivo pacote, em que a entidade de rede é configurada para ler, de um pacote que tem um tipo de pacote predeterminado disjunto (isto é, externo) do segundo conjunto a ele associado, um descritor de eixos de escalabilidade que define o número do um ou mais eixos de escalabilidade e um seu significado semântico, e interpretar os identificadores de pontos de operação em função do descritor de eixos de escalabilidade.

Noutro exemplo, a entidade de rede é configurada para ler, do pacote que tem o tipo de pacote predeterminado disjunto (externo) do segundo conjunto a ele associado, uma sequência de descritores de perfil e/ou nível individualmente associada a pelo menos um subconjunto (por exemplo, os principais em termos da ordem sequencial de pontos de operação) da pluralidade de pontos de operação, em que cada descritor de perfil e/ou nivel define um conjunto de opções de codificação disponíveis e/ou uma gama de valores de elementos de sintaxe disponíveis aos quais obedece uma sintaxe de pacotes com o ponto de operação associado ao respetivo descritor de perfil e/ou nível, a ele associado, em que a entidade de rede é configurada para, em resposta a uma sinalização no fluxo de dados, ler explicitamente de um primeiro conjunto dos descritores de perfil e/ou nível a definição do conjunto de opções de codificação disponíveis e/ou gama de valores de elementos de sintaxe disponíveis, e ler, para um segundo conjunto não vazio e disjunto dos descritores de perfil e/ou nível, uma referência a outro descritor de perfil e/ou nível precedente e derivar a definição do conjunto de opções de codificação disponíveis e/ou gama de valores de elementos de sintaxe disponíveis do segundo conjunto não vazio e disjunto dos descritores de perfil e/ou nível a partir do respetivo descritor de perfil e/ou nível precedente referenciado.

Noutro exemplo da entidade de rede, a seguência de descritores de perfil e/ou nível é seguencialmente associada, na ordem sequencial de pontos de operação, ao pelo menos subconjunto (por exemplo, os principais em termos da ordem sequencial de pontos de operação) da pluralidade de pontos de operação.

Noutro exemplo da entidade de rede, cada descritor de perfil e/ou nível tem um campo que identifica o ponto de operação ao qual está associado o respetivo descritor de perfil e/ou nível.

Noutro exemplo da entidade de rede, em cada descritor de perfil e/ou nível, o campo identifica o ponto de operação ao qual está associado o respetivo descritor de perfil e/ou nível, utilizando uma sequência de bits comum aos identificadores de pontos de operação que identifica o ponto de operação ao qual está associado o respetivo descritor de perfil e/ou nível.

Noutro exemplo da entidade de rede, todos os identificadores de pontos de operação têm um elemento de sintaxe de comprimento fixo de bits e um elemento de sintaxe de cenário, em que o elemento de sintaxe de cenário sinaliza n e uma associação de n partições do elemento de sintaxe de comprimento fixo de bits aos n eixos de escalabilidade, em que a sequência de bits é comum ao elemento de sintaxe de comprimento fixo de bits.

Noutro exemplo da entidade de rede, o segundo conjunto não vazio e disjunto dos descritores de perfil e/ou nível sinaliza a definição do conjunto de opções de codificação disponíveis e/ou gama de valores de elementos de sintaxe disponíveis por referência a outro descritor de perfil e/ou nível precedente utilizando uma sinalização explícita do campo do descritor de perfil e/ou nível referenciado, ou utilizando um apontador relativo definido em unidades de posições hierárquicas na ordem sequencial de pontos de operação.

Noutro exemplo da entidade de rede, todos os identificadores de pontos de operação têm um elemento de sintaxe de comprimento fixo de bits e um elemento de sintaxe de cenário, em que a entidade de rede é configurada para utilizar o elemento de sintaxe de cenário para determinar n e associar n partições do elemento de sintaxe de comprimento fixo de bits aos n eixos de escalabilidade de modo que a enésima porção é uma medida ordinal de uma posição do respetivo ponto de operação ao longo do enésimo eixo de escalabilidade.

Noutro exemplo, a entidade de rede é configurada para fornecer uma seleção entre os pacotes que têm qualquer tipo de pacote de entre o primeiro conjunto da pluralidade de tipos de pacotes a eles associado com base na interpretação.

Outro exemplo pode ter uma entidade de rede (por exemplo, descodificador ou MANE) para processar um fluxo de dados no qual está codificado um conteúdo de média, em que o fluxo de dados compreende pacotes, em que cada pacote compreende um identificador do tipo de pacote que identifica um tipo de pacote associado ao respetivo pacote de entre uma pluralidade de tipos de pacotes, em que cada pacote que tem um tipo de pacote de entre um primeiro conjunto da pluralidade de tipos de pacotes a ele associado compreende um identificador de ponto de operação que identifica um ponto de operação associado ao respetivo pacote de entre uma pluralidade de pontos de operação dentro de um espaço de escalabilidade abrangido por um número n de eixos de escalabilidade, com 0<n, em que os pontos de operação têm uma ordem sequencial de pontos de operação definida entre eles, em que cada pacote com qualquer tipo de pacote de entre um segundo conjunto do primeiro conjunto de tipos de pacotes a ele associado contém adicionalmente dados que contribuem para uma representação codificada do conteúdo de média no ponto de operação associado ao respetivo pacote juntamente com os pacotes que têm qualquer ponto de operação a eles associado que precede o ponto de operação associado ao respetivo pacote, ou é igual ao ponto de operação associado ao respetivo pacote, em que a entidade de rede é configurada para ler, de um pacote que tem um tipo de pacote predeterminado disjunto (externo) do segundo conjunto a ele associado, uma sequência de descritores de perfil e/ou nível sequencialmente associada, na ordem sequencial de pontos de operação, a pelo menos um subconjunto (os principais em termos da ordem sequencial de pontos de operação) da pluralidade de pontos de operação, em que cada descritor de perfil e/ou nível define um conjunto de opções de codificação disponíveis e/ou uma gama de valores de elementos de sintaxe disponíveis aos quais obedece uma sintaxe de pacotes com o ponto de operação associado ao respetivo descritor de perfil e/ou nível, a ele associado, em que a entidade de rede é configurada para, em resposta a uma sinalização no fluxo de dados, ler explicitamente de um primeiro conjunto dos descritores de perfil e/ou nível a definição do conjunto de opções de codificação disponíveis e/ou gama de valores de elementos de sintaxe disponíveis, e ler, para um segundo conjunto não vazio e disjunto dos descritores de perfil e/ou nível, uma referência a outro descritor de perfil e/ou nível precedente e derivar a definição do conjunto de opções de codificação disponíveis e/ou gama de valores de elementos de sintaxe disponíveis do segundo conjunto não vazio e disjunto dos descritores de perfil e/ou nível a partir do respetivo descritor de perfil e/ou nível precedente referenciado.

Noutro exemplo, a entidade de rede é configurada para fornecer uma seleção entre os pacotes com qualquer tipo de pacote de entre o primeiro conjunto da pluralidade de tipos de pacotes a ele associado com base no conjunto de opções de codificação disponíveis e/ou uma gama de valores de elementos de sintaxe disponíveis associados. A descrição da seguinte forma de realização começa com uma introdução adicional que, todavia, também pode ser transferida para as formas de realização descritas até agora.

Para além de registar, armazenar e correr o vídeo, a sua transmissão é uma aplicação importante nas redes de comunicação atuais. A natureza irregular de canais de comunicação específicos requer que meios de adaptação sejam proporcionados pela sintaxe de nível elevado de HEVC para se obter um bom desempenho em diferentes ambientes. A adaptação direta de fluxos de bits de vídeo dentro da rede durante a transmissão, por exemplo, por Elementos de Rede Cientes de Média (MANEs), é um dos desafios principais. Habitualmente, tais dispositivos têm apenas recursos limitados em termos de poder de processamento e têm de operar com um retardamento muito baixo que impede a análise do fluxo de bits em profundidade.

Os requisitos desta montagem já foram identificados na padronização de H.264/AVC. A encapsulação de dados de vídeo em unidades de Camadas de Abstração de Rede (NAL) e a decisão de conceção de sinalizar muitos parâmetros importantes mas bastante invariantes fora do fluxo de bits de vídeo em denominados

Conjuntos de Parâmetros refletem esta compreensão. Uma ausência de extensibilidade da especificação de base de H.264/AVC conduziu a abordagens complicadas para estender a sintaxe de nível elevado de H.264/AVC de um modo retrocompatível quando foram especificadas extensões. Para HEVC, deve ter-se o cuidado de dispor de uma sintaxe de nível elevado flexível e extensível na especificação de base. Em consequência, a sintaxe de nível elevado tem de dotar dispositivos, tais como MANEs, da informação necessária numa forma acessível, por exemplo, não descodificada por entropia, e adequada para sinalizar adaptação de um modo direto. 0 exposto abaixo assume o conceito de um Conjunto de Parâmetros de Vídeo (VPS) como definido no corrente esboço de especificação para proporcionar informação necessária para adaptação do fluxo de bits de vídeo, como descrições de pontos de operação e dependências de codificação. Combina a informação que, em H.264 e suas extensões, é distribuída ao lonqo dos conjuntos de parâmetros de sequências específicos de camadas (SPSs) e assenta sobre os SPSs na hierarquia de conjuntos de parâmetros. A corrente definição do VPS na especificação do esboço de base de HEVC define que o VPS contém apenas cópias redundantes de alquma sintaxe relacionada com requisitos subnível para escalabilidade temporal que estão localizadas no SPS em H.264 e suas extensões. Assim, o VPS não é necessário para a descodificação da sequência de vídeo codificada. No entanto, de acordo com a forma de realização abaixo, a sinalização redundante é omitida e o elemento de sintaxe é mantido apenas no VPS. No entanto e adicionalmente, de acordo com a forma de realização abaixo, a sinalização dos requisitos de perfil, nível e subnível é alterada de um modo que a sua hierarquia inerente é refletida na sua posição dentro da hierarquia de conjuntos de parâmetros (VPS, SPS e PPS) . Isto siqnifica que os parâmetros mais básicos e fundamentais para a adaptação e modificação de capacidade do fluxo de bits, isto é, informação do perfil e nível, são proporcionados no topo da hierarquia do conjunto de parâmetros, nomeadamente o VPS, ao passo que requisitos de subnível menos importantes, isto é, sps_max_latency_increase[ i ], vps num reorder pics[ i ], vps max dec pic buffering[ i ] são sinalizados no SPS tal como em versões anteriores da especificação do esboço. Deste modo será disponibilizada informação muito importante a MANEs de um modo direto sem a necessidade de compilar informação de vários SPSs. Aplicações que se baseiam em menores requisitos de nivel, tais como requisitos subnível para escalabilidade temporal, ainda podem encontrar a informação desejada numa forma não compilada em passos mais baixos da hierarquia do conjunto de parâmetros. Em termos gerais, um MANE não especifico para aplicações está muito pouco interessado em tal informação de capacidades de baixo nivel de dispositivos finais. É esperado que os requisitos de perfil e nivel sejam suficientemente finos para a maior parte das aplicações, e aplicações de casos limite ainda podem recolher esta informação a partir dos conjuntos de parâmetros de nivel mais baixo.

Um VPS definido deste modo permite que um MANE esteja totalmente ciente das dimensões de escalabilidade e perfil e nivel associados a cada ponto de operação. Pontos de operação dentro das dimensões de escalabilidade com identificadores de perfil e nivel redundantes podem ser sinalizados por referência a sinalização redundante decrescente. A utilização da sintaxe de dados de extensão de VPS para sinalizar descrições de pontos de operação individuais permite uma estrutura modular direta que pode ser facilmente construída por um codificador. É proposta uma mensagem SEI para tornar MANEs e recetores cientes de sequências de vídeo possivelmente adaptadas, onde nem todos os pontos de operação descritos no VPS e suas extensões estão presentes. Permitir que MANEs estejam cientes do conteúdo real (adaptado) da sequência de vídeo é importante para facilitar adaptação suplementar, por exemplo, num processo de adaptação em cascata com múltiplos MANEs.

Para sinalizar genericamente o ponto de operação de uma unidade NAL dentro das dimensões de escalabilidade que ocorrem no nivel do cabeçalho de unidades NAL, os bits reservados no segundo byte do cabeçalho de unidades NAL são utilizados para sinalizar um identificador de camadas para identificar camadas intensificadas ou visões da camada ou visão de base. A informação necessária para interpretar o identificador de camadas de uma unidade NAL em termos das dimensões de escalabilidade da sequência de video codificada é proporcionada através do VPS. Esta sinalização inclui o tipo de escalabilidade e informação sobre como os bits individuais do identificador de camadas correspondem a dimensões de escalabilidade aplicáveis. Tal permite que um MANE ou qualquer outro dispositivo construa corretamente uma matriz de pontos de operação de escalabilidade possivelmente multidimensional (temporal, qualidade, espacial, multivista, profundidade...) a partir da informação proporcionada no cabeçalho de unidades NAL e no VPS. A sintaxe de unidades NAL da forma de realização descrita agora é mostrada na Fig. 11, onde layer_id_plusl minus 1 indica a identificação da camada. Um layer_id_plusl igual a 1 indica que a identificação da camada é igual a 0, e a unidade NAL pertence à camada de base ou visão de base. Valores mais elevados de layer_id_plusl indicam que a unidade NAL correspondente pertence a uma camada ou visão intensificada associada ao layer_id_plusl especificado. A correspondente sintaxe de SPS é mostrada na Fig. 12 e a correspondente sintaxe de VPS na Fig. 13, em que: scalability_type indica os tipos de escalabilidade utilizados na sequência de video codificada e as dimensões sinalizadas através de layer_id_plus1 no cabeçalho de unidades NAL. Quando scalability type é igual a 0, a sequência de video codificada é conforme à especificação de HEVC de base, assim layer_id_plusl de todas as unidades NAL é igual ale não há unidades NAL pertencentes a uma camada ou visão intensificada. Valores mais elevados de scalability_type devem ser interpretados de acordo com a Tabela 4. profile_space, profile_idc, constraint_flags e profile_compatability_flag sinalizam informação como especificada no corrente WD e os valores indicados são válidos para todas as unidades NAL com um layer_id_plus igual a 1. level_idc[ i ] sinaliza informação como especificada no corrente WD e os valores indicados são válidos para todas as unidades NAL com um layer_id_plus igual ale um temporal_id igual a i. layer_id_plusl_dim_len [ dim ] indica o comprimento em bits de layer_id_plusl que é utilizado para sinalizar a enésima dimensão de escalabilidade de acordo com a Fig. 13 começando no MSB para n = 0 ou o final da (n-l)a dimensão de escalabilidade sinalizada para n > 0.

Tabela 4: Tabela de mapeamento de scalability_type proposto

Os tipos de escalabilidade definidos de modo exemplificativo na Tabela 4 representam um conjunto de escalabilidades que podem ser antecipadas nesta altura, mas que podem ser estendidas com novas dimensões e/ou combinações assim que o trabalho em extensões de HEVC progrida. A correspondente sintaxe de dados de extensão de VPS está mostrada na Fig. 14, em que: vps_extension_type indica o tipo da extensão de VPS. Quando o valor de vps_extension_type é igual a 0, aplica-se a sintaxe apresentada acima. layer_id_plusl indica o layer_id para o qual são válidos os elementos de sintaxe sinalizados na extensão de VPS. max_temporal_layers_minusl plus 1 especifica o número máximo de subcamadas temporais que podem estar presentes em unidades NAL com um layer_id_plus1 igual ao layer_id_plusl sinalizado no VPS. new_profile_level_flag igual a 0 indica que a sinalização do perfil e nivel associados a um valor de layer_id_plusl igual aos valores especificados por profile_reference_layer_id_plusl é válida para a unidade NAL com layer id plusl especifico dentro da extensão de VPS. new_profile_level_flag igual a 1 indica que o perfil e nivel para o valor especificado de layer_id_plusl é sinalizado explicitamente na extensão de VPS. profile_reference_layer_id_plusl indica o valor de layer_id_plusl cuja sinalização de perfil e nivel associada é válida para unidades NAL com um valor de layer id plusl igual ao valor de layer_id_plusl sinalizado na extensão de VPS. profile_space, profile_idc, constraint_flags e profile_compatability_flag sinalizam informação como especificada no corrente WD e os valores indicados são válidos para todas as unidades NAL com um layer_id_plusl igual aos valores de layer id plusl especificados nos dados de extensão de VPS. level ide [ i ] sinaliza informação como especificada no corrente WD e os valores indicados são valores para todas as unidades NAL com um layer_id_plusl igual a valores de layer_id_plusl especificados nos dados de extensão de VPS e um temporal_id igual a i. num_reference_layers especifica o número de camadas, identificadas por layer_id, a serem utilizadas como referências no processo de descodificação. direct_coding_dependency_layer_id_plusl indica o layer_id_plusl de unidades NAL a serem utilizadas como referências no processo de descodificação. A forma de realização que foi agora descrita é muito semelhante à que havia sido descrita relativamente às Figs. 4 até 6. A este respeito utilizaram-se os mesmos sinais de referência como anteriormente para identificar elementos de sintaxe correspondentes nas Figs. 11 até 14. A este respeito, a descrição da Fig. 7 também é aplicável à nova forma de realização, em que diferenças que haja são salientadas abaixo.

Em particular, de acordo com as formas de realização das Figs. 11 até 14, o identificador de ponto de operação 34 foi separado de modo fixo em dois componentes, nomeadamente um primeiro componente que identifica a hierarquia num eixo de escalabilidade temporal na forma do elemento de sintaxe temporal_id 90, e um segundo componente que trata a hierarquia ou dispõe hierarquicamente de acordo com o eixo de escalabilidade adicional, em que o segundo componente é designado 92. A este respeito, a forma de realização que foi descrita relativamente às Figs. 11 até 14 corresponde à forma de realização anterior com a exceção de ter o segundo componente 92, que é adicionalmente especificado pelo descritor de eixos de escalabilidade.

Outra diferença diz respeito ao conhecimento do número de eixos de escalabilidade. Na forma de realização das Figs. 4 até 6, foi proporcionada uma informação intermédia na forma do elemento de sintaxe de cenário 60 para dotar entidades de rede da oportunidade de derivar, apenas com base no próprio pacote individual, onde é que o ponto de operação deste pacote está posicionado, num sentido comum, dentro do espaço de escalabilidade. Na presente forma de realização, uma entidade de rede é meramente capaz de derivar os seguintes factos no caso de ausência de disponibilidade de uma unidade NAL de VPS 42: 1) a posição do ponto de operação do corrente pacote ao longo do temporal eixo utilizando temporal_id 90. 2) Se layer_id_plusl for igual a 1, o ponto de operação situa-se na hierarquia mais baixa relativamente a todos os outros eixos de escalabilidade excetuando o eixo de escalabilidade temporal.

Como descrito aqui em seguida, todas as diferenças agora salientadas podem ser aplicadas individualmente e, em conformidade, se o elemento de sintaxe temporal_id 90 não for utilizado, uma entidade de rede pode derivar do facto de layer_id_plusl ser igual a 1 que o ponto de operação do corrente pacote designa a camada de base de acordo com todos os eixos de escalabilidade. A este respeito, deve notar-se que a escolha de layer_id_plusl igual a 1 designar a hierarquia mais baixa relativamente a todos os outros eixos de escalabilidade exceto o temporal foi feita meramente como um exemplo e pode ser variada, tal como, por exemplo, de modo que layer_id_plusl iguale 0.

Uma diferença adicional relativamente à forma de realização acima delineada das Figs. 4 até 6 refere-se ao descritor de eixos de escalabilidade 38. Um elemento de sintaxe com valor escalar 94, nomeadamente scalability type, identifica o número de eixos de escalabilidade (acima do temporal) e os significados correspondentes destes eixos de escalabilidade (adicionais) , ao passo que, para cada um deste número indicado de eixos de escalabilidade (adicionais), uma porção de sintaxe 96 revela a partição do elemento de sintaxe de comprimento fixo 60 subjacente ao componente 92, campo 56 e campo de referência 52 por atribuição sequencial de bits deste elemento de sintaxe de comprimento fixo 60 aos eixos de escalabilidade individuais (adicionais).

Outra diferença refere-se aos pacotes de VPS e ao facto de os mesmos compreenderem adicionalmente listas de referência de identificadores de pontos de operação 98. Para cada campo 56, tal lista de referência de identificadores de pontos de operação 98 identifica aqueles identificadores de pontos de operação ou aqueles valores de layer_id_plusl que formam a base necessária para uma reconstrução do ponto de operação ao qual se refere o campo 56. Por outras palavras, a lista de referência de identificadores de pontos de operação 98 identifica todos os pontos de operação contidos numa combinação 24 (ver Fig. lb ou 3) resultante da adição dos dados de pacotes do ponto de operação identificado pelo campo 56. Deve notar-se que, para um certo campo 56, a lista de referência de identificadores de pontos de operação 98 não tem necessariamente de listar todos os pontos de operação incluídos na respetiva combinação 24 do ponto de operação identificado pelo campo 56. Ao invés, será suficiente que a lista de referência de identificadores de pontos de operação liste um ou mais dos pontos de operação de referência, cujas correspondentes combinações 24 resultam na combinação 24 do ponto de operação identificado pelo respetivo campo 56.

Por outras palavras, neste aspeto que é vantajoso para a sua codificação eficiente das restrições de nível e/ou perfil impostas às camadas de escalabilidade, um fluxo de dados no qual está codificado um conteúdo de média compreende pacotes (comparar unidades NAL), em que cada pacote compreende um identificador do tipo de pacote nal_unit_type que identifica um tipo de pacote associado ao respetivo pacote de entre uma pluralidade de tipos de pacotes, em que cada pacote que tem um tipo de pacote de entre um primeiro conjunto da pluralidade de tipos de pacotes a ele associado (por exemplo, todas as unidades NAL) compreende um identificador de ponto de operação layer_id_plusl que identifica um ponto de operação associado ao respetivo pacote de entre uma pluralidade de pontos de operação dentro de um espaço de escalabilidade abranqido por um número n de eixos de escalabilidade, com 0<n, em que os pontos de operação têm uma ordem sequencial de pontos de operação definida entre eles, em que cada pacote que tem qualquer tipo de pacote de entre um sequndo conjunto do primeiro conjunto de tipos de pacotes a ele associado (por exemplo, unidades NAL não de VPS) contém adicionalmente dados que contribuem para uma representação codificada do conteúdo de média no ponto de operação associado ao respetivo pacote juntamente com os pacotes que têm qualquer ponto de operação a eles associado que precede o ponto de operação associado ao respetivo pacote ou iquala o ponto de operação associado ao respetivo pacote, em que cada pacote (comparar unidades NAL de VPS) que tem um tipo de pacote predeterminado disjunto (isto é, externo) do sequndo conjunto a ele associado tem um descritor de eixos de escalabilidade (comparar scalability_type e layer_id_plusl_dim_len) que define o número do um ou mais eixos de escalabilidade e um seu siqnifiçado semântico.

Outro exemplo do fluxo de dados, em que cada um dos pacotes que têm o tipo de pacote predeterminado a eles associado também compreende uma sequência de descritores de perfil e/ou nível vps_extension_data individualmente associada a pelo menos um subconjunto (por exemplo, os principais em termos da ordem sequencial de pontos de operação) da pluralidade de pontos de operação, em que cada descritor de perfil e/ou nivel define um conjunto de opções de codificação disponíveis (comparar perfil) e/ou uma qama de valores de elementos de sintaxe disponíveis (comparar nível) aos quais obedece uma sintaxe de pacotes com o ponto de operação associado ao respetivo descritor de perfil e/ou nível, a ele associado, em que um primeiro conjunto dos descritores de perfil e/ou nível sinaliza explicitamente a definição do conjunto de opções de codificação disponíveis e/ou gama de valores de elementos de sintaxe disponíveis (comparar new_profile_level_flag=l) e um segundo conjunto não vazio e disjunto dos descritores de perfil e/ou nível sinaliza a definição do conjunto de opções de codificação disponíveis e/ou gama de valores de elementos de sintaxe disponíveis por referência a outro descritor de perfil e/ou nível precedente (comparar new_profile_level_flag=0).

Noutro exemplo do fluxo de dados, cada descritor de perfil e/ou nível tem um campo (comparar layer id plusl) que identifica o ponto de operação ao qual está associado o respetivo descritor de perfil e/ou nível (isto é, juntamente com 4), a ordem sequencial de pontos de operação pode ser derivada da sequência de descritores de perfil e/ou nível.

Noutro exemplo do fluxo de dados, em cada descritor de perfil e/ou nível, o campo identifica o ponto de operação ao qual está associado o respetivo descritor de perfil e/ou nível, utilizando uma sequência de bits comum aos identificadores de pontos de operação que identifica o ponto de operação ao qual está associado o respetivo descritor de perfil e/ou nivel.

Noutro exemplo do fluxo de dados, todos os identificadores de pontos de operação têm um elemento de sintaxe de comprimento fixo de bits (comparar layer_id_plusl), e o descritor de acesso de escalabilidade sinaliza n max_dim e uma associação de n partições layer_id_plusl_dim_len do elemento de sintaxe de comprimento fixo de bits aos n eixos de escalabilidade, em que a sequência de bits é comum ao elemento de sintaxe de comprimento fixo de bits.

Noutro exemplo do fluxo de dados, o sequndo conjunto não vazio e disjunto dos descritores de perfil e/ou nivel sinaliza a definição do conjunto de opções de codificação disponíveis e/ou qama de valores de elementos de sintaxe disponíveis por referência a outro descritor de perfil e/ou nível precedente utilizando uma sinalização explícita do campo do descritor de perfil e/ou nível referenciado, ou utilizando um apontador relativo definido em unidades de posições hierárquicas na ordem sequencial de pontos de operação (em que a sequnda alternativa é uma alternativa à descrição acima).

De acordo com outro aspeto do fluxo de dados, todos os identificadores de pontos de operação têm um elemento de sintaxe de comprimento fixo de bits, e o descritor de eixos de escalabilidade sinaliza n e uma associação de n partições do elemento de sintaxe de comprimento fixo de bits aos n eixos de escalabilidade, de modo que a enésima porção é uma medida ordinal de uma posição do respetivo ponto de operação ao lonqo do enésimo eixo de escalabilidade.

De acordo com outro aspeto do fluxo de dados, o descritor de eixos de escalabilidade (comparar scalability_type) compreende um elemento de sintaxe cujos possíveis estados estão individualmente associados a diferentes combinações de valores para n e significado semântico do correspondente significado semântico dos n eixos de escalabilidade (isto é, uma função mapeia {n, significado (1), significado(n)} em {l...max. estado possível de scalability_type}).

Noutro fluxo de dados no qual está codificado um conteúdo de média, o fluxo de dados compreende pacotes, em que cada pacote compreende um identificador do tipo de pacote que identifica um tipo de pacote associado ao respetivo pacote de entre uma pluralidade de tipos de pacotes, em que cada pacote que tem um tipo de pacote de entre um primeiro conjunto da pluralidade de tipos de pacotes a ele associado compreende um identificador de ponto de operação que identifica um ponto de operação associado ao respetivo pacote de entre uma pluralidade de pontos de operação dentro de um espaço de escalabilidade abrangido por um número n de eixos de escalabilidade, com 0<n, em que os pontos de operação têm uma ordem sequencial de pontos de operação definida entre eles, em que cada pacote com qualquer tipo de pacote de entre um segundo conjunto do primeiro conjunto de tipos de pacotes a ele associado contém adicionalmente dados que contribuem para uma representação codificada do conteúdo de média no ponto de operação associado ao respetivo pacote juntamente com os pacotes que têm qualquer ponto de operação a eles associado que precede o ponto de operação associado ao respetivo pacote, ou é igual ao ponto de operação associado ao respetivo pacote, em que cada pacote que tem um tipo de pacote predeterminado disjunto (externo) do segundo conjunto a ele associado compreende uma sequência de descritores de perfil e/ou nível individualmente associada a pelo menos um subconjunto (por exemplo, os principais em termos da ordem sequencial de pontos de operação) da pluralidade de pontos de operação, em que cada descritor de perfil e/ou nível define um conjunto de opções de codificação disponíveis e/ou uma gama de valores de elementos de sintaxe disponíveis aos quais obedece uma sequência de pacotes com o ponto de operação associado ao respetivo descritor de perfil e/ou nível, a ele associado, em que um primeiro conjunto dos descritores de perfil e/ou nível sinaliza explicitamente a definição do conjunto de opções de codificação disponíveis e/ou qama de valores de elementos de sintaxe disponíveis, e um sequndo conjunto não vazio e disjunto dos descritores de perfil e/ou nível sinaliza a definição do conjunto de opções de codificação disponíveis e/ou gama de valores de elementos de sintaxe disponíveis por referência a outro descritor de perfil e/ou nível precedente.

Noutro exemplo do fluxo de dados, todos os identificadores de pontos de operação têm um elemento de sintaxe de comprimento fixo de bits e o descritor de acesso de escalabilidade sinaliza n max_dim e uma associação de n partições layer id plusl dim len) do elemento de sintaxe de comprimento fixo de bits aos n eixos de escalabilidade, em que a sequência de bits é comum ao elemento de sintaxe de comprimento fixo de bits. Noutro exemplo do fluxo de dados, o segundo conjunto não vazio e disjunto dos descritores de perfil e/ou nivel sinaliza a definição do conjunto de opções de codificação disponíveis e/ou gama de valores de elementos de sintaxe disponíveis por referência a outro descritor de perfil e/ou nível precedente utilizando uma sinalização explícita do campo do descritor de perfil e/ou nível referenciado, ou utilizando um apontador relativo definido em unidades de posições hierárquicas na ordem sequencial de pontos de operação.

Noutro exemplo do fluxo de dados, todos os identificadores de pontos de operação têm uma flag que sinaliza se os mesmos pertencem ao primeiro conjunto dos descritores de perfil e/ou nível que sinaliza explicitamente a definição do conjunto de opções de codificação disponíveis e/ou gama de valores de elementos de sintaxe disponíveis, e o segundo conjunto não vazio e disjunto dos descritores de perfil e/ou nível sinaliza a definição do conjunto de opções de codificação disponíveis e/ou gama de valores de elementos de sintaxe disponíveis por referência a outro descritor de perfil e/ou nível precedente.

Outro aspeto pode ter uma entidade de rede (por exemplo, descodificador ou MANE) para processar um fluxo de dados no qual está codificado um conteúdo de média, em que o fluxo de dados compreende pacotes, em que cada pacote compreende um identificador do tipo de pacote que identifica um tipo de pacote associado ao respetivo pacote de entre uma pluralidade de tipos de pacotes, em que cada pacote que tem um tipo de pacote de entre um primeiro conjunto da pluralidade de tipos de pacotes a ele associado compreende um identificador de ponto de operação que identifica um ponto de operação associado ao respetivo pacote de entre uma pluralidade de pontos de operação dentro de um espaço de escalabilidade abrangido por um número n de eixos de escalabilidade, com 0<n, em que os pontos de operação têm uma ordem sequencial de pontos de operação definida entre eles, em que cada pacote que tem qualquer tipo de pacote de entre um sequndo conjunto do primeiro conjunto de tipos de pacotes a ele associado contém adicionalmente dados que contribuem para uma representação codificada do conteúdo de média no ponto de operação associado ao respetivo pacote juntamente com os pacotes que têm qualquer ponto de operação a eles associado que precede o ponto de operação associado ao respetivo pacote ou iquala o ponto de operação associado ao respetivo pacote, em que a entidade de rede é confiqurada para ler, de um pacote que tem um tipo de pacote predeterminado disjunto (isto é, externo) do segundo conjunto a ele associado, um descritor de eixos de escalabilidade que define o número do um ou mais eixos de escalabilidade e um seu significado semântico, e interpretar os identificadores de pontos de operação em função do descritor de eixos de escalabilidade.

Noutro exemplo, a entidade de rede é configurada para ler, do pacote que tem o tipo de pacote predeterminado disjunto (externo) do segundo conjunto a ele associado, uma sequência de descritores de perfil e/ou nivel individualmente associada a pelo menos um subconjunto (por exemplo, os principais em termos da ordem sequencial de pontos de operação) da pluralidade de pontos de operação, em que cada descritor de perfil e/ou nivel define um conjunto de opções de codificação disponíveis e/ou uma gama de valores de elementos de sintaxe disponíveis aos quais obedece uma sintaxe de pacotes com o ponto de operação associado ao respetivo descritor de perfil e/ou nível, a ele associado, em que a entidade de rede é configurada para, em resposta a uma sinalização no fluxo de dados, ler explicitamente de um primeiro conjunto dos descritores de perfil e/ou nível a definição do conjunto de opções de codificação disponíveis e/ou gama de valores de elementos de sintaxe disponíveis, e ler, para um segundo conjunto não vazio e disjunto dos descritores de perfil e/ou nível, uma referência a outro descritor de perfil e/ou nível precedente e derivar a definição do conjunto de opções de codificação disponíveis e/ou gama de valores de elementos de sintaxe disponíveis do segundo conjunto não vazio e disjunto dos descritores de perfil e/ou nível a partir do respetivo descritor de perfil e/ou nível precedente referenciado.

Noutro exemplo da entidade de rede, todos os identificadores de pontos de operação têm um elemento de sintaxe de comprimento fixo de bits e o descritor de acesso de escalabilidade sinaliza n max dim e uma associação de n partições layer id plusl dim len do elemento de sintaxe de comprimento fixo de bits aos n eixos de escalabilidade, em que a sequência de bits é comum ao elemento de sintaxe de comprimento fixo de bits.

Noutro exemplo da entidade de rede, o segundo conjunto não vazio e disjunto dos descritores de perfil e/ou nível sinaliza a definição do conjunto de opções de codificação disponíveis e/ou gama de valores de elementos de sintaxe disponíveis por referência a outro descritor de perfil e/ou nivel precedente utilizando uma sinalização explicita do campo do descritor de perfil e/ou nivel referenciado, ou utilizando um apontador relativo definido em unidades de posições hierárquicas na ordem sequencial de pontos de operação.

Noutro exemplo da entidade de rede, todos os identificadores de pontos de operação têm um elemento de sintaxe de comprimento fixo de bits e o descritor de acesso de escalabilidade sinaliza n max_dim e uma associação de n partições layer_id_plusl_dim_len do elemento de sintaxe de comprimento fixo de bits aos n eixos de escalabilidade de modo que a enésima porção é uma medida ordinal de uma posição do respetivo ponto de operação ao lonqo do enésimo eixo de escalabilidade.

Outro exemplo pode ter uma entidade de rede (por exemplo, descodificador ou MANE) para processar um fluxo de dados no qual está codificado um conteúdo de média, em que o fluxo de dados compreende pacotes, em que cada pacote compreende um identificador do tipo de pacote que identifica um tipo de pacote associado ao respetivo pacote de entre uma pluralidade de tipos de pacotes, em que cada pacote que tem um tipo de pacote de entre um primeiro conjunto da pluralidade de tipos de pacotes a ele associado compreende um identificador de ponto de operação que identifica um ponto de operação associado ao respetivo pacote de entre uma pluralidade de pontos de operação dentro de um espaço de escalabilidade abrangido por um número n de eixos de escalabilidade, com 0<n, em que os pontos de operação têm uma ordem sequencial de pontos de operação definida entre eles, em que cada pacote com qualquer tipo de pacote de entre um segundo conjunto do primeiro conjunto de tipos de pacotes a ele associado contém adicionalmente dados que contribuem para uma representação codificada do conteúdo de média no ponto de operação associado ao respetivo pacote juntamente com os pacotes que têm qualquer ponto de operação a eles associado que precede o ponto de operação associado ao respetivo pacote, ou é igual ao ponto de operação associado ao respetivo pacote, em que a entidade de rede é configurada para ler, de um pacote que tem um tipo de pacote predeterminado disjunto (externo) do segundo conjunto a ele associado, uma sequência de descritores de perfil e/ou nivel sequencialmente associada, na ordem sequencial de pontos de operação, a pelo menos um subconjunto (os principais em termos da ordem sequencial de pontos de operação) da pluralidade de pontos de operação, em que cada descritor de perfil e/ou nivel define um conjunto de opções de codificação disponíveis e/ou uma gama de valores de elementos de sintaxe disponíveis aos quais obedece uma sintaxe de pacotes com o ponto de operação associado ao respetivo descritor de perfil e/ou nível, a ele associado, em que a entidade de rede é configurada para, em resposta a uma sinalização no fluxo de dados, ler explicitamente de um primeiro conjunto dos descritores de perfil e/ou nível a definição do conjunto de opções de codificação disponíveis e/ou gama de valores de elementos de sintaxe disponíveis, e ler, para um segundo conjunto não vazio e disjunto dos descritores de perfil e/ou nível, uma referência a outro descritor de perfil e/ou nível precedente e derivar a definição do conjunto de opções de codificação disponíveis e/ou gama de valores de elementos de sintaxe disponíveis do segundo conjunto não vazio e disjunto dos descritores de perfil e/ou nível a partir do respetivo descritor de perfil e/ou nível precedente referenciado.

Noutro exemplo, a entidade de rede é configurada para fornecer uma seleção entre os pacotes com qualquer tipo de pacote de entre o primeiro conjunto da pluralidade de tipos de pacotes a ele associado com base no conjunto de opções de codificação disponíveis e/ou uma gama de valores de elementos de sintaxe disponíveis associado.

Os seguintes desvios das formas de realização acima são exeguíveis. Por exemplo, em vez de ter um descritor de perfil/nível para exatamente um ponto de operação ou ID de camada, um agrupamento dos pontos de operação ou IDs de camadas em conjuntos de camadas pode ser sinalizado no fluxo de dados, tal como no VPS, com associação de cada descritor de perfil/nível a um respetivo dos conjuntos. Por exemplo, um campo de flags pode ser sinalizado para sinalizar o agrupamento: para cada conjunto, uma flag para cada ponto de operação pode estar presente para sinalizar se o respetivo ponto de operação pertence ou não ao respetivo conjunto. Assim, em vez de o campo 56 citar qualquer ID de camada, o campo do descritor de perfil/nível 56 pode indexar um conjunto de entre os conjuntos sinalizados de IDs de camadas, isto é, de entre os conjuntos de pontos de operação. Em conformidade, a referência de outro descritor de perfil/nível será efetuada via sinalização de outro conjunto de camadas no campo 52 em vez de sinalização aí de um ID de camada individual.

Além disso, relativamente ao descritor de eixos de escalabilidade 38, o mesmo pode ser sinalizado diferentemente: um campo de tipo de escalabilidade composto por uma sequência de flags, cada uma associada a um certo tipo de escalabilidade, pode estar presente no fluxo de dados no VPS, por exemplo, e sinalizar se o respetivo tipo de escalabilidade está ou não presente. Na ordem das flags dentro deste campo, as flags fixadas irão assim sinalizar o número de eixos de escalabilidade bem como o seu significado semântico. A subdivisão da sequência de bits do campo de ID de camada 34 nos fragmentos 62 pode ser efetuada utilizando um indicador de comprimento por tipo de escalabilidade, isto é, por flag fixada no campo do tipo de escalabilidade, tal como efetuado por layer_id_plusl_dim_len. Em conjunto, o campo do tipo de escalabilidade e layer_id_plusl_dim_len formam o descritor de eixos de escalabilidade 38.

Acima utilizou-se um par de uma lista 98 de identificadores de pontos de operação de referência e um campo 56 que identifica o ponto de operação (ou conjunto de pontos de operação) ao qual está associada a lista 98 de identificadores de pontos de operação de referência para indicar a ordem sequencial de pontos de operação, isto é, a dependência entre as camadas. Tal foi uma possibilidade para permitir que pontos de operação dependam de mais do que um predecessor dos pontos de operação ao lonqo da sua ordem de identificadores de pontos de operação. Num caso de utilização com imaqens de múltiplas câmaras, por exemplo, a sinalização de múltiplas imagens de referência (isto é, múltiplos valores de nuh_layer_id) por imagem codificada (isto é, um valor individual de nuh_layer_id) é benéfica, pois podem ocorrer oclusões e revelação de áreas de imagens correspondentes em imagens de câmaras vizinhas, dependendo da translação das câmaras entre si. Em consequência, a referência de imagens de múltiplas câmaras pode conduzir a uma eficiência de codificação mais elevada, pois áreas de imagens reveladas (isto é, textura) podem ser previstas em vez de intracodif içadas a partir de qualquer uma das imagens de câmaras de referência. Os benefícios da codificação não se limitam a referências dentro da mesma dimensão de escalabilidade, por exemplo, pode utilizar-se uma imagem de profundidade (relacionada com a imagem de câmara correntemente codificada ou outra imagem de câmara) para prever vetores de movimento para a imagem de câmara dependente correntemente codificada. No entanto, a sinalização que permite que um ponto de operação dependa de mais do que um ponto de operação com um identificador de ponto de operação mais baixo a ele associado também pode ser implementada de modo diferente. Por exemplo, para cada ponto de operação, flags podem sinalizar quais os pontos de operação precedentes no ID de camada, isto é, com um identificador de ponto de operação mais baixo, de que depende o respetivo ponto de operação. 0 campo pode ser sinalizado numa forma condensada: os N pontos de operação que ocorrem no fluxo de bits têm uma ordem definida entre eles que é definida pelo seu identificador de ponto de operação. Assim, a sequência de pontos de operação pode ser rastreada desde o sequndo menor, no sentido do identificador de ponto de operação, até ao maior, inserindo uma flag por ponto de operação com identificador de ponto de operação mais baixo no VPS, desse modo requerendo N(N-l)/2 bits. Isto é, para cada um da pluralidade de pontos de operação - ou pelo menos um seu subconjunto -, uma sintaxe, tal como a lista de IDs de camada de referência 98, ou a sequência de flags respeitante aos predecessores do ponto de operação - que identifica outros pontos de operação da pluralidade de pontos de operação identificados por identificadores de pontos de operação inferiores, pode estar presente no VPS, em que estes identificadores de pontos de operação identificados formam a base do respetivo ponto de operação: Por outras palavras, a sintaxe identifica aqueles pontos de operação dos quais o respetivo ponto de operação ao qual pertence a sintaxe é uma extensão, desse modo indicando a ordem sequencial de pontos de operação.

Apesar de alquns aspetos terem sido descritos no contexto de um aparelho, é claro que estes aspetos também representam uma descrição do método correspondente, em que um bloco ou dispositivo corresponde a um passo do método ou a uma caracteristica de um passo do método. Analoqamente, aspetos descritos no contexto de um passo do método também representam uma descrição de um correspondente bloco ou item ou caracteristica de um aparelho correspondente. Alquns ou todos os passos do método podem ser executados por (ou utilizando) um aparelho de hardware, tal como, por exemplo, um microprocessador, um computador proqramável ou um circuito eletrónico. Nalgumas formas de realização, alguns ou mais dos passos mais importantes do método podem ser executados por tal aparelho. 0 fluxo de dados codificado inventivo pode ser armazenado num meio de armazenamento digital ou pode ser transmitido num meio de transmissão, como um meio de transmissão sem fios ou um meio de transmissão com fios, tal como a Internet.

Dependendo de certos requisitos de implementação, formas de realização da invenção podem ser implementadas em hardware ou em software. A implementação pode ser efetuada utilizando um meio de armazenamento digital, por exemplo, uma disquete, um DVD, um Blu-Ray, um CD, um ROM, um PROM, um EPROM, uma memória EEPROM ou FLASH, onde estão armazenados sinais de controlo que podem ser lidos eletronicamente, que cooperam (ou são capazes de cooperar) com um sistema computacional programável de modo que o método respetivo é realizado. Em consequência, o meio de armazenamento digital pode ser lido por computador.

Algumas formas de realização de acordo com a invenção compreendem um portador de dados que tem sinais de controlo que podem ser lidos eletronicamente, que é capaz de cooperar com um sistema computacional programável, de modo que um dos métodos descritos aqui é realizado.

Em geral, formas de realização da presente invenção podem ser implementadas como um produto de programa computacional com um código de programa, em que o código de programa é operacional para realizar um dos métodos quando o produto de programa computacional corre num computador. 0 código de programa pode ser armazenado, por exemplo, num portador apto a ser lido por uma máquina.

Outras formas de realização compreendem o programa computacional para realizar um dos métodos descritos aqui, armazenado num portador apto a ser lido por uma máquina.

Por outras palavras, uma forma de realização do método inventivo é portanto um programa computacional que tem um código de programa para realizar um dos métodos descritos aqui, quando o programa computacional corre num computador.

Em consequência, outra forma de realização dos métodos inventivos é um portador de dados (ou um meio de armazenamento digital, ou um meio apto a ser lido por um computador) que compreende, registado no mesmo, o programa computacional para realizar um dos métodos descritos no presente documento. 0 portador de dados, o meio de armazenamento digital ou o meio registado são tipicamente tangíveis e/ou não transitórios.

Em consequência, outra forma de realização do método inventivo é um fluxo de dados ou uma sequência de sinais que representa o programa computacional para realizar um dos métodos descritos no presente documento. 0 fluxo de dados ou a sequência de sinais pode ser configurado, por exemplo, para ser transferido via uma conexão de comunicação de dados, por exemplo, via a Internet.

Outra forma de realização compreende um meio de processamento, por exemplo, um computador, ou um dispositivo lógico programável, configurado ou adaptado para realizar um dos métodos descritos no presente documento.

Outra forma de realização compreende um computador onde está instalado o programa computacional para realizar um dos métodos descritos no presente documento.

Outra forma de realização de acordo com a invenção compreende um aparelho ou um sistema configurado para transferir (por exemplo, eletrónica ou oticamente) um programa computacional para realizar um dos métodos descritos no presente documento para um recetor. 0 recetor pode ser, por exemplo, um computador, um dispositivo móvel, um dispositivo de memória ou semelhantes. 0 aparelho ou sistema pode compreender, por exemplo, um servidor de ficheiros para transferir o programa computacional para o recetor.

Nalgumas formas de realização, pode utilizar-se um dispositivo lógico programável (por exemplo, uma rede de portas lógicas programáveis) para realizar algumas ou todas as funcionalidades dos métodos descritos no presente documento. Nalgumas formas de realização, uma rede de portas lógicas programáveis pode cooperar com um microprocessador para realizar um dos métodos descritos no presente documento. Em geral, os métodos são preferencialmente realizados por um aparelho de hardware.

As formas de realização acima descritas são meramente ilustrativas dos princípios da presente invenção. É entendido que modificações e variações dos arranjos e pormenores descritos no presente documento serão claros para outros profissionais. Em consequência, é pretendido que seja limitada somente pelo âmbito das reivindicações de patente iminentes e não pelos pormenores específicos apresentados a título descritivo e explicativo das formas de realização apresentadas no presente documento.

Referências [1] Thomas Wiegand, Gary J. Sullivan, Gisle Bjontegaard, Ajay

Luthra, "Overview of the H.264/AVC Video Coding Standard", IEEE Trans. Circuits Syst. Video Technol., volume 13, N7, julho de 2003.

[2] JCT-VC, "High-Efficiency Video Coding (HEVC) text specification Working Draft 6", JCTVC-H1003, fevereiro de 2012.

[3] ISO/IEC 13818-1: "MPEG-2 Systems specification".

Claims

REIVINDICAÇÕES

1. Fluxo de dados no qual está codificado um conteúdo de média, em que o fluxo de dados compreende pacotes (12), em que cada pacote (12) compreende um identificador do tipo de pacote (16) que identifica um tipo de pacote associado ao respetivo pacote de entre uma pluralidade de tipos de pacotes, em que cada pacote (12) que tem um tipo de pacote de entre um primeiro conjunto da pluralidade de tipos de pacotes a ele associado compreende um identificador de ponto de operação (34) que identifica um ponto de operação (18) associado ao respetivo pacote de entre uma pluralidade de pontos de operação dentro de um espaço de escalabilidade (20) abranqido por um número n de eixos de escalabilidade (22a, 22b), com 0<n, em que os pontos de operação têm uma ordem sequencial de pontos de operação definida entre eles, em que cada pacote (12) que tem qualquer tipo de pacote de entre um segundo conjunto do primeiro conjunto de tipos de pacotes a eles associado contém adicionalmente dados (36) que contribuem para uma representação codificada do conteúdo de média no ponto de operação associado ao respetivo pacote juntamente com os pacotes que têm qualquer ponto de operação a eles associado que precede o ponto de operação associado ao respetivo pacote ou iguala o ponto de operação associado ao respetivo pacote, em que cada pacote (44) que tem um tipo de pacote predeterminado disjunto do segundo conjunto a ele associado tem um descritor de eixos de escalabilidade (38) que define o número n e um significado semântico do um ou mais eixos de escalabilidade.
2. Fluxo de dados de acordo com a reivindicação 1, em que cada um dos pacotes que têm o tipo de pacote predeterminado a eles associado também compreende uma sequência (54) de descritores de perfil ou de nível (44) associada a um ou mais de pelo menos um subconjunto da pluralidade de pontos de operação, em que cada descritor de perfil e/ou nivel (44) define um conjunto de opções de codificação disponíveis ou uma gama de valores de elementos de sintaxe disponíveis ao qual obedece uma sintaxe de pacotes que têm um ponto de operação associado ao respetivo descritor de perfil ou nível, a ele associado, em que um primeiro conjunto dos descritores de perfil e/ou nível sinaliza explicitamente a definição do conjunto de opções de codificação disponíveis ou gama de valores de elementos de sintaxe disponíveis, e um segundo conjunto não vazio e disjunto dos descritores de perfil nível sinaliza a definição do conjunto de opções de codificação disponíveis e/ou gama de valores de elementos de sintaxe disponíveis por referência a outro descritor de perfil ou nível.
3. Fluxo de dados de acordo com a reivindicação 2, em que cada descritor de perfil ou nível (44) tem um campo (56) que identifica o ponto de operação (18) a que está associado o respetivo descritor de perfil ou nível (44).
4. Fluxo de dados de acordo com a reivindicação 3, em que o segundo conjunto não vazio e disjunto dos descritores de perfil ou de nível (44) sinaliza a definição do conjunto de opções de codificação disponíveis e/ou gama de valores de elementos de sintaxe disponíveis por referência a outro descritor de perfil ou nível utilizando uma sinalização explícita (52) do campo do descritor de perfil e/ou nível referenciado.
5. Fluxo de dados de acordo com qualquer uma das reivindicações 1 até 4, em que cada um dos pacotes que têm o tipo de pacote predeterminado a eles associado também compreende, para cada um de pelo menos um subconjunto da pluralidade de pontos de operação, uma sintaxe (98) que identifica outros pontos de operação da pluralidade de pontos de operação identificados por identificadores de pontos de operação inferiores dos quais o respetivo ponto de operação é uma extensão, desse modo indicando a ordem sequencial de pontos de operação.
6. Fluxo de dados de acordo com qualquer uma das reivindicações 3 até 5, em que cada campo (56) identifica o respetivo ponto de operação utilizando uma sequência de bits (60) comum aos identificadores de pontos de operação que identifica o respetivo ponto de operação.
7. Fluxo de dados de acordo com a reivindicação 6, em que todos os identificadores de pontos de operação têm um elemento de sintaxe de comprimento fixo de bits (60), e o descritor de eixos de escalabilidade (38) sinaliza n e uma associação de n partições do elemento de sintaxe de comprimento fixo de bits (60) aos n eixos de escalabilidade, em que a sequência de bits é comum ao elemento de sintaxe de comprimento fixo de bits.
8. Fluxo de dados de acordo com a reivindicação 6, em que todos os identificadores de pontos de operação (34) têm um elemento de sintaxe de comprimento fixo de bits (60), e um elemento de sintaxe de cenário (64), em que o elemento de sintaxe de cenário sinaliza n e uma associação de n partições do elemento de sintaxe de comprimento fixo de bits aos n eixos de escalabilidade, em que a sequência de bits é comum ao elemento de sintaxe de comprimento fixo de bits.
9. Fluxo de dados de acordo com qualquer uma das reivindicações 1 até 8, em que todos os identificadores de pontos de operação (34) têm um elemento de sintaxe de comprimento fixo de bits (60), e o descritor de eixos de escalabilidade (38) sinaliza n e uma associação de n partições do elemento de sintaxe de comprimento fixo de bits aos n eixos de escalabilidade, de modo que a enésima porção é uma medida ordinal de uma posição do respetivo ponto de operação ao longo do enésimo eixo de escalabilidade.
10. Fluxo de dados de acordo com qualquer uma das reivindicações 1 até 8, em que todos os identificadores de pontos de operação (34) têm um elemento de sintaxe de comprimento fixo de bits (60) e um elemento de sintaxe de cenário (64), em que o elemento de sintaxe de cenário sinaliza n e uma associação de n partições do elemento de sintaxe de comprimento fixo de bits aos n eixos de escalabilidade, de modo que a enésima porção é uma medida ordinal de uma posição do respetivo ponto de operação ao lonqo do enésimo eixo de escalabilidade.
11. Fluxo de dados de acordo com qualquer uma das reivindicações 1 até 10, em que o descritor de eixos de escalabilidade (38) compreende um elemento de sintaxe (94) cujos possíveis estados estão individualmente associados a diferentes combinações de valores para n e ao siqnificado semântico do correspondente significado semântico dos n eixos de escalabilidade.
12. Entidade de rede para processar um fluxo de dados no qual está codificado um conteúdo de média, em que o fluxo de dados compreende pacotes (12), em que cada pacote (12) compreende um identificador do tipo de pacote (16) que identifica um tipo de pacote associado ao respetivo pacote de entre uma pluralidade de tipos de pacotes, em que cada pacote (12) que tem um tipo de pacote de entre um primeiro conjunto da pluralidade de tipos de pacotes a ele associado compreende um identificador de ponto de operação (34) que identifica um ponto de operação (18) associado ao respetivo pacote de entre uma pluralidade de pontos de operação dentro de um espaço de escalabilidade (20) abrangido por um número n de eixos de escalabilidade (22a, 22b) , com 0<n, em que os pontos de operação têm uma ordem sequencial de pontos de operação definida entre eles, em que cada pacote (12) que tem qualquer tipo de pacote de entre um segundo conjunto do primeiro conjunto de tipos de pacotes a ele associado contém adicionalmente dados (36) que contribuem para uma representação codificada do conteúdo de média no ponto de operação associado ao respetivo pacote juntamente com os pacotes que têm qualquer ponto de operação a eles associado que precede o ponto de operação associado ao respetivo pacote ou iguala o ponto de operação associado ao respetivo pacote, em que a entidade de rede é configurada para ler, de um pacote (12) que tem um tipo de pacote predeterminado disjunto do segundo conjunto a ele associado, um descritor de eixos de escalabilidade (38) que define o número n e um significado semântico do um ou mais eixos de escalabilidade, e interpretar os identificadores de pontos de operação em função do descritor de eixos de escalabilidade.
13. Entidade de rede de acordo com a reivindicação 12, em que a entidade de rede é configurada para ler, do pacote que tem o tipo de pacote predeterminado disjunto do segundo conjunto a ele associado, uma sequência (54) de descritores de perfil ou de nivel (44) individualmente associados a pelo menos um subconjunto da pluralidade de pontos de operação, em que cada descritor de perfil ou nivel (44) define um conjunto de opções de codificação disponíveis ou uma gama de valores de elementos de sintaxe disponíveis ao qual obedece uma sintaxe de pacotes que têm o ponto de operação associado ao respetivo descritor de perfil ou nível, a ele associado, em que a entidade de rede é configurada para, em resposta a uma sinalização no fluxo de dados, ler explicitamente, de um primeiro conjunto dos descritores de perfil ou de nível, a definição do conjunto de opções de codificação disponíveis ou gama de valores de elementos de sintaxe disponíveis, e ler, para um segundo conjunto não vazio e disjunto dos descritores de perfil ou de nível, uma referência a outro descritor de perfil ou nível e derivar a definição do conjunto de opções de codificação disponíveis ou gama de valores de elementos de sintaxe disponíveis do segundo conjunto não vazio e disjunto dos descritores de perfil ou de nivel a partir do respetivo descritor de perfil ou nivel referenciado.
14. Método para processar um fluxo de dados no qual está codificado um conteúdo de média, em que o fluxo de dados compreende pacotes (12), em que cada pacote (12) compreende um identificador do tipo de pacote (16) que identifica um tipo de pacote associado ao respetivo pacote de entre uma pluralidade de tipos de pacotes, em que cada pacote (12) que tem um tipo de pacote de entre um primeiro conjunto da pluralidade de tipos de pacotes a ele associado compreende um identificador de ponto de operação (34) que identifica um ponto de operação (18) associado ao respetivo pacote de entre uma pluralidade de pontos de operação dentro de um espaço de escalabilidade (20) abranqido por um número n de eixos de escalabilidade (22a, 22b) , com 0<n, em que os pontos de operação têm uma ordem sequencial de pontos de operação definida entre eles, em que cada pacote (12) que tem qualquer tipo de pacote de entre um sequndo conjunto do primeiro conjunto de tipos de pacotes a ele associado contém adicionalmente dados (36) que contribuem para uma representação codificada do conteúdo de média no ponto de operação associado ao respetivo pacote juntamente com os pacotes que têm qualquer ponto de operação a eles associado que precede o ponto de operação associado ao respetivo pacote ou iquala o ponto de operação associado ao respetivo pacote, em que o método compreende: ler, de um pacote (12) que tem um tipo de pacote predeterminado disjunto do segundo conjunto a ele associado, um descritor de eixos de escalabilidade (38) que define o número n e um significado semântico do um ou mais eixos de escalabilidade, e interpretar os identificadores de pontos de operação em função do descritor de eixos de escalabilidade.
15. Programa computacional para implementar um método de processamento como reivindicado na reivindicação 14, em que o programa computacional corre num computador ou processador.