BR112019025471A2 - Dispositivo de transmissão de figura, e, dispositivo de recepção de figura - Google Patents

Dispositivo de transmissão de figura, e, dispositivo de recepção de figura Download PDF

Info

Publication number
BR112019025471A2
BR112019025471A2 BR112019025471-4A BR112019025471A BR112019025471A2 BR 112019025471 A2 BR112019025471 A2 BR 112019025471A2 BR 112019025471 A BR112019025471 A BR 112019025471A BR 112019025471 A2 BR112019025471 A2 BR 112019025471A2
Authority
BR
Brazil
Prior art keywords
data
rois
image
roi
transmission
Prior art date
Application number
BR112019025471-4A
Other languages
English (en)
Inventor
Yoshimochi Naoki
Naoki YOSHIMOCHI
Sugioka Tatsuya
Tatsuya SUGIOKA
Original Assignee
Sony Semiconductor Solutions Corporation
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Semiconductor Solutions Corporation filed Critical Sony Semiconductor Solutions Corporation
Publication of BR112019025471A2 publication Critical patent/BR112019025471A2/pt

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23418Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4347Demultiplexing of several video streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234318Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by decomposing into objects, e.g. MPEG-4 objects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234345Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements the reformatting operation being performed only on part of the stream, e.g. a region of the image or a time segment
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/23605Creation or processing of packetized elementary streams [PES]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/2365Multiplexing of several video streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4343Extraction or processing of packetized elementary streams [PES]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/665Control of cameras or camera modules involving internal camera communication with the image sensor, e.g. synchronising or multiplexing SSIS control signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/91Television signal processing therefor
    • H04N5/92Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N5/9201Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving the multiplexing of an additional signal and the video signal

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Communication Control (AREA)

Abstract

Um dispositivo de transmissão de figura de acordo com uma modalidade da presente descrição é provido com uma unidade de transmissão para enviar os dados de imagem de uma ROI em uma imagem por PayloadData de LongPacket e enviar a informação em relação à ROI por EmbeddedData.

Description

1 / 44 DISPOSITIVO DE TRANSMISSÃO DE FIGURA, E, DISPOSITIVO DE
RECEPÇÃO DE FIGURA Campo Técnico
[001] As presentes descrições referem-se a um dispositivo de transmissão de figura e a um dispositivo de recepção de figura. Fundamentos da Invenção
[002] Nos últimos anos, aplicações para transmitir grandes quantidades de dados com um grande volume de dados têm aumentado. É provável que os sistemas de transmissão sejam pesadamente carregados, e, no pior caso, há uma possibilidade de que os sistemas de transmissão caiam e a transmissão de dados não seja realizada.
[003] A fim de impedir que os sistemas de transmissão caiam, por exemplo, em vez de transmitir a íntegra de uma imagem fotografada, apenas uma imagem parcial obtida pela especificação de um objeto a ser fotografado e corte do objeto identificado foi transmitida. Percebe-se que, por exemplo, as seguintes literaturas de patente descrevem o corte de uma imagem parcial a partir de uma imagem fotografada. Lista de Citação Literatura de Patente
[004] PTL 1: Publicação do Pedido de Patente Japonês Não Examinado 2016-201756 PTL 2: Publicação do Pedido de Patente Japonês Não Examinado 2014-39219 PTL 3: Publicação do Pedido de Patente Japonês Não Examinado 2013-164834 PTL 4: Publicação do Pedido de Patente Japonês Não Examinado 2012-209831 Sumário da Invenção
[005] Incidentemente, como um sistema usado para a transmissão de
2 / 44 um sensor de imagem para um processador de aplicação, MIPI (Interface do Processador da Indústria Móvel) CSI (Interface Serial de Câmera)-2, MIPI CSI-3 ou similares são usados em alguns casos. Além do mais, como um sistema usado para a transmissão de um processador de aplicação para um visor, MIPI DSI (Interface Serial de Exibição) ou similares são usados em alguns casos. Em um caso em que uma região parcial (um ROI (Região de Interesse)) extraída de uma imagem capturada precisar ser transmitida com o uso destes sistemas, a transmissão da ROI pode não ser fácil devido a várias restrições. Desta maneira, é desejável prover um dispositivo de transmissão de figura e um dispositivo de recepção de figura que tornam possível transmitir a ROI mesmo sob várias restrições.
[006] Um primeiro dispositivo de transmissão de figura de acordo com uma modalidade da presente descrição inclui uma seção de transmissão que envia os dados de imagem das ROIs em uma imagem em Dados de Carga Útil de um Pacote Longo e envia a informação sobre as ROIs em Dados Embutidos. Os dados de Carga Útil do Pacote Longo referem-se a dados principais (dados da aplicação) que serão transmitidos entre os dispositivos. Os Dados Embutidos referem-se à informação adicional que é possível que seja embutida em um cabeçalho ou um rodapé de um quadro de dados de imagem.
[007] No primeiro dispositivo de transmissão de figura de acordo com a modalidade da presente descrição, os dados de imagem das ROIs na imagem são enviados nos Dados de Carga Útil do Pacote Longo, e a informação sobre as ROIs é enviada nos Dados Embutidos. Isto torna possível extrair facilmente os dados de imagem das ROIs a partir de um sinal de transmissão em um dispositivo que recebeu o sinal de transmissão enviado a partir do dispositivo de transmissão de figura.
[008] Um segundo dispositivo de transmissão de figura de acordo com uma modalidade da presente descrição inclui um detector que detecta
3 / 44 uma região de sobreposição com base na informação sobre respectivas ROIs em uma imagem, a região de sobreposição na qual duas ou mais das ROIs se sobrepõem umas com as outras. O segundo dispositivo de transmissão de figura inclui adicionalmente uma seção de transmissão que envia uma pluralidade de peças de terceiros dados de imagem em Dados de Carga Útil de um Pacote Longo, a pluralidade de peças de terceiros dados de imagem sendo obtidas pela omissão dos segundos dados de imagem da região de sobreposição a partir de uma pluralidade de peças de primeiros dados de imagem das ROIs na imagem para evitar que os segundos dados de imagem sejam incluídos redundantemente na pluralidade de peças dos primeiros dados de imagem. A seção de transmissão envia adicionalmente a informação sobre as respectivas ROIs na imagem em Dados Embutidos.
[009] No segundo dispositivo de transmissão de figura de acordo com a modalidade da presente descrição, a pluralidade de peças de terceiros dados de imagem é enviada nos Dados de Carga Útil do Pacote Longo, e a informação sobre as respectivas ROIs na imagem é enviada nos Dados Embutidos. Isto torna possível extrair facilmente os dados de imagem das ROIs a partir de um sinal de transmissão em um dispositivo que recebeu o sinal de transmissão enviado a partir do dispositivo de transmissão de figura.
[0010] Um dispositivo de recepção de figura de acordo com uma modalidade da presente descrição inclui uma seção de recepção que recebe um sinal de transmissão que inclui os dados de imagem das ROIs em uma imagem a e informação sobre as ROIs, os dados de imagem das ROIs sendo incluídos nos Dados de Carga Útil de um Pacote Longo, a informação sobre as ROIs sendo incluída nos Dados Embutidos. O dispositivo de recepção de figura inclui adicionalmente um processador de informação que extrai a informação sobre as ROIs dos Dados Embutidos incluídos no sinal de transmissão recebido pela seção de recepção, e extrai os dados de imagem das ROIs a partir dos Dados de Carga Útil do Pacote Longo incluído no sinal de
4 / 44 transmissão recebido pela seção de recepção com base na informação extraída.
[0011] No dispositivo de recepção de figura de acordo com a modalidade da presente descrição, a informação sobre as ROIs é extraída dos Dados Embutidos incluídos no sinal de transmissão recebido pela seção de recepção, e os dados de imagem das ROIs são extraídos dos Dados de Carga Útil do Pacote Longo incluído no sinal de transmissão recebido pela seção de recepção com base na informação extraída sobre as ROIs. Isto torna possível extrair facilmente os dados de imagem das ROIs a partir do sinal de transmissão.
[0012] De acordo com o primeiro e o segundo dispositivos de transmissão de figura e o dispositivo de recepção de figura de acordo com as modalidades das presentes descrições, é possível extrair facilmente os dados de imagem das ROIs a partir do sinal de transmissão no dispositivo que recebeu o sinal de transmissão enviado a partir do dispositivo de transmissão de figura, o que torna possível transmitir a ROI mesmo sob várias restrições. Percebe-se que os efeitos da presente descrição não são necessariamente limitados aos efeitos aqui descritos, e podem ser qualquer um dos efeitos descritos nesta especificação. Breve Descrição dos Desenhos
[0013] A figura 1 é um diagrama que ilustra um exemplo de configuração esquemática de um sistema de transmissão de figura.
[0014] A figura 2 é um diagrama que ilustra um exemplo de configuração esquemática de um dispositivo de transmissão de figura na figura 1.
[0015] A figura 3 é um diagrama que ilustra um exemplo de um procedimento de geração dos dados de transmissão em um caso em que duas ROIs são incluídas em uma imagem capturada.
[0016] A figura 4 é um diagrama que ilustra um exemplo de
5 / 44 configuração de um cabeçalho de pacote.
[0017] A figura 5 é um diagrama que ilustra um exemplo de configuração dos dados de transmissão.
[0018] A figura 6 é um diagrama que ilustra um exemplo de configuração dos dados de transmissão.
[0019] A figura 7 é um diagrama que ilustra um exemplo de configuração dos Dados de Carga Útil de um Pacote Longo.
[0020] A figura 8 é um diagrama que ilustra um exemplo de configuração esquemática de um dispositivo de recepção de figura na figura
1.
[0021] A figura 9 é um diagrama que ilustra um exemplo de um procedimento para gerar duas imagens da ROI incluídas em uma imagem capturada em um caso em que duas imagens forem incluídas nos dados de transmissão.
[0022] A figura 10 é um diagrama que ilustra um exemplo de modificação de uma configuração esquemática do dispositivo de recepção de figura na figura 1.
[0023] A figura 11 é um diagrama que ilustra um exemplo de modificação de uma configuração de uma linha.
[0024] A figura 12 é um diagrama que ilustra um exemplo de modificação de uma configuração de uma linha.
[0025] A figura 13 é um diagrama que ilustra um exemplo de modificação de uma configuração esquemática de um dispositivo de transmissão de figura na figura 1.
[0026] A figura 14 é um diagrama que ilustra um exemplo de configuração dos dados de transmissão. Modos para Realizar a Invenção
[0027] Algumas modalidades da presente descrição são descritas a seguir com detalhes em relação aos desenhos. A seguinte descrição é dada dos
6 / 44 exemplos específicos da presente descrição, e a presente descrição não é limitada às seguintes modalidades. <Modalidade> [Configuração]
[0028] Nos últimos anos, em dispositivos portáteis, tais como telefones inteligentes, dispositivos de câmera e similares, a capacidade de dados de imagem serem tratados aumentou, e velocidade mais alta e consumo de energia mais baixo foram demandados na transmissão de dados em um dispositivo ou entre dispositivos diferentes. A fim de satisfazer tais demandas, a padronização de especificações da interface de alta velocidade, tais como a especificação C-PHY e a especificação D-PHY definidas pela aliança MIPI, foi promovida como as interfaces de acoplamento para os dispositivos portáteis e os dispositivos de câmera. A especificação C-PHY e a especificação D-PHY são as especificações da interface de camada física (PHY) para os protocolos de comunicação. Além do mais, DSI para visores de dispositivos portáteis e CSI para dispositivos de câmera existem como camadas de protocolo superiores da especificação C-PHY e da especificação D-PHY.
[0029] Um sistema de transmissão de figura 1 de acordo com uma modalidade da presente descrição é um sistema que transmite e recebe os sinais de acordo com a especificação MIPI CSI-2, a especificação MIPI CSI- 3, ou a especificação MIPI DSI. A figura 1 ilustra uma visão geral do sistema de transmissão de figura 1 de acordo com a presente modalidade. O sistema de transmissão de figura 1 é aplicado na transmissão de um sinal de dados, um sinal de relógio e um sinal de controle, e inclui um dispositivo de transmissão de figura 100 e um dispositivo de recepção de figura 200. O sistema de transmissão de figura 1 inclui, por exemplo, uma via de dados DL, uma via de relógio CL, e uma interface de controle de câmera CCI através do dispositivo de transmissão de figura 100 e do dispositivo de recepção de
7 / 44 figura 200. A via de dados transmite um sinal de dados, tais como os dados de imagem. A via de relógio CL transmite um sinal de relógio. A interface de controle de câmera CCI transmite um sinal de controle. Embora a figura 1 ilustre um exemplo no qual uma via de dados DL é provida, uma pluralidade de vias de dados DL pode ser provida. A interface de controle de câmera CCI é uma interface de controle bidirecional compatível com a especificação I2C (Circuito Inter-Integrado).
[0030] O dispositivo de transmissão de figura 100 é um dispositivo que transmite os sinais de acordo com a especificação MIPI CSI-2, a especificação MIPI CSI-3, ou a especificação MIPI DSI, e inclui um transmissor CSI 100A e um escravo CCI 100B. O dispositivo de recepção de figura 200 inclui um receptor CSI 200A e um mestre CCI 200B. Na via de relógio CL, o transmissor CSI 100A e o receptor CSI 200A são acoplados um no outro por uma linha do sinal de relógio. Na via de dados DL, o transmissor CSI 100A e o receptor CSI 200A são acoplados um no outro por uma linha do sinal de relógio. Na interface de controle de câmera CCI, o escravo CCI 100B e o mestre CCI 200B são acoplados um no outro por uma linha do sinal de controle.
[0031] O transmissor CSI 100A serve como um circuito de transmissão do sinal diferencial que gera um sinal de relógio diferencial como um sinal de relógio e transmite o sinal de relógio diferencial para a linha do sinal de relógio. O transmissor CSI 100A também serve como um circuito de transmissão do sinal diferencial que gera um sinal de dados diferencial como um sinal de dados e transmite o sinal de dados diferencial para uma linha do sinal de dados. O receptor CSI 200A serve como um circuito de recepção do sinal diferencial que recebe o sinal de relógio diferencial como o sinal de relógio através da linha do sinal de relógio e realiza o processamento pré- determinado no sinal de relógio do sinal diferencial recebido. O receptor CSI 200A também serve como um circuito de recepção do sinal diferencial que
8 / 44 recebe o sinal de dados diferencial como o sinal de dados através da linha do sinal de dados e realiza o processamento pré-determinado no sinal de dados diferencial recebido. (Dispositivo de Transmissão de figura 100)
[0032] A figura 2 ilustra um exemplo de uma configuração do dispositivo de transmissão de figura 100. O dispositivo de transmissão de figura 100 corresponde a um exemplo específico do transmissor CSI 100A. O dispositivo de transmissão de figura 100 inclui, por exemplo, uma seção de formação de imagem 110, processadores de imagem 120 e 130, e uma seção de transmissão 140. O dispositivo de transmissão de figura 100 transmite os dados de transmissão 147A para o dispositivo de recepção de figura 200 através da via de dados DL. Os dados de transmissão 147A são gerados pela realização do processamento pré-determinado em uma imagem capturada 111 obtida pela seção de formação de imagem 110. A figura 3 ilustra um exemplo de um procedimento para gerar os dados de transmissão 147A.
[0033] A seção de formação de imagem 110 converte um sinal de imagem óptico obtido através, por exemplo, de uma lente óptica em dados de imagem. A seção de formação de imagem 110 inclui, por exemplo, um sensor de imagem CCD (dispositivo de carga acoplada) ou um sensor de imagem CMOS (semicondutor de óxido de metal complementar). A seção de formação de imagem 110 inclui um circuito de conversão analógico para digital, e converte dados de imagem analógicos em dados de imagem digitais. Um formato dos dados convertidos pode ser um formato YCbCr em que uma cor de um pixel é representada por um componente de luminância Y e componentes de diferença de cor Cb e Cr, ou pode ser um formato RGB. A seção de formação de imagem 110 transmite a imagem capturada 111 (dados de imagem digitais) obtida pela formação de imagem para o processador de imagem 120.
[0034] O processador de imagem 120 é um circuito que realiza o
9 / 44 processamento pré-determinado na imagem capturada 111 inserida a partir da seção de formação de imagem 110. O processador de imagem 120 realiza o processamento pré-determinado na imagem capturada 111 inserida a partir da seção de formação de imagem 110 em um caso em que um sinal de controle que provê uma instrução para o corte de uma ROI é inserido a partir do dispositivo de recepção de figura 200 através da interface de controle de câmera CCI. Em decorrência disto, o processador de imagem 120 gera vários dados (120A, 120B, e 120C) e transmite estes dados para a seção de transmissão 140. O processador de imagem 130 é um circuito que realiza o processamento pré-determinado na imagem capturada 111 inserida a partir da seção de formação de imagem 110. O processador de imagem 130 realiza o processamento pré-determinado na imagem capturada 111 inserida a partir da seção de formação de imagem 110 em um caso em que o sinal de controle que provê uma instrução para a transmissão de uma imagem normal for inserido a partir do dispositivo de recepção de figura 200 através da interface de controle de câmera CCI. Em decorrência disto, o processador de imagem 130 gera os dados de imagem 130A e transmite os dados de imagem 130A para a seção de transmissão 140.
[0035] O processador de imagem 130 inclui, por exemplo, um codificador 131. O codificador 131 codifica a imagem capturada 111 para gerar os dados de imagem comprimidos 130A. O processador de imagem 130 comprime a imagem capturada 111, por exemplo, por um formato de compressão que se conforma com a especificação JPEG (Grupo de Especialistas Fotográficos em Conjunto) ou similares como um formato dos dados de imagem comprimidos 130A.
[0036] O processador de imagem 120 inclui, por exemplo, uma seção de corte de ROI 121, um interpretador de ROI 122, um detector de sobreposição 123, uma seção de definição da prioridade 124, um codificador 125, e um controlador de processamento de imagem 126.
10 / 44
[0037] A seção de corte de ROI 121 especifica um ou uma pluralidade de objetos a ser fotografados, que são incluídos na imagem capturada 111 inserida a partir da seção de formação de imagem 110, e define uma região de interesse ROI para cada um dos objetos especificados. A região de interesse ROI é, por exemplo, uma região em forma quadrada que inclui o objeto identificado. A seção de corte de ROI 121 corta uma imagem de cada região de interesse ROI (por exemplo, uma imagem de ROI 112 na figura 3) da imagem capturada 111. A seção de corte de ROI 121 atribui adicionalmente um número de região como um identificador em cada região de interesse ROI definida. Por exemplo, em um caso em que duas regiões de interesse ROI forem definidas na imagem capturada 111, a seção de corte de ROI 121 dá um número de região 1 a uma (por exemplo, uma região de interesse ROI1 na figura 3) das regiões de interesse ROI e um número de região 2 à outra região de interesse ROI (por exemplo, uma região de interesse ROI2 na figura 3). A seção de corte de ROI 121 armazena, por exemplo, os identificadores atribuídos (números de região) em uma seção de armazenamento. A seção de corte de ROI 121 armazena, por exemplo, cada imagem de ROI 112 cortada da imagem capturada 111 na seção de armazenamento. A seção de corte de ROI 121 armazena adicionalmente, na seção de armazenamento, por exemplo, os identificadores (números de região) atribuídos às respectivas regiões de interesse ROI em associação com as imagens da ROI 112.
[0038] O interpretador de ROI 122 deriva a informação posicional 113 da região de interesse ROI na imagem capturada 111 para cada uma das regiões de interesse ROI. A informação posicional 113 inclui, por exemplo, as coordenadas superior esquerda (Xa, Ya) da região de interesse ROI, um comprimento em uma direção do eixo geométrico X da região de interesse ROI, e um comprimento em uma direção do eixo geométrico Y da região de interesse ROI. O comprimento na direção do eixo geométrico X da região de interesse ROI é, por exemplo, um comprimento da região física XLa na
11 / 44 direção do eixo geométrico X da região de interesse ROI. O comprimento na direção do eixo geométrico Y da região de interesse ROI é, por exemplo, um comprimento da região física YLa na direção do eixo geométrico Y da região de interesse ROI. O comprimento da região física refere-se a um comprimento físico (comprimento de dados) da região de interesse ROI. A informação posicional 113 pode incluir coordenadas de uma posição diferente de uma extremidade superior esquerda da região de interesse ROI. O interpretador de ROI 122 armazena a informação posicional derivada 113 na seção de armazenamento, por exemplo. O interpretador de ROI 122 realiza o armazenamento na seção de armazenamento em associação com, por exemplo, os identificadores (números de região) atribuídos às regiões de interesse ROI.
[0039] O interpretador de ROI 122 pode derivar adicionalmente, como a informação posicional 113, por exemplo, um comprimento da região de saída XLc na direção do eixo geométrico X da região de interesse ROI e um comprimento da região de saída YLc na direção do eixo geométrico Y da região de interesse ROI para cada uma das regiões de interesse ROI. O comprimento da região de saída refere-se, por exemplo, a um comprimento físico (comprimento de dados) da região de interesse ROI cuja resolução foi mudada por processamento de adelgaçamento, adição de pixel ou similares. O interpretador de ROI 122 pode derivar, por exemplo, informação de sensoriamento, informação de exposição, informação de ganho, comprimento de palavra AD (Analógico-Digital), um formato de imagem e similares para cada uma das regiões de interesse ROI, além da informação posicional 113, e pode armazenar os mesmos na seção de armazenamento.
[0040] A informação de sensoriamento refere-se aos conteúdos de operação aritmética no objeto incluído na região de interesse ROI e a informação complementar para o processamento de sinal do estágio subsequente na imagem de ROI 112. A informação de exposição refere-se ao
12 / 44 tempo de exposição da região de interesse ROI. A informação de ganho refere-se à informação de ganho da região de interesse ROI. O comprimento de palavra AD refere-se a um comprimento de palavra dos dados por pixel que passaram por conversão AD na região de interesse ROI. O formato de imagem refere-se a um formato de uma imagem da região de interesse ROI. Por exemplo, o interpretador de ROI 122 pode derivar o número de regiões de interesse ROI (o número de ROIs) incluídos na imagem capturada 111 e armazenar o número de regiões de interesse ROI na seção de armazenamento.
[0041] Em um caso em que uma pluralidade de objetos que serão fotografados for especificada na imagem capturada 111, o detector de sobreposição 123 detecta uma região de sobreposição (ROO (Região de Sobreposição)) na qual duas ou mais regiões de interesse ROI sobrepõem umas com as outras com base na informação posicional 113 de uma pluralidade de regiões de interesse ROI na imagem capturada 111. Isto é, o detector de sobreposição 123 deriva, para cada uma das regiões de sobreposição ROO, a informação posicional 114 da região de sobreposição ROO na imagem capturada 111. Por exemplo, o detector de sobreposição 123 armazena a informação posicional derivada 114 na seção de armazenamento. Por exemplo, o detector de sobreposição 123 armazena, na seção de armazenamento, a informação posicional derivada 114 em associação com a região de sobreposição ROO. A região de sobreposição ROO é, por exemplo, uma região em forma quadrada que tem um tamanho igual a ou menor do que a menor região de interesse ROI em duas ou mais regiões de interesse ROI que sobrepõem umas com as outras. A informação posicional 114 inclui, por exemplo, as coordenadas superior esquerda (Xb, Yb) da região de sobreposição ROO, um comprimento na direção do eixo geométrico X da região de sobreposição ROO, e um comprimento na direção do eixo geométrico Y da região de sobreposição ROO. O comprimento na direção do eixo geométrico X da região de sobreposição ROO refere-se, por exemplo, a
13 / 44 um comprimento da região física XLb. O comprimento na direção do eixo geométrico Y da região de sobreposição ROO refere-se, por exemplo, a um comprimento da região física YLb. A informação posicional 114 pode incluir as coordenadas de uma posição diferente da extremidade superior esquerda da região de interesse ROIs que pode ser incluída.
[0042] A seção de definição da prioridade 124 atribui uma prioridade 115 a cada uma das regiões de interesse ROI na imagem capturada 111. Por exemplo, a seção de definição da prioridade 124 armazena a prioridade atribuída 115 na seção de armazenamento. Por exemplo, a seção de definição da prioridade 124 armazena, na seção de armazenamento, a prioridade atribuída 115 em associação com a região de interesse ROI. A seção de definição da prioridade 124 pode atribuir as prioridades 115 às respectivas regiões de interesse ROI separadamente dos números de região atribuídos às respectivas regiões de interesse ROI, ou pode atribuir os números de região atribuídos às respectivas regiões de interesse ROI em vez das prioridades 115. Por exemplo, a seção de definição da prioridade 124 pode armazenar, na seção de armazenamento, as prioridades 115 em associação com as regiões de interesse ROI, ou pode armazenar, na seção de armazenamento, os números de região atribuídos às respectivas regiões de interesse ROI em associação com as regiões de interesse ROI.
[0043] A prioridade 115 é um identificador de cada uma das regiões de interesse ROI, e é a informação de discriminação que torna possível determinar a partir de qual de uma pluralidade de regiões de interesse ROI na imagem capturada 111 a região de sobreposição ROO foi omitida. A seção de definição da prioridade 124 atribui 1 como a prioridade 115 a uma das duas regiões de interesse ROI, cada qual incluindo uma região de sobreposição ROO, e atribui 2 como a prioridade 115 à outra das duas regiões de interesse ROI, por exemplo. Neste caso, a região de sobreposição ROO é omitida da região de interesse ROI com um valor maior da prioridade 115 na criação de
14 / 44 uma imagem de transmissão 116 a ser descrita posteriormente. Percebe-se que a seção de definição da prioridade 124 pode atribuir, como a prioridade 115, o mesmo número que o número de região atribuído a cada uma das regiões de interesse ROI a esta região de interesse ROI. Por exemplo, a seção de definição da prioridade 124 armazena, na seção de armazenamento, as prioridades 115 atribuídas às respectivas regiões de interesse ROI em associação com as imagens da ROI 112.
[0044] O codificador 125 codifica as respectivas imagens de transmissão 116 para gerar os dados de imagem comprimidos 120A. O codificador 125 comprime as respectivas imagens de transmissão 116 em, por exemplo, um formato de compressão que se conforma com a especificação JPEG como um formato dos dados de imagem comprimidos 120A. O codificador 125 gera as respectivas imagens de transmissão 116 antes da realização do supradescrito processamento de compressão. O codificador 125 gera uma pluralidade de imagens de transmissão 116 obtidas pela omissão de uma imagem 118 da região de sobreposição ROO a partir da pluralidade de imagens da ROI 112 obtidas a partir da imagem capturada 111 para evitar que a imagem 118 seja incluída redundantemente na pluralidade de imagens da ROI 112 obtidas a partir da imagem capturada 111.
[0045] O codificador 125 determina a partir de qual da pluralidade de imagens da ROI 112 a imagem 118 deve ser omitida com base, por exemplo, nas prioridades 115 atribuídas às respectivas regiões de interesse ROI. Percebe-se que o codificador 125 pode determinar a partir de qual da pluralidade de imagens da ROI 112 a imagem 118 deve ser omitida pelo uso, por exemplo, dos números de região atribuídos às respectivas regiões de interesse ROI como as prioridades 115. O codificador 125 considera, como a imagem de transmissão 116 (por exemplo, uma imagem de transmissão 116a2 na figura 3), uma imagem obtida pela omissão da imagem 118 a partir da imagem de ROI 112 especificada, como exposto. O codificador 125 considera
15 / 44 a própria imagem de ROI 112 como a imagem de transmissão 116 (por exemplo, uma imagem de transmissão 116a1 na figura 3) para a imagem de ROI 112 que não inclui região de sobreposição ROO, e a imagem de ROI 112 a partir da qual a imagem 118 não foi omitida em decorrência da supradescrita determinação.
[0046] O controlador de processamento de imagem 126 gera a informação de ROI 120B e a informação de quadro 120C, e transmite a informação de ROI 120B e a informação de quadro 120C para a seção de transmissão 140. A informação de ROI 120B inclui, por exemplo, cada informação posicional 113. A informação de ROI 120B inclui adicionalmente, por exemplo, pelo menos um de um tipo de dados de cada uma das regiões de interesse ROI, o número das regiões de interesse ROI incluídas na imagem capturada 111, o número de região (ou a prioridade 115) de cada uma das regiões de interesse ROI, um comprimento de dados de cada uma das regiões de interesse ROI, ou o formato de imagem de cada uma das regiões de interesse ROI. A informação de quadro 120C inclui, por exemplo, um número do canal virtual atribuído a cada quadro, um tipo de dados de cada uma das regiões de interesse ROI, um comprimento de Carga Útil para cada linha e similares. O tipo de dados inclui, por exemplo, dados YUV, dados RGB, dados RAW ou similares. O tipo de dados inclui adicionalmente, por exemplo, os dados do formato ROI, os dados do formato normal, ou similares. O comprimento de Carga Útil é, por exemplo, o número de pixels incluídos em uma Carga Útil de um Pacote Longo, e é, por exemplo, o número de pixels por região de interesse ROI. Aqui, a Carga Útil refere-se aos dados principais (dados da aplicação) que serão transmitidos entre o dispositivo de transmissão da informação 100 e o dispositivo de recepção da informação
200. O Pacote Longo refere-se a um pacote provido entre um cabeçalho de pacote PH e um rodapé do pacote PF.
[0047] A seção de transmissão 140 é um circuito que gera e envia os
16 / 44 dados de transmissão 147A com base em vários dados (120A, 120B, 120C, e 130A) inseridos a partir dos processadores de imagem 120 e 130. A seção de transmissão 140 envia a informação de ROI 120B sobre a respectiva região de interesse ROI na imagem capturada 111 nos Dados Embutidos. A seção de transmissão 140 envia adicionalmente os dados de imagem (os dados de imagem comprimidos 120A) das respectivas regiões de interesse ROI nos Dados de Carga Útil do Pacote Longo em um caso em que um sinal de controle que provê uma instrução para o corte de uma ROI for inserido a partir do dispositivo de recepção de figura 200 através da interface de controle de câmera CCI. Neste momento, a seção de transmissão 140 envia os dados de imagem (os dados de imagem comprimidos 120A) das respectivas regiões de interesse ROI através de um canal virtual mutuamente comum. Além do mais, a seção de transmissão 140 envia os dados de imagem (os dados de imagem comprimidos 120A) das respectivas regiões de interesse ROI em um quadro de dados de imagem, e envia a informação de ROI 120B sobre as respectivas regiões de interesse ROI em um cabeçalho do quadro de dados de imagem. A seção de transmissão 140 envia adicionalmente os dados de imagem normais (dados de imagem comprimidos 130A) nos Dados de Carga Útil do Pacote Longo em um caso em que um sinal de controle que provê uma instrução para a transmissão de uma imagem normal for inserido a partir do dispositivo de recepção de figura 200 através da interface de controle de câmera CCI.
[0048] A seção de transmissão 140 inclui, por exemplo, um controlador de ENLACE 141, um gerador de ECC 142, um gerador de PH 143, um armazenamento temporário de EBD 144, um armazenamento temporário de dados de ROI 145, um armazenamento temporário de dados de imagem normais 146, e um sintetizador 147. O controlador de ENLACE 141, o gerador de ECC 142, o gerador de PH 143, o armazenamento temporário de EBD 144, e o armazenamento temporário de dados de ROI 145 realizam a
17 / 44 transmissão para o sintetizador 147 em um caso em que um sinal de controle que provê uma instrução para o corte de uma ROI for inserido a partir do dispositivo de recepção de figura 200 através da interface de controle de câmera CCI. O armazenamento temporário de dados de imagem normais 146 realiza a transmissão para o sintetizador 147 em um caso em que um sinal de controle que provê uma instrução para a transmissão de uma imagem normal for inserido a partir do dispositivo de recepção de figura 200 através da interface de controle de câmera CCI.
[0049] Percebe-se que o armazenamento temporário de dados de ROI 145 também pode servir como o armazenamento temporário de dados de imagem normais 146. Neste caso, a seção de transmissão 140 pode incluir, entre um terminal de saída de cada um do armazenamento temporário de dados de ROI 145 e do armazenamento temporário de dados de ROI 145 e um terminal de entrada do sintetizador 147, um seletor que seleciona uma das saídas do armazenamento temporário de dados de ROI 145 e do armazenamento temporário de dados de ROI 145.
[0050] Por exemplo, o controlador de ENLACE 141 transmite a informação de quadro 120C linha por linha para o gerador de ECC 142 e o gerador de PH 143. Por exemplo, com base nos dados (por exemplo, um número do canal virtual, um tipo de dados de cada uma das regiões de interesse ROI, um comprimento de Carga Útil para cada linha e similares) de uma linha na informação de quadro 120C na informação de quadro 120C, o gerador de ECC 142 gera um código de correção de erro para a linha. Por exemplo, o gerador de ECC 142 transmite o código de correção de erro gerado para o gerador de PH 143. O gerador de PH 143 gera um cabeçalho de pacote PH para cada linha com o uso, por exemplo, da informação de quadro 120C e do código de correção de erro gerado pelo gerador de ECC 142. Neste momento, o cabeçalho de pacote PH é, por exemplo, um cabeçalho de pacote dos Dados de Carga Útil do Pacote Longo, da forma ilustrada na figura 4. O
18 / 44 cabeçalho de pacote PH inclui, por exemplo, DI, WC e ECC. O WC indica uma região para indicar o término de um pacote para o dispositivo de recepção da informação 200 pelo número de palavras. O WC inclui, por exemplo, o comprimento de Carga Útil, e inclui, por exemplo, o número de pixels por região de interesse ROI. O ECC indica uma região que armazena um valor para corrigir um erro de bit. O ECC inclui o código de correção de erro. O DI indica uma região que armazena um identificador de dados. O DI inclui um número de VC (canal virtual) e um Tipo de Dados (o tipo de dados de cada uma das regiões de interesse ROI). O VC (canal virtual) é um conceito introduzido pelo controle de fluxo de pacote é um mecanismo para suportar uma pluralidade de fluxos contínuos independentes de dados que compartilham o mesmo enlace. O gerador de PH 143 transmite o cabeçalho de pacote PH gerado para o sintetizador 147.
[0051] O armazenamento temporário de EBD 144 armazena temporariamente a informação de ROI 120B, e transmite a informação de ROI 120B como Dados Embutidos para o sintetizador 147 em um tempo pré- determinado. Os Dados Embutidos referem-se à informação adicional que é possível que seja embutida em um cabeçalho ou um rodapé de um quadro de dados de imagem (veja a figura 5, a seguir). Os Dados Embutidos incluem, por exemplo, a informação de ROI 120B.
[0052] O armazenamento temporário de dados de ROI 145 mantém temporariamente os dados de imagem comprimidos 120A, e transmite os dados de imagem comprimidos 120A como os dados de Carga Útil do Pacote Longo para o sintetizador 147 em um sincronismo pré-determinado. O armazenamento temporário de dados de ROI 145 transmite os dados de imagem comprimidos 120A como os dados de Carga Útil do Pacote Longo para o sintetizador 147 em um caso em que um sinal de controle que provê uma instrução para o corte de uma ROI for inserido a partir do dispositivo de recepção de figura 200 através da interface de controle de câmera CCI. O
19 / 44 armazenamento temporário de dados de imagem normais 146 mantém temporariamente os dados de imagem comprimidos 130A, e transmite os dados de imagem comprimidos 130A como os dados de Carga Útil do Pacote Longo para o sintetizador 147 em um sincronismo pré-determinado. O armazenamento temporário de dados de imagem normais 146 transmite os dados de imagem comprimidos 130A como os dados de Carga Útil do Pacote Longo para o sintetizador 147 em um caso em que um sinal de controle que provê uma instrução para a transmissão de uma imagem normal for inserido a partir do dispositivo de recepção de figura 200 através da interface de controle de câmera CCI.
[0053] O sintetizador 147 gera os dados de transmissão 147A com base nos dados inseridos (os dados de imagem comprimidos 130A) em um caso em que um sinal de controle que provê uma instrução para a transmissão de uma imagem normal for inserido a partir do dispositivo de recepção de figura 200 através da interface de controle de câmera CCI. O sintetizador 147 transmite os dados de transmissão 147A gerados para o dispositivo de recepção de figura 200 através da via de dados DL. Ao contrário, o sintetizador 147 gera os dados de transmissão 147A com base em vários dados inseridos (o cabeçalho de pacote PH, a informação de ROI 120B e os dados de imagem comprimidos 120A) em um caso em que um sinal de controle que provê uma instrução para o corte de uma ROI for inserido a partir do dispositivo de recepção de figura 200 através da interface de controle de câmera CCI. O sintetizador 147 transmite os dados de transmissão gerados 147A para o dispositivo de recepção de figura 200 através da via de dados DL. Isto é, o sintetizador 147 coloca o tipo de dados (o tipo de dados de cada uma das regiões de interesse ROI) no cabeçalho de pacote PH dos Dados de Carga Útil do Pacote Longo, e envia o tipo de dados. Além do mais, o sintetizador 147 envia os dados de imagem (os dados de imagem comprimidos 120A) das respectivas regiões de interesse ROI através de um
20 / 44 canal virtual mutuamente comum.
[0054] Os dados de transmissão 147A incluem, por exemplo, um quadro de dados de imagem, da forma ilustrada na figura 5. O quadro de dados de imagem, no geral, inclui uma região de cabeçalho, uma região de pacote, e uma região de rodapé. Na figura 5, a região de rodapé não é ilustrada a título de conveniência. Uma região de cabeçalho do quadro R1 dos dados de transmissão 147A inclui os Dados Embutidos. Neste momento, os Dados Embutidos incluem a informação de ROI 120B. Na figura 5, uma região de pacote R2 dos dados de transmissão 147A inclui os dados de Carga Útil do Pacote Longo para cada linha, e inclui adicionalmente o cabeçalho de pacote PH e o rodapé do pacote PF em posições entre as quais os dados de Carga Útil do Pacote Longo são ensanduichados. Adicionalmente, os modos de baixa potência LP são incluídos em posições entre as quais o cabeçalho de pacote PH e o rodapé do pacote PF são ensanduichados.
[0055] O cabeçalho de pacote PH inclui, por exemplo, o DI, o WC, e o ECC. O WC inclui, por exemplo, o comprimento de Carga Útil e inclui, por exemplo, o número de pixels por região de interesse ROI. O ECC inclui o código de correção de erro. O DI inclui o VC (número do canal virtual) e o tipo de dados (o tipo de dados de cada uma das regiões de interesse ROI). Na presente modalidade, um número de canal virtual mutuamente comum é atribuído aos VCs das respectivas linhas. Além do mais, na figura 5, a região de pacote R2 dos dados de transmissão 147A inclui os dados de imagem comprimidos 147B. Os dados de imagem comprimidos 147B incluem uma peça dos dados de imagem comprimidos 120A ou uma pluralidade de peças dos dados de imagem comprimidos 120A. Aqui, na figura 5, um grupo de pacotes mais próximo do cabeçalho de pacote PH inclui, por exemplo, os dados de imagem comprimidos 120A (120A1) da imagem de transmissão 116a1 na figura 3, e um grupo de pacotes distante do cabeçalho de pacote PH inclui, por exemplo, os dados de imagem comprimidos 120A (120A2) da
21 / 44 imagem de transmissão 116a2 na figura 3. Estas duas peças de dados de imagem comprimidos 120A1 e 120A2 configuram os dados de imagem comprimidos 147B. Os dados de Carga Útil do Pacote Longo para cada linha incluem os dados de pixel para uma linha nos dados de imagem comprimidos 147B.
[0056] A figura 6 ilustra um exemplo de configuração dos dados de transmissão 147A. Os dados de transmissão 147A incluem, por exemplo, a região de cabeçalho do quadro R1 e a região de pacote R2. Percebe-se que a figura 6 ilustra um exemplo dos conteúdos da região de cabeçalho do quadro R1 com detalhes. Além do mais, na figura 6, os modos de baixa potência LP não são ilustrados.
[0057] A região de cabeçalho do quadro R1 inclui, por exemplo, um número de quadro F1 como um identificador dos dados de transmissão 147A. A região de cabeçalho do quadro R1 inclui a informação sobre os dados de imagem comprimidos 147B incluída na região de pacote R2. A região de cabeçalho do quadro R1 inclui, por exemplo, o número dos dados de imagem comprimidos 120A incluídos nos dados de imagem comprimidos 147B (o número de ROIs), e a informação (informação de ROI 120B) sobre a imagem de ROI 112 correspondente a cada um dos dados de imagem comprimidos 120A incluídos nos dados de imagem comprimidos 147B.
[0058] O sintetizador 147 provê os dados de imagem comprimidos 147B separadamente para cada linha de pixel dos dados de imagem comprimidos 120A na região de pacote R2 dos dados de transmissão 147A, por exemplo. Desta maneira, a região de pacote R2 dos dados de transmissão 147A não inclui os dados de imagem comprimidos correspondentes à imagem 118 da região de sobreposição ROO redundantemente. Além do mais, o sintetizador 147 omite uma linha de pixel não correspondente à imagem de transmissão 116 da imagem capturada 111 na região de pacote R2 dos dados de transmissão 147A, por exemplo. Desta maneira, a região de pacote R2 dos
22 / 44 dados de transmissão 147A não inclui a linha de pixel não correspondente a cada uma das imagens de transmissão 116 da imagem capturada 111. Percebe-se que, na região de pacote R2 na figura 6, uma parte circundada por uma linha rompida corresponde aos dados de imagem comprimidos da imagem 118 da região de sobreposição ROO.
[0059] Um contorno entre um grupo de pacotes mais próximo do cabeçalho de pacote PH (por exemplo, 1(n) na figura 6) e um grupo de pacotes distante do cabeçalho de pacote PH (por exemplo, 2(1) na figura 6) é especificado por um comprimento da região física XLa1 da imagem de ROI 112 correspondente aos dados de imagem comprimidos do grupo de pacotes mais próximo do cabeçalho de pacote PH (por exemplo, 1(n) na figura 6). Nos dados de imagem comprimidos correspondentes à imagem 118 da região de sobreposição ROO incluída no grupo de pacotes mais próximo do cabeçalho de pacote PH (por exemplo, 1(n) na figura 6), uma posição inicial do pacote é especificada por um comprimento da região física XLa2 da imagem de ROI 112 correspondente ao grupo de pacotes distante do cabeçalho de pacote PH (por exemplo, 2 (1) na figura 6).
[0060] O sintetizador 147 pode colocar, por exemplo, a informação de ROI 120B nos Dados de Carga Útil do Pacote Longo, da forma ilustrada na figura 7, além dos dados de pixel para uma linha nos dados de imagem comprimidos 147B, por exemplo, em um caso em que os dados de Carga Útil do Pacote Longo forem gerados linha por linha na região de pacote R2 dos dados de transmissão 147A. Isto é, o sintetizador 147 pode colocar a informação de ROI 120B nos Dados de Carga Útil do Pacote Longo e enviar a informação de ROI 120B. Neste momento, a informação de ROI 120B inclui, por exemplo, pelo menos um do número de regiões de interesse ROI (o número de ROIs) incluídas na imagem capturada 111, o número de região (ou a prioridade 115) de cada uma das regiões de interesse ROI, o comprimento de dados de cada uma das regiões de interesse ROI, ou o formato de imagem
23 / 44 de cada uma das regiões de interesse ROI, da forma ilustrada nas figuras 7(A) a 7(K). A informação de ROI 120B é preferivelmente provida, em uma extremidade, no lado do cabeçalho de pacote PH (isto é, no cabeçalho dos Dados de Carga Útil do Pacote Longo) nos Dados de Carga Útil do Pacote Longo. (Dispositivo de Recepção de figura 200)
[0061] A seguir, é dada descrição do dispositivo de recepção de figura
200. A figura 8 ilustra um exemplo de uma configuração do dispositivo de recepção de figura 200. A figura 9 ilustra um exemplo de um procedimento para gerar uma imagem de ROI 223A no dispositivo de recepção de figura
200. O dispositivo de recepção de figura 200 é um dispositivo que recebe os sinais de acordo com uma especificação em comum com o dispositivo de transmissão de figura 100 (por exemplo, a especificação MIPI CSI-2, a especificação MIPI CSI-3 ou a especificação MIPI DSI). O dispositivo de recepção de figura 200 inclui, por exemplo, uma seção de recepção 210 e um processador de informação 220. A seção de recepção 210 é um circuito que recebe os dados de transmissão 147A transmitidos a partir do dispositivo de transmissão de figura 100 através da via de dados DL, e realiza o processamento pré-determinado nos dados de transmissão recebidos 147A, desse modo, gerando vários dados (214A, 215A, e 215B), e transmitindo os dados para o processador de informação 220. O processador de informação 220 é um circuito que gera a imagem de ROI 223A com base em vários dados (214A e 215A) recebidos a partir da seção de recepção 210, e gera uma imagem normal 224A com base nos dados (215B) recebidos a partir da seção de recepção 210.
[0062] A seção de recepção 210 inclui, por exemplo, um separador de cabeçalho 211, um interpretador de cabeçalho 212, um separador de Carga Útil 213, um interpretador de EBD 214 e um separador de dados de ROI 215.
[0063] O separador de cabeçalho 211 recebe os dados de transmissão
24 / 44 147A a partir do dispositivo de transmissão de figura 100 através da via de dados DL. Isto é, o separador de cabeçalho 211 recebe os dados de transmissão 147A nos quais a informação de ROI 120B sobre as respectivas regiões de interesse ROI na imagem capturada 111 é incluída nos Dados Embutidos e os dados de imagem (os dados de imagem comprimidos 120A) das respectivas regiões de interesse ROI são incluídos nos Dados de Carga Útil do Pacote Longo. O separador de cabeçalho 211 separa os dados de transmissão recebidos 147A em uma região de cabeçalho do quadro R1 e uma região de pacote R2. O interpretador de cabeçalho 212 especifica uma posição dos Dados de Carga Útil do Pacote Longo incluídos na região de pacote R2 com base nos dados (especificamente, os Dados Embutidos) incluídos na região de cabeçalho do quadro R1. O separador de Carga Útil 213 separa os dados de Carga Útil do Pacote Longo incluídos na região de pacote R2 da região de pacote R2 com base na posição dos Dados de Carga Útil do Pacote Longo especificados pelo interpretador de cabeçalho 212.
[0064] O interpretador de EBD 214 transmite os Dados Embutidos como os dados EBD 214A para o processador de informação 220. O interpretador de EBD 214 determina adicionalmente, a partir do tipo de dados incluído nos Dados Embutidos, se os dados de imagem incluídos nos Dados de Carga Útil do Pacote Longo são os dados de imagem comprimidos 120A dos dados de imagem 116 de uma ROI ou os dados de imagem comprimidos 130A dos dados de imagem normais. O interpretador de EBD 214 transmite um resultado de tal determinação para o separador de dados de ROI 215.
[0065] Em um caso em que os dados de imagem incluídos nos Dados de Carga Útil do Pacote Longo forem os dados de imagem comprimidos 120A dos dados de imagem 116 da ROI, o separador de dados de ROI 215 transmite os dados de Carga Útil do Pacote Longo como os Dados de Carga Útil 215A para o processador de informação 220 (especificamente, um decodificador de ROI 222). Em um caso em que os dados de imagem
25 / 44 incluídos nos Dados de Carga Útil forem os dados de imagem comprimidos 130A dos dados de imagem normais, o separador de dados de ROI 215 transmite os dados de Carga Útil do Pacote Longo como Dados de Carga Útil 215B para o processador de informação 220 (especificamente, um decodificador de imagem normal 224). Em um caso em que a informação RIO 120B for incluída nos Dados de Carga Útil do Pacote Longo, os Dados de Carga Útil 215A incluem a informação RIO 120B e os dados de pixel para uma linha nos dados de imagem comprimidos 147B.
[0066] O processador de informação 220 extrai a informação de ROI 120B dos Dados Embutidos incluídos nos dados EBD 214A. O processador de informação 220 extrai uma imagem (a imagem de ROI 112) de cada uma das regiões de interesse ROI na imagem capturada 111 dos Dados de Carga Útil do Pacote Longo incluídos nos dados de transmissão 147A recebidos pela seção de recepção 210 com base na informação de ROI 120B extraída por um extrator de informação 221. O processador de informação 220 inclui, por exemplo, o extrator de informação 221, o decodificador de ROI 222, um gerador da imagem de ROI 223 e o decodificador de imagem normal 224.
[0067] O decodificador de imagem normal 224 decodifica os dados de Carga Útil 215B para gerar a imagem normal 224A. O decodificador de ROI 222 decodifica os dados de imagem comprimidos 147B incluídos nos Dados de Carga Útil 215A para gerar os dados de imagem 222A. Os dados de imagem 222A incluem uma ou uma pluralidade de imagens de transmissão
116.
[0068] O extrator de informação 221 extrai a informação de ROI 120B dos Dados Embutidos incluídos nos dados EBD 214A. O extrator de informação 221 extrai, por exemplo, o número de regiões de interesse ROI incluídas na imagem capturada 111, o número de região (ou a prioridade 115) de cada uma das regiões de interesse ROI, o comprimento de dados de cada uma das regiões de interesse ROI, e o formato de imagem de cada uma das
26 / 44 regiões de interesse ROI dos Dados Embutidos incluídos nos dados EBD 214A. Isto é, os dados de transmissão 147A incluem o número de região (ou a prioridade 115) da região de interesse ROI correspondente a cada uma das imagens de transmissão 116 como a informação de discriminação que torna possível determinar a partir de qual da pluralidade de imagens de transmissão 116 obtidas a partir dos dados de transmissão 147A a imagem 118 da região de sobreposição ROO foi omitida.
[0069] O gerador da imagem de ROI 223 detecta a região de sobreposição ROO em que duas ou mais regiões de interesse ROI sobrepõem uma com a outra com base na informação de ROI 120B obtida pelo extrator de informação 221.
[0070] O extrator de informação 221 extrai, por exemplo, as coordenadas (por exemplo, as coordenadas superior esquerda (Xa1, Ya1)), os comprimentos (por exemplo, os comprimentos da região física XLa1 e YLa1) e o número de região 1 (ou a prioridade 115 (=1)) da região de interesse ROI correspondente à imagem de ROI 112a1 a partir dos Dados Embutidos incluídos nos dados EBD 214A. O extrator de informação 221 extrai adicionalmente, por exemplo, as coordenadas (por exemplo, as coordenadas superior esquerda (Xa2, Ya2)), os comprimentos (por exemplo, os comprimentos da região física XLa2 e YLa2) e o número de região 2 (ou a prioridade 115 (=2)) da região de interesse ROI correspondente à imagem de ROI 112a2 a partir dos Dados Embutidos incluídos nos dados EBD 214A.
[0071] Neste momento, o gerador da imagem de ROI 223 deriva a informação posicional 114 da região de sobreposição ROO com base na informação assim extraída (a seguir referida como “informação de extração 221A”). O gerador da imagem de ROI 223 deriva, por exemplo, as coordenadas (por exemplo, as coordenadas superior esquerda (Xb1, Yb1)) e os comprimentos (por exemplo, o comprimento da região física XLb1 e YLb1)) da região de sobreposição ROO como a informação posicional 114 da
27 / 44 região de sobreposição ROO.
[0072] Em vez de obter a informação RIO 120B a partir dos Dados Embutidos incluídos nos dados EBD 214A, o gerador da imagem de ROI 223 pode obter a informação RIO 120B a partir dos Dados de Carga Útil 215A. Neste caso, o gerador da imagem de ROI 223 pode detectar a região de sobreposição ROO em que duas ou mais regiões de interesse ROI sobrepõem umas com as outras com base na informação RIO 120B incluída nos Dados de Carga Útil 215A. Além do mais, o gerador da imagem de ROI 223 pode extrair a informação de extração 221A a partir da informação RIO 120B incluída nos Dados de Carga Útil 215A, e pode derivar a informação posicional 114 da região de sobreposição ROO com base na informação de extração assim extraída 221A.
[0073] O gerador da imagem de ROI 223 gera adicionalmente as imagens (imagens da ROI 112a1 e 112a2) das respectivas regiões de interesse ROI na imagem capturada 111 com base nos dados de imagem 222A, na informação de extração 221A e na informação posicional 114 da região de sobreposição ROO. O gerador da imagem de ROI 223 transmite as imagens geradas como as imagens da ROI 223A. [Procedimento]
[0074] A seguir, é dada descrição de um exemplo de um procedimento de transmissão de dados no sistema de transmissão de figura 1 em relação às figuras 3 e 9.
[0075] Primeiro, a seção de formação de imagem 110 transmite a imagem capturada 111 (dados de imagem digitais) obtida pela formação de imagem para o processador de imagem 120. A seção de corte de ROI 121 especifica duas regiões de interesse ROI1 e ROI2 incluídas na imagem capturada 111 inserida a partir da seção de formação de imagem 110. A seção de corte de ROI 121 corta as imagens (imagens da ROI 112a1 e 112a2) das regiões de interesse ROI1 e ROI2 a partir da imagem capturada 111. A seção
28 / 44 de corte de ROI 121 atribui o número de região 1 como um identificador à região de interesse ROI1, e atribui o número de região 2 como um identificador à região de interesse ROI2.
[0076] O interpretador de ROI 122 deriva a informação posicional 113 da região de interesse ROI na imagem capturada 111 para cada uma das regiões de interesse ROI. O interpretador de ROI 122 deriva as coordenadas superior esquerda (Xa1, Ya1) da região de interesse ROI1, um comprimento (XLa1) na direção do eixo geométrico X da região de interesse ROI1, e um comprimento (YLa1) na direção do eixo geométrico Y da região de interesse ROI1 com base na região de interesse ROI1. O interpretador de ROI 122 deriva as coordenadas superior esquerda (Xa2, Ya2) da região de interesse ROI2, um comprimento (XLa2) na direção do eixo geométrico X da região de interesse ROI2, e um comprimento (YLa2) na direção do eixo geométrico Y da região de interesse ROI2 com base na região de interesse ROI2.
[0077] O detector de sobreposição 123 detecta a região de sobreposição ROO na qual as duas regiões de interesse ROI1 e ROI2 sobrepõem uma com a outra com base na informação posicional 113 das duas regiões de interesse ROI1 e ROI2 na imagem capturada 111. Isto é, o detector de sobreposição 123 deriva a informação posicional 114 da região de sobreposição ROO na imagem capturada 111. O detector de sobreposição 123 deriva as coordenadas superior esquerda (Xb1, Yb1) da região de sobreposição ROO, um comprimento (XLb1) na direção do eixo geométrico X da região de sobreposição ROO, e um comprimento (YLb1) na direção do eixo geométrico Y da região de sobreposição ROO como a informação posicional 114 da região de sobreposição ROO na imagem capturada 111.
[0078] A seção de definição da prioridade 124 atribui 1 como a prioridade 115 a uma região, isto é, a região de interesse ROI1 da região de interesse ROI1 e ROI2, e atribui 2 como a prioridade 115 à outra região, isto é, a região de interesse ROI2.
29 / 44
[0079] O codificador 125 gera duas imagens de transmissão 116a1 e 116a2 obtidas pela omissão da imagem 118 da região de sobreposição ROO a partir das duas imagens da ROI 112a1 e 112a2 obtidas a partir da imagem capturada 111 para evitar que a imagem 118 seja incluída redundantemente nas duas regiões de interesse ROI1 e ROI2.
[0080] O codificador 125 determina a partir de qual das duas imagens da ROI 112a1 e 112a2 a imagem 118 deve ser omitida com base nos números de região (ou nas prioridades 115) das duas regiões de interesse ROI1 e ROI2. O codificador 125 omite as imagens 118 a partir da imagem de ROI 112a2 correspondente à região de interesse ROI2 com um maior número de região (ou prioridade 115) nas duas regiões de interesse ROI1 e ROI2, desse modo, gerando a imagem de transmissão 116a2. O codificador 125 considera a própria imagem de ROI 112a como a imagem de transmissão 116a para a imagem de ROI 112a1 com um menor número de região (ou prioridade 115) nas duas regiões de interesse ROI1 e ROI2.
[0081] O controlador de processamento de imagem 126 gera a informação de ROI 120B e a informação de quadro 120C, e transmite a informação de ROI 120B e a informação de quadro 120C para a seção de transmissão 140. A seção de transmissão 140 gera os dados de transmissão 147A com base em vários dados (120A, 120B, 120C, e 130A) inseridos a partir dos processadores de imagem 120 e 130. A seção de transmissão 140 envia os dados de transmissão gerados 147A para o dispositivo de recepção de figura 200 através da via de dados DL.
[0082] A seção de recepção 210 recebe os dados de transmissão 147A transmitidos a partir do dispositivo de transmissão de figura 100 através da via de dados DL. A seção de recepção 210 realiza o processamento pré- determinado nos dados de transmissão recebidos 147A para gerar os dados EBD 214A e os dados de Carga Útil 215A, e transmite os dados EBD 214A e os dados de Carga Útil 215A para o processador de informação 220.
30 / 44
[0083] O extrator de informação 221 extrai a informação de ROI 120B a partir dos Dados Embutidos incluídos nos dados EBD 214A. O extrator de informação 221 extrai as coordenadas (por exemplo, as coordenadas superior esquerda (Xa1, Ya1)), os comprimentos (por exemplo, os comprimentos da região física XLa1 e YLa1) e o número de região 1 (ou a prioridade 115 (= 1)) da região de interesse ROI correspondente à imagem de ROI 112a1 a partir dos Dados Embutidos incluídos nos dados EBD 214A. O extrator de informação 221 extrai adicionalmente as coordenadas (por exemplo, as coordenadas superior esquerda (Xa2, Ya2)), os comprimentos (por exemplo, os comprimentos da região física XLa2 e YLa2) e o número de região 2 (ou a prioridade 115 (= 2)) da região de interesse ROI correspondente à imagem de ROI 112a2. O decodificador de ROI 222 decodifica os dados de imagem comprimidos 147B incluídos nos Dados de Carga Útil 215A para gerar os dados de imagem 222A.
[0084] O gerador da imagem de ROI 223 deriva a informação posicional 114 da região de sobreposição ROO com base na informação assim extraída (a informação de extração 221A). O gerador da imagem de ROI 223 deriva, por exemplo, as coordenadas (por exemplo, as coordenadas superior esquerda (Xb1, Yb1)) e os comprimentos (por exemplo, os comprimentos da região física XLb1 e YLb1)) da região de sobreposição ROO como a informação posicional 114 da região de sobreposição ROO supradescrita. O gerador da imagem de ROI 223 gera adicionalmente as imagens das respectivas regiões de interesse ROI (as imagens da ROI 112a1 e 112a2) na imagem capturada 111 com base nos dados de imagem 222A, na informação de extração 221A e na informação posicional 114 da região de sobreposição ROO. [Efeitos]
[0085] A seguir, é dada descrição dos efeitos do sistema de transmissão de figura 1 de acordo com a presente modalidade.
31 / 44
[0086] Nos últimos anos, as aplicações para transmitir grandes quantidades de dados com um grande volume de dados têm aumentado. É provável que os sistemas de transmissão sejam pesadamente carregados e, no pior caso, há uma possibilidade de que os sistemas de transmissão caiam e a transmissão de dados não seja realizada.
[0087] A fim de impedir que os sistemas de transmissão caiam, por exemplo, em vez de transmitir a íntegra de uma imagem fotografada, apenas uma imagem parcial obtida pela especificação de um objeto a ser fotografado e pelo corte do objeto identificado foi transmitida.
[0088] Incidentemente, como um sistema usado para a transmissão de um sensor de imagem para um processador de aplicação, MIPI CSI-2 é usado em alguns casos. Em um caso em que uma ROI precisar ser transmitida com o uso do sistema, a transmissão da ROI pode não ser fácil devido a várias restrições.
[0089] Ao contrário, na presente modalidade, a informação de ROI 120B sobre as respectivas regiões de interesse ROI na imagem capturada 111 é enviada nos Dados Embutidos, e os dados de imagem de cada uma das regiões de interesse ROI são enviados nos Dados de Carga Útil do Pacote Longo. Isto torna possível extrair facilmente os dados de imagem (a imagem de ROI 211) de cada uma das regiões de interesse ROI dos dados de transmissão 147A em um dispositivo (o dispositivo de recepção de figura 200) que recebeu os dados de transmissão 147A enviados a partir do dispositivo de transmissão de figura 100. Em decorrência disto, é possível transmitir as regiões de interesse ROI mesmo sob várias restrições.
[0090] Além do mais, na presente modalidade, os dados de imagem (os dados de imagem comprimidos 120A) das respectivas regiões de interesse ROI são enviados através do canal virtual mutuamente comum. Isto torna possível enviar uma pluralidade de imagens da ROI 211 no mesmo pacote, o que torna possível alcançar a alta eficiência de transmissão ao mesmo tempo
32 / 44 em que a pluralidade de imagens da ROI 211 é enviada sem a necessidade de incluir um modo LP.
[0091] Adicionalmente, na presente modalidade, o tipo de dados de cada uma das regiões de interesse ROI é colocado no cabeçalho de pacote PH dos Dados de Carga Útil do Pacote Longo e é enviado. Desta maneira, o tipo de dados de cada uma das regiões de interesse ROI é obtido apenas pelo acesso ao cabeçalho de pacote PHs dos Dados de Carga Útil do Pacote Longo sem acessar os Dados Embutidos. Isto torna possível aumentar a velocidade de processamento no dispositivo de recepção da informação 200, o que torna possível alcançar a alta eficiência de transmissão.
[0092] Além do mais, na presente modalidade, em um caso em que a informação de ROI 120B for colocada nos Dados de Carga Útil do Pacote Longo e for enviada, a informação de ROI 120B é obtida apenas pelo acesso aos dados de Carga Útil do Pacote Longo sem acessar os Dados Embutidos. Isto torna possível aumentar a velocidade de processamento no dispositivo de recepção da informação 200, o que torna possível alcançar a alta eficiência de transmissão.
[0093] Adicionalmente, na presente modalidade, a informação de ROI 120B sobre as respectivas regiões de interesse ROI é extraída a partir dos Dados Embutidos incluídos nos dados de transmissão 147A, e a imagem (a imagem de ROI 112) de cada uma das regiões de interesse ROI é extraída a partir dos Dados de Carga Útil do Pacote Longo incluído nos dados de transmissão 147A com base na informação de ROI extraída 120B. Isto torna possível extrair facilmente a imagem (a imagem de ROI 112) de cada uma das regiões de interesse ROI a partir dos dados de transmissão 147A. Em decorrência disto, é possível transmitir as regiões de interesse ROI mesmo sob várias restrições. <2. Exemplos de Modificação> [Exemplo de Modificação A]
33 / 44
[0094] A figura 10 ilustra um exemplo de modificação de uma configuração do dispositivo de transmissão da informação 100 montado no sistema de comunicação 1 de acordo com a modalidade exposta. No dispositivo de transmissão da informação 100 de acordo com o presente exemplo de modificação, o separador de dados de ROI 215 é omitido, e o separador de Carga Útil 213 transmite os dados de Carga Útil 215A ou os dados de Carga Útil 215B.
[0095] No presente exemplo de modificação, o separador de Carga Útil 213, o separador de Carga Útil 213 determina, a partir do Tipo de Dados (o tipo de dados de cada região de interesse ROI) incluído no cabeçalho de pacote PH dos Dados de Carga Útil do Pacote Longo, se os dados de imagem incluídos nos Dados de Carga Útil do Pacote Longo são os dados de imagem comprimidos 120A dos dados de imagem 116 da ROI ou os dados de imagem comprimidos 130A dos dados de imagem normais. Em decorrência disto, em um caso em que os dados de imagem incluídos nos Dados de Carga Útil do Pacote Longo forem os dados de imagem comprimidos 120A dos Dados de imagem 116 da ROI, o separador de Carga Útil 213 transmite os dados de Carga Útil do Pacote Longo como os dados de Carga Útil 215A para o processador de informação 220 (especificamente, o decodificador de ROI 222). Em um caso em que os dados de imagem incluídos nos Dados de Carga Útil do Pacote Longo forem os dados de imagem comprimidos 130A dos dados de imagem normais, o separador de Carga Útil 213 transmite os dados de Carga Útil do Pacote Longo como os dados de Carga Útil 215B para o processador de informação 220 (especificamente, o decodificador de imagem normal 224).
[0096] No presente exemplo de modificação, é possível determinar o tipo de dados de cada uma das regiões de interesse ROI apenas pelo acesso ao cabeçalho de pacote PH dos Dados de Carga Útil do Pacote Longo sem acessar os Dados Embutidos. Isto torna possível aumentar a velocidade de
34 / 44 processamento no dispositivo de recepção da informação 200, o que torna possível alcançar a alta eficiência de transmissão. [Exemplo de Modificação B]
[0097] No sistema de comunicação 1 de acordo com a modalidade exposta, o cabeçalho de pacote PH dos Dados de Carga Útil do Pacote Longo pode não incluir o tipo de dados (o tipo de dados de cada uma das regiões de interesse ROI). Mesmo em um caso como este, é possível determinar, a partir do Tipo de Dados incluído nos Dados Embutidos, se os dados de imagem incluídos nos Dados de Carga Útil do Pacote Longo são os dados de imagem comprimidos 120A dos dados de imagem 116 da região de interesse ROI ou os dados de imagem comprimidos 130A dos dados de imagem normais. Isto faz com que o tamanho de dados do cabeçalho de pacote PHs seja reduzido, o que torna possível reduzir a capacidade da transmissão. [Exemplo de Modificação C]
[0098] No sistema de comunicação 1 de acordo com a modalidade exposta, o sintetizador 147 envia os dados de imagem (os dados de imagem comprimidos 120A) das respectivas regiões de interesse ROI através do canal virtual mutuamente comum. Entretanto, o sintetizador 147 pode enviar os dados de imagem (os dados de imagem comprimidos 120A) das respectivas regiões de interesse ROI através de canais virtuais diferentes uns dos outros. Entretanto, neste caso, por exemplo, da forma ilustrada na figura 11, o modo de baixa potência LP é incluído entre os dados de Carga Útil de dois Pacotes Longos correspondentes a diferentes regiões de interesse ROI.
[0099] Incidentemente, incluir o modo de baixa potência LP entre os dados de Carga Útil dos dois Pacotes Longos correspondentes a diferentes regiões de interesse ROI significa que o processamento de separação dos dados de Carga Útil dos dois Pacotes Longos correspondentes a diferentes regiões de interesse ROI não é necessário. Isto torna possível eliminar o tempo de processamento necessário para tal processamento de separação no
35 / 44 presente exemplo de modificação. [Exemplo de Modificação D]
[00100] No sistema de comunicação 1 de acordo com a modalidade exposta, em alguns casos, o sintetizador 147 coloca a informação de ROI 120B nos Dados de Carga Útil do Pacote Longo, além dos dados de pixel para uma linha nos dados de imagem comprimidos 147B. Entretanto, no sistema de comunicação 1 de acordo com a modalidade exposta, o sintetizador 147 pode colocar a informação de ROI 120B em um Campo de Dados (Campo de Dados) SP de um ou uma pluralidade de Pacotes Curtos (Pacotes Curtos) providos na frente dos Dados de Carga Útil do Pacote Longo e enviar a informação de ROI 120B, por exemplo. Por exemplo, o sintetizador 147 pode colocar pelo menos um do número de regiões de interesse ROI (o número de ROIs) na imagem capturada 111, do número de região (ou a prioridade 115) de cada uma das regiões de interesse ROI, o comprimento de dados de cada uma das regiões de interesse ROI, ou o formato de imagem de cada uma das regiões de interesse ROI no campo de dados SP de um ou da pluralidade de Pacotes Curtos providos na frente dos Dados de Carga Útil do Pacote Longo, e enviar o pelo menos um dos mesmos. Por exemplo, da forma ilustrada na figura 12, o sintetizador 147 pode colocar o número de regiões de interesse ROI (o número de ROIs) incluídas na imagem capturada 111, o número de região (ou a prioridade 115) de cada uma das regiões de interesse ROI, o comprimento de dados de cada uma das regiões de interesse ROI, e o formato de imagem de cada uma das regiões de interesse ROI no campo de dados SP de um ou da pluralidade de Pacotes Curtos providos na frente dos Dados de Carga Útil do Pacote Longo, e enviar os mesmos.
[00101] No presente exemplo de modificação, é possível obter a informação de ROI 120B apenas pelo acesso do campo de dados SP de um ou da pluralidade de Pacotes Curtos providos na frente dos Dados de Carga Útil do Pacote Longo sem acessar os Dados Embutidos. Isto torna possível
36 / 44 aumentar a velocidade do processamento no dispositivo de recepção da informação 200, o que torna possível alcançar a alta eficiência de transmissão. [Exemplo de Modificação E]
[00102] No sistema de comunicação 1 de acordo com a modalidade exposta e os exemplos de modificação (os exemplos de modificação A até D) da mesma, os dados de transmissão 120A são gerados usando os dados de imagem comprimidos 147B correspondentes a uma pluralidade de imagens de transmissão 116 obtidas pela omissão da imagem 118 a partir da pluralidade de imagens da ROI 112. Entretanto, no sistema de comunicação 1 de acordo com a modalidade exposta e os exemplos de modificação (os exemplos de modificação A até D) da mesma, os dados de transmissão 120A podem ser gerados nos dados de transmissão 120A usando os dados de imagem comprimidos 120A correspondentes às respectivas imagens da ROI 112, independente se a imagem 118 da região de sobreposição ROO existe ou não nas imagens (imagens da ROI 112) da pluralidade de regiões de interesse ROI. Isto é, no sistema de comunicação 1 de acordo com a modalidade exposta e os exemplos de modificação (os exemplos de modificação A até D) da mesma, os dados de imagem comprimidos 147B incluem os dados de imagem comprimidos 120A correspondentes às respectivas imagens da ROI
112.
[00103] Em um caso como este, por exemplo, da forma ilustrada na figura 13, é possível omitir o interpretador de ROI 122, o detector de sobreposição 123 e a seção de definição da prioridade 124 do processador de imagem 120. Mesmo em um caso em que o interpretador de ROI 122, o detector de sobreposição 123 e a seção de definição da prioridade 124 forem omitidos do processador de imagem 120, como exposto, a seção de transmissão 140 envia a informação de ROI 120B sobre as respectivas regiões de interesse ROI na imagem capturada 111 nos Dados Embutidos, similarmente ao sistema de comunicação 1 de acordo com a modalidade
37 / 44 exposta e os exemplos de modificação (os exemplos de modificação A até D) da mesma. A seção de transmissão 140 envia adicionalmente os dados de imagem (os dados de imagem comprimidos 120A) das respectivas regiões de interesse ROI nos Dados de Carga Útil do Pacote Longo. Além do mais, a seção de transmissão 140 envia os dados de imagem (os dados de imagem comprimidos 120A) das respectivas regiões de interesse ROI em um quadro de dados de imagem, e envia a informação de ROI 120B sobre as respectivas regiões de interesse ROI em um cabeçalho do quadro de dados de imagem. Isto torna possível extrair facilmente os dados de imagem (a imagem de ROI 211) de cada uma das regiões de interesse ROI dos dados de transmissão 147A em um dispositivo (o dispositivo de recepção de figura 200) que recebeu os dados de transmissão 147A enviados a partir do dispositivo de transmissão de figura 100. Em decorrência disto, é possível transmitir as regiões de interesse ROI mesmo sob várias restrições.
[00104] Além do mais, no presente exemplo de modificação, é possível que a seção de transmissão 140 envie uma pluralidade de imagens da ROI 211 no mesmo pacote em um caso em que os dados de imagem (os dados de imagem comprimidos 120A) das respectivas regiões de interesse ROI forem enviados através do canal virtual mutuamente comum. Isto elimina a necessidade de incluir um modo LP enquanto a pluralidade de imagens da ROI 211 forem enviadas, o que torna possível alcançar a alta eficiência de transmissão.
[00105] Adicionalmente, no presente exemplo de modificação, em um caso em que a seção de transmissão 140 enviar os dados de imagem (os dados de imagem comprimidos 120A) das respectivas regiões de interesse ROI através de canais virtuais diferentes uns dos outros, o processamento de separação dos dados de Carga Útil de dois Pacotes Longos correspondentes a diferentes regiões de interesse ROI torna-se desnecessário. Isto torna possível eliminar o tempo de processamento necessário para tal processamento de
38 / 44 separação no presente exemplo de modificação.
[00106] Além do mais, no presente exemplo de modificação, em um caso em que a seção de transmissão 140 colocar o tipo de dados de cada uma das regiões de interesse ROI no cabeçalho de pacote PH dos Dados de Carga Útil do Pacote Longo e enviar o tipo de dados de cada uma das regiões de interesse ROI, é possível obter o tipo de dados de cada uma das regiões de interesse ROI apenas pelo acesso do cabeçalho de pacote PH dos Dados de Carga Útil do Pacote Longo sem acessar os Dados Embutidos. Isto torna possível aumentar a velocidade de processamento no dispositivo de recepção da informação 200, o que torna possível alcançar a alta eficiência de transmissão.
[00107] Adicionalmente, no presente exemplo de modificação, em um caso em que a seção de transmissão 140 colocar a informação de ROI 120B nos Dados de Carga Útil do Pacote Longo e enviar a informação de ROI 120B, é possível obter a informação de ROI 120B apenas pelo acesso dos dados de Carga Útil do Pacote Longo sem acessar os Dados Embutidos. Isto torna possível aumentar a velocidade de processamento no dispositivo de recepção da informação 200, o que torna possível alcançar a alta eficiência de transmissão.
[00108] Além do mais, no presente exemplo de modificação, em um caso em que a seção de transmissão 140 colocar a informação de ROI 120B no campo de dados SP de um ou uma pluralidade de Pacotes Curtos providos na frente dos Dados de Carga Útil do Pacote Longo e enviar a informação de ROI 120B, é possível obter a informação de ROI 120B apenas pelo acesso do campo de dados SP de um ou da pluralidade de Pacotes Curtos providos na frente dos Dados de Carga Útil do Pacote Longo sem acessar os Dados Embutidos. Isto torna possível aumentar a velocidade de processamento no dispositivo de recepção da informação 200, o que torna possível alcançar a alta eficiência de transmissão.
39 / 44
[00109] Adicionalmente, no presente exemplo de modificação, em um caso em que a seção de transmissão 140 extrair a informação de ROI 120B sobre as respectivas regiões de interesse ROI dos Dados Embutidos incluídos nos dados de transmissão 147A e extrair a imagem (a imagem de ROI 112) de cada uma das regiões de interesse ROI dos Dados de Carga Útil do Pacote Longo incluído nos dados de transmissão 147A com base na informação de ROI extraída 120B, é possível extrair facilmente a imagem (a imagem de ROI 112) de cada uma das regiões de interesse ROI dos dados de transmissão 147A. Em decorrência disto, é possível transmitir as regiões de interesse ROI mesmo sob várias restrições. [Exemplo de Modificação F]
[00110] No sistema de comunicação 1 de acordo com a modalidade exposta e nos exemplos de modificação (os exemplos de modificação A até E) da mesma, a seção de transmissão 140 envia a informação de ROI 120B sobre as respectivas regiões de interesse ROI no cabeçalho (a região de cabeçalho do quadro R1) do quadro de dados de imagem. Entretanto, no sistema de comunicação 1 de acordo com a modalidade exposta e nos exemplos de modificação (os exemplos de modificação A até E) da mesma, a seção de transmissão 140 pode enviar a informação de ROI 120B sobre as respectivas regiões de interesse ROI em um rodapé (um região de rodapé do quadro R3) do quadro de dados de imagem. Por exemplo, da forma ilustrada na figura 14, a seção de transmissão 140 pode enviar a informação de ROI 120B na região de rodapé do quadro R3 em um caso em que a informação de ROI 120B sobre as respectivas regiões de interesse ROI na imagem capturada 111 for enviada nos Dados Embutidos. Percebe-se que, na figura 14, a região de cabeçalho R1 não é ilustrada a título de conveniência. Mesmo em um caso em que o presente exemplo de modificação for adotado, é possível transmitir as regiões de interesse ROI mesmo sob várias restrições. [Exemplo de Modificação G]
40 / 44
[00111] No sistema de comunicação 1 de acordo com a modalidade exposta e nos exemplos de modificação (os exemplos de modificação A até F) da mesma, o quadro de dados de imagem inclui a região de cabeçalho do quadro R1, a região de pacote R2 e o rodapé do quadro R3. Entretanto, no sistema de comunicação 1 de acordo com a modalidade exposta e nos exemplos de modificação (os exemplos de modificação A até F) da mesma, o quadro de dados de imagem pode não incluir o rodapé do quadro R3. Além do mais, no exemplo de modificação F exposto, o quadro de dados de imagem pode não incluir a região de cabeçalho do quadro R1.
[00112] Embora a presente descrição tenha sido descrita em relação às modalidades e aos exemplos de modificação das mesmas, a presente descrição não é limitada às modalidades expostas, etc., e pode ser modificada de uma variedade de maneiras. Percebe-se que os efeitos descritos nesta especificação são meramente ilustrativos. Os efeitos da presente descrição não são limitados aos efeitos descritos nesta especificação. A presente descrição pode ter efeitos diferentes dos efeitos descritos nesta especificação.
[00113] Além do mais, por exemplo, a presente descrição pode ter as seguintes configurações.
[00114] (1) Um dispositivo de transmissão de figura, que inclui: uma seção de transmissão que envia os dados de imagem das ROIs (Regiões de Interesse) em uma imagem em Dados de Carga Útil de um Pacote Longo e envia a informação sobre as ROIs em Dados Embutidos.
[00115] (2) O dispositivo de transmissão de figura, como definido em (1), em que a seção de transmissão envia os dados de imagem das respectivas ROIs através de canais virtuais diferentes uns dos outros.
[00116] (3) O dispositivo de transmissão de figura, como definido em (1), em que a seção de transmissão envia os dados de imagem das respectivas ROIs através de um canal virtual mutuamente comum.
[00117] (4) O dispositivo de transmissão de figura, como definido em
41 / 44 (3), em que a seção de transmissão coloca os tipos de dados das respectivas ROIs em um cabeçalho de pacote dos Dados de Carga Útil, e envia os tipos de dados das respectivas ROIs.
[00118] (5) O dispositivo de transmissão de figura, como definido em (3), em que a seção de transmissão coloca pelo menos um das inúmeras ROIs incluídas na imagem, de um número de região de cada uma das ROIs, de um comprimento de dados de cada uma das ROIs ou de um formato de imagem de cada uma das ROIs nos Dados de Carga Útil, e envia o pelo menos um das inúmeras ROIs incluídas na imagem, do número de região de cada uma das ROIs, do comprimento de dados de cada uma das ROIs ou do formato de imagem de cada uma das ROIs.
[00119] (6) O dispositivo de transmissão de figura, como definido em (3), em que a seção de transmissão coloca pelo menos um das inúmeras ROIs incluídas na imagem, de um número de região de cada uma das ROIs, de um comprimento de dados de cada uma das ROIs ou de um formato de imagem de cada uma das ROIs em um Pacote Curto, e envia o pelo menos um das inúmeras ROIs incluídas na imagem, do número de região de cada uma das ROIs, do comprimento de dados de cada uma das ROIs ou do formato de imagem de cada uma das ROIs.
[00120] (7) O dispositivo de transmissão de figura, como definido em qualquer um de (1) a (6), em que a seção de transmissão envia os dados de imagem das ROIs em um quadro de dados de imagem e envia a informação sobre as ROIs em um cabeçalho ou um rodapé do quadro de dados de imagem.
[00121] (8) O dispositivo de transmissão de figura, como definido em qualquer um de (1) a (7), em que a seção de transmissão envia um sinal na especificação MIPI (Interface do Processador da Indústria Móvel) CSI (Interface Serial de Câmera)-2, especificação MIPI CSI-3, ou especificação MIPI DSI (Interface Serial de Exibição).
42 / 44
[00122] (9) Dispositivo de transmissão de figura, distinguido pelo fato de que inclui: um detector que detecta uma região de sobreposição com base na informação sobre respectivas ROIs (Regiões de Interesse) em uma imagem, a região de sobreposição na qual duas ou mais das ROIs se sobrepõem umas com as outras; e uma seção de transmissão que envia uma pluralidade de peças de terceiros dados de imagem em Dados de Carga Útil de um Pacote Longo e envia a informação sobre as respectivas ROIs na imagem em Dados Embutidos, a pluralidade de peças de terceiros dados de imagem sendo obtidas pela omissão dos segundos dados de imagem da região de sobreposição a partir de uma pluralidade de peças de primeiros dados de imagem das ROIs na imagem para evitar que os segundos dados de imagem sejam incluídos redundantemente na pluralidade de peças dos primeiros dados de imagem.
[00123] (10) O dispositivo de transmissão de figura, como definido em (9), em que a seção de transmissão envia os dados de imagem das respectivas ROIs através de canais virtuais diferentes uns dos outros.
[00124] (11) O dispositivo de transmissão de figura, como definido em (9), em que a seção de transmissão envia os dados de imagem das respectivas ROIs através de um canal virtual mutuamente comum.
[00125] (12) O dispositivo de transmissão de figura, como definido em (11), em que a seção de transmissão coloca os tipos de dados das respectivas ROIs em um cabeçalho de pacote dos Dados de Carga Útil, e envia o tipo de dados das respectivas ROIs.
[00126] (13) O dispositivo de transmissão de figura, como definido em (11), em que a seção de transmissão coloca pelo menos um das inúmeras ROIs incluídas na imagem, de um número de região de cada uma das ROIs, de um comprimento de dados de cada uma das ROIs ou de um formato de
43 / 44 imagem de cada uma das ROIs nos Dados de Carga Útil, e envia o pelo menos um das inúmeras ROIs incluídas na imagem, do número de região de cada uma das ROIs, do comprimento de dados de cada uma das ROIs ou do formato de imagem de cada uma das ROIs.
[00127] (14) O dispositivo de transmissão de figura, como definido em (9), em que a seção de transmissão coloca pelo menos um das inúmeras ROIs incluídas na imagem, de um número de região de cada uma das ROIs, de um comprimento de dados de cada uma das ROIs ou de um formato de imagem de cada uma das ROIs em um Campo de Dados de um Pacote Curto, e envia o pelo menos um das inúmeras ROIs incluídas na imagem, do número de região de cada uma das ROIs, do comprimento de dados de cada uma das ROIs ou do formato de imagem de cada uma das ROIs.
[00128] (15) O dispositivo de transmissão de figura, como definido em qualquer um de (9) a (14), em que a seção de transmissão envia os dados de imagem das ROIs em um quadro de dados de imagem e envia a informação sobre as ROIs em um cabeçalho ou um rodapé do quadro de dados de imagem.
[00129] (16) O dispositivo de transmissão de figura, como definido em qualquer um de (9) a (15), em que a seção de transmissão envia um sinal na especificação MIPI (Interface do Processador da Indústria Móvel) CSI (Interface Serial de Câmera)-2, especificação MIPI CSI-3, ou especificação MIPI DSI (Interface Serial de Exibição).
[00130] (17) Um dispositivo de recepção de figura, que inclui: uma seção de recepção que recebe um sinal de transmissão que inclui os dados de imagem das ROIs (Regiões de Interesse) em uma imagem e a informação sobre as ROIs, os dados de imagem das ROIs sendo incluídos nos Dados de Carga Útil de um Pacote Longo, a informação sobre as ROIs sendo incluída nos Dados Embutidos; e um processador de informação que extrai a informação sobre
44 / 44 as ROIs dos Dados Embutidos incluídos no sinal de transmissão recebido pela seção de recepção, e extrai os dados de imagem das ROIs a partir dos Dados de Carga Útil incluídos no sinal de transmissão recebido pela seção de recepção com base na informação extraída.
[00131] (18) O dispositivo de recepção de figura, como definido em (17), em que o processador de informação detecta uma região de sobreposição na qual duas ou mais das ROIs se sobrepõem umas com as outras com base na informação extraída, e extrai os dados de imagem das respectivas ROIs a partir dos Dados de Carga Útil incluídos no sinal de transmissão recebido pela seção de recepção com base na informação extraída e na informação da região de sobreposição detectada.
[00132] (19) O dispositivo de recepção de figura, como definido em (17) ou (18), em que a seção de transmissão recebe um sinal na especificação MIPI (Interface do Processador da Indústria Móvel) CSI (Interface Serial de Câmera)-2, especificação MIPI CSI-3, ou especificação MIPI DSI (Interface Serial de Exibição).
[00133] Este pedido reivindica o benefício de Pedido de Patente de Prioridade Japonês JP2017-114690 depositado no Escritório de Patentes do Japão em 9 de junho de 2017, cuja íntegra dos conteúdos é aqui incorporada pela referência.
[00134] Deve ser entendido por versados na técnica que várias modificações, combinações, subcombinações e alterações podem ocorrer dependendo das exigências de desenho e de outros fatores no limite em que as mesmas caem no escopo das reivindicações anexas ou dos equivalentes das mesmas.

Claims (19)

REIVINDICAÇÕES
1. Dispositivo de transmissão de figura, caracterizado pelo fato de que compreende: uma seção de transmissão que envia os dados de imagem das ROIs (Regiões de Interesse) em uma imagem em Dados de Carga Útil de um Pacote Longo e envia a informação sobre as ROIs em Dados Embutidos.
2. Dispositivo de transmissão de figura de acordo com a reivindicação 1, caracterizado pelo fato de que a seção de transmissão envia os dados de imagem das respectivas ROIs através de canais virtuais diferentes uns dos outros.
3. Dispositivo de transmissão de figura de acordo com a reivindicação 1, caracterizado pelo fato de que a seção de transmissão envia os dados de imagem das respectivas ROIs através de um canal virtual mutuamente comum.
4. Dispositivo de transmissão de figura de acordo com a reivindicação 3, caracterizado pelo fato de que a seção de transmissão coloca os tipos de dados das respectivas ROIs em um cabeçalho de pacote dos Dados de Carga Útil, e envia os tipos de dados das respectivas ROIs.
5. Dispositivo de transmissão de figura de acordo com a reivindicação 3, caracterizado pelo fato de que a seção de transmissão coloca pelo menos um das inúmeras ROIs incluídas na imagem, de um número de região de cada uma das ROIs, de um comprimento de dados de cada uma das ROIs ou de um formato de imagem de cada uma das ROIs nos Dados de Carga Útil, e envia o pelo menos um das inúmeras ROIs incluídas na imagem, do número de região de cada uma das ROIs, do comprimento de dados de cada uma das ROIs ou do formato de imagem de cada uma das ROIs.
6. Dispositivo de transmissão de figura de acordo com a reivindicação 3, caracterizado pelo fato de que a seção de transmissão coloca pelo menos um das inúmeras ROIs incluídas na imagem, de um número de região de cada uma das ROIs, de um comprimento de dados de cada uma das ROIs ou de um formato de imagem de cada uma das ROIs em um Pacote Curto, e envia o pelo menos um das inúmeras ROIs incluídas na imagem, do número de região de cada uma das ROIs, do comprimento de dados de cada uma das ROIs ou do formato de imagem de cada uma das ROIs.
7. Dispositivo de transmissão de figura de acordo com a reivindicação 1, caracterizado pelo fato de que a seção de transmissão envia os dados de imagem das ROIs em um quadro de dados de imagem e envia a informação sobre as ROIs em um cabeçalho ou um rodapé do quadro de dados de imagem.
8. Dispositivo de transmissão de figura de acordo com a reivindicação 1, caracterizado pelo fato de que a seção de transmissão envia um sinal na especificação MIPI (Interface do Processador da Indústria Móvel) CSI (Interface Serial de Câmera)-2, especificação MIPI CSI-3, ou especificação MIPI DSI (Interface Serial de Exibição).
9. Dispositivo de transmissão de figura, caracterizado pelo fato de que compreende: um detector que detecta uma região de sobreposição com base na informação sobre respectivas ROIs (Regiões de Interesse) em uma imagem, a região de sobreposição na qual duas ou mais das ROIs se sobrepõem umas com as outras; e uma seção de transmissão que envia uma pluralidade de peças de terceiros dados de imagem em Dados de Carga Útil de um Pacote Longo e envia a informação sobre as respectivas ROIs na imagem em Dados Embutidos, a pluralidade de peças de terceiros dados de imagem sendo obtidas pela omissão dos segundos dados de imagem da região de sobreposição a partir de uma pluralidade de peças de primeiros dados de imagem das ROIs na imagem para evitar que os segundos dados de imagem sejam incluídos redundantemente na pluralidade de peças dos primeiros dados de imagem.
10. Dispositivo de transmissão de figura de acordo com a reivindicação 9, caracterizado pelo fato de que a seção de transmissão envia as respectivas ROIs através de canais virtuais diferentes uns dos outros.
11. Dispositivo de transmissão de figura de acordo com a reivindicação 9, caracterizado pelo fato de que a seção de transmissão envia as respectivas ROIs através de um canal virtual mutuamente comum.
12. Dispositivo de transmissão de figura de acordo com a reivindicação 11, caracterizado pelo fato de que a seção de transmissão coloca os tipos de dados das respectivas ROIs em um cabeçalho de pacote dos Dados de Carga Útil, e envia o tipo de dados das respectivas ROIs.
13. Dispositivo de transmissão de figura de acordo com a reivindicação 11, caracterizado pelo fato de que a seção de transmissão coloca pelo menos um das inúmeras ROIs incluídas na imagem, de um número de região de cada uma das ROIs, de um comprimento de dados de cada uma das ROIs ou de um formato de imagem de cada uma das ROIs nos Dados de Carga Útil, e envia o pelo menos um das inúmeras ROIs incluídas na imagem, do número de região de cada uma das ROIs, do comprimento de dados de cada uma das ROIs ou do formato de imagem de cada uma das ROIs.
14. Dispositivo de transmissão de figura de acordo com a reivindicação 11, caracterizado pelo fato de que a seção de transmissão coloca pelo menos um das inúmeras ROIs incluídas na imagem, de um número de região de cada uma das ROIs, de um comprimento de dados de cada uma das ROIs ou de um formato de imagem de cada uma das ROIs em um Campo de Dados de um Pacote Curto, e envia o pelo menos um das inúmeras ROIs incluídas na imagem, do número de região de cada uma das ROIs, do comprimento de dados de cada uma das ROIs ou do formato de imagem de cada uma das ROIs.
15. Dispositivo de transmissão de figura de acordo com a reivindicação 9, caracterizado pelo fato de que a seção de transmissão envia os dados de imagem das ROIs em um quadro de dados de imagem e envia a informação sobre as ROIs em um cabeçalho ou um rodapé do quadro de dados de imagem.
16. Dispositivo de transmissão de figura de acordo com a reivindicação 9, caracterizado pelo fato de que a seção de transmissão envia um sinal na especificação MIPI (Interface do Processador da Indústria Móvel) CSI (Interface Serial de Câmera)-2, especificação MIPI CSI-3, ou especificação MIPI DSI (Interface Serial de Exibição).
17. Dispositivo de recepção de figura, caracterizado pelo fato de que compreende: uma seção de recepção que recebe um sinal de transmissão que inclui os dados de imagem das ROIs (Regiões de Interesse) em uma imagem e informação sobre as ROIs, os dados de imagem das ROIs sendo incluídos nos Dados de Carga Útil de um Pacote Longo, a informação sobre as ROIs sendo incluída nos Dados Embutidos; e um processador de informação que extrai a informação sobre as ROIs dos Dados Embutidos incluídos no sinal de transmissão recebido pela seção de recepção, e extrai os dados de imagem das ROIs a partir dos Dados de Carga Útil incluídos no sinal de transmissão recebido pela seção de recepção com base na informação extraída.
18. Dispositivo de recepção de figura de acordo com a reivindicação 17, caracterizado pelo fato de que o processador de informação detecta uma região de sobreposição na qual duas ou mais das ROIs se sobrepõem umas com as outras com base na informação extraída, e extrai os dados de imagem das respectivas ROIs a partir dos Dados de Carga Útil incluídos no sinal de transmissão recebido pela seção de recepção com base na informação extraída e na informação da região de sobreposição detectada.
19. Dispositivo de recepção de figura de acordo com a reivindicação 17, caracterizado pelo fato de que a seção de transmissão recebe um sinal na especificação MIPI (Interface do Processador da Indústria Móvel) CSI (Interface Serial de Câmera)-2, especificação MIPI CSI-3, ou especificação MIPI DSI (Interface Serial de Exibição).
BR112019025471-4A 2017-06-09 2018-05-11 Dispositivo de transmissão de figura, e, dispositivo de recepção de figura BR112019025471A2 (pt)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2017114690 2017-06-09
JP2017-114690 2017-06-09
PCT/JP2018/018349 WO2018225449A1 (ja) 2017-06-09 2018-05-11 映像送信装置および映像受信装置

Publications (1)

Publication Number Publication Date
BR112019025471A2 true BR112019025471A2 (pt) 2020-06-23

Family

ID=64567136

Family Applications (1)

Application Number Title Priority Date Filing Date
BR112019025471-4A BR112019025471A2 (pt) 2017-06-09 2018-05-11 Dispositivo de transmissão de figura, e, dispositivo de recepção de figura

Country Status (9)

Country Link
US (1) US20200186841A1 (pt)
EP (1) EP3637784A4 (pt)
JP (1) JP7163285B2 (pt)
KR (2) KR102509132B1 (pt)
CN (1) CN110710222A (pt)
BR (1) BR112019025471A2 (pt)
SG (1) SG11201910049VA (pt)
TW (1) TWI829638B (pt)
WO (1) WO2018225449A1 (pt)

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020116213A1 (ja) * 2018-12-06 2020-06-11 ソニーセミコンダクタソリューションズ株式会社 受信装置および送信装置
JP2020188323A (ja) * 2019-05-10 2020-11-19 ソニーセミコンダクタソリューションズ株式会社 撮像装置および撮像方法
CN114009007A (zh) * 2019-06-28 2022-02-01 索尼半导体解决方案公司 发送装置、接收装置和传输***
US11871008B2 (en) 2019-06-28 2024-01-09 Sony Semiconductor Solutions Corporation Transmitting apparatus, receiving apparatus, and transmission system
TW202110184A (zh) * 2019-07-30 2021-03-01 日商索尼半導體解決方案公司 發送裝置、接收裝置、及通訊系統
WO2021039012A1 (ja) * 2019-08-30 2021-03-04 ソニー株式会社 撮像装置、データ伝送システム、及びデータ伝送方法
US20220279110A1 (en) * 2019-08-30 2022-09-01 Sony Group Corporation Imaging device, processing device, data transmission system, and data transmission method
JPWO2021100627A1 (pt) * 2019-11-20 2021-05-27
JPWO2021192764A1 (pt) * 2020-03-25 2021-09-30
WO2021199944A1 (ja) * 2020-03-31 2021-10-07 ソニーセミコンダクタソリューションズ株式会社 送信装置、受信装置及び伝送システム
JPWO2022050057A1 (pt) * 2020-09-01 2022-03-10
CN114245030A (zh) * 2021-12-20 2022-03-25 北京镁伽科技有限公司 上位机显示测试图像的方法、装置及图像信号发生器

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101313578B (zh) * 2005-09-26 2011-10-19 韩国电子通信研究院 用于在可伸缩视频编码中定义和重构感兴趣区域的方法和装置
US20090097704A1 (en) * 2007-10-10 2009-04-16 Micron Technology, Inc. On-chip camera system for multiple object tracking and identification
US8878912B2 (en) * 2009-08-06 2014-11-04 Qualcomm Incorporated Encapsulating three-dimensional video data in accordance with transport protocols
US8970750B2 (en) 2010-11-12 2015-03-03 Sony Corporation Image outputting apparatus, image outputting method, image processing apparatus, image processing method, program, data structure and imaging apparatus
JP2012209831A (ja) 2011-03-30 2012-10-25 Panasonic Corp 画像データ制御装置
JP2013121032A (ja) * 2011-12-07 2013-06-17 Sony Corp 画像処理装置および方法
JP2013164834A (ja) 2012-01-13 2013-08-22 Sony Corp 画像処理装置および方法、並びにプログラム
CN103260081B (zh) * 2012-02-21 2016-08-10 ***通信集团公司 一种视频图像缩放处理方法及装置
EP2814243A4 (en) * 2012-06-25 2016-04-20 Sony Corp Image Decoding Device, Image Decoding Method, Image Coding Device, and Image Coding Method
JP5700703B2 (ja) 2012-08-20 2015-04-15 日本電信電話株式会社 映像復号装置、映像送受信システム、映像復号方法及び映像送受信方法
KR20180026803A (ko) * 2012-09-18 2018-03-13 브이아이디 스케일, 인크. 타일 및 타일 그룹을 이용한 관심 영역 비디오 코딩
SG11201504504YA (en) * 2012-12-18 2015-07-30 Sony Corp Image processing device and image processing method
WO2015014773A1 (en) * 2013-07-29 2015-02-05 Koninklijke Kpn N.V. Providing tile video streams to a client
CN106031180A (zh) * 2014-02-18 2016-10-12 Lg电子株式会社 收发用于全景服务的广播信号的方法和设备
WO2015197815A1 (en) * 2014-06-27 2015-12-30 Koninklijke Kpn N.V. Determining a region of interest on the basis of a hevc-tiled video stream
TWI545508B (zh) * 2014-07-18 2016-08-11 宏達國際電子股份有限公司 用於執行臉部追蹤功能的方法及其電子裝置
US11205305B2 (en) * 2014-09-22 2021-12-21 Samsung Electronics Company, Ltd. Presentation of three-dimensional video
JP2016103808A (ja) * 2014-11-28 2016-06-02 キヤノン株式会社 画像処理装置、画像処理方法及びプログラム
JP6604019B2 (ja) 2015-04-14 2019-11-13 ソニー株式会社 画像処理装置、画像処理方法、および画像処理システム
KR102511705B1 (ko) * 2015-11-16 2023-03-20 삼성전자주식회사 비디오 인코딩 방법, 이를 수행하는 비디오 인코더 및 이를 포함하는 전자 시스템
JP6646433B2 (ja) 2015-12-21 2020-02-14 太平洋セメント株式会社 複合構造体
JP6936018B2 (ja) * 2017-02-21 2021-09-15 ソニーセミコンダクタソリューションズ株式会社 映像送信装置および映像受信装置

Also Published As

Publication number Publication date
KR20200016229A (ko) 2020-02-14
WO2018225449A1 (ja) 2018-12-13
KR102509132B1 (ko) 2023-03-13
CN110710222A (zh) 2020-01-17
TW201904281A (zh) 2019-01-16
JP7163285B2 (ja) 2022-10-31
KR20230036167A (ko) 2023-03-14
JPWO2018225449A1 (ja) 2020-04-09
EP3637784A4 (en) 2020-04-22
TWI829638B (zh) 2024-01-21
SG11201910049VA (en) 2019-11-28
US20200186841A1 (en) 2020-06-11
KR102636747B1 (ko) 2024-02-15
EP3637784A1 (en) 2020-04-15

Similar Documents

Publication Publication Date Title
BR112019025471A2 (pt) Dispositivo de transmissão de figura, e, dispositivo de recepção de figura
TWI812609B (zh) 視訊傳輸裝置及視訊接收裝置
US11074023B2 (en) Transmission device
EP3993435A1 (en) Sending device, receiving device, and transmission system
WO2021020224A1 (ja) 送信装置、受信装置、及び通信システム
US20220279110A1 (en) Imaging device, processing device, data transmission system, and data transmission method
JP7450704B2 (ja) 送信装置、受信装置及び伝送システム
JP7499765B2 (ja) 送信装置、受信装置及び伝送システム
EP3993392A1 (en) Transmission device, reception device, and transport system
US12052515B2 (en) Transmitting apparatus, receiving apparatus, and transmission system
WO2021039012A1 (ja) 撮像装置、データ伝送システム、及びデータ伝送方法
US20220245828A1 (en) Transmitter, receiver, and communication system
US20210385429A1 (en) Transmission processing apparatus, transmission processing method, and storage medium

Legal Events

Date Code Title Description
B350 Update of information on the portal [chapter 15.35 patent gazette]