BR112020023311A2 - industrial installation monitoring control system - Google Patents

industrial installation monitoring control system Download PDF

Info

Publication number
BR112020023311A2
BR112020023311A2 BR112020023311-0A BR112020023311A BR112020023311A2 BR 112020023311 A2 BR112020023311 A2 BR 112020023311A2 BR 112020023311 A BR112020023311 A BR 112020023311A BR 112020023311 A2 BR112020023311 A2 BR 112020023311A2
Authority
BR
Brazil
Prior art keywords
image
region
color
laminated
industrial installation
Prior art date
Application number
BR112020023311-0A
Other languages
Portuguese (pt)
Other versions
BR112020023311B1 (en
Inventor
Hiroyuki Fujieda
Katsuhiro KONISHI
Kenji Watanabe
Original Assignee
Toshiba Mitsubishi-Electric Industrial Systems Corporation
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba Mitsubishi-Electric Industrial Systems Corporation filed Critical Toshiba Mitsubishi-Electric Industrial Systems Corporation
Publication of BR112020023311A2 publication Critical patent/BR112020023311A2/en
Publication of BR112020023311B1 publication Critical patent/BR112020023311B1/en

Links

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B21MECHANICAL METAL-WORKING WITHOUT ESSENTIALLY REMOVING MATERIAL; PUNCHING METAL
    • B21BROLLING OF METAL
    • B21B37/00Control devices or methods specially adapted for metal-rolling mills or the work produced thereby
    • B21B37/28Control of flatness or profile during rolling of strip, sheets or plates
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B21MECHANICAL METAL-WORKING WITHOUT ESSENTIALLY REMOVING MATERIAL; PUNCHING METAL
    • B21BROLLING OF METAL
    • B21B37/00Control devices or methods specially adapted for metal-rolling mills or the work produced thereby
    • B21B37/46Roll speed or drive motor control
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00Measuring arrangements characterised by the use of optical techniques

Landscapes

  • Engineering & Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Testing And Monitoring For Control Systems (AREA)
  • Image Analysis (AREA)
  • Length Measuring Devices By Optical Means (AREA)
  • Control Of Metal Rolling (AREA)

Abstract

  SISTEMA DE CONTROLE DE MONITORAMENTO DE INSTALAÇÃO INDUSTRIAL . A presente invenção se refere a um dispositivo de análise de imagem de instalação industrial e um sistema de controle de monitoramento de instalação industrial inclui a configuração a seguir. A unidade de coleta de dados de imagem móvel (21) coleta, em tempo real, dados de imagem móvel que são obtidos por fotografar um aparelho que constitui uma instalação industrial e um material que é processado pelo aparelho. Uma unidade de processamento de imagem (22) extrai uma imagem a partir dos dados de imagem móvel em intervalos periódicos regulares e binariza a imagem por converter a cor especificada em uma primeira cor e outros exceto a cor especificada em uma segunda cor. Uma unidade de quantificação de imagem (23) quantifica a imagem binarizada com base no número de pixels para os quais conversão para a primeira cor foi realizado. A unidade de emissão de valor numérico (24) emite dados quantificados.  INDUSTRIAL INSTALLATION MONITORING CONTROL SYSTEM. The present invention relates to an industrial installation image analysis device and an industrial installation monitoring control system includes the following configuration. The mobile image data collection unit (21) collects, in real time, mobile image data that is obtained by photographing an apparatus that constitutes an industrial facility and a material that is processed by the apparatus. An image processing unit (22) extracts an image from the moving image data at regular periodic intervals and binarizes the image by converting the specified color to a first color and others except the specified color to a second color. An image quantification unit (23) quantifies the binary image based on the number of pixels for which conversion to the first color has been carried out. The numerical value issuing unit (24) issues quantified data.

Description

Relatório Descritivo da Patente de Invenção para "SISTE- MA DE CONTROLE DE MONITORAMENTO DE INSTALAÇÃO IN- DUSTRIAL". Campo da InvençãoInvention Patent Descriptive Report for "INDUSTRIAL INSTALLATION MONITORING CONTROL SYSTEM". Field of the Invention

[001] A presente invenção se refere a um dispositivo de análise de imagem de instalação industrial e um sistema de controle de moni- toramento de instalação industrial. Antecedentes[001] The present invention relates to an industrial installation image analysis device and an industrial installation monitoring control system. Background

[002] Há instalações industriais conhecidas (instalação de indús- tria siderúrgica, instalação de geração de energia, instalação de petró- leo, instalação química, e semelhante) que produzem materiais e re- cursos necessários para atividades industriais. Um sistema de controle de monitoramento de instalação para uma instalação industrial inclui uma configuração na qual um dispositivo de entrada/saída (I/O) ao qual uma pluralidade de aparelhos de campo (incluindo um acionador e um sensor) que constituem a instalação são conectados e um con- trolador de lógica programável (daqui em diante, descrito como PLC) que controla a pluralidade de aparelhos de campo são interconectados por meio de uma rede de controle.[002] There are well-known industrial facilities (steel industry facility, power generation facility, oil facility, chemical facility, and the like) that produce materials and resources needed for industrial activities. An installation monitoring control system for an industrial installation includes a configuration in which an input / output (I / O) device to which a plurality of field devices (including a trigger and a sensor) that make up the installation are connected. and a programmable logic controller (hereinafter, described as PLC) that controls the plurality of field devices are interconnected via a control network.

[003] Adicionalmente, dados de processo que são sinais de en- trada/saída do PLC e o dispositivo de entrada/saída são coletados por um dispositivo de coleta de dados tendo uma função de coleta de da- dos e uma função de reprodução de dados. O dispositivo de coleta de dados exibe os dados coletados de processo, que é usado para um operador para pegar o estado de uma instalação indus- trial.[003] Additionally, process data which are input / output signals from the PLC and the input / output device are collected by a data collection device having a data collection function and a data reproduction function. Dice. The data collection device displays the data collected from the process, which is used for an operator to pick up the status of an industrial facility.

[004] Como um exemplo de um sensor que emite os dados de processo, um detector de metal quente (HMD) que é arranjado em uma instalação de indústria siderúrgica é descrito em PTL 1. Esse I- IMD é instalado em uma posição de uma predeterminada altura imedi-[004] As an example of a sensor that emits process data, a hot metal detector (HMD) that is arranged in a steel industry facility is described in PTL 1. This I-IMD is installed in a one-way position. predetermined immediate height

atamente acima de um rolo de mesa à jusante de um rolo de lamina- ção, e uma direção de detecção é ajustada para uma direção de visua- lização do rolo de laminação em uma direção substancialmente orto- gonal e direção horizontal. O HMD é um sensor a laser tendo um cam- po visual estreito e quando detectar uma massa quente dentro do campo visual, emite um sinal LIGADO e quando não detectar, um sinal DESLIGADO. Lista de Citação Literatura de Patentejust above a table roller downstream of a laminating roller, and a detection direction is adjusted to a viewing direction of the laminating roller in a substantially orthogonal and horizontal direction. The HMD is a laser sensor having a narrow visual field and when it detects a hot mass within the visual field, it emits an ON signal and when it does not detect it, an OFF signal. Patent Literature Citation List

[005] PTL 1 JP 2016-87652A[005] PTL 1 JP 2016-87652A

[006] PTL 2 WO 2014/002176 Sumário Problema Técnico[006] PTL 2 WO 2014/002176 Summary Technical problem

[007] Por arranjar um sensor como em PTL 1, uma curvatura pa- ra cima de uma massa quente (material a ser laminado) pode ser de- tectada. No entanto, o sensor é antieconômico e também, o seu local de instalação é limitado. Adicionalmente, o sensor emite apenas um sinal LIGADO ou um sinal DESLIGADO e o estado (formato, posição e semelhante) do material a ser laminado não pode ser compreendido em detalhes.[007] By arranging a sensor as in PTL 1, a curvature above a hot mass (material to be laminated) can be detected. However, the sensor is uneconomical and also, its installation location is limited. In addition, the sensor emits only an ON signal or an OFF signal and the state (shape, position and the like) of the material to be laminated cannot be understood in detail.

[008] De modo a resolver tais desvantagens, o inventor do pre- sente pedido estudou intensamente; e como resultado, decidiu usar, como um sensor, dados de imagem em movimento de um objeto foto- gráfico fotografado com uma câmera geral. Ao usar a câmera, tais vantagens podem ser obtidas no sentido de que o custo é reduzido, uma faixa de fotografia é mais ampla e um local de instalação é mais flexível em comparação com o sensor descrito acima, e a quantidade de informações é maior do que a emissão do sensor.[008] In order to resolve such disadvantages, the inventor of this application has studied intensively; and as a result, he decided to use, as a sensor, moving image data from a photographic object photographed with a general camera. When using the camera, such advantages can be obtained in the sense that the cost is reduced, the range of photography is wider and the installation location is more flexible compared to the sensor described above, and the amount of information is greater than than the sensor emission.

[009] Por outro lado, ao verificar o estado do objeto fotográfico fotografado com a câmera, mesmo que uma verificação visual simples dos dados da imagem em movimento seja realizada, uma determina- ção é feita por medição visual e a precisão da verificação é baixa. Por- tanto, um processamento que aumente a precisão da verificação é de- sejado.[009] On the other hand, when checking the state of the photographic object photographed with the camera, even if a simple visual check of the moving image data is performed, a determination is made by visual measurement and the verification accuracy is low . Therefore, processing that increases the accuracy of the check is desirable.

[0010] A presente invenção foi implementada para resolver os problemas acima descritos, e é um objetivo da presente invenção pro- porcionar um dispositivo de análise de imagem de instalação industrial que seja capaz de suportar um operador que quantitativamente analise o estado de um objeto fotográfico em tempo real por usar dados de imagem móvel e checar o estado operacional de uma instalação indus- trial.[0010] The present invention was implemented to solve the problems described above, and it is an objective of the present invention to provide an image analysis device of industrial installation that is capable of supporting an operator that quantitatively analyzes the state of a photographic object in real time for using mobile image data and checking the operational status of an industrial installation.

[0011] Ademais, é outro objetivo da presente invenção proporcio- nar um sistema de controle de monitoramento de instalação industrial que seja capaz de realizar controle apropriado de acordo com o estado de um objeto fotográfico por usar dados quantificados pelo dispositivo de análise de imagem de instalação industrial. Solução para o Problema[0011] Furthermore, it is another objective of the present invention to provide an industrial installation monitoring control system that is capable of carrying out appropriate control according to the state of a photographic object by using data quantified by the image analysis device of industrial installation. Solution to the Problem

[0012] De modo a alcançar os objetivos acima, um dispositivo de análise de imagem de instalação industrial de acordo com uma moda- lidade é configurado como a seguir. O dispositivo de análise de ima- gem de instalação industrial inclui uma unidade de coleta de dados de imagem móvel, uma unidade de processamento de imagem, uma uni- dade de quantificação de imagem, e uma unidade de emissão de valor numérico.[0012] In order to achieve the above objectives, an industrial installation image analysis device according to a fashion is configured as follows. The industrial installation image analysis device includes a mobile image data collection unit, an image processing unit, an image quantification unit, and a numerical value emission unit.

[0013] A unidade de coleta de dados de imagem móvel coleta, em tempo real, dados de imagem móvel que são obtidos por fotografar um aparelho que constitui uma instalação industrial e um material que é processado pelo aparelho. O tempo real não necessariamente se refe- re a um momento quando a fotografia é realizada; mas tem um signifi- cado que cobre coleta de dados com um retardo em virtude de uma via de comunicação ou processamento de dados, e coleta de dados em intervalos periódicos regulares.[0013] The mobile image data collection unit collects, in real time, mobile image data that is obtained by photographing a device that constitutes an industrial installation and a material that is processed by the device. Real time does not necessarily refer to a moment when the photograph is taken; but it has a meaning that covers data collection with a delay due to a communication route or data processing, and data collection at regular periodic intervals.

[0014] A unidade de processamento de imagem extrai uma ima- gem a partir dos dados de imagem móvel para cada período regular, e binariza a imagem por converter uma cor especificada em uma primei- ra cor e outros exceto a cor especificada em uma segunda cor. O perí- odo regular é preferível ser um período o mais curto possível e tempo real é preferível. A imagem se refere a uma imagem de chama que é extraída a partir dos dados de imagem móvel. A cor especificada tem um significado que cobre não só uma única cor, mas também uma gama de cor especificada.[0014] The image processing unit extracts an image from the moving image data for each regular period, and binarizes the image by converting a specified color into a first color and others except the specified color into a second color. The regular period is preferable to be a period as short as possible and real time is preferable. The image refers to a flame image that is extracted from the moving image data. The specified color has a meaning that covers not only a single color, but also a specified color range.

[0015] A unidade de quantificação de imagem quantifica a imagem binarizada com base no número de pixels para os quais a conversão para a primeira cor foi realizada. Em um aspecto, a unidade de quanti- ficação de imagem calcula a relação de ocupação da primeira cor em cada uma das regiões de banda dentro das quais a imagem binarizada é dividida em paralelo com uma direção de transporte do material. Em outro aspecto, a unidade de quantificação de imagem calcula a relação de ocupação da primeira cor em cada uma das regiões de célula de grade dentro das quais a imagem binarizada é dividida em um padrão de grade.[0015] The image quantization unit quantifies the binary image based on the number of pixels for which the conversion to the first color was performed. In one aspect, the image quantification unit calculates the occupancy ratio of the first color in each of the band regions within which the binary image is divided in parallel with a material transport direction. In another aspect, the image quantification unit calculates the occupancy ratio of the first color in each of the grid cell regions within which the binary image is divided into a grid pattern.

[0016] A unidade de emissão de valor numérico emite dados quan- tificados.[0016] The numerical value issuing unit issues quantified data.

[0017] Adicionalmente, de modo a alcançar os objetivos acima, um sistema de controle de monitoramento de instalação industrial de acordo com uma modalidade é configurado como a seguir. O sistema de controle de monitoramento de instalação industrial inclui o dispositi- vo de análise de imagem de instalação industrial descrito acima e um controlador de lógica programável que controla o aparelho.[0017] Additionally, in order to achieve the above objectives, an industrial installation monitoring control system according to a modality is configured as follows. The industrial installation monitoring control system includes the industrial installation image analysis device described above and a programmable logic controller that controls the device.

[0018] O aparelho inclui um par de rolos de laminação para lami-[0018] The device includes a pair of laminating rollers for laminating

nar um material a ser laminado que é o material. A unidade de proces- samento de imagem binariza a imagem obtida por ver o material a ser laminado a partir da direção da largura.a material to be laminated which is the material. The image processing unit binarizes the image obtained by seeing the material to be laminated from the direction of the width.

[0019] Em um aspecto, a unidade de quantificação de imagem e o controlador de lógica programável são configurados como a seguir.[0019] In one aspect, the image quantization unit and the programmable logic controller are configured as follows.

[0020] A unidade de quantificação de imagem divide a imagem binarizada em paralelo com a direção de transporte do material a ser laminado em pelo menos uma primeira região e uma segunda região adjacente acima da primeira região; e calcula a relação de ocupação da primeira cor em cada uma das regiões.[0020] The image quantification unit divides the binary image in parallel with the direction of transport of the material to be laminated in at least one first region and a second adjacent region above the first region; and calculates the occupancy ratio of the first color in each of the regions.

[0021] O controlador de lógica programável emite, quando uma diferença entre a quantidade de aumento na relação de ocupação da primeira cor na segunda região e a quantidade de redução na relação de ocupação da primeira cor na primeira região é maior do que um va- lor limiar, pelo menos um ou outro de um sinal de alarme e um sinal de controle que muda a velocidade de rotação do par de rolos de lamina- ção de modo a reduzir uma curvatura para cima do material a ser la- minado. Por exemplo, o sinal de controle é um sinal que interrompe o par de rolos de laminação ou um sinal que torna a velocidade de rota- ção de um rolo de laminação inferior que é inferior à velocidade de ro- tação de um rolo de laminação superior.[0021] The programmable logic controller issues, when a difference between the amount of increase in the occupancy ratio of the first color in the second region and the amount of reduction in the occupancy ratio of the first color in the first region is greater than a value. threshold value, at least one or the other of an alarm signal and a control signal that changes the rotation speed of the laminating roller pair in order to reduce an upward curvature of the material to be washed. For example, the control signal is a signal that interrupts the pair of laminating rollers or a signal that makes the rotation speed of a lower laminating roller less than the rotation speed of a higher laminating roller. .

[0022] Em outro aspecto, a unidade de quantificação de imagem e o controlador de lógica programável são configurados como a seguir.[0022] In another aspect, the image quantization unit and the programmable logic controller are configured as follows.

[0023] A unidade de quantificação de imagem divide a imagem binarizada em um padrão de grade em pelo menos uma primeira regi- ão, uma segunda região lateralmente adjacente à primeira região, uma terceira região adjacente acima da primeira região, e uma quarta regi- ão adjacente acima da segunda região e lateralmente adjacente à ter- ceira região; e calcula a relação de ocupação da primeira cor em cada uma das regiões.[0023] The image quantification unit divides the binary image into a grid pattern in at least one first region, a second region laterally adjacent to the first region, a third adjacent region above the first region, and a fourth region adjacent to the second region and laterally adjacent to the third region; and calculates the occupancy ratio of the first color in each of the regions.

[0024] O controlador de lógica programável emite, quando a rela- ção de ocupação da primeira cor aumenta na ordem da primeira região e da segunda região, e quando a relação de ocupação da primeira cor na quarta região aumenta de acordo com redução na relação de ocu- pação da primeira cor na terceira região, pelo menos um ou outro de um sinal de alarme e um sinal de controle que muda a velocidade de rotação do par de rolos de laminação de modo a reduzir uma curvatura para cima do material a ser laminado. Por exemplo, o sinal de controle é um sinal que para o par de rolos de laminação ou um sinal que torna a velocidade de rotação do rolo de laminação inferior mais baixa do que a velocidade de rotação do rolo de laminação superior. Efeitos Vantajosos da Invenção[0024] The programmable logic controller issues, when the occupation ratio of the first color increases in the order of the first region and the second region, and when the occupation ratio of the first color in the fourth region increases according to reduction in the ratio of occupying the first color in the third region, at least one or the other of an alarm signal and a control signal that changes the rotation speed of the laminating roller pair in order to reduce an upward curvature of the material to be laminate. For example, the control signal is a signal that stops the laminating roller pair or a signal that makes the rotation speed of the lower laminating roller lower than the rotation speed of the upper laminating roller. Advantageous Effects of the Invention

[0025] De acordo com o dispositivo de análise de imagem de ins- talação industrial da presente invenção, é possível se suportar um operador que quantitativamente analisa o estado de um objeto fotográ- fico em tempo real por usar dados de imagem móvel e checar o estado operacional de uma instalação industrial. Adicionalmente, de acordo com o sistema de controle de monitoramento de instalação industrial da presente invenção, é possível se realizar o controle apropriado por usar dados quantificados pelo dispositivo de análise de imagem de ins- talação industrial. Breve Descrição dos Desenhos[0025] According to the industrial installation image analysis device of the present invention, it is possible to support an operator who quantitatively analyzes the state of a photographic object in real time by using mobile image data and checking the operational status of an industrial installation. Additionally, according to the industrial installation monitoring control system of the present invention, it is possible to carry out the appropriate control by using data quantified by the industrial plant image analysis device. Brief Description of Drawings

[0026] A Figura 1 é um diagrama esquemático que mostra uma configuração de um sistema de controle de monitoramento de instala- ção de uma instalação industrial de acordo com uma primeira modali- dade.[0026] Figure 1 is a schematic diagram showing a configuration of a control system for monitoring the installation of an industrial installation according to a first modality.

[0027] A Figura 2 é um diagrama de bloco de um dispositivo de análise de imagem de acordo com a primeira modalidade.[0027] Figure 2 is a block diagram of an image analysis device according to the first modality.

[0028] A Figura 3 é um exemplo de tela de exibição de um disposi- tivo de análise de imagem de acordo com a primeira modalidade.[0028] Figure 3 is an example of a screen for displaying an image analysis device according to the first modality.

[0029] A Figura 4 é um diagrama de bloco que mostra um exemplo de configuração de hardware de um circuito de processamento incluí- do em um dispositivo de análise de imagem.[0029] Figure 4 is a block diagram showing an example of hardware configuration of a processing circuit included in an image analysis device.

[0030] A Figura 5 é um diagrama de bloco de um dispositivo de análise de imagem de acordo com uma segunda modalidade.[0030] Figure 5 is a block diagram of an image analysis device according to a second modality.

[0031] A Figura 6 é um exemplo de análise de um dispositivo de análise de imagem de acordo com a segunda modalidade.[0031] Figure 6 is an example of analysis of an image analysis device according to the second modality.

[0032] A Figura 7 é um diagrama de bloco de um dispositivo de análise de imagem de acordo com uma terceira modalidade.[0032] Figure 7 is a block diagram of an image analysis device according to a third modality.

[0033] A Figura 8 é um exemplo de análise de um dispositivo de análise de imagem de acordo com a terceira modalidade. Descrição das Modalidades[0033] Figure 8 is an example of analysis of an image analysis device according to the third modality. Description of Modalities

[0034] Daqui em diante, modalidades da presente invenção serão descritas em detalhes com referência aos desenhos. Deve ser obser- vado que elementos comuns nos desenhos são denotados pelos me- nos sinais de referência para omitir explicações redundantes. Primeira modalidade Configuração do sistema[0034] Hereinafter, modalities of the present invention will be described in detail with reference to the drawings. It should be noted that common elements in the drawings are denoted by the least reference signs to omit redundant explanations. First mode System configuration

[0035] A Figura 1 é um diagrama esquemático que mostra uma configuração de um sistema de controle de monitoramento de instala- ção de uma instalação industrial de acordo com uma primeira modali- dade.[0035] Figure 1 is a schematic diagram showing a configuration of a control system for monitoring the installation of an industrial installation according to a first modality.

[0036] Uma das instalações industriais que produzem materiais e recursos necessário para atividades industriais é uma instalação de indústria siderúrgica. Na laminação a quente, uma placa de alta tem- peratura (material a ser laminado) que foi aquecido em um forno de aquecimento é transportada por um rolo de transporte, laminado a uma espessura desejada e simultaneamente processado a uma largu- ra desejada por uma máquina de laminação bruta e uma máquina de laminação de acabamento, e é finalmente enrolado por uma bobina.[0036] One of the industrial facilities that produce materials and resources needed for industrial activities is a steel industry facility. In hot rolling, a high temperature plate (material to be laminated) that has been heated in a heating oven is transported by a transport roller, laminated to a desired thickness and simultaneously processed to a desired width by a crude laminating machine and a finishing laminating machine, and it is finally wound by a coil.

[0037] O sistema de controle de monitoramento de instalação é configurado por conectar um dispositivo de análise de imagem 1, uma primeira câmera de monitoramento 2, uma segunda câmera de moni- toramento 3, um dispositivo de coleta de dados 7, um HMI 8, um PLC 9, um aparelho (não ilustrado) que constitui a instalação industrial, e semelhante.[0037] The installation monitoring control system is configured by connecting an image analysis device 1, a first monitoring camera 2, a second monitoring camera 3, a data collection device 7, an HMI 8 , a PLC 9, a device (not shown) that constitutes the industrial installation, and the like.

[0038] A primeira câmera de monitoramento 2 e a segunda câme- ra de monitoramento 3 são arranjadas de modo que o aparelho que constitui a instalação industrial e um material que é processado pelo aparelho são incluídos em uma faixa de fotografia. A primeira câmera de monitoramento 2 é conectada a um conversor de dados de imagem 4 por meio de uma linha de sinal de imagem 5. Uma saída de vídeo da primeira câmera de monitoramento 2 é convertida em um sinal de rede comunicável pelo conversor de dados de imagem 4 e é transmitida a um dispositivo de análise de imagem 1 por meio de uma rede de ima- gem móvel 6. A segunda câmera de monitoramento 3 é uma câmera de rede e dados de imagem móvel obtida por fotografar é transmitida a um dispositivo de análise de imagem 1 por meio da rede de imagem móvel 6.[0038] The first monitoring camera 2 and the second monitoring camera 3 are arranged so that the device that constitutes the industrial installation and a material that is processed by the device are included in a photograph range. The first monitoring camera 2 is connected to an image data converter 4 via an image signal line 5. A video output from the first monitoring camera 2 is converted into a communicable network signal by the data data converter image 4 and is transmitted to an image analysis device 1 via a mobile image network 6. The second monitoring camera 3 is a network camera and mobile image data obtained by photographing is transmitted to an image device image analysis 1 through the mobile image network 6.

[0039] Um dispositivo de análise de imagem 1 é conectado por meio de uma rede de controle 10 com: o controlador de lógica progra- mável (PLC) 9 que controla o aparelho (incluindo um acionador e um sensor) que constituem a instalação industrial; a interface homem má- quina (HMI) 8 que é um dispositivo de controle de monitoramento que um operador usa para a operação e monitoramento contínuos da ins- talação industrial; e o dispositivo de coleta de dados 7. Deve ser ob- servado que um dispositivo de análise de imagem 1 pode ser incorpo- rado no dispositivo de coleta de dados 7.[0039] An image analysis device 1 is connected via a control network 10 with: the programmable logic controller (PLC) 9 that controls the device (including a driver and a sensor) that constitute the industrial installation ; the human machine interface (HMI) 8, which is a monitoring control device that an operator uses for the continuous operation and monitoring of the industrial installation; and the data collection device 7. It should be noted that an image analysis device 1 can be incorporated into the data collection device 7.

[0040] A rede de controle 10 inclui uma pluralidade de nós tendo uma memória comum e por transmissão de difusão periódica entre a pluralidade de nós, dados na memória comum são sincronizados. As- sim, um espaço de memória idêntico é virtualmente compartilhado en- tre um dispositivo de análise de imagem l, o PLC 9, e a HMI 8. Na memória comum, uma região de armazenamento (endereço) de cada item de dados é atribuída. Um dispositivo conectado a cada um dos nós pode transmitir e receber dados por escrever em e ler a partir da memória comum. Dispositivo de análise de imagem[0040] The control network 10 includes a plurality of nodes having a common memory and by periodic broadcast transmission between the plurality of nodes, data in the common memory are synchronized. Thus, an identical memory space is virtually shared between an image analysis device 1, the PLC 9, and the HMI 8. In common memory, a storage region (address) for each data item is assigned . A device connected to each of the nodes can transmit and receive data by writing to and reading from common memory. Image analysis device

[0041] Um dispositivo de análise de imagem 1 inclui uma unidade de coleta de dados de imagem móvel 21, uma unidade de processa- mento de imagem 22, uma unidade de quantificação de imagem 23, e uma unidade de emissão de valor numérico 24.[0041] An image analysis device 1 includes a mobile image data collection unit 21, an image processing unit 22, an image quantization unit 23, and a numerical value emission unit 24.

[0042] A unidade de coleta de dados de imagem móvel 21 coleta, em tempo real, dados de imagem móvel que são obtidos por fotografar o aparelho que constituem a instalação industrial e o material que é processado pelo aparelho. O tempo real não necessariamente se refe- rem a um momento quando a fotografia é realizada; mas tem um signi- ficado que cobre coleta de dados com um retardo em virtude de uma via de comunicação ou processamento de dados, e coleta de dados em intervalos periódicos regulares. Especificamente, a unidade de co- leta de dados de imagem móvel 21 coleta, em intervalos periódicos regulares, dados de imagem móvel a partir da primeira câmera de mo- nitoramento 2 e da segunda câmera de monitoramento 3 por meio da rede de imagem móvel 6. A unidade de coleta de dados de imagem móvel 21 emite os dados de imagem móvel para a unidade de proces- samento de imagem 22. A unidade de coleta de dados de imagem móvel 21 armazena os dados de imagem móvel coletados em uma unidade de armazenamento de dados 113b de um armazenamento[0042] The mobile image data collection unit 21 collects, in real time, mobile image data that is obtained by photographing the device that constitutes the industrial installation and the material that is processed by the device. Real time does not necessarily refer to a moment when the photograph is taken; but it has a meaning that covers data collection with a delay due to a communication route or data processing, and data collection at regular periodic intervals. Specifically, the mobile image data collection unit 21 collects, at regular periodic intervals, mobile image data from the first monitoring camera 2 and the second monitoring camera 3 via the mobile image network 6 The mobile image data collection unit 21 sends the mobile image data to the image processing unit 22. The mobile image data collection unit 21 stores the mobile image data collected in a storage unit 113b data storage

113.113.

[0043] A unidade de processamento de imagem 22 extrai uma imagem a partir dos dados de imagem móvel para cada período regu- lar, e binariza a imagem por converter a cor especificada em uma pri- meira cor e outros exceto a cor especificada em uma segunda cor. O período regular é preferível ser um período o mais curto possível e tempo real é preferível. A imagem se refere a uma imagem de chama que é extraída a partir dos dados de imagem móvel. A cor especificada tem um significado que cobre não só uma única cor, mas também a gama de cor especificada.[0043] The image processing unit 22 extracts an image from the mobile image data for each regular period, and binarizes the image by converting the specified color into a first color and others except the specified color into one second color. The regular period is preferable to be a period as short as possible and real time is preferable. The image refers to a flame image that is extracted from the moving image data. The specified color has a meaning that covers not only a single color, but also the specified color range.

[0044] Especificamente, a unidade de processamento de imagem 22 processa a imagem por usar uma unidade de filtro de cor 41, uma unidade de binarização 42, e uma unidade de processamento de ma- peamento 43 que são mostrados na Figura 2; e emite a imagem pro- cessada para a unidade de quantificação de imagem 23.[0044] Specifically, the image processing unit 22 processes the image by using a color filter unit 41, a binarization unit 42, and a mapping processing unit 43 which are shown in Figure 2; and output the processed image to the image quantization unit 23.

[0045] A unidade de filtro de cor 41 extrai a cor especificada rela- cionada a um aparelho ou um material na imagem. Como a cor especi- ficada, por exemplo, uma cor de um material em brasa ou uma cor in- dicando uma anormalidade de temperatura do aparelho ou o material é predeterminado.[0045] The color filter unit 41 extracts the specified color related to an apparatus or material in the image. As the specified color, for example, a color of a red-hot material or a color indicating an abnormality in the temperature of the device or the material is predetermined.

[0046] A unidade de binarização 42 binariza a imagem por conver- ter a cor especificada em uma primeira cor (por exemplo, branco) e as outras em uma segunda cor (por exemplo, preto). De acordo com isso, a quantidade de dados pode ser reduzida, de modo que as cargas aritméticas no processamento de imagem e no processamento de quantificação são reduzidas e a propriedade em tempo real pode ser garantida.[0046] The binary unit 42 binarizes the image by converting the specified color to a first color (for example, white) and the others to a second color (for example, black). Accordingly, the amount of data can be reduced, so that the arithmetic loads in image processing and quantization processing are reduced and real-time ownership can be guaranteed.

[0047] A unidade de processamento de mapeamento 43 realiza conversão de mapeamento quando a primeira câmera de monitora- mento 2 ou a segunda câmera de monitoramento 3 obliquamente foto- grafa um objeto fotográfico; e desse modo, realizar a conversão em uma imagem de vídeo que é vista a partir diretamente de lado ou dire-[0047] The mapping processing unit 43 performs mapping conversion when the first monitoring camera 2 or the second monitoring camera 3 obliquely photographs a photographic object; and in this way, perform the conversion to a video image that is viewed from directly from the side or directly

tamente acima. De acordo com isso, flexibilidade em arranjo de câme- ra é alta e, portanto, não só um caso onde a câmera não pode ser ar- ranjada diretamente acima ou diretamente ao lado de um objeto foto- gráfico mas também um ambiente na qual um sensor é difícil de ser arranjado na vizinhança do objeto fotográfico pode ser acomodado. Deve ser observado que quando a câmera pode ser arranjada direta- mente acima ou diretamente ao lado de um objeto fotográfico, o pro- cessamento pela unidade de processamento de mapeamento 43 não necessariamente precisa ser executado.above. Accordingly, flexibility in camera arrangement is high and, therefore, not only a case where the camera cannot be stored directly above or directly next to a photographic object but also an environment in which a sensor is difficult to be arranged in the vicinity of the photographic object can be accommodated. It should be noted that when the camera can be arranged directly above or directly next to a photographic object, processing by the mapping processing unit 43 does not necessarily need to be performed.

[0048] A unidade de quantificação de imagem 23 quantifica a ima- gem binarizada com base no número de pixels para os quais a con- versão para a primeira cor foi realizada. Por exemplo, a relação de ocupação da primeira cor na imagem é calculada com base no número de pixels para os quais a conversão para a primeira cor (por exemplo, branco) foi realizada pela unidade de processamento de imagem 22. A unidade de quantificação de imagem 23 emite dados quantificados pa- ra a unidade de emissão de valor numérico 24.[0048] The image quantization unit 23 quantifies the binarized image based on the number of pixels for which the conversion to the first color was performed. For example, the occupancy ratio of the first color in the image is calculated based on the number of pixels for which the conversion to the first color (for example, white) was performed by the image processing unit 22. The quantization unit of image 23 issues quantified data to the numerical value issuing unit 24.

[0049] A unidade de emissão de valor numérico 24 emite os dados quantificados para o dispositivo de coleta de dados 7, a HMI 8, e o PLC 9 por meio da rede de controle 10.[0049] The numerical value issuing unit 24 issues the quantified data to the data collection device 7, the HMI 8, and the PLC 9 through the control network 10.

[0050] A Figura 3 é uma vista que mostra um exemplo de tela rea- lizado por um dispositivo de análise de imagem 1 em um monitor 117 (Figura 4). Um dispositivo de análise de imagem 1 exibe em tempo re- al os dados de imagem móvel coletados em uma janela esquerda 31. No exemplo na Figura 3, uma tal situação é mostrada na qual um par de rolos de laminação 312 (máquina de laminação bruta ou máquina de laminação de acabamento) para laminar um material a ser lamina- do 311 que é o material e um rolo de transporte 313 são incluídos em uma faixa de fotografia e o material a ser laminado 311 é laminado pe- lo par de rolos de laminação 312 ao mesmo tempo em que é transpor-[0050] Figure 3 is a view that shows an example of a screen made by an image analysis device 1 on a monitor 117 (Figure 4). An image analysis device 1 displays in real time the mobile image data collected in a left window 31. In the example in Figure 3, such a situation is shown in which a pair of laminating rollers 312 (crude laminating machine) or finishing laminating machine) to laminate a material to be laminated 311 which is the material and a transport roller 313 are included in a photo strip and the material to be laminated 311 is laminated by the pair of lamination 312 while being transported

tada a partir da esquerda para a direita. Adicionalmente, um dispositivo de análise de imagem 1 exibe em uma janela central 32, uma imagem obtida por binarizar uma imagem sendo exibida na janela esquerda 31. A parte 321 que indica o material a ser laminado é exibida em branco e outra parte 322 é exibida em preto. Adicionalmente, um dispositivo de análise de imagem 1 exibe em uma janela direita 33 um gráfico que representa mudanças temporais na relação de ocupação de branco na imagem binarizada. Em um exemplo da Figura 6, um gráfico que re- presenta mudanças temporais na relação de ocupação de branco em cada uma das regiões horizontalmente divididas é exibido.from left to right. Additionally, an image analysis device 1 displays in a central window 32, an image obtained by binarizing an image being displayed in the left window 31. The part 321 indicating the material to be laminated is displayed in white and another part 322 is displayed in black. Additionally, an image analysis device 1 displays in a right window 33 a graph that represents temporal changes in the white occupation ratio in the binary image. In an example in Figure 6, a graph that represents temporal changes in the white occupation ratio in each of the horizontally divided regions is displayed.

[0051] O dispositivo de coleta de dados 7 coleta dados de proces- so a partir do PLC 9 e o I-IMI 8. Os dados de processo incluem vários tipos de dados relacionados ao aparelho que constituem a instalação industrial e o material que é processado pelo aparelho. Por exemplo, valores de controle de um acionador, valores de detecção de um sen- sor, especificações do material, e semelhante são incluídos. Em uma instalação de grande escala tal como uma instalação de indústria side- rúrgica, há milhares de ou dezenas de milhares de pontos de entra- da/saída e vários tipos de dados de processo existem. Os dados de processo são coletados pelo dispositivo de coleta de dados 7 que tem a função de coleta de dados e a função de reprodução de dados, e é usada para a análise de dados em testar, ajuste, operação e falha.[0051] Data collection device 7 collects process data from PLC 9 and I-IMI 8. Process data includes various types of data related to the device that constitute the industrial installation and the material that is processed by the device. For example, control values for a trigger, sensor detection values, material specifications, and the like are included. In a large-scale installation such as a steel industry installation, there are thousands of or tens of thousands of entry / exit points and various types of process data exist. The process data is collected by the data collection device 7 which has the data collection function and the data reproduction function, and is used for data analysis in testing, adjustment, operation and failure.

[0052] Adicionalmente, o dispositivo de coleta de dados 7 recebe os dados quantificados a partir de um dispositivo de análise de ima- gem 1 e coleta e armazena em sincronização com dados de processo. Deve ser observado que o dispositivo de coleta de dados 7 pode tam- bém realizar a mesma exibição que na Figura 3 por receber os dados necessários a partir de um dispositivo de análise de imagem 1.[0052] Additionally, the data collection device 7 receives the quantified data from an image analysis device 1 and collects and stores it in synchronization with process data. It should be noted that the data collection device 7 can also perform the same display as in Figure 3 because it receives the necessary data from an image analysis device 1.

[0053] A I-IMI 8 exibe os dados de processo recebidos a partir do PLC 9, com valores numéricos, caracteres, lâmpadas ou semelhante.[0053] I-IMI 8 displays the process data received from the PLC 9, with numerical values, characters, lamps or similar.

Adicionalmente, a HMI 8 inclui um botão de operação para transmitir um sinal de entrada de botão e um sinal de entrada de valor numérico; e emite um sinal para controlar o PLC 9 em resposta a pressão do bo- tão de operação. Adicionalmente, a HMI 8 pode também receber os dados quantificados a partir de um dispositivo de análise de imagem 1, exibe o seu valor numérico, e quando o valor numérico excede um predeterminado valor limiar, emitir um alarme.In addition, HMI 8 includes an operation button for transmitting a button input signal and a numeric value input signal; and emits a signal to control the PLC 9 in response to pressure from the operating button. In addition, HMI 8 can also receive the quantized data from an image analysis device 1, display its numerical value, and when the numerical value exceeds a predetermined threshold value, emit an alarm.

[0054] O PLC 9 controla a instalação industrial por realizar aritmé- tica com base em, por exemplo, uma entrada a partir de um sensor de uma instalação industrial e emitir um sinal a acionadores de uma vál- vula, um motor, e semelhante. Adicionalmente, o mesmo controla a instalação industrial por receber dados emitidos a partir de um disposi- tivo de análise de imagem 1 em uma maneira similar àquela em uma entrada a partir do sensor, realizar aritmética, e emitir um sinal para os acionadores da válvula, o motor, e semelhante. Adicionalmente, quan- do um resultado da aritmética excede um valor limiar, ele emite um alarme.[0054] PLC 9 controls the industrial installation by performing arithmetic based on, for example, an input from a sensor in an industrial installation and sending a signal to valve actuators, a motor, and the like . Additionally, it controls the industrial installation by receiving data emitted from an image analysis device 1 in a manner similar to that at an input from the sensor, performing arithmetic, and sending a signal to the valve actuators, the engine, and the like. Additionally, when an arithmetic result exceeds a threshold value, it sounds an alarm.

[0055] Como descrito acima, em um dispositivo de análise de ima- gem 1 de acordo com a primeira modalidade, os dados de imagem móvel coletados em tempo real a partir da câmera de monitoramento são quantificados e desse modo, quanto do objeto fotográfico é na fai- xa de fotografia pode ser capturado. Assim, um dispositivo de análise de imagem 1 quantitativamente analisa em tempo real as posições e formatos do aparelho e o material e desse modo pode suportar uma operação de checagem de um estado de operação pelo operador. Adi- cionalmente, uma vez que um sensor especial não é usado, o custo é baixo. Por exemplo, é possível se reduzir o custo de instalação do sensor ao realizar a detecção de uma curvatura da placa em uma tira quente ou em uma placa espessa. Além disso, como o alcance da fo- tografia é mais amplo e o local de instalação é mais flexível em com-[0055] As described above, in an image analysis device 1 according to the first modality, the mobile image data collected in real time from the monitoring camera are quantified and thus, how much of the photographic object is in the photography range can be captured. Thus, an image analysis device 1 quantitatively analyzes in real time the positions and formats of the apparatus and the material and thus can support an operation checking of an operating state by the operator. In addition, since a special sensor is not used, the cost is low. For example, it is possible to reduce the cost of installing the sensor by detecting a curvature of the plate on a hot strip or on a thick plate. In addition, as the scope of the photograph is broader and the installation location is more flexible in terms of

paração com um sensor, o estado de um objeto fotográfico pode ser compreendido em vários ambientes.compared to a sensor, the state of a photographic object can be understood in various environments.

[0056] Na primeira modalidade descrita acima, o número de pixels para os quais a conversão na primeira cor foi realizada é contado para a imagem inteira; no entanto, não se limita a isso. Pode ser possível especificar uma região parcial da imagem e contar o número de pixels para os quais a conversão para a primeira cor foi executada. Ao prede- terminar uma região de interesse na imagem, os ruídos podem ser re- duzidos e uma precisão de detecção pode ser aumentada.[0056] In the first mode described above, the number of pixels for which the conversion to the first color was performed is counted for the entire image; however, it is not limited to that. It may be possible to specify a partial region of the image and count the number of pixels for which the conversion to the first color has been performed. By predetermining a region of interest in the image, noise can be reduced and detection accuracy can be increased.

[0057] Além disso, usando o dispositivo de análise de imagem 1 e o dispositivo de coleta de dados 7 da primeira modalidade descrita acima, é possível exibir dados de imagem em movimento em tempo real no dispositivo de coleta de dados 7 e também é possível reprodu- zir dados de imagem em movimento, que são armazenados no dispo- sitivo de coleta de dados 7, no dispositivo de coleta de dados 7 a partir de qualquer momento especificado. Facilita a apreensão de uma posi- ção e tamanho para um evento passado, de modo que a precisão da verificação da posição e tamanho pode ser aumentada. Além disso, também é possível parar, avançar e retroceder rapidamente uma ima- gem em movimento. Observa-se que esses pontos são os mesmos nas modalidades abaixo.[0057] In addition, using the image analysis device 1 and the data collection device 7 of the first modality described above, it is possible to display image data in motion in real time on the data collection device 7 and it is also possible reproduce moving image data, which is stored on the data collection device 7, on the data collection device 7 from any specified time. It facilitates the apprehension of a position and size for a past event, so that the accuracy of the position and size verification can be increased. In addition, it is also possible to stop, fast forward and rewind a moving image. It is observed that these points are the same in the modalities below.

[0058] Além disso, em um dispositivo de análise de imagem 1 da primeira modalidade descrita acima, o monitor 117, um teclado 118, e um mouse 119 que são mostrados na Figura 4 descritos posteriormen- te não são incluídos; no entanto os mesmos podem ser incluídos em um dispositivo de análise de imagem 1. Observa-se que esse ponto é o mesmo em modalidades abaixo.[0058] In addition, in an image analysis device 1 of the first modality described above, monitor 117, a keyboard 118, and a mouse 119 which are shown in Figure 4 described later are not included; however, they can be included in an image analysis device 1. It is observed that this point is the same in the modalities below.

[0059] Além disso, na primeira modalidade descrita acima, a des- crição foi realizada por usar um exemplo de uma instalação de indús- tria siderúrgica como um sistema industrial; no entanto, não é limitado ao mesmo. O sistema industrial também inclui uma instalação de ge- ração de energia, uma instalação de petróleo, a instalação química e semelhante. Exemplo de configuração de Hardware[0059] In addition, in the first modality described above, the description was carried out by using an example of a steel industry installation as an industrial system; however, it is not limited to the same. The industrial system also includes a power generation installation, an oil installation, a chemical installation and the like. Hardware configuration example

[0060] Uma configuração de hardware de um dispositivo de análi- se de imagem 1 será descrito com referência à Figura 4. A Figura 4 é um diagrama de bloco que mostra um exemplo de configuração de hardware de um circuito de processamento incluído em um dispositivo de análise de imagem 1. Cada unidade de um dispositivo de análise de imagem 1 mostrado na Figura 2 indica uma parte das funções inclu- ídas em um dispositivo de análise de imagem 1 e cada uma das fun- ções é implementada pelo circuito de processamento. Por exemplo, o circuito de processamento é configurado por conectar a CPU 111, a memória 112, o armazenamento 113 de um HDD, uma memória de grande capacidade, e semelhante, uma unidade de interface de apare- lho externo (I/F) 114, uma unidade de rede de controle I/F 115a, e uma unidade de rede de imagem móvel I/F 115b por meio de um barramen- to interno 116. Deve ser observado que o dispositivo de coleta de da- dos 7 é também configurado de modo similar.[0060] A hardware configuration of an image analysis device 1 will be described with reference to Figure 4. Figure 4 is a block diagram showing an example of hardware configuration of a processing circuit included in a device image analysis 1. Each unit of an image analysis device 1 shown in Figure 2 indicates a part of the functions included in an image analysis device 1 and each of the functions is implemented by the processing circuit. For example, the processing circuit is configured by connecting the CPU 111, the memory 112, the storage 113 of an HDD, a large capacity memory, and the like, an external device interface unit (I / F) 114 , an I / F control network unit 115a, and a mobile I / F image network unit 115b via an internal bus 116. It should be noted that the data collection device 7 is also configured in a similar way.

[0061] A CPU 111 executa vários programas armazenados em uma unidade de armazenamento de programa 113a do armazenamen- to 113 e desse modo implementa funções das unidades de um disposi- tivo de análise de imagem 1.[0061] CPU 111 executes several programs stored in a program storage unit 113a of storage 113 and thus implements functions of the units of an image analysis device 1.

[0062] A memória 112 é usada como uma parte de área de aritmé- tica que temporariamente armazena e desenvolve dados quando a CPU 111 executa os vários programas.[0062] Memory 112 is used as a part of the arithmetic area that temporarily stores and develops data when CPU 111 executes the various programs.

[0063] O armazenamento 113 inclui a unidade de armazenamento de programa 113a e as unidade de armazenamento de dados 113b. A unidade de armazenamento de programa 113a armazena um sistema operacional (OS) e os vários programas. Adicionalmente, as unidade de armazenamento de dados 113b armazenam dados de processo em cada ponto no tempo e dados de imagem móvel que foram coletados.[0063] Storage 113 includes program storage unit 113a and data storage units 113b. The program storage unit 113a stores an operating system (OS) and the various programs. In addition, data storage units 113b store process data at each point in time and mobile image data that has been collected.

[0064] Deve ser observado que em um exemplo mostrado na Figu- ra 4, a unidade de armazenamento de programa 113a e a unidade de armazenamento de dados 113b são proporcionadas em um armaze- namento 113, no entanto, a unidade de armazenamento de programa 113a e a unidade de armazenamento de dados 113b podem ser sepa- radamente arranjadas em uma pluralidade de armazenamentos.[0064] It should be noted that in an example shown in Figure 4, the program storage unit 113a and the data storage unit 113b are provided in a storage 113, however, the program storage unit 113a and the data storage unit 113b can be separately arranged in a plurality of stores.

[0065] A unidade de aparelho externo I/F 114 é uma interface para conectar dispositivos externos tais como o monitor 117, o teclado 118, o mouse 119, e semelhante com um dispositivo de análise de imagem[0065] The external device unit I / F 114 is an interface for connecting external devices such as monitor 117, keyboard 118, mouse 119, and the like with an image analysis device

1.1.

[0066] A unidade de rede de controle I/F 115a é uma interface pa- ra conectar à rede de controle 10 com um dispositivo de análise de imagem 1. Adicionalmente, a unidade de rede de imagem móvel I/F 115b é uma interface para conectar a rede de imagem móvel 6 com um dispositivo de análise de imagem 1. Segunda modalidade[0066] The I / F control network unit 115a is an interface for connecting to control network 10 with an image analysis device 1. Additionally, the I / F 115b mobile image unit is an interface to connect the mobile image network 6 with an image analysis device 1. Second mode

[0067] Em seguida, uma segunda modalidade será descrita com referência à Figura 5 e à Figura 6. Na primeira modalidade descrita acima, a relação de ocupação da primeira cor em toda a imagem é calculada. Por outro lado, na segunda modalidade, a relação de ocu- pação da primeira cor em cada uma das regiões de banda dentro das quais a imagem é dividida em uma forma de banda é calculada; com- paração de mudanças na relação de ocupação da primeira cor nas re- giões de banda é realizada; e o estado de um objeto fotográfico é ana- lisado em mais detalhes.[0067] Then, a second mode will be described with reference to Figure 5 and Figure 6. In the first mode described above, the occupancy ratio of the first color in the entire image is calculated. On the other hand, in the second modality, the occupancy ratio of the first color in each of the band regions within which the image is divided into a band form is calculated; comparison of changes in the occupation ratio of the first color in the band regions is carried out; and the state of a photographic object is analyzed in more detail.

[0068] A Figura 5 é um diagrama de bloco de um dispositivo de análise de imagem 1 de acordo com a segunda modalidade. Uma con- figuração mostrada na Figura 5 é a mesma que aquela na Figura 2 ex-[0068] Figure 5 is a block diagram of an image analysis device 1 according to the second modality. A configuration shown in Figure 5 is the same as that in Figure 2

ceto em que a unidade de quantificação de imagem 23 inclui uma uni- dade de processamento de quantificação de banda 50; e portanto, descrições de configuração comum serão omitidas ou simplificadas.except that the image quantization unit 23 includes a band quantization processing unit 50; and therefore, common configuration descriptions will be omitted or simplified.

[0069] A unidade de processamento de imagem 22 binariza uma imagem obtida por ver um material a partir da direção da largura.[0069] The image processing unit 22 binarizes an image obtained by viewing a material from the width direction.

[0070] A unidade de processamento de quantificação de banda 50 calcula a relação de ocupação da primeira cor (por exemplo, branco) em cada uma das regiões de banda dentro das quais a imagem binari- zada pela unidade de processamento de imagem 22 é dividida em pa- ralelo com a direção de transporte do material. Em um exemplo na Fi- gura 5, a imagem binarizada é dividida em quatro partes em uma dire- ção horizontal. As quatro regiões divididas são referidas, a partir de baixo, as uma região de banda A51, uma região de banda B52, uma região de banda C53, e uma região de banda 1) 54. A unidade de pro- cessamento de quantificação de banda 50 calcula uma proporção do número de pixels brancos em cada uma das regiões de banda.[0070] The band quantization processing unit 50 calculates the occupancy ratio of the first color (for example, white) in each of the band regions within which the binary image by the image processing unit 22 is divided in parallel with the direction of transport of the material. In an example in Figure 5, the binary image is divided into four parts in a horizontal direction. The four divided regions are referred to, from below, the A51 band region, the B52 band region, the C53 band region, and the 1 band region 54). The band quantization processing unit 50 calculates a proportion of the number of white pixels in each of the band regions.

[0071] A relação de ocupação da primeira cor em cada uma das regiões de banda dentro das quais a imagem é dividida em uma forma de camada (daqui em diante, também referida como a primeira relação de cor) é calculada em tempo real e mudanças na primeira relação de cor são checadas; e desse modo, mudanças na posição e formato de um objeto fotográfico podem ser quantitativamente capturadas.[0071] The occupancy ratio of the first color in each of the band regions within which the image is divided into a layer shape (hereinafter, also referred to as the first color ratio) is calculated in real time and changes in the first color relation they are checked; and in this way, changes in the position and shape of a photographic object can be quantitatively captured.

[0072] Por exemplo, há um caso no qual o material a ser laminado 311 (Figura 3) que é o material salta no rolo de transporte 313 (Figura 3) da instalação de indústria siderúrgica. Nesse caso, um objeto foto- gráfico (material a ser laminado) se move paralelamente a partir da região de banda A51 para a região de banda B52. Portanto, por checar que a quantidade de aumento na primeira relação de cor na região de banda B52 e a quantidade de redução na primeira relação de cor na região de banda A51 são as mesmas, pode ser confirmado que o obje-[0072] For example, there is a case in which the material to be laminated 311 (Figure 3) which is the material jumps on the transport roller 313 (Figure 3) of the steel industry installation. In this case, a photographic object (material to be laminated) moves in parallel from the A51 band region to the B52 band region. Therefore, by checking that the amount of increase in the first color ratio in the B52 band region and the amount of reduction in the first color ratio in the A51 band region are the same, it can be confirmed that the objective

to fotográfico se moveu paralelamente.photographic movement moved in parallel.

[0073] Por outro lado, há outro caso na qual o formato do objeto fotográfico é deformado. Por exemplo, no outro caso, uma curvatura para cima ocorre no material a ser laminado 311 (Figura 3) por laminar em uma linha de laminação a quente ou linha de placa de uma instala- ção de indústria siderúrgica. Com referência à Figura 6, um exemplo de análise de imagem será descrito. O t1 é o formato do material a ser laminado em um período anterior, e t2 é o formato do material a ser laminado em um período atual. A unidade de processamento de quan- tificação de banda 50 divide a imagem binarizada em paralelo com a direção de transporte do material a ser laminado em pelo menos a re- gião de banda A51 e a região de banda B52 adjacente acima da regi- ão de banda A51; e calcula uma primeira relação de cor em cada uma das regiões. Um limite entre a região de banda A51 e a região de ban- da B52 é ajustada entre uma superfície superior e uma superfície infe- rior do material a ser laminado.[0073] On the other hand, there is another case in which the shape of the photographic object is deformed. For example, in the other case, an upward curvature occurs in the material to be laminated 311 (Figure 3) by laminating on a hot rolling line or slab line of a steel industry facility. With reference to Figure 6, an example of image analysis will be described. T1 is the shape of the material to be laminated in a previous period, and t2 is the shape of the material to be laminated in a current period. The web quantification processing unit 50 divides the binary image in parallel with the direction of transport of the material to be laminated in at least the web region A51 and the adjacent web region B52 above the web region. band A51; and calculates a first color ratio in each of the regions. A boundary between the web region A51 and the web region B52 is adjusted between an upper surface and a lower surface of the material to be laminated.

[0074] O operador checa uma mudança na primeira relação de cor em cada uma das regiões de banda de acordo com uma mudança a partir de t1 a O. Por checar a magnitude da diferença entre a quanti- dade de aumento na primeira relação de cor na região de banda B52 e a quantidade de redução na primeira relação de cor na região de ban- da A51, uma curvatura para cima do material a ser laminado pode ser quantitativamente capturada.[0074] The operator checks a change in the first color ratio in each of the band regions according to a change from t1 to O. By checking the magnitude of the difference between the amount of increase in the first color ratio in the B52 band region and the amount of reduction in the first color ratio in the A51 band region, an upward curvature of the material to be laminated can be quantitatively captured.

[0075] Um dispositivo de análise de imagem 1 exibe um gráfico que representa mudanças temporais na primeira relação de cor nas regiões de banda como ilustrado na janela direita 33 na Figura 3 e desse modo pode suportar a operação de checagem pelo operador.[0075] An image analysis device 1 displays a graph that represents temporal changes in the first color ratio in the band regions as illustrated in the right window 33 in Figure 3 and thus can support the checking operation by the operator.

[0076] O PLC 9 recebe dados (primeira relação de cor em cada uma das regiões de banda) que é emitida a partir da unidade de emis- são de valor numérico 24. O PLC 9 pode realizar, com base na primei-[0076] PLC 9 receives data (first color ratio in each of the band regions) which is emitted from the numerical value emission unit 24. PLC 9 can perform, based on the first

ra relação de cor em cada uma das regiões de banda, o controle de acordo com a posição do objeto fotográfico, o controle de acordo com a quantidade de um movimento de mudança do objeto fotográfico, e o controle de acordo com o formato do objeto fotográfico (por exemplo, o controle de acordo com a quantidade de uma curvatura para cima).r color ratio in each of the band regions, control according to the position of the photographic object, control according to the amount of a movement of changing the photographic object, and control according to the shape of the photographic object (for example, the control according to the amount of an upward bend).

[0077] Com referência à Figura 6 descrita acima, o controle de acordo com a quantidade de uma curvatura para cima será descrito. O PLC 9 emite, quando a diferença entre a quantidade de aumento na primeira relação de cor na região de banda B52 e a quantidade de re- dução na primeira relação de cor na região de banda A51 é maior do que um valor limiar, pelo menos um ou outro de um sinal de alarme e um sinal de controle que muda a velocidade de rotação do par de rolos de laminação 312 de modo a reduzir uma curvatura para cima do ma- terial a ser laminado. Por exemplo, o sinal de controle é um sinal que para o par de rolos de laminação 312 ou um sinal que torna a veloci- dade de rotação do rolo de laminação inferior mais baixa do que a ve- locidade de rotação do rolo de laminação superior.[0077] With reference to Figure 6 described above, the control according to the amount of an upward bend will be described. PLC 9 emits when the difference between the amount of increase in the first color ratio in the B52 band region and the amount of reduction in the first color ratio in the A51 band region is greater than a threshold value, at least either an alarm signal and a control signal that changes the rotation speed of the laminating roller pair 312 in order to reduce an upward curvature of the material to be laminated. For example, the control signal is a signal that for the laminating roller pair 312 or a signal that makes the rotation speed of the lower laminating roller lower than the rotation speed of the upper laminating roller. .

[0078] Em vez disso, o PLC 9 pode emitir, quando a diferença en- tre a quantidade de aumento na primeira relação de cor na região de banda B52 e a quantidade de redução na primeira relação de cor na região de banda A51 é maior do que um primeiro valor limiar, um sinal que torna a velocidade de rotação do rolo de laminação inferior mais lenta do que a velocidade de rotação do rolo de laminação superior; e pode emitir, quando a diferença é maior do que um segundo valor limi- ar (maior do que o primeiro valor limiar), um sinal que para o par de rolos de laminação 312.[0078] Instead, PLC 9 can emit, when the difference between the amount of increase in the first color ratio in the B52 band region and the amount of reduction in the first color ratio in the A51 band region is greater than a first threshold value, a signal that slows the rotation speed of the lower laminating roller than the rotation speed of the upper laminating roller; and it can emit, when the difference is greater than a second threshold value (greater than the first threshold value), a signal than for the 312 lamination roller pair.

[0079] Adicionalmente, o PLC 9 pode emitir um sinal de alarme com maior emergência na medida em que a diferença é maior.[0079] Additionally, PLC 9 can emit an alarm signal with greater emergency as the difference is greater.

[0080] Como descrito acima, de acordo com o sistema da presente modalidade que inclui a unidade de processamento de quantificação de banda 50, a operação de checagem pelo operador para a posição e tamanho de um aparelho e material pode ser mais precisamente su- portada em comparação com a primeira modalidade. Adicionalmente, por usar dados quantificados pela unidade de processamento de quan- tificação de banda 50, o PLC 9 pode realizar o controle apropriado de acordo com o estado de um objeto fotográfico. Por exemplo, um valor de controle pode ser mudado de modo a permitir que um aparelho que é um objeto fotográfico se mova para uma posição apropriada, e um valor de controle pode ser mudado de modo a evitar que um material a ser laminado que é um objeto fotográfico colida com um sensor ou um aparelho.[0080] As described above, according to the system of the present modality that includes the band quantization processing unit 50, the check operation by the operator for the position and size of an apparatus and material can be more precisely supported compared to the first modality. In addition, by using data quantified by the band quantification processing unit 50, the PLC 9 can perform the appropriate control according to the state of a photographic object. For example, a control value can be changed to allow a device that is a photographic object to move to an appropriate position, and a control value can be changed to prevent a material to be laminated that is a photographic object collides with a sensor or a device.

[0081] Adicionalmente, o sistema da segunda modalidade descrita acima pode ser combinado com o sistema da primeira modalidade. Observar que esse ponto é o mesmo em modalidades abaixo.[0081] Additionally, the system of the second modality described above can be combined with the system of the first modality. Note that this point is the same in modalities below.

[0082] Adicionalmente, na unidade de processamento de quantifi- cação de banda 50 da segunda modalidade descrita acima, regiões de banda são ajustadas em uma direção horizontal; no entanto, regiões de banda podem ser ajustadas em uma direção vertical ou em uma direção obliqua.[0082] Additionally, in the band quantization processing unit 50 of the second modality described above, band regions are adjusted in a horizontal direction; however, band regions can be adjusted in a vertical or an oblique direction.

[0083] Adicionalmente, a unidade de processamento de quantifi- cação de banda 50 da segunda modalidade descrita acima divide a tela em quatro partes; no entanto, pode dividir em duas, três, ou cinco ou mais partes. Terceira modalidade[0083] Additionally, the band quantization processing unit 50 of the second modality described above divides the screen into four parts; however, it can be divided into two, three, or five or more parts. Third modality

[0084] Em seguida, uma terceira modalidade será descrita com referência à Figura 7 e à Figura 8. Na primeira modalidade descrita acima, a relação de ocupação da primeira cor em toda a imagem é calculada. Por outro lado, na terceira modalidade, a relação de ocupa- ção da primeira cor em cada uma das regiões de célula de grade den- tro das quais a imagem é dividida em um padrão de grade é calculada;[0084] Next, a third mode will be described with reference to Figure 7 and Figure 8. In the first mode described above, the occupancy ratio of the first color in the entire image is calculated. On the other hand, in the third modality, the occupancy ratio of the first color in each of the grid cell regions within which the image is divided into a grid pattern is calculated;

comparação de mudanças na relação de ocupação da primeira cor nas regiões de célula de grade é realizada; e o estado de um objeto foto- gráfico é analisado em mais detalhes.comparison of changes in the occupation ratio of the first color in the grid cell regions is performed; and the state of a photographic object is analyzed in more detail.

[0085] A Figura 7 é um diagrama de bloco de um dispositivo de análise de imagem 1 de acordo com a terceira modalidade. Uma con- figuração mostrada na Figura 7 é a mesma que aquela da Figura 2 ou da Figura 5, exceto em que a unidade de quantificação de imagem 23 inclui uma unidade de processamento de quantificação de célula de grade 60; e portanto, descrições de configuração comum serão omiti- das ou simplificadas.[0085] Figure 7 is a block diagram of an image analysis device 1 according to the third modality. A configuration shown in Figure 7 is the same as that in Figure 2 or Figure 5, except that the image quantization unit 23 includes a grid cell quantization processing unit 60; and therefore, common configuration descriptions will be omitted or simplified.

[0086] A unidade de processamento de imagem 22 binariza uma imagem obtida por ver um material a partir da direção da largura.[0086] The image processing unit 22 binarizes an image obtained by viewing a material from the width direction.

[0087] A unidade de processamento de quantificação de célula de grade 60 calcula a relação de ocupação da primeira cor (por exemplo, branco) em cada uma das regiões de célula de grade dentro das quais a imagem binarizada pela unidade de processamento de imagem 22 é dividida em um padrão de grade. Em um exemplo na Figura 7, a ima- gem binarizada é dividida em quatro partes na direção horizontal e em três partes na direção vertical; sendo dividida em 12 regiões no total. As regiões divididas são referidas como uma região de célula de grade A61, uma região de célula de grade B62, uma região de célula de gra- de C63, uma região de célula de grade D64, uma região de célula de grade E65, uma região de célula de grade F66, uma região de célula de grade G67, uma região de célula de grade H68, uma região de cé- lula de grade 169, uma região de célula de grade J70, uma região de célula de grade K71, e uma região de célula de grade 1472. A unidade de processamento de quantificação de célula de grade 60 calcula uma proporção do número de pixels brancos em cada uma das regiões de célula de grade.[0087] The grid cell quantization processing unit 60 calculates the occupancy ratio of the first color (for example, white) in each of the grid cell regions within which the image binarized by the image processing unit 22 is divided into a grid pattern. In an example in Figure 7, the binary image is divided into four parts in the horizontal direction and three parts in the vertical direction; being divided into 12 regions in total. The split regions are referred to as a grid cell region A61, a cell region of grid B62, a cell region of grid C63, a cell region of grid D64, a cell region of grid E65, a region grid cell F66, a cell region G67, a cell region H68, a cell region 169, a cell region J70, a cell region K71, and a cell region grid cell region 1472. The grid cell quantization processing unit 60 calculates a proportion of the number of white pixels in each of the grid cell regions.

[0088] A relação de ocupação da primeira cor em cada uma das regiões de célula de grade dentro das quais a imagem é dividida em um padrão de grade (daqui em diante, também referida como a primei- ra relação de cor) é calculada em tempo real e mudanças na primeira relação de cor são checadas; e desse modo, mudanças na posição e formato de um objeto fotográfico podem ser quantitativamente captu- radas.[0088] The occupancy ratio of the first color in each of the grid cell regions within which the image is divided into a grid pattern (hereinafter, also referred to as the first color ratio) is calculated in real time and changes in the first color ratio are checked; and in this way, changes in the position and shape of a photographic object can be quantitatively captured.

[0089] Por exemplo, há um caso na qual o material a ser laminado 311 (Figura 3) que é o material salta no rolo de transporte 313 (Figura 3) da instalação de indústria siderúrgica. Nesse caso, o objeto fotográ- fico (material a ser laminado) se move paralelamente a partir da região de célula de grade A61 para a região de célula de grade B62. Portan- to, por checar para ver que a quantidade de aumento na primeira rela- ção de cor na região de célula de grade A61 e a quantidade de redu- ção na primeira relação de cor na região de célula de grade B62 são as mesmas, pode ser confirmado que o objeto fotográfico se moveu paralelamente.[0089] For example, there is a case in which the material to be laminated 311 (Figure 3) which is the material jumps on the transport roller 313 (Figure 3) of the steel industry installation. In this case, the photographic object (material to be laminated) moves in parallel from the grid cell region A61 to the grid cell region B62. Therefore, for checking to see that the amount of increase in the first color relationship in the region of grid cell A61 and the amount of reduction in the first color relationship in the region of grid cell B62 are the same, it can be confirmed that the photographic object has moved in parallel.

[0090] Adicionalmente, quando o objeto fotográfico se alonga a partir da região de célula de grade A61 para a região de célula de gra- de F66 por obliquamente alongar, a primeira relação de cor na região de célula de grade A61 é saturada e a primeira relação de cor na regi- ão de célula de grade F66 aumenta. Com base na quantidade de au- mento/redução da primeira relação de cor na região de célula de grade adjacente B62 e a quantidade de aumento/redução da primeira relação de cor na região de célula de grade E65, pode ser confirmado se o ob- jeto fotográfico se alongou sem deslocamento lateral.[0090] Additionally, when the photographic object stretches from the A61 grid cell region to the F66 grade cell region by obliquely stretching, the first color relationship in the A61 grid cell region is saturated and the first color ratio in the F66 grid cell region increases. Based on the amount of increase / decrease in the first color ratio in the adjacent grid cell region B62 and the amount of increase / decrease in the first color ratio in the E65 grid cell region, it can be confirmed whether the ob- photographic project stretched without lateral displacement.

[0091] Além disso, há outro caso na qual o formato do objeto foto- gráfico é deformado. Por exemplo, no outro caso, uma curvatura para cima ocorre no material a ser laminado 311 (Figura 3) por laminar na linha de laminação a quente ou linha de placa da instalação de indús- tria siderúrgica. Com referência à Figura 8, um exemplo de análise de imagem será descrito. O t3 é o formato do material a ser laminado em um período anterior, e t4 é o formato do material a ser laminado em um período atual. A unidade de processamento de quantificação de célula de grade 60 divide a imagem binarizada em um padrão de gra- de em pelo menos a região de célula de grade F66, a região de célula de grade J70 lateralmente adjacente para a região de célula de grade F66, a região de célula de grade G67 adjacente acima da região de célula de grade F66, e a região de célula de grade K71 adjacente aci- ma da região de célula de grade J70 e lateralmente adjacente para a região de célula de grade G67; e calcula uma primeira relação de cor em cada uma das regiões. Um limite entre a região de célula de grade F66 e a região de célula de grade G67 é ajustada acima do material a ser laminado.[0091] In addition, there is another case in which the shape of the photographic object is deformed. For example, in the other case, an upward curvature occurs in the material to be laminated 311 (Figure 3) by laminating on the hot rolling line or plate line of the steel industry installation. With reference to Figure 8, an example of image analysis will be described. T3 is the shape of the material to be laminated in a previous period, and t4 is the shape of the material to be laminated in a current period. The grid cell quantization processing unit 60 divides the binary image into a grid pattern in at least the grid cell region F66, the grid cell region J70 laterally adjacent to the grid cell region F66 , the adjacent G67 grid cell region above the F66 grid cell region, and the adjacent K71 grid cell region above the J70 grid cell region and laterally adjacent to the G67 grid cell region; and calculates a first color ratio in each of the regions. A boundary between the grid cell region F66 and the grid cell region G67 is set above the material to be laminated.

[0092] O operador checa uma mudança na primeira relação de cor em cada uma das regiões de célula de grade de acordo com uma mu- dança a partir de t3 para t4. Por checar para ver que a primeira relação de cor aumenta na ordem da região de célula de grade F66 e a região de célula de grade J70 e a primeira relação de cor na região de célula de grade K71 aumenta de acordo com redução na primeira relação de cor na região de célula de grade G67, uma curvatura para cima do ma- terial a ser laminado pode ser quantitativamente capturada.[0092] The operator checks a change in the first color ratio in each of the grid cell regions according to a change from t3 to t4. For checking to see that the first color ratio increases in the order of the F66 grid cell region and the J70 grid cell region and the first color ratio in the K71 grid cell region increases according to the reduction in the first color in the G67 grid cell region, an upward curvature of the material to be laminated can be quantitatively captured.

[0093] O PLC 9 recebe dados (primeira relação de cor em cada uma das regiões de célula de grade) que é emitida a partir da unidade de emissão de valor numérico 24. O PLC 9 pode realizar, com base na primeira relação de cor em cada uma das regiões de célula de grade, o controle de acordo com a posição do objeto fotográfico, o controle de acordo com a quantidade de um movimento de mudança do objeto fo- tográfico, e o controle de acordo com o formato do objeto fotográfico (por exemplo, o controle de acordo com a quantidade de uma curvatu- ra para cima).[0093] PLC 9 receives data (first color ratio in each of the grid cell regions) which is emitted from the numerical value emission unit 24. PLC 9 can perform, based on the first color ratio in each of the grid cell regions, the control according to the position of the photographic object, the control according to the amount of a changing movement of the photographic object, and the control according to the shape of the photographic object (for example, the control according to the amount of an upward curve).

[0094] Com referência à Figura 8 descrita acima, o controle de acordo com a quantidade de uma curvatura para cima será descrito. O PLC 9 emite, quando a primeira relação de cor aumenta na ordem da região de célula de grade F66 e a região de célula de grade J70 e quando a primeira relação de cor na região de célula de grade K71 aumenta de acordo com redução na primeira relação de cor na região de célula de grade G67, pelo menos um ou outro de um sinal de alar- me e um sinal de controle que muda a velocidade de rotação do par de rolos de laminação 312 de modo a reduzir uma curvatura para cima do material a ser laminado. Por exemplo, o sinal de controle é um sinal que para o par de rolos de laminação 312 ou um sinal que torna a ve- locidade de rotação do rolo de laminação inferior mais baixa do que a velocidade de rotação do rolo de laminação superior.[0094] With reference to Figure 8 described above, the control according to the amount of an upward bend will be described. PLC 9 emits when the first color ratio increases in the order of the grid cell region F66 and the region of grid cell J70 and when the first color relationship in the region of grid cell K71 increases according to reduction in the first color ratio in the G67 grid cell region, at least one or the other of an alarm signal and a control signal that changes the rotation speed of the 312 laminating roller pair in order to reduce an upward curvature of the material to be laminated. For example, the control signal is a signal that for the lamination roller pair 312 or a signal that makes the rotation speed of the lower lamination roller lower than the rotation speed of the upper lamination roller.

[0095] Como descrito acima, de acordo com o sistema da presente modalidade que inclui a unidade de processamento de quantificação de célula de grade 60, a operação de checagem pelo operador para a posição e tamanho de um aparelho e material pode ser mais precisa- mente suportada em comparação com a primeira modalidade. Adicio- nalmente, por usar dados quantificados pela unidade de processamen- to de quantificação de célula de grade 60, o PLC 9 pode realizar o con- trole apropriado de acordo com o estado de um objeto fotográfico.[0095] As described above, according to the system of the present modality which includes the 60 cell quantification processing unit, the checking operation by the operator for the position and size of an apparatus and material can be more precisely supported compared to the first modality. In addition, by using data quantified by the 60 grid cell quantification processing unit, the PLC 9 can perform the appropriate control according to the state of a photographic object.

[0096] Adicionalmente, o sistema da terceira modalidade descrita acima pode ser combinada com o sistema da primeira modalidade e o sistema da segunda modalidade.[0096] Additionally, the system of the third modality described above can be combined with the system of the first modality and the system of the second modality.

[0097] Adicionalmente, na unidade de processamento de quantifi- cação de célula de grade 60 da terceira modalidade descrita acima, as regiões são definidas em um padrão de grade na direção horizontal e a direção vertical; no entanto, regiões de célula de grade podem ser ajustadas em uma direção obliqua.[0097] Additionally, in the third cell 60 quantification processing unit of the third modality described above, the regions are defined in a grid pattern in the horizontal direction and the vertical direction; however, grid cell regions can be adjusted in an oblique direction.

[0098] Adicionalmente, a unidade de processamento de quantifi-[0098] Additionally, the quantification processing unit

cação de célula de grade 60 da terceira modalidade descrita acima divide a imagem em 12 partes; no entanto, desde que seja divisão igual, o número de divisões não importa. Especialmente, quando um objeto fotográfico é fotografado de um ângulo oblíquo, o processamen- to em uma imagem diretamente ao lado ou diretamente acima é reali- zado por conversão de mapeamento. Nesse momento, há um caso em que a quantidade de movimento e a quantidade de deformação do ob- jeto fotográfico se tornam pequenos. Neste caso, aumentando o núme- ro de divisões em um padrão de grade, a quantidade de movimento e a quantidade de deformação que se tornaram menores podem ser de- tectadas.cation of grid cell 60 of the third modality described above divides the image into 12 parts; however, as long as it is equal division, the number of divisions does not matter. Especially, when a photographic object is photographed from an oblique angle, processing in an image directly to the side or directly above is performed by mapping conversion. At that moment, there is a case where the amount of movement and the amount of deformation of the photographic object become small. In this case, by increasing the number of divisions in a grid pattern, the amount of movement and the amount of deformation that has become smaller can be detected.

[0099] As modalidades de acordo com a presente invenção foram descritas acima; no entanto, a presente invenção não é limitada às modalidades acima e várias modificações podem ser realizadas sem se desviar a partir do escopo da presente invenção. Lista de sinais de referência 1 dispositivo de análise de imagem 2 Primeira câmera de monitoramento 3 Segunda câmera de monitoramento 4 Conversor de dados de imagem 5 linha de sinal de imagem 6 Rede de imagem móvel 7 Dispositivo de coleta de dados 8 1-IMI 9 PLC 10 Rede de controle 21 Unidade de coleta de dados de imagem móvel 22 Unidade de processamento de imagem 23 Unidade de quantificação de imagem 24 Unidade de emissão de valor numérico[0099] The modalities according to the present invention have been described above; however, the present invention is not limited to the above modalities and various modifications can be made without departing from the scope of the present invention. List of reference signals 1 image analysis device 2 First monitoring camera 3 Second monitoring camera 4 Image data converter 5 Image signal line 6 Mobile image network 7 Data collection device 8 1-IMI 9 PLC 10 Control network 21 Mobile image data collection unit 22 Image processing unit 23 Image quantization unit 24 Numerical value emission unit

31 Janela esquerda 32 Janela central 33 Janela direita 311 Material a ser laminado 312 Par de rolos de laminação 313 Rolo de transporte 41 Unidade de filtro de cor 42 Unidade de binarização 43 Unidade de processamento de mapeamento 50 Unidade de processamento de quantificação de banda 60 Unidade de processamento de quantificação de célula de grade 51-54 Band region A to band region D 61-72 Região de célula de grade A para região de célula de grade L 111 CPU 112 Memória 113, 113a, 113b armazenamento, unidade de armazenamento de pro- grama, unidade de armazenamento de dados 114 Unidade de aparelho externo I/F 115a, 115b Unidade de Rede de controle I/F, Unidade de rede de ima- gem móvel I/F 116 Barramento interno 117 Monitor 118 Teclado 119 Mouse31 Left window 32 Central window 33 Right window 311 Material to be laminated 312 Laminating rollers 313 Conveyor roller 41 Color filter unit 42 Binarization unit 43 Mapping processing unit 50 Band quantizing processing unit 60 Unit grid cell quantification processing method 51-54 Band region A to band region D 61-72 Grade cell cell A to grid cell region L 111 CPU 112 Memory 113, 113a, 113b storage, storage unit pro - gram, data storage unit 114 External I / F device unit 115a, 115b I / F control network unit, I / F mobile image network unit 116 Internal bus 117 Monitor 118 Keyboard 119 Mouse

Claims (2)

REIVINDICAÇÕES 1. Sistema de controle de monitoramento de instalação in- dustrial, caracterizado pelo fato de que compreende: um dispositivo de análise de imagem de instalação industri- al (1); e um controlador de lógica programável (9) que controla o aparelho, o aparelho constituindo uma instalação industrial; em que o aparelho inclui um par de rolos de laminação para laminar um material a ser laminado; o dispositivo de análise de imagem de instalação industrial 1 incluindo: uma unidade de coleta de dados de imagem móvel 21 que coleta dados de imagem móvel em tempo real, os dados de imagem móvel sendo obtidos por fotografar o aparelho e o material a ser lami- nado, o material a ser laminado sendo processado pelo aparelho; uma unidade de processamento de imagem (22) que extrai uma imagem obtida por ver o material a ser laminado a partir de uma direção da largura a partir dos dados de imagem móvel para cada pe- ríodo regular e binariza a imagem b converter a cor especificada em uma primeira cor e outros exceto a cor especificada em uma segunda cor; uma unidade de quantificação de imagem (23) que divide a imagem binarizada em paralelo com a direção de transporte do mate- rial a ser laminado em pelo menos uma primeira região e uma segun- da região adjacente acima da primeira região e quantifica a imagem binarizada por calcular uma relação de ocupação da primeira cor em cada uma das regiões; e uma unidade de emissão de valor numérico (24) que emite a imagem quantificada, e o controlador de lógica programável (9) emi-1. Industrial installation monitoring control system, characterized by the fact that it comprises: an industrial installation image analysis device (1); and a programmable logic controller (9) that controls the device, the device constituting an industrial installation; wherein the apparatus includes a pair of laminating rollers for laminating a material to be laminated; the industrial installation image analysis device 1 including: a mobile image data collection unit 21 that collects mobile image data in real time, the mobile image data being obtained by photographing the device and the material to be laminated swimming, the material to be laminated being processed by the apparatus; an image processing unit (22) which extracts an image obtained by viewing the material to be laminated from a width direction from the moving image data for each regular period and binaryizes the image b converts the specified color in a first color and others except the color specified in a second color; an image quantification unit (23) that divides the binary image in parallel with the direction of transport of the material to be laminated in at least one first region and a second adjacent region above the first region and quantifies the binary image by calculating an occupation ratio of the first color in each of the regions; and a numerical value emission unit (24) that emits the quantized image, and the programmable logic controller (9) emits te pelo menos um ou outro de um sinal de alarme e um sinal de con- trole quando a diferença entre uma quantidade de aumento na relação de ocupação da primeira cor na segunda região e uma quantidade de redução na relação de ocupação da primeira cor na primeira região é maior do que um valor limiar, o sinal de controle mudando a velocida- de de rotação do par de rolos de laminação de modo a reduzir uma curvatura para cima do material a ser laminado.at least one or the other of an alarm signal and a control signal when the difference between an amount of increase in the occupancy ratio of the first color in the second region and an amount of reduction in the occupancy ratio of the first color in the first region is greater than a threshold value, the control signal changing the rotation speed of the lamination roller pair in order to reduce an upward curvature of the material to be laminated. 2. Sistema de controle de monitoramento de instalação in- dustrial, caracterizado pelo fato de que compreende: um dispositivo de análise de imagem de instalação industri- al (1); e um controlador de lógica programável (9) que controla o aparelho o aparelho que constitui uma instalação industrial; em que o aparelho inclui um par de rolos de laminação para laminar um material a ser laminado; o dispositivo de análise de imagem de ins- talação industrial (1) incluindo: uma unidade de coleta de dados de imagem móvel coleta dados de imagem móvel em tempo real, os dados de imagem móvel sendo obtidos por fotografar o aparelho e o material a ser laminado, o material a ser laminado sendo processado pelo aparelho; uma unidade de processamento de imagem (22) que extrai uma imagem obtida por ver o material a ser laminado a partir da dire- ção da largura a partir dos dados de imagem móvel para cada período regular e binariza a imagem por converter a cor especificada em uma primeira cor e outros exceto a cor especificada em uma segunda cor; uma unidade de quantificação de imagem (23) que divide a imagem binarizada em um padrão de grade em pelo menos uma pri- meira região, uma segunda região, uma terceira região, e uma quarta região e quantifica a imagem binarizada por calcular uma relação de ocupação da primeira cor em cada uma das regiões, uma segunda re- gião sendo lateralmente adjacente à primeira região, a terceira região sendo adjacente acima da primeira região, a quarta região sendo adja- cente acima da segunda região e lateralmente adjacente à terceira re- gião; e a unidade de emissão de valor numérico (24) que emite a imagem quantificada e o controlador de lógica programável (9) emite pelo menos um ou outro de um sinal de alarme e um sinal de controle quando a relação de ocupação da primeira cor aumenta em ordem da primeira região e a segunda região e quando a relação de ocupação da primeira cor na quarta região aumenta de acordo com redução na relação de ocupação da primeira cor na terceira região, o sinal de con- trole mudando a velocidade de rotação do par de rolos de laminação de modo a reduzir uma curvatura para cima do material a ser lamina- do.2. Industrial installation monitoring control system, characterized by the fact that it comprises: an industrial installation image analysis device (1); and a programmable logic controller (9) that controls the device and the device that constitutes an industrial installation; wherein the apparatus includes a pair of laminating rollers for laminating a material to be laminated; the industrial installation image analysis device (1) including: a mobile image data collection unit collects mobile image data in real time, the mobile image data being obtained by photographing the device and the material to be laminated, the material to be laminated being processed by the apparatus; an image processing unit (22) that extracts an image obtained by viewing the material to be laminated from the width direction from the moving image data for each regular period and binaryizes the image by converting the specified color into a first color and others except the color specified in a second color; an image quantification unit (23) that divides the binary image into a grid pattern in at least one first region, a second region, a third region, and a fourth region and quantifies the binary image by calculating a ratio of occupation of the first color in each of the regions, a second region being laterally adjacent to the first region, the third region being adjacent above the first region, the fourth region being adjacent above the second region and laterally adjacent to the third region region; and the numerical value emission unit (24) that emits the quantized image and the programmable logic controller (9) emits at least one or the other of an alarm signal and a control signal when the occupancy ratio of the first color increases in order of the first region and the second region and when the occupation ratio of the first color in the fourth region increases according to a reduction in the occupation ratio of the first color in the third region, the control signal changing the rotation speed of the pair of laminating rollers in order to reduce an upward curvature of the material to be laminated.
BR112020023311-0A 2018-05-22 INDUSTRIAL INSTALLATION MONITORING CONTROL SYSTEM BR112020023311B1 (en)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2018/019648 WO2019224906A1 (en) 2018-05-22 2018-05-22 Industrial plant image analysis device and industrial plant monitoring control system

Publications (2)

Publication Number Publication Date
BR112020023311A2 true BR112020023311A2 (en) 2021-02-02
BR112020023311B1 BR112020023311B1 (en) 2024-04-09

Family

ID=

Also Published As

Publication number Publication date
TWI700567B (en) 2020-08-01
JP6849150B2 (en) 2021-03-24
WO2019224906A1 (en) 2019-11-28
TW202004377A (en) 2020-01-16
CN112165996A (en) 2021-01-01
JPWO2019224906A1 (en) 2020-12-10
CN112165996B (en) 2022-07-29

Similar Documents

Publication Publication Date Title
JP6546327B2 (en) A method of monitoring equipment by analyzing temperature values collected from a cylinder and distributed in a coordinate plane
TWI397865B (en) Security personnel to monitor the degree of focus monitoring system
Dai et al. Abnormal situation management for smart chemical process operation
US20220084657A1 (en) Care recording device, care recording system, care recording program, and care recording method
KR20200079001A (en) Control system and method using integrated environmental monitoring
JP2018149236A (en) Health management system, device, and method
TWI529667B (en) Multi - computer vision recognition system for cross - traffic obstacle
BR112020023311A2 (en) industrial installation monitoring control system
Qidwai et al. Intelligent integrated instrumentation platform for monitoring long-term bedridden patients
JP2017156949A (en) Plant monitoring system and plant monitoring method
BR112020023311B1 (en) INDUSTRIAL INSTALLATION MONITORING CONTROL SYSTEM
JP4982254B2 (en) Flow line management system and flow line monitoring device
KR102186486B1 (en) Method, apparatus and computer program for detecting medical event generation using image analysis based on artificial intelligence
JP2019091113A (en) Plant abnormality monitoring system, and plant abnormality monitoring method
US20230092684A1 (en) Conveyor belt thickness measurement systems and methods for detecting changes in conveyor belt thicknesses
WO2021053717A1 (en) Anomaly determination device and anomaly determination method
TWM575591U (en) Thermal image monitoring system
JP2021140428A5 (en)
JP2018190042A (en) Monitoring system
JP2020128908A (en) Gas leak position specification system and gas leak position specification program
JP2020091628A (en) Care recipient monitoring system
KR102565174B1 (en) Ward alarm and monitoring system for unexpected accident using heat sensor
KR102565175B1 (en) Ward alarm and monitoring method for unexpected accident using heat sensor
KR102564941B1 (en) Apparatus for predicting falldown
JP5600996B2 (en) Paper cup inspection apparatus and method

Legal Events

Date Code Title Description
B350 Update of information on the portal [chapter 15.35 patent gazette]
B06W Patent application suspended after preliminary examination (for patents with searches from other patent authorities) chapter 6.23 patent gazette]
B06A Patent application procedure suspended [chapter 6.1 patent gazette]
B09A Decision: intention to grant [chapter 9.1 patent gazette]
B16A Patent or certificate of addition of invention granted [chapter 16.1 patent gazette]

Free format text: PRAZO DE VALIDADE: 20 (VINTE) ANOS CONTADOS A PARTIR DE 22/05/2018, OBSERVADAS AS CONDICOES LEGAIS