ES2244681T3 - Diagnosis y mantenimiento de maquinas por medio de la realidad aumentada y transmisiones en tiempo real de mensajes multimedia. - Google Patents

Diagnosis y mantenimiento de maquinas por medio de la realidad aumentada y transmisiones en tiempo real de mensajes multimedia.

Info

Publication number
ES2244681T3
ES2244681T3 ES02001283T ES02001283T ES2244681T3 ES 2244681 T3 ES2244681 T3 ES 2244681T3 ES 02001283 T ES02001283 T ES 02001283T ES 02001283 T ES02001283 T ES 02001283T ES 2244681 T3 ES2244681 T3 ES 2244681T3
Authority
ES
Spain
Prior art keywords
control
data
data processing
machine
processing device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Lifetime
Application number
ES02001283T
Other languages
English (en)
Inventor
Martin Kiesel
Andreas Polz
Peter Wagner
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Siemens AG
Original Assignee
Siemens AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from DE10129566A external-priority patent/DE10129566A1/de
Application filed by Siemens AG filed Critical Siemens AG
Application granted granted Critical
Publication of ES2244681T3 publication Critical patent/ES2244681T3/es
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/66Arrangements for connecting between networks having differing types of switching systems, e.g. gateways
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05BCONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00Program-control systems
    • G05B2219/30Nc systems
    • G05B2219/32Operator till task planning
    • G05B2219/32014Augmented reality assists operator in maintenance, repair, programming, assembly, use of head mounted display with 2-D 3-D display and voice feedback, voice and gesture command
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05BCONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00Program-control systems
    • G05B2219/30Nc systems
    • G05B2219/33Director till display
    • G05B2219/33284Remote diagnostic
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05BCONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00Program-control systems
    • G05B2219/30Nc systems
    • G05B2219/34Director, elements to supervisory
    • G05B2219/34038Web, http, ftp, internet, intranet server
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05BCONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00Program-control systems
    • G05B2219/30Nc systems
    • G05B2219/35Nc in input of data, input till input file format
    • G05B2219/35495Messages to operator in multimedia, voice and image and text
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05BCONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00Program-control systems
    • G05B2219/30Nc systems
    • G05B2219/37Measurements
    • G05B2219/37572Camera, tv, vision

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Telephonic Communication Services (AREA)
  • Computer And Data Communications (AREA)
  • Debugging And Monitoring (AREA)

Abstract

Dispositivo para el control o la regulación así como para la supervisión de una máquina automática (MA) con una instalación de procesamiento (SV) para el procesamiento y la comunicación inmediata de datos que están relacionados con la máquina automática (MA) de / con un dispositivo de procesamiento de datos (DP) que está dispuesto a distancia de la misma, en el que a través de la instalación de procesamiento (SV) se pueden procesar los datos que se refieren a la máquina automática en forma de mensajes multimedia y se pueden transmitir al dispositivo de procesamiento de datos (DP) remoto, de manera que se pueden crear datos para el control o regulación de la máquina automática en el dispositivo de procesamiento de datos (DP) remoto y se pueden evaluar los datos de supervisión así como los datos de diagnosis con respecto a la máquina automática (MA) en el dispositivo de procesamiento de datos remoto, caracterizado porque los mensajes multimedia corresponden a la norma UMTS y la instalación dela Realidad Ampliada (AD) para un operador (US) de la máquina (MA) está conectada a través de una instalación de telecomunicaciones (UC1) con el dispositivo de procesamiento de datos (DP) y a través de un bucle de la Realidad Ampliada (AL) con la máquina (MA) o bien su control (DO).

Description

Diagnosis y mantenimiento de máquinas por medio de la "realidad aumentada" y transmisiones en tiempo real de mensajes multimedia.
La presente invención se refiere a un dispositivo de control y a un procedimiento para el control o la regulación así como para la supervisión de una máquina automática con una instalación de procesamiento para el procesamiento y la comunicación inmediata de datos que están relacionados con la máquina automática de/con un dispositivo de procesamiento de datos que está dispuesto a distancia de la misma, en el que a través del dispositivo de procesamiento se pueden procesar los datos que se refieren a la máquina automática en forma de mensajes multimedia y se pueden transmitir al dispositivo de procesamiento de datos remoto, de manera que se pueden crear datos para el control o regulación de la máquina automática en el dispositivo de procesamiento de datos remoto y se pueden evaluar los datos de supervisión así como los datos de diagnosis con respecto a la máquina automática en el dispositivo de procesamiento de datos remoto.
Las máquinas automáticas son accionadas en el presente instante habitualmente en el lugar a través de un operador o son evaluadas y supervisadas a través del personal de servicio. De la misma manera es habitual que el operador se comunique en el lugar con un centro de servicio (línea caliente) a través del teléfono, con el fin de prestar servicio técnico a la máquina automática. La comunicación entre el operador y una persona de servicio no sólo se puede realizar habitualmente por medio de una llamada línea caliente telefónica, sino también a través de telefax o E-mail.
Además, se conocen técnicas, con las que se pueden transmitir datos de control sobre un ordenador dispuesto a distancia, de manera que se pueden considerar y modificar los parámetros de control a través de un llamado Tele-servicio.
En los sistemas conocidos es desfavorable que el operador, en general, no está instruido sobre la técnica de automatización, de tal forma que pueda aplicar sin más las instrucciones del personal de servicio. Pero, a la inversa, también es difícil para el personal de servicio crear un diagnóstico sobre la máquina automática, cuando los datos o parámetros solamente se pueden transmitir a través del operador no instruido hacia el personal de servicio.
En este contexto, se conoce también a partir de la publicación de patente US 6 033 226 un sistema multimedia, con el que es posible entrenar a una persona en el manejo de una máquina. El sistema de entrenamiento está conectado en este caso en la máquina, y con una estación dispuesta a distancia se puede supervisar el sistema en tiempo real. Una conexión de datos entre el sistema de entrenamiento y la estación colocada a distancia se lleva a cabo a través de una Intranet o a través de Internet. En este caso, solamente se lleva a cabo una supervisión de la memoria del ordenador del sistema de entrenamiento, que está enlazado con la estación remota.
Además, la publicación de patente US 6 144 848 describe una comunicación multimedia entre un portátil y un servidor. Las enseñanzas presentadas allí se limitan al mando a distancia de un ordenador.
Los artículos "Computer Networks and ISDN-Systems" North Holland Publishing, Amsterdem, NI(30-09-1998), 30 (16 - 18), 1447 - 1455 y XP 1069756 "CyPhone - Mobile Telepresence and Augmented Reality for 3rd Generation Cellular Phone", Euromicro Summer School On Mobile Computing '98 (1998), páginas 35-46, Organizado por Euromicro... Ed., por Tapio Sep se refieren al mando a distancia de robots con la ayuda de sistemas de Realidad Ampliada. En este caso, se intercambian datos Multimedia, por ejemplo, a través de Internet.
Un dispositivo de control del tipo indicado anteriormente se describe en la publicación XP-001069795 Proceedings of Spie, Vol. 4197 (20009, "A wearable computer for mobile-augmented reality based controlling of an intelligent robot", páginas 45-57. Este dispositivo de control para un robot inteligente posee una comunicación de banda ancha con un ordenador portátil, que posibilita una visualización de Realidad Ampliada móvil. En este caso, se entiende por el concepto de "Realidad Ampliada" una llamada "realidad ampliada" para una forma de interacción entre el hombre y la técnica, en la que se incorporan para el operador informaciones en su campo de visión, por ejemplo a través de unas gafas de datos. No obstante, la incorporación se lleva a cabo en función del texto, es decir, de una manera ajustada y derivada del objeto del observador, por ejemplo de una instalación. En este caso, se funden el mundo real y el mundo virtual.
El cometido de la presente invención consiste, por lo tanto, en mejorar el intercambio de datos entre una máquina automática y su operador.
Según la invención, este cometido se soluciona a través de un dispositivo de control para el control o regulación como para la supervisión de una máquina automática con una instalación de procesamiento para el procesamiento y la comunicación inmediata de datos que están relacionados con la máquina automática de/con un dispositivo de procesamiento de datos que está dispuesto a distancia de la misma, en el que a través de la instalación de procesamiento se pueden procesar los datos que se refieren a la máquina automática en forma de mensajes multimedia y se pueden transmitir al dispositivo de procesamiento de datos remoto, de manera que se pueden crear datos para el control o regulación de la máquina automática en el dispositivo de procesamiento de datos remoto y se pueden evaluar los datos de supervisión así como los datos de diagnosis con respecto a la máquina automática en el dispositivo de procesamiento de datos remoto, en el que los mensajes multimedia corresponden a la norma UMTS y la instalación de la Realidad Ampliada para un operador de la máquina está conectada a través de una instalación de telecomunicaciones con el dispositivo de procesamiento de datos.
Además, el cometido mencionado anteriormente se soluciona a través de un procedimiento para el control o regulación así como para la supervisión de una máquina automática a través de la preparación de un dispositivo de control y de un dispositivo de procesamiento de datos que está dispuesto a distancia de la misma, que están conectados directamente entre sí a través de una instalación de telecomunicaciones, y la transmisión de datos de control y de supervisión relacionados con la máquina automática se lleva a cabo en forma de mensajes multimedia a través de la instalación de telecomunicaciones entre el dispositivo de control y el dispositivo de procesamiento de datos dispuesto remoto en tiempo real, de manera que se pueden crear datos para el control o regulación de la máquina automática en el dispositivo de procesamiento de datos remoto y se pueden evaluar los datos de supervisión así como los datos de diagnosis con respecto a la máquina automática en el dispositivo de procesamiento de datos remoto, en el que los mensajes multimedia corresponden a la norma UMTS y los datos de control y de supervisión se transmiten con la instalación de telecomunicaciones a una instalación de Realidad Ampliada y se visualizan allí para un operador de la máquina.
Los desarrollos ventajosos del dispositivo de control según la invención y del procedimiento según la invención están definidos en las reivindicaciones dependientes.
La presente invención permite de esta manera que se puedan transmitir a un operador de una máquina automática o bien a una persona de servicio a través de multimedia datos e informaciones desde el lado opuesto. Así, por ejemplo, la persona de servicio puede observar la máquina automática a través de una imagen de televisión en línea y no depende de las descripciones de un operador.
La presente invención se explica en detalle a continuación con la ayuda de los dibujos adjuntos, en los que:
La figura 1 muestra una comunicación sencilla entre un operador de una máquina y una persona de servicio remoto según el estado de la técnica.
La figura 2 muestra una instalación de tele-servicio según el estado de la técnica.
La figura 3 muestra una comunicación del servicio UMTS según una primera forma de realización de la presente invención.
La figura 4 muestra una comunicación de servicio con un aparato de realidad Ampliada de acuerdo con una segunda forma de realización del presente dispositivo.
La figura 5 muestra un sistema de servicio con varias personas de servicio de acuerdo con una tercera forma de realización de la presente invención; y
La figura 6 muestra un sistema de servicio con una red UMTS con varias instalaciones de servicio según una cuarta forma de realización de la presente invención.
Las siguientes formas de realización representan aplicaciones preferidas de la presente invención.
La estructura del dispositivo según la invención o bien del sistema según la invención se explican en primer lugar con la ayuda del estado de la técnica según las figuras 1 y 2. De acuerdo con la figura 1, una máquina MA posee una unidad de control CO. Un operador US maneja la máquina MA o bien el control CO. El operador US está en comunicación con una llamada persona de servicio remota SE a través del teléfono o Fax TE. La persona de servicio puede poseer a tal fin, por ejemplo, una línea caliente.
De acuerdo con la figura 2, la comunicación telefónica TE entre el operador US y la persona de servicio SE se complementa a través de una comunicación de Tele-Servicio TS. En el marco de un Tele-Servicio de este tipo, la persona de Servicio Remoto SE puede ver y modificar parámetros del control en un puesto de trabajo de pantalla. Además, la persona de Servicio SE puede retornar los parámetros de control, dado el caso, modificados a través de una comunicación de Tele-Servicio de vuelta al control CO o bien a la máquina MA.
La comunicación de datos descrita entre el operador US y la persona de servicio SE se completa ahora, en una primera forma de realización según la figura 3 por medio de dos comunicaciones UMTS UC 1 y UC 2. Por medio de un servidor UMTS SV en el control CO, la persona de servicio SE recibe imágenes de directo o bien imágenes móviles de la máquina en tiempo real, por ejemplo desde una WebCam a través de la comunicación UMTS UC 2. El operador US puede recibir entonces desde la persona de servicio SE, a través de la comunicación UMTS UC 1 en el aparato UMTS instrucciones para el manejo de la máquina MA. Un aparato UMTS HA de este tipo puede estar constituido por un teléfono móvil, un portátil o, por ejemplo, un Palmtop. Las instrucciones pueden comprender también animaciones móviles. De esta manera, el operador US está en condiciones de aplicar instrucciones, dado el caso complicadas, de la persona de servicio SE. Además, la comunicación UMTS UC 2 permite una consideración inmediata de estados de funcionamiento de la máquina MA a través de la persona de servicio SE, sin tener que hacer referencia a los conocimientos del operador US.
En una segunda forma de realización de la presente invención según la figura 4, que representa un desarrollo de la primera forma de realización según la figura 3. está previsto un aparato de Realidad Ampliada AD para el operador US. El aparato de Realidad Ampliada AD está conectado a través de la comunicación UMTS UC 1 con la instalación de procesamiento de datos DP de la persona de servicio SE. Además, el aparato de Realidad Ampliada AD está conectado a través de un bucle de Realidad Aumentada AL con la máquina MA o bien con su control CO.
La persona de servicio SE puede intervenir a través de la comunicación UMTS UC 1 directamente en el aparato de Realidad Ampliada AD del operador US. El operador US se puede comunicar a través del bucle de Realidad Ampliada con la máquina MA, siendo visualizados o bien animados los datos de la máquina, por ejemplo, actuales o bien registrados. En este bucle de Realidad Aumentada AL se puede integrar directamente la persona de servicio SE. Los aparatos de Realidad Aumentada AD son, por ejemplo, gafas, a las que se pueden alimentar secuencias de vídeo. También pueden existir, naturalmente, comunicaciones telefónicas o bien de fax TE, representadas en las figuras 1 a 3, entre el operador US y la persona de servicio SE.
Una tercera forma de realización de la presente invención consiste en que están previstos varios centros de servicio o bien personas de servicio SE 1, Se 2, que están en comunicación a través de sus instalaciones de procesamiento de datos DP 1, DP 2 con la máquina MA a controlar o bien con el operador US. Adicionalmente a las comunicaciones representadas en las figuras 1 a 4 precedentes, existen también una o varias otras conexiones de comunicaciones de banda ancha o UMTS UC 11, UC 12, UC 21, UC 22 para el intercambio de datos multimedia entre el operador US o bien la máquina MA y las personas de servicio SE 1, SE 2. Las comunicaciones UMTS UC 11 y UC 12 tienen en este caso la misma función que la comunicación UMTS UC 1 de la figura 4, y de la misma manera las comunicaciones UMTS UC 21 y UC 22 tienen la misma función que la comunicación UMTS UC 2 de la figura 4.
De una manera similar, entre cada unidad de servicio SE 1, SE 2 y el control CO de la máquina MA se puede establecer una comunicación de Tele-Servicio TS 1, TYS 2. Con este sistema se pueden comunicar especialmente también al mismo tiempo, por ejemplo, además de la persona de servicio SE 1 para un fabricante de control, también una o varias otras personas de servicio SE 2, por ejemplo del fabricante de la máquina, con el operador US de la máquina MA. A través de los canales de retorno correspondientes de las comunicaciones UMTS UC 11, UC 12 y/o a través de una comunicación de conferencia especial CC se pueden establecer circuitos conferencia.
Como también en las formas de realización precedentes, todas o algunas de las comunicaciones UMTS en la tercera forma de realización se pueden sustituir por otras comunicaciones de transmisión de banda ancha, que pueden transmitir mensajes multimedia en tiempo real.
Una cuarta forma de realización de la presente invención se representa en la figura 6. Los estados reales de la máquina a controlar MA son observados a través de una WebCam WE. La WebCam WE proporciona las imágenes al servidor UMTS SV, que comunica de nuevo datos de control con la unidad de control CO de la máquina
MA.
El servidor UMTS SV está conectado en Internet o en una Intranet IN. Ésta puede estar conectada de nuevo con varios servidores de datos DS 1, DS 2, DS 3, por ejemplo para un llamado Sistema de Ejecución de Fabricación (MES), documentaciones, etc.
El servidor UMTS SV posee, además, una comunicación con una red UMTS UN 1. Esta red UMTS UN 1 está conectada con varias instalaciones de procesamiento de datos DP 1, DP 2 de diferentes proveedores de servicios y, por ejemplo, de un registro de datos de servicio OD. Las instalaciones de procesamiento de datos DP 1, DP 2 de los proveedores de servicios están conectadas en cada caso con las llamadas bases de conocimiento propias KB 1, KB 2. Además, están conectadas entre sí y con el registro de datos de servicio OD a través de redes UMTS UM 2, UM 3.
Las redes de datos IN, UN 1, UN 2, UN 3 utilizadas en esta cuarta forma de realización se pueden sustituir de una manera discrecional a través de otras redes adecuadas y se pueden combinar entre sí.
En el escenario mostrado en la figura 6, de esta manera, a través de una red UMTS UN 1 pueden estar conectadas diferentes instalaciones de servicio, por ejemplo, de un fabricante de control, de un constructor de máquinas, de un registro de datos de funcionamiento, etc. con el servidor UMTS SV de un control de las máquinas CO. Las instalaciones de servicio individuales pueden establecer también de nuevo en este caso, a través de las redes UMTS UN 2, UN 3 o a través de otros medios de comunicación, circuitos de conferencia con el servidor UMTS o con el operador US no representado.
Con el sistema según la invención se pueden realizar de esta manera las siguientes funciones de una forma ventajosa:
-
funcionalidad de rastreo a través del rastreo en línea UMTS con mando a distancia (rastreo en línea con almacenamiento de datos a distancia),
-
transmisión de imágenes móviles y/o fijas de la máquina,
-
transmisión de datos en tiempo real de un control/máquina con evaluación remota (datos de calidad, datos de producción, datos de servicio, ...),
-
representación de un proceso de fabricación real a través de una cámara,
-
visualización de variables dinámicas y estáticas de la máquina y del control,
-
transmisión de informaciones gráficas.
De esta manera, según la invención, se puede realizar para máquinas industriales una diagnosis remota, un servicio remoto o bien una guía de operador remota, donde la persona de servicio remoto tiene acceso a los siguientes datos:
-
datos de control,
-
imágenes móviles (imagen real de la máquina, por ejemplo a través de Webcam),
-
acceso operativo a otros servidores de datos, por ejemplo documentaciones, MES, etc. (por ejemplo, qué material es procesado precisamente, qué encargo, etc.).
Además, el operador puede ser guiado en el lugar a través de:
-
transmisión de instrucciones (por ejemplo, documentos especiales) sobre aparatos de visualización en el lugar (por ejemplo, OP, portátil, móvil),
-
incorporación del manejo en las "Gafas de Realidad Aumentada".
De la misma manera, como ya se ha mencionado, se puede fabricar un circuito de conferencia bajo la inclusión de diferentes puestos de servicio, por ejemplo fabricantes de OEM y fabricantes del control, por ejemplo para aplicaciones de servicio o procesos de optimización de la puesta en servicio.
Con respecto al tipo de construcción compacto, como se ha representado en las figuras 3, 4 y 5, el servidor UMTAS SV se puede integrar en la máquina MA o bien el control CO.

Claims (10)

1. Dispositivo para el control o la regulación así como para la supervisión de una máquina automática (MA) con una instalación de procesamiento (SV) para el procesamiento y la comunicación inmediata de datos que están relacionados con la máquina automática (MA) de/con un dispositivo de procesamiento de datos (DP) que está dispuesto a distancia de la misma, en el que a través de la instalación de procesamiento (SV) se pueden procesar los datos que se refieren a la máquina automática en forma de mensajes multimedia y se pueden transmitir al dispositivo de procesamiento de datos (DP) remoto, de manera que se pueden crear datos para el control o regulación de la máquina automática en el dispositivo de procesamiento de datos (DP) remoto y se pueden evaluar los datos de supervisión así como los datos de diagnosis con respecto a la máquina automática (MA) en el dispositivo de procesamiento de datos remoto, caracterizado porque los mensajes multimedia corresponden a la norma UMTS y la instalación de la Realidad Ampliada (AD) para un operador (US) de la máquina (MA) está conectada a través de una instalación de telecomunicaciones (UC1) con el dispositivo de procesamiento de datos (DP) y a través de un bucle de la Realidad Ampliada (AL) con la máquina (MA) o bien su control (DO).
2. Dispositivo de control según la reivindicación 1, caracterizado porque la instalación de telecomunicaciones (UC 1, UC 2, TS) está diseñada para la comunicación de datos entre el dispositivo de control (CO) y el dispositivo de procesamiento de datos (DP), y en el que el dispositivo de control y el dispositivo de procesamiento de datos disponen de una instalación de visualización, de manera que se puede realizar una visualización unilateral o alterna de informaciones a través de la instalación de telecomunicaciones.
3. Dispositivo de control según la reivindicación 2, en el que la conexión de comunicación de la instalación de telecomunicaciones (UC 1, UC 2, TS) es bidireccional, de manera que se puede realizar una llamada de parámetros y/o de estados reales del dispositivo de control (CO) y/o de la máquina a controlar (MA), una funcionalidad de rastreo y un rastreo en línea con mando a distancia.
4. Dispositivo de control según la reivindicación 2 ó 3, en el que el dispositivo de procesamiento de datos (DP) comprende varias unidades de procesamiento de datos (DP 1, DP 2), que están en conexión de comunicación entre sí y que presentan, respectivamente, una conexión de telecomunicación para la transmisión en tiempo real de mensajes multimedia hacia el dispositivo de control (CO).
5. Dispositivo de control según una de las reivindicaciones 2 a 4, en el que la comunicación entre los componentes individuales se puede realizar a través de una o varias redes UMTS (UN 1, UN 2, UN 3) e Internet (IN).
6. Procedimiento para el control o regulación así como para la supervisión de una máquina automática (MA) a través de la preparación de un dispositivo de control (CO) y de un dispositivo de procesamiento de datos (DP) que está dispuesto a distancia de la misma, que están conectados directamente entre sí a través de una instalación de telecomunicaciones (UC 1, UC 2, TS), y la transmisión de datos de control y de supervisión relacionada con la máquina automática (MA) se lleva a cabo en forma de mensajes multimedia a través de la instalación de telecomunicaciones (UC 1, UC 2, TS) entre el dispositivo de control (CO) y el dispositivo de procesamiento de datos (DP) dispuesto remoto en tiempo real, de manera que se pueden crear datos para el control o regulación de la máquina automática en el dispositivo de procesamiento de datos (DP) remoto y se pueden evaluar los datos de supervisión así como los datos de diagnosis con respecto a la máquina automática (MA) en el dispositivo de procesamiento de datos remoto, caracterizado porque los mensajes multimedia corresponden a la norma UMTS y los datos de control y de supervisión se transmiten con la instalación de telecomunicaciones (UC1, UC2, TS) a una instalación de Realidad Ampliada (AD) y se visualizan allí para un operador (US) de la máquina (MA), estando conectada la instalación de Realidad Ampliada (AD) a través de un bucle de Realidad Aumentada (AL) con la máquina (MA) o bien con su control (DO).
7. Procedimiento según la reivindicación 6, en el que los datos de control y supervisión se transmiten entre el dispositivo de control (CO) y el dispositivo de procesamiento de datos (DP) y se visualizan en cada caso en el receptor.
8. Procedimiento según la reivindicación 6 ó 7, en el que los parámetros y/o los estados reales del dispositivo de control (CO) y/o de la máquina (MA) a controlar son llamados a través de la instalación de telecomunicaciones (UC 1, UC 2, TS) y se puede realizar un rastreo en línea con mando a distancia.
9. Procedimiento según una de las reivindicaciones 6 a 8, en el que se transmiten datos multimedia desde unidades de procesamiento de datos (DP 1, DP 2) localizadas en lugares diferentes entre sí así como desde y hacia el dispositivo de control (CO) en tiempo real.
10. Procedimiento según una de las reivindicaciones 6 a 9, en el que los componentes respectivos se comunican a través de una o varias redes UMTS (UN 1, UN 2, UN 3) y a través de Internet.
ES02001283T 2001-01-25 2002-01-17 Diagnosis y mantenimiento de maquinas por medio de la realidad aumentada y transmisiones en tiempo real de mensajes multimedia. Expired - Lifetime ES2244681T3 (es)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
DE10103333 2001-01-25
DE10103333 2001-01-25
DE10129566 2001-06-20
DE10129566A DE10129566A1 (de) 2001-01-25 2001-06-20 Maschinendiagnose/-service mittels Echtzeitübertragung von Multimedianachrichten

Publications (1)

Publication Number Publication Date
ES2244681T3 true ES2244681T3 (es) 2005-12-16

Family

ID=26008327

Family Applications (1)

Application Number Title Priority Date Filing Date
ES02001283T Expired - Lifetime ES2244681T3 (es) 2001-01-25 2002-01-17 Diagnosis y mantenimiento de maquinas por medio de la realidad aumentada y transmisiones en tiempo real de mensajes multimedia.

Country Status (5)

Country Link
US (1) US20020099810A1 (es)
EP (1) EP1227647B1 (es)
CN (1) CN1237775C (es)
AT (1) ATE298491T1 (es)
ES (1) ES2244681T3 (es)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE10023820B4 (de) * 2000-05-15 2006-10-19 Siemens Ag Software-Schutzmechanismus
DE10304649A1 (de) * 2003-02-05 2004-08-19 Siemens Ag HMI-Einrichtung mit einer Computer-Anwenderstation mit einer Schnittstelle zur Übertragung von Kommunikationsdaten
US20060095759A1 (en) * 2004-10-28 2006-05-04 Brookner George M Method and system for arranging communication between a data processing device and a remote data processing center
FR2896049A1 (fr) * 2006-03-31 2007-07-13 France Telecom Systeme de teleassistance d'une machine
US7676690B2 (en) * 2006-05-30 2010-03-09 Dell Products L.P. Mirroring of activity between electronic devices
US9740935B2 (en) * 2013-11-26 2017-08-22 Honeywell International Inc. Maintenance assistant system
DE102014207251A1 (de) * 2014-04-15 2015-10-15 Siemens Aktiengesellschaft Datenbrille, Datenübertragungsnetzwerk und Verfahren zum drahtlosen Datenaustausch

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5414494A (en) * 1993-12-06 1995-05-09 Xerox Corporation Automatic call to selected remote operators in response to predetermined machine conditions
JPH11507775A (ja) * 1995-06-07 1999-07-06 イー−コム・インコーポレーテッド ホストコンピュータサーバのための低電力電気通信コントローラ
US6033226A (en) * 1997-05-15 2000-03-07 Northrop Grumman Corporation Machining tool operator training system
DE19814450B4 (de) * 1998-03-31 2008-07-31 Telefonaktiebolaget Lm Ericsson (Publ) Steuervorrichtung, Steuerverfahren und Telekommunikationssystem zum Steuern des Aufbaus von Anrufen zwischen Teilnehmerstationen
CA2326750C (en) * 1998-04-03 2010-03-16 Telefonaktiebolaget Lm Ericsson Flexible radio access and resource allocation in a universal mobile telephone system (umts)
US6968302B1 (en) * 1999-08-11 2005-11-22 Agilent Technologies, Inc. System and method for remote analysis and control of test and measurement devices
US6567502B2 (en) * 2000-12-19 2003-05-20 Bellsouth Intellectual Property Corporation Multimedia emergency services

Also Published As

Publication number Publication date
ATE298491T1 (de) 2005-07-15
CN1367604A (zh) 2002-09-04
EP1227647A1 (de) 2002-07-31
US20020099810A1 (en) 2002-07-25
EP1227647B1 (de) 2005-06-22
CN1237775C (zh) 2006-01-18

Similar Documents

Publication Publication Date Title
ES2240837T3 (es) Sistema y procedimiento para la creacion de una documentacion de procesos de trabajo para la representacion en un sistema de realidad ampliada.
US11265513B2 (en) Virtual reality and augmented reality for industrial automation
US10535202B2 (en) Virtual reality and augmented reality for industrial automation
CN100432982C (zh) 利用操作者视觉的远程因特网技术指导教育传输***
JP2004213673A (ja) 強化現実システム及び方法
CN110442486A (zh) 一种基于混合现实技术的远程设备诊断***和方法
ES2244681T3 (es) Diagnosis y mantenimiento de maquinas por medio de la realidad aumentada y transmisiones en tiempo real de mensajes multimedia.
JP2019036132A (ja) 作業支援システム,ウェアラブル装置,撮像装置,作業支援方法
JP2018185570A (ja) 遠隔支援システム
Masood et al. Augmented reality: focusing on photonics in industry 4.0
JP6969807B2 (ja) 作業支援システム
KR20210142084A (ko) 보수 지원 시스템, 보수 지원 방법, 프로그램, 가공 화상의 생성 방법 및 가공 화상
CN115836246A (zh) 多针孔相机和图像识别***
JP2020014057A (ja) 頭部搭載型表示装置、検査支援表示システム、表示方法及び表示プログラム
Jacobs Ar headsets give oil and gas sector the quicker fix
DE102018123635A1 (de) 3d-kartierung einer prozesssteuerungsumgebung
Hestnes et al. Real situations of wearable computers used for video conferencing-and for terminal and network design
ES2217179T3 (es) Sistema y procedimiento para la preparacion automatica de datos, especialmente en el entorno de la produccion, montaje, servicio o mantenimiento.
EP3502836A1 (en) Method for operating an augmented interactive reality system
JP2022037675A (ja) 遠隔保守支援方法
JP2020166040A (ja) 制御システム
Benbelkacem et al. Augmented reality system for E‐maintenance application
KR102540516B1 (ko) AR(Augmented Reality) 컨텐츠를 제공하는 장치, 사용자 단말 및 방법
JP2003087190A (ja) 保全用携帯端末装置および保全用情報端末システム
McKee Virtual robotics laboratory for research