DE102019006448A1 - Method for operating a communication platform for troubleshooting a motor vehicle, as well as communication platform - Google Patents

Method for operating a communication platform for troubleshooting a motor vehicle, as well as communication platform Download PDF

Info

Publication number
DE102019006448A1
DE102019006448A1 DE102019006448.8A DE102019006448A DE102019006448A1 DE 102019006448 A1 DE102019006448 A1 DE 102019006448A1 DE 102019006448 A DE102019006448 A DE 102019006448A DE 102019006448 A1 DE102019006448 A1 DE 102019006448A1
Authority
DE
Germany
Prior art keywords
communication platform
motor vehicle
user
troubleshooting
solving
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
DE102019006448.8A
Other languages
German (de)
Inventor
Stefan Schick
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
1886Ventures GmbH
Original Assignee
Daimler AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Daimler AG filed Critical Daimler AG
Priority to DE102019006448.8A priority Critical patent/DE102019006448A1/en
Priority to PCT/EP2020/071636 priority patent/WO2021047823A1/en
Publication of DE102019006448A1 publication Critical patent/DE102019006448A1/en
Ceased legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/20—Administration of product repair or maintenance

Landscapes

  • Business, Economics & Management (AREA)
  • Human Resources & Organizations (AREA)
  • Engineering & Computer Science (AREA)
  • Economics (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Marketing (AREA)
  • Operations Research (AREA)
  • Quality & Reliability (AREA)
  • Strategic Management (AREA)
  • Tourism & Hospitality (AREA)
  • Physics & Mathematics (AREA)
  • General Business, Economics & Management (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

Die Erfindung betrifft ein Verfahren zum Betreiben einer Kommunikationsplattform (10) zur Problembehebung für ein Kraftfahrzeug (12), bei welchem mittels eines mobilen Endgeräts (14) eines Nutzers (16) des Kraftfahrzeugs (12) das Kraftfahrzeug (12) erfasst wird und mittels einer virtuellen Realität (VR) das Kraftfahrzeug (12) auf der Kommunikationsplattform (10) angezeigt wird, wobei mittels der Kommunikationsplattform (10) zumindest ein problembehaftetes Kraftfahrzeugbauteil (18) des erfassten Kraftfahrzeugs (12) identifiziert wird, und in Abhängigkeit des identifizierten Kraftfahrzeugbauteils (18) ein Lösungsvorschlag (22, 24) zur Problembehebung mittels der Kommunikationsplattform (10) dem Nutzer (16) vorgeschlagen wird, wobei auf Basis einer intuitiven Fehlerbeschreibung (20) des Nutzers (16) und auf Basis des identifizierten Kraftfahrzeugbauteils (18) der Lösungsvorschlag (22, 24) mittels der Kommunikationsplattform (10) ausgewählt wird. Ferner betrifft die Erfindung eine Kommunikationsplattform (10).The invention relates to a method for operating a communication platform (10) for troubleshooting a motor vehicle (12), in which the motor vehicle (12) is recorded by means of a mobile terminal device (14) of a user (16) of the motor vehicle (12) and by means of a virtual reality (VR) the motor vehicle (12) is displayed on the communication platform (10), at least one problematic motor vehicle component (18) of the detected motor vehicle (12) being identified by means of the communication platform (10), and depending on the identified motor vehicle component (18 ) a proposed solution (22, 24) for solving the problem by means of the communication platform (10) is proposed to the user (16), the proposed solution ( 22, 24) is selected by means of the communication platform (10). The invention also relates to a communication platform (10).

Description

Die Erfindung betrifft ein Verfahren zum Betreiben einer Kommunikationsplattform zur Problembehebung für ein Kraftfahrzeug gemäß dem Oberbegriff von Patentanspruch 1. Ferner betrifft die Erfindung eine Kommunikationsplattform.The invention relates to a method for operating a communication platform for troubleshooting a motor vehicle according to the preamble of patent claim 1. The invention also relates to a communication platform.

Es ist bekannt, dass Mitarbeiter beispielsweise einer Werkstatt bei der Problemfindung und -behebung aufgrund mangelnder Kenntnisse des Produkts oft nicht ohne Hilfsmittel den Lösungsweg kennen und verlieren dadurch wertvolle Zeit. Außerdem muss für die Lösung die entsprechende teure Dokumentation sowie menschliche Unterstützung zur Verfügung gestellt werden. Um diesem Problem entgegenzutreten, gibt es heutzutage Betriebsanleitungen, Ticketsysteme zur Erhebung von Fehlern, Telefonsupport, insbesondere Videofunktion und spezielle für Anwendungsfälle erstellte Augmented-Reality-Tutorials.It is known that employees in a workshop, for example, often do not know the solution without aids when finding and correcting problems due to a lack of knowledge of the product and thus lose valuable time. In addition, the corresponding expensive documentation and human support must be made available for the solution. To counter this problem, there are now operating instructions, ticket systems for collecting errors, telephone support, in particular video functions and special augmented reality tutorials created for use cases.

Die US 2002/0067372 A1 offenbart den Einsatz von Augmented-Reality-basierten Technologien zur situationsbezogenen Unterstützung eines qualifizierten Bedieners durch einen Remote-Experten. Die Erfindung bezieht sich dabei auf ein System und ein Verfahren zur Nutzung von Expertenwissen an einem entfernten Ort, wobei Informationsdaten, beispielsweise in Form von Videobildern, mittels Augmented-Reality-Mitteln von einem ersten Ort, der von einem qualifizierten Bediener belegt ist, zu einem entfernten Experten an einem zweiten Ort übertragen werden, und wobei der entfernte Experte zusätzlich Informationsdaten in Form von Augmented-Reality-Informationen an den Fachmann am ersten Ort überträgt.The US 2002/0067372 A1 discloses the use of augmented reality-based technologies for situation-related support of a qualified operator by a remote expert. The invention relates to a system and a method for using expert knowledge at a remote location, information data, for example in the form of video images, using augmented reality means from a first location occupied by a qualified operator to one remote experts are transmitted at a second location, and wherein the remote expert additionally transmits information data in the form of augmented reality information to the specialist at the first location.

Die US 2015/0371455 A1 offenbart ein Augmented-Reality-basiertes interaktives Fehler-Behebungs- und -diagnosesystem und zugehörige Betriebsverfahren, einschließlich eines Diagnosekommunikationsverfahrens für ein Fahrzeug mit einem Onbord-Diagnosesubsystem.The US 2015/0371455 A1 discloses an augmented reality based interactive fault recovery and diagnosis system and associated operating methods, including a diagnostic communication method for a vehicle having an onboard diagnostic subsystem.

Die US 2016/0253563 A1 offenbart ein System und Verfahren zur Verwendung des Systems, umfassend eine kopfmontierte Vorrichtung, einen Fernwartungsserver und einen Steuerabschnitt, der betreibbar ist, um das zu testende System unter Verwendung einer Bildererkennungsfunktion zu identifizieren, um eine Vielzahl von Subsystemen innerhalb des zu testenden Systems in einer Datenbibliothek zu identifizieren, um dreidimensionale Modelle von Subsystemen zu erstellen und diese auf einer visuellen Schnittstelle der kopfmontierten Vorrichtung unter Verwendung einer Augmented-Reality-Funktion anzuzeigen, sich mit dem Fernwartungsserver unter Verwendung eines Verschlüsselungsalgorithmus über Streaming-Video oder an den Fernwartungsserver gesendete Bilder zu verbinden, das zu testende System-Daten und externe Sensordaten zu sammeln, einen Prognose- und/oder Gesundheits-, Wartungs- und/oder Managementdienst auf den gesammelten Daten durchzuführen, um den Systemzustand und den projizierten Zustand des zu testenden Systems und/oder des Subsystems zu bestimmen, den Remote-Benutzerzugriff auf den Fernwartungsserver zu authentifizieren, die Datenbibliothek zu aktualisieren und eine Vielzahl von Bezeichnern auf der visuellen Schnittstelle einzufügen.The US 2016/0253563 A1 discloses a system and method of using the system comprising a head-mounted device, a remote maintenance server, and a control section operable to identify the system under test using an image recognition function to identify a plurality of subsystems within the system under test in a data library identify in order to create three-dimensional models of subsystems and display them on a visual interface of the head-mounted device using an augmented reality function, connect to the remote maintenance server using an encryption algorithm via streaming video or images sent to the remote maintenance server, to collect the system data to be tested and external sensor data, to carry out a prognosis and / or health, maintenance and / or management service on the collected data in order to determine the system status and the projected status of the system under test d / or to determine the subsystem, to authenticate the remote user access to the remote maintenance server, to update the data library and to insert a large number of identifiers on the visual interface.

Aufgabe der vorliegenden Erfindung ist es, ein Verfahren sowie eine Kommunikationsplattform zu schaffen, mittels welchem eine schnellere Problembehebung für das Kraftfahrzeug realisiert werden kann.The object of the present invention is to create a method and a communication platform by means of which problem can be solved more quickly for the motor vehicle.

Diese Aufgabe wird durch ein Verfahren sowie durch eine Kommunikationsplattform gemäß den unabhängigen Patentansprüchen gelöst.This object is achieved by a method and by a communication platform according to the independent claims.

Ein Aspekt der Erfindung betrifft ein Verfahren zum Betreiben einer Kommunikationsplattform zur Problembehebung für ein Kraftfahrzeug, bei welchem mittels eines mobilen Endgeräts eines Nutzers des Kraftfahrzeugs das Kraftfahrzeug erfasst wird und mittels einer virtuellen Realität das Kraftfahrzeug auf der Kommunikationsplattform angezeigt wird, wobei mittels der Kommunikationsplattform zumindest ein problembehaftetes Kraftfahrzeugbauteil des erfassten Kraftfahrzeugs identifiziert wird, und in Abhängigkeit dieses identifizierten Kraftfahrzeugbauteils ein Lösungsvorschlag zur Problembehebung mittels der Kommunikationsplattform dem Nutzer vorgeschlagen wird.One aspect of the invention relates to a method for operating a communication platform for troubleshooting a motor vehicle, in which the motor vehicle is recorded by means of a mobile terminal of a user of the motor vehicle and the motor vehicle is displayed on the communication platform by means of a virtual reality, with at least one by means of the communication platform problematic motor vehicle component of the detected motor vehicle is identified, and depending on this identified motor vehicle component, a proposed solution for solving the problem by means of the communication platform is proposed to the user.

Es ist vorgesehen, dass auf Basis einer intuitiven Fehlerbeschreibung des Nutzers und auf Basis des identifizierten Kraftfahrzeugbauteils der Lösungsvorschlag mittels der Kommunikationsplattform ausgewählt wird.Provision is made for the proposed solution to be selected by means of the communication platform on the basis of an intuitive error description by the user and on the basis of the identified motor vehicle component.

Insbesondere ist dadurch eine schnellere Fehlerbehebung beziehungsweise Problembehebung für das Kraftfahrzeug realisiert.In particular, this results in faster troubleshooting or problem solving for the motor vehicle.

Insbesondere wird somit eine digitale Plattform, die in Kombination mit einer Augmented-Reality, insbesondere mit einem Augmented-Reality-Gerät, welches beispielsweise als Brille, Tablet oder Smartphone ausgebildet werden kann, welches insbesondere das mobile Endgerät ist, und den Servicetechnikern Zugriff auf einen Remotesupport in Form von Liveexperten oder bestehenden Tutorials ermöglicht. Dabei steht im Fokus das intelligente Matchmaking mit dem Experten oder dem Tutorial basierend auf der intuitiven Fehlerbeschreibung.In particular, a digital platform that, in combination with an augmented reality, in particular with an augmented reality device, which can be designed as glasses, tablet or smartphone, which is in particular the mobile terminal, and the service technicians have access to a Remote support in the form of live experts or existing tutorials enabled. The focus is on intelligent matchmaking with the expert or the tutorial based on the intuitive error description.

Insbesondere kann dadurch eine Zeitersparnis für Werkstätten oder Servicetechniker dank einer schnellen Problembehebung realisiert werden. Ferner kann eine Kostenreduktion für den Experten Supprt realisiert werden. Ferner kann eine Monetarisierung von erstellten Betriebsanleitungen durchgeführt werden. Des Weiteren können die Arbeitsumfänge von Handwerkern, beispielsweise bei einem Hausbesuch, erweitert werden.In particular, this can save time for workshops or service technicians thanks to quick troubleshooting. Furthermore, a cost reduction for the expert support can be realized. Furthermore, a monetization of created operating instructions can be carried out. Furthermore, the scope of work of craftsmen can be expanded, for example during a home visit.

Alternativ kann die digitale Plattform auch für Problembehebungen bei weiteren Produkten, also nicht nur für Kraftfahrzeuge, eingesetzt werden.Alternatively, the digital platform can also be used to resolve problems with other products, not just for motor vehicles.

Der Nutzer kann dabei auch ein ausgebildeter Techniker sein.The user can also be a trained technician.

Gemäß einer vorteilhaften Ausgestaltungsform wird die intuitive Fehlerbeschreibung mittels einer Benutzerschnittstelle der Kommunikationsplattform durchgeführt. Neben dem problembehafteten Kraftfahrzeugbauteil kann es sich alternativ oder ergänzend auch um ein Fehlverhalten handeln.According to an advantageous embodiment, the intuitive error description is carried out by means of a user interface of the communication platform. In addition to the problematic motor vehicle component, it can alternatively or additionally also be a matter of incorrect behavior.

Weiterhin vorteilhaft ist, wenn einer ausgewählten Person zur Problembehebung die virtuelle Realität angezeigt wird und eine Echtzeitkommunikation zwischen der ausgewählten Person und dem Nutzer zum Problembeheben als Lösungsvorschlag vorgeschlagen wird.It is also advantageous if the virtual reality is displayed to a selected person for problem solving and real-time communication between the selected person and the user for problem solving is proposed as a solution.

Bevorzugt kann der ausgewählten Person zur Problembehebung die Möglichkeit gegeben werden die Komponenten/Bauteile der virtuellen Realität in der Echtzeitkommunikation dem Nutzer durch sein Augmented-Reality-Gerät sichtbar zu machen.The selected person can preferably be given the opportunity to rectify the problem to make the components of the virtual reality visible to the user in real-time communication through his augmented reality device.

Weiterhin vorteilhaft ist, wenn dem Nutzer ein auf der Kommunikationsplattform abgespeichertes Problembehebungsvideo als Lösungsvorschlag zum Ansehen vorgeschlagen wird.It is also advantageous if a problem-solving video stored on the communication platform is proposed to the user as a suggested solution for viewing.

Bevorzugt kann als Problembehebungsvideo eine Schritt für Schritt Anleitung beinhalten. Hierbei kann während der Echtzeitkommunikation zum einen jedes eingeblendete also markierte Bauteil gespeichert und der gesprochenen Text des Experten aufgezeichnet werden. Automatisiert werden die Bauteile mit den relevanten Textinformationen verknüpft. Das Ergebnis ist eine schrittweise Anleitung in der Augmented-Reality. Der Techniker kann nach Fertigstellung die Anleitung abrufen und sich Schritt für Schritt durch die Erklärungen klicken. Jeder Schritt zeigt ihm ein Bauteil und beispielsweise zusätzlichen Visualisierungen und die entsprechende Anweisung des Experten.Preferably, the problem-solving video can contain step-by-step instructions. During real-time communication, on the one hand, each displayed component can be saved and the spoken text of the expert recorded. The components are automatically linked with the relevant text information. The result is a step-by-step guide to augmented reality. After completion, the technician can call up the instructions and click through the explanations step by step. Each step shows him a component and, for example, additional visualizations and the corresponding instructions from the expert.

Insbesondere kann man bei der Schritt-für-Schritt Anleitung einzelne Schritte löschen oder hinzufügen, die Reihenfolge der Schritte ändern, automatisiert einzelne Schritte der gesamten Datenbank durch neue ersetzen. Der Nutzer kann zusätzlich, sollte er bei einem konkreten Schritt nicht weiterkommen, aus einer Schritt-für-Schritt Anleitung Hilfe über Echtzeitkommunikation anfordern. Ein weiterer Vorteil ist, dass die gespeicherten Inhalte keine Informationen vom Nutzer beinhalten.In particular, with the step-by-step instructions, you can delete or add individual steps, change the order of the steps, and automatically replace individual steps in the entire database with new ones. In addition, if the user gets stuck with a specific step, they can request help via real-time communication from step-by-step instructions. Another advantage is that the stored content does not contain any information from the user.

In einer vorteilhaften Ausgestaltungsform wird die Erzeugung des Problembehebungsvideos gruppenbasiert durchgeführt, wobei zur Erzeugung des Problembehebungsvideos eine Echtzeitproblembehebung zwischen dem Nutzer und einer ausgewählten Person aufgenommen und dokumentiert wird.In an advantageous embodiment, the problem-solving video is generated on a group basis, with real-time problem-solving being recorded and documented between the user and a selected person to generate the problem-solving video.

Ein weiterer Aspekt der Erfindung betrifft eine Kommunikationsplattform zur Problembehebung für ein Kraftfahrzeug, wobei die Kommunikationsplattform zum Durchführen eines Verfahrens nach dem vorhergehenden Aspekt ausgebildet ist. Insbesondere wird das Verfahren mittels der Kommunikationsplattform durchgeführt.Another aspect of the invention relates to a communication platform for troubleshooting a motor vehicle, the communication platform being designed to carry out a method according to the preceding aspect. In particular, the method is carried out by means of the communication platform.

Weitere Vorteile, Merkmale und Einzelheiten der Erfindung ergeben sich aus der nachfolgenden Beschreibung eines bevorzugten Ausführungsbeispiels sowie anhand der Zeichnung. Die vorstehend in der Beschreibung genannten Merkmale und Merkmalskombinationen sowie die nachfolgend in der Figurenbeschreibung genannten und/oder in der einzigen Figur alleine gezeigten Merkmale und Merkmalskombinationen sind nicht nur in der jeweils angegebenen Kombination, sondern auch in anderen Kombinationen oder in Alleinstellung verwendbar, ohne den Rahmen der Erfindung zu verlassen.Further advantages, features and details of the invention emerge from the following description of a preferred exemplary embodiment and with reference to the drawing. The features and combinations of features mentioned above in the description as well as the features and combinations of features mentioned below in the description of the figures and / or shown alone in the single figure can be used not only in the specified combination, but also in other combinations or on their own, without the frame to leave the invention.

Dabei zeigt die einzige Fig. eine schematische Perspektivansicht einer Ausführungsform einer Kommunikationsplattform.The single figure shows a schematic perspective view of an embodiment of a communication platform.

In der Fig. sind gleiche oder funktionsgleiche Elemente mit den gleichen Bezugszeichen versehen.In the figure, elements that are the same or have the same function are provided with the same reference symbols.

Die Fig. zeigt in einer schematischen Perspektivansicht eine Ausführungsform einer Kommunikationsplattform 10 zur Problembehebung für ein Kraftfahrzeug 12. Mittels eines mobilen Endgeräts 14 eines Nutzers 16 des Kraftfahrzeugs 12 wird das Kraftfahrzeug 12 erfasst und mittels einer virtuellen Realität VR das Kraftfahrzeug 12 auf der Kommunikationsplattform 10 angezeigt. Mittels der Kommunikationsplattform 10 wird zumindest ein problembehaftetes Kraftfahrzeugteil 18 des erfassten Kraftfahrzeugs 12 identifiziert und in Abhängigkeit des identifizierten Kraftfahrzeugbauteils 18 ein Lösungsvorschlag 22, 24 zur Problembehebung mittels der Kommunikationsplattform 10 dem Nutzer 16 vorgeschlagen.The figure shows an embodiment of a communication platform in a schematic perspective view 10 for troubleshooting a motor vehicle 12th . Using a mobile device 14th of a user 16 of the motor vehicle 12th becomes the motor vehicle 12th recorded and using a virtual reality VR the motor vehicle 12th on the communication platform 10 displayed. Using the communication platform 10 becomes at least one problematic motor vehicle part 18th of the detected motor vehicle 12th identified and depending on the identified motor vehicle component 18th a proposed solution 22nd , 24 for troubleshooting using the communication platform 10 the user 16 suggested.

Es ist vorgesehen, dass auf Basis einer intuitiven Fehlerbeschreibung des Nutzers 16 und auf Basis des identifizierten Kraftfahrzeugbauteils 18 der Lösungsvorschlag 22, 24 mittels der Kommunikationsplattform 10 ausgewählt wird.It is provided that on the basis of an intuitive description of the error by the user 16 and based on the identified motor vehicle component 18th of the Proposed solution 22nd , 24 by means of the communication platform 10 is selected.

Alternativ kann die digitale Plattform beziehungsweise die Kommunikationsplattform 10 auch für Problembehebungen bei weiteren Produkten, also nicht nur für Kraftfahrzeuge 12, eingesetzt werden.Alternatively, the digital platform or the communication platform 10 also for troubleshooting other products, not just for motor vehicles 12th , can be used.

Der Nutzer kann dabei auch ein ausgebildeter Techniker sein.The user can also be a trained technician.

Insbesondere kann vorgesehen sein, dass die intuitive Fehlerbeschreibung 20 mittels einer Benutzerschnittstelle 26 der Kommunikationsplattform 10 durchgeführt wird.In particular, it can be provided that the intuitive error description 20th by means of a user interface 26th the communication platform 10 is carried out.

Ferner kann vorgesehen sein, dass einer ausgewählten Person 22 zum Problembeheben die virtuelle Realität VR angezeigt wird und eine Echtzeitkommunikation 28 zwischen der ausgewählten Person 22 und dem Nutzer 16 als Lösungsvorschlag 22, 24 vorgeschlagen wird.It can also be provided that a selected person 22nd to solve the problem the virtual reality VR is displayed and a real-time communication 28 between the selected person 22nd and the user 16 as a proposed solution 22nd , 24 is suggested.

Ferner kann vorgesehen sein, dass dem Nutzer 16 ein auf der Kommunikationsplattform 10 abgespeichertes Problembehebungsvideo 24 als Lösungsvorschlag 22, 24 zum Ansehen vorgeschlagen wird. Insbesondere kann die Erzeugung des Problembehebungsvideos 24 gruppenbasiert durchgeführt werden, wobei zur Erzeugung des Problembehebungsvideos 24 eine Echtzeitproblembehebung zwischen dem Nutzer 16 und der ausgewählten Person 22 aufgenommen und dokumentiert wird. Dies ist insbesondere durch eine Aufnahme 36 in der Fig. dargestellt. Als Problembehebungsvideo 24 kann insbesondere eine Schritt-für-Schritt Anleitung bereitgestellt werden. Die Person 22 muss dabei nicht zwingend zur Erstellung der Aufnahme mit dem Nutzer 16 in Verbindung stehen, sondern diese automatisierte Aufnahme 36 kann auch ohne Kontakt zum Nutzer 16 entstehen.It can also be provided that the user 16 one on the communication platform 10 Saved troubleshooting video 24 as a proposed solution 22nd , 24 suggested for viewing. In particular, the generation of the troubleshooting video 24 can be carried out group-based, with the generation of the troubleshooting video 24 real-time troubleshooting between the user 16 and the selected person 22nd is recorded and documented. This is particularly through a recording 36 Shown in the figure. As a troubleshooting video 24 In particular, step-by-step instructions can be provided. The person 22nd does not necessarily have to be used to create the recording with the user 16 but this automated recording 36 can also be used without contact with the user 16 arise.

Insbesondere kann ferner vorgesehen sein, dass die Kommunikationsplattform 10 zumindest eine elektronische Recheneinrichtung 30 aufweist, welche entsprechende Rechenschritte zum Durchführen des Verfahrens durchführt. Ferner kann zwischen der Kommunikationsplattform 10 und dem mobilen Endgerät 14 eine Endgerätkommunikation 32 durchgeführt werden, sodass insbesondere dem Nutzer 16 auf dem mobilen Endgerät 14 das Problembehebungsvideo 24 oder die virtuelle Realität VR angezeigt werden kann.In particular, it can also be provided that the communication platform 10 at least one electronic computing device 30th which carries out corresponding computing steps to carry out the method. Furthermore, between the communication platform 10 and the mobile device 14th a terminal communication 32 be carried out so that in particular the user 16 on the mobile device 14th the troubleshooting video 24 or the virtual reality VR can be displayed.

Im folgenden Ausführungsbeispiel ist das mobile Endgerät 14 insbesondere als Mobiltelefon, insbesondere als Smarttelefon, ausgebildet. Alternativ oder ergänzend kann das mobile Endgerät 14 als Tablet oder als Augmented-Reality-Brille bereitgestellt werden.In the following exemplary embodiment is the mobile terminal 14th in particular designed as a mobile phone, in particular as a smart phone. Alternatively or in addition, the mobile terminal 14th can be provided as a tablet or as augmented reality glasses.

Insbesondere wird somit eine digitale Kommunikationsplattform 10 in Kombination mit dem mobilen Endgerät 14, welches insbesondere als Augmented-Reality-Gerät ausgebildet ist, vorgestellt, wobei der ausgewählten Person 22 der Zugriff auf die Kommunikationsplattform 10 insbesondere in Echtzeit gewährt ist oder bestehende Tutorials in Form der Problembehebungsvideos 24 ermöglicht ist. Dabei steht im Fokus das intelligente Matchmaking mit der ausgewählten Person 22 beziehungsweise dem Problembehebungsvideo 24 basierend auf der intuitiven Fehlerbeschreibung 20. Außerdem ermöglicht die Kommunikationsplattform 10 einen Crowd-basierten Ansatz zur Erstellung von Tutorials, insbesondere für Augmented-Reality-Betriebsanleitungen. Diese Tutorials beziehungsweise Augmented-Reality-Betriebsanleitungen werden beispielsweise auch automatisiert aus der Aufnahme 36 erzeugt. Außerdem ermöglicht die Bilderkennung von Objekten und ein Abgleich mit der Datenbank das Identifizieren von passenden Ersatzteilen.In particular, it becomes a digital communication platform 10 in combination with the mobile device 14th , which is designed in particular as an augmented reality device, presented, the selected person 22nd access to the communication platform 10 in particular is granted in real time or existing tutorials in the form of problem-solving videos 24 is made possible. The focus is on intelligent matchmaking with the selected person 22nd or the troubleshooting video 24 based on the intuitive error description 20th . In addition, the communication platform enables 10 a crowd-based approach to creating tutorials, especially for augmented reality operating instructions. These tutorials or augmented reality operating instructions are also automated from the recording, for example 36 generated. In addition, the image recognition of objects and a comparison with the database enable the identification of suitable spare parts.

Dies führt insbesondere zur Zeitersparnis für Werkstätten oder Servicetechniker dank schneller Problembehebung. Des Weiteren kann eine Kostenreduktion für Experten im Support durchgeführt werden.This leads in particular to time savings for workshops or service technicians thanks to quick troubleshooting. Furthermore, a cost reduction for experts in support can be carried out.

Insbesondere kann beispielsweise vorgesehen sein, dass der Nutzer 16, welcher beispielsweise ein Werkstattmitarbeiter ist, mit dem mobilen Endgerät 14 vor dem Kraftfahrzeug 12 steht und ein Problem feststellt, das er nicht lösen kann. Mittels der Kommunikationsplattform 10 kann nun der Nutzer 16 mit der ausgewählten Person 22 beziehungsweise mit dem Problembehebungsvideo 24 verbunden werden, sodass eine Diagnose und eine Reparatur durchgeführt werden können. Insbesondere handelt es sich bei den Problembehebungsvideos um sogenannte Augmented-Reality-Videos beziehungsweise Augmented-Reality Tutorials.In particular, it can be provided, for example, that the user 16 , who is, for example, a workshop employee, with the mobile device 14th in front of the motor vehicle 12th stands and finds a problem he cannot solve. Using the communication platform 10 the user can now 16 with the selected person 22nd or with the troubleshooting video 24 connected so that diagnosis and repair can be performed. In particular, the problem-solving videos are so-called augmented reality videos or augmented reality tutorials.

Zum Erstellen des Problembehebungsvideos 24 kann beispielsweise die ausgewählte Person 22 auf einem Bildschirm das Live-Bild von der Kamera des Werkstattmitarbeiters, also des Nutzers 16, auf seinem zweiten Bildschirm als 3D-Modell des Kraftfahrzeugs 12 sehen. Der aktuelle Zustand am Kraftfahrzeug 12 des Mitarbeiters wird dem Experten jederzeit im 3D-Modell angezeigt. Dies bedeutet insbesondere, wenn eine Schraube am Kraftfahrzeug 12 fehlt, fehlt diese auch im 3D-Modell. Für jeden Arbeitsschritt fügt nun die ausgewählte Person 22 am 3D-Modell ein Symbol ein oder er markiert einzelne Bauteile. Die Visualisierungen werden dem Werkstattmitarbeiter, also dem Nutzer 16, in seinem Sichtfeld eingeblendet und somit insbesondere auf dem mobilen Endgerät 14 eingeblendet. Der Nutzer 16 führt mit zusätzlicher Erklärung des Experten den nächsten Schritt aus und dieser Prozess wiederholt sich, bis das Problem gelöst ist. Bei Arbeiten, die beispielsweise länger dauern, kann der Experte auch zwischenzeitlich anderen Tätigkeiten nachgehen.To create the troubleshooting video 24 can for example be the selected person 22nd the live image from the camera of the workshop employee, i.e. the user, is displayed on a screen 16 , on its second screen as a 3D model of the motor vehicle 12th see. The current state of the vehicle 12th of the employee is displayed to the expert in the 3D model at any time. This means in particular when a screw on the motor vehicle 12th is missing, this is also missing in the 3D model. The selected person now adds for each work step 22nd a symbol on the 3D model or it marks individual components. The visualizations are given to the workshop employee, i.e. the user 16 , displayed in his field of vision and therefore especially on the mobile device 14th faded in. The user 16 carries out the next step with additional explanation from the expert and repeats this process until the problem is resolved. For work that takes longer, for example, the expert can also pursue other activities in the meantime.

Die Aufnahme 36 des Problembehebungsvideos 24 funktioniert wie folgt. Jeder Schritt wird einzeln abgespeichert. Insbesondere wird hierbei ein Zustand des Kraftfahrzeugs 12 abgespeichert, eingeblendete Objekte des Experten, also der ausgewählten Person 22 eventuell mit Animation und entsprechender Text. Das Problembehebungsvideo 24 wird am Ende des Reparaturprozesses abgespeichert und hochgeladen.The recording 36 of the troubleshooting video 24 works like this. Each step is saved individually. In particular, a state of the motor vehicle is used here 12th saved, superimposed objects of the expert, i.e. the selected person 22nd possibly with animation and corresponding text. The troubleshooting video 24 is saved and uploaded at the end of the repair process.

Insbesondere muss das Problembehebungsvideo 24, bevor es publiziert wird, noch gemäß einem Standard geprüft und bereinigt werden. Die Prüfung des Tutorials erfolgt, was die Reihenfolge der Schritte angeht, gemäß den verfügbaren Montage- und Demontageanleitungen. Nur Abfolgen, die in gleicher Weise in einer bestehenden und freigegebenen Anleitung zu finden sind, werden vom System akzeptiert, sollte dies nicht der Fall sein, wird das Problembehebungsvideo 24 an die ausgewählte Person 22 zur Überarbeitung zurückgesendet. Außerdem erfolgt die Prüfung des Textes auf angemessenen Sprachgebrauch und Gebrauch von passenden Fachwörtern. Zuletzt werden die einzelnen Schritte bereinigt. Dabei wird festgestellt, welche Schritte zur unmittelbaren Lösung des Problems geführt haben. Es kann beispielsweise sein, dass viele Prüfungen und Schritte wieder rückgängig gemacht wurden oder am Ende nicht zur Lösung beigetragen haben. Das geprüfte und bereinigte Problembehebungsvideo 24 wird im letzten Schritt auf einem Server, welcher insbesondere als Speichereinrichtung 34 der Kommunikationsplattform 10 angesehen werden kann, hochgeladen und allen teilnehmenden Werkstätten zur Verfügung gestellt. Sollte beispielsweise der Fall eintreten, dass für einen komplexen Fall nicht unmittelbar eine Lösung gefunden werden kann, so kann in diesem Fall ein Hinweis platziert und alle Mitarbeiter mit demselben Problem informiert werden, dass es noch keine Lösung gibt.Specifically, the troubleshooting video 24 Before it is published, it has to be checked and adjusted according to a standard. As far as the order of the steps is concerned, the tutorial is checked in accordance with the assembly and disassembly instructions available. Only sequences that can be found in the same way in an existing and released manual will be accepted by the system; if this is not the case, the problem-solving video will be 24 to the selected person 22nd returned for revision. In addition, the text is checked for appropriate language usage and the use of appropriate technical terms. Finally, the individual steps are cleaned up. This determines which steps led to an immediate solution to the problem. For example, it may be that many checks and steps were reversed or did not help to resolve the issue in the end. The checked and adjusted troubleshooting video 24 is in the last step on a server, which in particular as a storage device 34 the communication platform 10 can be viewed, uploaded and made available to all participating workshops. If, for example, the case should arise that a solution cannot be found immediately for a complex case, a note can be placed in this case and all employees with the same problem can be informed that there is still no solution.

Ferner kann eine automatisierte Erstellung von Dokumentationen realisiert werden. Der Nutzer 16 führt eine Arbeit durch und tauscht dabei im Verlauf das Kraftfahrzeugbauteil 18 aus. Im Anschluss müssen alle Arbeiten, die durchgeführt wurden, dokumentiert werden. Insbesondere kann hierbei vorgesehen sein, dass der Nutzer 16 während der Reparaturarbeiten eine Kamera trägt, die das Sichtfeld des Nutzers 16 erfasst. Das Kraftfahrzeug 12 beziehungsweise das Kraftfahrzeugbauteil 18, vor dem der Nutzer 16 steht, wird über die Bilderkennung erfasst. Wenn der Nutzer 16 eine Schraube löst, wird dies registriert und vermerkt. Am Ende der Reparatur ist eine vollständige Dokumentation erstellt, die für den Fahrzeugkunden oder beispielsweise eine Versicherung ausreichend ist. Außerdem werden die Reparaturdokumentationen an beispielsweise die Speichereinrichtung 24 gesendet und mit den Vorgaben aus den Montage- und Demontageanleitungen abgeglichen, wobei bei einem Fehler die Werkstatt sofort benachrichtig und aufgefordert wird, den Fehler zu beheben. Die Einzelschritte werden zusätzlich in dem Problembehebungsvideo 24 abgelegt und können einzeln bearbeitet werden.Furthermore, an automated creation of documentation can be realized. The user 16 performs a job and swaps the motor vehicle component in the process 18th out. All work that has been carried out must then be documented. In particular, it can be provided here that the user 16 During the repair work, a camera wears the user's field of view 16 detected. The car 12th or the motor vehicle component 18th , in front of which the user 16 is recorded via the image recognition. If the user 16 If a screw loosens, this is registered and noted. At the end of the repair, complete documentation is created that is sufficient for the vehicle customer or, for example, an insurance company. In addition, the repair documentation is sent to, for example, the storage device 24 sent and compared with the specifications from the assembly and disassembly instructions, whereby in the event of an error, the workshop is immediately notified and requested to rectify the error. The individual steps are also shown in the troubleshooting video 24 filed and can be edited individually.

Insgesamt zeigt die Erfindung eine Augmented-Reality-Plattform für Fehlerdiagnose und Reparaturarbeiten.Overall, the invention shows an augmented reality platform for fault diagnosis and repair work.

ZITATE ENTHALTEN IN DER BESCHREIBUNGQUOTES INCLUDED IN THE DESCRIPTION

Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.This list of the documents listed by the applicant was generated automatically and is included solely for the better information of the reader. The list is not part of the German patent or utility model application. The DPMA assumes no liability for any errors or omissions.

Zitierte PatentliteraturPatent literature cited

  • US 2002/0067372 A1 [0003]US 2002/0067372 A1 [0003]
  • US 2015/0371455 A1 [0004]US 2015/0371455 A1 [0004]
  • US 2016/0253563 A1 [0005]US 2016/0253563 A1 [0005]

Claims (6)

Verfahren zum Betreiben einer Kommunikationsplattform (10) zur Problembehebung für ein Kraftfahrzeug (12), bei welchem mittels eines mobilen Endgeräts (14) eines Nutzers (16) des Kraftfahrzeugs (12) das Kraftfahrzeug (12) erfasst wird und mittels einer virtuellen Realität (VR) das Kraftfahrzeug (12) auf der Kommunikationsplattform (10) angezeigt wird, wobei mittels der Kommunikationsplattform (10) zumindest ein problembehaftetes Kraftfahrzeugbauteil (18) des erfassten Kraftfahrzeugs (12) identifiziert wird, und in Abhängigkeit des identifizierten Kraftfahrzeugbauteils (18) ein Lösungsvorschlag (22, 24) zur Problembehebung mittels der Kommunikationsplattform (10) dem Nutzer (16) vorgeschlagen wird, dadurch gekennzeichnet, dass auf Basis einer intuitiven Fehlerbeschreibung (20) des Nutzers (16) und auf Basis des identifizierten Kraftfahrzeugbauteils (18) der Lösungsvorschlag (22, 24) mittels der Kommunikationsplattform (10) ausgewählt wird.Method for operating a communication platform (10) for troubleshooting a motor vehicle (12), in which the motor vehicle (12) is recorded by means of a mobile terminal (14) of a user (16) of the motor vehicle (12) and by means of a virtual reality (VR ) the motor vehicle (12) is displayed on the communication platform (10), at least one problematic motor vehicle component (18) of the detected motor vehicle (12) being identified by means of the communication platform (10), and depending on the identified motor vehicle component (18), a proposed solution ( 22, 24) is proposed to the user (16) for troubleshooting by means of the communication platform (10), characterized in that the proposed solution (22 , 24) is selected by means of the communication platform (10). Verfahren nach Anspruch 1, dadurch gekennzeichnet, dass die intuitive Fehlerbeschreibung (20) mittels einer Benutzerschnittstelle (26) der Kommunikationsplattform (10) durchgeführt wird.Procedure according to Claim 1 , characterized in that the intuitive error description (20) is carried out by means of a user interface (26) of the communication platform (10). Verfahren nach Anspruch 1 oder 2, dadurch gekennzeichnet, dass einer ausgewählten Person (22) zum Problembeheben die virtuelle Realität (VR) angezeigt wird und eine Echtzeitkommunikation (28) zwischen der ausgewählten Person (22) und dem Nutzer (16) zum Problembeheben als Lösungsvorschlag (22, 24) vorgeschlagen wird.Procedure according to Claim 1 or 2 characterized in that the virtual reality (VR) is displayed to a selected person (22) for problem solving and real-time communication (28) between the selected person (22) and the user (16) for problem solving is proposed as a proposed solution (22, 24) becomes. Verfahren nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass dem Nutzer (16) ein auf der Kommunikationsplattform (10) abgespeichertes Problembehebungsvideo (24) als Lösungsvorschlag (22, 24) zum Ansehen vorgeschlagen wird.Method according to one of the preceding claims, characterized in that the user (16) is suggested to view a problem-solving video (24) stored on the communication platform (10) as a proposed solution (22, 24). Verfahren nach Anspruch 4, dadurch gekennzeichnet, dass die Erzeugung des Problembehebungsvideos (24) gruppenbasiert durchgeführt wird, wobei zur Erzeugung des Problembehebungsvideos (24) eine Echtzeitproblembehebung (28) zwischen dem Nutzer (16) und einer ausgewählten Person (22) aufgenommen und dokumentiert wird.Procedure according to Claim 4 , characterized in that the generation of the problem-solving video (24) is carried out on a group basis, with real-time problem-solving (28) being recorded and documented between the user (16) and a selected person (22) to generate the problem-solving video (24). Kommunikationsplattform (10) zur Problembehebung für ein Kraftfahrzeug (12), wobei die Kommunikationsplattform (10) zum Durchführen eines Verfahrens nach einem der Ansprüche 1 bis 5 ausgebildet ist.Communication platform (10) for troubleshooting a motor vehicle (12), the communication platform (10) for performing a method according to one of the Claims 1 to 5 is trained.
DE102019006448.8A 2019-09-12 2019-09-12 Method for operating a communication platform for troubleshooting a motor vehicle, as well as communication platform Ceased DE102019006448A1 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
DE102019006448.8A DE102019006448A1 (en) 2019-09-12 2019-09-12 Method for operating a communication platform for troubleshooting a motor vehicle, as well as communication platform
PCT/EP2020/071636 WO2021047823A1 (en) 2019-09-12 2020-07-31 Method for operating a communication platform for troubleshooting for a motor vehicle, and communication platform

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE102019006448.8A DE102019006448A1 (en) 2019-09-12 2019-09-12 Method for operating a communication platform for troubleshooting a motor vehicle, as well as communication platform

Publications (1)

Publication Number Publication Date
DE102019006448A1 true DE102019006448A1 (en) 2021-03-18

Family

ID=71899763

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102019006448.8A Ceased DE102019006448A1 (en) 2019-09-12 2019-09-12 Method for operating a communication platform for troubleshooting a motor vehicle, as well as communication platform

Country Status (2)

Country Link
DE (1) DE102019006448A1 (en)
WO (1) WO2021047823A1 (en)

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE50007902D1 (en) 1999-03-02 2004-10-28 Siemens Ag AUGMENTED REALITY SYSTEM WITH USE OF MOBILE DEVICES
US9472028B2 (en) 2014-06-23 2016-10-18 GM Global Technology Operations LLC Augmented reality based interactive troubleshooting and diagnostics for a vehicle
US10142596B2 (en) 2015-02-27 2018-11-27 The United States Of America, As Represented By The Secretary Of The Navy Method and apparatus of secured interactive remote maintenance assist
DE202016009114U1 (en) * 2015-12-11 2022-05-31 Sms Group Gmbh Mobile visual assistance in metallurgical, rolling, forging and pipe works

Also Published As

Publication number Publication date
WO2021047823A1 (en) 2021-03-18

Similar Documents

Publication Publication Date Title
EP3392987B1 (en) Method and system for automated support of a connection process, in particular for components in a switch cabinet or on a mounting system
DE102014226554A1 (en) Identification and repair support apparatus and method
DE112019001216T5 (en) Terminal device, work machine system, information processing method and server device
EP2800031A1 (en) Method for providing machine-specific action options and/or information
EP0300998B1 (en) Installation operating control system and process therefor
DE102009027267A1 (en) Method and device for simplified error processing on a machine tool
EP1141800B1 (en) Method for production of documents or brochures for a technical product
EP3956750A1 (en) System and method for the simulation of industrial processes
DE102019006448A1 (en) Method for operating a communication platform for troubleshooting a motor vehicle, as well as communication platform
DE102018216140A1 (en) Method for carrying out a vehicle diagnosis for a test drive of a vehicle, control device and vehicle
DE102010060128B4 (en) Method and device for checking a self-service facility
EP1487616A2 (en) Automatic process control
DE102017130913A1 (en) Method for constructing a pipe system while creating at least one pipe connection
EP3881799B1 (en) System and method for providing artificial tooth elements
DE102019120686A1 (en) Method for operating, in particular for setting up, repairing and / or maintaining an injection molding machine, injection molding machine, computer program and computer-readable medium
DE102017108622A1 (en) SYSTEM FOR SUPPORTING TEAMWORK BY AUGMENTED REALITY
DE10116539B4 (en) System and a method for automatic data preparation, particularly in the production, assembly, service or maintenance environment
WO2015052286A1 (en) Method for an electronic auditing
DE102017220218A1 (en) A method, apparatus, computer program and computer program product for diagnosing a computer system of a vehicle
EP3933600A1 (en) Method for automatically carrying out software tests on graphical user surfaces and device for carrying out such a method
EP2105018A1 (en) Display for displaying progress
DE202011108233U1 (en) Information system for informing about a vehicle
EP2251753A2 (en) Method and device for programming at least one control unit
DE102014004553B4 (en) Procedure for testing a control unit
DE102013004949B4 (en) Troubleshooting device for troubleshooting electronic commissioning and / or testing of manufactured vehicles

Legal Events

Date Code Title Description
R012 Request for examination validly filed
R081 Change of applicant/patentee

Owner name: 1886VENTURES GMBH, DE

Free format text: FORMER OWNER: DAIMLER AG, 70327 STUTTGART, DE

R081 Change of applicant/patentee

Owner name: 1886VENTURES GMBH, DE

Free format text: FORMER OWNER: DAIMLER AG, STUTTGART, DE

R082 Change of representative

Representative=s name: BRP RENAUD UND PARTNER MBB RECHTSANWAELTE PATE, DE

R002 Refusal decision in examination/registration proceedings
R003 Refusal decision now final