-
Die Erfindung betrifft ein Verfahren zum Bestimmen einer Oberflächenqualität eines Karosseriebauteils eines Kraftfahrzeugs mittels einer Bewertungsvorrichtung gemäß dem geltenden Patentanspruch 1. Ferner betrifft die Erfindung ein Computerprogrammprodukt sowie eine Bewertungsvorrichtung.
-
Die Bewertung von lackierten Fahrzeugoberflächen wird von Auditoren im Rahmen einer Oberflächenbewertung nach der Lackierung durchgeführt. Es existiert hierbei ein Programm zur Oberflächenbewertung virtuell erzeugter Daten mittels neuronalem Netz. Das Ergebnis basiert dabei auf vier gerenderten Bildern.
-
Ferner ist bekannt, dass beispielsweise ein Auditor, welcher die Qualitätsprüfung vornimmt, in einer realen Bedingung Oberflächendefekte an einem lackierten Fahrzeugbauteil bewertet. Die Defekte sind unterschiedlich stark sichtbar, je nachdem, von welchen Winkeln und welcher Distanz der Auditor das Kraftfahrzeug betrachtet. Beim Betrachten der Fehlstelle aus mehreren Winkeln und mit einer kontinuierlichen Kopfbewegung klassifiziert der Auditor die Schwere des Fehlers.
-
Die
DE 10 2012 018 981 A1 betrifft eine Einrichtung für die optische Prüfung der Oberflächen von Bauteilen, insbesondere für die optische Prüfung der Oberflächen von Fahrzeugkarosserien oder von Fahrzeugkarosserieteilen, mit einem Beleuchtungsmittel, das mindestens eine Lichtquelle und mindestens einen Reflektor zur Umlenkung der von der Lichtquelle erzeugten Strahlen auf das im reflektierten Strahlengang angeordnete und zu überprüfende Bauteil umfasst. Das Beleuchtungsmittel ist derart ausgebildet und relativ zum Bauteil angeordnet, wobei es bei Austausch des zu überprüfenden Bauteils durch ein senkrecht und/oder waagrecht standardisiertes Prüfobjekt auf der Oberfläche des standardisierten Prüfobjekts ein solches Muster erzeugt, das über eine Messlänge von 300 mm zwischen 4 und 15 erste Flächen und zwischen 3 und 14 zweite Flächen aufweist. Relativ zu den ersten Flächen sind die zweiten Flächen geringer beleuchtet und über die Messlänge die ersten und zweiten Flächen abwechselnd verteilt. Die ersten Flächen und die zweiten Flächen sind als rechteckige oder nahezu rechteckige Flächen ausgebildet und die Leuchtdichte jeweils der ersten Flächen und die Leuchtdichte jeweils der zweiten Flächen sind gleich oder nahezu gleich groß.
-
Aufgabe der vorliegenden Erfindung ist es, ein Verfahren, ein Computerprogrammprodukt sowie eine Bewertungsvorrichtung zu schaffen, mittels welchen eine Bewertung einer Oberflächenqualität von Karosseriebauteilen realisiert werden kann.
-
Diese Aufgabe wird durch ein Verfahren, ein Computerprogrammprodukt sowie eine Bewertungsvorrichtung gemäß den unabhängigen Patentansprüchen gelöst. Vorteilhafte Ausgestaltungsformen sind in den Unteransprüchen angegeben.
-
Ein Aspekt der Erfindung betrifft ein Verfahren zum Bestimmen einer Oberflächenqualität eines Karosseriebauteils eines Kraftfahrzeugs mittels einer Bewertungsvorrichtung. Es erfolgt das Erfassen einer Oberfläche des Karosseriebauteils mittels einer Erfassungseinrichtung der Bewertungsvorrichtung. Es wird eine virtuelle Lackierung auf der erfassten Oberfläche mittels einer elektronischen Recheneinrichtung der Bewertungsvorrichtung erzeugt. Es wird eine gerenderte Bildsequenz des lackierten Karosseriebauteils mit zumindest zwei unterschiedlichen Blickwinkeln auf das lackierte Karosseriebauteil mittels der elektronischen Recheneinrichtung erzeugt. Es wird eine potentielle Abweichung des lackierten Karosseriebauteils gegenüber einer Soll-Oberfläche in Abhängigkeit von der gerenderten Bildsequenz mittels der elektronischen Recheneinrichtung bestimmt und es erfolgt ein Bewerten der Oberflächenqualität in Abhängigkeit von der bestimmten potentiellen Abweichung mittels der elektronischen Recheneinrichtung.
-
Insbesondere kann somit eine objektive Bewertung der Oberfläche von Karosseriebauteilen realisiert werden. Insbesondere ist somit vorgesehen, dass ein virtuelles Umfeld der Oberfläche generiert wird, indem beispielsweise Videos von Oberflächendefekten erstellt werden. Diese Videos dienen wiederum als Eingang für ein neuronales Netz, welches die Videos beziehungsweise Bildsequenzen entsprechend analysiert und eine Prognose über den Schweregrad der Fehlstelle prognostiziert gemäß beispielsweise einer Business Intelligence-Bewertung von Auditoren. Durch das Erstellen der Bildsequenz, welches die Sichtweise eines insbesondere Auditors abbildet, kann damit eine auditorgemäße Bewertung und somit eine objektive Bewertung automatisiert durchgeführt werden.
-
Gemäß einer vorteilhaften Ausgestaltungsform wird die potentielle Abweichung mittels eines konvoluten neuronalen Netzwerks der elektronischen Recheneinrichtung bestimmt. Insbesondere handelt es sich somit bei dem konvoluten neuronalen Netzwerk um ein so genanntes Convolutional Neuronal Network (CNN). Insbesondere kann dabei eine so genannte Merkmalsextraktion, insbesondere pro aufgenommenem Bild, durchgeführt werden, um die potentielle Abweichung ermitteln zu können. Somit kann äußerst vorteilhaft die Oberflächenbewertung durchgeführt werden.
-
Weiterhin vorteilhaft ist, wenn die Oberflächenqualität mittels eines rekurrenten neuronalen Netzwerks der elektronischen Recheneinrichtung bestimmt wird. Insbesondere da die Bildsequenzen in unterschiedlichen Winkeln aufgenommen werden, ist es von entscheidender Bedeutung, dass ein zeitlicher Kontext von Winkel, potentieller Abweichung und der Zeit durchgeführt wird. Hierzu eignet sich insbesondere ein rekurrentes neuronales Netzwerk, welches auch als Recurrant Neuronal Network (RNN) bezeichnet werden kann.
-
Bevorzugt kann vorgesehen sein, dass die elektronische Recheneinrichtung nur ein neuronales Netzwerk aufweist, welches als CRNN (Convolutional Recurrant Neuronal Network) ausgebildet ist.
-
Ferner hat es sich als vorteilhaft erwiesen, wenn ein Bewertungsschwellwert für die Bewertung vorgegeben wird und in Abhängigkeit von dem Bewertungsschwellwert die Bewertung der Oberflächenqualität durchgeführt wird. Hierbei kann bevorzugt vorgesehen sein, dass in Abhängigkeit von dem Bewertungsschwellwert die Oberfläche als in-Ordnung oder als nicht-in-Ordnung bewertet wird. Ferner kann vorgesehen sein, dass bei einer Bewertung als nicht-in-Ordnung eine Fehlerschwere der Oberfläche mitbestimmt wird. Als Fehlerschwere kann beispielsweise ein schwerer Fehler oder ein kleiner Fehler betrachtet werden. Die Fehlerschwere kann beispielsweise bei einer Anpassung von Herstellungsparametern für das Bauteil zukünftig zur Qualitätssteigerung verwendet werden. Insbesondere kann so eine Abweichung auf der Oberfläche detektiert werden, jedoch kann bei einer geringen Abweichung die Oberfläche dennoch als in-Ordnung betitelt werden. Insbesondere dies hat den Hintergrund darin, dass beispielsweise eventuelle Fehler auf der Oberfläche durch das menschliche Auge nicht wahrnehmbar sind, jedoch die elektronische Recheneinrichtung eine entsprechende Abweichung dennoch festgestellt hat.
-
Eine weitere vorteilhafte Ausgestaltungsform sieht vor, dass die Bildsequenz derart erzeugt wird, dass eine Wahrnehmung durch ein Auge einer Person widergespiegelt ist. Insbesondere kann die Person beispielsweise ein Auditor sein. Mit anderen Worten ist vorgesehen, dass beispielsweise eine Schärfe beziehungsweise ein Auflösegrad der Bildsequenz derart erzeugt wird, wie ein menschliches Auge dies wahrnehmen kann.
-
Ebenfalls vorteilhaft ist, wenn die potentielle Abweichung durch die Erzeugung eines Polygonnetzes auf der lackierten Oberfläche bestimmt wird. Insbesondere durch die Erzeugung des Polygonnetzes kann auf einfache Art und Weise die Abweichung in der Oberfläche bestimmt werden.
-
Bei dem vorgestellten Verfahren handelt es sich insbesondere um ein computerimplementiertes Verfahren. Daher betrifft ein weiterer Aspekt der Erfindung ein Computerprogrammprodukt mit Programmcodemitteln, welche eine elektronische Recheneinrichtung dazu veranlassen, wenn die Programmcodemittel von der elektronischen Recheneinrichtung abgearbeitet werden, ein Verfahren nach dem vorhergehenden Aspekt durchzuführen. Das Computerprogrammprodukt kann auch als Computerprogramm bezeichnet werden.
-
Ferner betrifft die Erfindung auch ein computerlesbares Speichermedium mit dem Computerprogrammprodukt.
-
Ein weiterer Aspekt der Erfindung betrifft auch eine Bewertungsvorrichtung zum Bestimmen einer Oberflächenqualität eines Karosseriebauteils eines Kraftfahrzeugs, mit zumindest einer Erfassungseinrichtung und einer elektronischen Recheneinrichtung, wobei die Bewertungsvorrichtung zum Durchführen eines Verfahrens nach dem vorhergehenden Aspekt ausgebildet ist. Insbesondere wird das Verfahren mittels der Bewertungsvorrichtung durchgeführt.
-
Die elektronische Recheneinrichtung weist beispielsweise Prozessoren, Schaltkreise, insbesondere integrierte Schaltkreise, sowie weitere elektronische Bauteile auf.
-
Vorteilhafte Ausgestaltungsformen des Verfahrens sind als vorteilhafte Ausgestaltungsformen des Computerprogrammprodukts sowie der Bewertungsvorrichtung anzusehen. Die Bewertungsvorrichtung weist hierzu insbesondere gegenständliche Merkmale auf, um entsprechende Verfahrensschritte durchführen zu können.
-
Weitere Merkmale der Erfindung ergeben sich aus den Ansprüchen, der Figuren und der Figurenbeschreibung. Die vorstehend in der Beschreibung genannten Merkmale und Merkmalskombinationen sowie die nachfolgend in der Figurenbeschreibung genannten und/oder in der Figur alleine gezeigten Merkmale und Merkmalskombinationen sind nicht nur in der jeweils angegebenen Kombination, sondern auch in anderen Kombinationen oder in Alleinstellung verwendbar.
-
Die Erfindung wird nun anhand eines bevorzugten Ausführungsbeispiels sowie unter Bezugnahme auf die Zeichnung näher erläutert. Es zeigt dabei die einzige Figur:
- 1 ein schematisches Ablaufdiagramm gemäß einer Ausführungsform des Verfahrens.
-
In der Figur sind gleiche oder funktionsgleiche Elemente mit den gleichen Bezugszeichen versehen.
-
1 zeigt ein schematisches Ablaufdiagramm gemäß einer Ausführungsform des Verfahrens, insbesondere mit einer Bewertungsvorrichtung 10. Die Bewertungsvorrichtung 10 weist in diesem Ausführungsbeispiel insbesondere eine Erfassungseinrichtung 12 sowie eine elektronische Recheneinrichtung 14 auf.
-
Insbesondere ist ein Verfahren zum Bestimmen einer Oberflächenqualität 16 eines Karosseriebauteils 18 eines Kraftfahrzeugs mittels der Bewertungsvorrichtung 10 gezeigt. Es erfolgt in einem ersten Schritt S1 das Erfassen der Oberfläche des Karosseriebauteils 18 mittels der Erfassungseinrichtung 12. In einem zweiten Schritt S2 wird eine virtuelle Lackierung auf der erfassten Oberfläche mittels der elektronischen Recheneinrichtung 14 erzeugt. In einem dritten Schritt S3 wird eine gerenderte Bildsequenz des lackierten Karosseriebauteils 18 mit zumindest zwei unterschiedlichen Blickwinkeln auf das lackierte Karosseriebauteil 18 mittels der elektronischen Recheneinrichtung 14 erzeugt. Es wird in einem vierten Schritt S4 eine potentielle Abweichung des lackierten Karosseriebauteils 18 gegenüber einer Soll-Oberfläche in Abhängigkeit von der gerenderten Bildsequenz mittels der elektronischen Recheneinrichtung 14 bestimmt. Es erfolgt dann in einem optionalen fünften Schritt S5 eine zeitliche Kontextermittlung von den gerenderten Bildern der Bildsequenz und in einem sechsten Schritt S6 schließlich die Bewertung der Oberflächenqualität in Abhängigkeit von der bestimmten potentiellen Abweichung mittels der elektronischen Recheneinrichtung 14.
-
Insbesondere kann vorgesehen sein, dass im dritten Schritt S3 die Erzeugung eines gerenderten Videos beziehungsweise Bildsequenz mit dem Blick aus verschiedenen Winkeln erzeugt wird. Im vierten Schritt S4 erfolgt bevorzugt eine Merkmalsextraktion durch ein konvolutes neuronales Netzwerk 20. Im fünften Schritt S5 kann insbesondere die zeitliche Kontextermittlung durch ein rekurrentes neuronales Netzwerk 22 vorgesehen sein. Im sechsten Schritt S6 erfolgt wiederum insbesondere die Klassifizierung der potentiellen Abweichung als Fehlstelle.
-
Insbesondere kann im sechsten Schritt S6 vorgesehen sein, dass ein Bewertungsschwellwert für die Bewertung vorgegeben wird und in Abhängigkeit von dem Bewertungsschwellwert die Bewertung der Oberflächenqualität 16 durchgeführt wird. Hierzu kann beispielsweise vorgesehen sein, dass in Abhängigkeit von dem Bewertungsschwellwert die Oberfläche als in-Ordnung oder als nicht-in-Ordnung bewertet wird. Bei der Bewertung als nicht-in-Ordnung kann auch eine Fehlerschwere der Oberfläche mitbestimmt werden.
-
Insbesondere zeigt somit die 1 eine Generierung eines virtuellen Umfelds, in dem die Videos von Oberflächendefekten erstellt werden. Diese Videos dienen als Input für ein neuronales Netz (CRNN), insbesondere ausgebildet aus dem konvoluten neuronalen Netzwerk 20 und dem rekurrenten neuronalen Netzwerk 22, welches die Videos analysiert und eine Prognose über den Schweregrad der Fehlstelle prognostiziert gemäß einer Business Intelligence-Bewertung von Auditoren. Durch das Erstellen eines Videos, welches die Sichtweise des Auditors abbildet, kann damit eine auditorgemäße Bewertung erzeugt werden. Insbesondere kann dies dadurch durchgeführt werden, dass beispielsweise die Bildsequenz ein Auflösevermögen des Auges des Auditors hat.
-
Das finale Produkt ist dabei wiederum ein Computerprogramm, mit dem Bauteilbereiche bewertet werden. Als Input der Software wird ein Polygonnetz beispielsweise verwendet. Bei dem Polygonnetz werden Punkte markiert, die potentiell einen Fehler zeigen. Das Polygonnetz wird virtuell lackiert und ein virtuell erzeugtes Umfeld wird an der Lackierung reflektiert. Es wird die Bildsequenz erstellt, bei der diese Reflexionen an den markierten Punkten aus mehreren Winkeln aufgenommen werden. Nachdem das Video erstellt ist, wird dieses als Input in das neuronale Netz gegeben, welches jeden Frame des Videos analysiert und anschließend die Bewertung abgibt. Die Bewertung kann dann wiederum für Designschleifen genutzt werden.
-
Insgesamt zeigt die 1 ein künstliches neuronales Netzwerk zur physiologischoptischen Bewertung von virtuellen Oberflächenmerkmalen.
-
Bezugszeichenliste
-
- 10
- Bewertungsvorrichtung
- 12
- Erfassungseinrichtung
- 14
- elektronische Recheneinrichtung
- 16
- Oberflächenqualität
- 18
- Karosseriebauteil
- 20
- konvolutes neuronales Netzwerk
- 22
- rekurrentes neuronales Netzwerk
- S1 bis S6
- Schritte des Verfahrens
-
ZITATE ENTHALTEN IN DER BESCHREIBUNG
-
Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.
-
Zitierte Patentliteratur
-
- DE 102012018981 A1 [0004]