DE19747061B4

DE19747061B4 - Verfahren und Einrichtung zur flächenhaften, dreidimensionalen, optischen Vermessung von Objekten

Info

Publication number: DE19747061B4
Application number: DE1997147061
Authority: DE
Inventors: Bernward Maehner
Original assignee: Individual
Current assignee: Maehner Bernward 82275 Emmering De
Priority date: 1997-10-24
Filing date: 1997-10-24
Publication date: 2005-02-10
Anticipated expiration: 2017-10-25
Also published as: DE19747061A1

Abstract

Verfahren zur flächenhaften, dreidimensionalen, optischen Vermessung von Objekten, bei dem mittels eines Projektors Lichtmuster auf das zu vermessende Objekt projiziert, Abbildungen von den auf das zu vermessende Objekt projizierten Lichtmustern auf dem Bildsensor einer Kamera erzeugt, und aus den erzeugten Abbildungen über Entschlüsselung des Lichtcodes und die Position der Bildpunkte auf dem Bildsensor der Kamera eine Triangulationsrechnung zur Berechnung der Oberflächenkontur des Objektes durchgeführt wird, dadurch gekennzeichnet,
daß zwei in Projektionsrichtung gegeneinander verdrehte Liniengittersequenzen zur Erzeugung eindeutig unterscheidbarer Lichtschnittebenen projiziert und mit der Kamera aufgenommen werden, wobei die mit einer Liniengittersequenz erzeugten Lichtschnittebenen dazu verwendet werden, um die mit der anderen Liniengittersequenz erzeugten Lichtschnittebenen in einzelne, eindeutig unterscheidbare und von ortsfesten Punkten des diese Lichtschnittebenen erzeugenden Projektionsgitters ausgehende Projektionsstrahlen aufzuteilen,
daß jedem Projektionsstrahl durch Kombination der aus den beiden Liniengittersequenzen erzeugten eindeutigen Codierungen der Lichtschnittebenen eine eindeutige Codierung zugewiesen wird,
daß für jeden Projektionsstrahl innerhalb des dem...

Description

Die Erfindung betrifft Verfahren und Einrichtung zur flächenhaften, dreidimensionalen, optischen Vermessung von Objekten. Es gibt mittlerweile eine Reihe von optischen Meßverfahren, die durch Projektion von Streifenmustern, welche in der Regel mit einer Videokamera aufgezeichnet werden, die flächenhafte Berechnung von dreidimensionalen Konturdaten ermöglichen. Zur Berechnung der dreidimensionalen Gestalt eines Objektes wird hierbei ein digitales Bildverarbeitungssystem verwendet, das aus einem oder mehreren Kamerabildern die gewünschten Ergebnisdaten berechnet. Die bekanntesten Verfahren sind das Verfahren des codierten Lichtansatzes (T.G. Stahs, F.M. Wahl, "Close Range Photogrammetry Meets Machine Vision", SPIE Vol. 1395 (1990) S. 496–503) und ein mittels Phasenshift und rotierendem Liniengitter arbeitendes Projektionsverfahren (Patentschrift US 5289264 ).

Die Berechnung der Oberflächenpunkte erfolgt bei diesen Verfahren durch Berechnung des Schnittpunktes der Lichtschnittebenen mit Beobachtungsstrahlen, da die Verschneidung einer Ebene mit einer hierzu nicht parallelen Geraden einen Punkt ergibt.

Durch Abbildungsfehler des Projektorobjektivs sind die Lichtschnittebenen mehr oder weniger stark gekrümmt. Geometrische Fehler der Lichtschnittebenen, d.h. Abweichungen der realen Lichtschnittebenen von mathematisch exakten Ebenen, werden bisher entweder als systematische Fehler in Kauf genommen oder durch eine Kalibrierung derart kompensiert, daß die theoretischen bzw. rechnerischen Ergebnisse durch Vergleich mit Istkoordinaten korrigiert werden. Hierbei wird ein Kalibrierkörper durch das Meßvolumen geschoben und in bestimmten Abständen vermessen. Zwischen den Meßpositionen des Kalibrierkörpers bzw. den Kalibriermarken werden die Korrekturwerte durch Interpolation berechnet.

Der in Patentanspruch 1 angegebenen Erfindung liegt das Problem zugrunde, daß die tatsächliche Geometrie der Lichtschnittebenen nicht bestimmbar ist, weil innerhalb einer Lichtschnittebene nicht zwischen einzelnen Teilflächen unterschieden werden kann. Durch den mit der Kamera aufgezeichneten Lichtcode wird nämlich, unabhängig von der verwendeten Codierung, lediglich die Lichtschnittebene als solche identifiziert. Es müssen folglich bezüglich der Lichtschnittebene Annahmen gemacht werden, nämlich daß es sich um exakte Ebenen handelt und diese senkrecht auf der durch die optischen Achsen von Projektor und Kamera aufgespannten Triangulationsebene stehen.

Bei der Verwendung von Lichtschnittebenen kann außerhalb des kalibrierten Meßvolumens keine exakte Triangulation mehr durchgeführt werden, weil die Korrekturdaten aufgrund fehlender Kalibriermessungen nicht berechnet werden können.

Werden Objektive mit kurzen Brennweiten verwendet, so sind die hierdurch verursachten geometrischen Verzerrungen der Lichtschnittebenen so komplex, daß häufig die Interpolation über längere Strecken zwischen den Stützpunkten der Kalibrierung nicht mehr ausreicht, um die Fehler exakt genug zu beschreiben bzw. zu kompensieren. Es muß dann der Kalibrierkörper in engen Abständen durch das Meßvolumen geschoben und vermessen werden. Der rechnerische und zeitliche Aufwand für die Systemkalibrierung ist hierbei erheblich.

Die Aufgabe der Erfindung ist es, ein Verfahren und eine Einrichtung zur dreidimensionalen, optischen Vermessung von Objekten mittels projizierter Liniengitter und einer Kamera anzugeben, die eine exakte Bestimmung der vorliegenden projektionsseitigen Strahlengeometrie ermöglichen und somit Annahmen über die Ebenheit und die Ausrichtung der Lichtschnittebenen erübrigen.

Diese Aufgabe wird durch das in Patentanspruch 1 aufgeführte Verfahren und die in Anspruch 7 angegebene Einrichtung gelöst. Vorteilhafte Weiterbildungen sind in den jeweiligen Unteransprüchen angegeben.

Erfindungsgemäß werden zwei Liniengittersequenzen projiziert und aufgenommen, deren Gitterlinien in Projektionsrichtung gegeneinander verdreht sind. Erfindungsgemäß unterteilen die Lichtschnittebenen der einen Liniengittersequenz die Lichtschnittebenen der anderen Liniengittersequenz in eine große Anzahl eindeutig unterscheidbarer Projektionsstrahlen, welche von ortsfesten Punkten des diese Lichtschnittebenen erzeugenden Projektionsgitters ausgehen. Die erzeugten Projektionsstrahlen sind also die Schnittlinien von jeweils zwei Lichtschnittebenen.

Man erhält so eine Matrix aus n × m eindeutig identifizierbaren Projektionsstrahlen, wobei n die Anzahl der mit der einen Liniengittersequenz erzeugten Lichtschnittebenen und m die Anzahl der mit der anderen Liniengittersequenz erzeugten Lichtschnittebenen ist.

Zur eindeutigen Codierung der Projektionsstrahlen kombiniert man vorteilhafterweise die aus beiden Liniengittersequenzen erzeugten Lichtcodes zu 2-Tupeln oder hängt die Stellen der beiden Codewörter zu einem neuen, längeren Codewort aneinander. Damit das erzeugte Bündel von Projektionsstrahlen für eine Triangulation, d.h. Berechnung von dreidimensionalen Punktkoordinaten verwendet werden kann, wird erfindungsgemäß jedem Projektionsstrahl durch eine Kalibrierung ein Ortsvektor und ein Richtungsvektor zugewiesen. Erfindungsgemäß wird die Triangulation durch Berechnung des Schnittpunktes des durch die Position des betrachteten Bildpunktes auf dem Bildsensor festgelegten Beobachtungsstrahls mit dem durch den eindeutigen Code an diesem Bildpunkt indentifizierten Projektionsstrahl durchgeführt.

Die Unterscheidbarkeit einzelner Projektionsstrahlen innerhalb des Projektionskegels vereinfacht Kalibrierung und Triangulation gegenüber der Verwendung von Lichtschnittebenen ganz erheblich, da nun lediglich eine geradlinige Ausbreitung der Projektionsstrahlen außerhalb des Projektorobjektivs vorausgesetzt werden muß. Diese ist unabhängig von den optischen Qualitäten des Projektionsgitters und der Abbildungsoptik immer gegeben, da die Projektionsstrahlen von ortsfesten Punkten des Projektionsgitters ausgehen und sich damit, unabhängig von den geometrischen Fehlern der Lichtschnittebenen, innerhalb des Projektionskegels exakt geradlinig ausbreiten.

Vorteilhafterweise werden die Linien der einen Liniengittersequenz senkrecht und die Linien der anderen Liniengittersequenz waagerecht zu der von den optischen Achsen von Projektor und Kamera aufgespannten Triangulationsebene ausgerichtet. Hierdurch wird die größtmögliche Auflösung bzw. Meßempfindlichkeit erzielt.

Als Liniengittersequenz wird vorteilhafterweise eine solche Folge von Linienmustern verwendet, die den Projektionskegel in eine möglichst hohe Anzahl eindeutig unterscheidbarer Sektoren bzw. Lichtschnittebenen unterteilt. Hierzu kann beispielsweise die Liniengittersequenz nach dem Verfahren des Codierten Lichtansatzes verwendet werden oder ein Phasenshiftverfahren, bei dem durch Projektion von sinusförmigen Streifenmustern unterschiedlicher Wellenlänge absolute Phasenwinkel berechnet werden können.

Eine weitere Alternative bieten ferner die in der DE 197 38 179 C1 offengelegten Verfahren.

Es ist somit ein Verfahren geschaffen, das nicht mehr auf Lichtschnittebenen aufsetzt, sondern auf einem Bündel eindeutig unterscheidbarer Projektionsstrahlen. Die Annahme über das Vorliegen ebener Lichtschnittebenen entfällt also.

Die Abbildungsfehler des Projektorobjektivs können praktisch beliebig groß sein, da nun lediglich eine geradlinige Ausbreitung der Projektionsstrahlen außerhalb des Projektorobjektivs vorausgesetzt wird. Die Verwendung kurzbrennweitiger Objektive ist damit möglich, ohne daß darunter die Genauigkeit des Meßsystems leidet. Hierdurch läßt sich in vielen Anwendungsfällen, z. B. bei der Vermessung großer Objekte, der Meßabstand erheblich verkürzen. Ferner muß das Projektionsgitter weder sehr genau gefertigt sein noch exakt auf die Triangulationsebene ausgerichtet werden. Dadurch lassen sich Kosten einsparen.

Die aufwendige Kalibrierung, bei der der Kalibrierkörper in engen Abständen innerhalb des Meßvolumens zur Bestimmung der Korrekturwerte vermessen werden muß, entfällt. Die Kalibrierung der Projektionsstrahlen ist auch außerhalb der Meßpositionen des Kalibrierkörpers uneingeschränkt gültig.

Im Folgenden wird ein Ausführungsbeispiel der Erfindung anhand von Zeichnungen erläutert.
In den Zeichnungen zeigen:
1: die Gesamtdarstellung eines System zur optischen Vermessung von Objekten mittels Projektion zweier gekreuzter Liniengittersequenzen
2: die Darstellung des Triangulationsvorganges durch Erzeugung von Projektionsstrahlen mittels Verschneidung von Lichtschnittebenen
3: die Darstellung der Kalibrierung der Projektionseinrichtung bzw. der Projektionsstrahlen
Die 1 zeigt eine vereinfachte schematische Darstellung einer Einrichtung zur optischen Vermessung von Objekten gemäß einem Ausführungsbeispiel der Erfindung. Eine Einrichtung zur optischen Vermessung eines Objektes 4 enthält eine Projektionseinrichtung, bestehend aus Lichtquelle 1, Projektionsgitter 2 und Optik 8, mit der vertikale Linienmuster 3' und horizontale Linienmuster 3'' auf dem zu vermessenden Objekt 4 erzeugt werden. Mittels einer Optik 9 wird eine 5 der auf das Objekt projizierten Linienmuster 3' und 3'' auf einem Bildsensor 6 erzeugt. Optik 9 und Bildsensor 6 können Bestandteile einer Kamera bzw. Videokamera sein. Mittels eines Bildverarbeitungssystems 7 wird aus der Abbildung des projizierten Linienmusters 3' und 3'' die Oberflächenkontur des zu vermessenden Objekts 4 berechnet. Das Bildverarbeitungssystem 7 kann aus einem Mikrocomputer mit eingebauter Bildeinzugskarte (Framegrabber) bestehen.
Mittels des Projektionsgitters 2 werden die zwei Liniengittersequenzen 2' und 2'' nacheinander erzeugt und auf das Objekt 4 projiziert. Die dargestellten Gittersequenzen entsprechen in der gezeigten Ausführung denen des CLA-Verfahrens, wobei die Liniengittersequenz 2'' gegenüber der Liniengittersequenz 2' um 90° gedreht ist. Die einzelnen Liniengitter der Liniengittersequenzen 2' und 2'' sind in ihrer zeitlichen Abfolge entlang der Zeitachse t dargestellt. Sie werden zweckmäßigerweise mit nur einem Projektionsgitter, z.B. der Punktematrix eines LCD-Panels erzeugt. Alle projizierten Liniengitter werden mit dem Bildsensors 6 aufgenommen und dem Bildverarbeitungssystem 7 zur Weiterverarbeitung zugeführt. Das Bildverarbeitungssystem berechnet aus den Bilddaten über eine Triangulationsrechnung die dreidimensionale Gestalt des Objektes 4.
Die Erzeugung von Projektionsstrahlen durch Verschneidung von Lichtschnittebenen ist in 2 dargestellt. Sind beide Liniengittersequenzen projiziert, so identifiziert die eine Liniengittersequenz die Lichtschnittebene E' und die andere Liniengittersequenz die Lichtschnittebene E''. Die vertikale Lichtschnittebene E' geht dabei von der vertikalen Linie L' des Projektionsgitters 2 aus, die horizontale Lichtschnittebene E'' von der horizontalen Linie L''.
Die Verschneidung der beiden Lichtschnittebenen E' und E'' ergibt den Projektionsstrahl p mit Richtungsvektor P →, der, ausgehend vom Schnittpunkt G der Gitterlinie L' mit Gitterlinie L'', am Punkt O des Objektes 4 auftrifft. Der Punkt O wird entlang des Beob achtungsstrahls b mit Richtungsvektor B → an der Bildkoordinate X → auf dem Bildsensor 6 abgebildet. Die Raumkoordinate des Punktes O ergibt sich also als Schnittpunkt des Projektionsstrahls p mit Beobachtungsstrahl b.
Für die Kalibrierung der Kamera sind zahlreiche Verfahren bekannt. Sie muß deshalb hier nicht weiter erläutert werden. Die Kalibrierung der Projektionseinrichtung mit Unterscheidung einzelner Projektionsstrahlen ist in 3 dargestellt. Hierbei wird eine Kalibrierplatte 10 mit Kalibriermarken entlang des Vektors dz → verschoben. Die Abbildung zeigt exemplarisch die Kalibrierung des vom Punkt G → des Projektionsgitters 2 ausgehenden Projektionsstrahls p. Der Durchstoßpunkt des Projektionsstrahls p durch die Kalibrierplatte 10 liefert den Ortsvektor K → des Projektionsstrahles p, die Richtung P → des Projektionsstrahles p ergibt sich als die Summe der Vektoren dk → und dz → (P → = dk → + dz →). Die Verschiebung dk → des Durchstoßpunktes von Projektionsstrahl p und Kalibrierplatte 10 kann auf dem Bildsensor 6 als Verschiebung dx → beobachtet werden. Zur Verschiebung der Kalibrierplatte wird zweckmäßigerweise ein präzis arbeitender Linearversteller verwendet, so daß dz → mit großer Genauigkeit bekannt ist. Besteht der Bildsensor aus einer diskreten Anzahl von Bildpunkten, so wird die Verschiebung dx → u.U. keinem ganzzahligen Vielfachen des Bildpunktabstandes entsprechen. Der genaue Durchstoßpunkt des Beobachtungsstrahls durch den Bildsensor wird dann zweckmäßigerweise durch Interpolation aus den ihn umgebenden Bildpunkten berechnet.

Claims

Verfahren zur flächenhaften, dreidimensionalen, optischen Vermessung von Objekten, bei dem mittels eines Projektors Lichtmuster auf das zu vermessende Objekt projiziert, Abbildungen von den auf das zu vermessende Objekt projizierten Lichtmustern auf dem Bildsensor einer Kamera erzeugt, und aus den erzeugten Abbildungen über Entschlüsselung des Lichtcodes und die Position der Bildpunkte auf dem Bildsensor der Kamera eine Triangulationsrechnung zur Berechnung der Oberflächenkontur des Objektes durchgeführt wird, dadurch gekennzeichnet, daß zwei in Projektionsrichtung gegeneinander verdrehte Liniengittersequenzen zur Erzeugung eindeutig unterscheidbarer Lichtschnittebenen projiziert und mit der Kamera aufgenommen werden, wobei die mit einer Liniengittersequenz erzeugten Lichtschnittebenen dazu verwendet werden, um die mit der anderen Liniengittersequenz erzeugten Lichtschnittebenen in einzelne, eindeutig unterscheidbare und von ortsfesten Punkten des diese Lichtschnittebenen erzeugenden Projektionsgitters ausgehende Projektionsstrahlen aufzuteilen, daß jedem Projektionsstrahl durch Kombination der aus den beiden Liniengittersequenzen erzeugten eindeutigen Codierungen der Lichtschnittebenen eine eindeutige Codierung zugewiesen wird, daß für jeden Projektionsstrahl innerhalb des dem zu vermessenden Objektes zugewandten Projektionskegels durch eine Kalibrierung unmittelbar oder mittelbar ein Ortsvektor und ein Richtungsvektor bestimmt werden, daß die Triangulation für alle auszuwertenden Bildpunkte des Bildsensors jeweils durch Berechnung des Schnittpunktes des durch die Position des Bildpunktes auf dem Bildsensor festgelegten Beobachtungsstrahls mit dem durch die eindeutige Codierung an diesem Bildpunkt identifizierten Projektionsstrahl durchgeführt wird.
Verfahren nach Anspruch 1, dadurch gekennzeichnet, daß die Linien der einen Liniengittersequenz senkrecht und die Linien der anderen Liniengittersequenz waagerecht zu der durch die optischen Achsen von Projektor und Kamera aufgespannten Triangulationsebene ausgerichtet sind.
Verfahren nach Anspruch 1 oder 2, dadurch gekennzeichnet, daß zur Kalibrierung der Projektionsstrahlen ein Kalibrierkörper geradlinig verschoben wird und Ort und Richtung der Projektionsstrahlen aus den Schnittpunkten der Projektionsstrahlen mit dem Kalibrierkörper bzw, aus der Verschiebung des Kalibrierkörpers und aus den hierdurch erzeugten Lageänderungen der Schnittpunkte der Projektionsstrahlen mit dem Kalibrierkörper berechnet werden.
Verfahren nach Anspruch 1 bis 3, dadurch gekennzeichnet, daß wenigstens eine Liniengittersequenz Liniengitter mit sinusförmiger Intensitätsver teilung enthält, daß wenigstens eine Liniengittersequenz Lichtmuster enthält, deren jeweilige Intensitätsverteilung der der Liniengitter mit sinusförmiger Intensitätsverteilung an Orten mit konstantem Phasenwinkel von bekannter oder berechenbarer Größe entspricht, daß diese Lichtmuster mittels des Projektors auf das Objekt projiziert und auf dem Bildsensor abgebildet werden, daß die Abbildungen dieser Lichtmuster zur punktweisen Berechnung der Hintergrundintensität oder der Intensitätsamplitude in den Abbildungen der Gitterprojektionen mit sinusförmiger Intensitätsverteilung verwendet werden und daß die so berechnete Hintergrundintensität oder Intensitätsamplitude dazu verwendet wird, um aus den Abbildungen von Gitterprojektionen mit sinusförmiger Intensitätsverteilung punktweise den Phasenwinkel zu berechnen.
Verfahren nach Anspruch 1 bis 3, dadurch gekennzeichnet, daß als Liniengittersequenz die des Codierten Lichtansatzes verwendet wird.
Verfahren nach Anspruch 1 bis 3, dadurch gekennzeichnet, daß als Liniengittersequenz die eines Phasenshiftverfahrens zur Berechnung absoluter, nicht 2π modulierter Phasenwinkel verwendet wird.
Einrichtung zur Durchführung des Verfahrens nach einem der Ansprüche 1 bis 6 mit einer Projektionseinrichtung bestehend aus Lichtquelle (1), Projektionsgitter (2) und Optik (8) zur Erzeugung von Linienmustern auf dem zu vermessenden Objekt (4), einer Optik (9) zur Erzeugung von Abbildungen (5) der auf das Objekt projizierten Linienmu ster auf einem Bildsensor (6), und einem Bildverarbeitungssystem (7) zur triangulatorischen Berechnung der Oberflächenkontur aus den aus einer Projektionsrichtung erzeugten Abbildungen (5), bei der ein Projektionsgitter (2) zwei in Projektionsrichtung gegeneinander verdrehte Li niengittersequenzen (2') und (2'') erzeugt, wobei die mit einer Liniengittersequenz (2'') erzeugten Lichtschnittebenen die mit der anderen Liniengittersequenz (2') erzeugten Lichtschnittebenen in einzelne, eindeutig unterscheidbare und von ortsfesten Punkten des Projektionsgitters (2} ausgehende Projektionsstrahlen aufteilen.
Einrichtung nach Anspruch 7, dadurch gekennzeichnet, daß ein als Punktematrix ausgebildetes Projektionsgitter die beiden Liniengittersequenzen (2') und (2'') erzeugt, wobei die Linien der einen Liniengittersequenz durch die Zeilen der Punktematrix gebildet werden und die Linien der anderen Liniengittersequenz durch die Spalten der Punktematrix gebildet werden.
Einrichtung nach Anspruch 8, dadurch gekennzeichnet, daß die Punktematrix aus einem LCD-Panel besteht.
Einrichtung nach Anspruch 8, dadurch gekennzeichnet, daß die Punktematrix aus einem Mikro-Spiegel-Modulator (MMD = micro mirror device) besteht.
Einrichtung nach Anspruch 7, dadurch gekennzeichnet, daß das Projektionsgitter (2) aus zwei auf der optischen Achse der Optik (8) unmittelbar hintereinander angeordneten Liniengittern besteht.
Einrichtung nach Anspruch 7, dadurch gekennzeichnet, daß ein in der Gitterebene drehbares Liniengitter die beiden Liniengittersequenzen erzeugt.
Einrichtung nach Anspruch 7 bis 12, dadurch gekennzeichnet, daß zur Kalibrierung der Projektionsstrahlen eine Verschiebevorrichtung einen Kalibrierkörper (10) geradlinig verschiebt, ein Bildsensor (6) die Schnittpunkte der Projek tionsstrahlen mit dem Kalibrierkörper (10) und die durch die Verschiebung des Kalibrierkörpers (10) erzeugten Lageänderungen der Schnittpunkte der Projektionsstrahlen mit dem Kalibrierkörper (10) beobachtet und ein an den Bildsensor (6) angeschlossenes Bildverarbeitungssystem daraus Ort und Richtung der Projektionsstrahlen berechnet.