DE102011113197B4 - Verfahren und Vorrichtung zur Bestimmung eines Winkels zwischen einem Zugfahrzeug und einem daran gekoppelten Anhänger, und Fahrzeug - Google Patents

Verfahren und Vorrichtung zur Bestimmung eines Winkels zwischen einem Zugfahrzeug und einem daran gekoppelten Anhänger, und Fahrzeug Download PDF

Info

Publication number
DE102011113197B4
DE102011113197B4 DE102011113197.7A DE102011113197A DE102011113197B4 DE 102011113197 B4 DE102011113197 B4 DE 102011113197B4 DE 102011113197 A DE102011113197 A DE 102011113197A DE 102011113197 B4 DE102011113197 B4 DE 102011113197B4
Authority
DE
Germany
Prior art keywords
trailer
image
angle
towing vehicle
rotation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
DE102011113197.7A
Other languages
English (en)
Other versions
DE102011113197A1 (de
Inventor
Andreas Haja
Hellward Broszio
Nikolaus Meine
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Volkswagen AG
Original Assignee
Volkswagen AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Volkswagen AG filed Critical Volkswagen AG
Priority to DE102011113197.7A priority Critical patent/DE102011113197B4/de
Publication of DE102011113197A1 publication Critical patent/DE102011113197A1/de
Application granted granted Critical
Publication of DE102011113197B4 publication Critical patent/DE102011113197B4/de
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60DVEHICLE CONNECTIONS
    • B60D1/00Traction couplings; Hitches; Draw-gear; Towing devices
    • B60D1/24Traction couplings; Hitches; Draw-gear; Towing devices characterised by arrangements for particular functions
    • B60D1/30Traction couplings; Hitches; Draw-gear; Towing devices characterised by arrangements for particular functions for sway control, e.g. stabilising or anti-fishtail devices; Sway alarm means
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60DVEHICLE CONNECTIONS
    • B60D1/00Traction couplings; Hitches; Draw-gear; Towing devices
    • B60D1/58Auxiliary devices
    • B60D1/62Auxiliary devices involving supply lines, electric circuits, or the like
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/808Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for facilitating docking to a trailer

Landscapes

  • Engineering & Computer Science (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Length Measuring Devices By Optical Means (AREA)
  • Image Analysis (AREA)

Abstract

Verfahren zur Bestimmung eines Winkels zwischen einem Zugfahrzeug (1) und einem damit gekoppelten Anhänger (2), umfassend die Schritte
Erfassen eines Bildes des Anhängers (2) mit Hilfe einer Bilderfassungsvorrichtung (3), gekennzeichnet durch
Auswerten des erfassten Bildes durch eine Bildauswertung, wobei die Bildauswertung auf einem dreidimensionalen Bewegungsmodell einer Anhängerdeichsel (5) des Anhängers (2) basiert und drei Rotationswinkel der Anhängerdeichsel (5) als Ausgangsgrößen umfasst, wobei die Rotationswinkel eine Rotation der Anhängerdeichsel (5) in einer Anhängerkupplung (4) des Zugfahrzeugs (1) um drei unterschiedliche räumliche Achsen beschreiben, und
Bestimmen des Winkels zwischen Zugfahrzeug (1) und dem Anhänger (2) auf Grundlage der Bildauswertung (16).

Description

  • Die Erfindung betrifft ein Verfahren und eine Vorrichtung zur Bestimmung eines Winkels zwischen einem Zugfahrzeug und einem daran gekoppelten Anhänger, und Fahrzeug.
  • Zur Unterstützung bei Fahrten mit einem Anhänger existieren verschiedene Assistenzsysteme. Unterschieden wird dabei zwischen passiven Systemen, bei denen beispielsweise Hilfslinien in einem Rückfahrkamerabild angezeigt werden, und aktiven Systemen, bei denen beispielsweise unterstützende Regeleingriffe erfolgen. Aktive Systeme benötigen einen Sensor zur Messung einer Deichselbewegung. Dies kann ein in einer Anhängerkupplung integrierter Drehrichtungssensor oder Magnetsensor sein. Die Deichsel des Anhängers muss demzufolge einen Magneten an einem Gegenstück zur Anhängerkupplung umfassen. Bei einer Änderung des Winkels zwischen dem Zugfahrzeug und dem Anhänger ändert sich somit die Ausrichtung des Magneten zum Magnetsensor. Dies wird vom Magnetsensor detektiert und kann für die Bestimmung der Winkeländerung verwendet werden. Eine derartige Winkelbestimmung erfordert, dass die Anhängerkupplung mit solch einem Magneten ausgestattet ist, ansonsten ist eine Winkelbestimmung nicht möglich. Des Weiteren ist die magnetbasierte Art der Winkelbestimmung anfällig für Magnetfelder oder Magnetfeldverzerrungen, die auf Grund einer Beladung des Zugfahrzeugs oder des Anhängers auftreten können.
  • DE 10 2004 022 113 A1 beschreibt ein Verfahren zur Bestimmung eines Ausrichtungswinkels des Anhängers zum Zugfahrzeug, wobei aktuelle Bilddaten einer Videokamera zu einer Auswertesubeinheit gelangen und diese Daten in einer Rechenvorrichtung mit in einem Datenspeicher gespeicherten Templates, also mit im Rahmen von in Referenzfahrsituationen gespeicherten Bildern, auf Korrelation hin überprüft werden (Template-Matching).
  • DE 10 2011 101 990 B3 offenbart ein Verfahren zur Bestimmung des relativen Deichselwinkels, wobei mittels einer Auswerteeinrichtung zu einem ersten Zeitpunkt einem ersten Bild ein erster Intensitäts- und/oder Farbverlauf entlang mindestens einer ersten Trajektorie bestimmbar ist, wobei die erste Trajektorie einen Kreisbogen um einen Drehpunkt der Deichsel abbildet, wobei zu mindestens einem weiteren Zeitpunkt in einem weiteren Bild ein weiterer Intensitäts- und/oder Farbverlauf entlang der ersten Trajektorie bestimmbar ist, wobei ein Ähnlichkeitsmaß zwischen dem ersten Intensitäts- und/oder Farbverlauf entlang der mindestens ersten Trajektorie in dem ersten Bild und einer Anzahl verschobener weiterer Intensitäts- und/oder Farbverläufe entlang der mindestens ersten Trajektorie in dem weiteren Bild bestimmbar ist, wobei die verschobenen weiteren Intensitäts- und Farbverläufe entlang der mindestens ersten Trajektorie in dem weiteren Bild verschoben werden, wobei der relative Deichselwinkel in Abhängigkeit der Ähnlichkeitsmaße bestimmt wird.
  • Aufgabe der vorliegenden Erfindung ist es daher, ein Verfahren und eine Vorrichtung zur Bestimmung eines Winkels zwischen einem Zugfahrzeug und einem daran gekoppelten Anhänger bereitzustellen, wobei eine sehr genaue Bestimmung der Anhängerbewegung und somit eine aktive Fahrunterstützung ermöglicht wird. Des Weiteren soll die Bestimmung des Winkels kostengünstig und robust gegenüber externen Einflüssen möglich sein.
  • Diese Aufgabe wird durch ein Verfahren gemäß Anspruch 1, eine Vorrichtung gemäß Anspruch 11 und ein Fahrzeug gemäß Anspruch 13 gelöst.
  • Weitere vorteilhafte Ausgestaltungen der Erfindung sind in den abhängigen Ansprüchen angegeben.
  • Erfindungsgemäß werden ein Verfahren und eine Vorrichtung zur Bestimmung eines Winkels zwischen einem Zugfahrzeug und einem daran gekoppelten Anhänger bereitgestellt, wobei ein Bild des Anhängers mit Hilfe einer Bilderfassungsvorrichtung erfasst wird, wobei es sich bei der Bilderfassungsvorrichtung um eine Rückkamera mit bekannten inneren und äußeren Kameraparametern handeln kann, welche bereits in vielen Fahrzeugen standardisiert enthalten ist. Das Verfahren und die Vorrichtung sind dadurch gekennzeichnet, dass das Auswerten des erfassten Bildes durch eine Bildverarbeitung erfolgt, wobei die Bildverarbeitung auf einem dreidimensionalen Bewegungsmodell einer Anhängerdeichsel beruht. Dadurch kann der Winkel, beispielsweise ein Anfangsknickwinkel, zwischen dem Fahrzeug und dem Anhänger bestimmt werden.
  • Der Winkel zwischen dem Fahrzeug und dem daran gekoppelten Anhänger wird durch Auswerten von Bilddaten bestimmt, dadurch sind keine besonderen Einrichtungen an dem Anhänger erforderlich, so dass das Verfahren und die Vorrichtung mit einem beliebigen Anhänger angewendet werden können. Viele Fahrzeuge verfügen über eine Bilderfassungsvorrichtung, beispielsweise eine Rückkamera, die den Fahrer des Zugfahrzeugs beim Einparken oder Rangieren unterstützt. So kann das Verfahren und die Vorrichtung kostengünstig, beispielsweise in einem Steuergerät des Fahrzeugs, realisiert werden.
  • Das Verfahren und die Vorrichtung zur Winkelbestimmung können auf einer Auswertung von korrespondierenden Merkmalspunkten von zeitlich aufeinanderfolgenden Bildern basieren. Dabei wird für einen Zeitpunkt ein Bild k und ein zeitlich vorangegangenes Bild k-1 als Eingangsgrößen ausgewertet.
  • Des Weiteren wird beispielsweise eine kalibrierte Rückkamera mit bekannten inneren und äußeren Kameraparametern, sowie eine bekannte Position einer Kugel einer Anhängerkupplung verwendet.
  • Um eine hohe Genauigkeit der Schätzung des Winkels zwischen dem Zugfahrzeug und dem dazugehörigen Anhänger zu erreichen wird dazu ein Bewegungsmodell verwendet, welches eine Drehung der Anhängerdeichsel um die Kupplungskugel mit drei Rotationswinkeln beschreibt.
  • Ausgangsgrößen des Bewegungsmodells sind die drei Rotationswinkel rx, ry und rz der Anhängerdeichsel, die eine Rotation der Deichsel um einen Kopf der Anhängerkupplung, zum Beispiel einen Kugelkopf der Anhängerkupplung, als Drehpunkt der Anhängerdeichsel beschreiben.
  • Für die Schätzung der drei Rotationswinkel kann ein Bildbereich, der einen Deichselkopf und die Kupplungskugel enthält, heran gezogen werden, wobei nur Merkmalspunkte in diesem Bildbereich detektiert und von zeitlich aufeinanderfolgenden Bildern verfolgt werden sollen. Durch solch eine Maskierung kann ein Rechenaufwand reduziert und ein störender Einfluss von beispielsweise Deichseln mit einer Längsfederung verringert werden.
  • Die Koordinaten der Merkmalspunkte im Koordinatensystem des Bildsensors der Kamera können weiter verwendet werden. Durch eine Auswahl von Korrespondenzen, wobei es sich bei einer Korrespondenz um zwei Merkmalspunkte in zwei zeitlich aufeinanderfolgenden Bildern handelt, werden nur solche Merkmalspunkte bereitgestellt, welche sich auf der Anhängerdeichsel befinden, und diese werden für die weitere Berechnung des Winkels verwendet. Die Auswahl kann beispielsweise durch ein Random Sampling Consensus Verfahren (RANSAC-Verfahren) erfolgen.
  • Die Schätzung der Rotationswinkel kann aus den Bildkoordinaten der Merkmalspunkte und den Punkten der Anhängerdeichsel im dreidimensionalen Raum erfolgen. Aus dem für jedes Bild kontinuierlicher geschätzter Rotationswinkel kann die gesuchte Änderung des horizontalen Rotationswinkels abgeleitet werden.
  • Durch das Verfahren und die Vorrichtung zur Bestimmung des horizontalen Rotationswinkels zwischen einem Zugfahrzeug und einem Anhänger auf Basis einer dreidimensionalen Bildauswertung ist es möglich hohe Genauigkeiten, insbesondere bei einer starken Schrägstellung des Anhängers oder bei einem unebenen Untergrund, zu erzielen, da das Bewegungsmodell durch eine Drehung der Anhängerdeichsel um die Kupplungskugel mit den drei Rotationswinkeln rx, ry und rz beschrieben wird. Des Weiteren kann zusätzlich zu einer Bildanzeige eine hochgenaue Vermessung einer Anhängerbewegung und dadurch eine aktive Fahrunterstützung ermöglicht werden. Die Erfindung kann kostengünstig durch bereits integrierte Rückkameras realisiert werden.
  • Die Erfindung wird nachfolgend anhand bevorzugter Ausführungsbeispiele unter Bezugnahme auf die Zeichnungen näher beschrieben.
    • 1 zeigt ein Zugfahrzeug mit einem daran gekoppelten Anhänger und eine Vorrichtung zur Bestimmung des Winkels zwischen dem Zugfahrzeug und dem Anhänger gemäß einem Ausführungsbeispiel der Erfindung.
    • 2 zeigt eine schematische Darstellung eines Verfahrens zur Bestimmung des Winkels zwischen einem Fahrzeug und einem daran gekoppelten Anhänger gemäß einem weiteren Ausführungsbeispiel der Erfindung.
    • 3 zeigt das Zugfahrzeug mit dem daran gekoppelten Anhänger aus 1 mit drei Rotationswinkeln rx, ry und rz der Anhängerdeichsel, die eine Rotation der Deichsel um den Kugelkopf der Anhängerdeichsel als Drehpunkt der Anhängerdeichsel beschreiben, sowie die Position der Kamera und das Fahrzeugkoordinatensystem.
  • 1 zeigt ein Zugfahrzeug 1, welches über eine Kupplungskugel 4 mit einem Anhänger 2 gekoppelt ist und mit einer Bilderfassungsvorrichtung 3, beispielsweise einer Rückkamera, versehen ist. In vielen Fahrzeugen 1 ist bereits eine Rückkamera installiert, so dass mit Hilfe der Rückkamera eine Bestimmung eines Knick- oder Rotationswinkels zwischen dem Zugfahrzeug 1 und dem Anhänger 2 kostengünstig realisiert werden kann.
  • Durch das Auswerten eines Bildes der Bilderfassungsvorrichtung 3 müssen an dem dazugehörigen Anhänger 2 keine speziellen Vorrichtungen vorhanden sein, so dass jeder beliebige Anhänger 2 verwendet werden kann.
  • Des Weiteren ist das Fahrzeug 1 mit einer Bildauswertungsvorrichtung 16, welche mit der Bilderfassungsvorrichtung 3 elektronisch verbunden ist, und einem Anhängerrangierassistenzsystem 17, welches mit der Bildauswertungsvorrichtung 16 elektronisch verbunden ist, ausgestattet. Der von der Bildauswertungsvorrichtung 16 bestimmte Winkel zwischen dem Fahrzeug 1 und dem Anhänger 2 wird dem Anhängerrangierassistenzsystem 17 zur Verfügung gestellt, um somit Rangiervorgänge des Zugfahrzeugs 1 unterstützen zu können.
  • 2 zeigt eine schematische Darstellung eines Verfahrens zur Bestimmung eines Winkel, insbesondere eines Knickwinkels, zwischen einem Zugfahrzeug und einen daran gekoppelten Anhänger gemäß einem Ausführungsbeispiel der Erfindung, wie es bei der in 1 gezeigten Vorrichtung und insbesondere bei der Bildauswertungsvorrichtung 16 vorgesehen sein kann.
  • In Schritt 6 wird von der Bilderfassungsvorrichtung 3 ein Bild des Anhängers 2 aufgenommen. Die Bildauswertungsvorrichtung 16 wertet die daraus resultierenden Bilddaten mittels einer Bildauswertung aus, um den Knickwinkel bestimmen zu können. Dabei werden für einen Zeitpunkt ein aktuelles Bild k und ein zeitlich vorangegangenes Bild k-1 als Eingangsgrößen ausgewertet. Die Bilder können mittels einer kalibrierten Kamera mit bekannten inneren und äußeren Kameraparametern, beispielsweise der Rückkamera 3 des Fahrzeugs 1, erfasst werden, wobei die Position TK der Kupplungskugel 4 der Anhängerkupplung als bekannt vorausgesetzt wird. Die inneren Kameraparameter umfassen z.B. eine Brennweite, ein Höhen-Seitenverhältnis eines Bildsensors der Kamera sowie eine Linsenverzerrung der Kamera. Die äußeren Kameraparameter umfassen z.B. eine Position und eine Orientierung der Kamera relativ zu einem Fahrzeugkoordinatensystem, welches wie in 3 dargestellt orientiert ist, wobei der Ursprung des Fahrzeugkoordinatensystems sich an der Position der Kupplungskugel der Anhängerdeichsel befindet.
  • Das Koordinatensystem der Kamera kann durch eine Drehung um -90 Grad um eine x-Achse, eine Drehung um +180 Grad um eine gedrehte y-Achse sowie eine Verschiebung in das Fahrzeugkoordinatensystem transformiert werden. Eine Abbildung eines Punktes in einem dreidimensionalen Raum Pj=(X,Y,Z)T in einen Bildpunkt pj,k=(x,y)T ergibt sich mit Hilfe einer Projektionsmatrix Ak=KkRk[I-Ck], welche eine Kalibriermatrix Kk, die die inneren Kameraparameter enthält, und einer Rotationsmatrix Rk, welche die Orientierung der Kamera beschreibt und sich aus drei Rotationswinkeln rx, ry, rz zusammensetzt, enthält. Des Weitern beschreibt I eine 3x3-Einheitsmatrix, und Ck beschreibt die Position der Kamera, wobei gilt: p j ,k = A k P j .
    Figure DE102011113197B4_0001
  • Die in 3 gezeigten Rotationswinkel rx, ry, rz beschreiben eine Rotation der Anhängerdeichsel um den Kugelkopf der Anhängerkupplung als einen Drehpunkt der Deichsel um die x-, y- und z-Achse des Fahrzeugkoordinatensystems und beziehen sich relativ zur Deichselbewegung auf ein Startbild k = 0, wie in 3 gezeigt. Der Knickwinkel αK zwischen dem Anhänger und dem Zugfahrzeug ist bei einer bekannten absoluten Orientierung der Deichsel für das Bild k = 0 aus dem kontinuierlich für jedes Bild bestimmten Rotationswinkel rz zu berechnen. Im Gegensatz zur Bestimmung eines absoluten Knickwinkels kann die Änderung des Knickwinkels ΔαK ohne Kenntnis der absoluten Orientierung der Deichsel für das Bild k = 0 aus dem Rotationswinkel rz für mindestens zwei Bilder berechnet werden.
  • Zur Bestimmung der relativen Knickwinkeländerung ΔαK wird im Schritt 7 eine Maskierung durchgeführt. Ein Bildbereich, der den Deichselkopf und die Kupplungskugel enthält kann für die Schätzung heran gezogen werden. Dabei werden nur Merkmalspunkte, welche in dem Bildbereich liegen, detektiert und weiter in zeitlich aufeinander folgenden Bildern verfolgt. Die Maskierung reduziert den Rechenaufwand und verringert einen störenden Einfluss von Deichseln, die beispielsweise eine Längsfederung aufweisen.
  • Bei dem in 2 gezeigten Ausführungsbeispiel wird in einem weiteren Schritt 8 eine Korrespondenzanalyse durchgeführt. Dabei kann die Korrespondenzanalyse korrespondierende Merkmalspunkte von zeitlich aufeinanderfolgenden und von der Bildererfassungsvorrichtung 3 erfassten Bildern bestimmen. Der Bildbereich, der für die Schätzung herangezogen werden kann, umfasst vorzugsweise den Deichselkopf und die Kupplungskugel. Dabei können nur Merkmalspunkte aus deren Bildbereich ausgewertet und in zeitlich aufeinanderfolgenden Bildern bestimmt werden.
  • Die Bildkoordinaten der Merkmalspunkte können in Schritt 9 einer Kompensation der Linsenverzerrung unterzogen werden. Dabei werden die Bildkoordinaten der Merkmalspunkte mit den inneren Kameraparametern 10, welche die Parameter der Linsenverzerrung der Kamera enthalten, entzerrt und in ein Koordinatensystem des Bildsensors der Kamera transformiert. Das Koordinatensystem des Bildsensors der Kamera kann seinen Ursprung in einem Hauptpunkt der Kamera besitzen und weist eine metrische Einheit in mm auf.
  • Weitere Verfahrensschritte 11-15 verarbeiten die Koordinaten der Merkmalspunkte in dem Koordinatensystem des Bildsensors der Kamera.
  • Bei dem in 2 gezeigten Ausführungsbeispiel werden in dem weiteren Schritt 11 mit einer Auswahl von Korrespondenzen, wobei es sich bei einer Korrespondenz um zwei Merkmalspunkte in zwei zeitlich aufeinanderfolgenden Bildern handelt, nur Merkmalspunkte, die sich auf der Anhängerdeichsel befinden, für eine weitere Verarbeitung bereitgestellt. Die Auswahl kann mit einem Random Sampling Consensus Verfahren (RANSC-Verfahren) erfolgen. Als Bewegungsmodell korrespondierender Merkmalspunkte kann näherungsweise angenommen werden, dass sich die Merkmalspunkte tangential um die Kupplungskugel im Bild bewegen. Mit Hilfsvektoren vk=pj,k-1-tc und vk-1=pj,k-tc einer Korrespondenz j kann ein Winkel β □mit β=arccos[(vk-1*Vk)*(|vk-1|*|vk|)-1] als Modellparameter berechnet werden, wobei die Berechnung des Winkels β aus einer zufälligen Stichprobe eines Merkmalspunktes pj,k, welcher zu einer Korrespondenz gehört, erfolgt. Dabei beschreibt tc ein projiziertes Rotationszentrum, beispielsweise die projizierte Kugel der Anhängerdeichsel, pj,k-1 beschreibt einen korrespondierenden Merkmalspunkt des Bildes k-1, und pj,k beschreibt einen korrespondierenden Merkmalspunkt des Bildes k. Mit dem dadurch berechneten Winkel β kann eine Überprüfung der verbleibenden Merkmalspunkte anhand eines euklidischen Abstandes berechnet werden. Dabei unterstützt eine Korrespondenz einen berechneten Winkel β, wenn der zu berechnende euklidische Abstand kleiner ist als ein vorgegebener Schwellenwert. Das RANSC-Verfahren kann abgebrochen werden, falls ein Winkel β Dgefunden wurde, der von einer Mindestanzahl an Merkmalspunkten, beispielsweise mehr als 70 % der Merkmalspunkte, unterstützt wird, oder wenn eine maximale Anzahl von Stichproben erreicht ist. Dabei wird die bis zum Abbruch gefundene größte Anzahl unterstützender Merkmalspunkte für die weiteren Verfahrenschritte 13-15 ausgewählt.
  • In einem weiteren Schritt 13 wird eine Initialisierung von Punkten im dreidimensionalen Raum durchgeführt, falls keine oder nur eine geringe Bewegung der Anhängerdeichsel vorliegt oder Trajektorien der Merkmalspunkte zu kurz sind, da dann eine Bestimmung einer dreidimensionalen Position der Punkte schwierig ist, da aufgrund einer Parallaxe von Sichtlinien der korrespondierenden Merkmalspunkte eine Triangulierung zu ungenau ist. Deswegen kann für jeden Merkmalspunkt ein Schnittpunkt einer Sichtlinie mit einer Ebene, die parallel zur Fahrbahn auf Höhe der Kugel der Anhängerkupplung verläuft, berechnet werden. Der Schnittpunkt kann dann eine initiale Position des zu einem Merkmalspunkt gehörenden Punktes im dreidimensionalen Raum sein.
  • Ist die Parallaxe der Sichtlinien ausreichend groß, so können die dreidimensionalen Positionen der Punkte im dreidimensionalen Raum im Schritt 14 des in 2 gezeigten Ausführungsbeispiels mittels Triangulierung aktualisiert werden. Die Triangulierung kann auf ein lineares Gleichungssystem führen, welches zum Beispiel mit einer Singulärwertzerlegung gelöst werden kann. Die Lösung liefert dann die dreidimensionalen Koordinaten des Punktes im dreidimensionalen Raum.
  • Ein Rückprojektionsfehler des Punktes im dreidimensionalen Raum kann für ein Bild k ausgewertet werden. Ist dieser größer als ein Bildpunkt, kann der Punkt im dreidimensionalen als fehlerhaft verworfen werden.
  • Bei dem in 2 gezeigten Ausführungsbeispiel kann im Schritt 15 eine Schätzung der Rotationswinkel durchgeführt werden, wobei anstelle der Schätzung einer Rotationsbewegung der Anhängerdeichsel eine Bewegung der Bilderfassungsvorrichtung 3 bzw. der Kamera relativ zur Anhängerdeichsel 5 bestimmt werden kann und sich die Kamera auf einer Kreisbahn um ein Rotationszentrum, welches die Position der Kupplungskugel 4 ist, bewegt. Das dabei verwendete Bewegungsmodell der Kamera kann eingeschränkt werden, denn bei einer Translations- und Rotationsbewegung der Kamera kann angenommen werden, dass sich die Kamera nur durch eine Rotationsbewegung bewegt. Da eine Verschiebung der Kamera vom Rotationszentrum Tk bekannt ist, kann die Bewegung der Kamera aus den drei Rotationswinkeln und der Position des Rotationszentrums Tk berechnet werden. Die äußeren Kameraparameter umfassen somit drei Rotationswinkel rX, rY, und rZ. Eine Verschiebung des Projektionszentrums in zeitlich aufeinanderfolgenden Bildern ist von den drei Rotationswinkeln abhängig. Mit dem eingeschränkten Bewegungsmodell der Kamera lautet eine Projektionsmatrix der Kamera A k ' = K k R k [ I | ( R k T I ) T K ] ,
    Figure DE102011113197B4_0002
    wobei für die Abbildung eines Raumpunktes Pj in die Bildebene der Kamera gilt: p j , k = A k ' P j .
    Figure DE102011113197B4_0003
  • Für eine Bewegungsschätzung der Kamera des aktuellen Bildes k können alle Punkte im dreidimensionalen Raum herangezogen werden, die im aktuellen Bild einen ausgewählten korrespondierenden Merkmalspunkt aufweisen. Dabei kann nur die Bewegung der Kamera geschätzt werden.
  • Für alle Punkte im dreidimensionalen Raum kann zudem ein quadratischer Abstand des projizierten Punktes im dreidimensionalen Raum zu dem dazugehörigen korrespondierenden Merkmalspunkt im Bild minimiert werden durch die Gleichung { r ^ x , r ^ y , r ^ z } = arg min { r ^ x , r ^ y , r ^ z } j = 1 J d ( p j , k , A k ' P j ) 2 .
    Figure DE102011113197B4_0004
  • Dabei handelt es sich bei r̂x,r̂y,r̂z um die Schätzwerte der Rotationswinkel, d ist die Mahalanobis-Distanz, welche ein Distanzmaß zwischen Punkten im mehrdimensionalen Vektorraum beschreibt.
  • Die Minimierung kann mit einem iterativen Levenberg-Marquardt Verfahren erfolgen, wobei die Position und Orientierung der Kamera mit den bereits bestimmten Kameraparametern des zeitlich vorangegangenen Bildes k-1 initialisiert und Werte der drei Rotationswinkel bestimmt werden.

Claims (13)

  1. Verfahren zur Bestimmung eines Winkels zwischen einem Zugfahrzeug (1) und einem damit gekoppelten Anhänger (2), umfassend die Schritte Erfassen eines Bildes des Anhängers (2) mit Hilfe einer Bilderfassungsvorrichtung (3), gekennzeichnet durch Auswerten des erfassten Bildes durch eine Bildauswertung, wobei die Bildauswertung auf einem dreidimensionalen Bewegungsmodell einer Anhängerdeichsel (5) des Anhängers (2) basiert und drei Rotationswinkel der Anhängerdeichsel (5) als Ausgangsgrößen umfasst, wobei die Rotationswinkel eine Rotation der Anhängerdeichsel (5) in einer Anhängerkupplung (4) des Zugfahrzeugs (1) um drei unterschiedliche räumliche Achsen beschreiben, und Bestimmen des Winkels zwischen Zugfahrzeug (1) und dem Anhänger (2) auf Grundlage der Bildauswertung (16).
  2. Verfahren nach Anspruch 1, dadurch gekennzeichnet, dass die Bilderfassungsvorrichtung (3) eine Rückkamera des Zugfahrzeugs (1) umfasst.
  3. Verfahren nach Anspruch 1 oder Anspruch 2, dadurch gekennzeichnet, dass die Bildauswertung auf einer Auswertung von korrespondierenden Merkmalspunkten aufeinanderfolgender Bilder beruht.
  4. Verfahren nach Anspruch 1, dadurch gekennzeichnet, dass für die Bestimmung der Rotationswinkel Merkmalspunkte in einem Bildbereich des Bildes, der einen Kopf der Anhängerdeichsel (5) und einen Kopf der Anhängerkupplung (4) enthält, detektiert werden.
  5. Verfahren nach Anspruch 3 und Anspruch 4, dadurch gekennzeichnet, dass die Auswertung der korrespondierenden Merkmalspunkte auf demselben Bildbereich der aufeinanderfolgenden Bilder beruht.
  6. Verfahren nach einem der Ansprüche 3,4 oder 5, dadurch gekennzeichnet, dass Bildkoordinaten der Merkmalspunkte durch innere Kameraparameter (10) der Bilderfassungsvorrichtung (3) entzerrt und in ein Sensorkoordinatensystem transformiert werden.
  7. Verfahren nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass bei der Bildauswertung nur solche Merkmalspunkte in dem erfassten Bild ausgewählt werden, die sich auf der Anhängerdeichsel (5) befinden.
  8. Verfahren nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass bei der Bildauswertung die Auswahl von zu berücksichtigenden Merkmalspunkten der Bilder durch ein Random Sampling Consensus Verfahren (RANSAC-Verfahren) erfolgt
  9. Verfahren nach einem der Ansprüche 7 oder 8, dadurch gekennzeichnet, dass Rotationswinkel zwischen dem Zugfahrzeug (1) und dem dazugehörigen Anhänger (2) nach einer Auswertung von Bildkoordinaten der Merkmalspunkte und von Punkten in einem dreidimensionalen Raum der Anhängerdeichsel (5) bestimmt werden.
  10. Verfahren nach Anspruch 1, 4 oder 9, dadurch gekennzeichnet, dass eine Änderung eines Rotationswinkels bestimmt wird durch die für jedes erfasste Bild bestimmten Rotationswinkel.
  11. Vorrichtung zur Bestimmung eines Winkels zwischen einem Zugfahrzeug (1) und einem damit gekoppelten Anhänger (2), umfassend eine Bilderfassungsvorrichtung (3) zum Erfassen eines Bildes des Anhängers (2), gekennzeichnet durch eine Bildauswertungsvorrichtung (16), die mit der Bilderfassungsvorrichtung (3) gekoppelt ist, wobei die erfassten Bilder mittels eines dreidimensionalen Bewegungsmodells einer Anhängerdeichsel (5) des Anhängers (2) ausgewertet werden, wobei die Bildauswertung drei Rotationswinkel der Anhängerdeichsel (5) als Ausgangsgrößen umfasst, wobei die Rotationswinkel eine Rotation der Anhängerdeichsel (5) in einer Anhängerkupplung (4) des Zugfahrzeugs (1) um drei unterschiedliche räumliche Achsen beschreiben, und wobei der Winkel zwischen dem Zugfahrzeug (1) und dem Anhänger (2) auf Grundlage der Bildauswertung bestimmt wird.
  12. Vorrichtung nach Anspruch 11, dadurch gekennzeichnet, dass die Vorrichtung zur Durchführung des Verfahrens nach einem der Ansprüche 1-10 ausgestaltet ist.
  13. Fahrzeug (1) mit einer Vorrichtung nach Anspruch 11 oder Anspruch 12.
DE102011113197.7A 2011-09-10 2011-09-10 Verfahren und Vorrichtung zur Bestimmung eines Winkels zwischen einem Zugfahrzeug und einem daran gekoppelten Anhänger, und Fahrzeug Active DE102011113197B4 (de)

Priority Applications (1)

Application Number Priority Date Filing Date Title
DE102011113197.7A DE102011113197B4 (de) 2011-09-10 2011-09-10 Verfahren und Vorrichtung zur Bestimmung eines Winkels zwischen einem Zugfahrzeug und einem daran gekoppelten Anhänger, und Fahrzeug

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE102011113197.7A DE102011113197B4 (de) 2011-09-10 2011-09-10 Verfahren und Vorrichtung zur Bestimmung eines Winkels zwischen einem Zugfahrzeug und einem daran gekoppelten Anhänger, und Fahrzeug

Publications (2)

Publication Number Publication Date
DE102011113197A1 DE102011113197A1 (de) 2013-03-14
DE102011113197B4 true DE102011113197B4 (de) 2021-06-10

Family

ID=47740143

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102011113197.7A Active DE102011113197B4 (de) 2011-09-10 2011-09-10 Verfahren und Vorrichtung zur Bestimmung eines Winkels zwischen einem Zugfahrzeug und einem daran gekoppelten Anhänger, und Fahrzeug

Country Status (1)

Country Link
DE (1) DE102011113197B4 (de)

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6814040B2 (ja) 2013-06-26 2021-01-13 コンティ テミック マイクロエレクトロニック ゲゼルシャフト ミット ベシュレンクテル ハフツングConti Temic microelectronic GmbH ミラー代替手段、並びに、車両
DE102013214368A1 (de) 2013-07-23 2015-01-29 Application Solutions (Electronics and Vision) Ltd. Verfahren und Vorrichtung zur Wiedergabe eines seitlichen und/oder rückwärtigen Umgebungsbereichs eines Fahrzeugs
DE102014220269A1 (de) 2014-10-07 2016-04-07 Continental Automotive Gmbh System und Verfahren zum Warnen vor einer drohenden Kollision zwischen Zugfahrzeug und Anhänger beim Rückwärtsfahren eines Zugfahrzeuges mit Anhänger
US9607242B2 (en) * 2015-01-16 2017-03-28 Ford Global Technologies, Llc Target monitoring system with lens cleaning device
SE540160C2 (en) 2016-09-13 2018-04-17 Stoneridge Electronics Ab Automatic panning system
DE102017100669A1 (de) 2017-01-16 2018-07-19 Connaught Electronics Ltd. Verfahren zum Erfassen eines Umgebungsbereichs eines Kraftfahrzeugs mit Anpassung einer Region von Interesse in Abhängigkeit von einem Anhänger, Recheneinrichtung, Kamerasystem sowie Kraftfahrzeug
US10160274B1 (en) * 2017-10-23 2018-12-25 GM Global Technology Operations LLC Method and apparatus that generate position indicators for towable object
EP3537382A1 (de) * 2018-03-09 2019-09-11 Continental Automotive GmbH Vorrichtung und verfahren zur berechnung einer fahrzeuganhängerposition mit einer kamera
EP3787912B1 (de) * 2018-05-01 2023-07-12 Continental Autonomous Mobility US, LLC Ausrichtung von zugfahrzeug und anhänger
DE102018120966A1 (de) * 2018-08-28 2020-03-05 Connaught Electronics Ltd. Verfahren zum Erkennen eines Teils eines Anhängers sowie Anhängererfassungssystem für ein Zugfahrzeug
DE102019206985A1 (de) * 2019-05-14 2020-11-19 Robert Bosch Gmbh Verfahren zum Ermitteln eines Betriebswinkels zwischen einer Zugmaschine und einem Anhänger der Zugmaschine
DE102019127478A1 (de) * 2019-10-11 2021-04-15 Connaught Electronics Ltd. Bestimmen einer Anhängerausrichtung
EP3889906A1 (de) 2020-03-31 2021-10-06 Continental Automotive GmbH Verfahren und system zur berechnung des fahrzeuganhängerwinkels
EP3889903A1 (de) * 2020-03-31 2021-10-06 Continental Automotive GmbH Verfahren und system zur berechnung des fahrzeuganhängerwinkels
EP3889904B1 (de) 2020-03-31 2023-01-11 Continental Autonomous Mobility Germany GmbH Verfahren und system zur berechnung des fahrzeuganhängerwinkels

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102004022113A1 (de) * 2004-05-05 2005-11-24 Robert Bosch Gmbh Überwachung eines PKW-Anhängers mit einer Rückfahrkamera
DE102008045436A1 (de) * 2008-09-02 2010-03-04 Volkswagen Ag Verfahren und Vorrichtung zum Bestimmen eines Knickwinkels zwischen einem Zugfahrzeug und einem Anhänger
DE102010006521A1 (de) * 2010-02-02 2010-09-30 Daimler Ag Verfahren und Vorrichtung zur Bestimmung des Knickwinkels eines Fahrzeuggespanns
DE102009019399A1 (de) * 2009-04-29 2010-11-11 Audi Ag Verfahren zur automatischen Bestimmung wenigstens einer die Änderung der Lage eines Kraftfahrzeugs beschreibenden Zielgröße
DE102009057996A1 (de) * 2009-11-12 2011-05-19 Daimler Ag Verfahren zur Bestimmung einer Position einer Kamera mit einem zugehörigen Kamera-Koordinatensystem relativ zu einer Position eines Fahrzeuges oder Fahrzeuggespannes mit einem zugehörigen Fahrzeug-Koordinatensystem
DE102010006323A1 (de) * 2010-01-29 2011-08-04 Continental Teves AG & Co. OHG, 60488 Stereokamera für Fahzeuge mit Anhänger
DE102010008324A1 (de) * 2010-02-17 2011-08-18 ZF Lenksysteme GmbH, 73527 Erfassung und Auswertung einer Lagebeziehung zwischen einem Kraftfahrzeug und einem Anhänger
DE102011101990B3 (de) * 2011-05-19 2012-10-18 Volkswagen Aktiengesellschaft Verfahren und Vorrichtung zur Bestimmung eines relativen Deichselwinkels

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102004022113A1 (de) * 2004-05-05 2005-11-24 Robert Bosch Gmbh Überwachung eines PKW-Anhängers mit einer Rückfahrkamera
DE102008045436A1 (de) * 2008-09-02 2010-03-04 Volkswagen Ag Verfahren und Vorrichtung zum Bestimmen eines Knickwinkels zwischen einem Zugfahrzeug und einem Anhänger
DE102009019399A1 (de) * 2009-04-29 2010-11-11 Audi Ag Verfahren zur automatischen Bestimmung wenigstens einer die Änderung der Lage eines Kraftfahrzeugs beschreibenden Zielgröße
DE102009057996A1 (de) * 2009-11-12 2011-05-19 Daimler Ag Verfahren zur Bestimmung einer Position einer Kamera mit einem zugehörigen Kamera-Koordinatensystem relativ zu einer Position eines Fahrzeuges oder Fahrzeuggespannes mit einem zugehörigen Fahrzeug-Koordinatensystem
DE102010006323A1 (de) * 2010-01-29 2011-08-04 Continental Teves AG & Co. OHG, 60488 Stereokamera für Fahzeuge mit Anhänger
DE102010006521A1 (de) * 2010-02-02 2010-09-30 Daimler Ag Verfahren und Vorrichtung zur Bestimmung des Knickwinkels eines Fahrzeuggespanns
DE102010008324A1 (de) * 2010-02-17 2011-08-18 ZF Lenksysteme GmbH, 73527 Erfassung und Auswertung einer Lagebeziehung zwischen einem Kraftfahrzeug und einem Anhänger
DE102011101990B3 (de) * 2011-05-19 2012-10-18 Volkswagen Aktiengesellschaft Verfahren und Vorrichtung zur Bestimmung eines relativen Deichselwinkels

Also Published As

Publication number Publication date
DE102011113197A1 (de) 2013-03-14

Similar Documents

Publication Publication Date Title
DE102011113197B4 (de) Verfahren und Vorrichtung zur Bestimmung eines Winkels zwischen einem Zugfahrzeug und einem daran gekoppelten Anhänger, und Fahrzeug
DE102008031784B4 (de) Verfahren und Vorrichtung zur Verzerrungskorrektur und Bildverbesserung eines Fahrzeugrückblicksystems
DE102006003538B3 (de) Verfahren zum Zusammenfügen mehrerer Bildaufnahmen zu einem Gesamtbild in der Vogelperspektive
DE102008058279A1 (de) Verfahren und Vorrichtung zur Kompensation eines Rollwinkels
DE102012221563B4 (de) Funktionsdiagnose und validierung eines fahrzeugbasierten bildgebungssystems
DE102006010735A1 (de) Fahrzeugumgebungsüberwachungsvorrichtung
DE112016001150T5 (de) Schätzung extrinsischer kameraparameter anhand von bildlinien
DE102015107390A1 (de) Verfahren und Vorrichtung zum automatischen Kalibrieren von Rundumsichtsystemen
DE102016213495A1 (de) Fahrassistenzverfahren, Fahrassistenzsystem und Fahrzeug
WO2009049750A2 (de) Verfahren zum kalibrieren einer anordnung mit mindestens einer omnidirektionalen kamera und einer optischen anzeigeeinheit
DE102017109445A1 (de) Kalibration einer Fahrzeug-Kameraeinrichtung in Fahrzeuglängsrichtung oder Fahrzeugquerrichtung
DE102017011177A1 (de) Verfahren zum Ermitteln eines Knickwinkels eines Fahrzeug-Gespanns, Ermittlungseinrichtung sowie Fahrzeug-Gespann
DE102016104730A1 (de) Verfahren zum Detektieren eines Objekts entlang einer Straße eines Kraftfahrzeugs, Rechenvorrichtung, Fahrerassistenzsystem sowie Kraftfahrzeug
DE102014114221A1 (de) Verfahren zum Detektieren von einem Objekt in einem Umgebungsbereich eines Kraftfahrzeugs, Fahrerassistenzsystem und Kraftfahrzeug
DE102016124747A1 (de) Erkennen eines erhabenen Objekts anhand perspektivischer Bilder
DE102015108944A1 (de) Rundsichtsystem und Betriebsverfahren davon
DE102017106152A1 (de) Ermitteln einer Winkelstellung eines Anhängers mit optimierter Vorlage
DE102006044615A1 (de) Verfahren zur Kalibrierung von Bilderfassungseinrichtungen in Fahrzeugen
DE102019202269B4 (de) Verfahren zum Kalibrieren einer mobilen Kameraeinheit eines Kamerasystems für ein Kraftfahrzeug
DE112017007237T5 (de) Fahrerzustandsabschätzungsvorrichtung und fahrerzustandsabschätzungsverfahren
DE102016216962B3 (de) Verfahren und Steuerungseinheit zur Nachführung eines Bildausschnitts
DE102005005242A1 (de) Verfahren und Vorrichtung zum Bestimmen eines Kameraoffsets
DE102019122086A1 (de) Fahrerassistenz für eine Kombination
DE102014219428A1 (de) Selbstkalibrierung eines Stereokamerasystems im Auto
DE102010034127A1 (de) Verfahren zum Anzeigen von Bildern auf einer Anzeigeeinrichtung in einem Kraftfahrzeug, Fahrerassistenzsystem und Kraftfahrzeug

Legal Events

Date Code Title Description
R163 Identified publications notified
R012 Request for examination validly filed
R016 Response to examination communication
R018 Grant decision by examination section/examining division
R020 Patent grant now final