DE102018105951B4 - Verfahren zum dynamischen anzeigen von bildern auf einer elektronischen anzeigevorrichtung eines fahrzeugs - Google Patents

Verfahren zum dynamischen anzeigen von bildern auf einer elektronischen anzeigevorrichtung eines fahrzeugs Download PDF

Info

Publication number
DE102018105951B4
DE102018105951B4 DE102018105951.5A DE102018105951A DE102018105951B4 DE 102018105951 B4 DE102018105951 B4 DE 102018105951B4 DE 102018105951 A DE102018105951 A DE 102018105951A DE 102018105951 B4 DE102018105951 B4 DE 102018105951B4
Authority
DE
Germany
Prior art keywords
vehicle
image
electronic display
display device
primary image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
DE102018105951.5A
Other languages
English (en)
Other versions
DE102018105951A1 (de
Inventor
Luis M. Goncalves
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
GM Global Technology Operations LLC
Original Assignee
GM Global Technology Operations LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by GM Global Technology Operations LLC filed Critical GM Global Technology Operations LLC
Publication of DE102018105951A1 publication Critical patent/DE102018105951A1/de
Application granted granted Critical
Publication of DE102018105951B4 publication Critical patent/DE102018105951B4/de
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R16/00—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
    • B60R16/02—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
    • B60R16/023—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements for transmission of signals between vehicle parts or subsystems
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/22—Display screens
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/60—Instruments characterised by their location or relative disposition in or on vehicles
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/80—Arrangements for controlling instruments
    • B60K35/81—Arrangements for controlling instruments for controlling displays
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/23—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
    • B60R1/26—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view to the rear of the vehicle
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/29—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area inside the vehicle, e.g. for viewing passengers or cargo
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/60—Editing figures and text; Combining figures or text
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50—Constructional details
    • H04N23/54—Mounting of pick-up tubes, electronic image sensors, deviation or focusing coils
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/272—Means for inserting a foreground image in a background image, i.e. inlay, outlay
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/20—Optical features of instruments
    • B60K2360/21—Optical features of instruments using cameras
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/77—Instrument locations other than the dashboard
    • B60K2360/777—Instrument locations other than the dashboard on or in sun visors
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B60R2300/304—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing using merged images, e.g. merging camera image with stored images
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/8006—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for monitoring and displaying scenes of vehicle interior, e.g. for monitoring passengers or cargo
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/8033—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for pedestrian protection
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/8046—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for replacing a rear-view mirror system
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/58—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Mechanical Engineering (AREA)
  • Signal Processing (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Transportation (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Traffic Control Systems (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Computer Graphics (AREA)

Abstract

Verfahren zum Anzeigen von Bildern auf einer in einem Fahrzeug (10) beinhalteten elektronischen Anzeigevorrichtung (58), das Verfahren umfassend:
das Erzeugen eines primären Bilds (102), das auf der in dem Fahrzeug (10) beinhalteten elektronischen Anzeigevorrichtung (58) anzuzeigen ist;
das Empfangen von Sensorsignalen von einem oder mehreren am Fahrzeug (10) positionierten Sensoren (26);
das Erzeugen eines sekundären Bilds (104), das auf der elektronischen Anzeigevorrichtung (58) anzuzeigen ist;
das Anzeigen des primären Bilds (102) auf der elektronischen Anzeigevorrichtung (58) und des sekundären Bilds (104) auf der elektronischen Anzeigevorrichtung (58), wobei das sekundäre Bild (104) auf dem primären Bild (102) in einer Position überlagert wird, die zumindest teilweise auf den empfangenen Sensorsignalen basiert; und
das Erfassen unter Verwendung der empfangenen Sensorsignale, dass ein Objekt (14) im primären Bild (102) abgebildet ist, und basierend auf dem Erfassen das Ermitteln einer Stelle auf dem primären Bild (102), auf der das sekundäre Bild (104) zu überlagern ist;
wobei der Erfassungsschritt ferner das Ermitteln eines Bereichs (106) auf dem primären Bild (102) beinhaltet, auf dem das Objekt (14) abgebildet ist, und wobei die Stelle auf dem primären Bild (102), auf dem das sekundäre Bild (104) zu überlagern ist, auf dem Bereich auf dem primären Bild (102) basiert, auf dem das Objekt (14) erfasst wird.

Description

  • EINLEITUNG
  • Das technische Gebiet betrifft das Anzeigen von Bildern auf elektronischen Anzeigevorrichtungen, die in einem Fahrzeug beinhaltet sind und das Positionieren oder Verändern der Bilder basierend auf Sensoren oder sonstigen Daten, die am Fahrzeug empfangen oder erhalten werden.
  • Fahrzeuge beinhalten zahlreiche elektronische Komponenten, wie elektronische Anzeigevorrichtungen. Einige Fahrzeuge beinhalten mittlerweile elektronische Anzeigespiegel, die Bilder anzeigen, die von einer Kamera oder einem Lichtsensor erhalten wurden, und die als herkömmliche Rück- oder Seitenspiegel des Fahrzeugs fungieren bzw. diese nachahmen. Diese elektronischen Anzeigespiegel können die Fähigkeit beinhalten, verschiedene Bilder anzuzeigen, wie Bilder aus einem das Fahrzeug umgebenden Umfeld und Bilder, die automatisch vom Fahrzeug erzeugt werden. Somit können bestimmte elektronische Anzeigevorrichtungen des Fahrzeugs zusammen mit einem primären Bild (wie einem eines sich hinter dem Fahrzeug befindlichen Umfelds) zusätzliche Bilder anzeigen und in einigen Szenarien können diese zusätzlichen sekundären Bilder die Sicht auf ein Objekt im primären Bild verdecken.
  • US 2016 / 0 368 418 A1 offenbart eine Rückblicküberwachungseinrichtung für ein Fahrzeug. Die Rückblicküberwachungseinrichtung weist ein Gehäuse mit einer Anzeige auf, die einen ersten Anzeigebereich und einen zweiten Anzeigebereich umfasst. Der erste Anzeigebereich, der der gesamten Fläche der Anzeige entspricht, zeigt ein von einer Rückblickkamera aufgezeichnetes Bild an. Der zweite Anzeigebereich, der einem kleineren Anzeigebereich innerhalb des ersten Anzeigebereichs entspricht, zeigt ein jeweiliges von an den Außenspiegeln angebrachten Kameras aufgezeichnetes Bild auf einer Seite des Anzeigebereichs an, die einer Betätigung eines jeweiligen Blinkers entspricht. Durch Bewegen eines Fingers am Rand der Anzeige kann der Benutzer den zweiten Anzeigebereich innerhalb des ersten Anzeigebereichs verschieben und dessen Größe verändern. Weiterer Stand der Technik ist aus DE 20 2014 102 291 U1 bekannt.
  • ZUSAMMENFASSUNG
  • Aufgabe der Erfindung ist es, ein verbessertes Verfahren zum Anzeigen von Bildern auf einer in einem Fahrzeug beinhalteten elektronischen Anzeigevorrichtung bereitzustellen.
  • Zur Lösung der Aufgabe sind Verfahren mit den Merkmalen der Ansprüche 1 und 6 vorgesehen. Vorteilhafte Ausbildungen der Erfindung sind den Unteransprüchen, der Beschreibung und den Zeichnungen zu entnehmen..
  • Gemäß einer Ausführungsform wird ein Verfahren zum Anzeigen von Bildern auf einer elektronischen Anzeigevorrichtung, die in einem Fahrzeug enthalten ist, bereitgestellt, das Verfahren beinhaltend: das Generieren eines primären Bilds, um etwas auf einer im Fahrzeug beinhalteten elektronischen Anzeigevorrichtung anzuzeigen; das Empfangen von Sensorsignalen von einem oder mehreren sich am Fahrzeug befindlichen Sensoren; das Generieren eines sekundären Bilds zum Anzeigen auf der elektronischen Anzeigevorrichtung; das Anzeigen des primären Bilds auf der elektronischen Anzeigevorrichtung und Anzeigen des sekundären Bilds auf der elektronischen Anzeigevorrichtung, worin das sekundäre Bild über dem primären Bild in einer Position überlagert ist, die zumindest teilweise auf den empfangenen Sensorsignalen basiert; und das Erfassen unter Verwendung der empfangenen Sensorsignale, dass ein Objekt im primären Bild abgebildet ist, und basierend auf dem Erfassen das Ermitteln einer Stelle auf dem primären Bild, auf der das sekundäre Bild zu überlagern ist, wobei der Erfassungsschritt ferner das Ermitteln eines Bereichs auf dem primären Bild beinhaltet, auf dem das Objekt abgebildet ist, und wobei die Stelle auf dem primären Bild, auf dem das sekundäre Bild zu überlagern ist, auf dem Bereich auf dem primären Bild basiert, auf dem das Objekt erfasst wird.
  • Gemäß einer anderen Ausführungsform wird ein Verfahren zum Anzeigen von Bildern auf einer in einem Fahrzeug enthaltenen elektronischen Anzeigevorrichtung bereitgestellt, das Verfahren umfassend: das Anzeigen eines primären Bilds auf der im Fahrzeug enthaltenen elektronischen Anzeigevorrichtung; das Überwachen eines Fahrzeug-Statusparameters unter Verwendung eines oder mehrerer im Fahrzeug beinhalteter Sensoren; basierend auf dem überwachten Fahrzeug-Statusparameter, das Ermitteln, ob ein sekundäres Bild auf der elektronischen Anzeigevorrichtung anzuzeigen ist; nachdem ermittelt worden ist, dass das sekundäre Bild auf der elektronischen Anzeigevorrichtung anzuzeigen ist, das Ermitteln eines Bereichs auf der elektronischen Anzeigevorrichtung, um das sekundäre Bild anzuzeigen, wobei unter Verwendung von empfangenen Signalen des einen oder der mehreren Sensoren erfasst wird, dass ein Objekt im primären Bild abgebildet ist, und basierend auf dem Erfassen eine Stelle auf dem primären Bild ermittelt wird, auf der das sekundäre Bild zu überlagern ist, wobei der Erfassungsschritt ferner das Ermitteln eines Bereichs auf dem primären Bild beinhaltet, auf dem das Objekt abgebildet ist, und wobei die Stelle auf dem primären Bild, auf dem das sekundäre Bild zu überlagern ist, auf dem Bereich auf dem primären Bild basiert, auf dem das Objekt erfasst wird; und das Anzeigen des sekundären Bilds am ermittelten Bereich auf der elektronischen Anzeige, wobei der Bereich auf der elektronischen Anzeigevorrichtung, auf dem das sekundäre Bild anzuzeigen ist, mit der Stelle auf dem primären Bild übereinstimmt, auf der das sekundäre Bild zu überlagern ist.
  • Gemäß einer noch weiteren Ausführungsform wird ein System zum Anzeigen von Bildern in einem Fahrzeug bereitgestellt. Das System umfasst einen oder mehrere sich am Fahrzeug befindliche Sensoren, eine nach hinten gerichtete Kamera, die konfiguriert ist, ein primäres Bild zu generieren, eine zweite Kamera, die konfiguriert ist, ein sekundäres Bild zu generieren, ein elektronischer Anzeigespiegel, der konfiguriert ist, das primäre Bild von der nach hinten gerichteten Kamera und das sekundäre Bild von der zweiten Kamera anzuzeigen, und eine Steuereinheit, die mit einem oder mehreren Sensoren, der nach hinten gerichteten Kamera, der zweiten Kamera, und dem elektronischen Anzeigespiegel verbunden ist, wobei die Steuereinheit konfiguriert ist, die Sensorsignale von einem oder mehreren sich am Fahrzeug befindlichen Sensoren zu empfangen und das primäre Bild auf dem elektronischen Anzeigespiegel und das sekundäre Bild auf dem elektronischen Anzeigespiegel anzuzeigen, wobei das sekundäre Bild auf dem primären Bild in einer Position überlagert ist, die zumindest teilweise auf den empfangenen Sensorsignalen basiert.
  • Figurenliste
  • Bevorzugte exemplarische Ausführungsformen werden im Folgenden in Verbindung mit den beigefügten Zeichnungen beschrieben, worin gleiche Kennzeichnungen gleiche Elemente bezeichnen und worin:
    • 1 ist Blockdiagramm, das eine Ausführungsform eines Systems darstellt, das fähig ist, das hierin offenbarte Verfahren zu verwenden;
    • 2 ist eine schematische Veranschaulichung eines exemplarischen elektronischen Anzeigespiegels, der mit dem System aus 1 während des Stattfindens eines ersten Szenarios verwendet werden kann;
    • 3 ist eine schematische Veranschaulichung eines exemplarischen elektronischen Außenspiegels, der mit dem System aus 1 während des Stattfindens zweiten Szenarios verwendet werden kann;
    • 4 ist eine schematische Veranschaulichung eines exemplarischen elektronischen Anzeigespiegels, der mit dem System aus 1 während des Stattfindens eines dritten Szenarios verwendet werden kann; und
    • 5 ist ein Flussdiagramm eines exemplarischen Verfahrens zum Anzeigen von Bildern auf einer im Fahrzeug beinhalteten elektronischen Anzeigevorrichtung.
  • AUSFÜHRLICHE BESCHREIBUNG DER VERANSCHAULICHTEN AUSFÜHRUNGSFORMEN
  • Die nachfolgend beschriebenen Systeme und Verfahren befähigen ein Fahrzeug mehrere Bilder auf einer in einem Fahrzeug beinhalteten elektronischen Anzeigevorrichtung anzuzeigen. Die elektronische Anzeigevorrichtung kann verwendet werden, um Bilder zur Ansicht durch einen Fahrzeugführer anzuzeigen. Die Bilder können von einer Steuereinheit und/oder anderen Fahrzeugsystem-Modulen über einen Kommunikationsbus erhalten werden. In einigen Ausführungsformen kann die elektronische Anzeigevorrichtung ein in einem Fahrzeug angebrachter elektronischer Anzeigespiegel sein und kann Bilder anzeigen, die von einer auf einem Fahrzeug angebrachten Rückblick-Videokamera, die auf einen sich hinter dem Fahrzeug befindlichen Bereich gerichtet ist, empfangen werden. Die Steuereinheit kann verwendet werden, um ein primäres Bild und ein oder mehrere sekundäre Bilder, die auf der elektronischen Anzeigevorrichtung anzuzeigen sind, zu generieren. Die Steuereinheit kann auch Sensorsignale empfangen und/oder einen nachstehend definierten Fahrzeugzustandsparameter (z. B. die Position eines externen Objekts) überwachen. Basierend auf den empfangenen Sensorsignalen und/oder dem überwachten Fahrzeugzustandsparameter kann die Steuereinheit ermitteln, ob bestimmte Bilder (z. B. die primären oder sekundären Bilder) auf der elektronischen Anzeigevorrichtung anzuzeigen sind. Darüber hinaus kann das Positionieren der Bilder, sowie sonstiger Anzeigecharakteristiken (z. B. Transparenzgrad, Größe) basierend auf den empfangenen Sensorsignalen und/oder dem überwachten Fahrzeugzustandsparameter ermittelt werden. In einigen Ausführungsformen kann das sekundäre Bild (können die sekundären Bilder) auf dem primären Bild überlagert werden und dieses sekundäre Bild kann (diese sekundären Bilder können) so positioniert und/oder geändert werden, dass sie die Interferenz mit in den primären Bildern angezeigten Objekten (wie einem anderen Fahrzeug) reduzieren.
  • Unter nunmehriger Bezugnahme auf 1 wird ein Fahrzeug 10 mit einem Fahrzeugelektroniksystem 12 dargestellt, das verwendet werden kann, um das hierin offenbarte Verfahren zu implementieren. Das Fahrzeugelektroniksystem 12 beinhaltet im Allgemeinen eine elektronische Anzeige in Form eines elektronischen Anzeigespiegels 28 und einer Steuereinheit 30. Es versteht sich, dass das offenbarte Verfahren mit einer beliebigen Anzahl an unterschiedlichen Systemen verwendet werden kann und nicht speziell auf die hierin gezeigte Betriebsumgebung einschränkt ist Auch die Architektur, Konstruktion, Konfiguration und der Betrieb des Systems 12 und seiner einzelnen Komponenten sind in der Technik allgemein bekannt. Daher stellen die folgenden Absätze einfach eine Kurzübersicht eines solchen Fahrzeugelektroniksystems 12 bereit; jedoch könnten andere Systeme, die hier nicht dargestellt sind, die offenbarten Verfahren auch einsetzen.
  • Das Fahrzeug 10 ist in der veranschaulichten Ausführungsform als ein Pkw dargestellt, aber es sollte klar sein, dass jedes andere Fahrzeug, einschließlich Motorräder, LKWs, Sport Utility Vehicles (SUV), Campingfahrzeuge (RVs), Schiffe, Flugzeuge usw., ebenfalls verwendet werden kann. Einige der Fahrzeugelektronikvorrichtungen 20 werden im Allgemeinen in 1 dargestellt und beinhalten den elektronischen Außenspiegel 28, die Steuereinheit 30, das Chassis-Steuermodul (BCM) 40, ein GPS-Modul 22, eine Fahrzeug-zu-Fahrzeug-Einheit (V2V) 24, Sensoren 26, sonstige VSMs 42, Benutzeroberflächen des Fahrzeugs 52-58, Kameras 62-68, und zahlreiche andere Komponenten und Vorrichtungen. Einige oder sämtliche aller unterschiedlichen Fahrzeugelektronikvorrichtungen können zur Kommunikation miteinander über einen oder mehrere Kommunikationsbusse, wie Bus 44, verbunden werden, wohl jedes Betriebswegekommunikationssystem bzw. betriebsfähige Kommunikationsart verwendet werden kann.
  • Das Fahrzeug 10 kann zahlreiche Fahrzeugsystem-Module (VSMs) als Teil des Fahrzeugelektroniksystems 12 beinhalten, wie das GPS-Modul 22, eine Motorsteuereinheit (ECU) (nicht dargestellt), Sensoren 26, elektronische Anzeigespiegel 28, die Steuereinheit 30, das Chassis-Steuermodul (BCM) 40, Benutzeroberflächen des Fahrzeugs 52-58, und Kameras 62-68, wie nachfolgend detaillierter beschrieben werden wird. Das Fahrzeug 10 kann auch andere VSMs 42 in Form von elektronischen Hardwarekomponenten beinhalten, die sich im gesamten Fahrzeug befinden und eine Eingabe von einem oder mehreren Sensoren empfangen und die erfassten Eingaben verwenden können, um Diagnose-, Überwachungs-, Steuerungs-, Berichterstattungs- und/oder andere Funktionen auszuführen. Zum Beispiel können andere VSMs eine Telematikeinheit, ein zentrales Stapelmodul (CSM), eine Infotainmenteinheit, ein Antriebsstrangsteuermodul oder eine Getriebesteuereinheit beinhalten. Jedes der VSMs 42 kann durch einen Kommunikationsbus 44 mit den anderen VSMs, sowie der Steuereinheit 30 (direkt und/oder über den Bus 44) verbunden, und kann dafür programmiert werden, Fahrzeugsystem- und Subsystemdiagnosetests auszuführen. Fachleute auf dem Fachgebiet werden erkennen, dass es sich bei den vorgenannten VSMs nur um Beispiele von einigen der Module handelt, die im Fahrzeug 10 verwendet werden können, zahlreiche andere Module jedoch ebenfalls möglich sind.
  • Das GPS (Global Positioning System)-Modul 22 empfängt Funksignale von einer Konstellation von GPS-Satelliten (nicht dargestellt). Das GPS-Modul 22 kann diese Ortsdaten der Steuereinheit 30 bereitstellen, die diese Daten verwenden kann, um bekannte Standorte, wie das Zuhause oder den Arbeitsplatz des Fahrzeugführers, zu identifizieren. Zusätzlich kann das GPS Modul 22 verwendet werden, um dem Fahrzeugführer Navigations- und sonstige positionsbezogene Dienste bereitzustellen. Navigationsinformationen können auf dem elektronischen Anzeigespiegel 28 und/oder der Anzeigevorrichtung 58 (oder einer anderen sich innerhalb des Fahrzeugs befindlichen Anzeigevorrichtung) in der Form eines primären oder sekundären Bilds, einschließlich einer oder mehrerer Grafiken, oder dergleichen, präsentiert werden. Oder die Navigationsinformationen können in verbaler Form präsentiert werden, wie es beispielsweise bei der Wegbeschreibungsnavigation der Fall ist. Die Navigationsdienste können unter Verwendung von einem zugehörigen Fahrzeugnavigationsmodul (das Teil des GPS-Moduls 22 sein kann) bereitgestellt werden, oder einige oder alle Navigationsdienste können über eine im Fahrzeug installierte Telematikeinheit erfolgen, worin die Positionsinformationen zum Zweck des Ausstattens des Fahrzeugs mit Navigationskarten, Kartenanmerkungen (Sehenswürdigkeiten, Restaurants usw.), Routenberechnungen und dergleichen zu einem entfernten Standort gesendet werden. Das GPS-Modul 22 kann als ein Sensor verwendet werden, um Eingaben, die sich auf nahegelegene Objekte oder Fahrzeuge beziehen, zur Verwendung innerhalb der hierin beschriebenen Verfahren bereitzustellen.
  • Die Fahrzeug-zu-Fahrzeug-Einheit (V2V) 24 ist eine drahtlose Kommunikationsvorrichtung, durch die das Host-Fahrzeug 10 mit einem oder mehreren, ähnlich ausgestatteten und nahegelegenen Fahrzeugen gemäß einem V2V-Kommunikationssystem, wie einer V2V-Kommunikationsverbindung zwischen zwei V2V-fähigen Fahrzeugen, kommunizieren kann. Die V2V-Einheit 24 kann als ein Sensor verwendet werden, um Eingaben, die sich auf nahegelegene Objekte oder Fahrzeuge, wie Fahrzeug 14, beziehen, zur Verwendung innerhalb der hierin beschriebenen Verfahren bereitzustellen.
  • Fahrsensoren 26 stellen dem Fahrzeug eine Sensoreingabe bereit, die verschiedene Sensorwerte, Messungen, und/oder andere Informationen beinhaltet, die zur Durchführung des vorliegenden Verfahrens nützlich sein können. Zum Beispiel können Fahrzeugsensoren 26 Sensoren oder sonstige Komponenten zum Messen der Folgenden beinhalten: Präsenz des Objekts 14 um den toten Winkel des Fahrzeugs herum, absolute Geschwindigkeit des Fahrzeugs, Position des Objekts 14 mit Bezug auf das Fahrzeug, Geschwindigkeit des Objekts 14 mit Bezug auf das Fahrzeug, absolute Geschwindigkeit des Objekts 14, Raddrehzahl des Fahrzeugs, Radbeschleunigung des Fahrzeugs, Fahrzeuggeschwindigkeit, Fahrzeugbeschleunigung (Längs- und/oder Querbeschleunigung), Gierrate des Fahrzeugs, Lenkradwinkel des Fahrzeugs, sonstige Fahrzeugdynamiken, sowie sonstige auf dem Stand der Technik bekannte aber hier nicht erwähnte Sensoren. Die Sensoren 26 können eine Vielzahl von verschiedenen Sensorarten und Techniken verwenden, einschließlich RADAR-Vorrichtungen, Laser-Vorrichtungen, LIDAR-Vorrichtungen, Ultraschall-Vorrichtungen, Sicht-Vorrichtungen (z. B. Kamera usw.), Vorrichtungen zum Empfangen von Übermittlungen von straßenseitigen Baken oder Sensoren, andere bekannte Vorrichtungen oder Kombinationen davon, ferner umfassend Vorrichtungen, die Raddrehzahl, Bodengeschwindigkeit, einen Beschleunigungssensor, eine inertiale Messeinheit (IMU), eine Gaspedalposition, eine Gangschaltungsauswahl, eine Motordrehzahl, eine Motorleistung, eine Drosselklappenstellung, einen Lenkradwinkel, um nur einige zu nennen. Fachlich versierte Techniker werden begrüßen, dass diese Sensoren mit optischer, elektromagnetischer und/oder anderer Technologie arbeiten können, und dass aus diesen Messwerten weitere Parameter abgeleitet bzw. berechnet werden können (z. B. kann aus der Geschwindigkeit die Fahrzeugbeschleunigung berechnet werden). Die Sensoren 26 können in der Hardware, Software, Firmware oder Kombination hiervon einbezogen sein, und diese Sensoren können die Bedingungen, für die sie bereitgestellt wurden, direkt erfassen oder messen, oder sie können solche Bedingungen basierend auf den Informationen von anderen Sensoren, Komponenten, Geräten, Modulen, Systemen usw. indirekt bewerten. Es ist für jegliche der verschiedenen nachstehend beschriebenen Sensorwerte möglich, durch eine andere Komponente, eine andere Vorrichtung, ein anderes Modul, ein anderes System usw. im Host-Fahrzeug 10 bereitgestellt zu werden, anstatt durch ein tatsächliches Sensorelement bereitgestellt zu werden. Es sollte beachtet werden, dass die vorgenannten Szenarien nur einige der Möglichkeiten darstellen, da das vorliegende System und Verfahren nicht auf einen bestimmten Sensor oder eine bestimmte Sensoranordnung beschränkt sind.
  • Der elektronische Anzeigespiegel 28 ist eine elektronische Anzeigevorrichtung und beinhaltet eine Videoanzeige, die in die Rückspiegeleinheit oder das Rückspiegelgehäuse integriert ist, sodass die Anzeige dem Fahrer die Videoausgabe von der Rückblickkamera 62 in Echtzeit, sowie andere Grafiken oder Bilder (z. B. Bilder von Kameras 64-68) zeigt. Wie hierin verwendet, kann eine elektronische Anzeigevorrichtung eine beliebige Anzeigevorrichtung sein, die Bilder, Videoaufnahmen, Grafiken usw., basierend auf elektronischen Signalen, die empfangen werden, anzeigen kann. Es versteht sich, dass der Begriff „Bilder“, wie hierin verwendet, stille Bilder, Echtzeit- oder aufgenommene Videos, Grafiken, und dergleichen beinhalten kann. Gemäß der exemplarischen Ausführungsform aus 1 ist der elektronische Anzeigespiegel 28 mit der Steuereinheit 30 verbunden und empfängt eine verbesserte Videoausgabe. Der elektronische Anzeigespiegel kann eine beliebige Anzahl an verschiedenen Anzeigetechnologien verwenden, wie beispielsweise eine Flüssigkristallanzeige (LCD) oder eine Leuchtdiodenanzeige (LED). Es sollte erkannt werden, dass das hierin beschriebene System und das hierin beschriebene Verfahren jeden geeigneten Typ eines elektronischen Anzeigespiegels 28 verwenden kann und nicht auf irgendeine spezielle beschränkt sind. So kann beispielsweise der elektronische Anzeigespiegel 28 ein Vollanzeige-Spiegel (FDM) sein, bei dem die gesamte sichtbare Oberfläche des Geräts ein Video von einer der Kameras 62-68 zeigt; es kann der Typ eines elektronischen Anzeigespiegels sein, wobei nur ein Teil der Anzeigefläche ein Video von einer der Kameras 62-68 zeigt, wohingegen andere Abschnitte der Anzeigeoberfläche andere Informationen (z. B. Tum-by-Tum- oder andere Navigationsanweisungen, Kompass- oder Kursinformationen, Host-Fahrzeugleistungsdaten usw.) zeigen; er könnte Tag-und Nacht-Modi, die die Helligkeit entsprechend anpassen, aufweisen; oder er könnte einen Touchscreen aufweisen, sodass die Benutzer Auswahlen oder anderweitig Eingangsdaten machen können, um nur einige der Möglichkeiten zu nennen. Anstelle des Positionierens des elektronischen Anzeigespiegels 28 an der herkömmlichen Position eines Rückspiegels (d. h. an der vorderen Windschutzscheibe an einer oberen, mittleren Position angebracht) ist es möglich, dass er ein Teil einer Mittelkonsolen-Infotainment- oder Rücksicherungsanzeige oder eines Teils einer anderen Anzeige ist. Die hierin beschriebenen Systeme und Verfahren sind insbesondere für elektronische Anzeigespiegel anwendbar, da die Größe des Spiegels in der Regel kleiner als andere Fahrzeuganzeigeeinheiten ist. Da elektronische Anzeigespiegel dem Fahrer hinsichtlich der Fahrzeugumgebung sehr nützliche Informationen bereitstellen können, können die vorliegenden Systeme und Verfahren eine wirksame und vorteilhafte Präsentation derartiger Informationen ermöglichen.
  • Der elektronische Anzeigespiegel 28 kann verwendet werden, um sich ein oder mehrere sich hinter dem Fahrzeug befindliche Objekte, wie Zielobjekt 14, anzusehen. Objekt 14 wird in der veranschaulichten Ausführungsform als ein Personenkraftwagen abgebildet, wobei jedoch zu beachten ist, dass Objekt 14 irgendein anderes identifizierbares Objekt sein kann, wie ein Fußgänger, ein Gebäude, oder ein Pylon. In einer Ausführungsform, in der Objekt 14 ein anderes Fahrzeug ist, kann dieses andere Fahrzeug 14 mit Fahrzeug 10 über V2V-Übermittlungen oder sonstige Übermittlungen (z. B. zellulärer Art, SRWC) kommunizieren. Darüber hinaus kann es mehr als ein Objekt 14 geben.
  • Das Steuermodul 30 kann zumindest teilweise für das Durchführen oder Ausführen eines oder mehrerer der nachstehend beschriebenen Verfahren verantwortlich sein. In einer bevorzugten Ausführungsform kann die Steuereinheit 30 eine Video-Steuereinheit sein, die bestimmt ist, um Eingaben von einer oder mehreren Fahrzeugkameras, wie den Kameras 62-68, zu empfangen und zu verarbeiten und Ausgaben an eine oder mehrere Fahrzeugvorrichtungen, wie den elektronischen Anzeigespiegel 28, bereitzustellen. Alternativ kann die Steuereinheit 30 ein Teil von einem oder mehreren Fahrzeugsystemen, wie einem aktiven Sicherheitssystem, um nur ein Beispiel zu nennen, sein, oder als Teil dieser verwendet werden. Wie in der exemplarischen Ausführungsform aus 1 dargestellt, beinhaltet die Steuereinheit 30 einen drahtlosen Zugangspunkt (WAP) 32, einen Prozessor 34, einen Speicher 36, und eine oder mehrere Antennen 38 (wobei nur eine dargestellt ist). In anderen Ausführungsformen kann die Steuereinheit 30 keinen drahtlosen Zugangspunkt beinhalten, aber kann stattdessen ein Modem, einen Internet-Anschluss, oder sonstige Hardware beinhalten, die für drahtgebundene Verbindungen über den Kommunikationsbus 44 verwendet werden kann. Gemäß einer exemplarischen Ausführungsform ist die Steuereinheit 30 mit den Kameras 62-68 verbunden und empfängt Videoeingaben, ist mit der V2V-Einheit 24 verbunden und empfängt Verkehrseingaben, ist mit den Fahrzeugsensoren 26 verbunden und empfängt Sensoreingaben, ist mit dem GPS-Modul 22 verbunden und empfängt Navigationseingaben, und ist mit dem elektronischen Anzeigespiegel 28 verbunden und stellt Videoausgaben bereit, obwohl andere Kombinationen von Vorrichtungen stattdessen mit der Steuereinheit verbunden sein können. Jede dieser Verbindungen kann über den Kommunikationsbus 44, über WAP 32, und/oder über jedes andere betätigbare direkte oder indirekte Verbindungsverfahren getätigt werden. Die Steuereinheit 30 kann eine Vielzahl von elektronischen Verarbeitungsvorrichtungen, Speichervorrichtungen, Eingabe/Ausgabe-Vorrichtungen (I/O) und/oder andere bekannte Komponenten beinhalten und kann verschiedene steuerungs- und/oder kommunikationsbezogene Funktionen ausführen.
  • In einer exemplarischen Ausführungsform beinhaltet die Steuereinheit 30 eine elektronische Speichervorrichtung 36, die jede Kombination der folgenden Elemente empfangen und speichern kann: Bild- oder Videodaten von den Kameras 62-68, Informationen hinsichtlich nahegelegener Fahrzeuge von der V2V-Einheit 24, Sensorwerte von den Fahrzeugsensoren 26, Positions- oder Steuerkursdaten vom GPS Modul 22, Nachschlagetabellen oder sonstige Datenstrukturen, Algorithmen (z. B. Algorithmen, die im nachstehend beschriebenen exemplarischen Verfahren enthalten sind) usw., die Speichervorrichtung 36 kann auch relevante Eigenschaften und Hintergrundinformationen hinsichtlich des Host-Fahrzeugs 10 speichern, wie Informationen bezüglich Fahrzeugabmessungen (z. B. Gewicht, Breite und Länge), Bremswege, verhaltensbezogene oder historische Daten über den Fahrer, bestimmte Sensor- oder Kamerastandorte und - orientierungen am Host-Fahrzeug 10 usw. Die Steuereinheit 30 kann auch eine elektronische Verarbeitungsvorrichtung 34 (z. B. einen Mikroprozessor, eine Mikrosteuerung, einen anwendungsspezifischen integrierten Schaltkreis (ASIC) usw.) der Anweisungen für Software, Firmware, Programme, Algorithmen, Scripts, Anwendungen usw., die in der Speichervorrichtung 36 gespeichert werden, ausführt und die hierin beschriebenen Verfahren verwaltet. Die Steuereinheit 30 kann über geeignete Fahrzeugkommunikationen (z. B. einen CAN-Bus oder dergleichen) elektronisch mit anderen Fahrzeugvorrichtungen, Modulen und Systemen verbunden sein und kann bei Bedarf mit diesen zusammenwirken. Dies sind natürlich nur einige der möglichen Anordnungen, Funktionen und Fähigkeiten der Steuereinheit 30, da andere Ausführungsformen ebenfalls verwendet werden könnten.
  • In einigen Ausführungsformen ist die Steuereinheit 30 in der Lage, Daten über Kurzbereichs-drahtlos-Kommunikation (SRWC) zu übermitteln. In vielen Ausführungsformen kann die Steuereinheit 30 speziell konfiguriert sein, um das hierin offenbarte Verfahren durchzuführen. In einer Ausführungsform kann die Steuereinheit 30 ein selbständiges Modul sein oder die Vorrichtung 30 kann in anderen Ausführungsformen als Teil eines oder mehrerer anderer Fahrzeugsystem-Module integriert oder mit einbezogen werden, wie eines Mittelstapelmoduls (CSM), eines Karosserie-Steuermoduls, eines Infotainment-Moduls, eines Telematik-Moduls, einer Kopfeinheit, und/oder eines Gateway-Moduls. In einigen Ausführungsformen, kann die Steuereinheit 30 als eine OEM-installierte (eingebettete) oder als eine Aftermarket-Vorrichtung, die in das Fahrzeug installiert wird, implementiert werden.
  • Die Steuereinheit 30 kann direkt oder indirekt mit einer oder mehreren Kameras, wie den Kameras 62-68 verbunden werden. Die Kameras 62-68 können Videokameras sein, die auf einen bestimmten Bereich innerhalb des Fahrzeugs 10 oder dessen Umgebung ausgerichtet sein können und stellen der Steuereinheit 30 Videoeingaben bereit, die auf dem elektronischen Anzeigespiegel 28 anzuzeigen sind. Die Kameras 62-68 können jede geeignete Art von Kamera, (z. B. eine ladungsgekoppelte Vorrichtung (CCD), ein komplementärer Metalloxidhalbleiter (CMOS) usw.) sein und können jede geeignete Linse aufweisen, die in der Technik bekannt ist, sodass sie nicht auf irgendeine spezielle Art, Marke oder Modell beschränkt sind. In einer Ausführungsform kann die Kamera 62 eine Rückblickkamera sein, die am Fahrzeug positioniert ist, um einem sich hinter dem Fahrzeug 10 befindlichen Bereich zugewandt zu sein, kann die Kamera 64 eine Kamera für den linken toten Winkel sein, die so positioniert ist, dass sie einem toten Winkel auf der linken Seite des Fahrzeugs 10 zugewandt ist, kann die Kamera 66 eine Kamera für den rechten toten Winkel sein, die so positioniert ist, dass sie einem toten Winkel auf der rechten Seite des Fahrzeugs 10 zugewandt ist, und kann die Kamera 68 eine zusätzliche Kamera sein, die an einem beliebigen erwünschten Ort positioniert werden kann, sodass sie im veranschaulichten Beispiel der hinteren Ladefläche des Fahrzeugs 10 zugewandt ist. In anderen Ausführungsformen kann eine oder mehrere der Kameras 62-68 verschiedene Bereiche in und/oder um das Fahrzeug 10 herum, wie einen Rücksitz des Fahrzeugs, eine Ladefläche des Fahrzeugs, einen toten Winkel des Fahrzeugs, einen Innenbereich eines Kofferraums, oder einen Innenbereich eines Anhängers erfassen. Die Kameras 62-68 können der Steuereinheit 30 eine Vielzahl von Bildern (z. B. vom Streaming eines Videos oder eines anderen erfassten Videos abgeleitet) bereitstellen, die diese Bilder dann auf dem elektronischen Anzeigespiegel 28 oder einer anderen Vorrichtung im oder am Fahrzeug 10 anzeigen kann.
  • Gemäß einer Ausführungsform, können die Kameras 62-68, und insbesondere die Rückblickkamera 62 Videodaten bereitstellen, bei denen die Bilder (z. B. Bilder, die Videodaten ausmachen) horizontal gedreht sind (d. h., sie sind das Spiegelbild des von der Kamera ursprünglich erfassten Videos). Die horizontal gespiegelten Videodaten berücksichtigen die Tatsache, dass die Kameras 62-68 und der Fahrer in gegenüberliegende Richtungen schauen, wodurch die Darstellung der Videodaten auf dem elektronischen Anzeigespiegel 28 in einer Orientierung dargestellt werden, die konsistent mit einem konventionellen Rückspiegel und konventionellen Seitenspiegeln ist Einige nicht einschränkende Beispiele von potenziellen Ausführungsformen oder Funktionen, die mit den Kameras 62-68 verwendet werden können, beinhalten: Infrarot-LEDs für Nachtsichtunterstützung; Weitwinkel- oder Fischaugenobjektiv; oberflächenmontierte, eingebaute, am Nummernschild montierte oder seitlich montierte Kameras; stereoskopische Anordnungen mit mehreren Kameras; in Rückleuchten, Bremsleuchten oder andere Bauteile am Fahrzeugheck integrierte Kameras; und verdrahtete oder drahtlose Kameras, um nur einige Möglichkeiten zu nennen.
  • Die Kameras 62-68 senden oder übermitteln Video- oder Bilddaten an die Steuereinheit 30. Zum Beispiel kann die Rückblickkamera 62 der Steuereinheit 30 kontinuierlich Videodaten übermitteln, während die Zündung des Fahrzeugs oder dessen primäres Antriebssystem eingeschaltet oder aktiviert ist. Darüber hinaus können die für den toten Winkel vorgesehenen Kameras 64 und 66 Videodaten des linken und des rechten toten Winkels an die Steuereinheit 30 übermitteln oder senden. Die zusätzliche (oder Ladefläche-) Kamera 68 kann ebenfalls Daten zur Steuereinheit 30 senden. Die Videodaten können verschachtelte oder progressive scanartige Videodaten oder verschachtelte scanartige Videodaten für das Steuermodul 30 sein. Die Steuereinheit kann die Videodaten dann dekodieren, umwandeln, oder auf sonstige Weise verarbeiten, sodass das in den Daten kodierte Video sachgemäß auf dem elektronischen Anzeigespiegel 28, der visuellen Anzeigevorrichtung 58, oder einer anderen Anzeigevorrichtung angezeigt werden kann. Falls der elektronische Anzeigespiegel konfiguriert werden würde, um progressive scanartige Videos anzuzeigen und die an der Steuereinheit empfangenen Videodaten verschachtelte scanartige Videodaten wären, würden die verschachtelten scanartigen Videodaten zum Beispiel an der Steuereinheit so entschachtelt werden, dass die von den Kameras 62-68 empfangenen verschachtelten scanartigen Videodaten in das sachgemäße progressive scanartige Format gesetzt werden könnten, sodass der elektronische Anzeigespiegel 28 die Videodaten sachgemäß anzeigen könnte. Sonstige Bildverarbeitungsverfahren können durch den Prozessor 34 oder sonstige sich im Fahrzeug 10 befindliche Verarbeitungsvorrichtungen durchgeführt werden, wovon vieles dem Fachmann wohlbekannt ist.
  • Wie nachfolgend detaillierter erörtert werden wird, können ein oder mehrere Bilder oder sonstige Grafiken auf dem elektronischen Anzeigespiegel angezeigt werden und solche Bilder oder Grafiken können basierend auf gewissen von den Kameras 62-68 empfangenen Sensordaten oder Video-/Bilddaten angezeigt werden. Durch das Verwenden von Bildverarbeitungsverfahren kann der Prozessor zum Beispiel bestimmte Objekte, wie ein Objekt oder sonstiges Fahrzeug 14, die hinter dem Fahrzeug 10 positioniert sein können, erkennen. In einer Ausführungsform kann die Steuereinheit 30 Bildverarbeitungssoftware verwenden, die in den erfassten Bildern zwischen bestimmten Objekten unterscheiden kann, und kann durch die Analyse einer Serie von Bildern, möglicherweise in Kombination mit Informationen von einem oder mehreren Fahrzeugsensoren, wie die Sensoren 26, eine Position, Entfernung, Geschwindigkeit und/oder Beschleunigung von derartigen identifizierten Objekten mit Bezug auf das Fahrzeug 10 ermitteln. Alternativ kann das Video-Feed ermitteln, dass bestimmte Objekte, wie ein anderes Fahrzeug 14, für einen Fahrzeugführer von Interesse sein könnte, weswegen dem Video, das diese Objekte abbildet, Priorität gegeben werden kann, damit diese auf dem elektronischen Anzeigespiegel 28 angezeigt werden können.
  • Jegliche dieser Vorrichtungen 22-68 können eigenständige Vorrichtungen sein, wie in 1 veranschaulicht, oder sie können in eine andere Vorrichtung, Einheit oder ein anderes Modul eingebaut oder integriert sein (z. B. könnte die V2V-Einheit 24 in einem anderen Fahrzeugkommunikationsmodul beinhaltet sein, einige der Sensoren 26 könnten in einer Trägheitsmesseinheit (IMU) verpackt werden, das GPS-Modul 22 könnte Teil einer Telematikeinheit sein, die Steuereinheit 30 könnte mit dem elektronischen Anzeigespiegel 28 oder einem Kombiinstrument-Steuermodul integriert sein usw.). Darüber hinaus können jegliche dieser Vorrichtungen 22-68, wie in 1 veranschaulicht, Teil von anderen Systemen oder Teilsystemen in dem Fahrzeug sein, für diese gedacht sein oder diese gemeinsam nutzen (z. B. die Kameras 62-68 und/oder einige der Sensoren 26 könnten Teil eines aktiven Sicherheitssystem, eines Antiblockierschutzsystems (ABS) oder eines autonomen oder halbautonomen Antriebssystem sein; der elektronische Anzeigespiegel 28 oder die Steuereinheit 30 könnten Teil eines Fahrzeuginfotainmentsystems sein usw.). Die Videoeingabe, Verkehrseingabe, Sensoreingabe und/oder Navigationseingabe der Vorrichtungen 22-68 können direkt an die Steuereinheit 30 oder indirekt über eine andere Vorrichtung, ein anderes Modul und/oder System ausgegeben werden, wie in der Technik im Allgemeinen bekannt. In ähnlicher Weise kann die verbesserte Videoausgabe von der Steuereinheit 30 direkt oder indirekt an dem elektronischen Anzeigespiegel 28 bereitgestellt werden. Entsprechend sind die Geräte 22-68 weder auf die schematische Darstellung in 1 oder die vorstehenden Beispielbeschreibungen beschränkt, noch sind sie an eine spezielle Ausführungsform oder Anordnung gebunden, solange sie mit dem hierin beschriebenen Verfahren verwendet werden können.
  • Unter Bezugnahme auf 2-4 werden drei Szenarios 100, 110, und 120 dargestellt. Diese Szenarios zeigen den elektronischen Anzeigespiegel 28 mit einem primären Bild 102 und einem sekundären Bild 104, und veranschaulichen verschiedene Arten, auf die das Verfahren die Bilder in Bezug zueinander integrieren oder positionieren kann. Das primäre Bild 102 kann Videodaten von einer Rückblickkamera 62 beinhalten und das sekundäre Bild 104 kann Videodaten von einer anderen Bildquelle beinhalten, die, wie dargestellt, Bilder oder ein Video der Ladefläche des Fahrzeugs von der zusätzlichen Kamera 68 sein können. Das primäre Bild und/oder das sekundäre Bild kann basierend auf verschiedenen Fahrzeugzuständen, Sensorsignalen, Ortungsinformationen, Ergebnissen der Bildverarbeitung von Videodaten, die von den Kameras 62-68 erhalten werden oder sonstigen Daten oder Informationen, die vom Fahrzeug 10 erhalten werden, modifiziert oder geändert werden. Darüber hinaus können verschiedene Fahrzeugarten Kameras beinhalten, die an verschiedenen Bereichen im und/oder um das Fahrzeug herum positioniert sind. Zum Beispiel kann eine Limousine eine zusätzliche Kamera 68 aufweisen, die an einem Bereich im Rücksitz des Fahrzeugs positioniert ist, wobei ein Pick-up-Truck eine zusätzliche Kamera 68 aufweisen kann, die in einem Bereich eines Laderaums positioniert ist Zur Erleichterung der Diskussion des exemplarischen Verfahrens 200, das in 5 abgebildet ist, wird auf die Szenarien 100, 110 und 120 Bezug genommen.
  • Unter Bezugnahme auf 5 wird eine exemplarische Ausführungsform eines Verfahrens 200 zum Anzeigen von Bildern auf einem in einem Fahrzeug beinhalteten elektronischen Anzeigespiegel dargestellt. In einigen Ausführungsformen beinhaltet das Verfahren 200 Schritte zum Empfangen von Sensorsignalen von einem oder mehreren auf dem Fahrzeug positionierten Sensoren, die ein primäres Bild auf dem elektronischen Anzeigespiegel erzeugen und anzeigen und dann das primäre Bild und das sekundäre Bild oder die Grafik basierend auf den empfangenen Sensorsignalen auf dem elektronischen Anzeigespiegel erzeugen und anzeigen. Das Verfahren 200 kann durch die Steuereinheit 30 und/oder andere im Fahrzeug 10 beinhaltete geeignete Fahrzeugmodule, wie VSMs 42, durchgeführt werden.
  • Das Verfahren 200 beginnt mit Schritt 210, worin ein primäres Bild 102 generiert wird, das, wie in den 2-4 gezeigt, auf dem im Fahrzeug beinhalteten elektronischen Anzeigespiegel anzuzeigen ist. Das primäre Bild kann ein Echtzeit- oder aufgenommenes Video oder ein Bild aus einem Videoframe, wie einem von einem verschachtelten scanartigen oder progressiven scanartigen Video erzeugten Bild, sein. Vorzugsweise ist das primäre Bild 102 ein Rückblick des sich hinter dem Fahrzeug 10 befindlichen Bereichs, der auf dem elektronischen Anzeigespiegel 28 angezeigt wird, der in der veranschaulichten Ausführungsform das Objekt 14 hinter dem Fahrzeug 10 anzeigt. Wenn das Fahrzeug in einen eingeschalteten Zustand versetzt wird, sodass die Zündung oder das primäre Antriebssystem aktiviert ist, kann der elektronische Anzeigespiegel 28 von der Rückblickkamera 62 erhaltene Bilder anzeigen. Die empfangenen Videodaten können horizontal umgedreht werden, sodass das angezeigte Bild auf ähnliche Weise wie ein herkömmlicher Spiegel funktioniert. In anderen Ausführungsformen kann das primäre Bild Grafiken, sonstige Bilder, oder Wiedergaben umfassen. Das Verfahren 200 geht zu Schritt 220 über.
  • In Schritt 220 werden Sensorsignale von einem oder mehreren am Fahrzeug 10 positionierten Sensoren empfangen. Der eine oder die mehreren Sensoren können, wie in 1 abgebildet, die Fahrzeugsensoren 26, die Kameras 62-68, die V2V-Einheit 24, das GPS 22, eine Motorsteuereinheit, das BCM 40, sonstige eine erfasste Eingabe erhaltende VSMs 42, das Mikrofon 56, die Drucktaste 52, oder sonstige andere Vorrichtungen sein, die dem Fahrzeug Informationen hinsichtlich eines Fahrzeugzustands (z. B. Betriebszustände, sonstige physikalische Eigenschaften des Fahrzeugs, elektronische oder logische Zustände des Fahrzeugmoduls), Umgebungsbedingungen des sich um das Fahrzeug befindlichen Bereichs, und/oder externer Eigenschaften des sich um das Fahrzeug befindlichen Bereichs, wie der Gegenwart anderer Fahrzeuge, Fußgänger, elektronischer Vorrichtungen, oder Objekte um oder innerhalb des Fahrzeugs bereitstellen.
  • Zusätzlich oder alternativ kann ein Fahrzeugzustandsparameter unter Verwendung eines oder mehrerer am oder im Fahrzeug beinhalteter Sensoren überwacht werden. Der Fahrzeugzustandsparameter kann ein oder mehrere aus einem Fahrzeugzustand, einem Zustand und/oder einer Eigenschaft des Fahrzeugs und/oder der das Fahrzeug umgebenden Umgebung sein, oder darauf basieren. Zum Beispiel kann der Fahrzeugzustandsparameter Betriebszustände, sonstige physikalische Eigenschaften des Fahrzeugs (z. B. Absolutgeschwindigkeit des Fahrzeugs 10, Position des Objekts 14 mit Bezug auf das Fahrzeug 10, Standort des Objekts 14 wie im primären Bild abgebildet, Größe des Objekts 14 mit Bezug auf das primäre Bild, Geschwindigkeit des Objekts 14 mit Bezug auf das Fahrzeug 10, und absolute Geschwindigkeit des Objekts 14), elektronische und logische Zustände des Fahrzeugmoduls, Umgebungsbedingungen des Bereichs um das Fahrzeug herum, und/oder externe Eigenschaften des Bereichs um das Fahrzeug herum, wie die Gegenwart von anderen Fahrzeugen, Fußgängern, elektronischen Vorrichtungen, oder sich innerhalb des Fahrzeugs oder um das Fahrzeug herum befindlichen Objekten beinhalten oder darauf basieren.
  • Die empfangenen Sensorsignale und/oder überwachten Fahrzeugzustandsparameter können im Speicher 36 der Steuereinheit 30 gespeichert werden, und/oder von dem Prozessor 34 verarbeitet werden. Wie nachstehend eingehender erörtert werden wird (siehe Schritt 240), können die empfangenen Sensorsignale und/oder der überwachte Fahrzeugzustand von der Steuereinheit verwendet werden, um zu ermitteln, ob, wo und/oder wie bestimmte sekundäre Bilder auf dem elektronischen Anzeigespiegel 28 angezeigt werden sollen. In bestimmten Ausführungsformen kann Schritt 210 vor Schritt 220 durchgeführt werden und das Generieren des primären Bilds kann auf den empfangenen Sensorsignalen und/oder dem überwachten Fahrzeugzustandsparameter basieren. Das Verfahren 200 fährt dann mit Schritt 230 fort.
  • Wie zum Beispiel in den 2-4 dargestellt, wird in Schritt 230 ein sekundäres Bild 104 generiert und in einigen Ausführungsformen kann das sekundäre Bild basierend auf dem überwachten Fahrzeugzustand und/oder empfangenen Sensorsignalen generiert werden. Das sekundäre Bild 104 kann ein Bild sein, das Ähnlichkeiten mit dem primären Bild aufweist, aber aus Videodaten generiert sein kann, die von einer unterschiedlichen Kamera empfangen wurden. Zum Beispiel kann das sekundäre Bild aus Videodaten generiert sein, die von der zusätzlichen Kamera 68 empfangen wurden, welche Bilder einer Ladefläche des Fahrzeugs 10 beinhalten. In anderen Ausführungsformen kann das sekundäre Bild eine Wiedergabe unter Verwendung von gespeicherten Grafik-/Bilddateien (z. B. die auf dem Speicher 36 gespeichert sind) beinhalten, wie eine Wiedergabe einer Draufsicht auf das Fahrzeug 10, eine oder mehrere Grafiken, oder Bilder, die von einer oder mehreren sich im Fahrzeug befindlichen Kameras erhalten wurden. Die Wiedergabe, die nachfolgend detaillierter beschrieben werden wird, kann auf Daten, die von einem oder mehreren Sensoren, wie den Sensoren 26 oder den Kameras 62-68, empfangen werden, basieren.
  • In einigen Ausführungsformen werden zahlreiche sekundäre Bilder generiert. Zum Beispiel kann ein erstes sekundäres Bild generiert werden, um den Bereich eines toten Winkels auf der linken Seite des Fahrzeugs abzubilden und ein zweites sekundäres Bild kann generiert werden, um dem Bereich eines toten Winkels auf der rechten Seite des Fahrzeugs abzubilden. Beide dieser sekundären Bilder können dann zur selben Zeit auf dem elektronischen Anzeigespiegel, wie nachfolgend in Schritt 240 beschrieben wird, angezeigt werden. In einigen Ausführungsformen kann das Fahrzeug bestimmen, ein oder mehrere sekundäre Bilder basierend auf den empfangenen Sensorsignalen oder dem überwachten Fahrzeugzustandsparameter, anzuzeigen.
  • In bestimmten Ausführungsformen kann kein sekundäres Bild in Abhängigkeit von dem überwachten Fahrzeugzustandsparameter oder basierend auf den empfangenen Sensorsignalen generiert werden. Falls zum Beispiel eine Kollision mit dem Objekt 14 wahrscheinlich ist, kann das Verfahren ermitteln, dass nur das primäre Bild 102 angezeigt werden sollte, um dem Fahrer ein klareres und weniger verdecktes Bild bereitzustellen. In einer derartigen Ausführungsform kann das Verfahren 200 enden oder kann zurück zu Schritt 210 oder 220 übergehen. Andernfalls kann das Verfahren 200 zu Schritt 240 übergehen.
  • In Schritt 240 werden das primäre Bild und das sekundäre Bild auf der elektronischen Anzeigevorrichtung angezeigt, worin das sekundäre Bild auf dem primären Bild in einer Position überlagert wird, die zumindest teilweise auf den empfangenen Sensorsignalen basiert. Wie hierin verwendet, kann der Begriff „überlagert“ das Mischen der zwei Bildern umfassen, wobei ein Bild in einer designierten Teilmenge des zur Verfügung stehenden Bildschirmraums positioniert wird und das andere Bild entsprechender Weise neu bemessen wird, wobei ein Bild über das andere Bild positioniert wird, oder jedes andere operative Verfahren des räumlichen Integrierens beider Bilder innerhalb eines designierten Bereichs, wobei nach Möglichkeit ein oder mehrere Abschnitte eines oder mehrerer Bilder blockiert wird. In einer Ausführungsformkann das primäre Bild einen wesentlichen (oder gesamten) Abschnitt des elektronischen Anzeigespiegels umfassen und das sekundäre Bild (die sekundären Bilder) kann (können) über dem primären Bild positioniert werden. In anderen Ausführungsformen kann das primäre Bild einen bestimmten designierten oder festgelegten Bereich der elektronischen Anzeigevorrichtung umfassen. Der designierte Bereich kann ein Bereich der elektronischen Anzeigevorrichtung sein, die dem primären Bild vorbehalten ist (z. B. ein relativ großer Abschnitt in der Mitte der elektronischen Anzeige). Der ermittelte Bereich kann ein Bereich der elektronischen Anzeigevorrichtung sein, der als derjenige Bereich festgelegt wird, auf dem das primäre Bild anzuzeigen ist, und kann auf dem überwachten Fahrzeugzustandsparameter oder den empfangenen Sensorsignalen basieren.
  • Unter erneuter Bezugnahme auf 2 können die empfangenen Sensorsignale erfassen, bzw. dazu verwendet werden um zu erfassen, dass das andere Fahrzeug 14 sich weiter auf der linken Seite des primären Bilds 102 als auf der rechten Seite des primären Bilds 102 befindet. Dies kann basierend auf Bildverarbeitungs- und Objekterkennungsverfahren basieren und/oder kann auf sonstigen Sensorsignalen, wie Detektoren für den toten Winkel oder Fahrzeuginformationen, die über V2V-Einheit 24 empfangen werden, basieren. Wenn ermittelt wird, dass das andere Fahrzeug 14 sich auf der linken Seite des Fahrzeugs 10 in einem Objektbereich 106 befindet, kann das sekundäre Bild 104 in eine Position 108 auf der rechten Seite des primären Bilds 102 überlagert werden, um das Abbilden des Fahrzeugs 14 nicht zu beeinträchtigen (oder um die damit verbundene Beeinträchtigung zu reduzieren). Wenn alternativ dazu sowohl ermittelt wird, dass das Fahrzeug 14 sich auf der linken Seite des Fahrzeugs 10 befindet, als auch, dass das Fahrzeug 14 zumindest teilweise im primären Bild 102 abgebildet wird, kann das sekundäre Bild 104 auf der rechten Seite des primären Bilds 102 überlagert werden. Dasselbe gilt auch, wenn ermittelt wird, dass das andere Fahrzeug 14 sich auf der rechten Seite oder sich zumindest teilweise auf der rechten Seite des primären Bilds 102 befindet, mit der Ausnahme, dass das sekundäre Bild 104 in der Position 108 angezeigt werden würde, die sich nun, wie in 3 gezeigt, auf der linken Seite des elektronischen Anzeigespiegels 28 befindet. Wenn das Fahrzeug 14 zum Beispiel einen Punkt einer Hälfte überschreitet, kann das sekundäre Bild 104 zur Position 108 auf der anderen Seite der Anzeige 28 bewegt werden. Ferner kann die Größe des sekundären Bilds 104 mit der Position 108 für das sekundäre Bild korrelieren, die vom Objektbereich 106 abhängen kann. Während die 2-4 zeigen, dass das andere Fahrzeug einen sich hinter dem Fahrzeug befindlichen Bereich durchquert, gibt es häufig ein anderes Fahrzeug, das sich hinter dem Host- Fahrzeug befindet, gibt es ein anderes Objekt (z. B. Fußgänger oder dergleichen), und/oder gibt es ein oder mehrere stationäre Objekte. Jedes Zielobjekt kann Auswirkungen auf die Platzierung, Größe, Qualitäten usw. des sekundären Bilds in Abhängigkeit von der gewünschten Implementierung haben.
  • Zusätzlich oder alternativ können eine oder mehrere Eigenschaften des sekundären Bilds (der sekundären Bilder) basierend mindestens teilweise auf dem Fahrzeugzustandsparameter und/oder den empfangenen Sensorsignalen verändert werden. In einigen Ausführungsformen kann dies einen Benutzer in die Lage versetzen, bestimmte im primären Bild abgebildete Aspekte besser zu erkennen. In jenen Fällen, in denen das andere Fahrzeug oder Objekt 14 zum Beispiel auf dem primären Bild 102 angezeigt wird und der Objektbereich 106 einen wesentlichen Abschnitt des Bilds 102 einnimmt, gibt es möglicherweise keine Stelle, um das sekundäre Bild (die sekundären Bilder) anzuzeigen, ohne Abschnitte des Objekts 14 herauszuschneiden. In einem derartigen Fall, in dem sich der Objektbereich 106 und die Position 108 für das sekundäre Bild zumindest teilweise überlappen, kann das sekundäre Bild 104 angezeigt werden, wobei jedoch die Transparenz des sekundären Bilds, wie in 4 dargestellt, eingestellt werden kann (z. B. sodass das sekundäre Bild teilweise transparent ist). Das Einstellen der Transparenz des sekundären Bilds oder eine sonstige Änderung des sekundären Bilds kann auf dem Fahrzeugzustandsparameter und/oder den empfangenen Sensorsignalen basieren. Zum Beispiel kann die Transparenz basierend auf der relativen Geschwindigkeit eines Objekts, das im primären Bild abgebildet wird und/oder der Position eines Objekts, das im primären Bild abgebildet wird, eingestellt werden. Um ein Beispiel zu nennen, wenn der Objektbereich 106 mindestens 75 % der gesamten Bildschirmfläche einnimmt, kann der Transparenzgrad des sekundären Bilds 104 auf zwischen 25 % und 75 %, oder genauer auf 50 % eingestellt werden. Oder wenn das Einstellen der Größe des sekundären Bilds ein sekundäres Bild erzeugt, das beispielsweise zu klein ist (z. B. etwa 10 % oder weniger der gesamten Fläche des Bildschirms), dann kann es wünschenswerter sein, den Transparenzgrad zu ändern und die Größe des Bilds auf eine standardmäßige Einsatzgröße einzustellen. Die veränderten Eigenschaften des sekundären Bilds können auch die Position des sekundären Bilds und/oder die Größe des sekundären Bilds beinhalten. Andere grafische und/oder bildbezogene Veränderungen können durchgeführt werden, wie das Ändern der Größe, des Farbtons, der Sättigung, Position, der Transparenz, der Helligkeit, des Kontrasts, der Farbe, der Umrisse, der Tönung, der Schattierung, des Tons, der Intensität, der Leuchtkraft, der Form, der Farbsets oder der Farbperimetrie (z. B. schwarz und weiß, Grauwert, 8-Bit-Farbe), des Tonwerts, der Farbabstimmung, der Belichtung, der Stufen, der Kanäle, und/oder der Lebendigkeit.
  • Andere Arten von sekundären Bildern können generiert und/oder erhalten werden, die auf dem elektronischen Anzeigespiegel 28 angezeigt werden können. So können beispielsweise bestimmte Fahrzeugeigenschaften (z. B. Absolutgeschwindigkeit des Fahrzeugs 10, Position des Objekts 14 mit Bezug auf das Fahrzeug 10, den Standort des Objekts 14 wie im primären Bild abgebildet, die Größe des Objekts 14 mit Bezug auf das primäre Bild, die Geschwindigkeit des Objekts 14 mit Bezug auf das Fahrzeug 10, und Absolutgeschwindigkeit des Objekts 14) generiert werden, um als ein sekundäres Bild oder als ein Teil der sekundären und/oder primären Bilder grafisch angezeigt zu werden. Darüber hinaus können auch andere anzuzeigende Metriken oder Zustände generiert und/oder erhalten werden, wie umgebungsbezogene Metriken (z. B. Außentemperatur, Fahrgastzellentemperatur, vorhergesagtes Wetter).
  • In anderen Ausführungsformen können mehrere sekundäre Bilder gleichzeitig auf den elektronischen Anzeigespiegel angezeigt werden. Ein oder mehrere dieser sekundären Bilder können auf dem primären Bild (z. B. Bild-in-Bild (PIP)) überlagert werden. In einer Ausführungsform kann die elektronische Anzeigevorrichtung in der Mitte geteilt werden (z B., eine 50/50-Teilung, die eine linke Seite und eine rechte Seite mit derselben Fläche erzeugt). Das primäre Bild kann dann auf der linken Seite angezeigt werden und das sekundäre Bild kann dann auf der rechten Seite angezeigt werden. Die elektronische Anzeigevorrichtung kann in unterschiedliche Anteile, wie 60/40 für das primäre Bild/sekundäre Bild oder 20/60/20 für das sekundäre Bild/primäre Bild/das zweite sekundäre Bild aufgeteilt werden. In einer Ausführungsform kann das primäre Bild ein Bild von der Rückblickkamera 62 sein, das sekundäre Bild kann ein Bild von der Kamera 64 für den linken toten Winkel sein, und das zweite sekundäre Bild kann ein Bild von der Kamera 66 für den rechten toten Winkel sein. Die ersten und/oder zweiten sekundären Bilder können entfernt werden und der Raum kann in Übereinstimmung damit neu organisiert werden, wenn keine Objekte (Fahrzeug 14) im linken toten Winkel und/oder rechten toten Winkel des Fahrzeugs 10 und/oder andernfalls im primären Bild erfasst werden.
  • Das primäre und sekundäre Bild (primären und sekundären Bilder) können dann auf dem elektronischen Anzeigespiegel 28 angezeigt werden. Ein endgültiges Bild, das eine Zusammensetzung des primären und sekundären Bildes (der primären und sekundären Bilder) ist, kann durch die Steuereinheit 30 generiert werden und dann über Bus 44 an den elektronischen Anzeigespiegel 28 gesendet werden. Das endgültige Bild kann ein einzelnes aggregiertes Bild sein, das basierend auf den vorstehenden Ermittlungen hinsichtlich der Eigenschaften, der Größe, der Positionierung, und/oder sonstigen Attribute des primären und sekundären Bildes (der primären und sekundären Bilder) generiert wurde. Sobald das endgültige Bild empfangen wird, zeigt der elektronische Anzeigespiegel 28 das endgültige Bild an. Der elektronische Anzeigespiegel kann andere textuelle oder grafische Informationen auf dem endgültigen Bild anzeigen. Alternativ oder zusätzlich kann der elektronische Anzeigespiegel das endgültige Bild in Übereinstimmung mit anderen Metadaten, die zusammen dem endgültigen Bild empfangen werden, oder in Übereinstimmung mit sonstigen Anweisungen, die am elektronischen Anzeigespiegel 28 empfangen werden, anzeigen. Das Verfahren 200 endet dann.
  • Es ist zu beachten, dass die vorstehende Beschreibung keine Definition der Erfindung darstellt, sondern eine Beschreibung einer oder mehrerer bevorzugter exemplarischer Ausführungsformen der Erfindung ist. Die Erfindung beschränkt sich nicht auf die hier offen gelegten bestimmten Ausführungsformen, sondern diese wird vielmehr ausschließlich durch die nachfolgenden Patentansprüche definiert. Darüber hinaus beziehen sich die in der vorstehenden Beschreibung gemachten Aussagen auf bestimmte Ausführungsformen und sind nicht als Einschränkungen des Umfangs der Erfindung oder der Definition der in den Patentansprüchen verwendeten Begriffe zu verstehen, außer dort, wo ein Begriff oder Ausdruck ausdrücklich vorstehend definiert wurde. Verschiedene andere Ausführungsformen und verschiedene Änderungen und Modifikationen an der/den ausgewiesenen Ausführungsform(en) sind für Fachleute offensichtlich. Die spezifische Kombination und Reihenfolge der Schritte stellt beispielsweise nur eine Möglichkeit dar, da das vorliegende Verfahren eine Kombination von Schritten beinhalten kann, wobei diese Schritte unterschiedlich sein oder in der Anzahl mehr oder weniger Schritte als die hier gezeigten beinhalten können. Alle diese anderen Ausführungsformen, Änderungen und Modifikationen sollten im Geltungsbereich der angehängten Patentansprüche verstanden werden.
  • Wie in dieser Spezifikation und den Patentansprüchen verwendet, sind die Begriffe „beispielsweise“, „z. B.“, „zum Beispiel“, „wie“ und „gleich/gleichen“ sowie die Verben „umfassen“, „haben“, „beinhalten“ und deren andere Verbformen, die in Verbindung mit einer Liste von einer oder mehreren Komponenten oder anderen Elementen verwendet werden, jeweils als offen auszulegen, d. h., dass die Liste nicht als Ausnahme anderer, zusätzlicher Komponenten oder Elemente betrachtet werden darf. Andere Begriffe sind in deren weitesten vernünftigen Sinn auszulegen, es sei denn, diese werden in einem Kontext verwendet, der eine andere Auslegung erfordert. Zusätzlich versteht sich der Ausdruck „und/oder“ als ein inklusives ODER. Anders ausgedrückt, beinhaltet der Ausdruck „A, B, und/oder C“: „A“; „B“; „C“; „A und B “; „A und C “; „B und C“ und „A, B und C“

Claims (12)

  1. Verfahren zum Anzeigen von Bildern auf einer in einem Fahrzeug (10) beinhalteten elektronischen Anzeigevorrichtung (58), das Verfahren umfassend: das Erzeugen eines primären Bilds (102), das auf der in dem Fahrzeug (10) beinhalteten elektronischen Anzeigevorrichtung (58) anzuzeigen ist; das Empfangen von Sensorsignalen von einem oder mehreren am Fahrzeug (10) positionierten Sensoren (26); das Erzeugen eines sekundären Bilds (104), das auf der elektronischen Anzeigevorrichtung (58) anzuzeigen ist; das Anzeigen des primären Bilds (102) auf der elektronischen Anzeigevorrichtung (58) und des sekundären Bilds (104) auf der elektronischen Anzeigevorrichtung (58), wobei das sekundäre Bild (104) auf dem primären Bild (102) in einer Position überlagert wird, die zumindest teilweise auf den empfangenen Sensorsignalen basiert; und das Erfassen unter Verwendung der empfangenen Sensorsignale, dass ein Objekt (14) im primären Bild (102) abgebildet ist, und basierend auf dem Erfassen das Ermitteln einer Stelle auf dem primären Bild (102), auf der das sekundäre Bild (104) zu überlagern ist; wobei der Erfassungsschritt ferner das Ermitteln eines Bereichs (106) auf dem primären Bild (102) beinhaltet, auf dem das Objekt (14) abgebildet ist, und wobei die Stelle auf dem primären Bild (102), auf dem das sekundäre Bild (104) zu überlagern ist, auf dem Bereich auf dem primären Bild (102) basiert, auf dem das Objekt (14) erfasst wird.
  2. Verfahren nach Anspruch 1, wobei das primäre Bild (102) von einer Rückblickkamera (62) erzeugt wird und die elektronische Anzeigevorrichtung (58) ein elektronischer Anzeigespiegel (28) ist.
  3. Verfahren nach Anspruch 1, wobei das primäre Bild (102) oder das sekundäre Bild (104) ein Teil eines Streaming-Video-Feeds ist.
  4. Verfahren nach Anspruch 1, wobei die Stelle auf dem primären Bild (102), auf dem das sekundäre Bild (104) zu überlagern ist und der Bereich (106) auf dem primären Bild (102), auf dem das Objekt (14) abgebildet ist, vollständig voneinander getrennt sind.
  5. Verfahren nach Anspruch 1, wobei das sekundäre Bild (104) von einer Kamera (62, 64, 66, 68) erzeugt wird, die einem oder mehreren der folgenden Bereiche zugewandt ist: einem Rücksitz des Fahrzeugs (10), einer Ladefläche des Fahrzeugs (10), einem toten Winkel des Fahrzeugs (10), einem Innenbereich eines Kofferraums, oder einem Innenbereich eines Anhängers.
  6. Verfahren zum Anzeigen von Bildern auf einer in einem Fahrzeug (10) beinhalteten elektronischen Anzeigevorrichtung (58), das Verfahren umfassend: das Anzeigen eines primären Bilds (102) auf der in dem Fahrzeug (10) beinhalteten elektronischen Anzeigevorrichtung (58); das Überwachen eines Fahrzeugzustandsparameters unter Verwendung eines oder mehrerer am oder im Fahrzeug (10) beinhalteter Sensoren (26); basierend auf dem überwachten Fahrzeugzustandsparameter, das Ermitteln, ob ein sekundäres Bild (104) auf der elektronischen Anzeigevorrichtung (58) anzuzeigen ist; und wenn ermittelt wird, dass das sekundäre Bild (104) auf der elektronischen Anzeigevorrichtung (58) anzuzeigen ist, dann: das Ermitteln eines Bereichs auf der elektronischen Anzeigevorrichtung (58), um das sekundäre Bild (104) anzuzeigen, wobei unter Verwendung von empfangenen Signalen des einen oder der mehreren Sensoren (26) erfasst wird, dass ein Objekt (14) im primären Bild (102) abgebildet ist, und basierend auf dem Erfassen eine Stelle auf dem primären Bild (102) ermittelt wird, auf der das sekundäre Bild (104) zu überlagern ist, wobei der Erfassungsschritt ferner das Ermitteln eines Bereichs (106) auf dem primären Bild (102) beinhaltet, auf dem das Objekt (14) abgebildet ist, und wobei die Stelle auf dem primären Bild (102), auf dem das sekundäre Bild (104) zu überlagern ist, auf dem Bereich auf dem primären Bild (102) basiert, auf dem das Objekt (14) erfasst wird; und das Anzeigen des sekundären Bilds (104) am ermittelten Bereich auf der elektronischen Anzeigevorrichtung (58), wobei der Bereich auf der elektronischen Anzeigevorrichtung (58), auf dem das sekundäre Bild (104) anzuzeigen ist, mit der Stelle auf dem primären Bild (102) übereinstimmt, auf der das sekundäre Bild (104) zu überlagern ist.
  7. Verfahren nach Anspruch 6, wobei das primäre Bild (102) von einer Rückblickkamera (62) erzeugt wird und die elektronische Anzeigevorrichtung (58) ein elektronischer Anzeigespiegel (28) ist.
  8. Verfahren nach Anspruch 6, wobei ein oder mehrere Sensoren (26) eine Videokamera beinhalten.
  9. Verfahren nach Anspruch 6, wobei das sekundäre Bild (104) gemäß der Größe des ermittelten Bereichs bemessen wird.
  10. Verfahren nach Anspruch 6, ferner umfassend den Schritt des Änderns einer oder mehrerer Eigenschaften des sekundären Bilds (104) basierend zumindest teilweise auf dem Fahrzeugzustandsparameter.
  11. Verfahren nach Anspruch 10, wobei die geänderte Eigenschaft das Einstellen eines Transparenzgrads des sekundären Bilds (104) beinhaltet.
  12. Verfahren nach Anspruch 10, wobei die geänderte Eigenschaft eine oder mehrere der Folgenden beinhaltet: eine Position des sekundären Bildes (104) und eine Größe des sekundären Bilds (104).
DE102018105951.5A 2017-03-22 2018-03-14 Verfahren zum dynamischen anzeigen von bildern auf einer elektronischen anzeigevorrichtung eines fahrzeugs Active DE102018105951B4 (de)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US15/466,604 2017-03-22
US15/466,604 US10609339B2 (en) 2017-03-22 2017-03-22 System for and method of dynamically displaying images on a vehicle electronic display

Publications (2)

Publication Number Publication Date
DE102018105951A1 DE102018105951A1 (de) 2018-09-27
DE102018105951B4 true DE102018105951B4 (de) 2019-07-04

Family

ID=63450008

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102018105951.5A Active DE102018105951B4 (de) 2017-03-22 2018-03-14 Verfahren zum dynamischen anzeigen von bildern auf einer elektronischen anzeigevorrichtung eines fahrzeugs

Country Status (3)

Country Link
US (1) US10609339B2 (de)
CN (1) CN108621943B (de)
DE (1) DE102018105951B4 (de)

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019150918A1 (ja) * 2018-02-02 2019-08-08 ソニー株式会社 情報処理装置、情報処理方法、プログラム、及び移動体
US11176215B2 (en) * 2018-07-23 2021-11-16 International Business Machines Corporation Navigational notifications based on filtered interests
DE102018128634A1 (de) 2018-11-15 2020-05-20 Valeo Schalter Und Sensoren Gmbh Verfahren zum Bereitstellen einer visuellen Information über zumindest einen Teil einer Umgebung, Computerprogrammprodukt, mobiles Kommunikationsgerät und Kommunikationssystem
US11302182B2 (en) * 2018-12-28 2022-04-12 Beijing Voyager Technology Co., Ltd. Systems and methods for vehicle identification
WO2020198427A1 (en) * 2019-03-27 2020-10-01 Gentex Corporation Selective display window for vehicle
CN110120110B (zh) * 2019-04-09 2021-11-23 深圳市麦谷科技有限公司 倒车图像处理方法、装置、计算机设备及存储介质
US11766937B2 (en) * 2019-05-15 2023-09-26 Nissan Motor Co., Ltd. Display control method and display control device
US11055870B2 (en) * 2019-07-24 2021-07-06 Toyota Motor Engineering & Manufacturing North America, Inc. Vehicle auxiliary camera
US11995991B2 (en) 2020-12-22 2024-05-28 Stack Av Co. Shared control for vehicles travelling in formation
USD1024092S1 (en) * 2021-08-03 2024-04-23 Icon Vehicle Dynamics Llc Display screen with graphical user interface
USD1012944S1 (en) 2021-08-03 2024-01-30 Icon Vehicle Dynamics Llc Display screen with graphical user interface
US11999386B2 (en) 2022-01-31 2024-06-04 Stack Av Co. User interfaces for autonomy state control and alerts

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE202014102291U1 (de) 2013-05-16 2014-08-22 Ford Global Technologies, Llc Rückspiegelposition verwendendes Rücksichtkamerasystem
US20160368418A1 (en) 2014-04-01 2016-12-22 Panasonic Intellectual Property Management Co., Ltd. Rear-view monitor device and automobile equipeed with same
US20170280091A1 (en) * 2014-08-18 2017-09-28 Jaguar Land Rover Limited Display system and method
US20170347067A1 (en) * 2016-05-24 2017-11-30 Gentex Corporation Vehicle display with selective image data display
US20170374287A1 (en) * 2016-06-23 2017-12-28 Werner Lang System for Visually Depicting Fields of View of a Commercial Vehicle

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005223524A (ja) * 2004-02-04 2005-08-18 Nissan Motor Co Ltd 車両周辺監視装置
US8633810B2 (en) * 2009-11-19 2014-01-21 Robert Bosch Gmbh Rear-view multi-functional camera system
TWI421624B (zh) * 2011-04-01 2014-01-01 Ind Tech Res Inst 環場監控裝置及其方法
US20140114534A1 (en) * 2012-10-19 2014-04-24 GM Global Technology Operations LLC Dynamic rearview mirror display features
US9981605B2 (en) * 2014-05-16 2018-05-29 GM Global Technology Operations LLC Surround-view camera system (VPM) and vehicle dynamic
US20180220082A1 (en) * 2017-01-30 2018-08-02 GM Global Technology Operations LLC Method and apparatus for augmenting rearview display

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE202014102291U1 (de) 2013-05-16 2014-08-22 Ford Global Technologies, Llc Rückspiegelposition verwendendes Rücksichtkamerasystem
US20160368418A1 (en) 2014-04-01 2016-12-22 Panasonic Intellectual Property Management Co., Ltd. Rear-view monitor device and automobile equipeed with same
US20170280091A1 (en) * 2014-08-18 2017-09-28 Jaguar Land Rover Limited Display system and method
US20170347067A1 (en) * 2016-05-24 2017-11-30 Gentex Corporation Vehicle display with selective image data display
US20170374287A1 (en) * 2016-06-23 2017-12-28 Werner Lang System for Visually Depicting Fields of View of a Commercial Vehicle

Also Published As

Publication number Publication date
CN108621943B (zh) 2021-09-28
DE102018105951A1 (de) 2018-09-27
US20180272944A1 (en) 2018-09-27
CN108621943A (zh) 2018-10-09
US10609339B2 (en) 2020-03-31

Similar Documents

Publication Publication Date Title
DE102018105951B4 (de) Verfahren zum dynamischen anzeigen von bildern auf einer elektronischen anzeigevorrichtung eines fahrzeugs
DE102017201717B4 (de) Verfahren zur Verwendung eines Rückblicksystem für ein Trägerfahrzeug sowie Rückblicksystem zur Ausführung des Verfahrens
DE102017201852B4 (de) Parkassistenzsystem für ein Fahrzeug und ein Verfahren zu dessen Nutzung
DE102019102716A1 (de) Fahrzeug-anhänger rückfahrsichtsystem und -verfahren
EP2865569B1 (de) Anzeigeeinrichtung für Sichtfelder eines Nutzfahrzeugs
DE102010035772B4 (de) System und Verfahren zum Liefern von Leitinformation für einen Fahrer eines Fahrzeugs
DE102018110419A1 (de) Verwendung von nir-beleuchtungseinrichtungen zum verbessern der fahrzeugkameraleistung bei szenarien mit schwachem licht
DE202011005102U1 (de) Optische Sensorsysteme für Automotive Anwendung
DE102019111521A1 (de) Verfahren und vorrichtung zum erfassen von tiefeninformationen mit kameras von verschiedenen fahrzeugen
DE102013209418A1 (de) Fahrzeugkollisionswarnsystem und -verfahren
DE102019118461A1 (de) Blickerfassung von insassen für fahrzeuganzeigen
DE102018108054A1 (de) Verfahren und systeme zur bestimmung einer kamera-fehlausrichtung
WO2011141249A1 (de) Verfahren zum anzeigen eines bildes auf einer anzeigeeinrichtung in einem fahrzeug, fahrerassistenzsystem und fahrzeug
DE102016007522A1 (de) Spiegelersatzsystem für ein Fahrzeug
DE102017122261A1 (de) Verfahren zum Überwachen eines Umgebungsbereiches eines Kraftfahrzeugs sowie Kamerasystem
DE102021212088B4 (de) Rückfahrkamerasystem für ein anhängerkupplungssystem und verfahren zum erzeugen einer darstellung in heckrichtung eines fahrzeuges
DE102018116106A1 (de) Videoübertragung für ein ankommendes linksabbiegendes fahrzeug
DE102018125930B4 (de) Kamerabildgeber-Binning-Technik
DE102011010860A1 (de) Verfahren und Fahrerassistenzsystem zum Anzeigen von Bildern in einem Kraftfahrzeug sowie Kraftfahrzeug
DE102019217642A1 (de) Verfahren zur Erfassung von Bildmaterial zur Überprüfung von bildauswertenden Systemen, Vorrichtung und Fahrzeug zur Verwendung bei dem Verfahren sowie Computerprogramm
DE102012018556B4 (de) Assistenzsystem zur Ermöglichung einer erweiterten Vorausschau für nachfolgende Verkehrsteilnehmer
DE102006044864A1 (de) Verfahren zur rechnergestützten Bildverarbeitung in einem Nachtsichtsystem eines Verkehrsmittels
DE102017124760A1 (de) Fahrzeug mit einer Multifokuskamera
DE102020103653A1 (de) Fahrzeugbilddarstellungssystem und -verfahren für eine einparklösung
DE102019116836A1 (de) Einblendschnittstellen für rückspiegelanzeigen

Legal Events

Date Code Title Description
R012 Request for examination validly filed
R082 Change of representative

Representative=s name: MANITZ FINSTERWALD PATENT- UND RECHTSANWALTSPA, DE

Representative=s name: MANITZ FINSTERWALD PATENTANWAELTE PARTMBB, DE

R016 Response to examination communication
R018 Grant decision by examination section/examining division
R020 Patent grant now final