Die vorliegende Erfindung betrifft ein Verfahren zum Darstellen einer Umgebung eines Fahrzeugs, wobei das Fahrzeug ein kamerabasiertes Umgebungserfassungssystem aufweist zur Erfassung der Umgebung des Fahrzeugs, zum Bewegen des Fahrzeugs zu einer Zielposition in der Umgebung.

Auch betrifft die vorliegende Erfindung ein Fahrunterstützungssystem zum Darstellen einer Umgebung eines Fahrzeugs, mit einem kamerabasierten Umgebungserfassungssystem zur Erfassung der Umgebung des Fahrzeugs, und einer Verarbeitungseinheit, welche Bilder der Umgebung des Fahrzeugs empfängt, wobei das Fahrunterstützungssystem ausgeführt ist, das obige Verfahren durchzuführen.

Es sind verschiedenartige Assistenzfunktionen oder auch allgemein Fahrunterstützungssysteme zum Bewegen eines Fahrzeugs zu einer Zielposition bekannt. Dies betrifft beispielsweise das Parken von Fahrzeugen auf einem Parkplatz in der Umgebung, wobei der Parkplatz die Zielposition darstellt. So können entsprechende Assistenzsysteme beispielsweise eine Umgebung des Fahrzeugs erfassen, um bereits beim Erkennen von Parkplätzen oder anderen Zielpositionen zu helfen. Weiterhin können diese Systeme helfen, eine optimale Trajektorie zu bestimmen, der ein Fahrzeugführer folgen kann, um das Fahrzeug auf einem Parkplatz zu parken oder eine beliebige Zielposition zu erreichen.

Darüber hinaus sind beispielsweise autonomes oder teil-autonomes Parken wichtige Funktionen für aktuelle Fahrzeuge, die auch bereits in verschiedenen Fahrunterstützungssystemen Verwendung in diesen Fahrzeugen findet und das Parken erleichtert. Dabei wird das jeweilige Fahrzeug autonom oder teil-autonom auf einen erfassten Parkplatz manövriert. Dabei kann es dem Fahrzeugführer ermöglicht werden, dass Fahrzeug vor der Durchführung des Parkvorgangs bereits zu verlassen. Solche Funktionen sind beispielsweise bekannt, um das Fahrzeug nach dem Verlassen autonom in einer heimischen Garage zu parken oder auf einem beliebigen heimischen Stellplatz abzustellen. Insbesondere in Ballungsräumen sind Parkplätze oftmals rar, und das Einparken wie auch das Ausparken kann sich zeitaufwändig gestalten. Daher sind weitere Verbesserungen beim Parken von Fahrzeugen wünschenswert.

Zur Bewegung des Fahrzeugs zu einer Zielposition ist es oftmals hilfreich, einem Führer eines Fahrzeugs Details zu der Bewegung des Fahrzeugs zu der Zielposition zu visualisieren. Dadurch kann das Vertrauen in das autonome bzw. teilautonome Bewegen des Fahrzeugs erhöht und damit die Akzeptanz dieser Funktionen signifikant verbessert werden. Zur Darstellung der Details zu der Bewegung des Fahrzeugs zu der Zielposition, insbesondere zu einem Parkplatz in der Umgebung des Fahrzeugs, wird ein üblicherweise in dem Fahrzeug befindliches User Interface des Fahrzeugs mit einem Bildschirm verwendet. Dabei ist es wichtig, dass der Fahrzeugführer die Darstellung der Details mit seiner eigenen Wahrnehmung der Umgebung des Fahrzeugs möglichst einfach abgleichen kann.

Zur Darstellung der Details zu der Bewegung des Fahrzeugs zu der Zielposition sind dabei verschiedene Konzepte bekannt. So kann beispielsweise eine Darstellung einer künstlich erzeugten Fahrzeugumgebung inkl. der Details zu der Bewegung des Fahrzeugs zu der Zielposition vorgenommen werden. Dazu wird typischerweise eine schematische Darstellung, die mit der realen Umgebung, wie sie von dem Fahrzeugführer wahrgenommen wird, nur wenige Übereinstimmungen aufweist, verwendet.

Auch sind prinzipiell Darstellungen mit einer 360°-Ansicht aus einer Vogelperspektive mit realen Kamerabildern bekannt. Diese Darstellungen basieren auf einem kamerabasierten Umgebungserfassungssystem, das eine 360°-Erfassung der Umgebung durchführt. Solche kamerabasierten Umgebungserfassungssysteme umfassen beispielsweise ein Surroundview-Kamerasystem mit vier Kameras, die an dem Fahrzeug angebracht sind. Dabei erfolgt aber eine Verzerrung der realen Umgebung des Fahrzeugs, was einen Abgleich mit der realen Umgebung erschwert. Prinzipiell sind auch vergleichbare Darstellungen nach der Art eines Bowl View (Schüsselansicht) oder eines adaptiven Bowl View bekannt, welche diese Probleme teilweise reduzieren. Insgesamt besteht noch Verbesserungsbedarf bei der Darstellung von relevanten Informationen zur Bewegung des Fahrzeugs zu der Zielposition. Aus der DE 103 17044 A1 ist bekannt, dass es bei schwierigen Fahrmanövern für Führer von Kraftfahrzeugen oft schwierig abzuschätzen, entlang welcher Bahn sich ihr Fahrzeug bewegen wird und welcher Freiraum zur Kollisionsvermeidung notwendig ist. Dies ist insbesondere dann der Fall, wenn der Fahrzeugführer mit den Abmaßen des Fahrzeugs oder dessen Fahrverhalten nicht vertraut ist. Bei einem Verfahren zur Überwachung des Freiraums in Fahrtrichtung eines Fahrzeugs werden mittels eines Kamerasystems Bilddaten des im Bereich der Fahrtrichtung befindlichen Fahrzeugumfeldes aufgenommen. Zusätzlich wird auf Basis der Betriebsparameter und der Abmessungen des Fahrzeugs innerhalb einer Signalverarbeitungseinheit der für eine ungehinderte Fahrt benötigte Freiraum vorausberechnet. Dem Führer des Kraftfahrzeugs werden dabei zumindest Teile der durch das Kamerasystem erfassten Bilddaten des benötigten Freiraums auf einer Anzeige angezeigt. Die dem benötigten Freiraum zugeordneten Bilddaten werden einer Weiterverarbeitung unterzogen, wobei als ein Ergebnis dieser Weiterverarbeitung der Fahrzeugführer darüber informiert wird, ob für eine ungehinderte Fahrt ein ausreichender Freiraum zur Verfügung steht oder nicht. Es wird somit möglich, durch eine kontinuierliche Auswertung der Bilddaten automatisch auch auf eine dynamische Veränderung des Fahrzeugumfeldes zu reagieren und den Fahrzeugführer darüber zu informieren, ob für eine ungehinderte Fahrt ein ausreichender Freiraum zur Verfügung steht oder nicht.

Die DE 10 2011 082483 A1 betrifft ein Verfahren zur Unterstützung eines Fahrers eines Kraftfahrzeugs bei einem Fahrmanöver, das folgende Schritte umfasst: a) Erfassen von Daten der Umgebung des Kraftfahrzeugs, Auswerten der erfassten Daten zur Erfassung von Objekten und optische Darstellung der erfassten Objekte, b) Auswahl mindestens eines der erfassten Objekte durch den Fahrer des Kraftfahrzeugs, c) Bestimmung des geringsten Abstandes zwischen dem Kraftfahrzeug und dem mindestens einen ausgewählten Objekt d) Ausgabe einer Information an den Fahrer des Kraftfahrzeugs über den geringsten Abstand zwischen dem mindestens einen ausgewählten Objekt und im Kraftfahrzeug.

Die US 2015/0098623 A1 betrifft eine Bildverarbeitungsvorrichtung, die auf der Grundlage eines Bildes, das von einer in einem Auto installierten Kamera abgebildet wird, und der Entfernung zu einem Messpunkt an einem peripheren Objekt, berechnet durch einen im Auto installierten Entfernungssensor, einen virtuellen dreidimensionalen Raum zeichnet, in dem ein Umgebungsbereich um das Auto rekonstruiert wird. Die Bildverarbeitungsvorrichtung umfasst: eine Umrissberechnungseinheit, die konfiguriert ist, um einen Umriss einer Kreuzungsebene zwischen einer Mehrzahl von Gitterebenen, die in einem vorbestimmten Koordinatensystem definiert sind, und dem peripheren Objekt zu berechnen; und eine Bildverarbeitungseinheit, die so konfiguriert ist, dass sie den von der Umrissberechnungseinheit berechneten Umriss auf ein entsprechendes peripheres Objekt zeichnet, das in dem virtuellen dreidimensionalen Raum angeordnet ist; und die mehreren Gitterebenen mit Ebenen konfiguriert sind, die jeweils senkrecht zu einer X-Achse, einer Y-Achse und einer Z-Achse in dem vorbestimmten Koordinatensystem sind.

Ausgehend von dem oben genannten Stand der Technik liegt der Erfindung somit die Aufgabe zugrunde, ein Verfahren zum Darstellen einer Umgebung eines Fahrzeugs, wobei das Fahrzeug ein kamerabasiertes Umgebungserfassungssystem aufweist zur Erfassung der Umgebung des Fahrzeugs, zum Bewegen des Fahrzeugs zu einer Zielposition in der Umgebung und ein entsprechendes Fahrunterstützungssystem anzugeben, die ein einfaches Bewegen des Fahrzeugs zu der Zielposition in der Umgebung des Fahrzeugs ermöglichen.

Die Lösung der Aufgabe erfolgt erfindungsgemäß durch die Merkmale der unabhängigen Ansprüche. Vorteilhafte Ausgestaltungen der Erfindung sind in den Unteransprüchen angegeben.

Erfindungsgemäß ist somit ein Verfahren zum Darstellen einer Umgebung eines Fahrzeugs angegeben, wobei das Fahrzeug ein kamerabasiertes Umgebungserfassungssystem aufweist zur Erfassung der Umgebung des Fahrzeugs, zum Bewegen des Fahrzeugs zu einer Zielposition in der Umgebung, umfassend die Schritte Bereitstellen von Bildern der Umgebung des Fahrzeugs mit dem kamerabasierten Umgebungserfassungssystem, Erzeugen eines Umgebungsbildes in einer Vogelperspektive basierend auf den mit dem kamerabasierten Umgebungserfassungssystem bereitgestellten Bildern der Umgebung des Fahrzeugs, Bestimmen wenigstens einer Zielposition in der Umgebung des Fahrzeugs, Darstellen der wenigstens einen Zielposition in einer ersten Überlagerungsebene, welche die Umgebung des Fahrzeugs abdeckt, und Überlagern des Umgebungsbildes mit der ersten Überlagerungsebene. Erfindungsgemäß ist außerdem ein Fahrunterstützungssystem zum Darstellen einer Umgebung eines Fahrzeugs angegeben, mit einem kamerabasierten Umgebungserfassungssystem zur Erfassung der Umgebung des Fahrzeugs, und einer Verarbeitungseinheit, welche Bilder der Umgebung des Fahrzeugs empfängt, wobei das Fahrunterstützungssystem ausgeführt ist, das obige Verfahren durchzuführen.

Grundidee der vorliegenden Erfindung ist es also, eine Verbesserung beim Bewegen von Fahrzeugen zu einer Zielposition zu erreichen, indem eine möglichst intuitive Darstellung von Zielinformation wie z.B. einer Zielposition in der Umgebung des Fahrzeugs, erfolgt, so dass ein Fahrzeugführer in die Lage versetzt wird, mit geringem Zeitaufwand die Zielinformation zuverlässig zu verarbeiten. Dazu wird mit dem vorliegenden Verfahren eine Darstellung ermöglicht, die einerseits realitätsnah ist und einen hohen Grad an optischer Übereinstimmung mit der Umgebung des Fahrzeugs, wie sie auch von dem Fahrzeugführer wahrgenommen wird, aufweist, und andererseits zusätzliche Informationen basierend auf einer Verarbeitung von Sensorinformation betreffend die Umgebung des Fahrzeugs in der Form einer ersten Überlagerungsebene bereitstellt. Dadurch kann die zusätzliche Information einfach dargestellt werden, indem lediglich eine entsprechende Überlagerung des Umgebungsbildes in der Vogelperspektive mit der Information der ersten Überlagerungsebene erfolgt.

Das Fahrzeug kann ein prinzipiell beliebiges Fahrzeug sein. Das Fahrzeug ist vorzugsweise zum autonomen oder teil-autonomen Manövrieren zum Bewegen zu der Zielposition ausgeführt, insbesondere zum Parken des Fahrzeugs. Dabei kann es dem Fahrzeugführer ermöglicht werden, dass Fahrzeug vor der Durchführung einer Bewegung zu der Zielposition bereits zu verlassen.

Das Fahrunterstützungssystem stellt eine Fahrerassistenzfunktion oder allgemein eine Fahrunterstützungsfunktion bereit. Durch die Fahrerassistenzfunktion kann beispielsweise eine Umgebung des Fahrzeugs erfasst werden, um die wenigstens eine Zielposition zu bestimmen und ggf. eine optimale Trajektorie zu bestimmen, der ein Fahrzeugführer folgen kann, um das Fahrzeug zu der Zielposition zu bewegen.

Abhängig von der Art des Fahrunterstützungssystems kann die Zielposition beispielsweise ein Parkplatz zum Parken des Fahrzeugs sein. Beim Valet Parken kann die Zielposition ein Übergabepunkt zur Übergabe des Fahrzeugs an den Valet sein. Bei anderen Fahrunterstützungssystemen, wie beispielsweise einem automatischen Garagenparken, kann die Zielposition durch die Garage definiert sein. Beim gelernten Parken kann die Zielposition eine beliebige gelernte Parkposition sein, die unabhängig von einem vorgegebenen Parkplatz ist. Hierbei handelt es sich um eine beispielhafte, nicht abschließende Aufzählung möglicher Zielpositionen.

Die Umgebung betrifft einen Bereich um das Fahrzeug. Hiermit ist üblicherweise ein Bereich innerhalb eines Erfassungsbereichs von Umgebungssensoren des Fahrzeugs gemeint, d.h. ein Bereich in einem Radius von beispielsweise 5-50 Metern um das Fahrzeug, vorzugsweise in einem Radius von nicht mehr als etwa 20 Metern. Darüber hinaus kann der Bereich durch vorab von den Umgebungssensoren empfangene und gespeicherte Sensorinformation prinzipiell darüber hinaus erweitert werden.

Das Darstellen der Umgebung des Fahrzeugs umfasst eine Ausgabe von Information über eine grafische Benutzerschnittstelle in dem Fahrzeug, beispielsweise mit einem Bildschirm, vorzugsweise mit einem berührungsempfindlichen Bildschirm, um zusätzlich Eingaben des Fahrzeugführers zu empfangen.

Das kamerabasierte Umgebungserfassungssystem ermöglicht eine 360°-Erfassung der Umgebung. Solche kamerabasierten Umgebungserfassungssysteme umfassen beispielsweise ein Surroundview-Kamerasystem mit vier Kameras, die an dem Fahrzeug angebracht sind, d.h. an jeder Seite des Fahrzeugs ist eine der Kameras angebracht. Die Kameras sind vorzugsweise Weitwinkelkameras mit einem Öffnungswinkel von etwa 170°-180°. Durch diese vier Kameras können jeweils vier Bilder bereitgestellt werden, die gemeinsam die Umgebung des Fahrzeugs vollständig abdecken, d.h. eine 360°-Ansicht ermöglichen. Entsprechend werden Bilder der Umgebung des Fahrzeugs mit dem kamerabasierten Umgebungserfassungssystem zunächst als eine Mehrzahl Einzelbilder bereitgestellt.

Das Erzeugen eines Umgebungsbildes in der Vogelperspektive umfasst somit typischerweise eine Verarbeitung der Mehrzahl Einzelbilder, die von dem kamerabasierten Umgebungserfassungssystem gemeinsam bereitgestellt werden. Die Bilder werden entsprechend verarbeitet und/oder kombiniert, um die 360°-Ansicht zu erzeugen. Das Bestimmen wenigstens einer Zielposition in der Umgebung des Fahrzeugs kann auf unterschiedliche Weise erfolgen. Dazu kann Sensorinformation unmittelbar verarbeitet werden, um die wenigstens eine Zielposition zu bestimmen. Alternativ oder zusätzlich kann beispielsweise basierend auf der Sensorinformation zunächst eine Umgebungskarte erzeugt werden, auf deren Basis dann die wenigstens eine Zielposition bestimmt wird. Das Bestimmen der Zielposition kann beispielsweise ein Erkennen eines Parkplatzes basierend auf Linienmarkierungen, Schildern oder anderen Kennzeichnungen, ein identifizieren eines Übergabepunktes an den Valet oder ein erkennen einer Garage umfassen.

Das Darstellen der wenigstens einen Zielposition in der ersten Überlagerungsebene betrifft eine Repräsentation der Zielposition zum Bewegen des Fahrzeugs. Die Zielposition wird vorzugsweise mit einer Begrenzungslinie, welche die Zielposition vollständig oder teilweise umgibt, dargestellt. Prinzipiell kann die Zielposition auch mit einer farblich abgesetzten Fläche oder mit einer Kontourlinie mit Umrissen des eigenen, zu der Zielposition zu bewegenden Fahrzeugs dargestellt werden. Die Zielposition kann eine exakte Position sein, oder beispielsweise ein Fenster definieren, in das das Fahrzeug bewegt wird. Entsprechend kann das Darstellen der jeweiligen Zielposition in der ersten Überlagerungsebene auf prinzipiell unterschiedliche Weisen erfolgen.

Durch das Überlagern des Umgebungsbildes mit der ersten Überlagerungsebene erfolgt eine kombinierte Darstellung von dem Umgebungsbild, wie es von dem Fahrzeugführer wahrgenommen wird, mit der Zielinformation, die hier eine Zielposition in der Umgebung des Fahrzeugs betrifft. Das Überlagern bedeutet dabei, dass vorhandene Teile des Umgebungsbildes durch die Überlagerungsebene ersetzt oder ergänzt werden, beispielsweise durch eine teilweise durchsichtige Überlagerung. Dabei ist es nicht erforderlich, dass das Umgebungsbild eine Bildfläche vollständig ausfüllt, was auch beispielsweise bei einer Abschattung von Teilen der Umgebung durch Hindernisse nicht möglich ist. Das Umgebungsbild kann auch lediglich mit Bildinformation der ersten Überlagerungsebene ergänzt werden.

In vorteilhafter Ausgestaltung der Erfindung umfasst das Verfahren folgende zusätzliche Schritte: Ermitteln eines nicht befahrbaren Bereichs in der Umgebung des Fahrzeugs, Darstellen des nicht befahrbaren Bereichs in einer zweiten Überlagerungsebene, welche die Umgebung des Fahrzeugs abdeckt, und Überlagern des Umgebungsbildes mit der zweiten Überlagerungsebene. Der nicht befahrbare Bereich kann entweder unmittelbar ermittelt werden, oder es kann zunächst ein befahrbarer Bereich ermittelt werden, und der nicht befahrbare Bereich wird durch eine Invertierung des befahrbaren Bereichs ermittelt. Die zweite Überlagerungsebene stellt eine zusätzliche Überlagerungsebene zu der ersten Überlagerungsebene dar, wobei die Überlagerungsebenen in prinzipiell beliebiger Reihenfolge zur Überlagerung zunächst des Umgebungsbildes und ggf. der jeweils anderen Überlagerungsebene verwendet werden können. Es gelten die obigen Ausführungen in Bezug auf die Überlagerung des Umgebungsbildes durch die erste Überlagerungsebene entsprechend.

In vorteilhafter Ausgestaltung der Erfindung umfasst das Darstellen des nicht befahrbaren Bereichs in einer zweiten Überlagerungsebene, welche die Umgebung des Fahrzeugs abdeckt, ein Erzeugen einer Darstellung des nicht befahrbaren Bereichs in einer Seitenansicht basierend auf den mit dem kamerabasierten Umgebungserfassungssystem bereitgestellten Bildern der Umgebung des Fahrzeugs. Eine solche Seitenansicht entspricht einer Darstellung, wie sie beispielsweise bei einem adaptiven Bowl View verwendet wird. Die Seitenansicht ermöglicht einen hohen Wiederkennungswert der Umgebung in dem Umgebungsbild. Dabei wird die Seitenansicht vorzugsweise verzerrungsfrei oder zumindest mit reduzierten Verzerrungen erzeugt, wofür eine entsprechende Bildverarbeitung der Bilder des kamerabasierten Umgebungserfassungssystems durchgeführt wird.

In vorteilhafter Ausgestaltung der Erfindung umfasst das Verfahren folgende zusätzliche Schritte: Ermitteln wenigstens eines Flindernisses in der Umgebung des Fahrzeugs, Darstellen des wenigstens einen Flindernisses in einer dritten Überlagerungsebene, welche die Umgebung des Fahrzeugs abdeckt, und Überlagern des Umgebungsbildes mit der dritten Überlagerungsebene. Das Ermitteln des wenigstens eines Flindernisses kann unmittelbar basierend auf Sensorinformation erfolgen. Alternativ oder zusätzlich kann beispielsweise basierend auf der Sensorinformation eine Umgebungskarte erzeugt werden, die als Basis zum Ermitteln des wenigstens eines Flindernisses dient. Die dritte Überlagerungsebene stellt eine zusätzliche Überlagerungsebene zu der ersten und ggf. der zweiten Überlagerungsebene dar, wobei die Überlagerungsebenen in prinzipiell beliebiger Reihenfolge zur Überlagerung zunächst des Umgebungsbildes und ggf. der anderen Überlagerungsebene(n) verwendet werden können. Die obigen Ausführungen in Bezug auf die Überlagerung des Umgebungsbildes durch die erste Überlagerungsebene gelten entsprechend.

In vorteilhafter Ausgestaltung der Erfindung umfasst das Darstellen des wenigstens einen Hindernisses in einer dritten Überlagerungsebene ein Darstellen von Begrenzungen des wenigstens einen Hindernisses. Das wenigstens eine Hindernis wird vorzugsweise mit einer Begrenzungslinie, die das wenigstens eine Hindernis vollständig oder teilweise umgibt, dargestellt. Prinzipiell kann das wenigstens eine Hindernis auch mit einer farblich abgesetzte Fläche oder auch anders dargestellt werden.

In vorteilhafter Ausgestaltung der Erfindung umfasst das Verfahren einen Schritt zum Identifizieren des wenigstens einen Hindernisses, und das Darstellen des wenigstens einen Hindernisses in einer dritten Überlagerungsebene, welche die Umgebung des Fahrzeugs abdeckt, umfasst ein Darstellen des wenigstens einen Hindernisses basierend auf der Identifizierung des wenigstens einen Hindernisses. Das Identifizieren des wenigstens einen Hindernisses betrifft eine Klassifizierung, um beispielsweise Drittfahrzeuge, Bäume, Personen, Gebäude, Mülltonnen oder andere Hindernisse zu identifizieren. Darauf basierend kann eine Darstellung des Hindernisses in Übereinstimmung mit der jeweiligen Klasse gewählt werden. Es wird also eine Art Platzhalter des wenigstens einen Hindernisses basierend auf der Identifikation ausgewählt und in der dritten Überlagerungsebene dargestellt. Das Darstellen des Hindernisses erfolgt dabei vorzugsweise in Übereinstimmung mit der Darstellung des Umgebungsbildes in einer Draufsicht. Alternativ kann das Hindernis in einer Seitenansicht dargestellt werden.

In vorteilhafter Ausgestaltung der Erfindung umfasst das Darstellen des wenigstens einen Hindernisses in einer dritten Überlagerungsebene, welche die Umgebung des Fahrzeugs abdeckt, ein Bereitstellen eines Kamerabildes des wenigstens einen Hindernisses. Das Kamerabild ermöglicht eine besonders realitätsnahe Darstellung des wenigstens einen Hindernisses, wodurch eine einfache Zuordnung der Darstellung mit der Umgebung, wie sie von dem Fahrzeugführer wahrgenommen wird, ermöglicht wird. Das Kamerabild wird dabei vorzugsweise in Übereinstimmung mit der Darstellung des Umgebungsbildes in einer Draufsicht erzeugt bzw. es erfolgt eine Projektion des Kamerabildes in die Draufsicht. In vorteilhafter Ausgestaltung der Erfindung umfasst das Darstellen des wenigstens einen Hindernisses in einer dritten Überlagerungsebene, welche die Umgebung des Fahrzeugs abdeckt, eine distanzabhängige Darstellung des wenigstens einen Hindernisses. Insbesondere umfasst die distanzabhängige Darstellung eine Darstellung des Hindernisses oder von Bereichen des Hindernisses mit verschiedenen Farben abhängig von der Distanz. So können nahe Hindernisse beispielsweise mit einer roten Farbe dargestellt werden, während entfernte Hindernisse beispielsweise mit einer grünen Farbe oder mit einer schwarzen oder grauen Farbe dargestellt werden können. Eine solche Darstellung bietet sich vor allem für Bereiche an, die nicht mehr aktiv von den Umgebungssensoren erfasst werden. Damit kann einem Benutzer angezeigt werden, dass dieser Bereich zuvor von einem der Umgebungssensoren erfasst wurde, aber keine aktive Erfassung mehr erfolgt. Auch können beispielsweise nahe Bereiche eines Hindernisses mit einer anderen Farbe dargestellt werden als entfernte Bereiche des Hindernisses. Anstatt einer einheitlichen Farbe kann auch eine farbliche Darstellung mit einem Farbverlauf oder einem farbigen Muster erfolgen.

In vorteilhafter Ausgestaltung der Erfindung umfasst das Darstellen des wenigstens einen Hindernisses in einer dritten Überlagerungsebene, welche die Umgebung des Fahrzeugs abdeckt, ein Erzeugen einer Darstellung des wenigstens einen Hindernisses in einer Seitenansicht basierend auf den mit dem kamerabasierten Umgebungserfassungssystem bereitgestellten Bildern der Umgebung des Fahrzeugs. Eine solche Seitenansicht entspricht einer Darstellung, wie sie beispielsweise bei einem adaptiven Bowl View verwendet wird. Die Seitenansicht ermöglicht einen hohen Wiederkennungswert des Hindernisses in dem Umgebungsbild. Dabei wird die Seitenansicht vorzugsweise verzerrungsfrei oder mit reduzierten Verzerrungen erzeugt, wofür eine entsprechende Bildverarbeitung der Bilder des kamerabasierten Umgebungserfassungssystems erforderlich ist.

In vorteilhafter Ausgestaltung der Erfindung erfolgt das Bestimmen wenigstens einer Zielposition in der Umgebung des Fahrzeugs und/oder das Bestimmen eines nicht befahrbaren Bereichs in der Umgebung des Fahrzeugs und/oder das Ermitteln des wenigstens einen Hindernisses in der Umgebung des Fahrzeugs unter Berücksichtigung der mit dem kamerabasierten Umgebungserfassungssystem bereitgestellten Bilder der Umgebung des Fahrzeugs. Das kamerabasierte Umgebungserfassungssystem dient also als Umgebungssensor zur Überwachung der Umgebung des Fahrzeugs. Prinzipiell sind damit keine weiteren Umgebungssensoren erforderlich, können aber zur Verbesserung der Überwachung verwendet werden.

In vorteilhafter Ausgestaltung der Erfindung umfasst das Verfahren einen Schritt zum Empfangen von Sensorinformation wenigstens eines weiteren Umgebungssensors, insbesondere eines LiDAR-basierten Umgebungssensors, eines Radarsensors und/oder einer Mehrzahl Ultraschallsensoren, der zumindest einen Teilbereich der Umgebung des Fahrzeugs erfasst, und das Bestimmen wenigstens einer Zielposition in der Umgebung des Fahrzeugs und/oder das Bestimmen eines nicht befahrbaren Bereichs in der Umgebung des Fahrzeugs und/oder das Ermitteln des wenigstens einen Flindernisses in der Umgebung des Fahrzeugs erfolgt unter Berücksichtigung der Sensorinformation des wenigstens einem weiteren Umgebungssensors. Durch eine geeignete Auswahl von Umgebungssensoren, die in beliebiger Kombination und Anzahl an dem Fahrzeug angebracht sein können, wird somit eine besonders zuverlässige Erfassung der Umgebung des Fahrzeugs ermöglicht, um die wenigstens eine Zielposition, den nicht befahrbaren Bereich und/oder das wenigstens eine Hindernis zu bestimmen bzw. zu erfassen. Das kamerabasierte Umgebungserfassungssystem kann dabei zusätzliche Sensorinformation bereitstellen, die gemeinsam mit der Sensorinformation des wenigstens eines weiteren Umgebungssensors verarbeitet werden, um die wenigstens eine Zielposition, den nicht befahrbaren Bereich und/oder das wenigstens eine Hindernis zu bestimmen bzw. zu erfassen. Alternativ wird lediglich die Sensorinformation des wenigstens einen weiteren Umgebungssensors verwendet. Bei der Verwendung mehrerer gleichartiger und/oder verschiedenartiger Umgebungssensoren kann eine Fusion der Sensorinformation der Umgebungssensoren erfolgen.

In vorteilhafter Ausgestaltung der Erfindung umfasst das Erzeugen eines Umgebungsbildes in einer Vogelperspektive basierend auf den mit dem kamerabasierten Umgebungserfassungssystem bereitgestellten Bildern der Umgebung des Fahrzeugs ein Erzeugen des Umgebungsbildes nach der Art eines Bowl-View.

Dabei handelt es sich um eine besondere Ansicht nach der Art einer Schüssel, bei der die Ränder nach oben gezogen werden. Im Gegensatz zu einer Darstellung in einer Vogelperspektive können also die Ränder teilweise in einer Seitenansicht dargestellt werden. Dies verbessert gegenüber einer reinen Draufsicht oder Vogelperspektive insbesondere in entfernten Bereichen die Übereinstimmung mit der Umgebung, wie sie von dem Fahrzeugführer wahrgenommen wird.

In vorteilhafter Ausgestaltung der Erfindung umfasst das Darstellen der wenigstens einen Zielposition in einer ersten Überlagerungsebene, welche die Umgebung des Fahrzeugs abdeckt, ein Darstellen einer Trajektorie zum Bewegen des Fahrzeugs zum Erreichen der Zielposition. Die Trajektorie ermöglicht eine gute Einschätzung der Bewegung zum Erreichen der Zielposition. Insbesondere kann bereits vorab überprüft werden, ob das Fahrzeug überhaupt zu der Zielposition bewegt werden kann. Die Trajektorie kann mehrere Züge mit Fahrtrichtungsumkehr umfassen.

In vorteilhafter Ausgestaltung der Erfindung umfasst das Darstellen einer Trajektorie zum Bewegen des Fahrzeugs zum Erreichen der Zielposition ein Darstellen eines von dem Fahrzeug beim Fahren der Trajektorie überstrichenen Bereichs. Damit kann abhängig von dem befahrbaren Bereich einfach festgestellt werden, ob eine Gefahr eines Verlassene des befahrbaren Bereichs besteht. Der von dem Fahrzeug beim Fahren der Trajektorie überstrichene Bereich wird vorzugsweise abhängig von den Abmessungen des jeweiligen Fahrzeugs, welches das Fahrunterstützungssystem umfasst, dargestellt. Alternativ kann ein Mittelwert oder ein Maximalwert für übliche Fahrzeuge als entsprechende Abmessung des Fahrzeugs verwendet werden.

Alternativ oder zusätzlich können zusätzliche Zielinformationen dargestellt werden, wie beispielsweise Flaltepunkte entlang der Trajektorie, ein Geschwindigkeitsprofil beim Fahren entlang der Trajektorie, wobei vorzugsweise eine aktuelle Geschwindigkeit mittels unterschiedlicher Farben kodiert wird, eine Betätigung einer Zufahrtsbeschränkung (Garagentor, Gartentor, Poller (versenkbar), Schranke) beim Fahren entlang der Trajektorie, oder andere.

In vorteilhafter Ausgestaltung der Erfindung umfasst das Verfahren eine Schritt zum Speichern der mit dem kamerabasierten Umgebungserfassungssystem bereitgestellten Bilder der Umgebung des Fahrzeugs, und das Erzeugen eines Umgebungsbildes in einer Vogelperspektive umfasst ein Erzeugen wenigstens eines ersten Bereichs des Umgebungsbildes basierend auf aktuell mit dem kamerabasierten Umgebungserfassungssystem bereitgestellten Bildern der Umgebung des Fahrzeugs und wenigstens eines zweiten Bereichs mit gespeicherten Bildern der Umgebung des Fahrzeugs. Damit kann gegenüber einer Verwendung nur von aktuellen Bildern ein vergrößerter Bereich um das Fahrzeug abgedeckt werden, wobei selbstverständlich eine Aktualität der gespeicherten Bilder zu berücksichtigen ist. Das Bestimmen der wenigstens einen Zielposition in der Umgebung des Fahrzeugs kann ebenfalls basierend auf den aktuell mit dem kamerabasierten Umgebungserfassungssystem bereitgestellten Bildern der Umgebung des Fahrzeugs in Kombination mit gespeicherten Bildern durchgeführt werden. Entsprechendes gilt für das Ermitteln der Flindernisse in der Umgebung. Dabei kann das Umgebungsbild eine unterschiedliche Darstellung des wenigstens einen ersten Bereichs und des wenigstens einen zweiten Bereichs aufweisen, um auf eine potentielle Gefahr von Änderungen in dem zweiten Bereich ausgehend von den gespeicherten Bildern hinzuweisen. Der erste und der zweite Bereich können beispielsweise unterschiedliche Einfärbungen (rot, grau) aufweisen.

Nachfolgend wird die Erfindung unter Bezugnahme auf die anliegende Zeichnung anhand bevorzugter Ausführungsformen näher erläutert. Die dargestellten Merkmale können sowohl jeweils einzeln als auch in Kombination einen Aspekt der Erfindung darstellen. Merkmale verschiedener Ausführungsbeispiele sind übertragbar von einem Ausführungsbeispiel auf ein anderes.

Es zeigt

Fig. 1 eine schematische Darstellung eines Fahrzeugs mit einem Fahrunterstützungssystem gemäß einer ersten, bevorzugten Ausführungsform in einer Seitenansicht,

Fig. 2 eine erste beispielhafte Darstellung des Fahrzeugs mit der Umgebung um das Fahrzeug in Übereinstimmung mit der ersten Ausführungsform,

Fig. 3 eine zweite beispielhafte Darstellung des Fahrzeugs mit der Umgebung um das Fahrzeug in Übereinstimmung mit einer zweiten Ausführungsform,

Fig. 4 eine dritte beispielhafte Darstellung des Fahrzeugs mit der Umgebung um das Fahrzeug in Übereinstimmung mit einer dritten Ausführungsform, Fig. 5 eine vierte beispielhafte Darstellung des Fahrzeugs mit der Umgebung um das Fahrzeug nach der Art eines Bowl View in Übereinstimmung mit einer vierten Ausführungsform,

Fig. 6 eine fünfte beispielhafte Darstellung des Fahrzeugs mit der Umgebung um das Fahrzeug nach der Art eines adaptiven Bowl View in Übereinstimmung mit einer fünften Ausführungsform, und

Fig. 7 ein Ablaufdiagram eines Verfahrens zum Darstellen einer Umgebung des Fahrzeugs aus Fig. 1 in Übereinstimmung mit dem Fahrzeug und dem Fahrunterstützungssystem des ersten Ausführungsbeispiels.

Die Figur 1 zeigt ein Fahrzeug 10 mit einem Fahrunterstützungssystem 12 gemäß einer ersten, bevorzugten Ausführungsform. Das Fahrzeug 10 ist ein prinzipiell beliebiges Fahrzeug 10, das vorzugsweise zum autonomen oder teil-autonomen manövrieren ausgeführt ist, beispielsweise zum Parken des Fahrzeugs 10. Beim autonomen Fahren wird einem Fahrzeugführer ermöglicht, dass Fahrzeug 10 bereits vor der Durchführung eines entsprechenden Parkvorgangs zu verlassen.

Das Fahrunterstützungssystem 12 umfasst ein kamerabasiertes Umgebungserfassungssystem 14, das eine 360°-Erfassung einer Umgebung 16 des Fahrzeugs 10 durchführt. Das kamerabasierten Umgebungserfassungssystem 14, das hier der Einfachheit halber als einzelnes Gerät dargestellt ist, umfasst in diesem Ausführungsbeispiel vier einzelne, in den Figuren nicht einzeln dargestellte Surroundview-Kameras, die an dem Fahrzeug 10 angebracht sind. Im Detail ist an jeder Seite des Fahrzeugs 10 eine der vier Kameras angebracht. Die vier Kameras sind vorzugsweise Weitwinkelkameras mit einem Öffnungswinkel von etwa 170°-180°. Durch die vier Kameras werden jeweils vier Bilder bereitgestellt, die gemeinsam die Umgebung 16 des Fahrzeugs 10 vollständig abdecken, d.h. eine 360°-Ansicht ermöglichen.

Das Fahrunterstützungssystem 12 umfasst weiterhin eine Verarbeitungseinheit 18, welche die Bilder von dem kamerabasierten Umgebungserfassungssystem 14 über einen Datenbus 20 empfängt. Das Fahrunterstützungssystem 12 umfasst außerdem einen Umgebungssensor 22, der in diesem Ausführungsbeispiel als Radarsensor oder als LiDAR-basierter Sensor ausgeführt ist. Der Umgebungssensor 22 überträgt Sensorinformation betreffend die Umgebung 16 das Fahrzeugs 10 über den Datenbus 20 an die Verarbeitungseinheit 18. In einer alternativen Ausführungsform ist der Umgebungssensor 22 als Ultraschallsensoreinheit mit einer Mehrzahl einzelner Ultraschallsensoren ausgeführt.

Fahrunterstützungssystem 12 stellt eine Fahrerassistenzfunktion oder allgemein eine Fahrunterstützungsfunktion bereit, wobei die Umgebung 16 des Fahrzeugs 10 erfasst wird, um beim Bestimmen von Zielpositionen 24 zu helfen und ggf. eine optimale Trajektorie zu bestimmen, der ein Fahrzeugführer folgen kann, um das Fahrzeug 10 zu der Zielposition 24 zu bewegen.

Entsprechend ist das Fahrunterstützungssystem 12 in diesem Ausführungsbeispiel ausgeführt, ein Verfahren zum Darstellen der Umgebung 16 des Fahrzeugs 10 durchzuführen, um das Fahrzeug 10 zu einer Zielposition 24 in der Umgebung 16 zu bewegen. Das Verfahren ist in Figur 7 als Ablaufdiagramm wiedergegeben und wird nachfolgend unter zusätzlichem Bezug auf die Figuren 2 bis 6 beschrieben. Die Figuren 2 bis 6 betreffen unterschiedliche Darstellungen der Umgebung 16 des Fahrzeugs 10, die alle mit dem gleichen Fahrunterstützungssystem 12 erzeugt werden können. Eine Änderung der Darstellung erfordert lediglich eine geänderte Konfiguration bzw. Programmierung des Fahrunterstützungssystems 12. Das Fahrunterstützungssystem 12 des ersten Ausführungsbeispiels ist ausgeführt zum autonomen Parken des Fahrzeugs 10.

Entsprechend ist die Zielposition 24 in diesem Ausführungsbeispiel ein Parkplatz 24 zum Parken des Fahrzeugs 10.

Das Verfahren beginnt mit Schritt S100, der ein Bereitstellen von Bildern der Umgebung 16 des Fahrzeugs 10 mit dem kamerabasierten Umgebungserfassungssystem 14 umfasst. Die vier einzelnen Bilder werden jeweils gemeinsam über den Datenbus 20 and die Verarbeitungseinheit 18 des Fahrunterstützungssystems 12 übertragen.

Schritt S110 betrifft ein Erzeugen eines Umgebungsbildes 26 in einer Vogelperspektive basierend auf den mit dem kamerabasierten Umgebungserfassungssystem 14 bereitgestellten Bildern der Umgebung 16 des Fahrzeugs 10. Entsprechend wird das Umgebungsbild 26 aus einer Verarbeitung der Einzelbilder, die von dem kamerabasierten Umgebungserfassungssystem 14 gemeinsam bereitgestellt werden, erzeugt. Die Einzelbilder werden entsprechend verarbeitet und/oder kombiniert, um die 360°-Ansicht zu erzeugen. Eine entsprechende Darstellung mit dem Umgebungsbild 26 in der Vogelperspektive ist in den Figuren 2 bis 4 gezeigt.

In einer alternativen, vierten Ausführungsform, die in Figur 5 dargestellt ist, wird das Umgebungsbild 26 nach der Art eines Bowl-View erzeugt. Der Bowl View betrifft eine besondere Ansicht nach der Art einer Schüssel, bei der die Ränder nach oben gezogen werden, so dass im Gegensatz zu einer Darstellung in der Vogelperspektive Ränder zumindest teilweise in einer Seitenansicht dargestellt sind. Die Darstellung des Umgebungsbildes 26 erfolgt somit nach der Art eines Bowl-View

In einer alternativen, fünften Ausführungsform, die in Figur 6 dargestellt ist, wird das Umgebungsbild 26 nach der Art eines adaptiven Bowl-View erzeugt.

Schritt S120 betrifft ein Empfangen von Sensorinformation des Umgebungssensors 22, der zumindest einen T eilbereich der Umgebung 16 des Fahrzeugs 10 erfasst. Die Sensorinformation des Umgebungssensors 22 wird über den Datenbus 20 an die Verarbeitungseinheit 18 übertragen.

Schritt S130 betrifft ein Bestimmen wenigstens einer Zielposition 24 in der Umgebung 16 des Fahrzeugs 10. Das Bestimmen der wenigstens einen Zielposition 24 betrifft in diesem Ausführungsbeispiel das Ermitteln eines Parkplatzes als Zielposition 24. Das Bestimmen der wenigstens einen Zielposition 24 erfolgt in diesem Ausführungsbeispiel unter Berücksichtigung der Sensorinformation des Umgebungssensors 22 zusammen mit der Sensorinformation des kamerabasierten Umgebungserfassungssystems 14, d.h. den von dem kamerabasierten Umgebungserfassungssystem 14 bereitgestellten Bildern. Die Sensorinformation des Umgebungssensors 22 und des kamerabasierten Umgebungserfassungssystems 14, wird gemeinsam verarbeitet, um den wenigstens einen Parkplatz 24 zu erfassen. Dabei wird eine an sich optionale Fusion der Sensorinformation des Umgebungssensors 22 und des kamerabasierten Umgebungserfassungssystems 14 durchgeführt. Das Ermitteln des wenigstens einen Parkplatzes 24 in der Umgebung 16 des Fahrzeugs 10 kann auf unterschiedliche Weise erfolgen. Dazu kann die Sensorinformation des Umgebungssensors 22 zusammen mit der Sensorinformation des kamerabasierten Umgebungserfassungssystems 14 unmittelbar verarbeitet werden, um den wenigstens einen Parkplatz 24 zu bestimmen. Alternativ oder zusätzlich kann basierend auf der Sensorinformation eine Umgebungskarte erzeugt werden, die als Basis zum Ermitteln des Parkplatzes 24 dient.

Schritt S140 betrifft ein Darstellen der wenigstens einen Zielposition 24, d.h. des wenigstens einen Parkplatzes 24, in einer ersten Überlagerungsebene, welche die Umgebung 16 des Fahrzeugs 10 abdeckt. Das Darstellen des wenigstens einen Parkplatzes 24 in der ersten Überlagerungsebene betrifft eine Repräsentation des Parkplatzes 24 zum Parken des Fahrzeugs 10. Der Parkplatz 24 wird in diesem Ausführungsbeispiel mit einer Begrenzungslinie, die den Parkplatz 24 vollständig umgibt, dargestellt. Alternativ oder zusätzlich kann der Parkplatz 24 mit einer farblich abgesetzten Fläche dargestellt werden.

Schritt S150 betrifft ein Ermitteln eines nicht befahrbaren Bereichs 30 in der Umgebung 16 des Fahrzeugs 10. Der nicht befahrbare Bereich 30 kann entweder unmittelbar ermittelt werden, oder es kann zunächst ein befahrbarer Bereich 28 ermittelt werden, und der nicht befahrbare Bereich 30 wird durch eine Invertierung des befahrbaren Bereichs 28 ermittelt.

Auch das Ermitteln des nicht befahrbaren Bereichs 30 in der Umgebung 16 des Fahrzeugs 10 erfolgt unter Berücksichtigung der Sensorinformation des Umgebungssensors 22 zusammen mit der Sensorinformation des kamerabasierten Umgebungserfassungssystems 14, d.h. den von dem kamerabasierten Umgebungserfassungssystem 14 bereitgestellten Bildern. Die Sensorinformation des Umgebungssensors 22 und des kamerabasierten Umgebungserfassungssystems 14, wird gemeinsam verarbeitet, um den nicht befahrbaren Bereichs 30 zu erfassen. Dabei wird eine an sich optionale Fusion der Sensorinformation des Umgebungssensors 22 und des kamerabasierten Umgebungserfassungssystems 14 durchgeführt.

Das Ermitteln des nicht befahrbaren Bereichs 30 in der Umgebung 16 des Fahrzeugs 10 kann auf unterschiedliche Weise erfolgen. Dazu kann die Sensorinformation des Umgebungssensors 22 zusammen mit der Sensorinformation des kamerabasierten Umgebungserfassungssystems 14 unmittelbar verarbeitet werden, um den nicht befahrbaren Bereichs 30 zu bestimmen. Alternativ oder zusätzlich kann basierend auf der Sensorinformation eine Umgebungskarte erzeugt werden, die als Basis zum Ermitteln des nicht befahrbaren Bereichs 30 dient.

Schritt S160 betrifft ein Darstellen des nicht befahrbaren Bereichs 30 in einer zweiten Überlagerungsebene, welche die Umgebung 16 des Fahrzeugs 10 abdeckt. Die zweite Überlagerungsebene stellt eine zusätzliche Überlagerungsebene zu der ersten Überlagerungsebene dar. In den Darstellungen der Figuren 2 bis 4 wird der nicht befahrbare Bereich 30 durch eine einheitliche Fläche mit einer vorgegebenen Farbe markiert, so dass das Umgebungsbild 26 in dem nicht befahrbaren Bereich 30 von dieser Fläche überlagert wird und nicht wahrgenommen werden kann.

In der vierten oder fünften Ausführungsform, die in den Figuren 5 und 6 entsprechend dargestellt ist, wird zur Darstellung des nicht befahrbaren Bereichs 30 eine Seitenansicht basierend auf den mit dem kamerabasierten Umgebungserfassungssystem 14 bereitgestellten Bildern der Umgebung 16 des Fahrzeugs 10 erzeugt. Die Seitenansicht wird dabei vorzugsweise dynamisch generiert und fortlaufend angepasst. Eine solche Seitenansicht entspricht einer Darstellung, wie sie beispielsweise bei einem Bowl View, der in Figur 5 dargestellt ist, oder einem adaptiven Bowl View, der in Figur 6 dargestellt ist, verwendet wird. Beim adaptiven Bowl View wird die Seitenansicht mit reduzierten Verzerrungen erzeugt, wofür eine entsprechende Bildverarbeitung der Bilder des kamerabasierten Umgebungserfassungssystems 14 erfolgt.

Schritt S170 betrifft ein Ermitteln wenigstens eines Flindernisses 32 in der Umgebung 16 des Fahrzeugs 10.

Auch das Ermitteln des wenigstens eines Flindernisses 32 in der Umgebung 16 des Fahrzeugs 10 erfolgt unter Berücksichtigung der Sensorinformation des Umgebungssensors 22 zusammen mit der Sensorinformation des kamerabasierten Umgebungserfassungssystems 14, d.h. den von dem kamerabasierten Umgebungserfassungssystem 14 bereitgestellten Bildern. Die Sensorinformation des Umgebungssensors 22 und des kamerabasierten Umgebungserfassungssystems 14, wird gemeinsam verarbeitet, um das wenigstens eine Hindernis 32 zu erfassen. Dabei wird eine an sich optionale Fusion der Sensorinformation des Umgebungssensors 22 und des kamerabasierten Umgebungserfassungssystems 14 durchgeführt.

Das Ermitteln des wenigstens eines Hindernisses 32 kann unmittelbar basierend auf der Sensorinformation des Umgebungssensors 22 zusammen mit dem kamerabasierten Umgebungserfassungssystem 14 erfolgen. Alternativ oder zusätzlich kann basierend auf der Sensorinformation eine Umgebungskarte erzeugt werden, die als Basis zum Ermitteln des wenigstens eines Hindernisses 32 dient.

Schritt S180 betrifft ein Darstellen des wenigstens einen Hindernisses 32 in einer dritten Überlagerungsebene, welche die Umgebung 16 des Fahrzeugs 10 abdeckt.

In dem ersten Ausführungsbeispiel, das in Figur 2 dargestellt ist, umfasst das Darstellen des wenigstens einen Hindernisses 32 in der dritten Überlagerungsebene ein Darstellen von Begrenzungslinien des wenigstens einen Hindernisses 32. In diesem Ausführungsbeispiel markieren die Begrenzungslinien lediglich dem Fahrzeug 10 zugewandte Seiten der Hindernisse 32. Alternativ oder zusätzlich können die Hindernisse 32 mit einer farblich abgesetzten Fläche dargestellt werden. Dabei erfolgt auf in Figur 2 nicht dargestellter Weise eine distanzabhängige Darstellung der Hindernisse 32 mit verschiedenen Farben abhängig von der Distanz. In diesem Ausführungsbeispiel werden nahe Bereiche eines Hindernisses 32 beispielsweise mit einer roten Farbe dargestellt, während entfernte Bereiche des Hindernisses 32 mit einer grünen Farbe oder mit einer schwarzen oder grauen Farbe dargestellt werden. Eine solche Darstellung bietet sich vor allem für Bereiche an, die nicht mehr aktiv von den Umgebungssensoren erfasst werden. Damit kann einem Benutzer angezeigt werden, dass dieser Bereich zuvor von einem der Umgebungssensoren erfasst wurde, aber keine aktive Erfassung mehr erfolgt.

In dem zweiten Ausführungsbeispiel, das in Figur 3 dargestellt ist, wird zunächst ein Schritt zum Identifizieren des wenigstens einen Hindernisses 32 durchgeführt. Dies umfasst eine Klassifizierung der Hindernisse 32, um beispielsweise Drittfahrzeuge, Bäume, Personen, Gebäude, Mülltonnen oder andere Hindernisse 32 zu identifizieren.

In den hier gezeigten Ausführungsbeispielen sind die Hindernisse 32 Drittfahrzeuge. Basierend auf der Identifizierung wird eine Darstellung für das Hindernis 32 in Übereinstimmung mit der jeweiligen Klasse gewählt, die in der dritten Überlagerungsebene verwendet wird. Das Darstellen des Hindernisses 32 erfolgt in diesem Ausführungsbeispiel in Übereinstimmung mit der Darstellung des Umgebungsbildes 26 in einer Draufsicht. Alternativ kann das Hindernis 32 in einer Seitenansicht dargestellt werden. Entsprechend wird das wenigstens eine Hindernis 32 basierend auf der Identifizierung dargestellt.

In dem dritten Ausführungsbeispiel, das in Figur 4 dargestellt ist, umfasst das Darstellen des wenigstens einen Hindernisses 32 in der dritten Überlagerungsebene ein Bereitstellen eines Kamerabildes des wenigstens einen Hindernisses 32, wie es von dem kamerabasierten Umgebungserfassungssystem 14 aufgenommen wurde. Dadurch wird eine realitätsnahe Darstellung des wenigstens einen Hindernisses 32 erzeugt. Das Kamerabild wird dabei vorzugsweise in Übereinstimmung mit der Darstellung des Umgebungsbildes 26 in einer Draufsicht erzeugt bzw. es erfolgt eine Projektion des Kamerabildes in die Draufsicht. Alternativ wird das Kamerabild des wenigstens einen Hindernisses 32 in einer Seitenansicht basierend auf den mit dem kamerabasierten Umgebungserfassungssystem 14 bereitgestellten Bildern der Umgebung 16 des Fahrzeugs 10 erzeugt. Das wenigstens eine Hindernis 32 wird somit nach der Art einer Darstellung, wie sie beispielsweise bei einem adaptiven Bowl View verwendet wird, visualisiert. Die Seitenansicht wird vorzugsweise verzerrungsfrei oder mit reduzierten Verzerrungen erzeugt, wofür eine entsprechende Bildverarbeitung der Bilder des kamerabasierten Umgebungserfassungssystems 14 durchgeführt wird.

Schritt S190 betrifft ein Überlagern des Umgebungsbildes 26 mit der ersten, zweiten und dritten Überlagerungsebene. Beim Überlagern werden vorhandene Teile des Umgebungsbildes 26 durch die Information der Überlagerungsebenen ersetzt oder ergänzt, beispielsweise durch eine teilweise durchsichtige Überlagerung. Dabei ist es nicht erforderlich, dass das Umgebungsbild 26 eine Bildfläche vollständig ausfüllt. In dem Fall wird das Umgebungsbild 26 lediglich mit Bildinformation der Überlagerungsebenen ergänzt. Dabei können die Überlagerungsebenen in prinzipiell beliebiger Reihenfolge angeordnet sein und sich ggf. gegenseitig überlagern. Das so überlagerte Umgebungsbild 26 kann über ein User Interface des Fahrzeugs 10 ausgegeben und dem Fahrzeugführer angezeigt werden. Durch das Überlagern des Umgebungsbildes 26 mit den Überlagerungsebenen erfolgt eine kombinierte Darstellung von der Umgebung 16, wie sie von dem Fahrzeugführer wahrgenommen wird, zusammen mit der Parkinformation, die hier eine Position des Parkplatzes 24 in der Umgebung 16 des Fahrzeugs 10 betrifft.

Bezugszeichenliste 10 Fahrzeug

12 Fahrunterstützungssystem

14 kamerabasiertes Umgebungserfassungssystem

16 Umgebung

18 Verarbeitungseinheit

20 Datenbus

22 Umgebungssensor

24 Zielposition, Parkplatz

26 Umgebungsbild

28 befahrbarer Bereich

30 nicht befahrbarer Bereich

32 Hindernis