Login| Sign Up| Help| Contact|

Patent Searching and Data


Title:
METHOD FOR OPERATING A HEAD-MOUNTED DISPLAY APPARATUS IN A MOTOR VEHICLE, CONTROL DEVICE, AND HEAD-MOUNTED DISPLAY APPARATUS
Document Type and Number:
WIPO Patent Application WO/2021/047845
Kind Code:
A1
Abstract:
The invention relates to a method for operating a head-mounted display apparatus (14) in a motor vehicle (10) interior. A control device (12) receives a sensor signal from a sensor device (18), wherein the received sensor signal describes (S1) at least one image of the current interior situation of the motor vehicle (10). The sensor device (18) generates a superimposition signal (S2) which describes a superimposition of the at least one image of the current interior situation (S4) while the predefined output content is being output, and transmits the generated superimposition signal to a display element of the display apparatus (14, S3) and thereby causes the display apparatus (14) to superimpose (S4) the at least one image of the current interior situation while the predefined output content is being output.

Inventors:
KÜHNE MARCUS (DE)
Application Number:
PCT/EP2020/072503
Publication Date:
March 18, 2021
Filing Date:
August 11, 2020
Export Citation:
Click for automatic bibliography generation   Help
Assignee:
AUDI AG (DE)
International Classes:
G02B27/01; G06F3/01
Foreign References:
DE102014010309A12016-01-14
DE102014018054A12016-06-09
DE102014001274A12015-08-06
DE102015003882A12016-09-29
DE102014010309A12016-01-14
DE102009049073A12011-04-21
DE102014213285A12016-01-14
Download PDF:
Claims:
PATENTANSPRÜCHE:

1. Verfahren zum Betreiben eines am Kopf tragbaren Anzeigegeräts (14) während sich das am Kopf tragbare Anzeigegerät (14) in einem Innen- raum eines Kraftfahrzeugs (10) befindet, wobei das Anzeigegerät (14) dazu eingerichtet ist, einen ein Unterhaltungsangebot beschreibenden vorgegebenen Ausgabeinhalt auszugeben, wobei eine Steuereinrich tung (12):

- ein Sensorsignal aus einer Sensoreinrichtung (18) empfängt, wobei das empfangene Sensorsignal mindestens ein Bild der aktuellen In nenraumsituation des Kraftfahrzeugs (10) beschreibt (S1),

- ein Einblendsignal erzeugt (S2), das ein Einblenden des mindestens einen Bilds der aktuellen Innenraumsituation (S4) während des Aus gebens des vorgegebenen Ausgabeinhalts beschreibt, und - das erzeugte Einblendsignal an ein Anzeigeelement des Anzeigege räts (14) überträgt (S3) und dadurch das Anzeigegerät (14) dazu veranlasst, das mindestens eine Bild der aktuellen Innenraumsituati on während des Ausgebens des vorgegebenen Ausgabeinhalts ein zublenden (S4).

2. Verfahren nach Anspruch 1, wobei das erzeugte Einblendsignal das Einblenden des mindestens einen Bilds der aktuellen Innenraumsitua tion (S4) in nur einem Teilbereich eines Gesichtsfelds eines Benutzers des Anzeigegeräts (14) beschreibt, vorzugsweise in einem primären oder zentralen Gesichtsfeld.

3. Verfahren nach einem der vorhergehenden Ansprüche, wobei das empfangene Sensorsignal mindestens ein Kamerabild einer Innen raumkamera der Sensoreinrichtung (18) beschreibt.

4. Verfahren nach einem der vorhergehenden Ansprüche, wobei die Steuereinrichtung (12) das Sensorsignal aus einer Sensoreinrichtung (18) des Kraftfahrzeugs (10) empfängt (S1).

5. Verfahren nach einem der vorhergehenden Ansprüche, wobei der vorgegebene Ausgabeinhalt eine virtuelle Realität beschreibt, insbe sondere eine 360 Grad virtuelle Realität.

6. Verfahren nach einem der vorhergehenden Ansprüche, wobei die Steuereinrichtung (12) das Einblendsignal nur dann erzeugt (S2) oder nur dann überträgt (S3), falls die Steuereinrichtung (12) ein Sprechen eines Insassen, vorzugsweise einen anderen Insassen als der Benut zer des Anzeigegeräts (14), feststellt (S5); vorzugsweise zusätzlich in Abhängigkeit von einer Lautstärke des festgestellten Sprechens.

7. Verfahren nach einem der vorhergehenden Ansprüche, wobei die Steuereinrichtung (12) das Einblendsignal nur dann erzeugt (S2) oder nur dann an das Anzeigeelement des Anzeigegeräts (14) überträgt (S3), falls die Steuereinrichtung (12) ein Annähern des Kraftfahrzeugs

(10) an ein Fahrtziel feststellt (S6).

8. Steuereinrichtung (12), die dazu eingerichtet ist, ein Verfahren nach einem der vorhergehenden Ansprüche durchzuführen.

9. Kraftfahrzeug (10), aufweisend eine Steuereinrichtung (12) nach An spruch 8.

10. Am Kopf tragbares Anzeigegerät (14), aufweisend eine Steuereinrich tung (12) nach Anspruch 8.

Description:
Verfahren zum Betreiben eines am Kopf tragbaren Anzeigegeräts in einem Kraftfahrzeug, Steuereinrichtung, und am Kopf tragbares Anzeigegerät

BESCHREIBUNG:

Die Erfindung betrifft ein Verfahren zum Betreiben eines am Kopf tragbaren Anzeigegeräts in einem Kraftfahrzeug.

Am Kopf zu tragende Ausgabegeräte haben mit der fortschreitenden Ent- Wicklung von autonom fahrenden Kraftfahrzeugen eine immer größere Be deutung beim Entertainment während einer Fahrt, ebenso bei der derzeit zunehmenden Entwicklung von Fahrdiensten. So steht insbesondere bei zum Beispiel Ride-Hailing-Fahrzeugen die Nutzung eines immersiven On- board-Entertainments vor der Herausforderung, dass der Benutzer beim Tragen zum Beispiel einer VR-Brille die Situation im Fahrzeug nicht mehr überblicken kann. Was bei normalem Passenger-Entertainment kein Problem ist, kann zum Beispiel in einem Ride-Hailing-Fahrzeug sehr wohl zum Prob lem werden, wo der Benutzer möglicherweise einen klareren Überblick über die Situation haben möchte, um sich wohler und sicherer zu fühlen.

So hat der Benutzer zum Beispiel während des Eintauchens in eine virtuelle Realität („VR“) in einem solchen Fahrzeug zum Beispiel nicht die Übersicht, was der Fahrer oder was andere Passagiere, die in der Regel fremde Perso nen sind, machen. Möchte zum Beispiel der fremde Fahrer mit dem Passa- gier reden, und wird man vom Fahrer angeschaut, so kann man das nicht sehen. Falls man von dem Fahrer angesprochen wird, kann man dies nur wahrnehmen, falls das Anzeigegerät die Ohren frei lässt und das Anzeigege rät keine Kopfhörer für ein Sound-Erlebnis eines Unterhaltungsprogramms hat. Kann man zum Beispiel den fremden Fahrer auch akustisch nicht wahr- nehmen, bleibt dem Fahrer nur die Möglichkeit, den Benutzer des Anzeige- geräts zum Beispiel auf die Schulter zu tippen oder am Arm anzufassen, was für den Benutzer des Anzeigegeräts nicht nur sehr unangenehm sein kann, sondern der Benutzer des Anzeigegeräts kann sich dabei sehr erschrecken.

Die DE 102014010309 A1 beschreibt eine Vorrichtung aufweisend eine vom Benutzer am Kopf zu tragende Anzeigeeinheit, die dazu ausgebildet ist, Augen des Benutzers zu einer Umgebung hin lichtdicht abzuschirmen und vor den Augen ein in einen virtuellen Raum angeordnetes virtuelles Objekt stereoskopisch anzuzeigen.

Aus der DE 102009049073 A1 ist ein Verfahren zur Darstellung von virtuel ler Information in einer Ansicht einer realen Umgebung umfasst.

Die DE 102014213285 A1 beschreibt ein Verfahren zur Anzeige von Inhal ten auf einer Datenbrille.

Eine Möglichkeit zum Umgehen der oben angesprochenen Problematik ist das Weglassen von Kopfhörern, wodurch jedoch der Benutzer keinen Ton zum virtuellen oder teilweise virtuellen Unterhaltungsprogramm hat, weswe gen zum Beispiel eine virtuelle Realität oder eine erweiterte Realität wenig immersiv sind.

Eine der Erfindung zugrundeliegende Aufgabe ist das Erhöhen eines Sicher heitsgefühls und eines Wohlbefindens im Kraftfahrzeug beim Nutzen eines Unterhaltungsangebots.

Die gestellte Aufgabe wird durch das erfindungsgemäße Verfahren und die erfindungsgemäßen Vorrichtungen gelöst. Vorteilhafte Weiterbildungen sind durch die Unteransprüche gegeben.

Die Erfindung basiert auf der Idee, bei der Nutzung eines am Kopf tragbaren Anzeigegeräts im Kraftfahrzeug zusätzlich zu dem eigentlichen Ausgabein halt eines Unterhaltungsangebots, also neben dem Ausgeben des Hauptcon tents ein durch einen oder mehrere Sensoren erfasstes Bild (und/oder eine erfasste Bildserie) des Innenraums des Kraftfahrzeugs einzublenden. Insbe sondere handelt es sich bei dem Bild oder bei der Bilderserie um ein aktuel les Bild oder eine aktuelle Bilderserie. Die oben besprochenen Nachteile werden deutlich reduziert oder sogar behoben. Ein Benutzer eines am Kopf tragbaren Anzeigegeräts fühlt sich sicher, weil der trotz dem Eintauchen in zum Beispiel die virtuelle Realität den Überblick über den Innenraum des Kraftfahrzeugs hat. Unangenehmen Situationen, in denen er zum Beispiel von einer fremden Person ohne Vorwarnung angefasst wird, kann wirksam vorgebeugt werden.

Das erfindungsgemäße Verfahren zum Betreiben eines am Kopf tragbaren Anzeigegeräts, zum Beispiel einer Augmented-Reality-Brille, einer Mixed- Reality-Brille oder einer Virtual-Reality-Brille, während sich das am Kopf tragbare Anzeigegerät in einem Innenraum eines Kraftfahrzeugs befindet, ist entsprechend ein Verfahren zum Betreiben des am Kopf tragbaren Anzeige geräts in dem Innenraum des Kraftfahrzeugs. Das Anzeigegerät ist dazu eingerichtet, einen ein Unterhaltungsangebot beschreibenden vorgegebenen Ausgabeinhalt auszugeben, zum Beispiel ein Computerspiel oder einen Film. Der Ausgabeinhalt kann zum Beispiel vorgegeben werden, indem der Benut- zer den Ausgabeinhalt und damit das Unterhaltungsangebot auswählt, oder indem der Ausgabeinhalt durch eine Standardeinstellung vorgegeben ist.

Das Verfahren wird durch eine Steuereinrichtung durchgeführt, wobei unter einer Steuereinrichtung ein Gerät oder eine Gerätekomponente zum Emp- fangen und Auswerten von Signalen, sowie zum Erzeugen von Steuersigna len zu verstehen ist. Das Verfahren kann entsprechend als computerimple mentiertes Verfahren zum Betreiben des am Kopf tragbaren Anzeigegeräts bezeichnet werden. Die Steuereinrichtung kann zum Beispiel als Steuerchip oder Steuergerät ausgestaltet sein. Die Steuereinrichtung kann vorzugswei- se eine Steuereinrichtung des Kraftfahrzeugs oder des am Kopf tragbaren Anzeigegeräts sein.

Die Steuereinrichtung empfängt ein Sensorsignal aus einer Sensoreinrich tung, wobei das empfangene Sensorsignal mindestens ein Bild der aktuellen Innenraumsituation des Kraftfahrzeugs beschreibt. Unter einer Sensorein richtung wird ein Gerät oder eine Gerätegruppe zum Erfassen von Eigen schaften der Umwelt verstanden, insbesondere zum Erfassen einer Eigen schaft des Innenraums, weswegen die Sensoreinrichtung vorzugsweise zum Beispiel mindestens eine Innenraumkamera des Kraftfahrzeugs umfassen kann, und/oder zum Beispiel mindestens einen Infrarotsensor. Das mindes tens eine Bild kann zum Beispiel ein Foto sein, ein Wärmebild, oder eine Bilderserie, zum Beispiel ein Film des Geschehens im Innenraum.

Die Steuereinrichtung erzeugt ein Einblendsignal, das ein Einblenden des mindestens einen Bilds der aktuellen Innenraumsituation während des Aus gebens des vorgegebenen Ausgabeinhalts beschreibt, und überträgt das erzeugte Einblendsignal an ein Anzeigeelement des Anzeigegeräts und veranlasst dadurch das Anzeigegerät, das mindestens eine Bild der aktuellen Innenraumsituation während des Ausgebens des vorgegebenen Ausgabein halts einzublenden. Ein Anzeigeelement ist ein Bauteil oder Bauteilgruppe oder Gerätekomponente zum Anzeigen von Bildinhalten, zum Beispiel ein Bildschirm. Mit anderen Worten veranlasst die Steuereinrichtung das Anzei gegerät dazu, zusätzlich zu dem Ausgabeinhalt, zum Beispiel zusätzlich zu einer virtuellen Realität, das mindestens eine Bild des Innenraums des Kraft fahrzeugs auszugeben, wobei das mindestens eine Bild des Innenraums vorzugsweise gleichzeitig mit dem Ausgabeinhalt ausgegeben wird, also das mindestens eine Bild des Innenraums nur in einem Teilbereich des Gesichts felds eines Benutzers des Anzeigegeräts eingeblendet wird.

Es ergeben sich die oben beschriebenen Vorteile.

Optional kann die Steuereinrichtung zusätzlich den vorgegebenen Ausgabe inhalt bereitstellen. Dies kann vorzugsweise dann gewünscht sein, falls die Steuereinrichtung eine Steuereinrichtung des Kraftfahrzeugs ist und der Ausgabeinhalt zum Beispiel als eine Art Entertainmentservice von dem Kraft fahrzeug zur Verfügung gestellt wird. Jedoch kann die Steuereinrichtung den vorgegebenen Ausgabeinhalt optional auch dann bereitstellen, falls die Steuereinrichtung eine Steuereinrichtung des Anzeigegeräts ist. Eine Ausführungsform des erfindungsgemäßen Verfahrens kann vorsehen, dass das erzeugte Einblendsignal das Einblenden des mindestens einen Bilds der aktuellen Innenraumsituation in nur einem Teilbereich eines Ge sichtsfelds des Benutzers des Anzeigegeräts beschreibt, vorzugsweise in einem primären oder zentralen Gesichtsfeld. Der Benutzer kann dadurch die Innenraumsituation sofort erfassen.

Optional kann das empfangene Sensorsignal mindestens ein Kamerabild einer Innenraumkamera der Sensoreinrichtung beschreiben. Der Benutzer kann auf diesem eingeblendeten Bild auch zum Beispiel Mikrogesten und Mimiken anderer Insassen erkennen.

Vorzugsweise kann die Steuereinrichtung das Sensorsignal aus einer Sen soreinrichtung des Kraftfahrzeugs empfangen. Dadurch kann der Innenraum aus verschiedenen Perspektiven aufgenommen werden und das Verfahren ist auch mit solchen am Kopf tragbaren Anzeigegeräten kompatibel, die keine entsprechende Sensorik aufweisen.

Der vorgegebene Ausgabeinhalt kann zum Beispiel eine virtuelle Realität beschreiben, insbesondere eine 360 Grad virtuelle Realität. Dies sorgt dafür, dass der Benutzer des Anzeigegeräts ein besonders immersives Erlebnis während der Fahrt hat.

Gemäß einer bevorzugten Ausführungsform des erfindungsgemäßen Verfah rens kann die Steuereinrichtung das Einblendsignal nur dann erzeugen oder nur dann übertragen, falls die Steuereinrichtung ein Sprechen eines Insas sen, vorzugsweise eines von dem Benutzer des Anzeigegeräts unterschired lichen Insassen, feststellt. Hierzu können zum Beispiel im Kraftfahrzeug Richtmikrofone eingebaut und mit der Steuereinrichtung gekoppelt sein.

Vorzugsweise kann das Erzeugen oder Übertragen des Einblendsignals zusätzlich in Abhängigkeit von einer Lautstärke des festgestellten Sprechens erfolgen. Der Benutzer bekommt also genau dann den Überblick über den Innenraum, wenn eine hohe Wahrscheinlichkeit besteht, dass die andere Person dem Benutzer des Anzeigegeräts etwas sagen möchte. Der Benutzer hat jedoch möglicherweise weiterhin den Sound des Ausgabeinhalts im Ohr, kann dann anhand des eingeblendeten Bildes jedoch erkennen, dass er selbst gerade angesprochen wird und kann entscheiden, ob er die Brille kurz absetzen möchte. Da das, was der andere Insasse gerade sagt, bei dieser Ausführungsform des Verfahrens unter Umständen nicht zum Benutzer des Anzeigegeräts durchdringt, wird ein Audioerlebnis nicht gestört. Gemäß einer weiteren bevorzugten Ausführungsform des erfindungsgemä ßen Verfahrens kann die Steuereinrichtung das Einblendsignal nur dann erzeugen, oder nur dann an das Anzeigeelement des Anzeigegeräts über tragen, falls die Steuereinrichtung ein Annähern des Kraftfahrzeugs an ein Fahrtziel des Kraftfahrzeugs feststellt, zum Beispiel ein Unterschreiten eines vorgegebenen Schwellenwerts einer Distanz zu dem Fahrtziel oder ein Errei chen von vorgegebenen geographischen Koordinaten. Der Benutzer wird also nur dann aus seiner virtuellen Realität „geholt“, falls eine Wahrschein lichkeit besteht, dass der Fahrer bald mit ihm zum Beispiel wegen einer Be zahlung für die Fahrt sprechen möchte oder dass der Benutzer wahrschein- lieh jetzt seine Sachen zusammenpacken muss, weil er bald am Fahrtziel angekommen ist.

In einer Variante kann die Steuereinrichtung das Einblendsignal nur dann erzeugen, oder nur dann an das Anzeigeelement des Anzeigegeräts über- tragen, falls die Steuereinrichtung ein Aktivierungssignal aus einem Kraft fahrzeug empfängt, zum Beispiel ein Signal, das ein erfolgtes Einschalten der Warnblinkanlage beschreibt. Alternativ kann ein Ausblenden des mindes tens einen Bilds der Innenraumsituation erfolgen, falls die Steuereinrichtung ein Deaktivierungssignal aus dem Kraftfahrzeug empfängt.

Vorzugsweise kann die Steuereinrichtung zusätzlich ein Sensorsignal aus der Sensoreinrichtung empfangen, das mindestens ein Bild einer Außenum gebung des Kraftfahrzeugs beschreibt, das vorzugsweise aus einer Außen kamera empfangen werden kann. Entweder kann dann das von der Steuer- einrichtung erzeugte Einblendsignal das zusätzlich mindestens eine Bild der Außenumgebung beschreiben, oder die Steuereinrichtung kann ein weiteres Einblendsignal erzeugen, welches das mindestens eine Bild der Außenum gebung beschreibt. Das Bild der Außenumgebung kann dann zum Beispiel an einer anderen Stelle eingeblendet werden als das Bild des Innenraums. Der Benutzer des Anzeigegeräts hat so zusätzlich auch noch einen Überblick über die Umgebung des Kraftfahrzeugs. Die Sensoreinrichtung kann hierfür zum Beispiel eine an einer Außenhaut oder auf einem Dach des Kraftfahr zeugs angeordnete Kamera aufweisen.

Gemäß einer weiteren Ausführungsform kann die Steuereinrichtung ein Kar tenbildsignal erzeugen, das ein Bild einer Navigationskarte mit zum Beispiel der aktuellen Position des Kraftfahrzeugs beschreiben kann. Dieses Bild kann zusätzlich zu dem Bild der Innenraumsituation durch das Anzeigegerät angezeigt werden, wozu die Steuereinrichtung das erzeugte Kartenein blendsignal an das Anzeigeelement des Anzeigegeräts übertragen kann.

Alternativ kann das Kartenbildsignal zum Beispiel nur in einem vorgegebe nen Zeitraum ausgegeben werden, zum Beispiel nur am Anfang und/oder nur am Ende der Fahrt, oder nur in einem vorgegeben Zeitraum nach Fahrt beginn und vor dem Fahrtende. Das Innenraumbild kann dann nur dann angezeigt werden, falls das Bild der Navigationskarte ausgeblendet ist.

Die oben gestellte Aufgabe wird gelöst durch eine Steuereinrichtung, die dazu eingerichtet ist, eine oder mehrere Ausführungsformen des erfindungs gemäßen Verfahrens durchzuführen. Die Steuereinrichtung kann vorzugs weise eine Prozessoreinrichtung aufweisen und/oder einen Datenspeicher. Unter einer Prozessoreinrichtung wird dabei eine Gerätekomponente zur elektronischen Datenverarbeitung verstanden, die mindestens einen Mikro- Controller und/oder einen Mikroprozessor aufweist. Auf dem optionalen Da tenspeicher kann vorzugsweise ein Programmcode zum Durchführen des erfindungsgemäßen Verfahrens abgelegt sein. Der Programmcode kann dann dazu ausgelegt sein, bei Ausführung durch die Prozessoreinrichtung die Steuereinrichtung dazu zu veranlassen, eine der oben beschriebenen Ausführungsformen des erfindungsgemäßen Verfahrens durchzuführen. Die Steuereinrichtung kann vorzugsweise als Steuerchip, Steuergerät oder An wenderprogramm („App“) ausgestaltet sein.

Die oben gestellte Aufgabe wird gelöst durch ein Kraftfahrzeug, das eine Ausführungsform der erfindungsgemäßen Steuereinrichtung aufweist. Das Kraftfahrzeug kann bevorzugt als Kraftwagen, insbesondere als Personen kraftwagen oder Lastkraftwagen, oder als Personenbus oder Motorrad aus gestaltet sein.

Die oben gestellte Aufgabe wird gelöst durch ein am Kopf tragbares Anzei gegerät, das eine Ausführungsform der erfindungsgemäßen Steuereinrich tung aufweist. Das am Kopf tragbare Anzeigegerät, ein sogenanntes „Head- Mounted-Display“, ist ein auf dem Kopf zu tragendes visuelles Ausgabegerät. Es ist dazu ausgestaltet und eingerichtet, Bilder entweder auf einem augen nahen Bildschirm zu präsentieren, oder die Bilder direkt auf die Netzhaut zu projizieren. Das am Kopf zu tragende Anzeigegerät kann vorzugsweise als Virtual-Reality-Brille, Augmented-Reality-Brille oder Mixed-Reality-Brille aus gestaltet sein.

Zu der Erfindung gehören auch Weiterbildungen der erfindungsgemäßen Steuereinrichtung, des erfindungsgemäßen Kraftfahrzeugs und des erfin dungsgemäßen Anzeigegeräts, die Merkmale aufweisen, wie sie bereits im Zusammenhang mit den Weiterbildungen des erfindungsgemäßen Verfah rens beschrieben worden sind. Aus diesem Grund sind die entsprechenden Weiterbildungen der erfindungsgemäßen Steuereinrichtung, des erfindungs gemäßen Kraftfahrzeugs und des erfindungsgemäßen Anzeigegeräts hier nicht noch einmal beschrieben.

Die Erfindung umfasst auch die Kombinationen der Merkmale der beschrie benen Ausführungsformen.

Im Folgenden sind Ausführungsbeispiele der Erfindung beschrieben. Hierzu zeigt die einzige Figur („Fig.“) eine schematische Darstellung zu einem ers- ten Ausführungsbeispiel des erfindungsgemäßen Verfahrens und der erfin dungsgemäßen Vorrichtungen.

Bei den im Folgenden erläuterten Ausführungsbeispielen handelt es sich um bevorzugte Ausführungsformen der Erfindung. Bei den Ausführungsbeispie len stellen die beschriebenen Komponenten der Ausführungsformen jeweils einzelne, unabhängig voneinander zu betrachtende Merkmale der Erfindung dar, welche die Erfindung jeweils auch unabhängig voneinander weiterbilden. Daher soll die Offenbarung auch andere als die dargestellten Kombinationen der Merkmale der Ausführungsformen umfassen. Des Weiteren sind die beschriebenen Ausführungsformen auch durch weitere der bereits beschrie benen Merkmale der Erfindung ergänzbar.

In den Figuren bezeichnen gleiche Bezugszeichen jeweils funktionsgleiche Elemente.

Die Fig. veranschaulicht das Prinzip des erfindungsgemäßen Verfahrens und der erfindungsgemäßen Vorrichtungen anhand eines ersten Ausführungsbei spiels. Flierzu zeigt die Fig. ein Kraftfahrzeug 10, zum Beispiel einen Perso nenkraftwagen eines Ride-Hailing-Fahrdienstes. Im Beispiel der Fig. kann die Steuereinrichtung 12 zum Beispiel ein Steuergerät oder ein Steuerchip des Kraftfahrzeugs 10 sein, alternativ jedoch in dem am Kopf tragbaren An zeigegerät 14 verbaut sein. Das am Kopf tragbare Anzeigegerät 14 kann als Anzeigeelement (in der Fig. nicht gezeigt) zum Beispiel einen Bildschirm aufweisen.

Die Kommunikation mit dem Anzeigegerät 14 erfolgt über eine Datenkom munikationsverbindung 16. Ist zum Beispiel die Steuereinrichtung 12 im Anzeigegerät 14 verbaut, kann die Datenkommunikationsverbindung 16 eine drahtgebundene Datenkommunikationsverbindung sein, zum Beispiel ein Kabel oder ein Datenbus. Ist die Steuereinrichtung 12 eine Gerätekompo nente des Kraftfahrzeugs 10, so kann die Datenkommunikationsverbin dung 16 zur Kommunikation zwischen Steuereinrichtung 12 und Anzeigege rät 14 ebenfalls eine drahtgebundene Datenkommunikationsverbindung 16 sein, zum Beispiel ein Kabel, vorzugsweise jedoch eine drahtlose Daten kommunikationsverbindung 16, zum Beispiel eine WLAN-, Mobilfunk-, Inter net- oder Bluetooth-Verbindung. Die Steuereinrichtung 12 der Fig. zeigt da bei eine optionale Prozessoreinrichtung 20, sowie einen optionalen Daten- Speicher 22.

Ist die Steuereinrichtung 12 eine Komponente des Kraftfahrzeugs 10, so kann die Datenkommunikationsverbindung 16 mit der Sensoreinrichtung 18, die in der Fig. als Innenraumkamera dargestellt ist, über zum Beispiel einen Datenbus des Kraftfahrzeugs 10 erfolgen, zum Beispiel über ein CAN-Bus.

Im Beispiel der Fig. kann ein Benutzer des beispielhaften Ride-Hailing- Fahrdienstes das Kraftfahrzeug 10 zum Beispiel für eine Fahrt von zehn Kilometern oder eine Fahrt von einer halben Stunde Fahrtdauer gebucht haben. Das Entertainment mittels des am Kopf tragbaren Anzeigegeräts 14 kann zum Beispiel ein zusätzlicher Service dieses Fahrdienstes sein. Der Benutzer kann entweder sein eigenes Anzeigegerät 14 mitgebracht haben, oder das Anzeigegerät 14 kann von dem Fahrdienst bereitgestellt werden. Für die Fahrt kann zum Beispiel ein Unterhaltungsangebot bereitgestellt werden, das eine Reise in eine virtuelle Realität während der Fahrt beschrei ben kann, insbesondere eine 360 Grad-virtuelle Realität. Der Ausgabeinhalt kann zum Beispiel eine Jurassic Park-virtuelle Realität sein, also ein Enter tainment, das eine virtuelle Reise durch eine urzeitliche Landschaft be schreibt.

Das Ausgeben des vorgegebenen Ausgabeinhalts kann zum Beispiel mit Beginn der Fahrt beginnen. Im Verfahrensschritt S1 empfängt die Steuerein richtung 12 mindestens ein Sensorsignal, das idealerweise von mehreren Innenraumkameras des Kraftfahrzeugs 10 den Innenraum beschreibt. In der Fig. ist zwar exemplarisch nur eine Kamera der Sensoreinrichtung 18 ge zeigt, idealerweise können jedoch mehrere Kameras so angeordnet sein, dass der Innenraum aus verschiedenen Perspektiven zum Beispiel gefilmt wird. Die Bilder oder Bildserien der einzelnen Kameras können dann entwe- der in einem Sensorsignal beschrieben sein, oder in mehreren Sensorsigna len.

Das im Verfahrensschritt S2 erzeugte Einblendsignal kann also ein Kamera- bild oder die Kamerabilder der mehreren Innenraumkameras beschreiben. Nach dem Übertragen des erzeugten Einblendsignals (S3) an das Anzei geelement des Anzeigegeräts 14 wird dieses dazu veranlasst, vorzugsweise in einem peripheren Gesichtsfeld des Benutzers das entsprechende Bild oder die entsprechenden Bilder einzublenden (S4). Ist die Steuereinrich- tung 12 eine Steuereinrichtung 12 des Kraftfahrzeugs 10, so wird das er zeugte Einblendsignal damit auch erst an das Anzeigegerät 14 übertragen (S3).

Der Benutzer kann wegen des eingeblendeten Bildes (oder der eingeblende- ten Bilder oder Bilderserie) zum Beispiel andere, fremde Passagiere sehen, sowie den ihm fremden Fahrer. Falls zum Beispiel der Fahrer ihn wegen etwas ansprechen möchte, zum Beispiel eine Frage hat, sieht der Benutzer des Anzeigegeräts 14, dass sich der Fahrer ihm zuwendet. Selbst wenn der Benutzer des Anzeigegeräts 14 durch das Anzeigegerät 14 zusätzlich einen Audioinhalt der virtuellen Realität über zum Beispiel Kopfhörer empfängt, kann er erkennen, dass der Fahrer mit ihm sprechen möchte. Falls der Fah rer also zunächst keine Antwort von dem Benutzer bekommt und sich dazu entscheidet, den Benutzer des Anzeigegeräts 14 an der Schulter zu rütteln, kommt dies durch den Benutzer nicht unvorbereitet und der Benutzer des Anzeigegeräts 14 erschrickt nicht. Außerdem kann der Benutzer des Anzei gegeräts 14 sowieso sehr viel früher reagieren und dem Rütteln an der Schulter Vorbeugen, in dem er zum Beispiel das Anzeigegerät 14 abnimmt, um mit dem Fahrer zu sprechen. Um die Aufmerksamkeit des Benutzers des Anzeigegeräts 14 nicht ständig sondern nur situationsspezifisch auf das eingeblendete Bild zu lenken, kann die Steuereinrichtung 12 das Einblendsignal nur dann erzeugen (S2) oder nur dann übertragen (S3), falls die Steuereinrichtung 12 zum Beispiel mittels eines Mikrofons (in der Fig. nicht gezeigt) feststellt (S5), dass zum Beispiel der Fahrer gerade angefangen hat zu sprechen. Optional kann hier zusätz lich ein Schwellenwert für eine Lautstärke hinterlegt sein, sodass das Bild zum Beispiel noch nicht eingeblendet wird, falls der Fahrer nur leise vor sich hin murmelt.

Alternativ oder zusätzlich kann das Erzeugen des Einblendsignals (S2) oder das Übertragen des erzeugten Einblendsignals (S3) nur dann erfolgen, falls die Steuereinrichtung 12 zum Beispiel anhand von durch ein Navigationsge rät des Kraftfahrzeugs 10 festgestellten Navigationsdaten und GPS-Daten feststellt (S6), dass sich das Kraftfahrzeug 10 zum Beispiel nur noch einen Kilometer vom Fahrtziel entfernt bewegt. Falls nur dann das Innenraumsignal eingeblendet wird, weiß der Benutzer des Anzeigegeräts 14, dass er bald da ist und kann deswegen besser zuordnen, dass eine von ihm gefühlte Unruhe im Innenraum des Kraftfahrzeugs 10 daher rührt, dass andere, fremde Passagiere langsam anfangen, ihre Sachen zusammenzupacken.

Insgesamt zeigen die Beispiele, wie durch die Erfindung ein am Kopf tragba re Anzeigegerät 14, vorzugsweise eine VR-Brille, bereitgestellt werden kann. In einem weiteren Beispiel kann zum Beispiel bei Nutzung einer VR-Brille im Kraftfahrzeug 10 neben dem Hauptcontent in die beispielhafte VR- Umgebung ein (zum Beispiel in der Regel kleines) Kamerabild eingeblendet werden (S4), das die Situation im Fahrzeuginnenraum und gegebenenfalls auch außerhalb des Kraftfahrzeugs 10 an den VR-Nutzer vermittelt kann, sodass dieser immer einen Überblick über die aktuelle Situation in und um das Kraftfahrzeug 10 hat.




 
Previous Patent: RADAR METHOD AND RADAR SYSTEM

Next Patent: LASER SCANNER