Ein neues System soll die Interaktion zwischen dem Fahrer und seinem Fahrzeug ermöglichen. Auf dem Mobile World Congress 2019 in Barcelona (25. – 28. Februar 2019) stellt das Unternehmen BMW Natural Interaction vor. Das neue System kombiniert fortschrittlichste Sprach- mit erweiterter Gestensteuerung und Blickerkennung und macht damit erstmals eine echte Multimodalität bei der Bedienung möglich. Erste Funktionen von BMW Natural Interaction werden ab 2021 im BMW iNEXT verfügbar sein. Das gibt dem Fahrer die Möglichkeit, ähnlich wie im zwischenmenschlichen Dialog, Sprache, Gesten und Blick gleichzeitig und in vielseitiger Kombination miteinander für die Interaktion mit seinem Fahrzeug zu nutzen.
Sprachanweisungen, Gesten und die Blickrichtung werden vom Fahrzeug zuverlässig erkannt, kombiniert und der damit ausgedrückte Bedienwunsch umgesetzt. Die freie und multimodale Interaktion wird durch Spracherkennung, eine optimierte Sensorik und eine kontextsensitive Analyse von Gesten ermöglicht. Durch präzise Erfassung von Hand- und Fingerbewegungen wird neben der Art der Geste erstmals auch deren Richtung in einem auf den gesamten Fahrerarbeitsplatz ausgedehnten Interaktionsraum registriert. Gesprochene Anweisungen werden mit Hilfe von verständlicher natürlicher Sprache erfasst und verarbeitet. Ein intelligenter und lernender Algorithmus, der ständig weiterentwickelt wird, kombiniert und interpretiert die komplexen Informationen, worauf das Fahrzeug entsprechend reagiert. Dadurch entsteht ein multimodales Interaktionserlebnis, das die Wünsche des Fahrers in den Mittelpunkt stellt.
Durch die Kombination verschiedener Modalitäten lassen sich Fahrzeugfunktionen auf unterschiedliche Weise auslösen. Der Fahrer entscheidet entsprechend seiner Vorlieben, Gewohnheiten oder der jeweiligen Situation, wie er interagieren möchte. Ist der Fahrer gerade im Gespräch, wählt er Gesten und Blick, bleibt der Blick auf der Straße, nutzt er Sprache und Gesten. Auf diese Weise lassen sich im Fahrzeug beispielsweise berührungslos Fenster oder Schiebedach öffnen und schliessen, die Luftausströmer verstellen oder eine Auswahl auf dem Control Display vornehmen. Möchte der Fahrer mehr über die Bedienung seines Fahrzeugs erfahren, kann er beispielweise auf Tasten deuten und deren Funktionalität erfragen. Durch die erweiterte Gestenerkennung und den hohen Grad der Vernetzung des Fahrzuges beschränkt sich der Interaktionsraum nicht mehr nur auf den Innenraum. Der Insasse hat erstmals die Möglichkeit auch mit seiner direkten Umgebung wie zum Beispiel Gebäuden oder Parkplätzen zu interagieren. Durch einen Fingerzeig und ein Sprachkommando werden komplexe Anfragen schnell und einfach beantwortet. „Was ist das für ein Gebäude? Wie lange hat das Geschäft noch offen? Wie heisst dieses Restaurant? Darf ich hier parken und wieviel kostet das?“
Erweiterte Sensorik, präzise Auswertung durch künstliche Intelligenz.
Über das Infrarotlichtsignal kann die Gestenkamera jetzt im Bereich des gesamten Fahrerarbeitsplatzes ausgeführte Bewegungen von Hand und Finger dreidimensional erfassen und einen präzisen Richtungsvektor ermitteln. Damit genügt es beispielsweise, mit dem Zeigefinger auf das Control Display zu weisen und ein Kommando auszusprechen, um den gewünschten Bedienschritt ohne Berührung des Bildschirms auszulösen. Zusätzlich registriert die in die Instrumentenkombination integrierte High-Definition-Kamera die Kopf- und Blickrichtung. Die verbaute Kameratechnologie wertet die Bilder aus und errechnet daraus die erforderlichen Vektordaten, die im Fahrzeug weiterverarbeitet werden. Um zusätzlich zu den Gesten auch Sprachanweisungen schnell und zuverlässig interpretieren zu können, werden die vom Fahrer multimodal an das Fahrzeug übermittelten Informationen zusammengeführt und mit Hilfe von künstlicher Intelligenz ausgewertet. Der für die Interpretation im Fahrzeug zuständige Algorithmus wird mittels maschinelles lernen und Auswertung unterschiedlicher Bedienszenarien stetig optimiert und weiterentwickelt.
Keine Kommentare:
Kommentar veröffentlichen