Mercedes Benz läutet eine neue Ära der Benutzeroberfläche ein mit menschenähnlichem virtuellen Assistenten auf Basis generativer KI 3500x2333

Mercedes-Benz läutet eine neue Ära der Benutzeroberfläche ein – mit menschenähnlichem virtuellen Ass...

12. Jan. 2024

Mercedes-Benz Österreich GmbH

Mer­cedes-Benz läutet eine neue Ära der Benutze­r­ober­fläche ein – mit men­schenähn­lichem virtuellen Assis­ten­ten auf Basis gen­er­a­tiv­er KI

Mercedes Benz läutet eine neue Ära der Benutzeroberfläche ein mit menschenähnlichem virtuellen Assistenten auf Basis generativer KI 3500x2333
  • MBUX Virtual Assistant verändert die Beziehung zwischen Fahrzeug und Fahrendem durch natürliche Konversation und ebnet den Weg für hyperpersonalisiertes Kundenerlebnis der Zukunft
  • MBUX Surround Navigation verbindet Routenführung und Fahrassistenz nahtlos in Echtzeit, leistungsstarke 3D-Grafiken der Unity Game Engine erwecken die Benutzeroberfläche zum Leben
  • Kontinuierliche Erweiterung des Portfolios an Drittanbieter-Apps bietet Kundinnen und Kunden eine noch größere Auswahl für Entertainment, Produktivität und vieles mehr

Mercedes-Benz stellt auf der CES 2024 zahlreiche Entwicklungen vor, die seine Vision für das hyperpersonalisierte Kundenerlebnis der Zukunft definieren – nicht nur im Fahrzeug. Highlight ist der neue integrierte MBUX Virtual Assistant. Er nutzt fortschrittliche Software und generative künstliche Intelligenz (KI), um eine natürlichere und intuitivere Beziehung zum Fahrzeug herzustellen. Sie bietet proaktiv Unterstützung an, um das Leben einfacher zu machen. Diese bahnbrechende Entwicklung hebt den Sprachassistenten „Hey Mercedes“ mit Unity’s hochauflösenden Game-Engine-Grafiken in eine neue visuelle Dimension. Der virtuelle Assistent läuft auf dem selbst entwickelten Betriebssystem Mercedes-Benz Operating System (MB.OS). Seine Einführung startet mit den Fahrzeugen auf der kommenden MMA-Plattform (Mercedes-Benz Modular Architecture). Das Concept CLA Class basiert auf dieser Plattform und bietet ebenfalls einen Ausblick auf MB.OS. Auf der CES feiert es seine Nordamerika-Premiere.

„Durch Fortschritte in der künstlichen Intelligenz wird der Mercedes-Benz von morgen seine Fahrerin und seinen Fahrer kennen wie nie zuvor. Sie wird das Leben unserer Kundinnen und Kunden verbessern und bereichern – in ihrem Fahrzeug und auch in anderen Bereichen. Wir haben auf diesem Weg bereits große Fortschritte gemacht. Die jüngsten Entwicklungen, die wir auf der CES zeigen, geben einen spannenden Ausblick auf das, was vor uns liegt.“ Markus Schäfer, Mitglied des Vorstands der Mercedes-Benz Group AG, Chief Technology Officer

Mercedes Benz läutet eine neue Ära der Benutzeroberfläche ein mit menschenähnlichem virtuellen Assistenten auf Basis generativer KI 3500x2333 3
Mercedes Benz läutet eine neue Ära der Benutzeroberfläche ein mit menschenähnlichem virtuellen Assistenten auf Basis generativer KI 3500x2333 2
Mercedes Benz läutet eine neue Ära der Benutzeroberfläche ein mit menschenähnlichem virtuellen Assistenten auf Basis generativer KI 3500x2333 1

MBUX Virtual Assistant macht das Leben mit natürlicher Interaktion und proaktiver Intelligenz einfacher

Der wegweisende MBUX Virtual Assistant auf Basis von MB.OS ist die derzeit menschenähnlichste Schnittstelle mit einem Mercedes-Benz. Er verbindet alle intelligenten Systeme von MBUX in einer einzigen Einheit. Damit präsentiert er Kundinnen und Kunden ein neues Design mit natürlicher und empathischer Interaktion. Der MBUX Virtual Assistant ist eine Weiterentwicklung des erstmals im VISION EQXX vorgestellten Systems. Er nutzt generative KI und proaktive Intelligenz, um das Leben so einfach, angenehm und komfortabel wie möglich zu gestalten. So kann er hilfreiche Vorschläge machen, die auf erlerntem Verhalten und situativem Kontext basieren. Dies kann zum Beispiel das Abspielen der neuesten Nachrichten am Morgen oder der Start eines bevorzugten Massageprogramms am Ende des Arbeitstages sein. Und wenn sich die Fahrerin oder der Fahrer zu einem im Kalender eingetragenen Termin verspätet, kann das System anbieten, sich direkt aus dem Fahrzeug einzuwählen. Auf Wunsch können Kundinnen und Kunden diese Prozesse auch automatisieren. Durch die Einbindung der Ambientebeleuchtung und des Soundsystems lässt sich das Erlebnis weiter steigern. So können beispielsweise warmes Licht und sanfte Musik eine entspannende Massage begleiten.

„Das Mercedes-Benz Kundenerlebnis von morgen wird hyperpersonalisiert sein. Mit generativer KI bringt unser MBUX Virtual Assistant mehr Vertrauen und Empathie in die Beziehung zwischen Fahrzeug und Fahrendem. Dank unserer MB.OS Chip-to-Cloud-Architektur werden unsere zukünftigen Fahrzeuge den Kundinnen und Kunden genau das bieten, was sie brauchen, wenn sie es brauchen.“ Magnus Östberg, Chief Software Officer, Mercedes-Benz AG

Mit vier Verhaltenseigenschaften ist der Assistent stets im Einklang mit Kundenbedürfnissen und -vorlieben

Der MBUX Virtual Assistant zeichnet sich durch vier „Persönlichkeitsmerkmale“ aus, die zu einem abgerundeten Ganzen verschmelzen: natürlich, vorausschauend, empathisch und persönlich. Das zugrundeliegende Prinzip ist immer natürlich. Es bietet eine nahtlose Interaktion, die das Beste aus Sprach- und Grafikschnittstellen nutzt. Kundinnen und Kunden können wählen, ob sie den Assistenten mit oder ohne den Aktivierungsbegriff „Hey Mercedes“ ansprechen möchten. Der MBUX Virtual Assistant nutzt die Vorteile großer Sprachmodelle (Large Language Models, LLMs). Dadurch kann er mit einem natürlichen Dialog auf Fragen und Befehle antworten. Dies wirkt wie ein Gespräch mit einer Freundin oder einem Freund. Der Assistent beantwortet Fragen auf der Grundlage von Allgemeinwissen. Er kann auch intelligente Fragen stellen, um das Gewünschte zu klären und Schlussfolgerungen zu ziehen. Durch seinen vorausschauenden „Charakter“ kann der MBUX Virtual Assistant proaktiv Vorschläge und Routinen anbieten. Sie basieren auf situativem Kontext, erlerntem Verhalten und der Nutzung generativer KI. Gleichzeitig erzeugt eine emotionalere neuronale Stimme, die unterschiedliche Sprechweisen haben kann, ein Gefühl der Empathie. Damit er stets ein sehr persönlicher Assistent ist, kann der Fahrende ihn mit einer Reihe von Optionen an seine eigenen Vorlieben anpassen.

Leistungsstarke 3D-Grafiken machen visuelle Kommunikation noch intuitiver und emotionaler

Der ganzheitliche Ansatz verbindet einen natürlicheren Dialog mit visuellem Feedback durch fortschrittliche 3D-Grafiken der Unity Game Engine. Im neuen MBUX Virtual Assistant nutzt ein „lebendiger“ Stern-Avatar Animationen, um unterschiedliche Stimmungen und Gemütszustände auszudrücken. Die Emotionen reichen von ruhig über aufgeregt bis hin zu sensibel. Weitere Animationen zeigen, ob der virtuelle Assistent gerade spricht, zuhört, nachdenkt, einen Vorschlag macht oder eine Warnung gibt. Bewegung, Helligkeit, Intensität und Farbe interagieren nahtlos, um intuitiv mit Fahrerin oder Fahrer zu kommunizieren.

MBUX Surround Navigation verbindet Assistenz und Routenführung zu einem nahtlosen Erlebnis

Die integrierte visuelle Kommunikation erreicht auch mit der MBUX Surround Navigation eine neue Dimension. Dank der tief integrierten Bereichsarchitektur von MB.OS zeigt die fortschrittliche Navigation in Echtzeit eine reale Ansicht von Fahrzeug und Umgebung. Der Fahrende profitiert von einem deutlich verbesserten Situationsbewusstsein. Denn er sieht, was das Fahrzeug sieht. Die nahtlose Einbindung von Informationen mit 3D-Grafiken der Unity Game Engine in das Instrumentendisplay bietet einen äußerst intuitiven Überblick. Es zeigt auf einen Blick alles, was der Fahrende wissen muss. Zum Beispiel die Art des Verkehrs – sei es ein anderes Auto, ein Transporter, ein Lastwagen oder ein Radfahrender. Auch Fußgänger in der Nähe des Straßenrands und potenzielle Gefahren werden angezeigt. Das System blendet die Routenführung in eine realistische Darstellung der Umgebung ein. Das ist besonders hilfreich in belebten städtischen Verkehrsräumen. Kundinnen und Kunden können genau sehen, was hinter der nächsten Abbiegung liegt. Gebäude und andere Infrastruktur sind einfach und schnell zu erkennen. Außerdem bietet das System einen integrierten Überblick über den Fahrzeugstatus durch Virtual-Reality-Echtzeitvisualisierung. Dazu gehört das Aufleuchten von Blinkern, Fern- und Abblendlicht. Sogar Beschleunigung und Verzögerung werden durch drehende Räder visualisiert.

Mehr Produktivität, Entertainment und Komfort mit neuen Drittanbieter-Apps und -Inhalten[1]

Over-the-Air-Updates (OTA) stellen sicher, dass Kundinnen und Kunden stets Zugang zu den neuesten Inhalten und Funktionen haben, die auf ihre Wünsche und regionalen Präferenzen zugeschnitten sind. Die neue E-Klasse bietet diese Vorteile bereits. Ihr Infotainment-Bereich ist ein Vorläufer der MB.OS Technologie. Für noch mehr Produktivität kann im ersten Quartal 2024 die neue Meetings App integriert werden, die die Teilnahme an Microsoft Teams Besprechungen ermöglicht. Zusammen mit den bestehenden Angeboten für Zoom und WebEx sind damit alle Marktführer für Videokonferenzen abgedeckt. Das umfangreiche Update umfasst weitere zusätzliche Apps für den Alltagskomfort. Dazu gehören Booking.com, getAbstract, JustEat Takeaway.com und viele mehr. Für das Entertainment sind die Einführung von cloudbasierten Retro-Spielen von Antstream Arcade und weitere immersive Erlebnisse geplant.

Sony Pictures Entertainment RIDEVU erweitert Video-Streaming-Angebot

Mercedes-Benz bereichert sein Video-Streaming-Angebot durch die Integration des hochmodernen RIDEVU Dienstes von Sony Pictures Entertainment (SPE). RIDEVU verspricht, das Unterhaltungserlebnis für Kundinnen und Kunden weiter zu optimieren. Dafür erhalten sie Zugang zu einem vielfältigen Angebot an Videounterhaltung direkt in ihrem Fahrzeug. Die fortschrittlichen Bedienelemente und Funktionen wurden speziell für den Einsatz im Fahrzeug entwickelt. Nutzerinnen und Nutzer können Inhalte von Sony Pictures Entertainment auf Abruf direkt im Fahrzeug ausleihen oder kaufen. Dazu gehört eine kuratierte Bibliothek von Filmen, die zum Streaming zur Verfügung stehen und das Unterhaltungsangebot von Mercedes-Benz bereichern.

Hyperpersonalisierung durch digitale Kunst mit MBUX Collectibles und vielem mehr

MBUX Collectibles ist die erste Fahrzeug-App von Mercedes-Benz, die digitale Kunst und Sammlerstücke auf Basis von NFTs präsentiert. Sie ermöglicht Kundinnen und Kunden, ihre persönliche NFT-Wallet mit der Benutzeroberfläche zu verbinden und eine private Kunstgalerie einzurichten. Außerdem können sie eine von Mercedes-Benz kuratierte Ausstellung einsehen. Auf der CES werden in der App NFT-Kollektionen von Mercedes-Benz NXT gezeigt. Die Kollektion Mercedes-Benz NXT Icons Era 1 „Luxury“ ist die erste Ära einer siebenteiligen Serie über das reiche Designerbe von Mercedes-Benz. Besucherinnen und Besucher der CES erhalten einen ersten Einblick in die Kollektion Era 2 „Technology“, die noch veröffentlicht wird. Als Hommage an die CES im vergangenen Jahr können sie auch einen ersten Blick auf das Superdackel-NFT von Mercedes-Benz NXT werfen. Eine limitierte Auflage von 1.000 Superdackel-NFTs von Mercedes-Benz NXT wird bald erscheinen.

Concept CLA Class zeigt MB.OS als das Fundament für den hyperpersonalisierten Mercedes-Benz

Die Fahrzeuge auf der kommenden MMA-Plattform werden die ersten sein, die vollständig auf MB.OS laufen. Das Concept CLA Class bietet einen seriennahen Einblick in die künftige Familie von vier Fahrzeugen. Es feiert auf der CES 2024 seine Nordamerikapremiere. Mit einer eindrucksvollen Visualisierung im Innenraum unterstreicht das Konzeptfahrzeug die zentrale Rolle, die MB.OS bei der Gestaltung des Kundenerlebnisses spielt. Die komplexe, vielschichtige Architektur des Betriebssystems wird durch eine ihrer vielen Hardwarekomponenten dargestellt – den wassergekühlten Hochleistungs-Chip des Kooperationspartners NVIDIA. Der fortschrittliche MBUX Superscreen mit drei Displays deutet an, dass der Mercedes-Benz der Zukunft ein hyperpersonalisierter Teil des digitalen Lebens der Kundinnen und Kunden sein wird. MB.OS ist dafür das Fundament. Das Betriebssystem umfasst vier Bereiche: Infotainment, automatisiertes Fahren, Body & Komfort sowie Fahren & Laden. Hinzu kommt das Konnektivitätsmodul für die Verbindung mit der Mercedes-Benz Intelligent Cloud. Die Chip-to-Cloud-Architektur sorgt für eine tiefe Integration in das Fahrzeug und volle Kontrolle über alle Sensoren und Aktoren. Außerdem kann das Unternehmen durch die Entkopplung der Innovationszyklen von Software und Hardware sicherstellen, dass seine Fahrzeuge stets auf dem neuesten Stand sind.

Weitere Beiträge von Mercedes-Benz Österreich GmbH