Mixed Reality Experience

Für unseren Kunden GEMÜ haben wir eine wegweisende Mixed Reality Lösung entwickelt, die auf der neuesten Technologie der Meta Quest 3 basiert. Diese innovative Anwendung, die speziell für Messebesuche konzipiert wurde, verbindet die physische Welt mit virtuellen Inhalten und bietet eine beeindruckende, interaktive Erlebniswelt.

Technische Innovation im Mixed Reality Modus

Mit der Meta Quest 3 haben wir eine Mixed Reality Umgebung geschaffen, die den Messebesuchern ermöglicht, ihre reale Umgebung weiterhin wahrzunehmen, während sie gleichzeitig in eine virtuelle Dimension eintauchen. Diese Technologie ermöglicht es den Nutzern, sich frei zu bewegen, Gespräche zu führen und sich sicher in der realen Welt zu orientieren, ohne durch die virtuelle Umgebung abgeschottet zu sein. Ein besonderer Schwerpunkt lag dabei auf der Integration von “Spatial Scenes”, die einen Teil der Realität überlagern und so spannende Einblicke in die zukünftigen Möglichkeiten des „Ventils der Zukunft“ bieten.

Objekttracking und Augmentierung

Ein weiteres Merkmal der Anwendung ist das präzise Tracking des realen Exponats. Virtuelle Ankerpunkte ermöglichen es uns, die Positionierung des physischen Ventils auf der Messe exakt zu bestimmen und mit virtuellen Inhalten zu augmentieren. Dadurch können Messebesucher nicht nur das reale Objekt betrachten, sondern gleichzeitig in fünf unterschiedlichen Storylines erleben, was dieses Ventil in Zukunft leisten kann. Diese Storylines decken aktuelle Themenbereiche wie zum Beispiel Condition Monitoring, Process Monitoring, Predictive Maintenance, Data Analytics und Digital Services ab.

Gesten- und Sprachsteuerung sowie ein individuell anpassbarer KI-Assistent

Die Anwendung wird durch eine intuitive Steuerung abgerundet, die sowohl über Handgesten als auch über Sprachkommandos erfolgt. Dafür wurde ein individuelles Sprachmodell entwickelt, das nicht nur Spracherkennung, sondern auch -synthese ermöglicht. Dies erlaubt es den Nutzern, die Mixed Reality Anwendung effizient und komfortabel zu bedienen. Zusätzlich haben wir einen KI-Assistenten integriert, der durch Zuruf aktiviert werden kann. Dieser Assistent beantwortet spezifische Fragen und unterstützt die Messebesucher bei der Navigation durch die virtuelle und reale Welt. Die Auswahl der Themenfelder kann zudem über „Gaze-Tracking“ erfolgen. Hierbei erhält der Nutzer mittels einer Wortwolke in Mixed-Reality verschiedene Themen zur Auswahl. Fokussiert er ein Thema mit den Augen, wird dieses ausgewählt und der Nutzer kann in den Themenbereich eintauchen.

Fazit

Durch die Kombination modernster Technologie mit benutzerfreundlichen Interfaces und einem flexiblen KI-Assistenten ist es uns gelungen, eine Lösung zu realisieren, die weit über die herkömmliche Produktpräsentation hinausgeht. Diese Anwendung zeigt, wie Mixed Reality sinnvoll und effektiv im Maschinen- und Anlagenbau eingesetzt werden kann, um komplexe Themen zugänglich und erlebbar zu machen.

‍