StartseiteLänderEuropaEuropa: Weitere LänderDeutsches Forschungszentrum für Künstliche Intelligenz koordiniert EU-Projekt im Bereich Erweiterte Realität

Deutsches Forschungszentrum für Künstliche Intelligenz koordiniert EU-Projekt im Bereich Erweiterte Realität

Internationalisierung Deutschlands, Bi-/Multilaterales

Das Deutsche Forschungszentrum für Künstliche Intelligenz (DFKI) koordiniert das EU-geförderte Projekt LUMINOUS. Ziel des Projekts ist die Erschaffung einer Plattform mit Sprachunterstützung, die sich an individuelle, nicht vordefinierte Nutzerbedürfnisse und bisher unbekannte Umgebungen der erweiterten Realität (XR) anpasst. LUMINOUS soll als eine Art Übersetzer dazu in der Lage sein, Alltagstätigkeiten auf Befehl zu beschreiben und mittels Sprachinterface oder Avatar an die Nutzenden auszuspielen. So soll LUMINOUS Alltagsaktivitäten in Echtzeit unterstützend begleiten.

Bisherige Forschungs- und Entwicklungsarbeiten im Bereich XR konzentrierten sich weitgehend auf die räumliche Erfassung der Nutzer und ihrer Umgebung. Dies führte zu sehr spezifischen, eingeschränkten und nicht generalisierbaren Repräsentationen sowie zu vordefinierten grafischen Visualisierungen und Animationen. Durch LUMINOUS (Language Augmentation for Humanverse) soll sich dies grundlegend ändern. Die Projektpartner arbeiten nun an XR-Systemen der nächsten Generation. Diese neuen Systeme sollen generative und multimodale Sprachmodelle (MLLM) integrieren, um die bestehenden visuellen Erweiterungen der Realität – wie etwa Texte, Animationen oder virtuelle Objekte – zu ergänzen und die Interaktion mit XR-Technologie neu zu gestalten. Zukünftige Nutzer dieser innovativen XR-Systeme sollen dank der Sprachmodelle und dem Zugang zu stets aktualisierten globalen und domänenspezifischen Wissensquellen nahtlos mit ihrer Umgebung interagieren und Echtzeit-Unterstützung für Alltagsaktivitäten erhalten.

Die Ergebnisse des Projekts werden in drei Pilotprojekten getestet, die sich auf Neurorehabilitation (Unterstützung von Schlaganfallpatienten mit Sprachstörungen), immersives Sicherheitstraining am Arbeitsplatz und die Überprüfung von 3D-Architekturentwürfen konzentrieren.

Neben dem DFKI sind die Fraunhofer Gesellschaft sowie 10 weitere Forschungseinrichtungen und Partner aus Griechenland, Irland, Italien, den Niederlanden, der Schweiz, Spanien und dem Vereinigten Königreich an LUMINOUS beteiligt. Das Projekt wird im Rahmen von Horizont Europa mit 5,6 Millionen EUR gefördert.

Zum Nachlesen

Quelle: Deutsches Forschungszentrum für Künstliche Intelligenz Redaktion: von Julia Arning, VDI Technologiezentrum GmbH Länder / Organisationen: Griechenland Irland Italien Niederlande Schweiz Vereinigtes Königreich (Großbritannien) EU Themen: Förderung Information u. Kommunikation

Weitere Informationen

Projektträger