Sensorium+: Inklusive Museumslandschaften durch KI-erweiterte Realität

Kern des Projekts ist ein KI-gestützter virtueller Avatar, der als persönlicher Museumsführer in AR fungiert. Dieser kann in natürlicher Sprache kommunizieren, Informationen individuell und adaptiv aufbereiten und so individuell zugeschnittene Besucherführungen ermöglichen. Unterstützt werden neben Sprache auch Gesten- und Blickinteraktionen, was ein besonders niedrigschwelliges und intuitives Nutzungserlebnis schafft.

Die Plattform liefert Informationen zu Exponaten nicht nur visuell, sondern auch über auditive und taktile Kanäle – etwa durch gezielte Soundeffekte oder haptisches Feedback über spezielle AR-Brillen-Hardware. Damit entsteht ein immersives, inklusives Erlebnis, das besonders auch seh- oder hörbeeinträchtigten Menschen einen neuen Zugang zu kulturellem Wissen eröffnet.

Ein besonderer Fokus liegt zudem auf der Lokalisierung aller KI-Funktionalitäten: Sprachverarbeitung und Interaktion werden lokal verarbeitet, um Datenschutz und Performance zu optimieren.