Immergensim: EU-Projekt CORTEX² bringt XR in den Kriseneinsatz

Mentorin Maud bleibt ruhig. Die KI-gestützte Beraterin blickt dem Team fest ins digitale Gesicht. Draußen, im virtuellen Krisengebiet, steigt das Wasser – dicht gefolgt von einem Erdrutsch. Die Helfer*innen sind neu im Einsatz - aber sie sind vorbereitet. Nicht durch reale Großübungen, sondern durch einen immersiven Probelauf, der Handlungsfähigkeit unter Stress vermittelt und dafür sorgt, dass jeder Handgriff im Ernstfall sitzt. Innerhalb der Simulation wacht Mentorin Maud über das Team. Sie unterstützt es bei Entscheidungen, stellt Ressourcen zur Verfügung, beantwortet Fragen und hilft den Teammitgliedern, die Instinkte zu entwickeln, die sie in echten Notfällen brauchen.

Was wie Zukunft klingt, ist bereits Realität: Im Rahmen von CORTEX² haben Forschende am Deutschen Forschungszentrum für Künstliche Intelligenz (DFKI) eine flexible Infrastruktur geschaffen, die humanitären Einsatzkräften virtuelle Krisentrainings ermöglicht. Das immersive Trainingssystem Immergensim wurde im Subprojekt XRisis von XR Ireland in enger Kollaboration mit Action Contre la Faim (ACF) entwickelt und greift direkt auf diese technologische Plattform zurück.

Von der Pandemie zur Plattform

Im Kern bietet CORTEX² eine Architektur, die auf Interoperabilität und Anpassbarkeit ausgelegt ist. Das bedeutet: CORTEX² stellt nicht nur eine Anwendung, sondern eine plattformfähige Infrastruktur bereit – offen für Adaption, Erweiterung und sektorübergreifende Nutzung. Dazu gehören ein Echtzeit-Kommunikationssystem, ein Avatarisierungssystem zur Wahrung digitaler Identität, virtuelle Gesprächspartner auf KI-Basis, ein automatisiertes Auswertungstool für Gespräche sowie eine Echtzeit-Modellierung realer Objekte. Ein IoT-Server ermöglicht zusätzlich die Anbindung physischer Geräte an virtuelle Szenarien.

Immergensim begegnet den genannten Herausforderungen mit einem immersiven Trainingskonzept, das sich in drei eng verzahnte Module gliedert: den Einstieg bildet eine individualisierte Einführung durch die KI-gestützte Mentor-Avatarin „Maud“. Im Anschluss trainieren Teams in einer virtuellen Krisenstab-Umgebung kooperatives Entscheiden unter Zeitdruck, bevor sie im dritten Schritt Maßnahmen direkt in simulierten Notfallszenarien mit Echtzeit-KI-Unterstützung umsetzen. 

Diese modularen Übungseinheiten – von der Erstinformation über das gemeinsame Situationsverständnis bis zur strategischen Umsetzung – sind so konzipiert, dass sie sich flexibel an unterschiedliche humanitäre Szenarien anpassen lassen. Interaktive „Injects“ und dynamische Entscheidungsverläufe machen das Training lebendig, praxisnah und lernwirksam.

Die technologische Umsetzung basiert auf einer gezielten Adaption zentraler CORTEX²-Komponenten: Die Integration des Kommunikationsdienstes Rainbow in die Unity-Umgebung ermöglichte unter anderem Voice-Calls, Bubble-Meetings und die Interaktion zwischen realen und virtuellen Teilnehmer*innen in einer konsistenten XR-Umgebung. Die ursprünglich hardwareintensive Komponente VCAA wurde eigens für Immergensim durch einen Web-basierten Avatar-Emulator ersetzt, der mit MediaPipe, WebRTC und React arbeitet – und damit auch auf leistungsschwächerer Hardware zuverlässig funktioniert.

Darüber hinaus kamen CoVA und der Summarisation Agent zum Einsatz, um digitale Feedbackgespräche, Briefings und After-Action-Reviews strukturiert zu erfassen, auszuwerten und in die Nachbereitung zu integrieren. Diese Architektur macht Immergensim zu einer simulationsbasierten Trainingslösung, die nicht nur technologisch innovativ, sondern auch in ressourcenlimitierten Einsatzkontexten – etwa in NGOs oder Feldbüros – voll einsatzfähig ist.

Auch die externe Wahrnehmung spricht eine klare Sprache: Im Jahr 2025 wurde Immergensim mit dem Unity for Humanity Grant ausgezeichnet, was sowohl die technologische als auch die soziale Relevanz des Projekts unterstreicht. Gefördert wird nun der Aufbau eines Low-Code SimEx Builders, mit dem NGOs weltweit eigene XR-Simulationen gestalten können – ohne Entwicklungsressourcen, aber mit Zugang zur leistungsfähigen CORTEX²-Infrastruktur. 

Die Einsatzmöglichkeiten reichen dabei weit über den humanitären Bereich hinaus. Was sich in Krisensituationen bewährt, lässt sich auch in anderen Sektoren sinnvoll adaptieren: etwa für Notfallübungen in Industrie und Energieversorgung, Triage-Trainings im Gesundheitswesen, Story-based Learning in der Bildung oder Einsatzszenarien in Smart Cities. 

Die Projektpartner XR Ireland und Action Contre la Faim ziehen dabei drei zentrale Lehren: 

CORTEX² zeigt: Die Technologien für eine resiliente, vernetzte Zukunft sind einsatzbereit. Lassen Sie uns gemeinsam immersive XR-Lösungen für Ihre Herausforderungen realisieren.