English

Deutsch

VRST 2026: Vier Beiträge aus dem Immersive Reality Lab

Diese Woche, vom 16. bis 18. November 2026, findet das 32. ACM Symposium on Virtual Reality Software and Technology (VRST 2026) am Research Institute of Electrical Communication der Tohoku University in Sendai, Japan, statt. Die VRST gehört zu den etablierten ACM-Konferenzen für Forschung zu Virtual, Augmented und Mixed Reality, von Rendering- und Interaktionstechniken bis zu Nutzerstudien.

Das Immersive Reality Lab ist mit vier Beiträgen vertreten: einem Full Paper und drei Postern. Alle vier sind im Kern Studien mit Menschen: was sie erleben, was sie tun und wo die Technik hilft oder im Weg steht. Für das Lab sind Julie Henning und Julia Schorlemmer in Sendai.

Figures from the four contributions: a pilot rehearsing an emergency procedure on paper, in a 2D cockpit, in mixed reality and in virtual reality; a MetaHuman avatar as a life-size projection, on a monitor and as audio only; four augmented reality points of interest on a street; two visitors in a cross-reality gallery installation.
Abbildungen aus den Papers: die vier Trainingsformen für Kampfjetpiloten und die drei ARCADE-Bedingungen (oben), die vier AR-Points-of-Interest und die Cross-Reality-Installation (unten).

Paper: XR-Training für Notverfahren im Kampfjet

Evaluating Training Experience in XR for Emergency Procedures: A Study with Military Fast-Jet Pilots

Von Julia Schorlemmer, Francesco Vona, Tanja Kojić, Sebastian Möller und Jan-Niklas Voigt-Antons.

Notverfahren im Kampfjet müssen schnell und fehlerfrei sitzen, doch Zeit im hochwertigen Simulator ist knapp, und das Üben auf Papier bietet kaum Wahrnehmungs- oder Bewegungsrealismus. In einer Studie mit 45 aktiven Kampfjetpiloten haben wir vier Trainingsformen verglichen: Üben auf Papier, eine 2D-Cockpit-Oberfläche, Mixed Reality und Virtual Reality.

Mixed Reality wurde insgesamt am besten bewertet, Papier am schlechtesten; Virtual Reality zeigte die geringste Usability und die höchste Frustration. Die Verfahren dauerten in allen drei simulationsbasierten Bedingungen etwa gleich lange, eine Handlung fiel aber auf: Ein gesichertes Bedienelement, das unter räumlicher Enge betätigt werden muss, war in VR deutlich schwerer zu bedienen, wie auch die Piloten selbst berichteten. Immersives Training ergänzt bestehende Verfahren also dort, wo es die körperlichen Anforderungen der geübten Handlungen erhält. Die Studie gehört zu unserem Projekt Fast Jets.

Poster: Wenn Navigation zur Werbung wird

From Wayfinding to Promotion: The Effect of Augmented Reality Points of Interest as a Marketing Medium

Von Juliane Henning, Francesco Vona, Julia Schorlemmer und Jan-Niklas Voigt-Antons.

Augmented-Reality-Navigation auf dem Smartphone kann Points of Interest mit Werbung direkt ins Livebild einblenden, doch ihre Darstellung kann das Navigationserlebnis beeinflussen. In einer Außenstudie mit 31 Teilnehmenden haben wir vier Darstellungen verglichen: Objekte, Personen, Fußspuren und Schilder. Alle sechs Skalen des User Experience Questionnaire unterschieden sich signifikant. Objekte wurden als am attraktivsten bewertet, Schilder als am leichtesten verständlich, Fußspuren schnitten auf jeder Skala am schlechtesten ab. Das Poster stammt aus dem Projekt ARiadne.

Poster: Muss ein Gesprächsavatar lebensgroß sein?

Localized ARCADE: Backend Optimization and Systematic UX Evaluation of Personalized Conversational MetaHuman Avatars in Human-Scale Immersive Environments

Von Navid Ashrafi, Michael Schindler, Yongzuo Lai, Moritz Hechtbauer, Alia Saad, Francesco Vona, Noureddine Hfaiedh, Sina Hinzmann und Jan-Niklas Voigt-Antons.

Auf der HCII 2026 haben wir in diesem Jahr Redeveloping ARCADE vorgestellt: personalisierte MetaHuman-Avatare in Lebensgröße, die über Conversational AI ein offenes Gespräch führen. Localized ARCADE führt das gesamte Gespräch lokal aus: Spracherkennung (Whisper), Sprachmodell (LLaMA 3.1), Sprachsynthese und Gesichtsanimation laufen ohne externen Dienst. Das schützt die Privatsphäre und macht den Aufbau reproduzierbar. In einer Studie mit 18 Teilnehmenden erschien derselbe Avatar auf drei Arten: als lebensgroße ARCADE-Projektion, auf einem Monitor und nur als Stimme. Beide visuellen Varianten steigerten die soziale Präsenz und die hedonische Qualität des Erlebens gegenüber der reinen Audioversion; die Usability hing nicht von der Darstellungsform ab. Die lebensgroße Projektion schnitt nicht besser ab als der Monitor: Entscheidend ist, dass ein Avatar da ist, nicht wie groß er ist. Die Autorinnen und Autoren nennen das den MetaHuman-Effekt.

Poster: Eine Galerie, zwei Realitäten

Beyond the Canvas: Shared Experiences in a Cross-Reality Installation

Von Anke von der Heide, Francesco Vona, Jan-Niklas Voigt-Antons und Ceenu George, gemeinsam mit der TU Berlin.

Cross-Reality-Systeme verbinden Menschen in physischen und virtuellen Räumen. In einer öffentlichen Installation waren eine gestengesteuerte Galeriewand und eine immersive virtuelle Galerie über synchronisierte Inhalte und einen digitalen Spiegel verbunden. In einer Feldstudie mit 45 Teilnehmenden, die Fragebögen zu User Experience und Präsenz mit Beobachtungen und Interviews verband, zeigten die Fragebögen keine signifikanten Unterschiede zwischen den beiden Seiten. Interviews und Beobachtungen zeigten aber, dass gelungene Zusammenarbeit von verbaler Kommunikation und einer verlässlichen gemeinsamen Sicht auf die andere Realität abhing.

Danke

Herzlichen Dank an alle Mitautorinnen und Mitautoren, an die Piloten und alle anderen Teilnehmenden unserer Studien und an die Kolleginnen und Kollegen der TU Berlin. Das Paper und die Poster stehen mit Abstracts auf unserer Publikationsseite.

Alle Publikationen