Abschlussarbeit

Ausgehend von einem in CATALPA entwickelten Mutli-Agenten-System (MAS) für die Simulation von sprachbasierten mündlichen Prüfungen soll in dieser Abschlussarbeit eine visuelle und dynamische Repräsentation von Prüfer:innen entwickelt werden.
Der angestrebt Use Case sieht vor, dass Studierende eine VR-Darstellung der Prüfer:in über ihr Smartphone und eine Cardboard VR-Brille sehen. Der Avatar der verkörperten Prüfer:in reagiert auf Antworten und verbalen Äußerungen der Studierenden. Er bewegt seine Lippen und Gesichtszüge synchron zur Sprachausgabe des MAS. Zudem besitzt der Avatar ein Repertoire an Mimiken und Gestiken, welche die Emotionen der Prüferin in Anbetracht der vom Studierenden gegeben Antworten und der individuellen Ticks der Prüfer:in widerspiegeln.
Wünschenswert ist dabei die flexible und nutzerspezifische Anpassung des Avatars an die äußere Gestalt der jeweiligen Prüferin, bspw. durch vordefinierte Charaktere von Prüferinnen, reale Prüferinnen der FernUniversität in Hagen (inkl. mit deren Zustimmung) und eine einfache Nutzerführung.
Die entwickelte Anwendung ist mit einer kleinen bis mittleren Anzahl von Probanden (i.d.R. Studierende) in einem realistischen Setting (Prüfer:in-Avatar, Prüfungsfach) qualitativ und ggf. quantitativ zu evaluieren und anschließend nach Möglichkeit zu verbessern.

Kenntnisse in 3D-Modellierung (e.g. Blender) und Unity/Unreal Engine/ARKit sowie ein grundlegendes Verständnis von Photogrammetrie sind von Vorteil

Ressourcen

• Seidel, N., & Hammesfahr, L. (2024). A Speech-Based Dialogue System for Training Oral Examinations. In R. Ferreira Mello, N. Rummel, I. Jivet, G. Pishtari, & J. A. Ruip{\’e}rez Valiente (Eds.), Technology Enhanced Learning for Inclusive and Equitable Quality Education (pp. 254--259). Springer Nature Switzerland.

• Seidel, N., & Hammesfahr, L. (2024). STOREX - A Speech-Based Dialogue System for Training Oral Examinations. https://github.com/CATALPAresearch/storex

• J. Grubert, Y. Sedelmaier and D. Landes, "Towards Embodied Conversational Agents for Reducing Oral Exam Anxiety in Extended Reality," 2025 IEEE International Symposium on Mixed and Augmented Reality Adjunct (ISMAR-Adjunct), Daejeon, Korea, Republic of, 2025, pp. 561-564, doi: 10.1109/ISMAR-Adjunct68609.2025.00113. https://ieeexplore.ieee.org/document/11236207

• Jolibois, Simon & Ito, Akinori & Nose, Takashi. (2025). The Development of an Emotional Embodied Conversational Agent and the Evaluation of the Effect of Response Delay on User Impression. Applied Sciences. 15. 4256. 10.3390/app15084256.

• Metahumans (https://www.metahuman.com/en-US?lang=en-US)