Sprachein- und -ausgabe für Virtual Reality (VR) am Beispiel der Unreal Engine

Hidden Human-Computer Interaction Computer Science Games Engineering Bachelor Master Thesis Games Research Lab Industry Cooperation

Background

Die vr-on GmbH entwickelt das System stage, welches eine Kollaboration innerhalb von VR bei der Entwicklung neuer Produkte unterstützt. Anwender können dabei Produktdaten visualisieren, Varianten schalten und Annotationen erzeugen. Annotationen stellen dabei virtuelle Post-Its dar, die auf Problemstellen am Modell hinweisen und neben dem Ort auch eine Textinformation beinhalten. Diese Textinformation wird aktuell mit Hilfe der physischen Tastatur (Bildschirm) und mit Hilfe einer virtuellen Tastatur eingegeben. Die Eingabe von längeren Texten ist dabei wenig benutzerfreundlich.

Tasks

Im Rahmen dieser Arbeit soll das Microsoft Speech SDK an das System stage abgebunden werden. Dies soll sowohl die Eingabe von Texten für Annotationen ermöglichen, als auch als Sprachausgabe von Texten genutzt werden können. Letztere soll perspektivisch im Bereich der Online Hilfe eingesetzt werden.

Der Schwerpunkt der Arbeit liegt in der Anbindung und Nutzung der Spracheingabe. Nach der Anbindung der Spracherkennung, soll untersucht werden, welche unter anderem Möglichkeiten der Anwendungssteuerung sich durch die Spracherkennung ergeben.

Mit diesen Erkenntnissen soll ein Szenario aufgebaut werden, anhand dessen Benutzerstudien durchgeführt werden können. Innerhalb der Benutzerstudien sollen Vergleiche zwischen der bisherigen Anwendungssteuerung und Texteingabe mit Hilfe von Zeigestrahl und Taste und der Eingabe mit Hilfe der Sprache erfolgen. Dabei sind sowohl die Interaktionszeiten als auch Parameter zum Anwenderkomfort zu erheben.

Prerequisites

Die Bewerber sollten fundierte Kenntnisse im Bereich C++ Entwicklung mitbringen. Kenntnisse im Bereich von Computerspiele Engines sind gewünscht. Teamfähigkeit, Einsatzbereitschaft und Kommunikationsfähigkeiten werden erwartet.

Cooperation

Die vr-on GmbH mit Sitz in Herrsching am Ammersee bietet individuelle und umfassende Virtual- und Augmented-Reality Lösungen für Kunden im B2B Bereich (hauptsächlich Automotive und Aerospace). Neben der Entwicklung von kundenspezifischen Anwendungen wollen wir Computerspiele Engines bei professionellen Virtual- und Augmented-Reality Anwendern etablieren. Dafür entwickeln wir eine eigene Software auf Basis der Unreal Engine.

Cooperation Partners

Contact Persons at the University Würzburg