GIGA Gebärdensprachen - Entwicklung einer 5G enabled Gebärdensprachen-Applikation

Grunddaten zu diesem Projekt

Beschreibung

Hintergrund: Technische Assistenzsysteme wie automatische Übersetzungshilfen können dabei helfen Barrieren im Alltag der Nutzenden abzubauen und eine gleichberechtigte Teilhabe zu ermöglichen. Insbesondere für die Übersetzung von Deutscher Gebärdensprache in Deutsch (Schrift und Audio), sowie umgekehrt, existieren solche Assistenzsysteme aber noch nicht. Dies liegt auch an den bisherigen technologischen Grenzen. Der neue Mobilfunkstandard 5G mit hohen Datenraten und geringen Latenzzeiten (Reaktionsgeschwindigkeiten) erlaubt die Verarbeitung großer Datenmengen in Echtzeit und bildet somit die Grundlage für unser Vorhaben. Im Zusammenspiel mit mobilen Anwendungen auf Smartphones können nun Assistenzsysteme mit Funktionen realisiert werden, die bisher bestenfalls leistungsstarken stationären Computersystemen vorbehalten waren. Ziel und Umsetzung: Unser Ziel ist es, eine mobile Anwendung zu entwickeln, welche die automatische Übersetzung von Deutscher Gebärdensprache in Deutsch (Schrift und Audio) und umgekehrt in Echtzeit ermöglicht. Dafür sollen zunächst mit NutzerInnen der Deutschen Gebärdensprache die wünschenswerten Einsatzgebiete einer solchen Anwendung ermittelt werden, um basierend hierauf einen Basiswortschatz aufzubauen. Dieser wiederum wird dann als Grundlage für die Entwicklung eines auf maschinellem Lernen basierenden Bildanalyseverfahrens dienen, welches unter Verwendung der 5G Technologie Echtzeitübersetzungen von Videostreams beispielsweise in Sprachausgabe in einem Telefon ermöglichen soll. Außerdem sollen Lösungsmöglichkeiten erforscht und getestet werden, wie umgekehrt Laut- und Schriftsprache mittels eines Avatars in Echtzeit in Deutsche Gebärdensprache übersetzt werden kann.