Barrierefreie digitale Kommunikation für Menschen mit Behinderung vereinfacht deren Alltag und gewährleistet ihre gesellschaftliche Teilhabe. In dem vom BMBF geförderten Verbundprojekt AVASAG (Avatar-basierter Sprachassistent zur automatisierten Gebärdenübersetzung) arbeiten sechs Partner an einem echtzeitgesteuerten 3D-Gebärdensprach-Avatar zur automatischen Übersetzung deutscher Texte in Gebärdensprache.
Im Projekt entsteht eine völlig neuartige Gebärdenanimations-Methode für 3D-Avatare: Sie kombiniert solche des maschinellen Lernens mit regelbasierten Synthesemethoden, die Text in Gebärden abbilden. Zeitliche und räumliche Abhängigkeiten der komplexen Gebärdenelemente werden dabei sehr genau aufgelöst. Damit wird eine qualitativ hochwertige, realistische Darstellung eines 3D-Gebärdensprach-Avatars erreicht.
Entsprechende Angebote ermöglichen gehörlosen und hörbehinderten Menschen eine umfassendere gesellschaftliche Teilhabe und eine stärkere Integration in die „Digitale Gesellschaft“. Die Ergebnisse des Projektes werden gemeinsam mit der Gehörlosen-Zielgruppe evaluiert und im Anwendungsfeld Reiseinformation und-service mit assoziierenden Partnern erprobt.
Das Projekt auf einen Blick:
- Projektname: AVASAG (Avatar-basierter Sprachassistent zur automatisierten Gebärdenübersetzung)
- Projektvolumen: 1,98 Mio. Euro. € (ca.74 % Förderanteil durch BMBF)
- Projektlaufzeit: 1. Mai 2020 – 30. April 2023
- Projektpartner:
- Charamel GmbH (Leitung)
- yomma GmbH – Experten für Gebärdensprache
- Ergosign GmbH - Pionier für User Experience Design
- Deutsches Forschungszentrum für Künstliche Intelligenz (DFKI) GmbH
- Technische Hochschule Köln, Institut für Medien- und Phototechnik
- Universität Augsburg, Human Centered Multimedia (HCM)
Alexander Stricker, Geschäftsführer Charamel GmbH und Projektleiter von AVASAG dazu: „Digitale Barrierefreiheit wird immer wichtiger, um Inhalte dynamisch und für alle Zielgruppen adäquat aufbereitet zu vermitteln. Automatisierte Instrumente helfen bei einer barrierefreien Kommunikation. Wir sind begeistert von der Idee, mithilfe unserer smarten, lernfähigen Avatare hierzu einen maßgeblichen Beitrag leisten zu dürfen“.