Ralph Raule, Amelie Nolte und Barbara Gleißl stellen das AVASAG Projekt bei der UIG Tagung 2022 vor. Mehr Informationen dazu unter diesem Link

Vorstellung und Aufklärung zu AVASAG in Deutscher Gebärdensprache: Das AVASAG-Projekt und dessen Ablauf werden genauer erläutert. Es besteht die Möglichkeit, Fragen zu stellen. Insbesondere wird sich dem Thema Qualitätssicherung und Verständlichkeit des Avatars gewidmet. Hierfür soll auch die Gebärdensprachgemeinschaft miteinbezogen werden, z.B. bei der Sammlung von Ortsgebärden oder durch Teilnahme an Umfragen zur Bewertung des Avatars.

Wie Sie als Unternehmen oder Behörde neue digitale Wege gehen, um die aktualisierte Gesetzgebung zur digitalen Barrierefreiheit zu erfüllen - Aktuelle Einblicke in die Forschung am Avatar-basierten Sprachassistent zur automatisierten Gebärdenübersetzung: Webinar neue Gesetzgebung zur digitalen Barrierefreiheit

Präsentation des Projekts sowie bis dahin erfahrener Barrieren und Lösungsansätze zur Zusammenarbeit in einem gemischten Team aus Laut- und Gebärdensprachler:innen.

Es gibt jetzt zwei Demonstratoren: Ein Show Case von 2021, in dem die ersten Einsatz- und Übersetzungsmöglichkeiten des Gebärdensprach-Avatars gezeigt werden und ein Show Case von 2022, das die Einbindung in die Webseite eines fiktiven Unternehmens "Bahn Deutschland" in zwei Varianten vorstellt. Um zum Demonstrator zu gelangen, klicken Sie oben rechts auf den Button oder auf diesen Link.

Beim erfolgreichen Meeting aller Projektmitarbeiter:innen mit dem Projektträger VDI/VDE erfolgte die Vorstellung eines ersten Demonstrators zur Abspielung von Gebärden mithilfe eines menschenähnlichen, nicht-fotorealistischen Gebärdensprach-Avatars sowie die Darstellung möglicher Einsatzgebiete wie Web, Mobile oder Kiosk. Diese verschiedenen Anwendungsbereiche sowie Anpassungen von Kleidung und Hintergründen wurden in der AVASAG Demo festgehalten.

Das Fernseh-Magazin Sehen statt Hören mit Gebärden und Untertiteln, produziert vom Bayerischen Rundfunk, berichtet zum ersten Mal über das AVASAG-Projekt. Gezeigt wird der Entwicklungsprozess, Interviews mit Beteiligten sowie was AVASAG anders macht und warum. Hier ist der TV-Beitrag in der BR-Mediathek zu sehen: Sehen statt hören

-Stelle besetzt- Zur Unterstützung der Annotationsarbeit werden von yomma und dem DFKI mehrere Hilfskräfte auf Minijob-Basis gesucht, sowie eine Teilzeitkraft für ca. 20 Stunden wöchentlich. Voraussetzung hierfür sind Gebärdensprachkenntnisse ab B1-Niveau

Um eine KI zu trainieren, muss man ihr Beispiele geben. Dazu beschreiben wir die Gebärdensprache in den Videoaufnahmen in einer festgelegten Form. Dieser Vorgang heißt “Annotation”. Die deutschen Texte und zugehörigen Annotationen werden dann der KI übergeben. Aus diesen Beispielen lernt die KI, Texte in solche Beschreibungen zu übersetzen. Darüber wird später der Avatar gesteuert.

Die Durchsagetexte, die wir von Reisedienstleistern erhalten haben, werden in regelmäßigen Abständen mittels Motion Capture Verfahren (Verfahren zur Bewegungserfassung) von einer tauben Gebärdensprachdolmetscherin an der TH Köln aufgenommen. Die dadurch generierten Bewegungsdaten werden später für den Avatar verwendet.

Gemeinsam mit 10 Gebärdensprachler:innen haben wir über Reisen im Alltag gehörloser Personen gesprochen, Barrieren und Lösungsansätze diskutiert. Außerdem haben uns die Teilnehmer:innen von ihren persönlichen Präferenzen bei der Nutzung von Smartphone-Apps und Webseiten im Bereich Reiseinformation und -dienste erzählt

Wir sind in Kontakt mit gehörlosen Gebärdensprachnutzer:innen für die Sammlung von Ortsgebärden in Deutschland. Je mehr Menschen sich beteiligen, desto besser wird unser Überblick über die verwendeten Gebärden und dies hilft uns sehr, die bekanntesten Gebärden zu finden. Falls Sie die Sammlung der Ortsgebärden unterstützen wollen, kontaktieren Sie uns gerne über avasag@yomma.de

Erfolgreich starten Partner aus Forschung und Industrie im vom BMBF geförderten Verbundprojekt gemeinsam die Entwicklung eines Avatar- und KI-basieten Übersetzungssystems von Text- in Gebärdensprache. Neben dem sechsköpfigen Konsortium bestehend aus Charamel GmbH, yomma GmbH, Ergosign GmbH, DFKI, TH Köln und Universität Augsburg beteiligen sich auch Industriepartner.

Wissenschaftliche Pulikation auf der ACM SIGACCESS Conference on Computers and Accessibility verfügbar unter diesem Link.

Wissenschaftliche Publikation auf der Language Resources and Evaluation Konferenz in Marseille. Der Artikel ist verfügbar unter diesem Link.

(Übersetzung: Verloren in Übersetzungen: Herausforderungen und Barrieren von gebärdensprachzugänglicher Forschung mit Nutzenden). Wissenschaftliche Publikation auf der ASSETS Konferenz. Ein Video (übersetzt in internationale Gebärdensprache) und der englischsprachige Artikel sind verfügbar unter diesem Link

Online-Artikel auf www.fronta11y.org anlässlich des weltweiten Tags für Barrierefreiheit.

Artikel ist verfügbar unter diesem Link