Das Smart Tool basiert auf einem Machine-Learning-Framework. Gebärden werden mit Hilfe einer integrierten Kamera identifiziert und in ein Data-Format konvertiert, das Sprachassistenten verstehen. Signs kann mit Alexa, Google Assistant oder Microsoft Cortana verbunden werden und funktioniert auf jedem browserbasierten Betriebssystem mit integrierter Kamera wie Laptops oder Tablets.

Die Sprachassistenten verarbeiten die Gebärdendaten in Echtzeit und können direkt antworten. Die Antworten übersetzt Signs zurück - in Textform oder visuelles Feedback für Menschen mit Hörbehinderung. Das Programm entstand in Zusammenarbeit des Lab 13, der interdisziplinären Innovation-Unit der Agentur MRM, mit der Bundesjugend.

Funktionsschema von Signs.

Funktionsschema von Signs.

Das Team von Lab 13 um Martin Biela, Executive Creative Director, und Mark Hollering, Director Creative Technology, griff die Idee auf, setzte sie in einem Prototypen um und entwickelte Signs in die Richtung eines vollumfänglichen Gebärdensprachassistenten.

In Deutschland sind nach Angaben des Deutschen Schwerhörigenbundes rund 140.000 der 16 Millionen Schwerhörigen auf Gebärdensprach-Dolmetscher angewiesen. Die Unternehmensberatung Gartner geht davon aus, dass digitale Interaktionen jenseits von Bildschirmen bis 2020 etwa 30 Prozent ausmachen werden. "Unser Ziel ist, dass jeder Mensch mit Hörbehinderung uneingeschränkt Zugang zu neuesten Technologien hat. Gerade jetzt, wo Sprachassistenten unsere Wohnungen, Autos und die Freizeitgestaltung erobern", sagt Martin Biela von MRM/McCann. 

Credits: Chief Creative Officer MRM/McCann Frankfurt am Main Sebastian Hardieck, Executive Creative Director Martin Biela, Executive Creative Director Dushan Drakalski, Director Creative Technology & Lab 13 Mark Hollering, Group Creative Director UX Jan Portz, Senior Copywriter/Concept & Lab 13 Chris Endecott, IT Project Manager, Lab13 Sebastian Klein, Senior Motion Designer, Lab 13 Michael Klaiber, Senior Art Director Jawad Saleem, PR & Communications Jerome Cholet, Trainee Lab 13 Sofia Paz-Vivo, Junior Art Director Irini Sidira.


Autor: Susanne Herrmann

schreibt als freie Autorin für W&V. Die Lieblingsthemen von @DieRedakteurin reichen von abenteuerlustigen Gründern über Medien und Super Bowl bis Streaming. Marketinggeschichten und außergewöhnliche Werbekampagnen dürfen aber nicht zu kurz kommen.