Bioingenieure an der UCLA Samueli School of Engineering haben ein handschuhähnliches Gerät entwickelt, mit dem die amerikanische Gebärdensprache über eine Smartphone-App in Echtzeit in englische Sprache übersetzt werden kann. Das System umfasst ein Paar Handschuhe mit dünnen, dehnbaren Sensoren, die sich über die Länge jedes der fünf Finger erstrecken.
Die Sensoren am Handschuh bestehen aus elektrisch leitenden Garnen und erfassen Handbewegungen und Fingerpositionen (die für einzelne Buchstaben, Zahlen, Wörter und Phrasen stehen). Das Gerät wandelt dann die Fingerbewegungen in elektrische Signale um, die an eine am Handgelenk getragene Leiterplatte in Dollarmünzengröße gesendet werden. Das Board überträgt diese Signale drahtlos an ein Smartphone, das sie mit einer Geschwindigkeit von etwa einem Wort pro Sekunde in gesprochene Wörter umwandelt.
Das Gerät enthält außerdem Klebesensoren, die auf die Gesichter der Tester (zwischen ihren Augenbrauen und auf einer Seite ihres Mundes) passen, um Gesichtsausdrücke zu erfassen, die Teil der amerikanischen Gebärdensprache sind. Das Gerät besteht aus leichten und kostengünstigen, aber langlebigen, dehnbaren Polymeren. Die elektronischen Sensoren sind auch sehr flexibel und kostengünstig.
Das tragbare Gerät wurde an vier Gehörlosen getestet, die die amerikanische Gebärdensprache verwenden. Die Träger wiederholten jede Handbewegung 15 Mal und ein benutzerdefinierter Algorithmus für maschinelles Lernen wandelte diese Gesten in die Buchstaben, Zahlen und Wörter um, die sie darstellten. Das System erkannte 660 Zeichen, einschließlich jedes Buchstabens des Alphabets und der Zahlen 0 bis 9. Das Gerät ist weder sperrig noch unbequem und erleichtert den Personen, die Gebärdensprache verwenden, die direkte Kommunikation mit Nicht-Unterzeichnern ohne die Hilfe eines anderen. Das auf dieser Technologie basierende kommerzielle Modell würde zusätzliches Vokabular und eine schnellere Übersetzungszeit erfordern.