SigNN gebruikt uw camera om het Amerikaanse gebarentaalalfabet te vertalen

Laatste Versie

Versie
Update
27 feb. 2022
Ontwikkelaar
Categorie
Installaties
10+

App APKs

SigNN - Real-time ASL Alphabet APP

SigNN is de eerste app die real-time ASL, gebarentaalalfabetvertaling aanbiedt. Deze app kan onderscheid maken tussen de statische karakters van het gebarentaalalfabet [A-Y, min J] en de dynamische karakters [J, Z]. Hierdoor kan het hele alfabet worden vertaald.

Teken met uw linkerhand als u SigNN gebruikt. Rechtse ondersteuning is niet geïmplementeerd in de app. Zorg er bovendien voor dat uw hand niet in een extreme hoek staat wanneer u het ASL-alfabet ondertekent.

Deze tool kan mensen helpen gebarentaal te leren door te valideren of ze hun woord duidelijk ondertekenen. Als de app je ASL-teken kan begrijpen, dan kan een ASL-ondertekenaar dat zeker ook.

Deze tool kan ook mensen interesseren voor ASL en het vergemakkelijken van communicatie met mensen die moeite hebben met communiceren via spraak. Er bestaan ​​momenteel dure vertaalhandschoenen voor gebarentaal, maar we hopen in de toekomst meer betaalbare en schaalbare oplossingen te zien.

SigNN staat voor Sign Neural Network en is een proof of concept gebouwd op Mediapipe, een Machine-Learning Pipeline gemaakt door Google. Het laat zien dat real-time gebarentaalvertaling nu mogelijk is op mobiele apparaten. Deze app is ontwikkeld door een groep studenten van de University of California, Santa Barbara.

Een bedrijf of groep met meer middelen kan een nauwkeuriger neuraal netwerk creëren en niet alleen ondersteuning bieden voor het ASL-alfabet, maar ook voor de meer algemene ASL-zinnen. Hoewel we misschien de eerste zijn in de app store, hopen we dat er nog veel verbeterde versies zullen volgen.
Meer informatie

Advertentie