Till innehåll på sidan
Till KTH:s startsida Till KTH:s startsida

Teckenspråksöversättare

Datahandske som kan översätta ASL genom att läsa av finger- och handrörelser

Teckenspraksoversattare

Projektbeskrivning

Syftet med uppsatsen var att skapa en datahandske som kan översätta ASL genom att läsa av finger- och handrörelser. Vidare undersöktes om ledande tyg kan användas som sträcksensorer. För att läsa av handgesterna fästes ledande tyg på varje finger på handsken för att urskilja hur mycket de böjdes. Handrörelserna registrerades med en 3-axlig accelerometer som var monterad på handsken. Sensorvärdena lästes av en Arduino Nano 33 IoT monterad på handleden som översatte till de motsvarande tecknen. Mikrokontrollern överförde sedan resultatet trådlöst till en annan enhet via Bluetooth Low Energy.

Handsken kunde korrekt översätta alla tecken på ASL-alfabetet med en genomsnittlig exakthet på 93%. Det visade sig att tecken med små skillnader i handgester som S och T var svårare att skilja mellan vilket resulterade i en noggrannhet på 70% för dessa specifika tecken.

Poster

Sign Language Translation Glove poster (Eng) (pdf 3,3 MB)

Rapport

Sign Language Translation Glove report (Eng) (pdf 1006 kB)

MF 133X, Grupp 20

Pierre Sinander
Tomas Issa