Aproximativ 500.000 de americani folosesc limbajul semnelor americane (ASL). Pentru utilizatorii surzi ai ASL, comunicarea cu cei care nu vorbesc în limbaj poate fi o provocare. Deși majoritatea americanilor născuți de surzi învață limba vorbită prin logopedie, unii încă le este greu să se înțeleagă verbal sau pur și simplu găsesc limbajul semnelor o formă mai fluidă de a se exprima.
Acum, cercetătorii de la Texas A&M University au dezvoltat un dispozitiv de purtat, care „traduce” limba semnelor în engleză, sesizând mișcările utilizatorului. Dispozitivul, aflat încă în stadiul de prototip, poate recunoaște aproximativ 40 de semne ASL cu o precizie de 96%.
Sistemul folosește doi senzori. Unul este un senzor de mișcare cu accelerometru și giroscop, care măsoară viteza și unghiul mâinii și brațului utilizatorului. Simțind unde sunt mâinile și brațele unui utilizator, poate începe să ghicească ce cuvânt ar putea semna. Apoi există un senzor electromiografic, care măsoară potențialul electric al mișcării musculare. Poate spune exact ce parte a mâinilor și a degetelor se mișcă, ceea ce este critic.
„Dacă te uiți la vocabularul American Language Language, există cazuri în care mâna în sine se mișcă și atunci ai o mișcare foarte fină a degetelor”, spune Roozbeh Jafari, inginerul care a condus proiectul. „Dacă doriți să le detectați, nu veți putea folosi doar mișcarea mâinii.”
De exemplu, cuvântul „vă rog” în ASL implică realizarea cercurilor peste piept cu mâna deschisă. Cuvântul „scuze” folosește o mișcare identică, dar mâna este închisă cu un pumn.
Senzorii sunt purtați pe încheietura dreaptă a utilizatorului. Informațiile colectate sunt trimise prin Bluetooth către un laptop. Acest laptop rulează un algoritm pentru interpretarea semnului și afișează cuvântul în engleză pe ecran.
În cele din urmă, Jafari speră să anuleze nevoia laptopului prin încorporarea unui mic computer direct în dispozitiv. Computerul ar putea apoi să trimită cuvintele în engleză pe telefonul altei persoane, astfel încât să poată citi ce spune partenerul lor de conversație.
În mod evident, traducătorul va trebui, de asemenea, să devină priceput în mai multe semne decât 40 pentru a fi un produs viabil. În timp ce există sute de semne ASL, cele 40 de semne originale au fost alese pentru că sunt comune și utile, spune Jafari. O persoană le poate folosi pentru a spune propoziții simple și cruciale, precum „Am nevoie de apă.” Dispozitivul va trebui, de asemenea, să devină mai rapid - chiar acum, utilizatorii trebuie să se întrerupă între cuvinte pentru a-i oferi timp să traducă.
„În realitate, oamenii nu vorbesc așa”, spune Jafari.
Însă, acest sistem mai avansat, spune el, este o modalitate de coborâre și va implica mai multă muncă și finanțare.
Tehnologiile anterioare de traducere ASL au folosit camere pentru citirea gesturilor. Dar acestea nu funcționează bine în condiții de iluminare scăzută, spune Jafari. În plus, multor oameni nu le place ideea ca o cameră să le urmărească tot timpul.
O serie de alte tehnologii au fost create în ultimii ani pentru a ajuta persoanele surde și auzitoare să comunice între ele. O aplicație numită Transcense, lansată anul trecut, traduce vorbirea de la mai multe persoane în cuvinte scrise și le prezintă pe ecran în bule cu coduri de culori. Este menit să ajute persoanele surde la întâlniri sau în situații sociale, unde mai mulți vorbitori pot fi o provocare chiar și pentru cei mai pricepuți cititori de buze. O altă companie, MotionSavvy, lucrează la o tabletă care interpretează mișcările ASL și citește cuvintele cu voce tare în engleză. În China, cercetătorii au folosit echipamentele de detectare a mișcărilor Microsoft Kinect pentru a traduce limba chineză a semnelor în cuvinte vorbite și scrise.
Ca cineva care a lucrat mult timp cu tehnologii purtabile, cum ar fi ceasurile care monitorizează ritmul cardiac, Jafari înțelege importanța confortului și esteticii. Dacă un dispozitiv este incomod și obturator, oamenii nu îl vor purta. Prototipul actual al dispozitivului de traducere a limbajului semnelor arată ca un instrument medical, cu electrozi, curele și fire. Jafari ar dori ca versiunea finală să fie mică și atractivă.
„Vreau să fac întregul sistem într-un ceas”, spune el.
