https://frosthead.com

Ovaj nosivi uređaj prevodi jezik znaka na engleski

Oko 500.000 Amerikanaca koristi američki znakovni jezik (ASL). Za gluhe korisnike ASL-a komunikacija s onima koji ne govore jezikom može biti izazov. Iako većina Amerikanaca s gluhim rodom uči govorni jezik kroz govornu terapiju, neki i dalje teško mogu shvatiti se usmeno ili jednostavno pronađu jezik znakova kao fluidniji oblik izražavanja.

Sada su istraživači sa teksaškog sveučilišta A&M razvili nosiv uređaj koji "prevodi" znakovni jezik na engleski jezik osjetim korisnikova kretanja. Uređaj, još uvijek u fazi prototipa, može prepoznati oko 40 ASL znakova s ​​96 posto točnosti.

Sustav koristi dva senzora. Jedan je senzor pokreta s akcelerometrom i žiroskopom, koji mjeri brzinu i kut ruku i ruku korisnika. Osjećajući gdje se nalaze ruke i ruke korisnika, može početi pogađati koju riječ može potpisati. Tu je i elektromiografski senzor, koji mjeri električni potencijal pokreta mišića. Može točno reći koji se dio ruku i prstiju kreće, što je kritično.

"Ako pogledate vokabular američkog znakovnog jezika, postoje slučajevi da se ruka sama kreće i tada imate vrlo fino zrnato kretanje prstiju", kaže Roozbeh Jafari, inženjer koji je vodio projekt. "Ako ih želite otkriti, nećete moći upotrijebiti samo pokret ruke."

Na primjer, riječ "molim" u ASL-u uključuje pravljenje krugova preko prsa s otvorenom rukom. Riječ "oprosti" koristi identičan pokret, ali ruka je zatvorena u pesnici.

Senzori se nose na desnom zglobu korisnika. Sakupljene informacije šalju se putem Bluetooth-a na prijenosno računalo. Ovo prijenosno računalo vodi algoritam za tumačenje znaka i na ekranu prikazuje riječ na engleskom jeziku.

Na kraju se Jafari nada da će negirati potrebu za prijenosnim računalom tako što će maleno računalo uključiti izravno u uređaj. Računalo bi tada moglo poslati engleske riječi na telefon druge osobe kako bi mogli pročitati što njihov partner za razgovor govori.

Očito je da će prevoditelj također morati postati iskusan u daleko više znakova od 40 kako bi bio održiv proizvod. Iako postoje stotine ASL znakova, originalnih 40 znakova izabrano je jer su uobičajeni i korisni, kaže Jafari. Osoba ih može upotrijebiti za izgovaranje jednostavnih, presudnih rečenica poput „treba mi voda.“ Uređaj će također trebati brže - korisnici će morati napraviti stanku između riječi kako bi imali vremena za prijevod.

"U stvarnosti ljudi ne razgovaraju tako", kaže Jafari.

Ali taj napredniji sustav, kaže, predstavlja put dolje i uključivat će više posla i financiranja.

Prethodne ASL tehnologije prevođenja koristile su fotoaparate za čitanje pokreta. Ali ovo ne funkcionira dobro u uvjetima slabog osvjetljenja, kaže Jafari. Osim toga, mnogim ljudima se ne sviđa ideja da ih kamera stalno gleda.

Posljednjih godina stvorene su brojne druge tehnologije za pomoć gluhim i slušnim ljudima u međusobnoj komunikaciji. Aplikacija pod nazivom Transcense, objavljena prošle godine, prevodi govor mnogih ljudi u pisane riječi i prikazuje ih na zaslonu u mjehurićima obojenim mjehurićima. Zamišljeno je da pomogne gluvim ljudima na sastancima ili u društvenim situacijama, gdje više govornika može biti izazov čak i najiskusnijim čitateljima usana. Druga tvrtka, MotionSavvy, radila je na tabletu koji tumači ASL prijedloge i čita riječi naglas na engleskom. U Kini, istraživači su koristili Microsoftovu opremu za otkrivanje pokreta Kinect za prevođenje kineskog jezika znakova u izgovorene i pisane riječi.

Kao netko tko dugo radi s nosivim tehnologijama, poput satova koji prate ritam srca, Jafari shvaća važnost komfora i estetike. Ako je uređaj neugodan i nametljiv, ljudi ga neće nositi. Trenutni prototip uređaja za prevođenje jezika znakovnog izgleda kao medicinski uređaj, s elektrodama i remenima i žicama. Jafari bi želio da konačna verzija bude mala i atraktivna.

"Želim da cijeli sustav stane u sat", kaže on.

Ovaj nosivi uređaj prevodi jezik znaka na engleski