I guanti che traducono la lingua dei segni in linguaggio parlato

Tra gli obiettivi principali delle nuove tecnologie, figura sicuramentel’abbattimento delle barriere che opprimono gli individui affetti da disabilità.

Una nuova tecnologia sembra essere in grado di fornire uno strumento che permetta una comunicazione fluida e immediatatra chi è affetto da sordomutismo e chi non conosce la lingua dei segni.

I bioingegneri dell’Università di Los Angeleshanno progettato e costruito un nuovo device in grado ditradurre il linguaggio dei segni americano(ogni lingua possiede la propria specifica lingua dei segni)in lingua parlata, il tutto in tempo reale e con l’aiuto di una specifica app per smartphone.

Come funzionano i nuovi guanti

Il congegno presentato è provvisto di un guanto caratterizzato dasottili sensoriposti lungo ognuna delle cinque dita della mano. Le esatte movenze delle dita e della mano vengono trasformatein segnali elettrici, i quali vengono quindi trasmessi ad una scheda posta sul polso.

Il segnale trasmessoarriva quindi allo smartphone attraverso una tecnologia wireless, e i gesti vengono trasformati da un algoritmo in numeri, lettere, parole e frasi comunicatiattraverso un assistente vocale.

Inoltre, i ricercatori hanno aggiunto ulteriori sensori adesivi tra le sopracciglia e su un lato della bocca dei soggetti che hanno sperimentato la nuova tecnologia, in modo da catturare anche leespressioni facciali, le quali sono parte integrante del linguaggio dell’American Sign Language.

Il sistema sviluppato è il primo del suo genere senza dispositivi estremamente ingombranti o scomodi da indossare. Oltre ad essere leggera, l’attrezzatura è formata dapolimeri estendibili, durevoli e poco costosi.

La pubblicazione e le parole del capo del progetto

L’esperimento, pubblicato suNature Electronics, è stato condotto con 4 ragazzi sordi che usano il linguaggio dei segni per esprimersi. Ogni gesto veniva ripetuto quindici volte, mentreun algoritmo di machine learning man mano imparava a definire lettere e parole in base ai gesti presentati.

A capo del progetto c’eraZhou Chen, il quale ha commentato così la nuova invenzione del suo laboratorio: “La nostra speranza è che questo sistema apra le porte a un modo semplice per le persone di usare la lingua dei segni per comunicare direttamente con chi non la usa senza bisogno di tradurli. Speriamo inoltre che questo sistema possa aiutare più persone a imparare da soli la lingua dei segni”.

Il sistema attualmente riconosce 660 segni, inclusa ogni lettera dell’alfabeto e i numeri da 0 a 9. La traduzione avvienein meno di un secondo, e presenta una percentuale di accuratezza che può arrivare fino al98%.

diDaniele Sasso

fonti:

  • Zhou, Z., Chen, K., Li, X., Zhang, S., Wu, Y., Zhou, Y., Meng, K., Sun, C., He, Q., Fan, W., Fan, E., Lin, Z., Tan, X., Deng, W., Yang, J., & Chen, J. (2020). Sign-to-speech translation using machine-learning-assisted stretchable sensor arrays. Nature Electronics, 1–8.

LEGGI ANCHE:

Allenare l’attenzione modulando le proprie onde cerebrali

Usiamo davvero solo il 10% del nostro cervello?

Il Gioco della vita

I due sistemi dell’elaborazione del dolore