Tieto rukavice dokážu preložiť posunkový jazyk na hovorové slová

Vedci z Kalifornskej univerzity v Los Angeles vyvinuli nositeľné zariadenie pripomínajúce rukavici, ktorá dokáže pomocou aplikácie pre smartfóny preložiť americký posunkový jazyk na reč. Aj keď je stále vo fáze prototypu, mohla by jedného dňa pomôcť tým, ktorí sa spoliehajú na posunkovú reč ľahšie komunikovať a pomôcť začínajúcim študentom posunkovej reči.

 
DENNIS WISE, UNIVERSITY OF WASHINGTON

„Analógové triboelektrifikácie a signály založené na elektrostatickej indukcii generované zložkami znakového jazyka - vrátane ručných pohybov a výrazov tváre - sú konvertované do digitálnej domény pomocou prenosného systému prekladu znak-reč.“ Jun Chen, odborný asistent bioinžinierstva na UCLA  Samueli, povedal spoločnosti Digital Trends. „Náš systém ponúka dobrú mechanickú a chemickú odolnosť, vysokú citlivosť, rýchlu reakčnú dobu a vynikajúcu pružnosť.“

Rukavice obsahujú tenké, roztiahnuteľné senzory vyrobené z elektricky vodivého vlákna, ktoré sa nachádzajú po dĺžke všetkých piatich prstov. Oznamujú pohyby prstov nositeľa na malej doske s obvodmi veľkosti mince, ktorá sa nosí na zápästí a ktorá následne prenáša údaje do pripojeného smartfónu. Pretože americký znakový jazyk sa okrem pohybu rúk spolieha na výrazy tváre, systém zahŕňa aj senzory pripevnené na obočie používateľa a jeho úst. Na základe algoritmov umelej inteligencie je nositeľ rukavíc schopný rozpoznať 660 znakov, vrátane každého písmena abecedy a číslic od nuly do deväť.

Chen uviedol, že predchádzajúce zariadenia na preklad znakovej reči sú založené na širokom spektre techník vrátane elektromyografie, piezorezistívneho efektu, kapacitného efektu a spracovania obrazu. Ale samotná zložitosť týchto techník, okrem toho, že sú ťažkopádne spôsobila to, že ostali len v laboratóriach.

"Napríklad systémy prekladu posunkového jazyka založené na obraze majú vysoké požiadavky na optimálne osvetlenie," uviedol Chen. „Ak je dostupné osvetlenie zlé, zhorší to vizuálnu kvalitu pohybu zachyteného fotoaparátom a následne ovplyvní výsledky rozpoznávania. Alternatívne systémy prekladu znakového jazyka založené na povrchovej elektromyografii majú prísne požiadavky na polohu snímačov, čo môže ovplyvniť presnosť a spoľahlivosť prekladu.

„Dúfame, že tento nositeľný systém prekladu z posunkovej reči na hovorovú reč by sa mohol používať v prostredí skutočného sveta, nielen v laboratóriach, stále pracujeme na vývoji systému,“ povedal Chen. „Môže to trvať tri až päť rokov, kým bude systém komercializovaný.“

Zdroj: digitaltrends.com