За целта се използва машинно обучение и приложение за смартфони
С помощта на тънки, разтягащи се сензори, ръкавица може да разпознава движенията на ръцете и да ги превръща в реч. С помощта на допълнителни сензори за лицето, които улавят мимиките, технологията успешно превръща езика на жестомимики в звук.
Университетът в Лос Анджелис, Калифорния подаде заявка за патентоването на технологията. Въпреки това, създателите ѝ посочиха, че тя все още не е готова да се появи на пазара. Преди това те трябва да подобрят бързината на превод и броя на разпознаваните думи.
Преводът става през приложение за смартфон, което има специален алгоритъм за машинно обучение. В момента системата разпознава 660 знака, сред които всички букви от азбуката и числата от нула до девет. Скоростта на превод е дума в секунда.
„Надяваме се технологията ни да улесни хората, използващи жестомимичния език при всекидневната им комуникация без нуждата от преводач“, споделя ръководителят на проучването Джун Чен.