Ученые создали перчатку для перевода языка жестов в речь

Специалисты надеются, что глухонемые люди начнут общаться с миром напрямую, а не используя переводчика, как сейчас, потому что он не всегда доступен.

Китайские ученые со своими американскими коллегами создали перчатку, которая способна переводить язык жестов в речь, передают Актуальные новости.
Перчатка переводит английскую речь в реальном времени благодаря нейросети. Она оснащена датчиками трения и гироскопами, которые позволяют узнать, когда владелец совершает движения пальцами и руками. Общая стоимость всех комплектующих для разработки составляет около 50 долл. С помощью данной перчатки специалисты записали жесты, которые соответствуют шестистам наиболее употребительным словам английского языка. Изобретение выделило в них характерные признаки, по которым можно было бы осуществлять их быстрый перевод. Более того, устройство способно даже воспроизводить их через динамик смартфона.

На этом ученые не остановились и добавили к перчатке датчики, крепящиеся на лицо и определяющие изменения мимики, которая также задействована в языке жестов. По результатам эксперимента с участием четырех глухонемых добровольцев, устройство распознало пасы руками и короткие фразы с почти 100%-й точностью. В ближайшее время специалисты планируют значительно расширить вокабуляр разработки, чтобы ее могли использовать не только в пределах лаборатории, но и в повседневной жизни.

Напомним, ученые создали алгоритм, распознающий написанные пальцем в воздухе слова.

ТЭГИ:
comments powered by HyperComments