Технологии

Разработаны перчатки, которые переводят язык жестов в речь в реальном времени

Лайнуть/Поделиться

Высокотехнологичная перчатка с датчиками движения позволяет переводить американский язык жестов на разговорный английский через приложение для смартфона. Перевод происходит в режиме реального времени, что позволяет людям с нарушениями речи общаться с внешним миром.

«Мы надеемся, что это открывает легкий путь общения с миром для людей, которые используют язык жестов, без необходимости нанимать переводчика», – сказал Джун Чен, доцент кафедры биоинженерии в Калифорнийском университете в Лос-Анджелесе и главный автор исследования. «Кроме того, мы надеемся, что это поможет большему количеству людей самостоятельно изучать язык жестов».

Датчики могут улавливать даже самые тонкие жесты и движения рук, такие как расположение пальцев, которые представляют буквы, цифры, слова и фразы на американском языке жестов. Об изобретении сообщено сегодня в журнале Nature Electronics.

Движения пальцев преобразуются в электрические сигналы, которые отправляются на смартфон через плату размером с монету, надетую на запястье. Наконец, приложение на телефоне преобразует сигналы в произнесенные слова со скоростью примерно одно слово в секунду.

Короткое видео о носимой перчатке для перевода языка жестов. Предоставлено: Jun Chen Lab / UCLA.

Исследователи также экспериментировали с адгезивными сенсорами, приклеенными к лицам испытуемых, чтобы также переводить выражения лица, которые являются частью американского языка жестов.

В Соединенных Штатах более 500 000 человек используют язык жестов в качестве основного способа общения. Неясно, сколько языков жестов в мире, и в этом отношении еще очень мало исследований, но один список говорит, что их всего 137.

Предыдущие носимые системы, предназначенные для перевода американского языка жестов, также оказались эффективными, но они были ограничены громоздким вспомогательным оборудованием и их было неудобно носить. Напротив, эти перчатки легкие, долговечные и используют гибкие и недорогие электронные датчики.

DOI: 10.1038/s41928-020-0428-6


Вас также может заинтересовать:

Редакция

Опубликовала
Редакция

Недавние публикации

Сонные морщины. Положение во сне влияет на старение лица

Обзорное исследование, опубликованный в журнале Aesthetic Surgery Journal в 2016, проливает свет на связь между… Читать далее

04/03/2024

Некоторые случаи слепоты связаны с бактериями в кишечнике

Существуют определенные генетические мутации, которые могут вызывать слепоту и передаваться от родителей к детям. Например,… Читать далее

29/02/2024

Десять главных ежедневных последствий эволюции

От икоты до зубов мудрости - эволюция человека оставила после себя некоторые вопиющие, но врожденные… Читать далее

28/02/2024

10 вопросов, которые помогут отличить науку от псевдонауки

Чтобы отличить науку от псевдонауки, основатель Общества скептиков Майкл Шермер предлагает 10 вопросов, которые нужно… Читать далее

25/02/2024

Охотники-собиратели были жестоко стерты с лица земли фермерами, согласно анализу ДНК

Вопреки сложившемуся мнению, мирного перехода власти от охотников-собирателей к земледельцам в Европе не было. Новый… Читать далее

14/02/2024

Синдром Котара: Люди думают, что они мертвы

Синдром Котара - психопатологическое расстройство, которое еще называют нигилистическим бредом или синдромом "ходячего мертвеца". Человек… Читать далее

12/02/2024