Сенсорные браслеты Myo, подключенные к PC или смартфону через Bluetooth, помогут быстрее научиться языку жестов. Показанные знаки сравниваются с базой данных и тут же выводятся на экран в виде слов и фраз. Проект может облегчить коммуникацию в экстренных случаях, например, в больнице.
В браслетах используются как блок инерционных измерений для отслеживания движений, так и электромиографические сенсоры для распознавания состояния мускулов, что должно помочь в определении положения пальцев.
Программа изучает язык жестов, а также знаки для отдельных букв и цифр от 1 до 10.
Приложение может не только показывать текст на экране, но и проговаривать его вслух, чтобы облегчать живое общение, говорит соавтор работы, выпускник Государственного университета Аризоны Праджвал Паудьял. «В идеале, владелец устройства должен иметь возможность брать его повсюду с собой», — считает он.
В подобном направлении двигался и Рузбех Джафари, профессор Техасского центра A&M. Он, однако, использовал специально изготовленные сенсоры, а не готовую продукцию.
По его словам, электромиографы требуют калибровки, если использовать их не в одном и том же помещении. Также надо принимать во внимание индивидуальные особенности жестикуляции. Несмотря на всё это, сказал он, «мы движемся в правильном направлении».