Инженеры научили Siri и Google Assistant понимать человека без слов

Исследователи из Корнеллского университета США разработали оригинальный гаджет для пользователей голосовых помощников Siri, Alexa и Google Assistant. Компактное устройство позволяет взаимодействовать с виртуальными ассистентами, не произнося ни звука.

Миниатюрный прибор с рабочим названием SpeeChin оснащён инфракрасной камерой и предназначен для ношения на шее. Направленный вверх объектив отслеживает положение подбородка человека и после недолгого периода машинного обучения распознаёт голосовые команды, даже если пользователь произносит их беззвучно. Лица самого владельца и окружающих прибор при этом не «видит».

Первое испытание технологии проводилось на 20 добровольцах. Они произносили простые фразы, включая цифры, на английском и китайском языке. В первом случае точность распознавания составила 90,5%, во втором — 91,6%. Показатели ухудшались, если люди попутно делали какие-то движения, например, ходили, из-за чего их мимика изменялась. Разработчики утверждают, что эту проблему можно решить, устроив более продолжительные сеансы обучения гаджета.

В дальнейшем инженеры намерены улучшить аппаратную часть устройства, что позволит ему более эффективно отслеживать движения подбородка за счёт увеличения скорости съёмки и повышенного разрешения камеры. Внедрение этой технологии в перспективе может упростить взаимодействие пользователей с голосовыми помощниками в ситуациях, когда произносить команду вслух неудобно (например, в общественном транспорте).