0

MIT разработали прибор, который «слышит» мысли

MIT разработали прибор, который «слышит» мысли
Эксперты из Массачусетского технологического университета (MIT) разработали компьютерный интерфейс, способный распознавать слова, которые пользователь проговаривает про себя, но не произносит. Устройство было представлено на конференции, посвященной «умным» пользовательским интерфейсам.

Прибор называется AlterEgo и состоит из съемного устройства и вычислительной системы. Устройство считывает с лица нейромышечные сигналы, инициированные «внутренними вербализациями» — то есть проговариванием слов про себя незаметно для окружающих. Сигналы попадают в нейросеть, которая соотносит их с конкретными словами.

Технология относится к классу нейромышечных интерфейсов, то есть устройство регистрирует изменения сигналов нейромышечной активности и не использует ЭЭГ-гарнитуру — даже когда говорим про себя, электрическая активность вовлеченных в речь мышц все равно меняется и устройство регистрирует эти изменения.

При создании AlterEgo исследователи фокусировались семи зонах лица, включая внешнюю и внутреннюю часть гортани, подъязычную кость, ротовую и подбородочную область, а также внешнюю и внутреннюю подглазничную зону. В версии, описанной в статье, использовалось семь электродов, однако в системе, продемонстрированной на конференции, их было уже четыре и все они умещались на одной стороне лица.

Для того, чтобы обучить AlterEgo выполнять команды пользователя, разработчики просили трех добровольцев внутренне проговорить команды из разных категорий, включая численные операции («разделить», «прибавить» и так далее), управление умным домом ( «включить свет», «выключить свет», «включить кондиционер», «выключить кондиционер») и другие. За два этапа исследователи записали 36 часов беззвучной речи.

Затем ученые использовали сверточную нейронную сеть для поиска корреляций между определенными нервно-мышечными сигналами и конкретными словами. В результате она научилась определять, что хотел сказать пользователь, даже если он ничего не произносил вслух. Тестирование с участием 10 волонтеров показало, что после 15-минутной калибровки, AlterEgo способна распознать команды человека с точностью до 92 процентов, что превосходит точность существующих систем. Испытание в каждом случае длилось 90 минут.

Со временем, отмечают разработчики, точность системы должна возрасти благодаря увеличению набора данных. На данный момент исследователи работают над тем, чтобы сделать словарь AlterEgo более обширным.

Также по теме