Brain2Qwerty v2 от Meta превращает мысли в текст, и для этого не нужны импланты в мозг.

      Последняя модель ИИ декодирует сигналы мозга в связные предложения с помощью внешних сканеров.

      Искусственный интеллект удивительно хорошо начинает понимать людей. Теперь Meta хочет, чтобы он понимал и наши мозги. Компания представила Brain2Qwerty v2, обновленную систему ИИ, которая может переводить активность мозга в полные предложения, не требуя при этом имплантатов или хирургического вмешательства. Цель не в том, чтобы читать мысли масс. Вместо этого, это помощь людям, которые потеряли способность говорить, снова общаться.

      Как работает клавиатура на основе мозга

      Самый простой способ представить Brain2Qwerty v2 — это как невероятно продвинутую клавиатуру на основе мозга. Добровольцы носят сканер магнитно-энцефалографии (MEG), который измеряет крошечные магнитные сигналы, производимые мозгом, пока они печатают. Вместо того чтобы смотреть на клавиатуру, ИИ наблюдает за этими сигналами мозга и предсказывает, что человек намеревался напечатать.

      Meta Brain2Qwerty v2 против v1 Meta

      Самый большой скачок по сравнению с оригинальным Brain2Qwerty заключается в том, что он больше не пытается декодировать одну букву за раз. Вместо этого он смотрит на символы, слова и целые предложения, используя большие языковые модели для заполнения пробелов, подобно тому, как ваш смартфон предсказывает следующее слово во время набора текста. Meta даже описывает систему как добавляющую семантическое понимание, позволяя ей восстанавливать связные предложения из крайне шумных сигналов мозга.

      Внутри ИИ сочетает глубокие модели обучения, такие как трансформеры и сверточные нейронные сети, с тонко настроенными языковыми моделями, которые действуют почти как проверка правописания для мозга. Если нейронный сигнал неполный или искаженный, языковая модель использует контекст, чтобы сделать вывод о том, что пользователь, вероятно, хотел сказать. Meta также использовала ИИ-агентов для оптимизации самого процесса декодирования, что помогло улучшить производительность в реальном времени.

      Как подчеркивается в официальной исследовательской статье, система была обучена на основе около 22 000 напечатанных предложений, собранных от девяти добровольцев, каждый из которых провел примерно 10 часов, нося сканер MEG во время набора текста. Brain2Qwerty v2 в настоящее время достигает средней точности слов в 61%, в то время как лучший участник достиг 78% точности, причем более половины их декодированных предложений содержали одну ошибку в слове или меньше. Meta также открыла исходный код обучения и набор данных, чтобы другие исследователи могли продолжить эту работу.

      Чудо без хирургии

      Смешно то, что самый большой прорыв здесь не в ИИ. Это тот факт, что он работает без открытия черепа. Большинство высокопроизводительных интерфейсов «мозг-компьютер» сегодня, включая Neuralink Илона Маска, полагаются на хирургически имплантированные электроды для достижения высокой точности. Brain2Qwerty v2 использует совершенно другой подход, применяя полностью внешний сканер магнитно-энцефалографии (MEG) для считывания активности мозга, устраняя риски, связанные с внутричерепными имплантатами, при этом достигая удивительно сильных результатов.

      Сканер магнитно-энцефалографии (MEG) для справки. Клиника Кливленда

      Meta все еще далеко от создания потребительского продукта, и никто не должен ожидать, что сможет печатать электронные письма, используя свои мысли, в ближайшее время. Сканеры MEG, используемые Brain2Qwerty, являются огромными, дорогими машинами, которые принадлежат исследовательским лабораториям, а не гостиным. Но, сочетая достижения в нейронауке с современным ИИ, Meta показывает, что неинвазивные интерфейсы «мозг-компьютер» могут быть не так уж далеки, как казалось ранее. И для людей, которые потеряли способность общаться, это может оказаться гораздо более значимым, чем любой чат-бот или генератор изображений.