Brain2Qwerty v2 от Meta превращает мысли в текст, и для этого не нужны имплантаты мозга.

      Последняя модель ИИ декодирует сигналы мозга в связные предложения с помощью внешних сканеров.

      Искусственный интеллект удивительно хорошо понимает людей. Теперь Meta хочет, чтобы он понимал и наши мозги. Компания представила Brain2Qwerty v2, обновленную систему ИИ, которая может переводить активность мозга в полные предложения, не требуя имплантатов или хирургического вмешательства. Цель не в том, чтобы читать мысли масс. Вместо этого, это помощь людям, которые потеряли способность говорить, снова общаться.

      Как работает клавиатура на основе мозга

      Самый простой способ представить Brain2Qwerty v2 — это как невероятно продвинутую клавиатуру на основе мозга. Добровольцы носят сканер магнитно-энцефалографии (MEG), который измеряет крошечные магнитные сигналы, производимые мозгом, пока они печатают. Вместо того чтобы смотреть на клавиатуру, ИИ отслеживает эти сигналы мозга и предсказывает, что человек намеревался напечатать.

      Meta Brain2Qwerty v2 против v1 Meta

      Самый большой скачок по сравнению с оригинальным Brain2Qwerty заключается в том, что он больше не пытается декодировать одну букву за раз. Вместо этого он смотрит на символы, слова и целые предложения, используя большие языковые модели для заполнения пробелов, как ваш смартфон предсказывает следующее слово во время набора текста. Meta даже описывает систему как добавление семантического понимания, позволяя восстанавливать связные предложения из крайне шумных сигналов мозга.

      Внутри ИИ сочетает модели глубокого обучения, такие как трансформеры и сверточные нейронные сети, с тонко настроенными языковыми моделями, которые действуют почти как проверка правописания для мозга. Если нейронный сигнал неполный или искаженный, языковая модель использует контекст, чтобы предположить, что пользователь, скорее всего, хотел сказать. Meta также использовала ИИ-агентов для оптимизации самого процесса декодирования, что помогло улучшить производительность в реальном времени.

      Meta

      Как подчеркивается в официальной исследовательской статье, система была обучена на основе около 22 000 напечатанных предложений, собранных от девяти добровольцев, каждый из которых провел примерно 10 часов, нося сканер MEG во время набора текста. Brain2Qwerty v2 в настоящее время достигает средней точности 61% по словам, в то время как лучший участник достиг 78% точности, причем более половины их декодированных предложений содержали одну ошибку в слове или меньше. Meta также открыла исходный код обучения и набор данных, чтобы другие исследователи могли продолжить работу.

      Магия обхода хирургии

      Забавная вещь в том, что самый большой прорыв здесь не в ИИ. Это тот факт, что он работает без открытия черепа. Большинство высокопроизводительных интерфейсов «мозг-компьютер» сегодня, включая Neuralink Илона Маска, полагаются на хирургически имплантированные электроды для достижения высокой точности. Brain2Qwerty v2 использует совершенно другой подход, применяя полностью внешний сканер магнитно-энцефалографии (MEG) для считывания активности мозга, устраняя риски, связанные с внутричерепными имплантатами, при этом достигая удивительно сильных результатов.

      Сканер магнитно-энцефалографии (MEG) для справки. Клиника Кливленда

      Meta все еще далека от создания потребительского продукта, и никто не должен ожидать, что сможет печатать электронные письма с помощью своих мыслей в ближайшее время. Сканеры MEG, используемые Brain2Qwerty, — это огромные, дорогие машины, которые принадлежат исследовательским лабораториям, а не гостиным. Но, сочетая достижения в нейробиологии с современным ИИ, Meta показывает, что неинвазивные интерфейсы «мозг-компьютер» могут быть не так уж далеки, как казалось ранее. И для людей, которые потеряли способность общаться, это может оказаться гораздо более значимым, чем любой чат-бот или генератор изображений.