Meta* представила нейросеть, воспроизводящую изображения из мыслей

Meta* представила нейросеть, которая в режиме реального времени генерирует картинки из мозга. Совсем недавно требовалось время, чтобы "прокачать" мозговую активность и воспроизвести изображения. Теперь этот процесс занимает считанные секунды.

При помощи магнитоэнцефалографии (МЭГ) Meta* продемонстрировала модель искусственного интеллекта, способную декодировать зрительные образы, разворачивающиеся в мозге, с невероятной скоростью.

МЭГ — неинвазивный метод нейровизуализации, который позволяет получать тысячи измерений мозговой активности в секунду.

В перспективе это может стать трамплином для создания в клинических условиях неинвазивных интерфейсов "мозг-компьютер", которые помогут людям, утратившим из-за поражения мозга способность говорить.

Применив архитектуру, обученную по сигналам МЭГ декодировать восприятие речи, Meta* создала систему из трех компонентов — кодера изображения, кодера мозга и декодера изображения.

Кодер изображения используется для формирования богатого набора представлений изображения независимо от мозга. После этого с этими вложениями изображения кодер мозга учится налаживать МЭГ-сигналы.

В заключение декодер изображения воспроизводит правдоподобную картинку.

Изображения далеки от идеала, но результаты показали, что МЭГ можно использовать для расшифровки представлений мозга с высокой точностью.

*Meta — признана экстремистской и запрещена на территории РФ.

0 комментариев