Исследовательская группа создала искусственный интеллект, который рисует то, на что смотрит человек, в режиме реального времени, просто считывая и расшифровывая его мозговые волны.
Самое главное, что это неинвазивный метод, способный собирать и кодировать всю информацию о мозговых волнах с помощью наушников, подключенных к электроэнцефалографии (ЭЭГ).
«Исследователи думали, что изучение мозговых процессов с помощью ЭЭГ похоже на попытку угадать форму человека по анализу его сигаретного дыма», говорит исследователь Григорий Рашков в выпуске. «Мы не ожидали, что он будет содержать достаточно информации, чтобы хотя бы частично реконструировать изображение, увиденное человеком. Однако это оказалось вполне возможным. «
Исследование
Совместная команда, состоящая из сотрудников Московского физико-технического института и российской компании «Нейроботикс», начала свое исследование с установки специального головного шлема с электродами, который может записывать их мозговые волны.
На втором этапе каждый участник наблюдал 20 минут видеофрагментов продолжительностью 10 секунд каждый, разделенных на 5 категорий. После первых нескольких сессий исследователи уже поняли, что могут определить, какую категорию видео смотрят волонтеры, просто взглянув на данные ЭЭГ.
На третьем этапе ученые разработали две нейронные сети: один обучен генерировать изображения в трех видеокатегориях, а другой — преобразовывать данные ЭЭГ в сопоставимый шум. В условиях конкуренции две сети GAN создали удивительные изображения.
«Благодаря современным технологиям инвазивные нейронные интерфейсы такие как те, которые разрабатываются Neuralink, компанией Элона Маск, должны столкнуться с проблемами сложной хирургии и быстрого ухудшения состояния из-за естественных процессов. Системы могут окислиться и выйти из строя за несколько месяцев». игра в кости Рашков.
«С помощью этого исследования мы стремимся разработать более удобные нейронные интерфейсы, не требующие имплантатов».