Японские научные специалисты из Университета Осака задействовали искусственный интеллект для создания изображений на основе мыслей человека. Итоговый репринт опубликовали в репозитории BioRxiv. Если работа исследователей пройдет экспертизу, то её представят в одном из научных журналов.
В своей работе специалисты задействовали нейронную сеть Stable Diffusion, в которую были загружены данные фМРТ пациентов. Участникам эксперимента изначально показали определенный набор картинок. В то время как испытуемые на них смотрели, активность их мозга записывали.
На основе информации, которая была получена в ходе процедуры и пропущена через нейронную сеть, авторы работы сумели воссоздать иллюстрации «из мыслей» людей. Сначала им удалось предсказать скрытое представление по сигналам фМРТ, а после этого в модель были добавлены шум и данные фМРТ. В результате исследователи получили финальные изображения, где сверху видны реальные картинки, а снизу показаны выданные нейросетью.
