Ученым удалось прочитать мысли людей при помощи сканирования мозга. Результаты эксперимента были описаны в журнале Nature Neuroscience.
Результат может в конечном итоге привести к бесшовным устройствам, которые помогут людям, которые не могут говорить или иным образом легко общаться. Исследование также вызывает озабоченность по поводу конфиденциальности в связи с нежелательным прослушиванием нейронных сетей.
В отличие от многообещающих имплантированных устройств, новая система не требует хирургического вмешательства. И в отличие от других внешних подходов, он создает непрерывные потоки слов, а не имеет более ограниченный словарный запас.
Для нового исследования три человека провели внутри аппарата МРТ не менее 16 часов каждый. Они слушали истории, в основном из подкаста The Moth, а функциональная МРТ выявила изменения кровотока в мозге. Эти изменения являются показателями мозговой активности, хотя и медленными и несовершенными.
Имея в руках эти нейронные данные, вычислительные нейробиологи Александр Хут и Джерри Танг из Техасского университета в Остине и их коллеги смогли сопоставить модели активности мозга с определенными словами и идеями. Подход основывался на языковой модели, созданной с помощью GPT.
Как только исследователи узнали, какие паттерны активности мозга соответствуют словам в историях, команда смогла работать в обратном направлении, используя паттерны мозга для предсказания новых слов и идей. Декодер оценивал вероятность того, что слова появятся после предыдущего слова, а затем использовал шаблоны активности мозга, чтобы помочь выбрать победителя и, в конечном итоге, добраться до сути идеи.
Декодеры также могли примерно воспроизводить истории из мозга людей в двух разных сценариях: когда люди молча рассказывали себе отрепетированную историю, и когда они смотрели немое кино.
«Это исследование очень впечатляет, и оно дает нам представление о том, что может быть возможно в будущем», — говорит Сара Вандельт, вычислительный нейробиолог из Калифорнийского технологического института, не участвовавшая в исследовании.
