Исследователи из Мэрилендского университета в Колледж-Парке (США) разработали уникальную модель компьютерного “зрения”, которая использует отражения в глазах человека для создания изображений на компьютере. Эта новая технология позволяет создавать от 5 до 15 цифровых фотографий лица наблюдателя с различных ракурсов и воссоздавать то, что он видит.
Данная модель основывается на методе поля нейронного излучения (NeRF), который использует нейронные сети для определения плотности и цвета объектов. NeRF создает компьютерную сцену, экстраполируя изображение размером 20 на 20 пикселей, которое видит человек.
Однако этот подход имеет свои ограничения, так как изображения получаются размытыми из-за сложной формы роговицы – прозрачного внешнего слоя передней части глаза. В ходе тестирования на музыкальных клипах, техника смогла определить общую форму объектов по отражениям в глазах певиц, но с трудом восстанавливала детали.
Несмотря на некоторые недостатки, эта работа вызвала огромный интерес в научном сообществе, так как она доказала, что поверхность роговицы может быть использована в качестве изогнутого зеркала для создания панорамных изображений. Однако некоторые ученые выразили опасения относительно возможности отслеживания каждого человека и того, что он видит, когда попадает под наблюдение уличных камер.