Нейросеть Nvidia Instant NeRF позволяет «заглянуть в зеркало»
В результате сканирования комнаты в зеркале нет отражения оператора.
В конце марта Nvidia представила нейросеть Instant NeRF, которая генерирует 3D-сцену, основываясь на 2D-изображениях. Разработчик Юг Брюйер поделился результатом сканирования комнаты, где было расположено зеркало.
Он опубликовал видеоролик в Twitter, где попытался «пройти сквозь зеркало» — и у него это получилось. Объекты, которые были видны в зеркале на момент съёмки, довольно чётко отсканировались, а зеркало будто расширяет пространство.
Нейросеть обработала 134 фотографии и создала из них трёхмерную сцену, заполняя недостающие углы другими фотографиями. В результате сканирования в зеркале нет отражения оператора.