Инструмент в реальном времени генерирует карту GTA V при помощи нейросетей

Разработчики использовали модель GameGAN.

Харрисон Кинсли и Даниэль Кукиела создали инструмент GAN Theft Auto — это механизм, генерирующий игровую карту в Grand Theft Auto V при помощи двух нейросетей на базе модели Nvidia GameGAN.

Каждый пиксель, который вы видите, генерируется нейронной сетью, пока я играю. Нейросеть — это вся игра. Здесь нет правил, написанных нами или движком, — Кинсли

Для обучения нейросетей Nvidia выделила Кинсли систему DGX Station A100, так как процесс требует особых мощностей графического процессора. Нейросети справляются с генерацией тени под автомобилем, отражениями солнца и увеличением удалённых объектов по мере приближения к ним. Также разработчики написали специальный ИИ, чтобы «очистить» вывод нейросети, который в исходном состоянии довольно низкого разрешения.

Код GAN Theft Auto открыт и доступен на Github. Демоверсия должна запуститься на большинстве компьютеров.

GameGAN от Nvidia уже воссоздавала карты для игр Pacman и VizDoom.