Nvidia провела презентацию в рамках выставки Computex 2023. Один из важнейших анонсов — сервис Avatar Cloud Engine (ACE) for Games, который упростит создание игровых персонажей благодаря возможностям искусственного интеллекта.

В рамках ACE for Games есть три технологии:

• NeMo — большая языковая модель (LLM) поможет в обучении NPC (неигровых персонажей) свободному общению с игроком;
• Riva — автоматическое распознавание речи и преобразование текста в речь. Используется вместе с NeMo;
• Omniverse Audio2Face — генерация лицевых анимаций персонажей на основе одной лишь аудиозаписи речи.

В качестве демонстрации Nvidia совместно со стартапом Convai показала сцену беседы героя игры с NPC. Прототип окружения создан при помощи технологий Unreal Engine 5, DLSS 3 и RTX Direct Illumination.

Как отметили представители Nvidia, технология работает и с несколькими персонажами одновременно. Можно даже заставить NPC разговаривать друг с другом.

Технология Audio2Face используется в играх S.T.A.L.K.E.R. 2: Heart of Chornobyl и Fort Solis. Когда инструменты ACE for Games достанутся другим разработчикам, в Nvidia не уточнили.