Nvidia показала использование генеративного ИИ в диалогах с игровыми персонажами
Компания представила сервис ACE for Games для разработки NPC с использованием искусственного интеллекта.
Nvidia провела презентацию в рамках выставки Computex 2023. Один из важнейших анонсов — сервис Avatar Cloud Engine (ACE) for Games, который упростит создание игровых персонажей благодаря возможностям искусственного интеллекта.
В рамках ACE for Games есть три технологии:
- NeMo — большая языковая модель (LLM) поможет в обучении NPC (неигровых персонажей) свободному общению с игроком;
- Riva — автоматическое распознавание речи и преобразование текста в речь. Используется вместе с NeMo;
- Omniverse Audio2Face — генерация лицевых анимаций персонажей на основе одной лишь аудиозаписи речи.
В качестве демонстрации Nvidia совместно со стартапом Convai показала сцену беседы героя игры с NPC. Прототип окружения создан при помощи технологий Unreal Engine 5, DLSS 3 и RTX Direct Illumination.
Как отметили представители Nvidia, технология работает и с несколькими персонажами одновременно. Можно даже заставить NPC разговаривать друг с другом.
Технология Audio2Face используется в играх S.T.A.L.K.E.R. 2: Heart of Chornobyl и Fort Solis. Когда инструменты ACE for Games достанутся другим разработчикам, в Nvidia не уточнили.