Глава NVIDIA Дженсен Хуанг представил на конференции Computex 2023 технологию ACE для игр. Она представляет собой ИИ, который отвечает за речь NPC и его лицевые анимации во время разговора с пользователями.
Три основные модели технологии ACE от NVIDIA
- NVIDIA NeMo — это языковая модель, которая позволяет NPC отвечать на любые вопросы от игроков. С помощью нее можно придать персонажу индивидуальность: рассказать предысторию и раскрыть личность героя;
- NVIDIA Riva — технология, которая автоматически распознает речь и преобразовывает ее в текст. С помощью нее можно общаться с NPC голосом;
- NVIDIA Omniverse Audio2Face — технология, которая создает лицевые анимации на основе сгенерированного звука.
Во время презентации глава NVIDIA рассказал, что инструменты компании могут интегрироваться в игры на Unreal Engine 5. Разработчики технологии показали небольшое демо, которое работает на движке в реальном времени.
Технологию ACE уже применяют в разработке нескольких игр. В качестве примера компания рассказала о S.T.A.L.K.E.R. 2: Heart of Chornobyl и Fort Solis, в которых используют Audio2Face для генерации лицевых анимаций.
