Компании Nvidia и Convai опубликовали занятный ролик, в котором представлены различные технологии, отлично подходящие для создания с помощью ИИ реалистично выглядящих и ведущих себя NPC-персонажей.
Судя по видео, Nvidia Riva способна автоматически распознавать речь и преобразовывать речь в текст (плюс появляется возможность общаться с NPC голосом). Благодаря Nvidia NeMo, являющейся языковой моделью, NPC в играх могут отвечать на наши вопросы.
Nvidia Omniverse Audio2Face формирует лицевые анимации на основе сгенерированного звука. А через NeMo Guardrails разработчики могут контролировать темы, обсуждаемые неигровыми персонажами. Все данные инструменты позволят интегрировать в движок Unreal Engine 5.
Кстати, тот же Audio2Face уже задействован в определенных играх, например, команда шутера от первого лица STALKER 2: Heart of Chornobyl использует его для создания лицевых анимаций.
