Компания NVIDIA продолжает внедрять технологии на базе искусственного интеллекта в игры и 3D-приложения. Одним из направлением является технологи Audio2Face для создания реалистичной лицевой анимации на основе аудиопотока. Она же входит в набор технологий NVIDIA RTX Kit.

Технология NVIDIA Audio2Face призвана упростить процесс синхронизации анимации с речью и помочь адаптировать анимацию лица под разные звуковые дорожки. Теперь компания открывает исходный код моделей ИИ и SDK Audio2Face. Это упростит интеграцию технологии в разные проекты. На сайте NVIDIA Developer выложен SDK, рабочий фреймворк, плагины для Autodesk Maya и Unreal Engine 5, а также вся необходимая документация.

Технологию уже используют компании Convai, Codemasters, GSC Games World, Inworld AI, NetEase, Reallusion, Perfect World Games, Streamlabs и UneeQ Digital Humans. Среди последних игр она применялась для создания анимации в Alien: Rogue Incursion Evolved Edition и Chernobylite 2: Exclusion Zone.