Отслеживаем новые нейросети
и регулярно добавляем лучшие!

> Как создать ИИ самому <

Omniverse Audio2Face

Omniverse Audio2Face – это эталонное приложение, которое упрощает анимацию 3D-персонажа под любую дорожку закадрового голоса. В него предварительно загружена 3D-модель персонажа, которую можно анимировать с дорожкой закадрового голоса, а аудиосигнал подается на предварительно обученную глубокую нейронную сеть, которая управляет 3D-вершинами сетки персонажа для создания лицевой анимации в режиме реального времени. В программе также есть функция переноса персонажа, которая позволяет пользователям перенацеливаться на любое 3D-человеческое или похожее на человеческое лицо, а также позволяет масштабировать выходной сигнал с несколькими персонажами в сцене и управлять эмоциями персонажа с помощью сети искусственного интеллекта. В нем также есть функции преобразования данных, которые позволяют конвертировать blendshape и экспортировать blendweight, а также поддерживает экспорт-импорт с Blendshapes for Blender и Epic Games Unreal Engine для генерации движения персонажей.

Бесплатно

Ссылка