Техническое задание: Система ИИ-аватара с заменой голоса
Цель проекта
Создать комплексное решение для генерации цифрового персонажа (аватара), который сможет выступать в роли диктора в видео-контенте с использованием передовых нейросетевых технологий.
Ключевые задачи
- Создание 3D-аватара: Реализовать один из двух возможных подходов:
- Генерация аватара полностью с нуля с помощью нейросетей.
- Применение технологии замены лица (FaceSwap) на видео с реальным диктором.
- Интеграция voice swap: Настроить систему для замены или синтеза голоса, синхронизированного с движениями губ аватара.
- Подбор и настройка инструментов: Выбрать оптимальный набор существующих нейросетей, фреймворков или библиотек для выполнения задачи. Не требуется написание моделей с нуля, фокус на грамотной интеграции и конфигурации.
Требования к результату
- Рабочий конвейер (pipeline) для создания видео с цифровым аватаром.
- Реалистичная синхронизация артикуляции губ аватара с речью.
- Качественная замена или генерация голоса.
- Четкая и понятная документация по использованию настроенного инструментария.