Техническое задание: Система ИИ-аватара с заменой голоса

Цель проекта

Создать комплексное решение для генерации цифрового персонажа (аватара), который сможет выступать в роли диктора в видео-контенте с использованием передовых нейросетевых технологий.

Ключевые задачи

• Создание 3D-аватара: Реализовать один из двух возможных подходов:
  • Генерация аватара полностью с нуля с помощью нейросетей.
  • Применение технологии замены лица (FaceSwap) на видео с реальным диктором.
• Интеграция voice swap: Настроить систему для замены или синтеза голоса, синхронизированного с движениями губ аватара.
• Подбор и настройка инструментов: Выбрать оптимальный набор существующих нейросетей, фреймворков или библиотек для выполнения задачи. Не требуется написание моделей с нуля, фокус на грамотной интеграции и конфигурации.

Требования к результату

• Рабочий конвейер (pipeline) для создания видео с цифровым аватаром.
• Реалистичная синхронизация артикуляции губ аватара с речью.
• Качественная замена или генерация голоса.
• Четкая и понятная документация по использованию настроенного инструментария.