Клонирование голоса из фильма Проект Аве Мария: полный открытый пайплайн за 2 дня

Клонирование голоса из фильма «Проект «Аве Мария»: полный открытый пайплайн за 2 дня
Извлеките аудиодорожку из видео с помощью ffmpeg
Разделите аудио на голоса, музыку и шум через Demucs
Транскрибируйте и диаризируйте реплики с Whisper + pyannote
Извлеките чистый голос целевого персонажа (например, Райана Гослинга)
Обучите модель RVC v2 и синтезируйте речь по вашему тексту
Читать статью →

Подписаться на канал