jianchang512/pyvideotrans
АВТОМАТИЧЕСКИЙ ПЕРЕВОД ВИДЕО С ОЗВУЧКОЙ
Open-source инструмент для полного цикла перевода видео: распознавание речи, перевод субтитров, синтез речи и сборка видео. Поддерживает локальные модели и облачные API для ASR, LLM и TTS.
// КЛЮЧЕВЫЕ ОСОБЕННОСТИ
- Полный цикл: ASR → перевод → TTS → сборка видео
- Поддержка диаризации спикеров и многоролевого дубляжа
- Клонирование голоса: F5-TTS, CosyVoice, GPT-SoVITS
- Локальные (Ollama, Faster-Whisper) и облачные API
// РАЗБОР: КАК ЭТО РАБОТАЕТ
pyVideoTrans автоматизирует полный пайплайн: ASR (Faster-Whisper локально или облачные API) → перевод субтитров LLM (DeepSeek, GPT, Claude, Ollama) → TTS (Edge-TTS, OpenAI, клонирование F5-TTS/CosyVoice/GPT-SoVITS) → сборка видео. На каждом этапе доступна пауза и ручная правка.
Ключевая фича — диаризация спикеров и многоролевой дубляж с разными голосами. В комплекте утилиты: вокальное разделение, синхронизация А/В, слияние субтитров. Есть CLI для батчей и WebUI. Поддерживает десятки провайдеров ASR/LLM/TTS, можно миксовать локальные и облачные модели.
Windows: готовый .exe (GPU требует CUDA 12.8, cuDNN 9.11, только NVIDIA). Исходники: Python 3.10, FFmpeg в PATH, uv. Локальные модели нуждаются в GPU NVIDIA, иначе медленно. Облачные API требуют ключей.
// СЦЕНАРИИ ИСПОЛЬЗОВАНИЯ
Кому пригодится: Создателям контента и локализаторам видео для мультиязычной аудитории
- Перевести обучающее видео на 10 языков с сохранением голосов спикеров
- Создать субтитры с разметкой ролей для подкаста и озвучить разными голосами
- Локализовать маркетинговый ролик через локальные модели без отправки данных в облако
// БЫСТРЫЙ СТАРТ
brew install libsndfile git python@3.10
brew uninstall --ignore-dependencies ffmpeg
brew tap homebrew-ffmpeg/ffmpegКоманды взяты из README репозитория — перед запуском сверьтесь с актуальной версией на GitHub.
Новые репозитории каждые 30 минут
REDDYX AI сканирует GitHub 24/7 и присылает лучшие AI/ML/Web3 проекты в Telegram.
Подписаться в Telegram