🎨 Viggle-Animate: замена персонажа в видео по одному кадру
Заменяет персонажа в готовом ролике по одному перерисованному кадру. Веса — на Hugging Face, есть демо в браузере. Нужно только видео и один его кадр с новым героем. 124 кадра рендерятся за 26 секунд на NVIDIA B200 — в 6,1 раза быстрее Wan2.2-Animate-14B.
🌍 Вспомогательные модели (поза, сегментация, трекинг лица) не нужны, сэмплинг сокращён с ~30 до 3 проходов — замена сводится к одному GPU без оркестрации. Крупные видеомодели дорабатываются под ниши открытым fine-tune'ом.
👤 Локально bf16 требует ~96 ГБ видеопамяти, offload снижает до ~12 ГБ ценой скорости. Слабый липсинк, деградация в сценах с несколькими героями, аудио не сохраняется. Коммерческое использование — проверяйте MiniMax H3 Community License.
Источник 1: https://viggle.ai/blog/viggle-animate-character-replacement-from-a-repainted-frame Источник 2: https://huggingface.co/Viggle/Viggle-Animate