🎬 Новый подход к генерации длинных видео
Разработана стратегия обучения Self Gradient Forcing (SGF), которая устраняет проблему «разрыва градиента исторического контекста» в видеодиффузионных моделях. Метод использует двухпроходную схему: безградиентный rollout и параллельную реконструкцию градиентов KV-кэша.
🌍 SGF позволяет эффективно управлять памятью при генерации длинных видео, избегая катастрофических затрат на обратное распространение ошибки через всю последовательность.
👤 Это позволит создавать нейросети, способные генерировать ролики длиной в несколько минут с сохранением лиц героев и фона при минимальных ресурсах.
Источник 1: https://zhuang2002.github.io/SelfGradientForcing/ Источник 2: https://arxiv.org/abs/2607.20368