Компания Lightricks выпустила IC-LoRA (Image/Video Conditioning LoRA) для модели LTX-2.3-22B, которая позволяет автоматизировать создание «чистых кадров» (clean plates) путем удаления людей, транспорта и других движущихся объектов из видеоряда с сохранением деталей фона.
Что произошло
Разработанный модуль IC-LoRA позволяет проводить видео-в-видео реконструкцию, используя референсное видео в качестве сигнала управления. Это исключает необходимость использования текстовых триггерных слов для управления процессом. Инструмент позволяет очищать видео от динамических объектов, сохраняя при этом архитектурную целостность и детали статического окружения.
Контекст
Технология базируется на методе Image/Video Conditioning (IC), который обеспечивает более точное управление генерацией через визуальный референс. Это представляет собой альтернативу традиционному процессу создания сложных масок и ручного ротоскопинга в VFX-пайплайнах.
Почему это важно для индустрии
Для индустрии визуальных эффектов и композитинга это означает переход от трудоемкого попиксельного ручного труда к семантическому управлению слоями. Автоматизация создания clean plates упрощает workflow и позволяет интегрировать подобные методы в облачные API и коммерческие видеоредакторы, создавая новые стандарты «умного» композитинга.
Почему это важно для пользователей
Обычные пользователи и создатели контента получают доступный способ профессиональной «очистки» видеороликов от случайных прохожих или машин. Для этого достаточно описать желаемый пустой пейзаж в промпте, не обладая глубокими знаниями в области маскирования и сложного программного обеспечения для композитинга.
Что пока неизвестно / ограничения
Существуют неопределенности относительно вычислительной стоимости инференса и задержки (latency) при работе с моделью масштаба 22B параметров, что может влиять на возможность массового внедрения в реальном времени.
Источники
Автор
Look at AI, редакция