Компания Decart AI представила новую версию своей модели Lucy 2.5, предназначенной для редактирования Full HD-видео в реальном времени. Основное внимание разработчики уделили повышению стабильности генерации между кадрами и оптимизации производительности. Теперь модель обрабатывает видео с разрешением Full HD при 30 кадрах в секунду, поддерживая изменение объектов сцены как текстовыми промптами, так и референсными изображениями.
Одним из значительных нововведений стал механизм Self-Anchoring, который создает опорное представление сцены для сохранения внешнего вида объектов и персонажей, даже когда они временно покидают кадр. Это улучшает временную согласованность результата. Также были оптимизированы вычисления с использованием форматов квантования MXFP8 и NVFP4, что дало четырехкратный прирост скорости генерации.
Кроме того, обновленная модель позволяет редактировать видеопоток в реальном времени без рендеринга, меняя внешний вид персонажей и окружения по текстовым инструкциям.
Вместе с тем, Decart AI также выпустила Aleph 2.0, которая обеспечивает высокоточное редактирование по принципу сохранения контекста, позволяя вносить изменения только на ключевых кадрах, что упрощает процесс для видеоредакторов.
*компания Meta Platforms Inc. признана экстремистской организацией, ее деятельность на территории России запрещена