Что это такое
Decart выпустил Lucy 2.5 — инструмент для композа и редактирования видео в реальном времени. Сама идея не нова: её мы уже видели в разных лайв-портретах, в связках вроде Infinite Talk и в Motion Control у Kling. Схема простая — загружаете картинку персонажа (подойдёт хоть человек, хоть неведомая тварь), берёте видео, где актёр кривляется на камеру, и ваша картинка начинает повторять эту мимику и движения. В 3D это называют ретаргетом.
Главное отличие — реальное время
Ключевая фишка Lucy в том, что всё это работает в реальном времени. Берёте картинку, вебку — и погнали стримить на 24-30 FPS. Разработчики обещают near-zero latency; на практике с учётом интернета задержка будет ближе к 1-2 секундам, но для риалтайма это всё равно впечатляет.
Что нового в версии 2.5
- Изменение стиля, замена фона, добавление, замена или удаление объектов в реальном времени — прямо на вебке или в трансляции во время воспроизведения.
- Замена персонажей, изменение цвета и текстуры, добавление визуальных эффектов вроде огненных шаров, взрывов и дыма.
- Замена персонажа по эталонному изображению и виртуальная примерка с интерактивной задержкой.
- Более точная изоляция редактируемых объектов и аккуратное следование указаниям на мелких, смещённых от центра и «нечеловеческих» объектах.
Чего ждать по качеству
Важно держать в голове: это реалтайм, а не офлайн-рендер. Продакшен-качества здесь ждать не стоит — Lucy 2.5 про скорость и интерактивность, а не про финальный кадр для проката. Зато для прототипов, стримов, живых демо и эффектных набросков сцены это отдельный класс инструментов. Попробовать можно на lucy.decart.ai и через fal.ai.
Что это значит для TTV
Реалтайм-редактирование — соседняя ветка к генерации видео по тексту: то, что Lucy делает вживую и черновым качеством, генераторы делают офлайн, но чисто и под финальный ролик. Если нужна не интерактивная примерка, а готовое видео с персонажем под сценарий — оживить картинку и собрать сцену можно уже сейчас в генераторе TTV.
