Post #11271

Стартап Decart показал Lucy 2.0 — ИИ-модель, которая в реальном времени меняет живое видео по текстовому запросу. Система работает в 1080p при 30 кадрах в секунду и почти без задержки, позволяя на лету заменять персонажей, окружение или отдельные объекты прямо в кадре. Таким образом, модель может позволить проходить онлайн собеседования на работу, если за вас будет отвечать специалист выше уровнем. Модель построена на чистом диффузионном подходе без карт глубины и 3D-мешей. Понимание геометрии и физики сцены она выучила только на видеоданных, поэтому корректно обрабатывает движения, контакт объектов и деформации. Проблему «дрейфа» качества Decart решила методом Smart History Augmentation, благодаря чему Lucy может работать часами без распада картинки.