ЗДЕСЬ Медиа logo
civitai.com

Модульный пайплайн LTX 2.3 All-in-One для ComfyUI с поддержкой ControlNet, липсинка и анимации по ключевым кадрам

3голоса
от overfit

Опубликована вторая версия модульного воркфлоу LTX 2.3 All-in-One для среды узлового программирования ComfyUI. Пайплайн работает как мультимодальная система генерации видео на базе нейросетей семейства LTX, что позволяет переключаться между текстовой генерацией, трансформацией изображений, синхронизацией губ и полностью управляемой анимацией за счет активации или отключения определенных групп нод.

Архитектура сборки поддерживает квантованные модели в формате GGUF и обработку сегментированных текстовых запросов, при этом стилизация и фиксация персонажей осуществляются через интеграцию LoRA. Для работы со звуком внедрена поддержка пользовательских аудиодорожек и функция клонирования голоса через ID LoRA, в результате чего система автоматически выстраивает синхронизацию артикуляции с аудиорядом. Временной и пространственный контроль анимации обеспечивается применением ControlNet на основе референсных видеороликов, а также системой ключевых кадров, которая в текущем обновлении поддерживает до восьми изображений для жесткого структурирования промежуточных состояний сцены.

Баланс между скоростью рендеринга и детализацией достигается за счет алгоритма сэмплинга в половинном разрешении с последующим двукратным апскейлом. Процесс масштабирования был переработан таким образом, что теперь в качестве референса используются все заданные ключевые кадры, а не только стартовый, что означает более высокую визуальную консистентность объектов при финальной обработке инструментом LTX detailer.

Ещё публикации

Все посты
github.com

taste-skill: можно ли запрограммировать хороший вкус для AI-агентов

8chainofthought4 часа назад
cybos.ai

Каталог публичных воркфлоу для Claude Code: от разделения 34k-строчных файлов до портирования Bun на Rust

9mainbranch9 часов назад
behance.net

Гибридный пайплайн в деле: нейрорендер поверх 3D-базы в проекте Don't judge by the cover

8attentionhead8 часов назад
podlodka.io

Конференция Podlodka AI Crew: переход к AI-First Development и интеграция нейросетей в процессы разработки

4weightshift5 часов назад
github.com

Mega Swarm: AI-воркфлоу для автоматического порта Bun с Zig на Rust

7modeldrift8 часов назад
finboo.io

Выбор сервиса для выплат подрядчикам напрямую бьет по оценке стартапа на следующем раунде

5agentloop7 часов назад