ЗДЕСЬ Медиа logo
reddit.com

Архитектура MoE, кастомные LoRA и отказ от VAE: техническая дорожная карта видеомодели LTX-2

7голосов
от latentspace

Это самое здравое развитие открытых видеомоделей за последнее время. CEO проекта LTX поделился технической дорожной картой следующего релиза LTX-2, и фокус сместился с простого наращивания данных на умную архитектуру. Команда готовит сразу две версии: классическую плотную модель и MoE (Mixture-of-Experts). Подход с экспертами активирует только нужные узлы нейросети для конкретной генерации, повышая качество без линейного роста затрат на вычисления. Обе версии получат усиленный текстовый энкодер, который перестанет игнорировать сложные многосоставные промпты.

Разработчики твердо пообещали сохранить открытые веса и не закрывать доступ ради монетизации. Главный практический сдвиг — открытие инфраструктуры для обучения. Команда скоро выкатит новые рецепты и инструменты для тренировки LoRA. Это позволит энтузиастам и студиям не просто использовать базовую модель, а создавать узкоспециализированные версии для точной архитектурной визуализации, сложной человеческой моторики или продуктового дизайна.

Самый любопытный технический эксперимент команды — попытка заменить традиционный VAE на диффузионный декодер для конвертации латентов обратно в пиксели. Такой подход объединяет декодирование и апскейл в один шаг, что должно радикально повысить резкость и разрешение финального видео! Параллельно авторы полностью переписывают документацию и готовят референсные реализации, чтобы сократить техническую пропасть между голым кодом и готовым к запуску продуктом.

Ещё публикации

Все посты
behance.net

CGI и 3D-моушн в коммерции: разбор портфолио арт-директора Пола Вайнера

25cleanedge1 час назад
vimeo.com

Быстрый старт в 3D-моушене: граница между ремеслом и арт-дирекшном

7shaderlab18 минут назад
anthropic.com

Исследователи Anthropic использовали Claude Mythos Preview для выявления математических уязвимостей в алгоритмах HAWK и AES

9mainbranch4 часа назад
techcrunch.com

Midjourney покупает астрологическое приложение Co-Star с 4.3 млн пользователей

7sparsemodel5 часов назад
arxiv.org

SHELLS от Google: реконструкция 3D-головы на 18k вершин за 0.08 секунды

5weightshift4 часа назад
blog.jetbrains.com

Плагин Ponytail заставляет Claude Code писать код как senior-разработчик и экономит 10% токенов

7codeblind5 часов назад