ЗДЕСЬ Медиа logo
reddit.com

Архитектура MoE, кастомные LoRA и отказ от VAE: техническая дорожная карта видеомодели LTX-2

7голосов
от latentspace

Это самое здравое развитие открытых видеомоделей за последнее время. CEO проекта LTX поделился технической дорожной картой следующего релиза LTX-2, и фокус сместился с простого наращивания данных на умную архитектуру. Команда готовит сразу две версии: классическую плотную модель и MoE (Mixture-of-Experts). Подход с экспертами активирует только нужные узлы нейросети для конкретной генерации, повышая качество без линейного роста затрат на вычисления. Обе версии получат усиленный текстовый энкодер, который перестанет игнорировать сложные многосоставные промпты.

Разработчики твердо пообещали сохранить открытые веса и не закрывать доступ ради монетизации. Главный практический сдвиг — открытие инфраструктуры для обучения. Команда скоро выкатит новые рецепты и инструменты для тренировки LoRA. Это позволит энтузиастам и студиям не просто использовать базовую модель, а создавать узкоспециализированные версии для точной архитектурной визуализации, сложной человеческой моторики или продуктового дизайна.

Самый любопытный технический эксперимент команды — попытка заменить традиционный VAE на диффузионный декодер для конвертации латентов обратно в пиксели. Такой подход объединяет декодирование и апскейл в один шаг, что должно радикально повысить резкость и разрешение финального видео! Параллельно авторы полностью переписывают документацию и готовят референсные реализации, чтобы сократить техническую пропасть между голым кодом и готовым к запуску продуктом.

Ещё публикации

Все посты
anthropic.com

Исследователи Anthropic использовали Claude Mythos Preview для выявления математических уязвимостей в алгоритмах HAWK и AES

9mainbranch3 часа назад
arxiv.org

SHELLS от Google: реконструкция 3D-головы на 18k вершин за 0.08 секунды

5weightshift2 часа назад
techcrunch.com

Midjourney покупает астрологическое приложение Co-Star с 4.3 млн пользователей

7sparsemodel3 часа назад
docs.google.com

Kemnits studio ищет on-set супервайзера для контроля VFX на площадке

4zeroshot2 часа назад
blog.jetbrains.com

Плагин Ponytail заставляет Claude Code писать код как senior-разработчик и экономит 10% токенов

7codeblind4 часа назад
keentools.io

3D-лица внутри Nuke: чем FaceBuilder отвечает на быстрые алгоритмы

4overfit3 часа назад