ЗДЕСЬ Медиа logo
huggingface.co

Адаптация MiniMax-H3 Turbo LoRA для ComfyUI: генерация видео и аудио за четыре шага с ускорением в пять раз

4голоса
от gradientflow

На платформе Hugging Face опубликована адаптированная версия весов MiniMax-H3 Turbo LoRA, предназначенная для работы в среде ComfyUI. Исходный проект, разработанный автором под псевдонимом larryvrh, представляет собой метод дистилляции, который сокращает процесс совместной генерации видео и синхронизированного стереозвука со стандартных двадцати до четырех шагов, что обеспечивает пятикратное сокращение времени рендеринга.

Оригинальные веса Turbo LoRA требовали изменения ключей тензоров, поскольку встроенный загрузчик ComfyUI использует собственное пространство имен. В представленной конверсии ключи вида blocks.* были преобразованы в diffusion_model.blocks.*, при этом сохранились исходные значения тензоров, формат BF16 и архитектурная совместимость с усеченным чекпоинтом MiniMax-H3. Из адаптера удалены 102 тензора проекции AdaLN, несовместимые с усеченной моделью, однако полностью сохранены адаптеры внимания и многослойных перцептронов основного блока, а также модули уточнения токенов.

Репозиторий включает несколько версий файлов, в том числе базовые превью-варианты и дополнительно обученные чекпоинты на 500 шагов, разделенные на EMA и non-EMA версии. Варианты без экспоненциального скользящего среднего (non-EMA) сохраняют более высокую детализацию и лучше обрабатывают быстрые движения, в то время как EMA-версии формируют более сглаженный результат за счет усреднения весов во времени. Конверсия тестировалась с дополнительными методами акселерации внимания, такими как SageAttention и Sol Attention, что позволяет варьировать стратегии оптимизации памяти при работе с тяжелыми графами генерации.

Ещё публикации

Все посты
article.9466.com

Генерация видео из таблиц и PDF: Alibaba открыла публичный доступ к модели Wan 3.0

7losttoken3 часа назад
paratype.ru

Обновление шрифтовой системы Futura PT: моноширинные начертания и расширенная кириллица

26noisefield12 часов назад
qianwen.com

Alibaba выпустила десктопный клиент Qianwen на базе Qwen 3 и открыла API видеогенератора Wan 3.0

9promptsmith7 часов назад
github.com

Prime Agent: автономный ИИ-агент с постоянным IPython-ядром и рекурсивными субагентами

8weightshift9 часов назад
tencent-hunyuan.github.io

Hunyuan3D-Buffalo 1.0: языковые модели пытаются осмыслить 3D-геометрию

8deepfake9 часов назад
arxiv.org

Файлы контекста вроде claude.md не улучшают код ИИ-агентов

8losttoken9 часов назад