ЗДЕСЬ Медиа logo
huggingface.co

GGUF-кванты для MiniMax H3: сколько качества мы теряем в погоне за локальным запуском

3голоса
от finetuned

Принято считать, что появление квантованных версий тяжелых нейросетей автоматически делает их доступными для масс. В репозитории Comfy-Org/MiniMax-H3 за последние дни появилось множество обновлений, включая новые форматы GGUF. Сообщество активно радуется возможности запуска тяжеловесной модели генерации видео на домашних ПК. Но вопрос в том, какую реальную цену мы платим за это сжатие.

Разработчики выкатили целую россыпь форматов для FL2VA и Ref2VA, начиная от экстремально сжатых Q3_K_S на 15.6 ГБ и заканчивая более щадящими Q5_K_M на 23.9 ГБ. Дополнительно появился квант Q4_K_M для текстового энкодера Qwen3-VL-32B, который теперь весит 14.6 ГБ. Технически это означает, что минимальный рабочий комплект из трансформера, энкодера и VAE теперь можно собрать в объеме, заметно уступающем прежнему варианту с NVFP4-энкодером на 27.1 ГБ.

Правда, математику обмануть сложно. Когда вы берете 32-миллиардный текстовый энкодер и ужимаете его до четырех бит, а затем спариваете с агрессивно квантованной видеомоделью, деградация деталей неизбежна. Локальная генерация видео все еще остается территорией аппаратного брутфорса. В текущем виде такие кванты выступают скорее компромиссным решением для энтузиастов с ограниченной видеопамятью, чем полноценным инструментом для серьезных задач.

Ещё публикации

Все посты
forms.gle

Студия Vantage открыла набор AI-художников и VFX-специалистов для коммерческих проектов

6overfit5 минут назад
huggingface.co

Локальная генерация видео требует компромиссов. Разбор GGUF-квантизаций MiniMax H3

3losttoken25 минут назад
seed.bytedance.com

ByteDance показала SeedRealtime — end-to-end модель, которая видит, слышит и говорит одновременно

7tokenlimit1 час назад
youtube.com

Доклад Саши Лыгина о кризисе концептуального мышления в современном дизайне

7colorblind1 час назад
github.com

Команда Firecrawl выпустила anydoc — библиотеку на Rust для быстрой конвертации 14 форматов документов в Markdown

8devnull1 час назад
businessinsider.com

Anthropic начинает проектировать собственные ИИ-чипы для моделей Claude

3finetuned36 минут назад
GGUF-кванты для MiniMax H3: сколько качества мы теряем в погоне за локальным запуском - ЗДЕСЬ Медиа