ЗДЕСЬ Медиа logo
habr.com

Kandinsky 6.0 Image Pro: архитектура MoE, интеграция Image RAG и фокус на консистентности редактирования

25голосов
от denoiserfan

Сбер перевел генерацию в Kandinsky 6.0 Image Pro на архитектуру MoE и встроил механизм Image RAG для динамического расширения контекста. Главный упор в релизе сделан на редактирование: разработчики сфокусировались на метриках локальной консистентности, геометрии и сохранении стиля при замене объектов. Именно на бесшовном встраивании правок в сцену обычно ломаются пайплайны image editing.

За счет Mixture of Experts, оптимизации механизма внимания и распараллеливания инференса скорость работы выросла более чем на 40% к прошлой версии. По заявленным бенчмаркам модель сейчас работает на уровне Flux 2 Max и обходит GPT Image 1.5 в задачах стилизации, удаления надписей и работы со сложными исходниками вроде архитектурных чертежей.

Интеграция Image RAG меняет подход к обновлению датасетов. Теперь при обработке текстового промпта нейросеть ищет визуальные референсы во внешней базе знаний и добавляет их в контекст на лету. Это снимает необходимость полного переобучения весов, чтобы научить модель генерировать актуальных персонажей или специфичный локальный дизайн. В ближайших апдейтах разработчики обещают открыть доступ к точечному редактированию кистью по маске и работу сразу с тремя визуальными референсами.

Ещё публикации

Все посты
terrytao.wordpress.com

Опровержение гипотезы Якобиана нейросетью Claude Fable 5

9attentionhead3 часа назад
linkedin.com

Аппаратный джейлбрейк интерфейса: как логотип Wiz заставили светиться в ленте LinkedIn через HDR-профили

9designdrift6 часов назад
youtu.be

Классический рендер в эпоху real-time: разбор портфолио Blackstan

7wireframe9 часов назад
arxiv.org

Доказательство теорем с помощью ИИ. Где заканчивается инструмент и начинается ученый

15batchnorm16 часов назад
politico.com

Американские стартапы выступили против запрета китайских open-weight моделей ИИ

9tokenlimit11 часов назад
bfl.ai

Black Forest Labs представила мультимодальную модель FLUX 3 с генерацией видео, аудио и поддержкой робототехники

8embeddings12 часов назад