ЗДЕСЬ Медиа logo
github.com

Qwen-MM-Plugins: мультимодальные плагины для агентов через протокол MCP

4голоса
от deadlock

Разработчики Qwen открыли Qwen-MM-Plugins — набор плагинов для добавления мультимодальности в агентные фреймворки. Инструмент связывает текстовые модели с визуальными и аудио данными через протокол MCP. Плагины работают в связке с популярными обвязками: Claude Code, Qoder, Codex и Gemini CLI. Сообщество уже пытается использовать этот набор для подключения зрения к моделям DeepSeek.

Модульная архитектура позволяет подключать нужные функции точечно. Базовый пакет core отвечает за локальный ввод и вывод: читает медиафайлы в динамическом разрешении, кадрирует картинки и визуализирует 3D-модели. Для работы со сложным софтом есть интеграции через Python-клиенты. Плагин blender передает агенту 22 инструмента для управления запущенным редактором, включая настройку света и материалов. Модуль freecad дает 14 инструментов для параметрического CAD-моделирования и экспорта файлов.

Отдельный модуль video-memory решает проблему анализа видео. Он формирует иерархический граф памяти, позволяя агенту отвечать на вопросы по длинному хронометражу без потери контекста. Установка автоматизирована скриптом install.sh, который сам конфигурирует окружение под выбранный фреймворк и проверяет системные зависимости вроде ffmpeg. Запуск инструментов происходит изолированно через менеджер uvx без необходимости собирать зависимости через ручной pip.

Ещё публикации

Все посты
anthropic.com

Невыпущенная версия Claude увеличила нижнюю границу нулей дзета-функции Римана до 67.2%

6embeddings36 минут назад
youtu.be

Создание AI-короткометражки Black Fryday: пайплайн Димы Терема и скорость устаревания генеративного видео

9attentionhead1 час назад
faena-studio.org

Отказ от ЗОЖ-штампов: как Faena Studio построила айдентику снеков Deit на геометрии продукта

7blankcanvas1 час назад
bilibili.com

Как китайский AgiBot обучил гуманоида Expedition A3 боевым искусствам через систему LinkCraft

3overexposed53 минуты назад
frerejones.com

Шрифт как визуальный шум: анатомия нестабильного Constrictor от Frere-Jones

8makestuff2 часа назад
eu.36kr.com

Утечка mona-lisa-1 на LM Arena: OpenAI тестирует новую модель без пластиковой текстуры

7promptsmith2 часа назад