NVIDIA DeepStream 9.1: единый монорепозиторий и агентные навыки для генерации пайплайнов видеоаналитики

Компания NVIDIA перевела платформу видеоаналитики DeepStream в формат единого монорепозитория и выпустила версию 9.1. Главным нововведением релиза стало добавление тринадцати специализированных навыков для ИИ-агентов, совместимых с Claude Code и аналогичными инструментами. Это меняет процесс создания пайплайнов компьютерного зрения: вместо ручной сборки графов GStreamer разработчик описывает ожидаемый результат естественным языком.

Набор предоставленных скриптов позволяет языковой модели самостоятельно настраивать окружение, генерировать конфигурации и запускать профилирование через Nsight Systems. В библиотеку навыков интегрированы сложные аналитические модули, включая Multi-View 3D Tracking для пространственного отслеживания объектов по данным с нескольких камер. Дополнительно агенты могут управлять утилитой AutoMagicCalib, которая выполняет автоматическую калибровку оптики как на записанных видеофайлах, так и на живых RTSP-потоках.

Исходный код плагинов, интеграций для моделей YOLO и инструментов конвертации SAM2 в формат TensorRT опубликован в репозитории проекта. Фреймворк опирается на актуальный вычислительный стек, требуя наличия CUDA 13.2, при этом поддерживается аппаратное ускорение инференса как на десктопных видеокартах архитектуры x86, так и на встраиваемых системах линейки Jetson.