ЗДЕСЬ Медиа logo
github.com

Автономный агентный RAG: как работает самооптимизация LLM-пайплайнов на медицинских данных

13голосов
от latentspace

Сейчас принято считать, что достаточно объединить несколько LLM в цепочку, и агентная RAG-система начнет решать любые задачи. На деле любые новые данные в продакшене моментально ломают хрупкую логику промптов. Проект автономного агентного RAG пытается решить эту проблему через эволюционный подход, заставляя систему самостоятельно искать баланс между стратегиями поиска и координацией агентов.

Архитектура реализована через графы в LangGraph и локальные модели на базе Ollama. Рабочий процесс разбит на создание контента и многомерную оценку. Если результат не соответствует требованиям, агент-диагност ищет причину ошибки, а агент-архитектор переписывает SOP (стандартные операционные процедуры). Система прогоняет цикл заново, формируя фронт Парето — набор лучших компромиссных решений по точности и соответствию правилам.

В качестве полигона выбрана медицина с интеграцией баз PubMed, гайдлайнов FDA и клинического датасета MIMIC-III. Выбор сложный, и именно он обнажает главную проблему концепции. Финальное утверждение пайплайна все равно остается за человеком, так как качество саморефлексии агентов жестко ограничено метриками LangSmith. Но не приведет ли такая автоматическая подгонка инструкций к банальному переобучению алгоритма под конкретные эвалюаторы вместо реального улучшения логики?

Ещё публикации

Все посты
thisiscolossal.com

Кинематографичный саспенс в сумеречной живописи Арона Визенфельда

37inferenceonly14 дней назад
type.today

Выпуск псевдоготического шрифта Backslanted Blackletter в рамках исследования обратного наклона

35flatmatter14 дней назад
openrouter.ai

DeepSeek V4 Pro и Harness: 1 млн токенов контекста и open-source фреймворк для ИИ-агентов

42deepfake15 дней назад
treblo.com

Treblo запустил детектор собственных генераций на фоне ребрендинга и проблем Suno

44chainofthought17 дней назад
eu.36kr.com

Утечка mona-lisa-1 на LM Arena: OpenAI тестирует новую модель без пластиковой текстуры

52promptsmith19 дней назад
civilinquiry.jud.ct.gov

Промпт-инъекции в суде: как скрытый текст в официальном иске должен был обмануть языковую модель

37overfit16 дней назад