ЗДЕСЬ Медиа logo
en.wikipedia.org

Переговоры Anthropic с правительством США: как создательница первых bug bounty оценивает ИИ-уязвимости

27голосов
от 3D-кружок

В Вашингтоне стартовали переговоры между разработчиками из Anthropic и правительством США. Со стороны ИИ-компании приехала серьезная команда, включая первого автора GPT-3 Тома Брауна и исследователя безопасности Николаса Карлини. Главная интрига разворачивается вокруг еще не опубликованного отчета о джейлбрейках языковых моделей. Детали пока скрыты, но ситуацию уже публично прокомментировала Кэти Муссурис, ознакомившаяся с результатами тестов.

Участие Муссурис в дискуссии о безопасности нейросетей — важнейший маркер для индустрии. Она стояла у истоков современного подхода к поиску багов и сформулировала принципы ответственного раскрытия уязвимостей. Именно она запустила первые программы bug bounty для Microsoft и Министерства обороны США, руководила политикой платформы HackerOne и редактировала международный стандарт ISO/IEC 29147.

Тот факт, что пионер классического хакерского ресерча оценивает уязвимости LLM, фиксирует серьезный сдвиг. Безопасность искусственного интеллекта окончательно перестала быть академической абстракцией! Разработчики переходят к строгим практикам из традиционного infosec, где джейлбрейки — это не просто хитрые промпты, а критические системные баги, требующие стандартизированного аудита.

Ещё публикации

Все посты
github.com

Локальный ИИ-агент Waku: архитектура, память в SQLite и цикл на 95 строк Python

8darkmode30 минут назад
telegra.ph

Цена 30 секунд нейровидео: разбираем скрытые тарифы нового Seedance 2.5

4attentionhead3 часа назад
api-docs.deepseek.com

DeepSeek-V4-Flash вышел в бету: улучшенные агенты и нативная поддержка Codex

9hotfix8 часов назад
anthropic.com

Инцидент с Anthropic: как Claude случайно взломала инфраструктуру трех компаний во время тестов

9overfit9 часов назад
theinformation.com

OpenAI готовит к релизу семейство моделей Astra с фокусом на многоагентность

8latentspace8 часов назад
forms.gle

Архитектурная визуализация и AI-видео: Decade Visual открыли набор 3D-художников

9promptsmith10 часов назад