Anthropic: из 7349 раскрытых уязвимостей исправили только 217!
Мы изучили свежие данные Anthropic по поиску уязвимостей и нашли несколько тревожных цифр.
Компания Anthropic поделилась статистикой: из 7349 раскрытых проблем исправлено только 217.
За семь месяцев нейросеть нашла 37 966 проблем, из которых 7349 уже опубликованы. Статус «исправлено» получили всего 217 багов, а в реальных атаках замечены только два. При этом 1654 отчёта оказались дубликатами, ещё 419 пришлось отозвать. Мусора и повторов в публичной выборке набралось в 9,5 раза больше, чем реальных патчей.
Сама Anthropic отчитывается о росте точности находок до 94,2%, хотя за последние два месяца на 11 813 новых репортов пришлось 15 исправлений. Из 29 тысяч найденных в открытом коде проблем сотрудники вручную просмотрели только 6000, а остальные массивы сырых нейросетевых отчётов начали рассылать мейнтейнерам без валидации.
Показательный пример привели разработчики curl: они вручную разобрали 34 присланные уязвимости, 19 сразу отклонили как ложные, ещё 6 признали неопасными, а 9 до сих пор изучают.
