Пост канала
😞 ИИ плохо чинит уязвимости Хотя ИИ значительно ускорил поиск новых уязвимостей, с применением LLM для их устранения не всё так однозначно. Исследователи скормили двум передовым моделям шесть свежих и сложных уязвимостей, названия и CVE которых вы почти наверняка знаете: CVE-2026-31431 (CopyFail), CVE-2026-34197 (RCE в ActiveMQ), CVE-2026-45185 (DeadLetter, RCE в EXIM) и др. Затем для них попытались генерировать патчи — 6080 (!) раз. Результаты: 🥳 26% — патч реально устраняет уязвимость, не меняя поведение приложения; 🤨 20% — патч работает, но значительно меняет поведение приложения (например меняя политику с allow by default на deny); 🗿 в оставшихся ~53% случаев патч либо не устранял уязвимость, либо вносил новую, либо и то, и другое одновременно. При этом полный цикл генерации одного патча на GPT 5.5 и Opus 4.8 обходится в 2-3 доллара, без учёта того нюанса, что попытку надо будет повторять многократно, а результаты всё равно должен проверять квалифицированный инженер. В отчёте есть забавный комментарий Антропиков, который сводится к тому, что патчи нужно тестировать в автоматическом режиме. Вроде и не поспоришь, но практические результаты этого глубоко автоматического подхода хорошо видны каждый второй вторник месяца, а вернее спустя 2-3 дня после него. Ну и конечно в дни, когда не работает GitHub.
Открыть в MAX- Просмотры
- 487
- ER
- 2,3%
- Реакции
- 11