Как Anthropic проверяет код с помощью ИИ

Компания Anthropic рассказала об организации процесса код-ревью, в котором активно используется искусственный интеллект. По данным компании, примерно 90% кода для Claude Code пишет сам ИИ.

С июня по сентябрь объем смёрженных пулл-реквестов увеличился более чем вдвое, а доля откатов сократилась более чем на 40%. Процесс проверки включает автоматические тесты, сборку и работу независимых агентов, ищущих ошибки. В зависимости от уровня риска требуется одобрение одного или двух проверяющих, либо изменения принимаются автоматически.

Новые функции внедряются постепенно с помощью feature flags для быстрого отката в случае сбоев. Опыт прошлых инцидентов преобразуется в ежедневные тесты для совершенствования ИИ-агентов.

Главным критерием эффективности компания считает баланс: ускорение проверки не должно приводить к росту времени на устранение инцидентов в продакшене.