Исследование оценило эффективность и стоимость ИИ-агентов для кодинга

Контролируемое исследование показало, что переключение между популярными программными оболочками для ИИ-агентов практически не увеличивает показатели успешного выполнения задач по сравнению с повторным запуском той же конфигурации. Авторы проанализировали такие среды, как Claude Code, OpenCode и mini-SWE-agent.
При этом финансовые затраты на выполнение одной задачи могут возрастать в три раза. Главной причиной удорожания эксперты называют системный промпт, который повторно отправляется моделью на каждом новом шаге работы агента.
Полученные данные демонстрируют разницу между расходами на инфраструктуру и реальным приростом производительности инструментов разработки. Разработчикам и компаниям стоит учитывать избыточные расходы на передачу контекста при выборе программных оболочек для автоматизации программирования.



