Исследование: обвязка кодинг-агента не даёт прироста качества, но меняет цену до 3 раз

Учёные из Шаньдунского университета сравнили Claude Code, OpenCode и mini-SWE-agent на одной модели и 45 задачах SWE-bench Verified. Разница в результатах укладывается в шум, но стоимость задачи различалась до 3 раз: 1,81 юаня у Claude Code против 0,56 у OpenCode на GLM-5.3-Flash.

• Первый вызов Claude Code отправляет 17 134 токена, mini-SWE-agent — 1382
• На 45 сложных задачах смена обвязки перевернула около 13% результатов
• OpenCode отставал до 9 пунктов из-за отсутствия повторного запроса при обрыве
• На DeepSeek-V4-Flash mini-SWE-agent сделал 141 вызов модели против 104 у Claude Code