Выбор обвязки меняет стоимость успешного запуска агента в разы

Обвязка — это код вокруг модели: как формулируется задача, какие инструменты доступны, как разбирается ответ. В свежей работе, которую пересказал Элвис Саравия из DAIR.ai, посчитали стоимость одного успешно решённого примера при разных обвязках вокруг одной и той же модели.

Разброс вышел от 5 до 30 раз. Отдельно досталось общим формулировкам: указания вроде «продумай глубоко» или «сравни несколько подходов» кратно увеличивают число токенов на рассуждение, но точность не улучшают.

elvis@omarsar0

Picking the right agent harness is now a crucial skill for any AI engineer. Imagine using the same model, same task, and same prompt. Now move it between two agent harnesses and the cost per success can swing by 5 to 30x. This benchmark measured this across six large reasoning https://t.co/Q43neoz6pz

48 ♡

4 августа 2026