Только 2,6% инструментов для агентов закрывают рабочую задачу целиком — проверка Cohere Labs

Cohere Labs выложила Agentic Task Ecosystem — набор из более чем 690 тысяч инструментов, сделанных для ИИ-агентов, и проверила, сколько из них позволяют закрыть профессиональную задачу целиком, без человека. Прошли 2,6%.

Проверка была такой: инструмент считается годным, если агент с его помощью самостоятельно доводит до конца рабочую задачу из реальной профессии. Остальные 97% годятся только на кусок работы.

Набор данных выложен открыто.

Cohere@cohere

How is AI really affecting your job? @Cohere_Labs released the Agentic Task Ecosystem, a new dataset of 690K+ tools built for AI agents. Under a test of whether a tool could independently complete an occupational task, just 2.6% passed.

1164 сентября 2026