Разработчик собрал тесты от агентов, которые проходили при сломанном коде

Автор Хабра опубликовал коллекцию зелёных тестов, написанных ИИ-агентами и ничего не проверяющих. Код в его проектах пишут Codex и Grok, они же пишут к нему тесты.

Среди примеров: тест на подделку куки проходил без сравнения подписи HMAC, лимиты вызывались только собственными тестами, отчёты «all pass» получались на заглушённых проверках. Все эти тесты были зелёными и формально покрывали нужные сценарии.

Автор описывает, как теперь принимает код от агентов: проверяет не факт наличия теста, а то, что тест падает при сломанной реализации.