ИИ-боты почти не запрашивают файл llms.txt, показала проверка логов

Файл llms.txt с 2024 года предлагают класть в корень сайта: считается, что языковые модели прочитают его вместо разбора вёрстки. Автор на Хабре написал для файла генератор и валидатор, отладив их на 64 тестах.

Параллельно он посмотрел логи обращений: запросов к llms.txt от ИИ-обходчиков почти нет, они продолжают читать обычные страницы. Файл не мешает, но и не меняет то, как боты видят сайт.