llms.txt и llms-full.txt: что это и нужно ли вашему сайту
llms.txt — Markdown-файл в корне сайта: название, короткое описание и список главных страниц со ссылками. Его предложил Джереми Ховард в сентябре 2024 года. Файл дешёвый, но ждать от него многого не стоит.
Зачем
- Агенту проще прочитать короткий список главного, чем обходить меню и подвал.
- Реальных запросов к файлу мало. По данным Ahrefs, 97% сайтов с валидным llms.txt не получили к нему ни одного запроса за месяц, а Google в поиске его не использует. Поэтому в нашем балле llms.txt весит 3 из 100.
- Для документации API файл полезнее: агенты для разработки читают его заметно чаще.
Что сделать
- 1
Соберите файл по формату
H1 с названием, цитата с описанием в одно-два предложения, разделы H2 со ссылками и пояснениями. Ссылайтесь на .md-версии страниц, если они есть.
# Название продукта > Что это и для кого — в одном-двух предложениях. ## Продукт - [Возможности](https://example.ru/features.md): что умеет - [Тарифы](https://example.ru/prices.md): цены и лимиты ## Разработчикам - [API](https://dev.example.ru/): REST API, авторизация по токену - 2
llms-full.txt — по ситуации
Полный текст сайта одним файлом нужен документации. Маркетинговому сайту достаточно редиректа /llms-full.txt на Markdown-версию главной — мы засчитываем и такой вариант.
- 3
Отдавайте файл, а не HTML
Частая ошибка — SPA отдаёт на /llms.txt свою HTML-заглушку с кодом 200. Для агента это не файл.
curl -sI https://example.ru/llms.txt | grep -i content-type
Что проверяет сканер
Есть llms.txt
Короткий файл для языковых моделей: что это за продукт и где лежат главные страницы.
Есть llms-full.txt
Полный текст сайта или документации одним файлом. Агент читает его за один запрос.
llms.txt оформлен так, что по нему можно ориентироваться
Заголовок, разделы и хотя бы пять ссылок. Файл из одной строки агенту ничем не помогает.
Проверьте свой сайт
Вставьте адрес и получите такой же разбор за полминуты.
Источники
Другие гайды
- Сайт открывается агенту: без капчи, без JavaScript, с честным 404
- robots.txt для нейросетей: YandexAdditional, GPTBot, ClaudeBot и Content-Signal
- Markdown для ИИ-агентов: .md-версии страниц и Accept: text/markdown
- sitemap, метаданные и JSON-LD: как агент понимает, кто вы
- API и MCP для агентов: OpenAPI, MCP Server Card, OAuth discovery