Что такое llms.txt и зачем он нужен вашему сайту
llms.txt — это robots.txt эпохи ИИ: текстовая карта, которая объясняет моделям, что представляет собой ваш сайт и где искать по-настоящему полезный контент. Разбираемся, что это такое и как его добавить.
ИИ-ассистенты всё чаще отвечают на вопросы, читая ваш сайт напрямую. Но ваши страницы созданы для браузеров — с навигацией, скриптами и баннерами о cookie, — а не для модели, которая пытается докопаться до сути. llms.txt решает эту проблему: один текстовый файл в корне сайта, который понятным языком описывает, что представляет собой ваш сайт и где находится важный контент.
Как это работает
Вы размещаете файл по адресу /llms.txt. Он начинается с заголовка H1 (название сайта), краткого описания, а затем — с подобранных вручную ссылок на страницы, которые действительно важны: документацию, ключевые статьи, страницы продукта. Некоторые сайты дополнительно публикуют llms-full.txt с полным текстом внутри, чтобы модели вообще не приходилось что-либо обходить.
# Acme Docs
> The developer platform for X.
## Guides
- Quickstart: https://acme.dev/docs/quickstart
- API reference: https://acme.dev/docs/apiПочему это важно для ранжирования
- Модели ссылаются на источники, которые можно легко разобрать, — llms.txt делает ваши лучшие страницы понятными для них.
- Он дополняет robots.txt и sitemap.xml, а не заменяет их.
- Это дешёвая страховка: несколько строк, которые определяют, как ИИ будет вас описывать.
Сложность в том, чтобы поддерживать его в актуальном состоянии по мере изменения сайта. Именно эту рутину автоматизирует навык «AI Crawlability» — он читает ваши реальные маршруты и записывает llms.txt, llms-full.txt и связанную карту сайта прямо в ваш репозиторий.