llms.txt: что это, нужен ли и как настроить

Что такое llms.txt

llms.txt — это предложенная спецификация Markdown-файла, который размещают на сайте. Он содержит краткое описание проекта, важный контекст и ссылки на ключевые материалы.

Предложение создал Jeremy Howard в сентябре 2024 года. Текущая версия спецификации — v2, обновлённая 10 августа 2026 года. Важно: это именно предложение по стандартизации, а не обязательный веб-стандарт.

Если упростить, llms.txt — это короткий навигатор для AI-агента:

вот что это за сайт, какие материалы на нём самые важные и где найти подробную информацию.

Файл не обязан содержать всю информацию сайта. Наоборот, его задача — дать сжатый контекст и ссылки на материалы, которые агент загрузит при необходимости.

Какую проблему решает llms.txt

Обычные HTML-страницы созданы для людей и перегружены навигацией, кодом и рекламой. llms.txt даёт AI-агенту компактную точку входа: краткое описание сайта и структурированный список важных ресурсов. Детали агент загружает по ссылкам только тогда, когда это действительно нужно.

Однако это не гарантия: наличие файла не означает, что каждый AI-сервис его прочитает или использует.

Как устроен llms.txt

Обязателен только один элемент — заголовок H1 с названием сайта или проекта. Остальные элементы рекомендованы и идут в таком порядке:

• # H1 — название проекта (обязательно).
• > blockquote — краткое описание и ключевой контекст.
• Произвольные абзацы или списки (без заголовков) — дополнительные пояснения, как понимать материалы.
• ## H2 — тематические секции со списками ссылок в формате - [Название](URL): краткое описание ресурса.
• ## Optional — секция для второстепенных материалов, которые AI-агент может пропустить, если нужно сэкономить контекст.

Где размещается llms.txt

Самый распространённый вариант — в корне домена:

https://example.com/llms.txt

Но спецификация v2 позволяет размещать файл и в отдельном подразделе сайта:

https://example.com/docs/llms.txt

В таком случае файл описывает URL в пределах своего пути. Если к одному URL подходит несколько файлов, агент должен использовать самый специфичный. Это особенно удобно для больших сайтов с независимыми разделами: документацией, базой знаний, отдельным продуктом.

Как llms.txt связан с LLM и AI-поиском

llms.txt задуман прежде всего для сценариев inference — когда AI-агенту во время выполнения запроса нужно сориентироваться на сайте и найти релевантные материалы. Он служит навигатором, а не заменой robots.txt для управления доступом краулеров.

Используют ли llms.txt ChatGPT, Claude, Gemini и другие системы

Формат остаётся предложенной инициативой, а не обязательным стандартом. Ни один из крупных AI-сервисов не подтвердил, что читает llms.txt при ответах пользователям.

Исследование Ahrefs (июнь 2026 года) охватило 137 210 доменов: llms.txt был у 28% из них. Среди примерно 38 тыс. сайтов с файлом 97% не получили ни одного запроса к нему за май 2026 года. 96% запросов, которые всё же поступали, делали боты. При этом 77% этих ботов вообще не принадлежали AI-сервисам — это SEO-аудиторы, сканеры технологий и другие краулеры. На AI retrieval bots, которые ищут материалы для ответов в AI-поиске (OAI-SearchBot, PerplexityBot), пришлось лишь 1,1% запросов от ботов.

Исследование не доказывает, что файл никогда не используется, но показывает: пока его читают далеко не все.

Итак, llms.txt — опциональный навигационный формат для совместимых агентов, а не гарантированный канал связи со всеми AI-системами.

llms.txt vs robots.txt vs sitemap.xml

Эти три файла решают разные задачи.

Заменяет ли llms.txt другие технические файлы? Нет. llms.txt не устанавливает правил доступа и не заменяет другие файлы:

• robots.txt — задаёт правила сканирования URL для автоматизированных краулеров.
• sitemap.xml — содержит перечень URL, которые владелец сайта рекомендует поисковым системам находить и сканировать.
• llms.txt — даёт только отобранную структуру и контекст для AI.

Обычно все три файла лежат в корне сайта: /robots.txt, /sitemap.xml, /llms.txt. Но это не обязательно: карта сайта может иметь другой адрес (его указывают в robots.txt), а llms.txt — лежать в подразделе.

Влияет ли llms.txt на SEO и AI-видимость

llms.txt не является фактором ранжирования. Google прямо указывает, что такие файлы не нужны для появления в Google Search, в том числе в его генеративных функциях: Google Search их игнорирует. Поэтому llms.txt не улучшает и не ухудшает видимость или позиции сайта в Google.

Само по себе создание файла:

• не гарантирует появления в ChatGPT, Perplexity или Google;
• не заменяет качественный контент, техническое SEO и фундаментальные практики оптимизации сайта.

Кому стоит создавать llms.txt

Файл полезнее всего для проектов с большим объёмом структурированной и технической информации:

• Документация и API. Основной сценарий спецификации: coding-агенты быстро находят нужные туториалы и справочники.
• SaaS и базы знаний. Помогает AI сориентироваться в функциях, тарифах, инструкциях и интеграциях.
• Крупные корпоративные и исследовательские сайты. Служит сжатым указателем среди сотен страниц экспертного контента.

Для небольшого сайта из нескольких страниц практическая польза от отдельного навигационного файла невелика. Создавать llms.txt только ради SEO не имеет смысла, потому что Google не воспринимает его как сигнал для ранжирования.

Как правильно создать llms.txt

Создание файла не требует сложной разметки. Главное — выбрать действительно важные материалы и подать их компактно.

1. Определите ключевые страницы

В файл можно включить:

• основные страницы продуктов или услуг;
• документацию;
• API Reference;
• инструкции;
• базу знаний;
• важные исследования;
• экспертные гайды;
• страницы с политиками или другой информацией, необходимой для понимания продукта.

Не нужно добавлять каждый URL сайта.

2. Добавьте название и краткий контекст

Базовый файл может выглядеть так:

# Название сайта
> Краткое описание компании, продукта или проекта и контекст, необходимый для понимания приведённых материалов.
## Документация
- [Начало работы](https://example.com/docs/start): инструкция для новых пользователей.
- [API Reference](https://example.com/docs/api): полное описание API и параметров.
## Продукты
- [Продукт 1](https://example.com/product-1): описание возможностей и сценариев использования.
- [Продукт 2](https://example.com/product-2): функции, ограничения и условия использования.
## Гайды
- [Руководство по настройке](https://example.com/guide): пошаговая инструкция.

По спецификации обязателен только H1. Blockquote и секции со ссылками — рекомендованные элементы структуры.

3. Добавляйте краткие описания к ссылкам

Лучше не оставлять список URL без контекста. Сравните:

- [Документация](https://example.com/docs)

и:

- [Документация](https://example.com/docs): полное описание настройки, API и основных сценариев использования.

Второй вариант даёт агенту больше информации о том, что именно он найдёт по ссылке.

4. Не превращайте llms.txt в копию сайта

Файл должен быть компактным указателем, а не большой статьёй. Подробные пояснения, характеристики продуктов, инструкции и другие материалы лучше оставлять на отдельных страницах, на которые ссылается llms.txt.

5. По возможности создавайте Markdown-версии страниц

Спецификация v2 предлагает не ограничиваться самим llms.txt, а давать AI-агентам чистые Markdown-версии страниц — по тому же адресу с расширением .md. Например, для страницы:

https://example.com/docs/api.html

Markdown-версия может находиться по адресу:

https://example.com/docs/api.html.md или https://example.com/docs/api.md

Чтобы агенты находили такие версии, спецификация рекомендует стандартные связи:

<link rel="alternate" type="text/markdown" href="/docs/api.md">
<link rel="describedby" href="/docs/llms.txt">

Первая указывает на Markdown-версию страницы, вторая — на llms.txt, который её описывает. Эти связи можно передавать как HTML-теги <link> или как HTTP-заголовок Link — это удобно, если не хочется менять шаблоны страниц.

6. Разместите файл на сайте

Для всего сайта:

https://example.com/llms.txt

Для отдельного раздела:

https://example.com/docs/llms.txt

После публикации проверьте, что файл открывается без авторизации, возвращает код ответа 200, а все ссылки внутри него работают.

7. Регулярно обновляйте файл

Если меняются продукты, документация, URL или структура сайта, эти изменения нужно внести и в llms.txt. Устаревший список ссылок менее полезен, чем актуальный компактный указатель.

Как настроить llms.txt в WordPress и других CMS

В WordPress llms.txt можно создать вручную и загрузить в корень сайта или сгенерировать плагином: генератор файла есть, например, в Yoast SEO и AIOSEO. Wix создаёт llms.txt автоматически для каждого сайта, а платформы документации — для опубликованной документации.

После автоматического создания обязательно проверьте результат. Генераторы часто добавляют в файл все страницы, записи и категории подряд — а это именно та ошибка, от которой предостерегает спецификация. Уберите служебные и второстепенные URL и оставьте ключевые. Для небольших сайтов ручного создания файла обычно достаточно.

Пример хорошего llms.txt

Для условного SaaS-сервиса файл может выглядеть так:

Секция Optional здесь содержит второстепенный контент. Это конвенция спецификации, а не команда, которая заставляет AI-систему определённым образом обрабатывать файл.

Что такое llms-full.txt

llms-full.txt часто упоминают вместе с llms.txt, но это разные вещи.

Спецификация llms.txt не описывает llms-full.txt. Этот формат используют отдельные платформы документации: они собирают в такой файл полный текст документации одним документом.

Поэтому наличие llms-full.txt на конкретном сайте — решение этой платформы, а не требование для всех сайтов.

Типичные ошибки при создании llms.txt

Добавлять все URL сайта

llms.txt не должен превращаться во вторую sitemap.xml. Лучше выбрать материалы, которые действительно помогают понять продукт, услуги или тематику сайта.

Дублировать sitemap.xml

Цель файла — не перечислить все страницы, а дать структурированный и отобранный контекст.

Использовать llms.txt вместо robots.txt

llms.txt не управляет доступом краулеров. Для правил сканирования используют robots.txt.

Оставлять битые или устаревшие ссылки

Если URL изменился, его нужно обновить и в llms.txt. Периодическая проверка ссылок — часть нормального обслуживания файла.

Ожидать автоматического роста трафика или AI-упоминаний

Наличие llms.txt не гарантирует, что AI-система процитирует сайт, упомянет бренд или приведёт дополнительный трафик. Для Google Search это подтверждено прямо: Google Search игнорирует llms.txt.

Как llms.txt вписывается в GEO

GEO (Generative Engine Optimization) — подходы к оптимизации видимости контента в генеративных поисковых и AI-системах. Чем GEO отличается от классического SEO, мы разбирали отдельно. llms.txt можно рассматривать как один из дополнительных технических элементов такой работы, но он не заменяет фундаментальное SEO, качественный контент и техническую доступность сайта. Google для генеративных функций Search советует и дальше применять базовые SEO-практики, а не искать отдельные «AI-хаки».

Почему одного llms.txt недостаточно

Файл можно сравнить с оглавлением книги: он помогает понять структуру, но не заменяет сам материал. Если на сайте нет качественной документации, полезных страниц или актуальной информации, список ссылок сам по себе не сделает контент ценнее для пользователей или AI-систем.

Что важнее самого файла

Для сайта, который хочет быть заметным в поиске и AI-сервисах, базовыми остаются:

• полезный и актуальный контент;
• понятная структура сайта;
• внутренние ссылки;
• доступность важного контента для сканирования;
• корректная индексация;
• понятный текстовый контент;
• внешние источники и упоминания, если они естественно возникают в соответствующей тематике.

llms.txt может дополнять эту систему, но сам по себе не определяет, процитирует ли страницу или упомянет ли бренд конкретная AI-система. Что реально влияет на появление в ответах ChatGPT, Perplexity и других AI-систем, мы рассказывали в отдельной статье.