Что такое llms.txt и нужен ли этот файл сайту

llms.txt — это текстовый файл в формате Markdown, который даёт ИИ-агенту краткое описание сайта и направляет его к приоритетным материалам. Он не управляет доступом краулеров, не заменяет robots.txt и sitemap.xml, не гарантирует упоминание компании в ответах нейросетей и не улучшает позиции в Google.

Что представляет собой llms.txt

llms.txt — предложенная сообществом конвенция, а не утверждённый веб-стандарт уровня протокола Robots Exclusion Protocol. Идею опубликовал Джереми Ховард в сентябре 2024 года. В августе 2026 года появилась вторая версия предложения, учитывающая практику первых двух лет.

Назначение файла — дать языковой модели компактную карту полезного содержимого. Владелец сайта коротко объясняет, что представляет собой ресурс, и перечисляет страницы с документацией, услугами, правилами, инструкциями или другими первичными материалами. Агенту не приходится начинать с HTML, в котором к основному тексту добавлены меню, служебные блоки и скрипты.

Файл чаще всего размещают по адресу вида example.ru/llms.txt. Актуальная версия предложения также допускает llms.txt внутри раздела: например, /docs/llms.txt может описывать только документацию. Если для URL подходят несколько таких файлов, агенту предлагается использовать наиболее близкий по структуре.

Как устроен файл

Текущая спецификация использует Markdown. Единственный обязательный элемент — заголовок H1 с названием проекта или сайта. Далее можно добавить краткое описание в цитате, поясняющий текст и разделы H2 со списками ссылок. У каждой ссылки желательно указать понятное название и коротко объяснить, что находится на странице.

Сокращённый пример для сайта компании может выглядеть так:

# Depweb

> Разработка web-сервисов, сайтов и корпоративных систем, SEO- и GEO-продвижение.

## Основные направления

- [Web-разработка](https://depweb.ru/web-development): CRM, B2B-порталы, SaaS, личные кабинеты и MVP
- [SEO и GEO-продвижение](https://depweb.ru/seo-promotion): поисковая оптимизация и работа с видимостью в ИИ-ответах

## Материалы

- [Блог](https://depweb.ru/blog): статьи о разработке, продуктах и продвижении

Это не альтернативная главная страница и не место для рекламного текста. Описание должно помогать определить тематику ресурса, а ссылки — вести к актуальным публичным страницам. Полезно выбирать абсолютные канонические URL и избегать адресов с фильтрами, метками, дублирующими параметрами и временным содержимым.

Вторая версия предложения разрешает дополнительно связать HTML-страницу с её Markdown-вариантом через rel="alternate", а со связанным llms.txt — через rel="describedby". Для обычного корпоративного сайта такая настройка необязательна; она полезнее большому порталу документации.

Некоторые платформы также создают llms-full.txt с полными текстами материалов. Актуальное предложение llms.txt v2 не определяет его как обязательную часть формата, а для обычного сайта большой экспорт чаще усложняет обновление.

Чем llms.txt отличается от robots.txt и sitemap.xml

У трёх файлов разные задачи. Схожее расширение .txt и размещение в корне сайта не делают их взаимозаменяемыми.

Доступ конкретного бота настраивают в robots.txt. Например, OpenAI указывает OAI-SearchBot для автоматического краулинга, связанного с поиском ChatGPT, а GPTBot — для контента, который может использоваться при обучении моделей. llms.txt эти правила не меняет.

Включение URL в sitemap.xml тоже служит подсказкой, а не гарантирует индексацию. Поэтому техническая оптимизация сайта по-прежнему начинается с кодов ответа, доступности содержимого, канонических адресов, перелинковки, robots.txt и карты сайта. llms.txt добавляют поверх этого фундамента.

Используют ли llms.txt поисковые системы и ИИ-агенты

По состоянию на сентябрь 2026 года ответ зависит от продукта. Google Search официально сообщает, что не использует llms.txt: файл не помогает и не мешает видимости, позициям или появлению страниц в генеративных функциях поиска. Отдельно Chrome Lighthouse проверяет llms.txt в группе аудитов для агентного браузинга, но считает отсутствие файла допустимым. Противоречия здесь нет: Lighthouse оценивает удобство сайта для браузерных ИИ-агентов, а не сигналы ранжирования Google Search.

Сайты документации OpenAI, Anthropic и Gemini сами публикуют llms.txt. Формат удобен для навигации по большим техническим базам, но это не доказывает, что краулер компании автоматически запрашивает его на каждом домене. В описании краулеров OpenAI видимость в поиске ChatGPT связана с доступом OAI-SearchBot через robots.txt; отдельная роль llms.txt как сигнала там не заявлена.

В исследовании Ahrefs, обновлённом в июне 2026 года, файл присутствовал у 28% из 137 000 сайтов, подключённых к аналитике компании. Выборка смещена в сторону технически подготовленных владельцев, а 97% доменов с корректным llms.txt не получили ни одного запроса к нему за май. Распространение формата и его фактическое чтение — разные показатели.

Предложение v2 появилось уже после этого замера, поэтому статус ещё может измениться. Пока корректнее считать llms.txt интерфейсом для отдельных ИИ-агентов, а не универсальным каналом продвижения в нейровыдаче.

Нужен ли llms.txt вашему сайту

Решение зависит от устройства контента и сценариев использования. Чем труднее найти первичный ответ внутри сайта и чем чаще к материалам обращаются ИИ-агенты, тем полезнее компактная карта.

Если качественный llms.txt можно собрать из готовых материалов и автоматически обновлять, его внедрение имеет смысл как недорогой эксперимент. Если ради файла придётся вручную поддерживать сотни ссылок или отложить исправление технических ошибок, приоритет выбран неверно.

В рамках SEO- и GEO-продвижения мы рассматриваем llms.txt как вспомогательный инструмент. Сначала проверяем доступность важных страниц, согласованность информации о компании и качество первичных материалов. Файл не исправит противоречивые цены, устаревшие услуги или заблокированные URL.

Что включать в llms.txt

Хороший файл отвечает на два вопроса: что это за сайт и где находится надёжная информация по основным темам. Для коммерческого ресурса обычно достаточно нескольких логичных разделов и ограниченного набора ссылок.

В llms.txt можно включить:

• короткое фактическое описание компании, продукта или проекта без слоганов;
• страницы основных услуг, категорий или возможностей продукта;
• документацию, инструкции, справочники и ответы на важные вопросы;
• условия оплаты, доставки, возврата, гарантии и другие правила, если они влияют на выбор;
• ключевые кейсы или исследования с проверяемыми данными;
• страницу о компании, контакты и реквизиты, когда они нужны для идентификации организации.

Не нужно переносить в файл весь sitemap.xml. Исключите результаты внутреннего поиска, пагинацию, технические URL, дубли, устаревшие публикации и страницы без самостоятельной ценности. Закрытые документы, служебные инструкции, адреса административных панелей и любую информацию, которую нельзя показывать всем посетителям, публиковать нельзя: llms.txt доступен без авторизации.

Краткое описание ссылки полезнее набора ключевых слов: «условия возврата товара, сроки и исключения» даёт больше контекста, чем «возврат, магазин, купить». Содержание файла должно совпадать со страницами, иначе появится ещё один источник противоречий.

Как создать и проверить файл

Для небольшого сайта llms.txt можно подготовить вручную. На портале с часто меняющейся документацией лучше генерировать его из CMS или репозитория, чтобы новые и удалённые страницы синхронизировались автоматически.

1. 1Определите область. Решите, нужен один файл для всего домена или отдельный файл для /docs/, базы знаний либо другого раздела.
2. 2Отберите первичные страницы. Проверьте их актуальность, публичную доступность, канонические URL и код ответа 200 OK.
3. 3Составьте Markdown. Добавьте H1, короткое описание и тематические группы ссылок с пояснениями. Не перегружайте файл подробностями, которые уже есть на целевых страницах.
4. 4Опубликуйте файл. Для сайта целиком используйте /llms.txt, для самостоятельного раздела допустим путь вида /docs/llms.txt. Текст должен открываться без авторизации и отображаться без ошибок кодировки.
5. 5Проверьте техническую выдачу. Убедитесь, что сервер возвращает файл, а не HTML-страницу ошибки, не создаёт длинную цепочку редиректов и не блокирует связанные URL в robots.txt.
6. 6Тестируйте и обновляйте. Передайте файл ИИ-агенту как начальную точку и задайте вопросы по содержимому сайта. После смены структуры, услуг, документации или правил обновите ссылки и описания.

Результат оценивают по запросам к /llms.txt в серверных логах, точности ответов в контролируемом тесте и упоминаниям сайта в релевантных ИИ-сервисах. Нельзя приписывать динамику одному файлу, если одновременно менялись контент, перелинковка и доступность для краулеров.

Ошибки при внедрении

Основная ошибка — ждать от технического файла результата, который зависит от качества всего сайта и внешних источников. Есть и более конкретные проблемы:

• файл называют новым фактором ранжирования или обещают попадание в ответы ИИ;
• в llms.txt копируют все URL из карты сайта без отбора и пояснений;
• описание компании расходится с главной страницей, реквизитами или актуальным перечнем услуг;
• ссылки ведут на редиректы, ошибки 404, закрытые или неканонические страницы;
• генератор публикует внутренние адреса, черновики либо конфиденциальные сведения;
• файл создают один раз и не обновляют после изменения структуры сайта.

Автоматическая генерация экономит время, но не заменяет редакционный отбор. Плагин может корректно собрать доступные URL и при этом выбрать второстепенные страницы, добавить дубли или оставить слишком общие описания. Перед публикацией результат нужно прочитать как обычный документ.

Частые вопросы

Влияет ли llms.txt на SEO и позиции сайта?

Подтверждённого положительного влияния на ранжирование нет. Google Search прямо указывает, что игнорирует llms.txt и не использует его в обычной или генеративной выдаче. Файл может быть полезен отдельным ИИ-агентам как навигация, но это другая задача.

Можно ли запретить обучение ИИ через llms.txt?

Нет. Формат не содержит правил доступа и не выражает согласие или запрет на обучение модели. Для поддерживаемых краулеров используют отдельные группы User-agent в robots.txt, а конфиденциальные материалы защищают авторизацией. Один robots.txt тоже нельзя считать механизмом безопасности.

Обязательно ли размещать файл в корне сайта?

Для обзора всего домена используют /llms.txt. Спецификация v2 разрешает размещение на подуровне, например /docs/llms.txt, если файл относится к страницам внутри этого пути.

Как часто обновлять llms.txt?

Фиксированного графика нет. Обновление требуется после появления или удаления важных разделов, смены услуг, условий, документации и канонических URL. При частых изменениях надёжнее автоматическая генерация с редакционными правилами отбора.

Нужен ли отдельный llms-full.txt?

Для большинства корпоративных и контентных сайтов — нет. Большой файл сложнее поддерживать, он быстрее устаревает и может выходить за разумный объём контекста. Сначала достаточно компактного llms.txt; полный экспорт оправдан в отдельных сценариях работы с документацией.

Вывод: создавать llms.txt или нет

llms.txt нужен не «для SEO вообще», а для конкретного сценария: помочь ИИ-агенту быстро найти отобранные материалы и понять структуру сайта. Наибольшая польза ожидается у документации, баз знаний и крупных экспертных ресурсов. Для корпоративного сайта это допустимый малозатратный эксперимент, если основные страницы уже качественно подготовлены, а файл можно поддерживать без ручной рутины.

Не стоит внедрять его вместо robots.txt, sitemap.xml, нормальной индексации, связной архитектуры и точного контента. Если выбирать между исправлением битых ссылок, обновлением страниц услуг и созданием llms.txt, первые две задачи принесут более предсказуемый результат. Если техническая база в порядке, компактный файл не мешает и может упростить работу тем агентам, которые умеют его использовать. Нужна помощь с технической базой и видимостью в ИИ-ответах — расскажите о задаче.