Сейчас владельцы интернет-магазина или сайта услуг все чаще слышат одну и ту же фразу от клиентов: «я нашел вас через ChatGPT» или «мне вас Алиса посоветовала». Люди постепенно переходят от привычного поиска со списком из десяти ссылок к диалогу с нейросетью, которая сразу дает готовый ответ и называет всего один-два источника.
На этом фоне в интернете появился новый термин — llms.txt. Одни называют его новым robots.txt для нейросетей, другие обещают рост цитируемости бренда в ответах ИИ, третьи считают файл бесполезной модой. Разберемся с фактами: что это за файл, кому он действительно нужен и как его настроить.
Что такое llms.txt простыми словами
llms.txt — это обычный текстовый файл в формате Markdown. Он размещается в корневом каталоге сайта и открывается по адресу:
https://example.ru/llms.txt
Markdown — способ оформления обычного текста с помощью простых символов. Например, знак # обозначает заголовок, а конструкция [название](ссылка) создает ссылку.
На заметкуЗадача llms.txt — коротко объяснить языковой модели, чем занимается компания, какие страницы сайта считать главными и куда идти за подробностями. Поэтому в файле обычно указывают:
- краткое описание компании или проекта;
- основные товары и услуги;
- ключевые разделы сайта;
- страницы с документацией;
- статьи и инструкции;
- кейсы;
- Сведения о компании;
- ссылки на страницы с ценами, условиями работы и контактами.
Чем llms.txt отличается от robots.txt и sitemap.xml
Эти файлы часто путают, хотя у них разные задачи.
|
Файл |
Назначение |
Кто использует |
|
robots.txt |
Содержит правила для поисковых роботов и других автоматических программ, которые посещают сайт |
Поисковые и AI-краулеры |
|
sitemap.xml |
Перечисляет URL страниц, которые нужно передать поисковым системам |
Поисковые системы для индексации |
|
llms.txt |
Кратко описывает сайт и выделяет страницы, которые могут понадобиться языковой модели |
Языковые модели и AI-агенты |
|
llms-full.txt |
Расширенный файл с большим объемом справочной информации, который используют некоторые проекты |
Языковые модели и AI-агенты |
robots.txt отвечает на вопрос: какие разделы сайта можно посещать автоматической программе.
sitemap.xml показывает, какие страницы существуют и доступны для обхода.
llms.txt объясняет содержание сайта и расставляет приоритеты среди страниц. llms-full.txt — расширенная версия файла с более подробным описанием сайта.
На заметку- Ссылку на llms.txt не нужно добавлять вместо карты сайта или файла с правилами для роботов. Эти документы выполняют разные функции и могут использоваться одновременно.
- Большинству сайтов достаточно файла llms.txt, а llms-full.txt используют только при необходимости предоставить языковым моделям больше данных.
Что llms.txt может дать бизнесу
llms.txt — вспомогательный файл с кратким описанием компании, ее услуг и приоритетных страниц сайта. Практическая польза зависит от того, использует ли конкретная ИИ-система этот формат.
Файл особенно уместен на сайтах с большим количеством услуг, документацией, базой знаний, каталогом товаров или справочными материалами. Если конкретная система не обращается к llms.txt, само размещение файла не меняет ее работу. Поэтому его используют как дополнительный элемент вместе с технической оптимизацией, актуальным содержанием и подробными страницами услуг.
На заметкуКак llms.txt соотносится с Яндексом, Google и ИИ-системами
До даты выпуска этой статьи Яндекс не публиковал отдельной инструкции по работе с llms.txt, поэтому влияние файла на позиции в поиске пока не подтверждено. При этом файл можно использовать как дополнительный элемент подготовки сайта к работе с ИИ-системами вместе с robots.txt, Sitemap, понятной структурой и качественным контентом.
Google прямо указал: сайту не нужно создавать новые машиночитаемые файлы, AI-текстовые файлы, разметку или Markdown, чтобы появиться в Google Search — поиск сам их не использует. Наличие файла не дает преимуществ в Google, однако может быть полезно для других сервисов, которые работают с таким форматом.
ИИ-системы используют llms.txt по-разному. Anthropic, Perplexity и Сбер публикуют такие файлы для собственной документации и помощи ИИ-инструментам. Единого правила для всех сервисов пока нет, поэтому llms.txt рассматривают как один из элементов подготовки сайта к генеративному поиску и оптимизации под ИИ.
Кому подойдет llms.txt
Смысл в создании файла есть у сайтов, где пользователю или автоматической системе нужно быстро разобраться в большом объеме информации.
llms.txt имеет смысл делать, если сайт уже:
- обладает экспертным контентом — статьями, кейсами, документацией;
- работает в нише, где важна точность описания услуг: медицина, юриспруденция, финансы, IT;
- имеет сложную структуру с десятками или сотнями страниц;
- системно занимается видимостью в ИИ-поиске и готов поддерживать файл в актуальном состоянии.
Для небольшого сайта из нескольких страниц файл тоже можно создать, если компания хочет четко описать свои услуги и территорию работы. При этом содержание llms.txt получится коротким, а в будущем его можно будет расширять по мере появления новой информации.
Внедрение llms.txt можно отложить, если:
- на сайте отсутствуют страницы с описанием услуг;
- страницы содержат устаревшие цены и условия сотрудничества, услуги описаны общими фразами;
- не настроена базовая индексация — важные страницы закрыты в robots.txt или не проиндексированы;
- нет файла sitemap.xml;
- сайт технически проблемный: медленно грузится, есть дубли страниц, слабое коммерческое предложение.
В таком случае в первую очередь стоит закрыть базовые задачи SEO — структуру, контент, индексацию, — а уже потом переходить к дополнительным элементам вроде llms.txt.
Перед настройкой llms.txt проведите бесплатный аудит SEOBernard. Сервис покажет технические ошибки, проблемы с контентом и страницы, которые теряют видимость и заявки. Отчет будет готов за несколько минут.
Что должно быть внутри файла llms.txt
Хороший файл — короткий и структурированный с четким порядком блоков.
Обязательные элементы:
- Заголовок H1 с названием компании или сайта.
- Короткое описание в формате цитаты (символ > в Markdown) — одно-два предложения о том, чем занимается бизнес.
Дополнительные блоки, оформленные заголовками H2:
- ссылки на ключевые услуги или продукты с коротким пояснением;
- ссылки на экспертные материалы — кейсы, статьи, документацию;
- контакты;
- необязательный раздел «Optional» — для второстепенных материалов, которые модель может пропустить при сборе краткого контекста.
В отличие от robots.txt, в llms.txt нет команд вроде Disallow или Allow. Он не запрещает роботам посещать страницы и не управляет доступом к сайту.
Пример пошаговой инструкции llms.txt:
Пошаговая инструкция: как создать и настроить llms.txt
Файл можно подготовить вручную, используя обычный текстовый редактор. Для размещения потребуется доступ к панели управления сайтом, файловому менеджеру хостинга или помощь разработчика.
Перед публикацией определите, какие сведения о компании требуется собрать в одном месте и какие страницы нужно связать между собой.
Определите задачу файла
Сформулируйте, для чего создается llms.txt. Возможные задачи:
- дать краткое описание компании;
- выделить основные услуги;
- собрать ссылки на документацию;
- описать структуру интернет-магазина;
- связать экспертные статьи с конкретными направлениями;
- указать актуальные страницы для клиентов и партнеров.
Задача влияет на содержание. Для сайта услуг понадобится одна структура, для интернет-магазина — другая, для технической документации — третья.
Выберите страницы для включения
Соберите список страниц, которые помогают понять деятельность компании и ее предложение. Все страницы сайта вносить в файл не требуется — файл не должен превращаться в копию sitemap.xml. Выбирайте материалы, которые относятся к текущей деятельности компании и помогают ответить на вопросы клиентов.
Служебные страницы, результаты внутреннего поиска, фильтры, дубли, архивы и технические URL обычно не включают.
Проверьте актуальность содержания
Перед добавлением ссылки откройте каждую страницу и проверьте:
- работает ли адрес;
- совпадает ли заголовок страницы с ее содержанием;
- указаны ли актуальные цены и условия;
- не изменились ли услуги;
- нет ли устаревших контактных данных;
- доступна ли страница без авторизации;
- отвечает ли страница на заявленную тему.
Публичный файл может быть прочитан любым человеком или программой. В него нельзя добавлять закрытые документы, внутренние инструкции, персональные данные, пароли и сведения, которые компания не публикует на сайте.
Напишите краткое описание сайта
В начале файла расскажите, чем занимается компания, кому она помогает и какие направления представлены на сайте.
Описание должно быть конкретным. Например:
> Компания разрабатывает сайты для малого и среднего бизнеса в России. На сайте представлены услуги создания и продвижения сайтов, примеры работ, статьи о веб-разработке и способы связи со специалистами.
В описании можно указать территорию работы, если она влияет на выбор компании. Для регионального бизнеса допустимо перечислить города или области присутствия. Для интернет-магазина можно обозначить категорию товаров и условия доставки.
Не следует использовать в llms.txt рекламные обещания, которые нельзя подтвердить страницами сайта. Формулировки вроде «лидер рынка», «лучшие цены» и «гарантированный результат» не помогают разобраться в структуре компании.
Разделите ссылки по темам
Используйте заголовки второго уровня, чтобы собрать похожие страницы в отдельные блоки.
Например:
Каждая ссылка должна содержать название страницы и короткое пояснение:
— [Создание сайта](https://ваш-сайт.ru/services/site/): разработка сайта под задачи компании и ее клиентов.
Описание помогает понять назначение страницы без дополнительного перехода. Оно должно отражать содержание документа, а не пересказывать его целиком.
Добавьте полные ссылки на страницы
Указывайте полный адрес каждой страницы вместе с https://. Например:
https://ваш-сайт.ru/services/site/
Ссылки могут вести на обычные страницы сайта, не обязательно только главную. Для коммерческого сайта достаточно указать стандартные страницы с текстом, услугами, товарами и документацией.
Это важноРазместите файл в корне сайта
Создайте обычный текстовый файл и назовите его llms.txt. Не добавляйте к названию другие расширения: файл не должен называться llms.txt.html или llms.txt.docx.
Загрузите его в основную папку сайта — туда, откуда открывается ваш домен. После публикации файл должен быть доступен по адресу:
https://ваш-сайт.ru/llms.txt
Добавить файл можно через:
- панель управления сайтом;
- файловый менеджер хостинга.
Если в панели нет такой возможности, попросите разработчика или администратора сайта разместить файл по указанному адресу.
На заметкуПроверьте публикацию
Откройте адрес файла в браузере:
https://ваш-сайт.ru/llms.txt
Если вы видите текст с описанием сайта и ссылками, файл опубликован. После этого проверьте:
- Ссылки ведут на нужные страницы.
- Файл открывается без авторизации и сообщений об ошибках.
- В файле нет черновых данных и устаревшей информации.
Для технической проверки попросите разработчика убедиться, что сервер возвращает код 200. Это означает, что файл найден и отдается без ошибки.
Проверьте доступ для роботовllms.txt не поможет конкретному сервису, если доступ к сайту закрыт в robots.txt. Для Яндекса проверьте правила для YandexBot, для поиска ChatGPT — OAI-SearchBot, для Perplexity — PerplexityBot. Для GigaChat и других российских ИИ-сервисов используйте только те правила, которые указаны в их официальной документации. Не добавляйте неизвестные имена роботов наугад.
GPTBot и Google-Extended лучше не включать в этот список: они связаны с другими сценариями использования данных и не отвечают за обычный поиск по сайту.
Обновляйте файл вместе с сайтом
Проверяйте llms.txt каждый раз, когда меняется структура сайта: появляются новые страницы, изменяются их адреса или удаляются старые разделы. Если ссылки в файле устареют, языковые модели будут ориентироваться на неактуальную структуру сайта.
Для небольшого сайта достаточно обновлять файл вместе с плановыми изменениями. Если новые материалы публикуются регулярно, проверку llms.txt лучше включить в общий процесс публикации.
Нужно ли создавать llms-full.txt
llms-full.txt — расширенная версия файла llms.txt. В него можно включить полный текст документации, описания разделов, инструкции и другие материалы, которые помогают ИИ глубже разобраться в содержании сайта.
Такой вариант может подойти и небольшому сайту, если у компании есть понятная цель: подготовить данные для собственного ИИ-помощника, собрать материалы для внутренней базы знаний или упростить работу с подробной документацией. Создавать расширенный файл для каждого сайта без определенной задачи не требуется.
Как llms.txt связан с GEO
GEO расшифровывается как Generative Engine Optimization — оптимизация сайта для появления в ответах генеративных систем. Под этим термином объединяют комплексную работу над тем, чтобы Алиса, GigaChat и другие ИИ-сервисы могли правильно понять, чем занимается компания, какие услуги предлагает и где находится подтверждающая информация.
В рамках GEO анализируют структуру сайта, содержание страниц, экспертность материалов, сведения о компании, техническую доступность и правила для роботов. Файл llms.txt дополняет эту работу: кратко описывает сайт, выделяет приоритетные разделы и указывает на нужные страницы.
Как проверить, что llms.txt работает
Проверка состоит из двух частей. Сначала нужно убедиться, что файл открывается и доступен роботам. Затем следует отслеживать, как сайт представлен в ответах ИИ-сервисов, сколько переходов они приводят и насколько точно описывают компанию.
Проверьте техническую доступность файла
Откройте в браузере адрес:
https://ваш-сайт.ru/llms.txt
На странице должен отображаться текст с описанием компании и ссылками на нужные разделы.
Если у вас есть доступ к серверным журналам, можно проверить, обращались ли роботы к адресу /llms.txt. Названия роботов различаются в зависимости от сервиса, поэтому их лучше сверять с официальной документацией.
Само по себе обращение к файлу означает только то, что сервис смог его получить. Это не гарантирует использование информации в ответах или рекомендациях.
Проверьте, как ИИ-сервисы используют информацию о компании
Раз в несколько недель задавайте одинаковые вопросы о компании в Алисе, ChatGPT, GigaChat, Perplexity и других доступных сервисах. Обратите внимание:
- правильно ли названы услуги и товары;
- указан ли актуальный регион работы;
- соответствуют ли действительности цены, условия и контакты;
- используются ли страницы вашего сайта в качестве источников информации.
Если вы регулярно обновляете сайт, повторяйте такую проверку после крупных изменений.
При необходимости используйте инструменты аналитики
Если вы занимаетесь комплексной оптимизацией сайта для генеративных систем (GEO), дополнительно можно отслеживать показатели в сервисах аналитики.
Например:
- в Яндекс.Вебмастере — видимость сайта в Алисе AI;
- в Яндекс.Метрике — переходы из ИИ-сервисов (если источник передается).
Эти показатели помогают оценить общую представленность сайта в генеративных системах, но не позволяют отдельно измерить влияние файла llms.txt.
Скачайте PDF с 10 готовыми промптами и за 10 минут проверьте в ChatGPT, Алисе, GigaChat и других ИИ-системах, упоминают ли они вашу компанию и сайт по запросам о ваших услугах. К каждому промпту есть пример и пояснение, как расшифровать результат.
Чек-лист перед публикацией
Перед размещением llms.txt проверьте:
- файл называется llms.txt;
- он доступен по адресу /llms.txt;
- в начале указано название сайта;
- есть краткое описание компании;
- ссылки разделены по темам;
- у каждой ссылки есть понятное название;
- описания соответствуют содержанию страниц;
- URL работают и не ведут на ошибки;
- в файл не включены закрытые сведения;
- устаревшие материалы вынесены в Optional или удалены;
- файл не используется вместо robots.txt и sitemap.xml;
- после публикации проверен код ответа сервера;
- определена дата следующей проверки.
Главное о llms.txt, его создании и настройке
llms.txt — открытый текстовый файл с кратким описанием сайта и ссылками на приоритетные материалы. Он создан для работы языковых моделей и программ, которым требуется быстро разобраться в структуре проекта.
Файл размещают в корне сайта по адресу /llms.txt. Его составляют в формате Markdown, группируют ссылки по темам и обновляют вместе с изменениями на сайте.
llms.txt не управляет доступом роботов, не заменяет robots.txt и sitemap.xml, не повышает позиции в поиске и не гарантирует появление компании в ответах ИИ. Для сайта с документацией, базой знаний или большим количеством экспертных материалов он может стать дополнительным способом упорядочить информацию. Для остальных проектов сначала стоит привести в порядок техническую основу, структуру страниц, содержание и аналитику.
