llms.txt

llms.txt

llms.txt — предложенный формат текстового файла, который кратко представляет сайт или его раздел и помогает программным агентам находить нужные материалы. Файл использует разметку Markdown: название обязательно, пояснения и ссылки добавляются по необходимости.

Так описывает назначение и минимальный состав файла автор предложения Jeremy Howard: документ служит отправной точкой для дальнейшего чтения. Под агентом здесь понимается программа, которая обращается к материалам сайта при выполнении задачи пользователя. [1]

Кратко

  • llms.txt остаётся предложением формата; его наличие не обещает показов в поиске. [1, 3]
  • Обязателен заголовок первого уровня; раздел Optional можно не создавать. [1]
  • Для Google AI Overviews и AI Mode специальные AI-файлы не требуются. [3]
  • Проверка разметки, доступности ссылок и содержания — разные задачи.

Происхождение и история термина

Howard опубликовал предложение 3 сентября 2024 года; версия v2 датирована 10 августа 2026 года. История изменений объясняет развитие идеи: вместо неявного поиска файла по догадке появились рекомендации указывать связи между страницей, её текстовой версией и llms.txt. Также уточнено, какие страницы охватывает файл в подпапке. [1]

Раньше утилита, собиравшая материалы для языковой модели, могла пропускать ссылки из раздела Optional. В версии v2 редактор по-прежнему может пометить так второстепенные ссылки, но само название больше не предписывает программе пропускать их. [1]

Суть и механизм

Markdown — способ записать структуру документа обычным текстом. Например, знак # с пробелом перед названием обозначает заголовок первого уровня, или H1; два знака обозначают H2. CommonMark подробно описывает правила такой разметки, включая допустимые пробелы и другие формы заголовков. Поэтому короткая проверка нескольких строк не равна полному разбору Markdown. [2]

По предложению файл располагают в корне сайта либо в подпути, например /docs/llms.txt. Карта охватывает страницы того раздела, где она лежит. Если на сайте есть и /llms.txt, и /docs/llms.txt, то для страницы /docs/images применяется карта раздела /docs/. После названия могут идти краткое описание, поясняющий текст и разделы H2 со ссылками. [1]

Учебный пример: редакция хранит справочник рекламных форматов. Партнёру нужен ответ о размере изображения, а не весь архив документов. Карта может направить его к инструкции «Размеры изображений», а из неё — к нужному формату. Если вместо этого подпись ведёт к старому прайс-листу, безупречные скобки и заголовки не помогут: маршрут чтения выбран неправильно.

Вот как может выглядеть файл из примера; путь в нём условный:

```markdown

Справочник рекламных форматов

Инструкции по подготовке материалов к размещению.

Изображения

Чем отличается robots.txt? Robots Exclusion Protocol, сокращённо REP, задаёт правила обхода для автоматических клиентов, которые посещают страницы. Его описание RFC 9309 прямо отделяет эти правила от авторизации — проверки права получить доступ. [4] В нашем примере список полезных инструкций и решение сервера о том, кому выдавать закрытый документ, должны проверяться отдельно.

Виды и классификации

Для работы редакции удобно различать общую карту сайта и карту самостоятельного раздела. Это рабочая классификация по охвату, а не категории качества. По полноте можно выделить карточку с одним названием и карту с пояснениями и ссылками. Второй вариант полезнее именно тогда, когда подборка отвечает вопросам читателя; количество пунктов само по себе ничего не доказывает.

Например, для школьного сайта общая карта могла бы знакомить с программами обучения, а карта раздела библиотеки — вести к правилам выдачи и каталогу. Это учебная организация материалов, не утверждение о том, что конкретная школа внедрила формат. Разделение имеет смысл, если у каждой карты есть понятная задача и ответственный редактор.

Как применяется на практике

Учебный российский пример — открытый справочник городского издания. Редактор выбирает три документа: описание форматов, правила передачи материалов и методику отчёта. К каждой ссылке он добавляет пояснение, какой вопрос решает документ. Такая подпись, как «Отчёт о размещении: что означает каждый показатель», позволяет отличить методику от рекламного предложения.

Предлагаемый редакционный процесс начинается с вопросов будущих пользователей. Для вопроса «Как подготовить изображение?» выбирается инструкция по формату; для вопроса «Как прочитать отчёт?» — методика. Затем другой сотрудник проходит эти маршруты и сверяет ответы с документами. Если две страницы противоречат друг другу, исправлять следует содержание и обозначение версий, а не добавлять ещё одну ссылку без пояснений.

Чтобы Google мог показать ссылку на страницу в обзоре с ответом ИИ (AI Overviews) или в поисковом режиме с ИИ (AI Mode), страница должна уже находиться в индексе Google и быть допущена к показу с текстовым фрагментом в поиске. Доступность для обхода ещё не означает, что страница включена в индекс. Даже при выполнении обоих условий показ не гарантирован. Файл llms.txt для этих функций не требуется. [3]

Как измерить или проверить

Локальный диагностический инструмент проверяет текст в браузере. Он ищет простые заголовки H1, отмечает управляющие символы и разбирает простые пункты вида - [Название](адрес). Адреса не открываются. Проверка допускает только веб-схемы HTTP и HTTPS, а относительные пути разбирает с условным базовым адресом; это правило данного инструмента, не полная спецификация формата. В записи [Архив](<ftp://files.example/a>) угловые скобки отделяют адрес и не входят в него. [2] Инструмент выдаст замечание и не прибавит ссылку к счёту: FTP, как и mailto, не входит в разрешённый набор.

Лимиты инструмента — сто тысяч единиц длины JavaScript-строки и две тысячи строк. Первый предел не равен размеру файла в байтах. В сложной разметке, включая блоки кода, инструмент сообщает о необходимости ручной проверки. Пустое поле считается ошибкой; кнопка сброса очищает поле и предыдущий результат. Ни один результат не называется сертификатом корректности llms.txt.

Следующий этап — содержательный тест редакции. Заранее составьте учебный набор из четырёх вопросов и укажите документы с правильными ответами. Допустим, карта привела проверяющего к нужному документу в трёх случаях. Доля успешных маршрутов в этом наборе равна трём, делённым на четыре, то есть семидесяти пяти процентам. Знаменатель — все четыре заданных вопроса, включая неудачный, а не только найденные документы.

Это собственный показатель для конкретного теста, не отраслевой норматив и не оценка доли цитирований. Для повторного сравнения сохраните вопросы, критерий успеха, версию карты и документы. Если поменять одновременно вопросы и подборку, станет непонятно, почему изменился результат. Отдельно проверяйте, открылся ли документ и содержит ли он актуальный ответ: успешный переход ещё не означает правильного ответа.

Ошибки, ограничения и спорные вопросы

Самая заметная ошибка — принять отсутствие замечаний линтера, то есть программы диагностики текста, за подтверждение полезности карты. Представим две карты с одинаковой разметкой: одна ведёт к текущим инструкциям, другая — к устаревшим. Синтаксическая проверка даст одинаковый результат, хотя ответы читателя могут различаться.

Другая ошибка — размещать закрытые сведения в публичном файле и рассчитывать на просьбу их не читать. RFC 9309 подчёркивает, что для защиты содержимого нужны собственно меры контроля доступа. [4] Для учебного справочника это означает раздельную работу над открытой навигацией и защитой внутренних документов.

Правовой аспект

В России тексты и фотографии могут охраняться авторским правом независимо от их публикации в интернете: это следует из пунктов 1 и 3 статьи 1259 Гражданского кодекса РФ. Идеи и факты отделены от охраняемых произведений пунктом 5. Пункт 1 статьи 1229 устанавливает, что отсутствие запрета само по себе не означает разрешения на использование; предусмотренные законом исключения сохраняются. [5]

Следовательно, техническую ссылку нельзя автоматически приравнивать к согласию на любое копирование. Эти нормы сверены по части четвёртой ГК РФ в редакции от 23.07.2025. В ней учтены изменения, вступившие в силу 04.01.2026. Конкретные права на подборку и материалы требуют юридической проверки; этот раздел не разрешает использование определённого архива. [5]

Частые вопросы

Нужен ли llms.txt для попадания в AI Overviews?

Google такого условия не устанавливает. Файл не заменяет требования к самой странице. [3]

Обязателен ли Optional?

Нет. Его смысл в v2 — обозначение второстепенных ссылок, а не универсальная команда обработки. [1]

Чем он отличается от robots.txt?

Первый помогает ориентироваться в материалах; второй передаёт правила обхода. Право использования произведений проверяется отдельно. [1, 4, 5]

Доказывает ли хороший результат мини-инструмента качество карты?

Нет. После него остаются проверка ссылок, актуальности документов и маршрутов к ответам. Пример с двумя одинаково оформленными, но разными по содержанию картами показывает эту границу.

Связанные термины

Источники

  1. Howard, J. (2026, August 10). The /llms.txt file, v2 (original proposal published September 3, 2024). https://llmstxt.org/ ; сопроводительная история: Changes. https://llmstxt.org/changes.html (дата обращения: 04.11.2026). ↑ а б в г д е ж з
  2. MacFarlane, J. (2024, January 28). CommonMark spec (Version 0.31.2), §§ 1.1, 1.2, 4.2, 6.3. https://spec.commonmark.org/0.31.2/ ; указатель версий: https://spec.commonmark.org/ (дата обращения: 04.11.2026). ↑ а б
  3. Google. (2025, December 10). AI features and your website. Google Search Central. https://developers.google.com/search/docs/appearance/ai-features (дата обращения: 04.11.2026). ↑ а б в г
  4. Koster, M., Illyes, G., Zeller, H., & Sassman, L. (2022, September). Robots exclusion protocol (RFC 9309), §§ 1, 2.1, 3. IETF. https://www.rfc-editor.org/rfc/rfc9309.html ; карточка статуса: https://datatracker.ietf.org/doc/rfc9309/ (дата обращения: 04.11.2026). ↑ а б в
  5. Гражданский кодекс Российской Федерации (часть четвёртая) : от 18.12.2006 № 230-ФЗ : ред. от 23.07.2025, с изм. и доп., вступ. в силу с 04.01.2026 : ст. 1259, п. 1, 3, 5; ст. 1229, п. 1 // КонсультантПлюс. URL: https://www.consultant.ru/document/cons_doc_LAW_64629/be05678dc42ddc67aae5be9ba9beebd367fb9a3f/ ; https://www.consultant.ru/document/cons_doc_LAW_64629/98ad2641f95945c4b7956150260564c8b44028d9/ (дата обращения: 04.11.2026). ↑ а б в

Служебный блок

Версия
5.0
Факты проверены
Подготовка
Редакция Медиатрона
Публикация
утверждена владельцем издания 5 ноября 2026 г.

Редакция Медиатрона. Факты сверены с первоисточниками на дату проверки, публикация утверждена владельцем издания.

Нашли ошибку? info@mediatrone.ru