Что такое ИИ-агент и зачем ему llms.txt V2: агенты находят контент без подсказок
Файл llms.txt, до сих пор просто указывавший ИИ-агентам на нужные страницы, 10 августа получил обновление V2 с двумя механизмами обнаружения Markdown-версий, и теперь агенты находят контент сами, без ручных подсказок.
Тысячи сайтов уже публикуют llms.txt, но до V2 спецификация не объясняла агентам, где именно лежит Markdown-версия страницы: агент знал «куда идти», но не «что брать». Два новых атрибута связи решают эту проблему и делают формат пригодным для автоматической работы без участия человека.
Джереми Ховард, разработчик Answer.AI и автор формата llms.txt, опубликовал первую ревизию спецификации с момента её запуска в 2024 году. V2 не ломает совместимость: сайтам, которые уже используют файл, достаточно минимальной правки вместо полной переделки. При этом обновление опирается, по словам Ховарда, на два года практического опыта: формат приняли платформы вроде Mintlify, а команды Anthropic, OpenAI и Google Gemini публикуют собственные llms.txt для документации разработчиков.
Прежде чем переходить к пошаговой инструкции, коротко о базовом понятии. Что такое ИИ-агент? Это программа, которая сама решает, какие действия выполнить для достижения цели. Обычный чат-бот отвечает на ваш вопрос, а ИИ-агент способен открыть сайт, прочитать документацию, найти нужный файл и вернуть готовый результат. Именно для таких агентов и создан llms.txt: файл рассказывает им структуру сайта, а V2 добавляет стандартный способ находить текстовые версии страниц.
Что понадобится
- Сайт с доступом к настройкам сервера или CDN (подойдёт любой хостинг, где можно добавить HTTP-заголовок или отредактировать HTML-шаблон)
- Текстовый редактор для создания файла llms.txt (Блокнот, VS Code, Nano, что угодно)
- Markdown-версии ключевых страниц (можно сгенерировать вручную или через конвертер HTML в Markdown)
- Около 30 минут на базовую настройку, если llms.txt уже есть, хватит 10 минут
Пошаговая инструкция
-
Создайте или обновите файл llms.txt в корне сайта. Файл размещается по адресу
yoursite.com/llms.txtи описывает структуру сайта для ИИ-агентов. Если файл уже есть, переходите к шагу 2. -
Подготовьте Markdown-версии страниц. V2 поддерживает два шаблона URL. Выберите один из них:
-
Добавление
.mdк полному имени файла:/docs/tutorial.htmlстановится/docs/tutorial.html.md - Замена расширения на
.md:/docs/tutorial.htmlстановится/docs/tutorial.md
Первый вариант поддерживался и раньше, второй появился в V2. Оба равноправны.
- Добавьте атрибут связи
rel="alternate"на каждую HTML-страницу, у которой есть Markdown-версия. Это прямая ссылка, которая говорит агенту: «вот Markdown-версия этой страницы».
<link rel="alternate" type="text/markdown" href="/docs/tutorial.md" />
- Добавьте атрибут
rel="describedby", указывающий на файл llms.txt. Один файл llms.txt может описывать все страницы, находящиеся по его пути.
<link rel="describedby" href="/llms.txt" />
- Альтернатива без правки шаблонов: HTTP-заголовок Link. Если менять HTML неудобно, оба атрибута можно передать через HTTP-заголовок ответа. Это особенно полезно для файлов, которые сами не являются HTML, например тех же Markdown-страниц.
Link: </docs/tutorial.md>; rel="alternate"; type="text/markdown"
Link: </llms.txt>; rel="describedby"
Заголовок можно настроить на уровне сервера (Nginx, Apache) или CDN (Cloudflare, Vercel) без изменения кода сайта.
- Проверьте работу. Откройте страницу в браузере, посмотрите исходный код (Ctrl+U) и убедитесь, что оба
link-элемента присутствуют в<head>. Или выполните запрос через curl:
curl -I https://yoursite.com/docs/tutorial.html
В ответе должны быть заголовки Link с указанными выше значениями.
Допустим, у вас блог на WordPress по адресу myblog.ru. Вы создали Markdown-версию статьи о промпт-инжиниринге (промпт-инжиниринг, то есть искусство формулировать запросы для нейросетей так, чтобы они давали нужный результат).
Исходная страница: myblog.ru/posts/prompt-guide.html
Markdown-версия: myblog.ru/posts/prompt-guide.md
В <head> страницы вы добавили:
<link rel="alternate" type="text/markdown" href="/posts/prompt-guide.md" />
<link rel="describedby" href="/llms.txt" />
Теперь ИИ-агент, зайдя на вашу страницу, видит обе ссылки и сразу загружает Markdown-версию вместо того, чтобы парсить HTML. Результат: агент получает чистый текст без навигации, рекламных баннеров и скриптов, что снижает количество токенов (токен, это минимальный фрагмент текста, который обрабатывает нейросеть, чем их меньше, тем дешевле и быстрее запрос) и повышает качество ответа.
Не путайте цель формата. Команда Google Search прямо заявляет, что не использует llms.txt и его наличие «не навредит и не поможет видимости или позициям сайта». Если вы добавляете файл ради влияния на AI Overviews или AI Mode, у этой цели нет подтверждения ни в данных, ни в заявлениях Google.
Lighthouse проверяет файл, но не проверяет V2. Инструмент Agentic Browsing в Google Lighthouse ищет llms.txt и фиксирует ошибки сервера. Однако он не тестирует новые атрибуты связи и обнаружение Markdown-страниц. Отсутствие файла (ответ 404) помечается как N/A, не как ошибка: файл остаётся необязательным.
Спецификация ещё не финализирована. V2 открыт для обратной связи на GitHub. Синтаксис атрибутов может измениться до выхода стабильной версии. Не стоит жёстко привязывать продакшн-логику к текущему формату без готовности обновить её.
Не забывайте про оба URL-шаблона. Выберите один и придерживайтесь его по всему сайту. Смешивание .html.md и .md без системы запутает и агентов, и вашу команду.
Кому и зачем это нужно прямо сейчас?
Авторам и контент-мейкерам на Дзене. Если у вас есть сайт-визитка или блог помимо Дзена, llms.txt V2 помогает ИИ-агентам корректно читать ваши материалы. Это значит, что кодовые ассистенты и документ-инструменты смогут цитировать ваш контент точнее.
Разработчикам в РФ и СНГ. Стандарт открытый и не привязан к конкретной платформе. Его можно применять в локальных проектах, где используются агентные системы на базе отечественных или открытых моделей. Кодовые агенты и IDE-плагины уже читают llms.txt для ускорения поиска по API-документации, и этот сценарий не зависит от того, учитывает ли Google файл в ранжировании.
Маркетологам. Формат не про SEO в классическом понимании. Но если ваша стратегия включает видимость для ИИ-систем (а это всё больше точек контакта с аудиторией), llms.txt V2 даёт стандартный способ сделать контент машиночитаемым.
Я вижу в V2 практичное, но скромное обновление. Два года назад llms.txt выглядел как эксперимент одного разработчика, а сегодня его публикуют Anthropic, OpenAI и Google Gemini для собственной документации. Это не про поисковое ранжирование и не про «обязательный стандарт». Это про то, что ИИ-агенты уже здесь и им нужен способ понимать ваш сайт без костылей.
Для российских проектов формат особенно актуален: если вы строите агентную систему на локальной модели с открытыми весами (открытые веса, это когда параметры модели опубликованы и любой может запустить её у себя), llms.txt V2 даёт вашему агенту стандартную точку входа в любой совместимый сайт. Но честно: пока спецификация не финализирована, внедряйте с оглядкой и следите за репозиторием Ховарда на GitHub.
Страницу изменений со всеми дополнениями к спецификации и обоснованием каждого решения Ховард публикует открыто. V2 остаётся черновиком, но уже сейчас работает как практический стандарт для тех, кто строит продукты вокруг ИИ-агентов, и 30 минут настройки могут сэкономить вашему агенту десятки лишних запросов при каждом обращении к сайту.
Хотите разобраться в ИИ-инструментах для авторов?
На dzen.guru мы тестируем нейросети и агентные решения, которые реально работают для контента на русском языке.
Перейти на dzen.guru
Основатель dzen.guru. Эксперт по монетизации и продвижению на Дзен. Автор курса «Старт на Дзен 2026».
Читайте также
Баг в Google Search Console обрушил показы ИИ-отчёта: реальный трафик не пострадал
Google подтвердил баг в отчёте Google Search Console по генеративному ИИ: с 13 августа показатели показов (impressions) упали из-за ошибки логирования данных,…
Google поиск с ИИ подменил фото авторов генерацией: эксперимент свернули за часы
Google на прошлой неделе тестировал генерацию ИИ-иллюстраций прямо внутри поисковой выдачи для рецептов, но после волны критики от создателей контента свернул…
AI утечки в поиске: Search Console записывает диалоги пользователей с ИИ Google
Почему это важно Google Search Console записывает фрагменты диалогов пользователей с AI Mode как обычные поисковые запросы, и любой владелец сайта уже может…
Комментарии