Bing показал долю ИИ-цитирований сайтов, а llms.txt оказался бесполезен для больших языковых моделей

Microsoft в июне добавила в панель Bing Webmaster Tools четыре инструмента для отслеживания того, как большие языковые модели цитируют сайты в своих ответах, а параллельно Google и Ahrefs опубликовали данные, которые ставят под вопрос популярный формат llms.txt.

За одну неделю произошло сразу несколько событий, которые меняют подход к видимости сайтов в ИИ-поиске. Bing дал вебмастерам первую в индустрии метрику конкурентного цитирования. Google и Ahrefs независимо друг от друга показали, что файл llms.txt (специальный текстовый файл на сайте, который должен помогать нейросетям понять содержимое ресурса) почти бесполезен для попадания в генеративные ответы. А ещё Google, Microsoft и другие компании опубликовали черновые спецификации для ИИ-агентов (программ, которые сами находят и используют онлайн-инструменты). Информацию собрал и проанализировал отраслевой дайджест Search Engine Journal.

Citation Share: Bing показал долю ИИ-цитирований вашего сайта

• Citation Share (доля цитирований) впервые позволяет увидеть не просто факт цитирования вашего сайта в ИИ-ответах Bing, а вашу долю на фоне конкурентов по конкретному запросу.
• Intents и Topics (намерения и темы) группируют запросы пользователей, чтобы обойти лимит данных в текущей панели.
• Compare (сравнение) накладывает прошлый период на текущий, чтобы видеть динамику.
• Все четыре инструмента работают только с данными Bing и Copilot. Google Search Console пока не предлагает ничего подобного.

Джанлука Фиорелли, основатель ILoveSEO.net, написал в LinkedIn:

«Bing Webmaster! Такую Google Search Console мы хотели бы иметь.» : Джанлука Фиорелли, основатель ILoveSEO.net

llms.txt почти не работает: что показали Google и Ahrefs?

Файл llms.txt задумывался как способ «рассказать» большим языковым моделям о содержимом сайта. На этой неделе формат получил сразу два удара.

Джон Мюллер из Google в подкасте Search Off the Record объяснил: llms.txt не может помочь модели отличить один сайт от другого, потому что файл заполняет сам владелец сайта, заинтересованный в продвижении. Мюллер рекомендовал вместо этого работать с обычным HTML и внутренними ссылками.

Данные Ahrefs подтвердили тот же вывод. Из 137 000 доменов:

• 97% файлов llms.txt не получили ни одного запроса от ботов.
• Боты, которые генерируют цитирования (ChatGPT, Perplexity), составили лишь 1% от тех немногих обращений, которые всё же произошли.

Нэт Милетик, основатель Clio Websites, резюмировал:

«llms.txt дёшево опубликовать, нормально иметь. Просто не ждите, что он сдвинет вашу видимость в ИИ-поиске прямо сейчас.» : Нэт Милетик, основатель Clio Websites

Файл по-прежнему читают некоторые кодинг-агенты и обучающие (тренировочные) краулеры, поэтому убирать его нет смысла, но и ставку на него делать рано.

Новые спецификации для ИИ-агентов: OKF и ARD

Google Cloud опубликовал Open Knowledge Format (OKF) версии 0.1. Это формат на основе Markdown для упаковки знаний организации (наборов данных, метрик, инструкций) так, чтобы ИИ-агенты могли их читать.

Коалиция из Google, Microsoft, GitHub и Hugging Face представила черновик Agentic Resource Discovery (ARD) версии 0.9. Он описывает, как агенты находят и проверяют инструменты, навыки и других агентов.

Обе спецификации ранние. Ни одна из них не требует от вебмастеров действий прямо сейчас.

Мартин Джеффри, основатель Harton Works, сравнил ARD с ранними днями поиска:

«Это карта сайта, переродившаяся для возможностей, а не для страниц.» : Мартин Джеффри, основатель Harton Works

Великобритания обязала Google ранжировать результаты честно

Управление по конкуренции и рынкам Великобритании (CMA) установило новые правила для Google Search на территории страны:

• Google обязан использовать объективные, недискриминационные критерии для органической выдачи, включая AI Overviews (ИИ-обзоры в выдаче).
• Google обязан заранее уведомлять вебмастеров о значимых изменениях ранжирования.
• Появился официальный канал для жалоб на ранжирование.
• Добровольный инструмент переноса данных стал юридическим обязательством.

Правила действуют только в Великобритании. Google заявил, что его ранжирование уже справедливо и прозрачно. Реальное влияние зависит от того, как компания реализует требования на практике.

Что делать с этим по ролям?

Автору Дзена и копирайтеру. Файл llms.txt не поможет попасть в ответы нейросетей. Сосредоточьтесь на качественном HTML, понятной структуре текста и внутренней перелинковке. Это то, что рекомендует сам Google.

Маркетологу и SEO-специалисту. Если вы работаете с англоязычным трафиком, зайдите в Bing Webmaster Tools и проверьте Citation Share. Это пока единственный инструмент, который показывает вашу долю в ИИ-цитированиях на фоне конкурентов. В Google Search Console аналога нет.

Предпринимателю в РФ и СНГ. В российском поиске «Яндекс» развивает собственные нейросетевые ответы через YandexGPT, а GigaChat от Сбера работает как отдельный сервис. Ни один из них пока не предоставляет аналог Citation Share, но тренд на цитирование источников в ИИ-ответах общий. Следите за обновлениями «Яндекс Вебмастера».

Частые вопросы

Citation Share работает для российских сайтов?

Технически да, если ваш сайт индексируется Bing. Но Bing в России используется редко, поэтому данных может быть мало. Инструмент полезнее для сайтов с англоязычной аудиторией.

Нужно ли удалять файл llms.txt с сайта?

Нет. Файл почти ничего не стоит в обслуживании, и его читают некоторые обучающие краулеры и кодинг-агенты. По данным Ahrefs, он не помогает попасть в генеративные ответы ChatGPT или Perplexity, но и не вредит.

Британские правила честного ранжирования повлияют на выдачу в России?

Требования CMA действуют только в Великобритании. Но если Google начнёт предупреждать о значимых обновлениях алгоритма хотя бы для британских вебмастеров, это создаст давление на компанию расширить практику на другие рынки.