SEO и GEO: у Google три рычага доступа ИИ, одной строкой robots.txt аудит не закрыть

SEO (поисковая оптимизация) и GEO (оптимизация под генеративный ИИ, чтобы модель цитировала сайт в своём ответе) получили новые задачи. Первый выпуск дайджеста для SEO-команд от 7 ноября 2026 года формулирует главную из них так: разделить доступ к контенту, его использование в ИИ-ответах и измерение результата. Для каждого из трёх вопросов нужны свои настройки и свои данные.

Ниже порядок работы по теме «SEO и GEO: новые правила доступа ИИ, анализ цитирований и автоматизация аудита». На выходе у вас будет матрица решений для сайта, проверенные настройки и понятный способ измерять цитирования.

Что понадобится для аудита?

• Доступ к Google Search Console для всех ресурсов сайта: домена, поддоменов и ресурсов по префиксу адреса (URL-prefix properties).
• Доступ к Bing Webmaster Tools, раздел AI Performance.
• Screaming Frog SEO Spider версии 25.0. Это краулер, то есть программа, которая обходит сайт так же, как поисковый робот.
• Доступ к robots.txt, текстовому файлу в корне сайта с правилами для роботов.
• Таблица для матрицы решений и журнал изменений.
• Время на ручную проверку. Автоматику в этой работе нужно перепроверять.

Пошаговая инструкция: девять проверок от доступа до метаданных

1. Зафиксируйте точку отсчёта. Перед любыми изменениями сохраните текущий robots.txt, настройки Search Console и запишите цель эксперимента. Без исходных данных вы не поймёте, что сработало.

2. Составьте матрицу решений. Нужны три отдельные строки: обучение моделей, grounding в Gemini и участие в ИИ-функциях поиска. Grounding означает, что модель опирается на найденные страницы, когда собирает ответ.

Задача                     | Решение  | Где управляется
Обучение моделей Google    | да / нет | robots.txt, Google-Extended
Grounding в Gemini         | да / нет | сверить с описанием Google-Extended
ИИ-функции поиска Google   | да / нет | Search Console

1. Проверьте Google-Extended. По документации Google эта настройка не влияет на включение сайта в Google Search и не служит сигналом ранжирования. Запрет обучения через неё, по словам компании, не трогает обычную выдачу.

2. Проверьте Search generative AI control в Search Console. Настройка включает или исключает контент и ссылки сайта из генеративных функций поиска, в том числе из AI Overviews и AI Mode, то есть ИИ-обзоров и ИИ-режима выдачи Google. Смотрите эффективное значение для домена, поддоменов и ресурсов по префиксу, потому что дочерние ресурсы могут наследовать настройку родительского.

Обратите внимание на даты. Google внёс механизм в обзорную документацию 21 октября, а справка называет срок глобального развёртывания: к 31 августа 2026 года.

1. Подготовьтесь к общему сигналу. Google намерен поддержать общий сигнал в robots.txt на основе работы IETF AIPREF. IETF разрабатывает интернет-стандарты, AIPREF работает над тем, как сайты сообщают свои предпочтения насчёт ИИ.

Документация краулеров называет начало 2027 года и токен __usage_ai-training. Если Google-Extended у вас не задан явно, отказ через общий сигнал Google планирует считать запретом Google-Extended.

1. Настройте Screaming Frog 25. В версии 25.0 конфигурацию обхода можно сохранять в формате JSON, это текстовый формат, который удобно хранить и сравнивать, а прежний формат тоже поддерживается. Сохраните эталонную конфигурацию для каждого проекта, прогоните небольшой контрольный набор адресов, проверьте экспорт и новые приоритеты Issues, то есть списка найденных проблем.

Автоограничение скорости реагирует на ответы сервера 429 и 503, когда сервер просит притормозить или временно недоступен, а также на сбои соединения. Обновлены и MCP-инструменты. MCP это протокол, через который ИИ-ассистент подключается к программе и управляет ею, но получившуюся конфигурацию всё равно проверяйте сами.

1. Разберите темы в Bing Topics Portfolio. Бета-функция внутри AI Performance группирует grounding-запросы по тематическим кластерам и показывает сведения о цитированиях и списки Opportunity Queries, то есть запросов, где у сайта есть шанс появиться. Сопоставьте несколько кластеров с редакционным планом и проверьте предложенные запросы вручную.

2. Включите метаданные в редакционную приёмку. Руководство Google от 1 октября требует проверять точность ИИ-контента вручную до публикации. Это касается title и description (заголовка и описания страницы для выдачи), структурированных данных и альтернативных текстов картинок.

Сверяйте характеристики с исходными данными и прогоняйте разметку через валидатор. Массовые шаблоны выпускайте сначала небольшой партией: генерация страниц без добавленной ценности может нарушать правила о злоупотреблении массовым контентом (scaled content abuse).

1. Сверьте всё на русском домене. Дайджест не описывает Яндекс Вебмастер и не уточняет, как Search generative AI control и Google-Extended ведут себя на российских доменах и в русскоязычной выдаче. Проверьте эффективные значения в Search Console на своём ресурсе, а настройки Яндекса изучите отдельно.

User-agent: Google-Extended
Disallow: /

Что делать с этим автору, маркетологу и предпринимателю?

Автору Дзена. Если вы пишете с помощью нейросетей и ведёте свой сайт, проверяйте вручную не только текст, но и заголовок, описание и подписи к картинкам. Выдуманная характеристика в разметке перечёркивает вычитанную статью.

Маркетологу. Topics Portfolio переводит разговор с вопроса «нас процитировали?» на вопрос «в каких темах мы есть и где пробелы?». Microsoft советует считать эти метрики ориентирами для планирования, а не точным счётом.

Предпринимателю в России и СНГ. Решения про обучение и про ИИ-обзоры принимайте раздельно и записывайте в матрицу. Проверьте, к каким из описанных сервисов у вас есть рабочий доступ, и для Яндекса ведите отдельную строку.