AI контент и SEO: почему тысячи страниц за ночь убивают краул-бюджет сайта

Колонка Райана Джонса на Search Engine Journal разбирает механику провала программных инициатив, когда бренды генерируют сотни и тысячи страниц за ночь, рассчитывая собрать поисковый трафик. Вместо роста они получают обвал индексации, ручные санкции и месяцы восстановления. Статья вышла на фоне волны ручных наказаний Google за Scaled Content Abuse (массовое производство контента ради манипуляции поиском) и адресована прежде всего корпоративным SEO-командам, но выводы касаются любого, кто работает с ai контент сео на практике.

Почему Google режет краул-бюджет после массовой заливки?

Главное заблуждение: опубликовал страницу, значит Google её оценит. Это не так. Поисковая система распределяет вычислительные ресурсы, так называемый краул-бюджет (количество страниц, которое робот готов сканировать на конкретном сайте за единицу времени), по трём критериям.

• Воспринимаемый объём. Сколько URL-адресов Google видит на сайте и сколько из них считает полезными.
• Спрос. Насколько пользователи и сам поисковик заинтересованы в темах, которые сайт публикует.
• Авторитет домена и ссылочная история. Базовый уровень доверия, который оправдывает затраты на обработку.

Когда на сайт за ночь добавляются тысячи новых URL, Google не расширяет бюджет автоматически. Он сначала сканирует новые страницы «из любопытства», но если домен не накопил достаточного авторитета, поисковик урезает ресурсы. То, что робот проиндексировал страницы при первом проходе, не гарантирует, что он продолжит их обслуживать.

Иллюзия первого месяца: почему трафик сначала растёт?

Алгоритмы Google дают новому контенту временный бонус свежести (freshness boost). Страницы быстро попадают в индекс, трафик растёт, дашборды зеленеют. Но через несколько недель бонус сгорает, и каждая страница должна доказать ценность самостоятельно: кликами, вовлечением, внешними ссылками.

Программно сгенерированный ИИ-контент часто отвечает на запрос формально, но не содержит уникальной информации, оригинального исследования или нового пользовательского опыта. Сигналы не накапливаются, и Google снижает частоту повторного сканирования.

По данным из той же колонки, если Google не возвращается к URL примерно 130-140 дней (а иногда и 75), страница рискует вылететь из индекса полностью. При массовой заливке ИИ-контента этот порог, по утверждению автора, сужается ещё сильнее.

Ручные санкции за Scaled Content Abuse участились

Google явно усилил применение ручных наказаний за массовое производство контента. Под удар попадают три типичных сценария:

• Страницы-шаблоны с подстановкой города или ключевого слова («Лучшая сантехника в [городе]») без реальной локальной пользы.
• Автоматический перевод контента на десятки языков без адаптации контекста, валюты и поискового намерения.
• Тысячи статей, которые пересказывают существующую выдачу и не добавляют ни единого нового факта.

Восстановиться после такой санкции крайне тяжело: Google перестаёт доверять самому механизму публикации на сайте. Приходится удалять большую часть контента и проходить долгий процесс пересмотра.

Аргументы в пользу ИИ-контента

Было бы нечестно свести дискуссию к «ИИ-контент плох». Собственные правила Google прямо говорят: использование автоматизации или ИИ не нарушает политику, если цель не в манипуляции ранжированием. ИИ может ускорять создание черновиков, помогать с исследованием темы, генерировать структуру.

Проблема не в технологии, а в философии применения. Когда команда воспринимает SEO как чеклист (есть title, есть H1, есть 800 слов связного текста, значит страница «заслуживает» ранжирования), результат предсказуем. Экосистема индексации вознаграждает прирост информации (information gain), техническую эффективность и реальный спрос.

Аргументы против массовой генерации

• Краул-бюджет конечен. Каждая бесполезная страница отнимает ресурсы у полезной.
• Галлюцинации (когда модель уверенно выдумывает то, чего не было) масштабируются вместе с объёмом: чем больше страниц, тем выше шанс фактических ошибок, которых редактор не заметит.
• Ручная санкция бьёт по всему домену, а не по конкретным страницам.
• Восстановление занимает месяцы «хирургического» удаления контента и перестройки доверия.

Если ваша программная стратегия строится на том, что Google вложит свои вычислительные ресурсы в переписанный, неоригинальный контент, механика алгоритма рано или поздно догонит вас и отключит ваши ресурсы на сканирование и индексацию. : Райан Джонс, Search Engine Journal

Что делать прямо сейчас, по ролям

SEO-специалисту и автору Дзена. Проверьте, сколько страниц на вашем сайте Google реально индексирует. В Search Console откройте отчёт «Страницы» и сравните «Проиндексировано» с общим числом URL. Если разрыв больше 30-40%, это сигнал: поисковик уже не тратит ресурсы на часть контента. Лучше удалить слабые страницы, чем заливать новые.

Маркетологу. Экономика ai контент сео обманчива. Генерация дешёвая, но стоимость восстановления после санкции и потеря органического трафика на месяцы обнуляют экономию. Закладывайте в бюджет редактуру, проверку фактов и уникальный экспертный вклад в каждую страницу.

Предпринимателю в РФ и СНГ. Яндекс пока не объявлял массовых ручных санкций за ИИ-контент, но его алгоритмы тоже оценивают уникальность и поведенческие факторы. Из доступных инструментов для генерации черновиков: YandexGPT и GigaChat. Но черновик без экспертной доработки рискует так же, как и в Google.

Ближайшие полгода покажут, распространится ли волна санкций за Scaled Content Abuse на неанглоязычные рынки, но ждать этого момента, чтобы начать чистку, значит рисковать всем органическим трафиком домена: дешевле навести порядок сейчас, чем восстанавливать доверие поисковика потом.