Канибализация сайта крадёт позиции: как найти дубли и вернуть трафик

Колонка Search Engine Journal «Ask an SEO» разобрала проблему канибализации сайта на конкретных инструментах и шагах. Автор подчёркивает: не важно, насколько хорош ваш промпт-инжиниринг (подбор формулировок для нейросети). LLM выдают «тонкий» и повторяющийся контент, и это прямой путь к тому, что поисковик не может выбрать, какую из ваших страниц показать. В итоге обе проседают.

Три способа найти каннибализацию и что делать дальше

• Google Search Console (бесплатная панель вебмастера от Google). Откройте отчёт по эффективности, отфильтруйте нужный запрос и посмотрите, сколько ваших URL показываются по нему. Если два адреса делят трафик примерно поровну или оба застряли на третьей-пятой странице выдачи, хотя раньше один из них был в топ-10, это признак канибализации сайта.
• Краулеры (программы, которые обходят сайт как поисковый робот). Screaming Frog, Sitebulb, Botify или Deepcrawl собирают title-теги и H1-заголовки. Отсортируйте список и найдите дубли или почти совпадающие формулировки. Если у таких страниц ещё и похожий трафик, проблема подтверждена.
• Трекеры позиций (Semrush, Ahrefs, Authority Labs). Они показывают, какие именно URL ранжируются по каждой фразе. Когда несколько страниц одного сайта болтаются в районе 20-50-й позиции и не выходят в топ-10, поисковик «запутался», какая страница главная.

Автор отдельно предупреждает: если одна страница информационная (как выбрать яблоки), а вторая продающая (купить яблоки), это не каннибализация. Google различает намерение пользователя и направляет трафик по стадии воронки. Это нормальная SEO-работа.

Как устранить проблему?

Способ зависит от типа дублей:

• Мета-тег robots (инструкция поисковику, индексировать страницу или нет) можно применить программно к целым папкам и параметрам, убрав лишние страницы из индекса.
• Канонический тег (canonical) указывает поисковику, какая версия страницы «главная», если есть варианты или дубли.
• Перелинковка. Проверьте, что ссылки внутри сайта ведут на нужную страницу по смыслу запроса: коммерческий запрос на страницу покупки, информационный на статью.
• Редакционный контроль. Составьте список тем, по которым контент-команда (или нейросеть) не создаёт новые страницы без согласования с SEO-специалистом. Задача не запретить, а найти новый угол, который дополняет существующую страницу, а не конкурирует с ней.

Как попробовать прямо сейчас?

1. Откройте Google Search Console, перейдите в полный отчёт по эффективности, введите ваш самый ценный запрос в фильтр и проверьте, сколько URL показываются.
2. Если два и больше URL делят трафик или оба вне топ-10, решите: объединить страницы, удалить дубль (перенеся полезные тезисы в оригинал) или переписать вторую под другой запрос.
3. Для масштабной проверки запустите краулер (бесплатный Screaming Frog обрабатывает до 500 URL) и отсортируйте title-теги по алфавиту, дубли видны сразу.
4. Заведите таблицу «тема, целевой запрос, URL» и требуйте от генератора (или от себя) проверять её перед созданием нового текста.

Сравнение с российскими инструментами

Semrush и Ahrefs работают в России, но с ограничениями по оплате. Для русскоязычных сайтов есть альтернативы:

Если вы публикуете контент в Яндексе и Google одновременно, проверяйте каннибализацию в обеих панелях: алгоритмы ранжирования различаются, и дубль может мешать в одном поисковике, но не в другом.

Что делать с этим прямо сейчас, по ролям

Автору Дзена. Если вы ведёте блог и параллельно сайт, проверьте, не конкурируют ли ваши статьи между собой по одним и тем же фразам. Нейросеть, которой вы даёте похожие промпты, почти наверняка создаёт похожие тексты. Заведите таблицу тем и не дублируйте.

SEO-специалисту и маркетологу. При масштабной генерации контента через LLM-инструменты канибализация сайта становится системной, а не единичной проблемой. Включите проверку title-тегов на дубли в регулярный аудит, раз в месяц достаточно.

Предпринимателю. Если подрядчик или штатный автор «на нейросети» публикует по 20-30 текстов в неделю, запросите отчёт по каннибализации. Без контроля вы платите за контент, который топит сам себя.

Частые вопросы

Канибализация контента и дублирование это одно и то же?

Нет. Дублирование означает, что на сайте есть страницы с полностью идентичным текстом. Канибализация сайта шире: тексты могут быть разными, но нацелены на один и тот же поисковый запрос, и поисковик не понимает, какую страницу показать. LLM-генераторы создают именно такую ситуацию: тексты формально уникальны, но по смыслу и ключевым фразам почти совпадают.

Нужно ли удалять страницы, если обнаружена каннибализация?

Не обязательно. Автор руководства предлагает три варианта: объединить две страницы в одну, удалить дубль и перенести полезные тезисы в оригинал, или переписать вторую страницу под другой запрос и намерение пользователя. Удаление без редиректа (перенаправления) на нужную страницу может привести к потере уже набранных ссылок.

Как часто проверять сайт на каннибализацию?

Если вы публикуете до пяти текстов в месяц, хватит ежеквартальной проверки. Если генерируете контент массово через нейросеть, проверяйте ежемесячно или после каждой крупной публикации. В Google Search Console и Яндекс Вебмастере это занимает 10-15 минут на один запрос.

Тем, кто масштабирует контент с помощью нейросетей, стоит запомнить одну вещь: LLM отлично умеет писать, но не умеет помнить, что уже написано на вашем сайте, и эту работу за модель пока никто не сделает, кроме вас.