Patreon заблокировал AI-скрейпинг технически: боты упали с тысяч запросов до нуля

Компания TechCrunch сообщила, что Patreon совместно с Cloudflare (провайдер интернет-инфраструктуры, который защищает сайты от вредоносного трафика) внедряет технологию AI Crawl Control. Это ответ на то, что ai скрейпинг стал изощрённее с 2023 года, когда платформа впервые попыталась ограничить сбор данных. Дополнительный риск создали новые функции самого Patreon: переработанная лента Home Feed и короткие посты Quips, похожие на твиты, которые вывели часть закрытого контента из-за платной стены и сделали его видимым для ботов.

Что именно меняется для авторов?

• Блокировка вместо просьб. Patreon больше не полагается на robots.txt. Боты, которые обучают нейросети на чужом контенте, теперь получают технический отказ в доступе, а не рекомендацию «пожалуйста, не заходите».
• Результат при тестировании. По данным блога Patreon, после включения новых мер отдельные ИИ-боты перестали обращаться к платформе полностью: с тысяч попыток в неделю до нуля.
• Поисковые боты остаются. Площадка продолжит пропускать ботов, которые индексируют страницы и направляют пользователей обратно на Patreon. Блокируются только те, что собирают данные для обучения моделей.
• Контекст Cloudflare. Cloudflare в этом месяце обновил собственные политики: «смешанные» боты (те, что одновременно индексируют и обучаются на контенте) по умолчанию блокируются на страницах с рекламой. Также Cloudflare запустил маркетплейс Pay Per Crawl, где сайты могут брать плату за ai скрейпинг.

«Согласие не должно зависеть от того, решит ли скрейпер вести себя прилично.» : Блог Patreon

«На большей части интернета авторы вынуждены мириться с обучением ИИ на их работе, просто чтобы расти и находить аудиторию. У Patreon другой подход: авторы должны расти и контролировать использование своих работ.» : Дрю Роуни, директор по продукту Patreon

Как проверить, защищён ли ваш контент?

1. Убедитесь, что ваш аккаунт на Patreon активен и контент размещён на платформе. Блокировка работает на стороне Patreon автоматически, отдельных настроек от автора не требуется.
2. Проверьте, не дублируете ли вы платный контент на собственном сайте или в открытых соцсетях. Блокировка распространяется только на домен Patreon, контент за его пределами остаётся незащищённым.
3. Следите за обновлениями в блоге Patreon: компания анонсировала дальнейшее расширение политик по мере появления новых типов ботов.

Есть ли похожая защита на российских платформах?

Для авторов, которые монетизируют контент в России, ближайшие аналоги Patreon по модели подписок это Boosty и «Sponsr». Ни одна из этих площадок пока не объявляла о технической блокировке ИИ-ботов на уровне инфраструктуры. Стандартный robots.txt, как показал опыт Patreon, ботами часто игнорируется. На Дзене защита от сбора данных для обучения моделей остаётся на стороне «Яндекса» как владельца платформы, и публичных заявлений об активной блокировке обучающих ботов от «Яндекса» на момент публикации нет.

Прямого российского аналога технологии Cloudflare AI Crawl Control для авторских площадок пока не существует. Это означает, что для российских авторов, публикующих на Patreon, новая защита работает автоматически, а вот контент на российских платформах пока защищён слабее.

Частые вопросы

Нужно ли мне что-то включать в настройках Patreon?

Нет. Блокировка ИИ-ботов работает на стороне платформы через инфраструктуру Cloudflare. Авторам ничего настраивать не нужно, защита применяется автоматически ко всему контенту на Patreon.

Перестанет ли мой контент появляться в поиске Google?

Нет. Patreon блокирует только ботов, которые собирают данные для обучения нейросетей. Поисковые боты, которые индексируют страницы и приводят читателей на Patreon, продолжают работать.

Защищает ли это от сбора контента, который я публикую вне Patreon?

Нет. Если вы дублируете тексты или изображения в Telegram-канале, на личном сайте или на Дзене, этот контент остаётся доступен для обучающих ботов. Блокировка действует только внутри домена Patreon.