
ChatGPT игнорирует robots.txt на половине сайтов: Cloudflare начнёт блокировать ботов на сетевом уровне
ChatGPT собирает данные с сайтов, которые прямо запретили к нему доступ, и делает это чаще любого другого ИИ-бота, а Cloudflare с 15 сентября 2026 года начнёт…






