Нейросети для маркетинга читают лишь фрагменты: тексты из скриптов ChatGPT и Claude не видят

В чём суть: нейросеть читает фрагменты, а не весь сайт

Нейросеть получает несколько найденных кусочков страницы. Если в них нет прямого текста о том, что это за продукт и для кого он, подробности на остальных страницах ей не помогут. Об этом говорят справки OpenAI и Яндекс Вебмастера, исследования Vercel и MERJ, Profound и Ahrefs, а также разбор Anthropic.

Путь ИИ к сайту зависит от сервиса. По справке OpenAI, за поиск ChatGPT отвечает робот OAI-SearchBot, а GPTBot собирает данные для обучения и с поиском не связан. Их настройки в robots.txt (файле, где сайт указывает роботам, куда им можно) независимы, а ChatGPT-User открывает страницу только по вопросу пользователя и сеть сам не обходит.

Алиса AI, по справке Яндекс Вебмастера, сайты сама не обходит. Она разбивает вопрос на подвопросы, отправляет их в Поиск Яндекса и опирается на высоко ранжированные страницы, не воспроизводя их дословно. Готовый ответ делится на смысловые блоки, и у каждого может быть свой источник.

Аргументы за: всё главное должно лежать в готовом коде страницы

Сторонники этой позиции опираются на цифры.

• Скрипты не срабатывают. Роботы ChatGPT и Claude получают HTML (исходный код страницы до выполнения скриптов) и файлы JavaScript (кода, который достраивает страницу в браузере), но скрипты не запускают. Vercel советует отдавать описание, метаданные и навигацию через серверный рендеринг, SSR: страница собирается на сервере, и робот сразу получает текст.
• Скачать не значит прочитать. По данным Vercel и MERJ за декабрь 2024 года, JavaScript составлял 11,50% запросов краулера (робота, который обходит и скачивает страницы) ChatGPT и 23,84% запросов Claude.
• Цены пропадают. Profound проверила 77 публичных страниц с ценами, и у 10 из них, примерно у каждой восьмой, роботам не был виден минимум 40% основного текста. На собственном сайте Profound цены тоже рисовал скрипт, и помог перенос на серверный рендеринг.
• Нет страницы, будут чужие цифры. Для продукта без публичной страницы с ценами нейросети подтянули цифры у третьих лиц, часто из обсуждений на Reddit: от примерно $100 до $2 400 за пользователя в месяц, разница в 24 раза.
• Разметку не читают. Ahrefs проверил ChatGPT, Claude, Perplexity, Gemini и Google AI Mode. Все пять при чтении страницы игнорировали JSON-LD (блок кода, где данные о продукте записаны для машин по словарю Schema.org) и скрытую микроразметку Microdata и RDFa.
• Вырезанный кусок теряет смысл. Anthropic приводит пример: фрагмент «выручка выросла на 3% за квартал» не называет ни компанию, ни период. Компания предлагает дописывать к фрагменту пояснение длиной от 50 до 100 токенов (кусочков слова, которыми модель считает текст).

Робот Claude скачивает скрипты примерно вдвое чаще робота ChatGPT, но страницу, собранную этим кодом, всё равно не видит. Ahrefs отследил 1 885 страниц, которые добавили JSON-LD с августа 2025 по март 2026 года, и сравнил их с 4 000 контрольных. Среди уже цитируемых страниц цитирований в AI Mode и ChatGPT больше не стало, а в AI Overviews (ИИ-сводках над выдачей Google) стало на 4,6% меньше, хотя уверенно связать это с разметкой авторы не могут.

Без готового текста в коде ответы ИИ о динамических сайтах будут неполными или устаревшими. : Вывод авторов исследования Vercel и MERJ, пересказ

Аргументы против: переписать код страницы недостаточно

У противоположной стороны тоже есть доводы, и они опираются на те же справки.

• Яндекс устроен иначе. Робот Яндекса сам решает, выполнять ли JavaScript. При серверном рендеринге или пререндеринге (заранее собранной копии страницы для роботов) выполнение скриптов можно запретить, а для текста, который появляется с задержкой, есть настройки ожидания.
• Для Алисы AI решает ранжирование. У плохо ранжированной страницы мало шансов стать источником, как бы точно ни были написаны её фрагменты.
• Разметка живёт на сильных сайтах. Страницы с разметкой в целом цитируются чаще. Ahrefs объясняет это тем, что разметку ставят на ухоженных сайтах с сильным контентом и ссылками, поэтому отказываться от общей работы над сайтом нельзя.

Что делать с этим прямо сейчас, по ролям?

Автору Дзена. В первых строках материала о продукте прямо пишите, что это, для кого и чем отличается. Проверка простая: абзац должен быть понятен, даже если его вырезать из статьи.

Маркетологу. Нейросети для маркетинга стали местом, где покупатель узнаёт цену. Держите публичную страницу с ценами видимым текстом, иначе ИИ возьмёт цифры с форумов.

Предпринимателю РФ и СНГ. Для Алисы AI следите за позициями в Поиске Яндекса и настройками выполнения JavaScript в Вебмастере. Для поиска ChatGPT проверьте, что OAI-SearchBot не закрыт в robots.txt.

Ждать, что роботы ИИ скоро начнут исполнять скрипты, я бы не стал: за год с лишним между исследованием Vercel и данными Ahrefs позиция не изменилась. Вероятнее другое: выиграют сайты, где ответ на вопрос «что это и для кого» стоит в первых строках каждого раздела. А Поиск Яндекса для русскоязычных продуктов останется главным входом в ответы Алисы.