Reddit AI поиск отсекает личный опыт: формальные комментарии попадают в ответы на 49% чаще

Препринт (научная работа, ещё не прошедшая рецензирование коллегами) опубликован исследователями из Университета Иллинойса в Урбана-Шампейн. Команда прогнала 10 000 вопросов через reddit ai поиск три раза, получила 30 000 ответов и сопоставила их с 14,68 миллиона комментариев из 20 тематических сабреддитов, посвящённых советам и поддержке. Работа не прошла рецензирование, а выводы касаются только этого сегмента Reddit.

Что именно проверяли учёные?

Исследователи хотели понять, какие комментарии reddit ai поиск цитирует в своих ответах, а какие пропускает. Для этого они взяли реальные посты из 20 сабреддитов (от крупных вроде r/personalfinance и r/AskDocs до небольших вроде r/UKJobs) и с помощью языковой модели переформулировали их в короткие поисковые запросы.

Каждый запрос прогнали трижды с интервалом около пяти часов, чтобы убедиться: различия в ответах связаны с алгоритмом, а не с изменениями на самой площадке. Когда два прогона вытягивали одни и те же исходные посты, ответы оказывались почти идентичными.

Затем команда сравнила выбранные комментарии с теми, которые система проигнорировала в тех же обсуждениях. Оценивали формальность текста (через текстовый классификатор), наличие маркеров личного опыта (местоимения первого лица, прошедшее время), рейтинг голосов, позицию в треде и возраст комментария.

Что обнаружили?

• Формальный стиль даёт преимущество. Комментарий на одно стандартное отклонение формальнее среднего получал на 49 % больше шансов попасть в ответ. Слова вроде «should» и «must» тоже повышали вероятность выбора (odds ratio 1,070, то есть отношение шансов, где 1,0 означает «без разницы»).

• Личный опыт снижает шансы. Комментарии с выраженным «опытным голосом» (experiential voice, когда автор говорит «я попробовал», «у меня было так») имели odds ratio 0,789, то есть шансы ниже на 21 %. Поддерживающий тон тоже проигрывал (0,924).

• Голоса решают больше всего. Рейтинг комментария внутри треда оказался самым сильным фактором: рост на одно стандартное отклонение увеличивал шансы в 2,88 раза. Медианный выбранный комментарий находился на 91-м перцентиле по голосам, невыбранный на 45-м.

• Ранние и длинные комментарии побеждают. Выбранные комментарии появлялись в медиане через 1,2 часа после поста. Невыбранные через 5,9 часа. Увеличение длины комментария на одно стандартное отклонение давало odds ratio 1,79, а наличие внешней ссылки поднимало его до 2,25.

• Первое лицо практически исчезает. В 1 000 проверенных запросах доля слов «I» и «my» упала с 3,3 % в цитируемых комментариях до 0,06 % в итоговых ответах. Исследователи подчеркнули: личное свидетельство трансформируется в обобщённый совет.

• Комментарии с нулевым или отрицательным рейтингом составили 0,53 % среди выбранных и 5,1 % в общей базе.

Что это меняет для вас?

Авторам Дзена и тем, кто пишет посты на форумах. Если вы публикуете личный опыт в сообществах, которые индексируют ИИ-поисковики, знайте: алгоритм, скорее всего, предпочтёт структурированный ответ без «я попробовал и вот что вышло». Это не повод отказываться от первого лица, но повод понимать, как ваш текст видит машина. Ссылки на сабреддиты под каждым ответом reddit ai поиск оставляет, проверяйте исходные треды, прежде чем цитировать выводы.

Маркетологам и аналитикам. Если вы используете Reddit как источник «голоса клиента», ИИ-ответы площадки уже не отражают весь спектр мнений. Они смещены к ранним, формальным, высоко оценённым комментариям. Для объективной картины открывайте сами треды, а не полагайтесь на агрегированную выдачу.

Предпринимателям в РФ и СНГ. Функция reddit ai поиск пока работает на англоязычных сабреддитах. Но тот же принцип наверняка актуален для любых платформ, внедряющих ИИ-поиск поверх пользовательского контента. Аналогичные вопросы стоит задать Яндексу, если нейропоиск начнёт агрегировать ответы из отзывов и комментариев на российских площадках.

Финальная деталь: типичный ответ reddit ai поиск использовал около семи разных сабреддитов, а исходный сабреддит, откуда пришёл вопрос, давал лишь 15 до 18 % результатов. Система перемешивает источники, и в итоге вы получаете не мнение конкретного сообщества, а статистическую выжимку, из которой вычищен голос конкретного человека.

По данным Search Engine Journal