🤖 Насколько стабильны ответы нейросетей? Спойлер: далеко не всегда
Когда говорят про GEO-продвижение и попадание брендов в ответы ИИ, обычно обсуждают источники, цитируемость и качество контента. Но есть проблема, о которой говорят гораздо реже.
Один и тот же запрос в нейросети может давать совершенно разные ответы. Меняются не только формулировки, но и список компаний, ссылки на источники и даже структура ответа.
Поэтому мы решили проверить, насколько вообще стабильны ответы популярных нейросетей.
📊 Что сделали?
• В течение трёх недель задавали одинаковые запросы 5 нейросетям.
• Получили 1000 ответов.
• Сравнили их между собой с помощью TF-IDF и косинусной схожести.
В исследовании участвовали:
➖ Алиса AI
➖ Google AI Overview
➖ Perplexity
➖ Grok
➖ Gemini
Что оказалось самым интересным?
🔹 Алиса по коммерческим запросам оказалась самой непредсказуемой. В половине случаев ответы существенно отличались друг от друга.
🔹 По информационным запросам ситуация меняется: почти 80% ответов Алисы были похожими по структуре и лексике.
🔹 Google AI Overview показал совсем другое поведение. Ответы постоянно менялись, но в достаточно узком диапазоне — без крайностей и резких скачков.
🔹 Perplexity, Grok и Gemini продемонстрировали поведение, очень похожее на Google.
Главный вывод:
Если сегодня ваш бренд попал в ответ нейросети, это ещё не означает, что пользователь увидит его завтра. Ответы генеративных моделей значительно менее стабильны, чем классическая поисковая выдача.
Поэтому при оценке GEO-результатов важно смотреть не на единичный ответ, а на динамику и статистику за длительный период.
Подробнее о методике эксперимента, расчётах и результатах — в статье на Хабре:
https://habr.com/ru/articles/1051846/
#GEO #нейросети #SEO #исследование
Когда говорят про GEO-продвижение и попадание брендов в ответы ИИ, обычно обсуждают источники, цитируемость и качество контента. Но есть проблема, о которой говорят гораздо реже.
Один и тот же запрос в нейросети может давать совершенно разные ответы. Меняются не только формулировки, но и список компаний, ссылки на источники и даже структура ответа.
Поэтому мы решили проверить, насколько вообще стабильны ответы популярных нейросетей.
📊 Что сделали?
• В течение трёх недель задавали одинаковые запросы 5 нейросетям.
• Получили 1000 ответов.
• Сравнили их между собой с помощью TF-IDF и косинусной схожести.
В исследовании участвовали:
➖ Алиса AI
➖ Google AI Overview
➖ Perplexity
➖ Grok
➖ Gemini
Что оказалось самым интересным?
🔹 Алиса по коммерческим запросам оказалась самой непредсказуемой. В половине случаев ответы существенно отличались друг от друга.
🔹 По информационным запросам ситуация меняется: почти 80% ответов Алисы были похожими по структуре и лексике.
🔹 Google AI Overview показал совсем другое поведение. Ответы постоянно менялись, но в достаточно узком диапазоне — без крайностей и резких скачков.
🔹 Perplexity, Grok и Gemini продемонстрировали поведение, очень похожее на Google.
Главный вывод:
Если сегодня ваш бренд попал в ответ нейросети, это ещё не означает, что пользователь увидит его завтра. Ответы генеративных моделей значительно менее стабильны, чем классическая поисковая выдача.
Поэтому при оценке GEO-результатов важно смотреть не на единичный ответ, а на динамику и статистику за длительный период.
Подробнее о методике эксперимента, расчётах и результатах — в статье на Хабре:
https://habr.com/ru/articles/1051846/
#GEO #нейросети #SEO #исследование