Геозависимость AI-выдачи ChatGPT: Результаты независимого теста AI ответов №1

Влияет ли геолокация на результаты AI-выдачи?

С распространением привычки обращаться к ChatGPT вместо Google у нас, как у SEO-специалистов, хорошо понимающих принципы формирования поисковой выдачи, возникли вопросы о том, как именно работает логика LLM. В первую очередь заинтересовало, влияет ли местоположение пользователя на содержание ответов. Оказалось, подобных публичных исследований немного.

У людей из нашей команды на один и тот же запрос ChatGPT давал разные ответы, и как нам показалось, эти ответы учитывали ГЕО тех, кто спрашивал. Это и стало триггером для запуска всей серии наших экспериментов, мы не понимали, как работает AI выдача, и хотели в этом разобраться.

Гипотеза №1: AI-ответы зависят от местоположения пользователя

Перед стартом эксперимента мы сформулировали ключевую гипотезу на основе наблюдений: ChatGPT может адаптировать ответы в зависимости от геолокации пользователя.

Логика простая, если поисковые системы давно используют IP-адрес и другие сигналы для персонализации результатов, вполне возможно, что аналогичный подход применяют и языковые модели.

Мы предполагали, что наибольшие различия появятся в локальных запросах, но были готовы проверить и менее очевидные случаи, чтобы понять масштаб влияния геопозиции на AI-выдачу.

Как мы тестировали геозависимость AI ответов: Методика исследования

Чтобы проверить, влияет ли местоположение пользователя на результаты AI-выдачи, мы построили максимально простой, но очень наглядный эксперимент.

Входные условия:

• Используем 2 залогиненных аккаунта ChatGPT (с версией GPT-5 или GPT-5 Plus)
• Используем 2 инкогнито сессии для избежания влияния истории запросов (версия GPT-4o mini)
• Подключаем 5 прокси-серверов с разными геолокациями
• Выбранные GEO: только англоязычные – США, Британия, Канада, Австралия, Новая Зеландия.

Получим на 1 запрос: по 4 результата на каждое ГЕО, всего 20 результатов на запрос.

PS: На самом деле, по этой логике, эксперимент проводило несколько человек (поэтому мы имеем намного большую выборку ответов), но выводы были получены одинаковые у всех участников.

Категории запросов которые мы подготовили под тест:

1. Очевидно геозависимые — например, where rent a car, Should I take an umbrella today?, dentist near me и другие.
2. Неочевидно геозависимые — например, purchase gaming chair, buy air conditioner, where to buy wetsuit и другие.
3. Точно геонезависимые — например, best coffee shop in London, Apple store in Tokyo, vegan restaurants in Berlin и другие.
   

Другие особенности проверок, о которых стоит отметить:

• Для каждой вышеупомянутой категории — 10 уникальных запросов (Всего – 30 запросов)
• Каждый запрос запускался в новом чате для избежания влияния предыдущих ответов
• Все результаты фиксировали сразу в таблице Excel, без дополнительных уточнений к AI
• Не изменяли синтаксис или структуру вопросов между GEO, не добавляли языковые маркеры.

Как геолокация влияет на AI-выдачу: Результаты тестов

В принципе, если спросить у ChatGPT прямо: «Зависят ли твои ответы от геолокации пользователя?», он скажет, что ни в коем случае 🙂

Но на самом деле он мониторит данные вашей сессии, поэтому мы и можем наблюдать зависимость ответов от ГЕО.

Стоит отметить, что это актуально для запросов с аккаунтов, где вы разрешили ему получать эту информацию и он имеет историю диалога с вами. Если же вопросы задавать в инкогнито-сессии, ChatGPT почти никогда не сообщает о геозависимости, ставит уточняющие вопросы, если для ответа важна информация о локации. Хотя на самом деле результаты иногда все равно отличались.

Для многих результатов с аккаунтов ChatGPT сразу подгружал карту:

Запрос с аккаунта: UK (logged in)

Карта не имеет вид стандартной Google Maps или Bing maps, но интересно откуда именно подтягиваются эти результаты (но это тема для следующих тестов).

Для этого же запроса в этом же ГЕО в инкогнито сессии результат был более сдержанным:

Запрос с аккаунта: UK en (incognito)

Также один из участников эксперимента попросил ChatGPT отвечать ему так, как для другого региона и оказалось, что это работает неплохо.

Иногда ответы отличались при абсолютно одинаковых условиях теста:

Проанализировав все сотни результатов запросов мы сформировали выводы эксперимента:

1. Геозависимость ответов
   • Анализ показал, что выдача ChatGPT является геозависимой в случае запросов, которые геозависимы или не очевидно геозависимы.
   • Для геонезависимых запросов результаты не зависят от расположения пользователя.
2. Определение местонахождения
   • ChatGPT может определять приблизительное местонахождение пользователя, в частности через данные сеанса, историю разговоров и IP-адрес, что влияет на ответы в геозависимых запросах.
3. Использование без учетной записи
   • Ответы для платного пользователя, авторизованного в аккаунте, оказались существенно более качественными, чем в бесплатном и инкогнито режиме (они включают точные карты, и более конкретные и точные ответы).
   • При доступе к ChatGPT без аккаунта система обычно дает простые уточняющие ответы.
   • В некоторых случаях модель корректно определяла местонахождение пользователя и давала геозависимый ответ даже в инкогнито режиме.
4. Другие особенности
   • Не во всех запросах геозависимость проявляется одинаково. Например, по некоторым запросам (как о пиццерии), GPT правильно определяет город, в котором находится пользователь, но может дополнительно запрашивать более точное местонахождение. А в некоторых случаях сразу предлагает результаты в черте города.
   • Даже при использовании одного и того же IP-адреса и абсолютно идентичного промпта система может генерировать отличные ответы.
   • Авторизация не всегда обязательна для определения локации.
   • Если попросить отвечать так, будто я нахожусь в регионе А, это работает. Результаты иногда будут абсолютно одинаковыми, а иногда будут немного отличаться.
   • В случае запроса “emergency plumber in Sydney” даже в инкогнито режиме GPT почти всегда выдавал конкретные ответы с контактными данными компаний, что приводит к мысли о влиянии “срочности” в запросе на поведение модели.
     

ChatGPT явно демонстрирует способность адаптировать ответы под геолокацию пользователя только в случае запросов, где эта информация релевантна, тогда как для общих запросов геозависимость в основном отсутствует.

Можете ознакомиться с запросами и полученными ответами  Запросы и выдача по ним: Эксперимент №1

Выводы и дальнейшие тесты AI выдачи

Результаты эксперимента доказывают гипотезу геозависимости при формировании AI-выдачи, что имеет прямое влияние на локальное SEO и стратегии продвижения бизнесов.

В процессе тестирования у нас возникли новые вопросы, которые хочется проверить в следующих экспериментах. В частности, интересно исследовать, как именно формируется ответ AI в случаях, когда он отображает карту, ведь это не выглядит ни как Google Maps, ни как Bing Maps, как видно на скриншотах выше.

Также требует отдельного анализа логика формирования брендовых результатов: видно, что используется поиск, однако принципы ранжирования отличаются от классического Google или Bing.

Дальше больше!

Автор

Dmytro Kovshun

Дмитрий Ковшун является основателем компании Luxeo Team – SEO Outsourcing Company. Как ведущий специалист в отрасли, он признан экспертом в области SEO-продвижения сайтов. С многолетним опытом и глубоким пониманием этой области, Дмитрий продолжает способствовать успеху и инновациям в SEO-стратегиях, помогая бизнесам достигать их онлайн-целей.