Геозалежність AI-видачі ChatGPT: Результати незалежного тесту AI відповідей №1

Чи впливає геолокація на результати AI-видачі?

З поширенням звички звертатися до ChatGPT замість Google у нас, як у SEO-спеціалістів, що добре розуміють принципи формування пошукової видачі, виникли запитання про те, як саме працює логіка LLM. Насамперед зацікавило, чи впливає місцезнаходження користувача на зміст відповідей. Виявилось, подібних публічних досліджень небагато.  

У людей з нашої команди по одному і тому запиту, ChatGPT давав різні відповіді, і як нам здалось, ці відповіді враховували ГЕО тих, хто запитував. Це і стало тригером для запуску серії наших експериментів, ми не розуміли, як працює AI видача, і хотіли в цьому розібратися. 

Гіпотеза №1: AI-відповіді залежать від місцезнаходження користувача

Перед стартом експерименту ми сформулювали ключову гіпотезу на основі спостережень: ChatGPT може адаптувати відповіді залежно від геолокації користувача.
Логіка проста, якщо пошукові системи давно використовують IP-адресу та інші сигнали для персоналізації результатів, цілком можливо, що аналогічний підхід застосовують і мовні моделі.
Ми передбачали, що найбільші відмінності з’являться у локальних запитах, але були готові перевірити й менш очевидні випадки, щоб зрозуміти масштаб впливу геопозиції на AI-видачу.

Як ми тестували геозалежність AI відповідей: Методика дослідження

Щоб перевірити, чи впливає місцезнаходження користувача на результати AI-видачі, ми побудували максимально простий, але дуже наочний експеримент.

Вхідні умови:

• Використовуємо 2 залогінені акаунти ChatGPT (з версією GPT-5 або GPT-5 Plus)
• Використовуємо 2 інкогніто сесії для уникнення впливу історії запитів (версія GPT-4o mini) 
• Підключаємо 5 проксі-серверів з різними геолокаціями
• Вибрані GEO: тільки англомовні – США, Британія, Канада, Австралія, Нова Зеландія.
• Отримаємо на 1 запит: по 4 результати на кожне ГЕО, загалом 20 результатів на запит.

PS: Насправді, по цій логіці, експеримент проводило декілька людей, але висновки були отримані однакові у всіх учасників. 

Категорії запитів які ми підготували під тест:

1. Очевидно геозалежні — наприклад, where rent a car, Should I take an umbrella today?, dentist near me та інші.
2. Неочевидно геозалежні — наприклад, purchase gaming chair, buy air conditioner, where to buy wetsuit та інші.
3. Точно геонезалежні — наприклад, best coffee shop in London, Apple store in Tokyo, vegan restaurants in Berlin та інші.
   

Інші особливості перевірок, про які варто зазначити:

• Для кожної вищезгаданої категорії — 10 унікальних запитів (Усього – 30 запитів)
• Кожен запит запускався в новому чаті для уникнення впливу попередніх відповідей
• Всі результати фіксували одразу в таблиці Excel, без додаткових уточнень до AI
• Не змінювали синтаксис чи структуру питань між GEO, не додавали мовні маркери. 

Як геолокація впливає на AI-видачу: Результати тестів 

В принципі, якщо запитати у ChatGPT прямо: «Чи твої відповіді залежать від геолокації користувача?», він скаже, що ні в якому разі 🙂

Але насправді він моніторить дані вашого сеансу, тому ми і можемо спостерігати залежність відповідей від ГЕО. 

Варто зазначити, що це актуально для запитів з акаунтів, де ви дозволили йому отримувати цю інформацію та він має історію діалогу з вами. Якщо ж питання ставити в інкогніто-сесії, ChatGPT майже ніколи не повідомляє про геозалежність, ставить уточнюючі питання, якщо для відповіді важлива інформація про локацію. Хоча насправді результати іноді все одно відрізнялись. 

Для багатьох результатів з акаунтів ChatGPT одразу підвантажував карту:

Запит з акаунта: UK (logged in)

Карта не має вигляд стандартної Google Maps чи Bing maps, але цікаво звідки саме підтягуються ці результати (але це тема для наступних тестів). 

Для цього ж запиту в цьому ж ГЕО в інкогніто сесії результат був стриманішим:

Запит з акаунта: UK en (incogniton)

Також один з учасників експерименту попросив ChatGPT відповідати йому так, як для іншого регіону і виявилось, що це працює не погано. 

Іноді відповіді відрізнялись при абсолютно однакових умовах тесту:

Проаналізувавши всі сотні результати запитів ми сформували висновки експерименту:

1. Геозалежність відповідей
   • Аналіз показав, що видача ChatGPT є геозалежною у випадку запитів, які геозалежні або неочевидно геозалежні.
   • Для геоНезалежних запитів результати не залежать від розташування користувача.
2. Визначення місцезнаходження
   • ChatGPT може визначати приблизне місцезнаходження користувача, зокрема через дані сеансу, історію розмов та IP-адресу, що впливає на відповіді у геозалежних запитах.
3. Використання без облікового запису
   • Відповіді для платного користувача, авторизованого в акаунті, виявилися суттєво якіснішими, ніж у безкоштовному та інкогніто режимі (вони включають точні карти, та більш конкретні та точні відповіді.
   • При доступі до ChatGPT без аккаунта система здебільшого дає простi уточнюючі відповіді.
   • У деяких випадках модель коректно визначала місцезнаходження користувача і давала геозалежну відповідь навіть в інкогніто режимі. 
4. Інші особливості 
   • Не у всіх запитах геозалежність проявляється однаково. Наприклад по деяким запитам, (як про піцерію), GPT правильно визначає місто, в якому знаходиться користувач, але може додатково запитувати більш точне місцезнаходження. А в деяких випадках одразу пропонує результати в межах міста.
   • Навіть при використанні однієї й тієї ж IP-адреси та абсолютно ідентичного промпту система може генерувати відмінні відповіді.
   • Авторизація не завжди обов’язкова для визначення локації.
   • Якщо попросити відповідати так, ніби я знаходжуся в регіоні А, то це працює. Результати іноді будуть абсолютно однаковими, а іноді трохи відрізнятимуться.
   • У випадку запиту “emergency plumber in Sydney” навіть в інкогніто режимі GPT майже завжди видавав конкретні відповіді з контактними даними компаній, що наводить на думку про вплив “терміновості” у запиті на поведінку моделі.
     

ChatGPT явно демонструє здатність адаптувати відповіді під геолокацію користувача лише у разі запитів, де ця інформація релевантна, тоді як для загальних запитів геозалежність здебільшого відсутня.

Можете ознайомитися з запитами і отриманими відповідями:  Запити та видача по ним: Експеримент №1

Висновки і подальші тести AI видачі

Результати експерименту доводять гіпотезу геозалежності при формуванні AI-видачі, що має прямий вплив на локальне SEO і стратегії просування бізнесів. 

У процесі тестування у нас виникли нові питання, які хочеться перевірити в наступних експериментах. Зокрема, цікаво дослідити, як саме формується відповідь AI у випадках, коли він відображає карту, адже це не виглядає ані як Google Maps, ані як Bing Maps, як видно на скріншотах вище. 

Також потребує окремого аналізу логіка формування брендових результатів: видно, що використовується пошук, однак принципи ранжування відрізняються від класичного Google чи Bing.

Далі буде!

Автор

Dmytro Kovshun

Дмитро Ковшун є засновником компанії Luxeo Team – SEO Outsourcing Company. Як провідний фахівець у галузі, він визнаний експертом у сфері SEO-просування сайтів. З багаторічним досвідом і глибоким розумінням цієї галузі, Дмитро продовжує сприяти успіху та інноваціям у стратегіях SEO, допомагаючи бізнесам досягати їхніх онлайн-цілей.