Przejdź do treści
Waseit
← Wszystkie artykuły
AEOGEO

Przeformułuj pytanie, a zmienisz listę

Dwa zwyczajne sposoby zadania tego samego pytania temu samemu modelowi, w 15 branżach i 13 miastach USA. Wspólnych nazw zostaje 11 %, a w 47 % przypadków żadna się nie powtarza. Na poziomie rynku 7 z 10 najczęściej wymienianych firm pozostaje jednak tych samych.

11 %

wspólnych nazw przy dwóch sformułowaniach, ten sam model

16 września 20268 min czytania
W tym artykule
  1. Co zmierzyliśmy
  2. Sformułowanie przesuwa niemal całą listę
  3. Model waży więcej niż sformułowanie
  4. Przetrwają nazwy, które wracają często
  5. Oba pytania nie każą modelom mówić tak samo
  6. Czego ten pomiar nie dowodzi
  7. Co to zmienia dla ciebie

Krótka odpowiedź: „którzy hydraulicy w Chicago są najlepsi?" i „wymień najczęściej polecanych hydraulików w Chicago i wyjaśnij dlaczego" nie dają tej samej listy. Ten sam model, to samo miasto, ta sama branża, dwa zwyczajne sformułowania: wspólnych nazw zostaje 11 %, a w 47 % porównań nie powtarza się żadna nazwa. Firma wymieniona jako pierwsza jest ta sama w 18 % przypadków.

47 %

porównań nie ma ani jednej wspólnej nazwy

7 z 10

najczęściej wymienianych firm przetrwa przeformułowanie

Audyt oparty na jednym pytaniu mierzy sformułowanie, nie widoczność. To, co przetrwa przeformułowanie, nie jest rankingiem, lecz powtarzalną obecnością.

Co zmierzyliśmy

Dane pochodzą z badania Waseit USA zebranego 13 września 2026. Każda komórka (jedna branża, jedno miasto) dostała dwa pytania, zadane ChatGPT i Gemini. Pierwsze: „What are the best [branża] in [miasto]? Give me a list with your recommendations." Drugie: „List the most recommended [branża] in [miasto] and explain why." Dwa zwyczajne sposoby zapytania o to samo.

Zostawiamy tutaj 15 branż mierzonych w 13 miastach (hotele, restauracje i piekarnie odkładamy: ich nazwa często zawiera nazwę miasta). To 780 odpowiedzi, po 195 na model i na sformułowanie. Dla każdej komórki i każdego modelu porównujemy listę firm z pierwszego pytania z listą z drugiego: 305 użytecznych porównań, tych, w których oba sformułowania wymieniły co najmniej jedną firmę.

Miara jest prosta: ze wszystkich nazw wymienionych łącznie przez dwa sformułowania, jaka część pada w obu? Katalogi liczone są osobno, a nagłówki porad wplecione w listy są odrzucane.

Sformułowanie przesuwa niemal całą listę

W 305 porównaniach oba sformułowania wymieniają łącznie 3108 różnych nazw firm. Tylko 370, czyli 12 %, pojawia się w obu. Średnio na porównanie pokrycie wynosi 11 %. A 143 z 305 porównań nie mają ani jednej wspólnej nazwy.

Mógłby to być efekt długości: drugie pytanie prosi o wyjaśnienie, więc model zużywa tekst na wyjaśnianie zamiast na nazwy. Powtórzyliśmy pomiar, zostawiając tylko trzy pierwsze nazwy z każdej odpowiedzi, przed jakimkolwiek ucięciem: pokrycie nadal wynosi 13 %, a 61 % porównań nie ma wspólnej nazwy w swojej czołowej trójce. To nie ucięcie, to inne firmy.

Model waży więcej niż sformułowanie

Dla porównania zmierzyliśmy to samo między dwoma modelami przy identycznym sformułowaniu: pokrycie spada do 2 %. Zmiana modelu zmienia odpowiedź jeszcze bardziej niż zmiana sformułowania. Rząd wielkości jest jednak ten sam: w obu przypadkach większość listy się zmienia.

Badanie Waseit USA, zbiór z 13 września 2026, 15 branż w 13 miastach. „Dwa sformułowania": średni udział wspólnych nazw między dwoma pytaniami zadanymi temu samemu modelowi. „Dwa modele": ten sam pomiar między ChatGPT a Gemini przy identycznym sformułowaniu.
BranżaDwa sformułowania, ten sam modelPorównania bez wspólnej nazwyDwa modele, to samo sformułowanie
Agencja pracy tymczasowej32 %6 z 249 %
Broker ubezpieczeniowy17 %7 z 253 %
Szkoła jazdy17 %8 z 212 %
Salon fryzjerski14 %2 z 172 %
Adwokat13 %6 z 150 %
Hydraulik12 %8 z 220 %
Agencja marketingowa11 %11 z 253 %
Warsztat samochodowy11 %7 z 250 %
Księgowy7 %15 z 243 %
Fotograf ślubny7 %13 z 250 %
Ślusarz6 %12 z 190 %
Instalator HVAC4 %15 z 190 %
Agent nieruchomości3 %12 z 161 %
Dentysta3 %10 z 121 %
Elektryk3 %11 z 162 %

Praca tymczasowa jest branżą najbardziej stabilną: jedna trzecia nazw przetrwa przeformułowanie i jest to też jedyna branża, w której oba modele choć trochę się zgadzają (9 %). Na drugim krańcu, u dentystów, elektryków, agentów nieruchomości i instalatorów HVAC, inaczej zadane pytanie daje praktycznie inną listę.

Przetrwają nazwy, które wracają często

Wniosek byłby zniechęcający, gdyby na tym się kończył. Nie kończy się. Na poziomie całego rynku przeformułowanie prawie nic nie zmienia: wśród 10 najczęściej wymienianych firm we wszystkich miastach i branżach 7 jest tych samych przy obu pytaniach. Robert Half, Aerotek, Kforce, Insight Global, Randstad USA, HUB International i A1 Driving School figurują w obu zestawieniach.

Inny znak stabilności: udział wskazań trafiających do nazwy obecnej w co najmniej trzech miastach wynosi 20 % przy obu sformułowaniach. Pytanie zmienia to, kto pojawia się w jednej odpowiedzi, a nie to, kto pojawia się często.

Pojedyncza odpowiedź to losowanie.

Zależy od sformułowania, modelu i komórki.

Powtarzalna obecność to sygnał.

Nazwa wracająca w wielu sformułowaniach i miastach nie zawdzięcza nic przypadkowi pytania.

Ranking nie istnieje.

Nie ma „tej" odpowiedzi AI dla twojej branży w twoim mieście, jest rozkład.

Oba pytania nie każą modelom mówić tak samo

Pytanie proszące o wyjaśnienie skraca listy. ChatGPT spada z 7,2 do 5,0 firm wymienianych na odpowiedź, Gemini z 4,1 do 3,1. Udział odpowiedzi wymieniających co najmniej jedną firmę zmienia się mało: 94 %, potem 90 % u ChatGPT, 82 %, potem 84 % u Gemini.

U Gemini drugie pytanie często daje listę kryteriów zamiast listy firm: nagłówki takie jak „independent brokers" czy „comprehensive service" pojawiają się tam, gdzie pierwsze pytanie dawało nazwy. Nasze czyszczenie usuwa większość z nich, nie wszystkie.

Czego ten pomiar nie dowodzi

Dwa sformułowania to nie wszystkie sformułowania.

To te dwa, które zadajemy, a nie próbka tego, co wpisują twoi klienci. Rzeczywista różnica może być większa lub mniejsza.

Długość odpowiedzi waży na części liczb.

Ograniczamy wyjście do 600 tokenów u ChatGPT i 1400 u Gemini: 48 z 195 odpowiedzi ChatGPT i 54 z 195 odpowiedzi Gemini kończą się w połowie zdania przy drugim pytaniu. Liczby nazw na odpowiedź są więc dolnymi granicami. Pokrycie utrzymuje się natomiast także na trzech pierwszych nazwach.

To, co widzi użytkownik aplikacji.

Odpowiedzi pochodzą z API; aplikacja może dodać wyszukiwanie w sieci i inne ustawienia.

Jeden zbiór.

Jeden dzień, 13 września 2026. Nie mierzymy tu zmienności z dnia na dzień ani między dwoma uruchomieniami tego samego pytania.

Doskonałe czyszczenie.

Nagłówki porad są odrzucane regułami; to, co się prześlizgnie, lekko zawyża liczbę różnych nazw, przy obu sformułowaniach.

Co to zmienia dla ciebie

Nie oceniaj swojej widoczności na podstawie jednego pytania.

Zadaj kilka, słowami swoich klientów, i patrz, co wraca.

Nie świętuj jednego pojawienia się ani nie panikuj z powodu jednej nieobecności.

Oba są szumem.

W branżach niestabilnych

(dentysta, elektryk, nieruchomości, HVAC) policz pojawienia w kilku sformułowaniach, zanim cokolwiek wywnioskujesz.

W branżach stabilnych

(praca tymczasowa, ubezpieczenia, szkoły jazdy) powtarzająca się nieobecność to prawdziwa diagnoza.

Nasz bezpłatny audyt zadaje ChatGPT i Gemini kilka pytań i liczy pojawienia zamiast miejsca w rankingu. To jedyny sposób na liczbę, która nie zależy od tego, jak wpisano pytanie.

Najczęstsze pytania

Czy dwa sposoby zadania tego samego pytania dają tę samą odpowiedź?
Nie. W 15 branżach w 13 miastach USA dwa zwyczajne sformułowania zadane temu samemu modelowi mają średnio tylko 11 % wspólnych firm, a 47 % porównań nie ma ani jednej wspólnej nazwy. Pierwsza wymieniona nazwa jest ta sama w 18 % przypadków.
Czy to tylko dlatego, że drugie pytanie zużywa słowa na wyjaśnianie?
Nie. Zostawiając tylko trzy pierwsze nazwy z każdej odpowiedzi, przed jakimkolwiek ucięciem, pokrycie nadal wynosi 13 %, a 61 % porównań nie ma wspólnej nazwy w czołowej trójce. To inne firmy, a nie po prostu mniej firm.
Co więc pozostaje stabilne?
Nazwy wymieniane często. Wśród 10 najczęściej wymienianych firm we wszystkich miastach i branżach 7 jest tych samych przy obu sformułowaniach. A udział wskazań trafiających do nazwy obecnej w co najmniej trzech miastach wynosi 20 % w obu przypadkach.
Na ilu odpowiedziach opierają się te liczby?
Na 780 odpowiedziach zebranych 13 września 2026 przez API ChatGPT i Gemini, dla 15 branż w 13 miastach USA, czyli 195 odpowiedziach na model i na sformułowanie, oraz 305 użytecznych porównaniach.