ChatGPT w 1513 odpowiedziach mówi, że nie ma danych na żywo, Gemini w 10

Krótka odpowiedź: zapytaj ChatGPT o hydraulika, a prawie co druga odpowiedź ostrzeże cię własnymi słowami, że nie widzi niczego aktualnego. Mówi, że nie ma danych w czasie rzeczywistym albo że jego wiedza kończy się na przeszłej dacie - w 1513 z 3059 odpowiedzi, w ośmiu krajach. Gemini mówi to w 10, Perplexity w 7. A w 1527 z tych 1530 odpowiedzi asystent i tak wymienia firmę.

Pytasz o najlepszego elektryka w swoim mieście. ChatGPT podaje pięć nazwisk i dodaje wiersz, który łatwo przeoczyć: według stanu na ostatnią aktualizację nie może udzielić rekomendacji w czasie rzeczywistym. W 296 odpowiedziach datuje tę aktualizację - październik 2023 w 281, październik 2021 w 15. Firma, którą właśnie polecił, to więc ta, którą pamięta sprzed roku do trzech lat: ówczesny adres, ówczesne godziny, ówczesny właściciel. Gemini i Perplexity, przy tych samych pytaniach i w tych samych miastach, prawie nigdy tego nie mówią. ChatGPT mówi to w połowie odpowiedzi i poleca cię mimo wszystko.

Poleca cię klientowi, a potem mówi, że pracuje na wersji ciebie, która być może już nie istnieje.

Co zmierzono

Wróciliśmy do ośmiu badań Waseit: dwa pytania kupującego, najlepsi fachowcy danej branży w mieście, a potem najczęściej polecani i dlaczego, w 89 miastach we Francji, Wielkiej Brytanii, Brazylii, USA, Kanadzie, Australii, Nowej Zelandii i Singapurze, od 30 lipca do 16 października 2026, za każdym razem w języku kraju. To 3059 odpowiedzi ChatGPT (gpt-4o-mini), 3058 od Gemini, obie bez wyszukiwania w sieci, i 1364 od Perplexity, który szuka w sieci i był pytany tylko w trzech krajach. Liczyliśmy wyznanie tylko wtedy, gdy model mówi w pierwszej osobie, że nie ma danych w czasie rzeczywistym albo że jego własna wiedza kończy się w przeszłości. Nie liczyliśmy oferty platformy pokazującej klientowi dane na żywo ani rady, by sprawdzić bieżące godziny: to co innego. Nasz pierwszy detektor był skupiony na angielskim i gubił formy portugalskie i francuskie; dwie lektury go poprawiły, a liczba to dolna granica.

Co dokładnie mówi ChatGPT i czy mimo to wymienia firmę?

Dwie formy, często w tej samej odpowiedzi. W 1448 odpowiedziach mówi, że nie ma danych w czasie rzeczywistym. W 292 datuje swoją wiedzę: według stanu na ostatnią aktualizację, na podstawie wcześniejszej wiedzy. W obu przypadkach idzie dalej. W Los Angeles, zapytany o elektryka, mówi, że nie może udzielić rekomendacji w czasie rzeczywistym, ale może zaproponować cenionych elektryków na podstawie wcześniejszej wiedzy - i je wymienia. Jedyna różnica to, co model robi dalej. ChatGPT wymienia listę w prawie wszystkich 1513 odpowiedziach. Gemini i Perplexity w 17 odpowiedziach, w których mówią to samo, robią odwrotnie: odmawiają rankingu i odsyłają klienta na platformę. W Fortalezie Gemini wyjaśnia, że wobec braku bazy opinii w czasie rzeczywistym najlepiej skorzystać z zaufanych platform usługowych. Dla nich wyznanie jest powodem, by nie wybierać; dla ChatGPT - przypisem pod już dokonanym wyborem.

Co to znaczy, jeśli to ty jesteś firmą

Asystent, który najczęściej wymienia firmy, jest też tym, który najotwarciej przyznaje, że może opisywać wersję ciebie, która się zmieniła. To ma znaczenie w sposób bardzo konkretny. Jeśli ChatGPT poleca cię z migawki z października 2023, poleca ówczesny adres, godziny, numer telefonu i właściciela - a jeśli coś z tego się zmieniło, przysłany klient trafia pod niewłaściwe drzwi. Dwa praktyczne wnioski. Po pierwsze, fakty, które maszyna z czasem myli - nazwa, adres, godziny, telefon - muszą mówić to samo wszędzie, gdzie maszyna je czyta, aby stara pamięć i bieżące wyszukiwanie wskazywały to samo miejsce. Po drugie, nic, co napiszesz, nie odświeży treningu ChatGPT; to, co możesz zrobić, to być spójnym i aktualnym wszędzie, gdzie on albo klient zajrzą w następnej kolejności. To rozsądne kroki, nie dźwignie o zmierzonym efekcie, i nie sprawdzaliśmy, czy sprawiają, że firma jest wymieniana częściej. Pozostaje pytanie, którego stąd nie widać: gdy ChatGPT poleca cię z pamięci, czy wersja, którą pamięta, to wciąż ty? Wczoraj patrzyliśmy, dokąd asystent odsyła klienta po reklamację: SI 218 razy mówi, gdzie sprawdzić firmę, raz gdzie złożyć skargę.

A twoja firma - co mówią asystenci?

Bezpłatny audyt Waseit zadaje ChatGPT i Gemini pytania, które naprawdę wpisują twoi klienci, w ich języku i dla twojego miasta, i czyta odpowiedzi jedna po drugiej. Pyta ChatGPT tak samo jak to badanie - przez interfejs programistyczny, gdzie odpowiada z pamięci - więc widzisz dokładnie tę zapamiętaną wersję, o której mówi ten artykuł. W około 60 sekund dostajesz ocenę na 100, konkurentów wymienionych zamiast ciebie i pytania, w których się nie pojawiasz. Za darmo, bez konta i bez karty; adres e-mail odblokowuje tylko nazwy konkurentów i plan działania. To datowana migawka, nie ranking: odpowiedzi zmieniają się z dnia na dzień, i nie obiecujemy żadnej pozycji. Ale mówi, co maszyna mówi o tobie dziś - jedyna rzecz, której jej własne zastrzeżenie nie potrafi zaręczyć.

Czego to nie dowodzi

• To odpowiedzi modeli przez ich interfejsy programistyczne, bez lokalizacji użytkownika; ChatGPT i Gemini odpowiadały bez wyszukiwania w sieci, Perplexity szukał i był pytany tylko w trzech krajach. ChatGPT to tu gpt-4o-mini, niekoniecznie model z aplikacji, która potrafi szukać w sieci i nie dałaby tego zastrzeżenia; modele mogły się od tego czasu zmienić. Każde pytanie zadano raz, od 30 lipca do 16 października 2026.
• Liczba to dodatnie zliczenie jawnych sformułowań w pierwszej osobie. Inaczej sformułowane wyznanie mogło nam umknąć, a dwie lektury tylko obniżyły to ryzyko: 1513 to dolna, nie górna granica. Obie formy się nakładają: 227 odpowiedzi jednocześnie zaprzecza danym na żywo i datuje swoją wiedzę, więc nie są sumowane.
• Zastrzeżenie to niemal w całości zachowanie angielskie i portugalskie. Po francusku znaleźliśmy je w 61 odpowiedziach; prawie całkowity brak gdzie indziej dla Gemini i Perplexity to zliczenie słów, a inaczej sformułowane przyznanie, którego detektor nie wychwycił, może istnieć. Przeczytaliśmy przypadki graniczne Gemini i Perplexity po kolei: te, które odrzuciliśmy, to platforma oferująca klientowi dane na żywo, nie model mówiący o sobie.
• Powiedzenie według stanu na ostatnią aktualizację nie dowodzi, że rekomendacja jest błędna. Wiele wymienionych firm istnieje od dawna i się nie przeniosło. Zastrzeżenie dowodzi tego, że model sam nie potrafi wiedzieć, które się zmieniły - nie że konkretna się zmieniła.
• Nie mierzyliśmy, czy spójność i aktualność sprawiają, że firma jest wymieniana częściej, ani czy aplikacja, która szuka w sieci, poprawia to, co pamięta API. Mierzyliśmy, co modele mówią, nie co jest prawdą o każdej firmie.