Dasselbe Anliegen, anders formuliert: Der Assistent tauscht fast die ganze Liste aus

Kurze Antwort: Fragen Sie ChatGPT nach den besten Klempnern Ihrer Stadt und danach nach den meistempfohlenen Klempnern Ihrer Stadt. Dasselbe Anliegen, und nicht dieselbe Liste. In 682 Antwortpaaren behielt es nur 16 bis 29% der eben genannten Unternehmen, und in einem Viertel bis der Hälfte der Fälle gar keines.

Sie möchten wissen, ob die KI Sie empfiehlt. Die Frage setzt voraus, dass es eine Liste gibt und einen Platz darin. Unsere Erhebungen sagen etwas anderes: Es gibt eine Antwort, und sie hängt an genau dem Satz, der eingetippt wurde. Ändern Sie den Satz, ohne das Anliegen zu ändern, und derselbe Assistent antwortet am selben Tag, für dieselbe Stadt und dasselbe Gewerbe, größtenteils mit anderen Unternehmen. Ein Assistent war die Ausnahme: genau der, der im Web gesucht hat.

Ein Platz in der Liste ist keine Position. Er ist die Antwort auf einen Satz.

Was gemessen wurde

Die acht Studien von Waseit stellen in jeder Stadt und jedem Gewerbe zwei Formulierungen desselben Anliegens: « Was sind die besten {Gewerbe} in {Stadt}? » und danach « Liste die meistempfohlenen {Gewerbe} in {Stadt} auf und erkläre warum ». Bisher haben wir die Assistenten untereinander verglichen. Diesmal vergleichen wir jeden Assistenten MIT SICH SELBST, über seine beiden Antworten. Wir haben die Paare behalten, in denen beide Antworten mindestens ein Unternehmen nennen: 3.729 Paare, 8 Länder, 89 Städte, 148 Land-Gewerbe-Paare, erhoben zwischen dem 31. Juli und dem 16. Oktober 2026, jeweils in der Sprache des Landes. Für den Vergleich der drei Assistenten untereinander haben wir uns auf Frankreich, das Vereinigte Königreich und Brasilien beschränkt, die einzigen Länder, in denen alle drei geantwortet haben: 2.044 Paare, rund 681 je Assistent.

Firmennamen zuzuordnen hat keine offensichtliche Regel: « Poilâne » und « Boulangerie Poilâne » sind dasselbe Haus, « Table de l'Ours » und « Table de l'Olivier » nicht. Deshalb geben wir zwei Grenzen statt einer einzigen Zahl. Die STRENGE Grenze ordnet nur nach Normalisierung identische Namen zu; sie unterschätzt das Behaltene. Die WEITE Grenze ordnet zu, sobald ein unterscheidendes Wort geteilt wird, ohne Gewerbewörter und Städtenamen; sie ordnet absichtlich zu viel zu. Die Wahrheit liegt dazwischen, und wir veröffentlichen nur, was unter beiden gilt.

Was bleibt von der Liste, wenn die Frage umformuliert wird?

Das meiste geht. ChatGPT behält 16 bis 29% der Unternehmen seiner ersten Antwort, Gemini 12 bis 28%. Anders gesagt: Rund drei Viertel der Liste wechseln, wenn die Anfrage den Satz wechselt, ohne den Sinn zu wechseln. Und oft bleibt gar nichts: eine Umformulierung von vier bei ChatGPT nach weiter Zuordnung, eine von zwei nach strenger. Das an die Spitze gesetzte Unternehmen hält noch weniger: ChatGPT belässt es dort in 11 bis 19% der Paare, Gemini in 6 bis 11%.

Ein Assistent hebt sich deutlich ab, und es ist unter beiden Zuordnungen derselbe: Perplexity behält 37 bis 50% seiner Liste und setzt dasselbe Unternehmen dreimal häufiger wieder an die Spitze als Gemini. Es ist auch der Einzige der drei, der vor dem Antworten Webseiten abgerufen hat; ChatGPT und Gemini wurden über ihre Programmierschnittstelle ohne Suche befragt. Zwischen ChatGPT und Gemini dagegen übersteht der Abstand den Wechsel der Zuordnung nicht (29% gegen 28% bei der weiten): Wir trennen sie nicht.

Was das bedeutet, wenn Sie das Unternehmen sind

Eine einzelne Prüfung beweist nichts. Wenn Sie Ihr Gewerbe und Ihre Stadt einmal in ChatGPT eingeben und Ihr Name erscheint, haben Sie etwas Wahres und sehr Enges gelernt: Dieser Satz hat Sie an diesem Tag sichtbar gemacht. Der Satz daneben, der für Ihren Kunden dasselbe bedeutet, kann Sie draußen lassen. Deshalb wird keine Position gemessen, sondern eine Häufigkeit über mehrere Arten zu fragen. Das erklärt auch den Wettbewerber, der schwört, er « komme immer zuerst »: Er hat sich die Formulierung gemerkt, die ihn nach oben bringt. Wir hatten gezeigt, dass zwei Assistenten selten dasselbe antworten; derselbe Assistent, zweimal gefragt, antwortet sich selbst ebenfalls nicht gleich.

Und Ihr Unternehmen - was sagen die Assistenten?

Genau das macht der kostenlose Audit von Waseit: Er stellt nicht eine Frage, sondern acht, die Ihre Kunden wirklich eintippen, in deren Sprache und für Ihre Stadt, an ChatGPT und an Gemini, dazu einen Bekanntheitstest, der « die KI kennt Sie nicht » von « die KI kennt Sie und empfiehlt Sie nicht » trennt. In etwa 60 Sekunden sehen Sie eine Note von 100, die statt Ihrer genannten Wettbewerber, die Fragen, in denen Sie nicht auftauchen, und welcher Assistent tatsächlich im Web gesucht hat, statt aus dem Gedächtnis zu antworten. Kostenlos, ohne Konto und ohne Karte; eine E-Mail-Adresse schaltet nur die Namen der Wettbewerber und den Aktionsplan frei. Es ist eine datierte Momentaufnahme, keine Rangliste: Dieser Artikel handelt gerade davon, wie stark die Antworten schwanken, und wir versprechen keine Position.

Was das nicht beweist

• Firmennamen zuzuordnen hat keine einzige Regel, deshalb geben wir zwei Grenzen. Die weite ordnet absichtlich zu viel zu: Sie führt « Table de l'Ours » und « Table de l'Olivier » zusammen, weil sie ein Wort teilen. Die strenge trennt « Poilâne » von « Boulangerie Poilâne ». Die echte Zahl liegt dazwischen, und wir haben nur die Befunde behalten, die unter beiden gelten.
• Unter weiter Zuordnung liegen ChatGPT und Gemini einen Punkt auseinander: Wir trennen sie nicht, und dieser Artikel sagt nicht, welcher der beiden beständiger ist. Nur der Abstand von Perplexity zu den anderen beiden hält unter beiden Grenzen.
• Unsere gespeicherten Antworten behalten nur die ersten acht genannten Unternehmen. Wir vergleichen also kurze Listen, nicht alles, was der Assistent hätte nennen können: Zwei Antworten könnten einen neunten Namen teilen, den wir nie sehen.
• Nur zwei Formulierungen, je einmal gestellt, in einer einzigen Erhebung zwischen dem 31. Juli und dem 16. Oktober 2026. Das ist keine Messung dessen, was sich von einem Tag auf den anderen ändert, das ist eine andere Frage.
• Perplexity hat in dieser Erhebung nur in Frankreich, dem Vereinigten Königreich und Brasilien geantwortet, der Vergleich der drei Assistenten beschränkt sich also auf diese Länder. Und dass es im Web gesucht hat, geht mit seiner Beständigkeit einher, ohne dass wir gezeigt hätten, dass es die Ursache ist.
• Wir haben Namenswechsel gezählt, keine Fehler. Nichts hier sagt, dass eine der beiden Listen besser ist als die andere oder besser zu den Unternehmen passt, die die Stadt wirklich bedienen. Die automatische Namenserkennung kann außerdem ein Kriterium oder eine Plattform für ein Unternehmen halten, wie unsere früheren Ausgaben gemessen haben.