同じ要望を言い換えて二度たずねると、アシスタントはリストの大半を入れ替えた

短い答え - ChatGPT に「自分の街で最も良い水道業者」をたずね、次に「自分の街で最も勧められる水道業者」をたずねてください。要望は同じでも、同じリストにはなりません。682組の回答で、直前に挙げた企業のうち残ったのは16〜29%だけ。4分の1から半分の組では、1社も残りませんでした。

AI が自社を勧めてくれるのかを知りたい。その問いは、リストがあり、その中に順位があることを前提にしています。私たちの計測は別のことを示します。あるのは回答であり、それは入力されたその一文に貼り付いています。要望を変えずに文だけを変えると、同じアシスタントが同じ日に、同じ都市と同じ業種について、大部分を別の企業で答えます。例外は1つのアシスタントだけ - ウェブを実際に検索したものです。

リスト内の位置は順位ではありません。ひとつの文への回答です。

何を測ったか

Waseit の8つの調査は、各都市・各業種で同じ要望を二通りに問います。「{都市}で最も良い{業種}はどこですか」、そして「{都市}で最も勧められる{業種}を挙げ、理由を説明してください」。これまでは複数のアシスタントを互いに比べてきました。今回は各アシスタントを、それ自身の2つの回答どうしで比べます。両方の回答が少なくとも1社を挙げた組を残しました - 3,729組、8か国、89都市、148の国と業種の組み合わせ。2026年7月31日から10月16日にかけて、いずれもその国の言語で収集しました。3つのアシスタントを互いに比べる部分は、3つすべてが回答したフランス、英国、ブラジルに限定しています - 2,044組、1アシスタントあたり約681組です。

企業名の照合に自明な規則はありません。「Poilâne」と「Boulangerie Poilâne」は同じ店ですが、「Table de l'Ours」と「Table de l'Olivier」は違います。そこで単一の数値ではなく、2つの境界を示します。厳密な境界は、正規化後に完全一致する名前だけを結びつけ、残った分を低く見積もります。広い境界は、業種語と都市名を除いたうえで、特徴的な語が1つでも共通すれば結びつけ、意図的に結びつけすぎます。真の値はその間にあり、両方で成り立つことだけを公表します。

質問を言い換えると、リストには何が残るのか

大半が消えます。ChatGPT は最初の回答の企業の16〜29%、Gemini は12〜28%しか残しません。言い換えれば、意味を変えずに文だけを変えると、リストのおよそ4分の3が入れ替わります。しかも何も残らないことが珍しくありません - ChatGPT では広い照合で4回に1回、厳密な照合では2回に1回です。先頭に置かれた企業はさらに持ちません。ChatGPT がそこに留め置くのは組の11〜19%、Gemini は6〜11%です。

1つのアシスタントがはっきり抜けており、それは2つの照合のどちらでも同じです。Perplexity は自分のリストの37〜50%を残し、同じ企業を先頭に戻す頻度は Gemini の3倍です。3つのうちで回答前に実際にウェブページを取得した唯一のアシスタントでもあります。ChatGPT と Gemini はプログラミング用インターフェース経由で、検索なしに問い合わせました。一方 ChatGPT と Gemini の差は、照合を変えると消えます（広い照合で29%対28%）。私たちはこの2つの優劣をつけません。

自社にとって何が変わるか

一度の確認は何も証明しません。自分の業種と都市を一度 ChatGPT に入力して社名が出たなら、正しいけれども非常に狭いことを知っただけです - その文が、その日、自社を表示させた。隣の文、顧客にとっては同じ意味の文が、自社を外すかもしれません。だから測るのは順位ではなく、複数のたずね方にわたる頻度です。「うちは必ず一番に出る」と言い切る同業者がいるのも同じ理由で、その人は自分が出る言い方を覚えているのです。2つのアシスタントが同じ答えを返すことはまれだと以前に示しました。同じアシスタントも、二度たずねれば自分自身に同じ答えを返しません。

あなたの会社について、アシスタントは何と言うか

Waseit の無料監査がしているのは、まさにこれです。1つではなく8つ、顧客が実際に打ち込む質問を、その言語で、あなたの都市について ChatGPT と Gemini に投げます。さらに「AI はあなたを知らない」と「AI はあなたを知っていて勧めない」を分ける知名度テストを加えます。約60秒で、100点満点の評価、あなたの代わりに挙げられた競合、あなたが現れない質問、そしてどのアシスタントが記憶で答えずに実際にウェブを検索したかが分かります。無料、アカウント不要、カード不要。メールアドレスで開くのは競合名と改善計画だけです。これは日付入りの写真であって順位表ではありません - 回答がどれほど動くかを示したのがこの記事であり、私たちは順位を約束しません。

これが証明しないこと

• 企業名の照合に唯一の規則はなく、だからこそ2つの境界を示しています。広い境界は意図的に結びつけすぎ、語を1つ共有するという理由で「Table de l'Ours」と「Table de l'Olivier」を同一視します。厳密な境界は「Poilâne」と「Boulangerie Poilâne」を切り離します。本当の数値はその間にあり、両方で正しい結論だけを残しました。
• 広い照合では ChatGPT と Gemini の差は1ポイントです。私たちはこの2つの優劣をつけず、この記事はどちらが安定しているとも述べません。2つの境界の両方で保たれるのは、Perplexity と他の2つとの差だけです。
• 保存した回答には、挙げられた最初の8社しか残っていません。したがって比較しているのは短いリストであり、アシスタントが挙げられたすべてではありません。2つの回答が、私たちには見えない9番目の名前を共有している可能性があります。
• 言い方は2通りのみ、各1回、2026年7月31日から10月16日までの単一の収集です。日ごとに何が変わるかの計測ではなく、それは別の問いです。
• この収集で Perplexity が回答したのはフランス、英国、ブラジルだけで、3つのアシスタントの比較はこれらの国に限られます。またウェブを検索したことはその安定性と同時に見られるだけで、原因だと示したわけではありません。
• 数えたのは名前の入れ替わりであって、誤りではありません。2つのリストのどちらが優れているとも、その都市で実際に営業している企業をよく表しているとも、ここでは述べていません。自動抽出が基準やプラットフォームを企業と取り違えることもあり、過去の版で計測しています。