人口1万201人の町で、三つのAIのうち二つがあなたのパン屋を名前で挙げます
48の回答、8つの自治体、パリから人口1万201人の郡都まで。GeminiとPerplexityはどこでも実在のパン屋を住所つきで挙げます。ChatGPTが問い返さずに答えるのはパリだけでした。
今月公表された調査が需要を数字にしています。直近の地域の店探しでAIツールを使った人は23%、月に一度以上おすすめを尋ねる人は31%。もう一つ、五月の調査は、競争が薄いぶん小さな地域のほうが入り込みやすいと述べていました。
どちらも、地方の商店主が本当に抱く問いには答えていません。うちの町は、AIが誰かを知っているには小さすぎるのか。
私たちにも答えられませんでした。三つの全国調査は39都市を覆いますが、最も小さいのがグルノーブルです。そこで今夜、顧客が実際に暮らす場所で測りました。
手順
首都からサン=タマン=モンロン、人口1万201人までの八つの自治体。あいだにナント(33万5634人)、シャルトル(3万8209人)、ヴィエルゾン(2万4694人)、ゲレ(1万2839人)。職種は二つ - パン屋と自動車整備 - 結果がパンだけに左右されないように。アシスタントは三つ。質問はどこでも同一で、変わるのは自治体だけです。
48の回答に加えて、ChatGPTへの32回の対照抽出。問い直さなければ、効果とコイン投げの区別がつきません。この対照が私たちの最初の読みを覆しました。何を正したのかを述べる価値があります。
よい知らせ、そしてそれは明確です
GeminiとPerplexityは、人口1万201人まで、どこでも実在の地元商店を挙げます。十二の回答のうち、名前のないものはゼロ。しかも一般論ではなく、住所つきの店名です。
サン=タマン=モンロン
:Aux 3 Choux、Maison Aveline、Aux Épis d'Or、Au Merle Blanc、La Chaumière、Pâtisserie-Chocolaterie Franck Cosyns。
ゲレ
:J&F Boulangerie Pâtisserie、セナトルリー通り - 二つのエンジンが同じ住所で挙げ、Perplexityは旅行ガイドPetit Futéから取ったと明記しています。
人口一万の郡都の商店は、したがって十分に名指しできます。「AIには小さすぎる」という恐れは測定に耐えません - ただし、ウェブを見にいくエンジンを見るかぎりにおいて。
ChatGPTは別の話です
八つの自治体にわたる32回の抽出のうち、問い返されたことが一度もないのはパリだけです。ほかはすべて - リヨンを含めて - 四回に一度か二度、一覧の代わりに質問が返ってきます。
「ゲレの中心部のパン屋がよろしいですか、それともチェーン店も含めますか。住所と営業時間も必要ですか」
これは拒否ではありません。できないとは決して言わない。ボールを投げ返すのです。パン屋を探していた急ぎの客にとって、結果は同じです - 名前が一つも手に入らない。
そしてChatGPTがパン屋を挙げることに応じたとき、その数は規模とともに崩れます。パリで8と8、リヨンで6、ナントで2、ゲレで2、サン=タマン=モンロンで1。
規模より職種が効きます
対照がそれを示しました。私たちの最初の読みに反して、です。32回の抽出で、整備工場は16回中16回、名前を得ます。パン屋は16回中6回。同じエンジン、同じ夜、同じ自治体。
つまり支配的な要因は人口ではなく、職種です。人口15万6千のグルノーブルのパン屋も、ヴィエルゾンのパン屋と同じ頻度で質問を返されます。
見つからなかったこと
私たちは全国チェーンへの後退を探していました。近所のパン屋を知らないぶん、アシスタントが大手の名を挙げるだろう、と。魅力的な仮説ですが、私たちの測定では誤りです。挙げられた名前のうち全国チェーンが占める割合、大都市と小自治体の順で - ChatGPTは17%のあと0%、Geminiは21%のあと32%、Perplexityは27%のあと28%。明確な効果はありません。
同様に、五月の主張 - 小さな地域のほうが入りやすい - も半分しか現れません。検索する二つのエンジンの一致は、整備工場ではパリの7%からゲレの27%へ上がりますが、パン屋では横ばいです。二職種のうち一つ。結果ではなく、手がかりとして記します。
月曜の朝にできること
小さな自治体にいるなら、あなたの経路は検索するエンジンです。
GeminiとPerplexityはすでにあなたを挙げています。ChatGPTで可視性を判断しないこと - それはあなたを挙げる代わりに、客に質問を返します。
あなたを名指し可能にするのは住所です。
J&F Boulangerieを挙げた二つのエンジンは、いずれも通りの名を出しました。店を単語から分けるのはそこです。
地域の名簿は、パリよりもあなたの町でこそ重い。
Perplexityはゲレについて Petit Futé を引いています。人口一万二千の自治体では、ひと握りの情報源が回答のすべてを作る - だからそこに載ることがすべてを変えます。
一度の試験が失敗したくらいで、自分を見えない者と決めつけないこと。
私たちの測定は、同じ商店が三つのエンジンのうち二つに挙げられることを示しています。三つ目は「あなたは存在しない」と言っているのではなく、どの地区かと尋ねているのです。
限界と、私たち自身の手順の誤り
八つの自治体、二職種、一つの夜、エンジンごとに一モデル。これは標本調査です。挙げられた商店が実在するかを一つずつ確かめてはいません - 回答を読んだのであって、パン屋を監査したのではない。そして全国調査との比較は別の日付を持つため、前後比較として扱うことは許されません。
最後に、機械ではなく読むことで見つかった誤りを。私たちの拒否検出は、アポストロフィが直線ではなく約物のとき「je n'ai pas d'accès」を取り逃していました。昨日取り逃したポルトガル語の接続法と同じ系統の穴です。修正し、ここに書きます。既知の欠陥を伏せて出した数字は、より小さく正直な数字より値打ちがないからです。