跳到正文
Waseit
← 全部文章
图片:Devon Saccente / Unsplash · 英国
AEOGEO

纽卡斯尔:Gemini每三个回答就有一个在说澳大利亚

问到纽卡斯尔的商家,Gemini有13/36次回答的是澳大利亚的纽卡斯尔;问伯明翰,40次中有4次答的是美国阿拉巴马州。ChatGPT一次也没有。

36个中13个

Gemini对“Newcastle”的回答说的是新南威尔士州的纽卡斯尔(36%)

Waseit 团队2026年10月13日6 分钟读完
本文目录
  1. 测量了什么
  2. 同样的五个行业两次都去了澳大利亚
  3. 谷歌要求完整地址
  4. 对商家意味着什么
  5. 这不能证明什么

简短回答:有时说的是另一座城市。我们在英国13座城市,不提国名,通过API向ChatGPT和Gemini询问水管工、牙医、会计师等最多20个行业的推荐。对“Newcastle”,Gemini在36次中有13次回答的是新南威尔士州的纽卡斯尔:持有“NSW Fair Trading”执照的水管工、装有“HICAPS”终端的牙科诊所、查尔斯敦和麦夸里湖的会计师。对“Birmingham”,40次中有4次回答的是阿拉巴马州的伯明翰。 这17个回答在地球另一端推荐了73家不同的商家,共88次。被问同样问题的ChatGPT,两座城市的76个回答没有一个跑到国外。在其余11座城市,两个模型都没有找到离开英国的回答。

40个中4个

Gemini对“Birmingham”的回答说的是阿拉巴马州的伯明翰

88

次推荐了错误国家的商家(Gemini的17个回答,73家)。ChatGPT:0次

问题说了城市,却没有一个字说国家。

测量了什么

我们于2026年10月12日重读的英国研究:每个行业、每座城市两个买家问题(“What are the best plumbers in Newcastle? Give me a list with your recommendations.”和“List the most recommended plumbers in Newcastle and explain why.”),于2026年7月31日通过API向ChatGPT(gpt-4o-mini)和Gemini提出,不开网页搜索,也不带任何位置信息,覆盖英国13座城市、最多20个行业:共976个回答,每个模型488个。问题像英国人那样只写城市名,从不写国家。我们在每个回答中寻找别国的迹象,即英国不存在的专有名词(“NSW Fair Trading”“AHPRA”“Lake Macquarie”“Alabama”“Vestavia Hills”),以及英国的迹象(“Gas Safe”“NICEIC”“Jesmond”“Edgbaston”、以英镑计的价格)。检测器先用必须捕捉和必须放过的说法测试过:爱丁堡有家水管公司叫Homewood,“license number”是Gemini对英国Gas Safe证件的说法,HMO是英国的合租房。随后我们读完了两个模型对纽卡斯尔和伯明翰的全部152个回答,以及其他城市中每个带有外国迹象的回答:有两个,都是误报(伦敦的“modern Australian”菜式,布里斯托尔的美式保险建议)。每个回答都按其自身内容判定,被判在国外的回答中提到的商家由人工清点:88次推荐,73家不同商家。

纽卡斯尔和伯明翰的152个回答:按模型和所描述的城市划分。
模型与城市回答关于英国城市关于另一座城市无地点或存疑在国外被提到的商家
Gemini,纽卡斯尔362313 (新南威尔士州)066
Gemini,伯明翰40364 (阿拉巴马州)022
ChatGPT,纽卡斯尔3634020
ChatGPT,伯明翰4038020
合计15213117488

同样的五个行业两次都去了澳大利亚

错误并不分散。在纽卡斯尔,会计师、保险经纪、水管工、电工和牙医在两个问题中都去了澳大利亚;房产和租赁中介、酒店、招聘机构、营销公司、锁匠、燃气工程师、汽修厂、理发店和美容院则一次也没有。 带英式名称的行业(“gas engineer”“letting agent”“garage”)每次都留在英国。离开的行业在澳大利亚名称都相同,但酒店和理发店名称也相同,却留下了。读者得到的是针对另一个国家的建议:纽卡斯尔泰恩河畔的患者被告知要确认牙医是否是Medibank等健康保险的“preferred provider”,房主被告知水管工需要新南威尔士州的执照,八位婚礼摄影师中有五位的链接以.com.au结尾。在伯明翰,被放到阿拉巴马州的两个牙医回答建议确认诊所是否与保险“in-network”,这是美国的概念。ChatGPT在两座城市都没有离开英国;它为纽卡斯尔给出的一份电工名单提到“Aussie Electrical”和“Civic Electrical”却没说在哪里,我们将其记为存疑而非国外。Gemini也能有意答对:它的一个电工回答以“Birmingham, UK”开头,另一个以“Birmingham, Alabama”开头。

纽卡斯尔,Gemini:各行业组被放到新南威尔士州的回答数。
行业回答关于新南威尔士州的纽卡斯尔
会计师、保险经纪、水管工、电工、牙医1010
律师(solicitor)、驾校、婚礼摄影师63
房产和租赁中介、酒店、招聘机构、营销公司、锁匠、燃气工程师、汽修厂、理发店、美容院200
合计3613

谷歌要求完整地址

谷歌关于本地商家结构化数据的文档(Search Central,2026年9月8日更新,2026年10月12日阅读)把地址定义为商家的实际所在地,并要求尽量填写更多项目;其示例一直写到地区、邮政编码和国家。只有一个城市名,正是我们的问题交给助手的东西,而对纽卡斯尔来说这不够。

对商家意味着什么

如果你所在的城市与别的城市同名,就在机器会读取的每一处写上完整地名:写“Newcastle upon Tyne”而不是“Newcastle”,并附上郡或地区、邮政编码和国家,写在联系页面、页面标题、地图商家信息和结构化数据中。在国外有同名城市的英国城市不只纽卡斯尔和伯明翰;珀斯、里士满、汉密尔顿和剑桥都有好几个,我们没有测量它们。你改变不了顾客输入的问题,但可以让自己的页面对你所在的城市不留疑问。这并不保证会被提到。

这不能证明什么

  • 这些是模型通过API给出的回答,没有网页搜索,也没有用户位置:这是我们审计的提问方式。使用Gemini应用的英国用户可能会被定位并得到英国的回答;我们没有测量应用。
  • 问题只写了城市而没写国家,就像人们可能输入的那样。加上“UK”或“upon Tyne”很可能会改变回答;我们没有测试。
  • 每个问题一次,于2026年7月31日收集。此后模型已有变化,再来一次也许会有别的行业跑到国外。
  • 在纽卡斯尔和伯明翰以外,没有外国迹象的回答都算作英国:一个放在国外却没写任何外国地名、机构或货币的回答,可能会被我们漏掉。
  • 我们判定的是每个回答把商家放在哪里,而不是这些商家是否存在:那是另一项测量。

常见问题

ChatGPT或Gemini会推荐错误城市的商家吗?
会,当城市名在别处也存在时。通过API、不带位置询问“Newcastle”的商家,Gemini在36次中有13次回答新南威尔士州的纽卡斯尔;问“Birmingham”时,40次中有4次回答阿拉巴马州的伯明翰。ChatGPT两座城市的76个回答没有一个放到国外。
哪些行业受到影响?
在纽卡斯尔,会计师、保险经纪、水管工、电工和牙医在两个问题中都去了澳大利亚,律师、驾校和婚礼摄影师在其中一个问题中去了。房产和租赁中介、酒店、锁匠、燃气工程师、汽修厂、理发店和美容院一次也没有。在伯明翰:牙医两次,餐厅和电工的回答各一次。
所在城市有同名城市的商家该怎么做?
在机器会读取的每一处写上完整地名:城市、郡或地区、邮政编码和国家,写在联系页面、页面标题、地图商家信息和结构化数据中,正如谷歌文档所要求的。这并不保证会被提到。
这些数字从哪里来?
来自Waseit的英国研究,于2026年7月31日收集:在13座城市通过API得到的ChatGPT(gpt-4o-mini)和Gemini的976个回答。纽卡斯尔和伯明翰的每个回答都于2026年10月12日人工阅读,其他城市中带有别国迹象的每个回答也是。

每日文章,邮件送达

每天最多一封邮件。一键退订。您的地址仅用于此。 隐私