ChatGPT는 기사 보험을 확인하라고 404번 말하지만, 어디서인지는 한 번도 말하지 않는다

짧은 답: ChatGPT에 배관공, 전기 기사, 열쇠 수리공, 난방 설비 업체를 물으면 절반이 넘는 답변에서 보험에 가입했는지 확인하라고 말합니다. 8개국 89개 도시, 712개 답변 중 404개가 그렇습니다. 하지만 거의 언제나 "licensed and insured"라는 정형 문구이며, 확인할 등록부도, 요구할 증명서도 없습니다. 404개 중 0개입니다. Gemini는 246번으로 덜 말하지만 더 쓸모 있게 말합니다. 이름을 밝힌 업체에 대해 47번, 공공기관이나 요구해야 할 증명서와 함께 62번입니다. 웹을 검색하는 Perplexity는 312개 중 20번입니다.

견적서가 메일함에 도착합니다. 맨 아래에 많은 고객이 건너뛰는 한 줄이 있습니다. 보험사, 증권 번호, 날짜입니다. 프랑스에서는 이 한 줄이 법입니다. 10년 책임보험(décennale) 증명서는 견적서와 청구서에 첨부해야 하고, 이 보험에 가입하지 않은 시공업자는 징역 6개월과 7만 5000유로의 벌금을 받을 수 있습니다(Service Public Entreprendre, F2034, 2026년 4월 10일 확인). Gemini는 프랑스 고객에게 104개 답변 중 28개에서 이 증명서를 요구하라고 말하고 44개에서 décennale를 지목합니다. ChatGPT는 같은 104개 답변에서 배상책임보험을 26번, décennale를 1번 언급하고, 서류를 요구하는 일은 한 번도 없습니다.

ChatGPT는 "보험 있음"이라고 말한다. Gemini는 "증명서를 보여 달라"고 말한다.

무엇을 측정했나

Waseit의 여덟 개 조사는 구매자의 두 가지 질문, 즉 한 도시에서 어떤 업종의 가장 좋은 업체는 어디인지, 그다음 가장 많이 추천되는 업체는 어디이고 왜인지를 89개 도시에서 물었습니다. 프랑스(2026년 7월 30일), 영국(7월 31일), 브라질(8월 6일), 미국(9월 13일)에서 각 13개 도시, 캐나다 11개, 호주 10개, 뉴질랜드 6개, 싱가포르 10개 도시(10월 16일)이며, 모두 그 나라의 언어로 물었습니다. 전날과 같이 집 안으로 들어오는 네 업종, 즉 전기, 난방과 냉방, 배관, 열쇠만 남겼습니다. ChatGPT(gpt-4o-mini) 712개와 Gemini 712개 답변은 프로그래밍 인터페이스로 웹 검색 없이 얻었고, 웹을 검색하는 Perplexity 312개 답변은 프랑스, 영국, 브라질의 것입니다. 기사의 보험에 관한 문장을 모두 뽑고(insured, bonded, liability insurance, assurance, décennale, RC pro, segurado), 더 넓은 그물(insurance 단독, assuré, seguro)로 다시 훑어 739개 답변을 하나씩 읽었습니다. 69개는 제외했습니다. 프랑스의 "보험사 공인" 열쇠 수리공, 고객 자신의 주택 보험, 포르투갈어로 안전하다는 뜻의 seguro, "quality assurance" 등입니다. 남은 답변은 분류했습니다. 이름을 밝힌 업체에 보험이 있다고 말하는가, 일반적인 조언인가. 어떤 보험을 말하는가. 어디서 확인할지(공공기관), 무엇을 요구할지(증명서)를 말하는가.

어떤 어시스턴트가 "보험 있음"이라 말하고, 어떤 어시스턴트가 확인처를 말하나

ChatGPT에게는 정형 문구입니다. "licensed and insured" 또는 "licensing and insurance"가 404개 답변 중 267개에 나오며, 거의 언제나 답변을 마무리하는 조언 목록 안에 있습니다. 배관공이 면허와 보험을 갖췄는지 확인하세요, 라는 식입니다. 313개 답변에서는 특정 보험을 지목하지 않고, 90개에서 배상책임보험을 말합니다. 면허나 보험을 확인할 수 있는 기관을 지목한 적이 한 번도 없고, 증명서를 요구하지도, 보험이 의무라고 말하지도 않습니다. 이름을 밝힌 업체에 보험이 있다고 말한 것은 6번입니다. 싱가포르에서는 42번의 언급 중 2번이 "in Texas"를 덧붙입니다. 이전 호에서 우드랜즈에 대해 측정한 바로 그 착오입니다. Gemini에게는 서류입니다. 보험의 이름을 말합니다. décennale 44번, 배상책임보험 44번, 보증금(bonded) 41번, 산재보험 16번. 공공기관을 23번 지목합니다. 캘리포니아주 건설업자 위원회, 워싱턴주 노동산업부, 온타리오주 전기안전청, 퀸즐랜드주 건축위원회, 뉴질랜드 전기 작업자 등록부 등입니다. 증명서를 41번 요구합니다. 프랑스에서는 "obligatoire(의무)"라고 17번 쓰며, 모두 décennale에 관한 것입니다. 이름을 밝힌 업체에 보험이 있다고 말한 것은 47번으로, 열쇠 수리공이 많습니다. 영국에서는 "DBS-checked and fully insured", 미국에서는 "fully bonded, licensed and insured"입니다. Perplexity는 디렉터리가 보여주는 것을 옮깁니다. 영국에서의 12번 언급 중 9번이 한 디렉터리의 "verified insurance" 배지를 이름을 밝힌 전기 업체 옆에 옮겨 적습니다. 엔진보다 나라가 더 중요합니다. 미국에서 ChatGPT는 104개 중 92개 답변에서 보험을 말하고, 브라질에서는 3개입니다. Gemini는 59개와 0개입니다. 프랑스에서 Gemini는 décennale를, ChatGPT는 배상책임보험을 말하며, "의무"라는 단어를 쓰는 것은 Gemini뿐입니다.

당신이 업체라면 이것이 무엇을 바꾸나

남의 집에서 일한다면, 어시스턴트는 이미 ChatGPT 답변의 절반 이상에서 고객에게 당신의 보험을 확인하라고 말하고 있습니다. 어떻게 확인하는지는 말하지 않습니다. 그러니 고객이나 당신의 사이트를 읽는 엔진이 찾을 수 있는 곳에 적어 두세요. 어떤 보험을, 어느 회사에, 언제까지 들었는지. 프랑스에서는 décennale 증명서가 이미 견적서와 청구서에 따라가야 합니다. 같은 한 줄을 사이트에 올리는 데는 비용이 들지 않습니다. 영국에서는 사업자 배상책임보험(public liability) 가입 여부와 Gas Safe 등록 여부를, 북미에서는 면허 번호와 발급 기관을 적으세요. Gemini가 사람들을 보내는 곳이 바로 그 페이지이기 때문입니다. 이는 합리적인 조치이지 효과가 확인된 지렛대가 아닙니다. 보험을 보이게 하면 업체가 더 자주 거론되는지는 측정하지 않았습니다. 그리고 고객이 ChatGPT에 당신의 도시의 전기 기사를 물을 때, "보험 있음"이라는 말과 함께 나오는 것은 당신의 이름일까요, 경쟁사의 이름일까요. 감사가 질문 하나하나로 보여 줍니다.

당신의 회사에 대해 어시스턴트는 뭐라고 말하나

Waseit 무료 감사는 고객이 실제로 입력하는 질문을 고객의 언어로, 당신의 도시에 대해 ChatGPT와 Gemini에 묻습니다. 약 60초면 100점 만점의 점수, 당신 대신 거론된 경쟁사, 당신이 나타나지 않는 질문, 당신을 언급한 문장의 어조, 그리고 Gemini가 Google을 검색했을 때 실제로 읽은 페이지를 볼 수 있습니다. 무료이고 계정도 카드도 필요 없습니다. 이메일 주소는 경쟁사 이름과 실행 계획을 여는 데만 쓰입니다. 이것은 날짜가 찍힌 스냅샷이지 순위가 아닙니다. 답변은 날마다 바뀌고, 우리는 어떤 순위도 약속하지 않습니다.

이것이 증명하지 않는 것

• 이는 프로그래밍 인터페이스를 통한 모델의 답변이며 사용자의 위치 정보는 없습니다. ChatGPT와 Gemini는 웹 검색 없이 답했고, Perplexity는 검색했지만 세 나라에서만 물었습니다.
• 각 질문은 2026년 7월 30일부터 10월 16일 사이에 한 번만 물었습니다. 여기서 ChatGPT는 gpt-4o-mini로 앱의 모델과 같지 않을 수 있으며, 그 뒤로 모델이 바뀌었을 수 있습니다.
• 이름이 거론된 업체가 실제로 보험에 가입했는지, Gemini가 지목한 기관이 각 업종에 맞는 기관인지는 확인하지 않았습니다. 우리는 어시스턴트가 말하는 것을 측정하지, 그것이 사실인지를 측정하지 않습니다.
• 법은 프랑스에 대해서만 Service Public Entreprendre의 F2034를 2026년 10월 31일에 읽어 확인했습니다. 보험법전 자체는 열지 않았습니다. 영국에서는 고용주 배상책임보험(employers' liability)만 의무이며, 그것도 누군가를 고용한 때부터입니다(GOV.UK). 다른 나라는 확인하지 않았습니다.
• 집계는 단어 목록에 기대어 문장마다 다시 읽었습니다. 첫 번째 추출은 88개 답변을 놓쳤고 더 넓은 그물이 건졌습니다. 주로 ChatGPT의 "면허, 보험, 후기를 확인하세요"와 프랑스어 "assure-toi que" 문장입니다. 위의 숫자에는 이것들이 포함되어 있습니다. "licensed" 단독은 세지 않았습니다.