질문을 바꿔 물으면 목록이 바뀐다
같은 AI에 같은 것을 묻는 흔한 두 가지 표현. 미국 13개 도시, 15개 업종에서 겹치는 상호는 11 %뿐이고 47 %의 비교에서는 한 곳도 겹치지 않습니다. 그래도 시장 전체로 보면 가장 많이 언급된 10곳 중 7곳은 그대로였습니다.
11 %
같은 AI, 두 표현에서 겹치는 상호
이 글의 목차
짧은 답: "시카고에서 가장 좋은 배관업체는?"과 "시카고에서 가장 추천되는 배관업체를 나열하고 이유를 설명해줘"는 같은 목록을 주지 않습니다. 같은 AI, 같은 도시, 같은 업종, 흔한 두 가지 표현으로 겹치는 상호는 11 %, 47 %의 비교에서는 한 곳도 겹치지 않습니다. 가장 먼저 언급된 업체가 같은 경우는 18 %입니다.
47 %
한 곳도 겹치지 않는 비교의 비율
10곳 중 7곳
표현을 바꿔도 남는, 가장 많이 언급된 업체
질문 하나짜리 진단이 재는 것은 표현이지 가시성이 아닙니다. 표현 변경을 견디는 것은 순위가 아니라 반복되는 등장입니다.
무엇을 측정했나
데이터는 2026년 9월 13일에 수집한 Waseit 미국 연구입니다. 각 칸(한 업종, 한 도시)에 두 개의 질문을 ChatGPT와 Gemini에 각각 던졌습니다. 첫째는 "What are the best [업종] in [도시]? Give me a list with your recommendations.", 둘째는 "List the most recommended [업종] in [도시] and explain why." 같은 것을 묻는 흔한 두 가지 방식입니다.
여기서는 13개 도시에서 측정한 15개 업종만 사용합니다(호텔, 식당, 베이커리는 제외. 상호에 도시명이 들어가는 일이 잦기 때문입니다). 모두 780개 답변, AI별·표현별로 195개입니다. 각 칸과 각 AI에 대해 첫 질문의 업체 목록과 둘째 질문의 목록을 비교했고, 두 표현이 모두 적어도 한 곳을 언급한 305건의 비교를 썼습니다.
측정은 단순합니다. 두 표현이 함께 언급한 상호 전체 가운데 양쪽 모두에서 나온 비율입니다. 디렉터리는 따로 세고, 목록에 섞여 든 조언성 제목은 걸러냅니다.
표현이 목록의 대부분을 바꾼다
305건의 비교에서 두 표현은 합쳐 3,108개의 서로 다른 상호를 언급했습니다. 양쪽 모두에 나온 것은 370개, 12 %뿐입니다. 비교당 평균 일치율은 11 %. 그리고 305건 중 143건은 한 곳도 겹치지 않습니다.
길이 효과일 수 있습니다. 둘째 질문은 설명을 요구하므로 AI가 상호 대신 설명에 분량을 씁니다. 그래서 잘리기 전의 각 답변 첫 세 곳만 남겨 다시 쟀습니다. 일치율은 여전히 13 %이고, 비교의 61 %는 상위 세 곳에 겹치는 상호가 없습니다. 잘림이 아니라 다른 업체입니다.
표현보다 AI의 차이가 더 크다
비교를 위해 같은 표현으로 두 AI 사이를 재면 일치율은 2 %까지 떨어집니다. AI를 바꾸는 것이 표현을 바꾸는 것보다 답을 더 크게 바꿉니다. 그래도 자릿수는 같습니다. 두 경우 모두 목록의 대부분이 움직입니다.
| 업종 | 두 표현, 같은 AI | 겹치는 상호가 없는 비교 | 두 AI, 같은 표현 |
|---|---|---|---|
| 인력 파견 회사 | 32 % | 24건 중 6건 | 9 % |
| 보험 중개인 | 17 % | 25건 중 7건 | 3 % |
| 운전 학원 | 17 % | 21건 중 8건 | 2 % |
| 미용실 | 14 % | 17건 중 2건 | 2 % |
| 변호사 | 13 % | 15건 중 6건 | 0 % |
| 배관업체 | 12 % | 22건 중 8건 | 0 % |
| 마케팅 대행사 | 11 % | 25건 중 11건 | 3 % |
| 자동차 정비소 | 11 % | 25건 중 7건 | 0 % |
| 회계사 | 7 % | 24건 중 15건 | 3 % |
| 웨딩 사진작가 | 7 % | 25건 중 13건 | 0 % |
| 열쇠 수리업체 | 6 % | 19건 중 12건 | 0 % |
| 냉난방 공조 업체 | 4 % | 19건 중 15건 | 0 % |
| 부동산 중개인 | 3 % | 16건 중 12건 | 1 % |
| 치과 | 3 % | 12건 중 10건 | 1 % |
| 전기 기술자 | 3 % | 16건 중 11건 | 2 % |
가장 안정적인 업종은 인력 파견입니다. 상호의 3분의 1이 표현 변경을 견디고, 두 AI가 조금이나마 일치하는 유일한 업종이기도 합니다(9 %). 반대편의 치과, 전기, 부동산, 공조에서는 다르게 물으면 사실상 다른 목록이 돌아옵니다.
남는 것은 자주 나오는 상호
여기서 멈추면 낙담할 결론이지만 멈추지 않습니다. 시장 전체 수준에서는 표현 변경이 거의 아무것도 바꾸지 않습니다. 모든 도시와 업종을 통틀어 가장 많이 언급된 10곳 중 7곳이 두 질문에서 같았습니다. Robert Half, Aerotek, Kforce, Insight Global, Randstad USA, HUB International, A1 Driving School이 양쪽 순위에 함께 있습니다.
또 다른 안정의 신호. 세 개 이상 도시에 나타나는 상호로 향하는 언급의 비율은 두 표현 모두 20 %입니다. 질문은 한 답변에 누가 나오는지를 바꿀 뿐, 누가 자주 나오는지를 바꾸지 않습니다.
한 번의 답변은 추첨입니다.
표현, AI, 칸에 따라 달라집니다.
반복되는 등장은 신호입니다.
여러 표현과 여러 도시에서 돌아오는 상호는 질문의 우연 덕이 아닙니다.
순위는 존재하지 않습니다.
당신의 도시, 당신의 업종에 대한 "그" AI의 답은 없고 분포가 있을 뿐입니다.
두 질문은 AI를 같은 방식으로 말하게 하지 않는다
설명을 요구하는 질문은 목록을 짧게 만듭니다. ChatGPT는 답변당 7.2곳에서 5.0곳으로, Gemini는 4.1곳에서 3.1곳으로 줄어듭니다. 적어도 한 곳을 언급하는 답변의 비율은 거의 변하지 않습니다. ChatGPT는 94 % 다음 90 %, Gemini는 82 % 다음 84 %입니다.
Gemini에서는 둘째 질문이 업체 목록 대신 기준 목록을 내놓는 일이 잦습니다. 첫 질문이 상호를 주던 자리에 "independent brokers"나 "comprehensive service" 같은 제목이 나타납니다. 우리의 정리는 대부분을 걸러내지만 전부는 아닙니다.
이 측정이 증명하지 않는 것
두 표현이 모든 표현은 아닙니다.
우리가 던지는 두 가지일 뿐, 고객이 실제로 입력하는 말의 표본이 아닙니다. 실제 차이는 더 클 수도 더 작을 수도 있습니다.
답변 길이가 일부 수치에 영향을 줍니다.
출력은 ChatGPT 600 토큰, Gemini 1,400 토큰으로 제한합니다. 둘째 질문에서 ChatGPT는 195건 중 48건, Gemini는 195건 중 54건이 문장 중간에 끝났습니다. 답변당 상호 수는 하한입니다. 다만 일치율은 첫 세 곳으로 재도 같은 결론입니다.
앱 사용자가 보는 것.
이 답변들은 API에서 나온 것이며, 앱은 웹 검색과 다른 설정을 더할 수 있습니다.
한 번의 수집.
2026년 9월 13일 하루입니다. 날짜별 변동이나 같은 질문을 두 번 던졌을 때의 변동은 여기서 재지 않았습니다.
완벽한 정리.
조언성 제목은 규칙으로 걸러내지만, 빠져나간 것은 서로 다른 상호 수를 약간 부풀립니다. 두 표현 모두에 해당합니다.
이것이 당신에게 바꾸는 것
질문 하나로 가시성을 판단하지 마세요.
고객의 말로 여러 번 묻고 무엇이 돌아오는지 보세요.
한 번의 등장에 기뻐하지도, 한 번의 부재에 놀라지도 마세요.
둘 다 잡음입니다.
불안정한 업종
(치과, 전기, 부동산, 공조)에서는 결론을 내리기 전에 여러 표현에서의 등장 횟수를 세세요.
안정적인 업종
(인력 파견, 보험, 운전 학원)에서는 반복되는 부재가 진짜 진단입니다.
우리의 무료 진단은 ChatGPT와 Gemini에 여러 질문을 던지고 순위가 아니라 등장 횟수를 셉니다. 질문을 어떻게 입력했는지에 좌우되지 않는 숫자를 얻는 유일한 방법입니다.