AI는 운전학원 합격률을 232번 칭찬한다. 숫자는 한 번도 없다

짧은 답: 한 도시의 좋은 운전학원을 ChatGPT나 Gemini에 물으면 351개 답변 중 232개에서 시험 합격률을 언급합니다(합격률이 높기로 알려진 학원이라는 식으로). 그러나 숫자는 한 번도 주지 않습니다. 프랑스에서 Gemini는 26개 답변 중 23개에서 합격률을 확인해 보라고까지 권하지만, 자신이 이름을 든 학원 어디에도 그 숫자를 주지 않습니다. 숫자는 공개돼 있습니다. 프랑스 내무부의 공식 파일에는 운전학원 8,140곳의 합격률이 있습니다.

첫 응시 합격률은 앞으로 운전을 배울 사람이 비교하는 숫자입니다. 기억으로 답하는 어시스턴트는 그것을 칭찬으로 바꾸고, 웹을 검색하는 Perplexity만 숫자를 줍니다. 그 숫자도 늘 공식 파일과 같지는 않습니다.

어시스턴트는 합격률을 칭찬으로 만든다. 숫자는 공식 파일에 맡긴다.

무엇을 측정했나

프랑스, 영국, 브라질, 미국, 캐나다, 오스트레일리아, 뉴질랜드, 싱가포르에서 2026년 7월 30일부터 10월 16일까지 진행한 8개 연구는 한 도시의 좋은 운전학원을 추천 목록과 함께 묻는 같은 질문을 ChatGPT(gpt-4o-mini)와 Gemini에 API로, 웹 검색과 위치 정보 없이 던졌습니다. 프랑스, 영국, 브라질에서는 원래 웹을 검색하는 Perplexity에도 물었습니다. 운전학원 답변은 ChatGPT 175개, Gemini 176개, Perplexity 78개입니다. 세 언어로 합격률을 뜻하는 말을 찾고, 그 앞뒤 80자 안에 백분율이 있는지 살폈습니다. 숫자가 있는 대목은 모두 다시 읽었고, 무작위로 뽑은 ChatGPT와 Gemini의 대목 80개를 하나씩 읽었습니다. 끝으로 Perplexity의 숫자를 프랑스 내무부가 data.gouv.fr에 공개한 운전학원 공식 파일(2025년 7월 1일 자, 2026년 10월 25일 확인)과 대조했습니다.

어시스턴트는 합격률에 대해 무엇을 말하나

읽은 대목 80개 가운데 42개는 특정 학원의 합격률이 좋다고 말하고, 20개는 합격률을 확인하거나 물어보라고 권하며, 12개는 목록의 기준으로 내세우고, 6개는 다른 이야기였습니다. 숫자를 준 대목은 하나도 없습니다. 가장 뚜렷한 경우는 프랑스의 Gemini입니다. 26개 답변 모두에서 합격률을 언급하고, 그중 23개에서 도청 사이트, 도로안전 당국 사이트, 민간 비교 사이트 VroomVroom 같은 출처로 독자를 보냅니다. 그런데 바로 위에서 추천한 학원들에는 숫자가 없습니다. 웹을 읽는 Perplexity는 78개 답변 중 15개, 프랑스에서는 26개 중 12개에서 합격률을 주었고, 대개 언론 순위에서 가져왔습니다. 이 가운데 13곳을 공식 파일에서 확실히 찾았습니다. 4곳의 숫자는 일치했고 모두 리옹의 학원이었습니다. 나머지 9곳은 파일보다 1.3~33.3포인트 높았습니다. 그르노블의 한 학원은 85.71%로 소개됐지만 파일에서는 52.38%였습니다. 인용된 순위가 몇 년도 것인지는 알 수 없습니다.

사업자라면 무엇이 달라지나

운전학원을 운영한다면 합격률은 직접 공개할 수 있는 숫자입니다. 기억으로 답하는 어시스턴트는 확인할 수 없는 좋은 합격률을 당신의 학원에 붙이고, 웹을 검색하는 어시스턴트는 처음 찾은 숫자를, 때로는 실제보다 좋은 숫자를 가져옵니다. 그러니 당신의 숫자를 웹사이트에 출처와 기간을 붙여 글로 적으세요. 첫 응시 합격률, 응시자 수, 지역 평균입니다. Gemini가 미래의 수강생에게 찾아보라고 하는 숫자가 바로 이것입니다. 이것은 합리적인 한 걸음이지, 효과가 알려진 수단은 아닙니다. 합격률을 공개하면 더 자주 언급되는지는 측정하지 않았습니다. 그리고 ChatGPT가 모르면서 좋은 합격률을 붙여 준다면, 당신의 학원에 대해 또 무엇을 말할까요? 감사가 질문별로 보여 줍니다.

당신의 운전학원, 어시스턴트는 뭐라고 말하나

Waseit의 무료 감사는 미래의 수강생이 실제로 입력하는 질문을 그들의 언어로, 당신의 도시에 대해 ChatGPT와 Gemini에 묻습니다. 약 60초 만에 100점 만점 점수, 당신 대신 언급된 학원, 당신이 나오지 않는 질문, 그리고 Gemini가 Google을 검색했다면 실제로 읽은 페이지를 볼 수 있습니다. 당신에 관한 잘못된 숫자가 있을 수 있는 곳이 바로 그 페이지입니다. 무료이고 계정도 신용카드도 필요 없습니다. 이메일 주소는 경쟁사 이름과 실행 계획을 여는 데만 쓰입니다. 이것은 날짜가 찍힌 한 장의 사진이지 순위가 아닙니다. 답변은 날마다 바뀌며, 우리는 어떤 순위도 약속하지 않습니다.

이것이 증명하지 않는 것

• API로 받은 모델의 답변이며 사용자의 위치 정보는 없습니다. ChatGPT와 Gemini는 웹 검색 없이 답했고, Perplexity는 원래대로 검색했으며 세 나라에서만 조사했습니다.
• 각 질문은 2026년 7월 30일부터 10월 16일 사이에 한 번씩 했습니다. 여기서 ChatGPT는 gpt-4o-mini이며, ChatGPT 앱의 모델과 같다고 단정할 수 없습니다.
• 232라는 숫자는 단어 목록에 기댑니다. 이 단어 없이 시험 결과를 말한 답변은 세지 않았으므로 최소치입니다.
• 대목의 분류(칭찬 42, 조언 20)는 374개 중 손으로 읽은 80개에서 나온 것으로, 정확한 수가 아니라 규모입니다.
• Perplexity의 숫자 13개를 2025년 7월 공식 파일과 대조했습니다. 다른 해의 순위라면 차이가 날 수 있고, 순위 자체는 확인하지 않았습니다.
• 합격률은 시험장과 응시자 수에도 좌우됩니다. 학원의 질을 재는 척도가 아니라 하나의 지표입니다.