AI는 같은 페이지를 다시 열고, 그다음 다른 업체를 거론했습니다

짧은 답: 바뀌는 것은 읽는 내용이 아니라 답하는 내용입니다. 같은 요청을 바꿔 말하면, 웹을 검색하는 조수는 바로 전에 읽었던 그 페이지의 72.8%를 다시 엽니다. 그런데도 앞서 거론했던 5,221개 업체 중 돌아오는 것은 1,939개뿐입니다. 37.2%, 이름을 느슨하게 맞춰도 56.3%입니다. 출처는 유지되고, 목록은 유지되지 않습니다.

당신은 조수에게 동네에서 가장 좋은 배관업체를 묻습니다. 여덟 곳의 이름을 받습니다. 다른 사람이 같은 필요를 다르게, 「가장 많이 추천되는 곳을 나열하고 이유를 설명해 줘」라고 묻자 목록이 더는 같지 않습니다. 가장 먼저 떠오르는 설명은 다른 곳을 찾아봤으리라는 것입니다. 우리는 682쌍의 답변을 페이지 하나씩 대조했습니다. 거의 똑같은 페이지를 다시 열고 있었습니다. 움직이는 것은 읽는 내용이 아닙니다. 거기서 끌어내는 내용입니다.

읽는 것을 바꾸지 않습니다. 답하는 것을 바꿉니다.

무엇을 측정했는가

Waseit의 연구는 도시마다 업종마다 고객이 실제로 입력할 질문 - 「{도시}에서 가장 좋은 {업종}은 어디입니까」 - 을 묻고, 이어서 같은 필요를 바꿔 「{도시}에서 가장 많이 추천되는 {업종}을 나열하고 이유를 설명해 줘」라고 묻습니다. 세 조수 가운데 참조한 페이지 목록을 답변 안에 남기는 것은 하나뿐입니다. 웹을 검색하는 Perplexity입니다. 그래서 같은 시장, 같은 도시, 같은 업종에서 두 표현이 모두 갖춰진 답변 쌍을 뽑았습니다. 프랑스, 영국, 브라질에서 682쌍, 39개 도시, 업종과 시장의 조합은 58개입니다. 각 쌍에 대해 비교는 둘뿐입니다. 첫 번째에 읽은 페이지 중 두 번째에도 읽힌 것은 몇 개인가, 그리고 첫 번째에 거론된 업체 중 다시 거론된 것은 몇 개인가.

겹침은 우연이라면 어떻게 될지 모르는 한 아무것도 말해 주지 않습니다. 그래서 같은 방식으로 서로 무관한 답변도 쌍으로 묶었습니다. 같은 나라, 같은 업종이면서 도시만 다른 쌍, 그리고 같은 도시에서 업종만 다른 쌍입니다. 거기서는 공통된 정확한 페이지가 0.7%, 공통된 이름이 0.1%까지 떨어집니다. 즉 진짜 쌍에서 측정한 72.8%는 배경 효과가 아닙니다. 대조를 두 개 더 두었습니다. 이름은 두 기준 - 엄격한 일치, 그리고 식별력 있는 낱말 하나를 공유하는 것 - 으로 대조하고, 두 기준에서 모두 성립하는 것만으로 결론을 냅니다. 또 페이지 목록은 표현에 따라 조금 늘어나므로(도메인 13.7 대 14.8), 두 목록의 길이가 정확히 같은 쌍만으로 다시 계산했습니다. 차이는 줄지 않고 벌어집니다. 도메인 82.7% 대 이름 38.8%입니다.

읽는 것이 움직이지 않는데 목록은 왜 움직이는가

서로 다른 두 작업이고, 안정된 것은 한쪽뿐이기 때문입니다. 「부산에서 가장 좋은 배관업체」에 맞는 페이지를 찾는 것은 검색의 문제입니다. 같은 낱말은 같은 페이지를 데려옵니다. 숫자가 보여 주는 것이 그것입니다. 그 페이지 안에서 여덟 개의 이름을 고르는 것은 글쓰기의 문제이고, 답변마다 처음부터 다시 시작됩니다. 이름의 개수도 움직이지 않습니다. 어느 방향이든 평균 7.7개입니다. 더 말하거나 덜 말하는 것이 아닙니다. 같은 만큼 말하면서, 같은 것을 말하지 않습니다.

말뭉치의 평범한 한 쌍이 이를 분명히 보여 줍니다. 프랑스 어느 도시의 어느 업종에 대해 조수는 첫 번째에 열 페이지, 두 번째에 일곱 페이지를 인용했고, 그 일곱은 모두 열 안에 있었습니다. 같은 재료를 앞에 두고 있었던 것입니다. 거론된 여덟 업체 중 대조의 엄격함에 따라 셋 또는 넷은 첫 목록에 없었습니다. 같은 읽기, 다른 결과입니다. 같은 대비가 셀 만한 쌍을 가진 49개 업종-시장 조합 전부에서 성립합니다. 영국의 미용사부터 프랑스의 난방 기술자까지, 예외는 하나도 없습니다.

당신이 그 업체라면 무엇이 달라지는가

좋은 소식과 나쁜 소식이 있고, 둘은 함께 받아들여야 합니다. 좋은 소식. 당신의 가시성이 결정되는 페이지는 질문마다 추첨으로 정해지지 않습니다. 당신 동네의 당신 업종에 대해 조수는 거의 같은 사이트로 돌아옵니다. 즉 손에 꼽을 만한 페이지가 무게를 지니며 공들일 값이 있다는 뜻입니다. 다만 등록하면 되는 단 하나의 디렉터리는 없습니다. 그 페이지는 당신 동네의 당신 업종의 것이고, 업종이 바뀌면 바뀝니다.

나쁜 소식. 거기 올라 있어도 답변에 들어가지는 않습니다. 페이지가 읽힌 뒤 이름의 선택은 다시 처음부터 시작되고, 질문을 다르게 하면 목록이 바뀝니다. 지켜야 할 순위는 없고, 그것을 팔 수 있는 사람도 없습니다. 손댈 수 있는 것은 앞쪽입니다. 늘 돌아오는 페이지에 분명하게 읽히는 형태로 있는 것, 그리고 자기 사이트 - 조수는 대개 홈페이지만 엽니다. 잴 수 있는 것은 뒤쪽이고, 다시 잽니다. 한 번의 읽기는 다음 읽기에 대해 아무것도 말해 주지 않기 때문입니다.

그리고 당신의 업체에서 조수는 무엇을 끌어내는가

읽기가 안정적이고 답이 그렇지 않다면, 물을 만한 것은 하나뿐입니다. 오늘 그 질문에서 당신은 답변 안에 있는가, 아니면 지나쳐진 페이지 쪽에 있는가. 그것을 보여 주는 것이 Waseit의 무료 진단입니다. 당신의 고객이 실제로 입력하는 질문을 당신의 언어와 당신의 시장에서 ChatGPT와 Gemini에 묻고, 약 60초 만에 100점 만점의 점수, 질문마다 당신 대신 거론된 경쟁사, 당신이 나타나지 않는 질문, 그리고 Gemini가 Google에서 검색한 경우에는 실제로 참조한 페이지 - 즉 올라 있어야 할 곳 - 를 돌려줍니다. 무료이고 계정도 카드도 필요 없습니다. 이메일 주소는 경쟁사 이름과 실행 계획만 열어 줍니다. 진단 페이지가 이미 말하는 것을 이 측정이 다른 길로 확인해 줍니다. 이것은 날짜가 찍힌 한 장의 사진이지 순위표가 아니며, 우리는 어떤 순위도 약속하지 않습니다.

이것이 증명하지 않는 것