Reformule a pergunta e a lista muda
Duas formas banais de fazer a mesma pergunta ao mesmo motor, em 15 profissões e 13 cidades americanas. Sobram 11 % de nomes em comum, e em 47 % dos casos nenhum nome se repete. Mas, no nível do mercado, 7 das 10 empresas mais citadas continuam as mesmas.
11 %
de nomes em comum entre duas formulações, no mesmo motor
Neste artigo
Resposta curta: « quais são os melhores encanadores em Chicago? » e « liste os encanadores mais recomendados em Chicago e explique por quê » não devolvem a mesma lista. Mesmo motor, mesma cidade, mesma profissão, duas formulações banais: sobram 11 % de nomes em comum, e em 47 % das comparações nenhum nome se repete. A empresa citada em primeiro lugar é a mesma em 18 % dos casos.
47 %
das comparações não têm nenhum nome em comum
7 de 10
das empresas mais citadas resistem à reformulação
Uma auditoria de uma só pergunta mede uma formulação, não a sua visibilidade. O que resiste à reformulação não é um ranking, é uma presença repetida.
O que medimos
Os dados são do estudo Waseit Estados Unidos coletado em 13 de setembro de 2026. Cada célula (uma profissão, uma cidade) recebeu duas perguntas, feitas ao ChatGPT e ao Gemini. A primeira: « What are the best [profissão] in [cidade]? Give me a list with your recommendations. » A segunda: « List the most recommended [profissão] in [cidade] and explain why. » Duas maneiras banais de pedir a mesma coisa.
Ficamos aqui com as 15 profissões medidas nas 13 cidades (hotéis, restaurantes e padarias ficam de fora: o nome deles costuma conter o da cidade). São 780 respostas, ou seja, 195 por motor e por formulação. Para cada célula e cada motor, comparamos a lista de empresas obtida com a primeira pergunta com a obtida com a segunda: 305 comparações utilizáveis, aquelas em que as duas formulações citaram pelo menos uma empresa.
A medida é simples: de todos os nomes citados pelas duas formulações, que parte é citada pelas duas? Os diretórios são contados à parte e os títulos de conselho enfiados nas listas são descartados.
A formulação desloca quase toda a lista
Nas 305 comparações, as duas formulações citam juntas 3 108 nomes de empresas distintos. Apenas 370, ou 12 %, aparecem nas duas. Em média por comparação, a sobreposição é de 11 %. E 143 das 305 comparações não partilham nenhum nome.
Poderia ser um efeito de comprimento: a segunda pergunta pede explicação, então o motor gasta texto explicando em vez de nomear. Refizemos a medida mantendo apenas os três primeiros nomes de cada resposta, antes de qualquer corte: a sobreposição continua em 13 %, e 61 % das comparações não têm nenhum nome em comum no trio de cabeça. Não é truncagem, são outras empresas.
O motor pesa mais do que a formulação
Para comparar, medimos a mesma coisa entre os dois motores com formulação idêntica: a sobreposição cai para 2 %. Trocar de motor muda a resposta ainda mais do que reformulá-la. Mas a ordem de grandeza é a mesma: nos dois casos, a maior parte da lista se move.
| Profissão | Duas formulações, mesmo motor | Comparações sem nenhum nome em comum | Dois motores, mesma formulação |
|---|---|---|---|
| Agência de recrutamento | 32 % | 6 de 24 | 9 % |
| Corretor de seguros | 17 % | 7 de 25 | 3 % |
| Autoescola | 17 % | 8 de 21 | 2 % |
| Salão de cabeleireiro | 14 % | 2 de 17 | 2 % |
| Advogado | 13 % | 6 de 15 | 0 % |
| Encanador | 12 % | 8 de 22 | 0 % |
| Agência de marketing | 11 % | 11 de 25 | 3 % |
| Oficina mecânica | 11 % | 7 de 25 | 0 % |
| Contador | 7 % | 15 de 24 | 3 % |
| Fotógrafo de casamento | 7 % | 13 de 25 | 0 % |
| Chaveiro | 6 % | 12 de 19 | 0 % |
| Técnico de climatização (HVAC) | 4 % | 15 de 19 | 0 % |
| Corretor de imóveis | 3 % | 12 de 16 | 1 % |
| Dentista | 3 % | 10 de 12 | 1 % |
| Eletricista | 3 % | 11 de 16 | 2 % |
O recrutamento é a profissão mais estável: um terço dos nomes resiste à reformulação, e é também a única em que os dois motores se aproximam um pouco (9 %). No outro extremo, entre dentistas, eletricistas, corretores de imóveis e técnicos de climatização, perguntar de outro jeito devolve praticamente outra lista.
O que resiste são os nomes que voltam com frequência
A conclusão seria desanimadora se parasse aí. Não para. No nível do mercado inteiro, a reformulação quase não mexe em nada: entre as 10 empresas mais citadas em todas as cidades e profissões, 7 são as mesmas com uma e com outra pergunta. Robert Half, Aerotek, Kforce, Insight Global, Randstad USA, HUB International e A1 Driving School aparecem nos dois rankings.
Outro sinal de estabilidade: a parte das citações que vai para um nome presente em pelo menos três cidades é de 20 % com as duas formulações. A pergunta muda quem aparece numa resposta, não quem aparece com frequência.
Uma resposta isolada é um sorteio.
Depende da formulação, do motor e da célula.
Uma presença repetida é um sinal.
Um nome que volta em várias formulações e várias cidades não deve nada ao acaso da pergunta.
Um ranking não existe.
Não há « a » resposta da IA para a sua profissão na sua cidade, há uma distribuição.
As duas perguntas não fazem os motores falar do mesmo jeito
A pergunta que pede explicação encurta as listas. O ChatGPT cai de 7,2 para 5,0 empresas citadas por resposta, o Gemini de 4,1 para 3,1. A parte das respostas que nomeia pelo menos uma empresa quase não muda: 94 % e depois 90 % no ChatGPT, 82 % e depois 84 % no Gemini.
No Gemini, a segunda pergunta produz muitas vezes uma lista de critérios em vez de uma lista de empresas: títulos como « independent brokers » ou « comprehensive service » aparecem onde a primeira pergunta dava nomes. Nossa limpeza descarta a maior parte deles, não todos.
O que esta medição não prova
Duas formulações não são todas as formulações.
São as duas que fazemos, não uma amostra do que os seus clientes digitam. A diferença real pode ser maior ou menor.
O comprimento das respostas pesa em parte dos números.
Limitamos a saída a 600 tokens no ChatGPT e 1 400 no Gemini: 48 de 195 respostas do ChatGPT e 54 de 195 do Gemini terminam no meio de uma frase na segunda pergunta. As contagens de nomes por resposta são, portanto, pisos. A sobreposição, essa, também se sustenta nos três primeiros nomes.
O que vê o usuário do aplicativo.
As respostas vêm das APIs; o aplicativo pode acrescentar busca na web e outros ajustes.
Uma única coleta.
Um dia, 13 de setembro de 2026. Não medimos aqui a variação de um dia para o outro, nem entre duas execuções da mesma pergunta.
Uma limpeza perfeita.
Os títulos de conselho são descartados por regras; o que escapa infla ligeiramente a contagem de nomes distintos, nas duas formulações.
O que isso muda para você
Não julgue a sua visibilidade por uma pergunta.
Faça várias, nas palavras dos seus clientes, e veja o que volta.
Não comemore uma aparição única nem se assuste com uma ausência única.
As duas estão no ruído.
Nas profissões instáveis
(dentista, eletricista, imóveis, climatização), conte as aparições em várias formulações antes de concluir qualquer coisa.
Nas profissões estáveis
(recrutamento, seguros, autoescola), uma ausência repetida é um diagnóstico de verdade.
Nossa auditoria gratuita faz várias perguntas ao ChatGPT e ao Gemini e conta as aparições em vez de um lugar no ranking. É a única forma de obter um número que não dependa de como a pergunta foi digitada.