A mesma pergunta, 24 horas depois: um motor que não citava ninguém agora cita quatro consultórios

Ontem medimos a discordância entre os três assistentes, no mesmo minuto. Faltava a pergunta que um comerciante realmente faz: se eu refizer o teste amanhã, vai dizer a mesma coisa?

Hoje de manhã a gente rejogou as seis perguntas de ontem. Não reescritas: relidas no arquivo do dia anterior e reenviadas do jeito que estavam, aos mesmos três motores. A única variável é o tempo.

O caso que responde sozinho

Ontem, perguntado sobre os melhores dentistas em Nice, o Gemini não citou nenhum consultório. Respondeu com plataformas de agendamento e critérios de escolha. Hoje, na mesma pergunta, ele cita quatro: Cabinet Avident, Arenas Dentistes, Dentego, Clinadent.

Nada mudou nesses consultórios em vinte e quatro horas. Nada mudou na pergunta. Um dentista de Nice que tivesse testado ontem sairia convencido de que a IA não cita ninguém no ofício dele; o mesmo teste hoje lhe mostra quatro concorrentes.

Um teste único não mede a sua visibilidade. Mede a sua visibilidade naquele dia.

Quantos nomes sobrevivem a uma noite

Comparamos as listas nome por nome, à mão, unindo variantes de grafia (“Victor Plomberie” e “Victor Plombier”, “Caroline Meunier Avocat” e “Cabinet Caroline Meunier”). Nas seis cidades:

A estabilidade varia enormemente conforme o ofício. Nos dentistas de Nice, o Perplexity manteve sete nomes de sete e só acrescentou um: uma lista quase congelada. Nas oficinas de Nantes, o mesmo motor manteve um nome de sete. Mesmo motor, mesmo dia, dois ofícios: de um lado uma lista estável, do outro um sorteio.

Quando o ChatGPT enfim cita, não cita negócios locais

Um detalhe merece registro. Nas oficinas de Nantes, o ChatGPT saiu do silêncio hoje - mas os nomes que ele dá são Bosch Car Service, Norauto, Midas, Feu Vert, Speedy. Redes nacionais, não oficinas de Nantes.

Isso é coerente com o que medimos ontem: esse motor não recomenda um negócio local, ele aponta categorias e redes. Para uma oficina independente de Nantes, estar “ausente do ChatGPT” quer dizer muito pouco - ninguém como ela está lá.

O que isso muda na medição

Essa instabilidade não é um defeito das nossas ferramentas, é a própria matéria. Os motores que buscam na web releem páginas que mudam, e as respostas acompanham. É exatamente por isso que medimos várias vezes em vez de uma, e por que não suavizamos nenhuma variação: a série é a informação, não o ruído a eliminar.

E é por isso que nunca prometemos a ninguém um lugar no ChatGPT. Num motor em que de um terço à metade dos nomes muda de uma noite para a outra, prometer uma colocação seria prometer o resultado de um sorteio.

O que fazer com isso

• Não conclua nada de um teste único. Nem “estou visível”, nem “a IA não cita ninguém”: você só sabe como estava naquela manhã.
• Olhe a tendência, não o ponto. Um nome que reaparece três vezes em cinco medições vale mais que um nome que apareceu uma vez em primeiro.
• Distinga ofícios estáveis de ofícios voláteis. Nos dentistas uma lista se mantém; nas oficinas ela se recompõe. A frequência útil de medição não é a mesma.
• Não julgue a sua presença só pelo ChatGPT: nas nossas seis cidades ele não citou nenhum negócio local, dois dias seguidos.

Os limites: seis perguntas, seis cidades, dois dias, um modelo por motor. Dois pontos não fazem uma curva, e a gente não pretende medir tendência com duas medições. O que eles estabelecem, porém, é sólido: a resposta de hoje não é a de ontem, em perguntas rigorosamente idênticas.