A mesma pergunta em outra língua: 72 % das empresas citadas aparecem em um lado só

Nesta manhã perguntamos ao ChatGPT quais são os melhores contadores de Belo Horizonte. Em português ele não citou ninguém: respondeu com perguntas - é para pessoa física ou jurídica? que tipo de serviço? No mesmo minuto, a mesma pergunta em inglês produziu uma lista imediata: PwC Brasil, Deloitte Brasil, EY Brasil, KPMG Brasil, Grant Thornton Brasil.

Duas respostas, uma cidade, um motor, um instante. Qual delas descreve a contabilidade em Belo Horizonte? E principalmente: se você tem um escritório mineiro, em qual das duas você se procura?

Por que uma diferença, sozinha, não prova nada

Ontem publicamos um resultado incômodo para o de hoje: a mesma pergunta, ao mesmo motor, vinte e quatro horas depois, não devolve a mesma lista. Um motor já não concorda consigo mesmo. Constatar que o português e o inglês divergem, portanto, não diz nada enquanto não se sabe o quanto um motor diverge de si próprio.

Esse controle é o verdadeiro assunto desta medição. Cada pergunta foi feita duas vezes em cada idioma, uma em seguida da outra. As duas repetições dão o piso de ruído. A comparação entre idiomas só significa alguma coisa acima desse piso.

Sem esse controle, teríamos publicado ruído chamando-o de efeito de idioma.

O que medimos, em 15 de agosto de 2026

Seis pares profissão-cidade, pareados entre dois mercados: encanadores, contadores e padarias em São Paulo, Belo Horizonte e Curitiba; as mesmas três profissões em Lyon, Nantes e Bordeaux. Cada pergunta foi feita no idioma do país e em inglês, duas vezes cada, aos três assistentes - 72 respostas. As perguntas são as que uma auditoria paga faz, não perguntas escritas para a ocasião.

• Mesmo idioma, pergunta repetida: 61 % dos nomes voltam. Seis em dez. Esse é o piso de ruído.
• Idioma trocado: 20 %. Dois em dez.
• 41 pontos de diferença. Atravessar o idioma afasta muito mais do que repetir a pergunta.
• Das 123 empresas citadas no total, 35 aparecem nos dois idiomas - e 88 em um só, ou seja 72 %.

Quais motores são afetados?

O número global esconde o essencial: o efeito não é o mesmo nos três. A Perplexity mantém 69 % dos seus nomes quando a pergunta é repetida, e 5 % quando o idioma muda. O Gemini vai de 45 % a 25 %. No ChatGPT a diferença entre idiomas não se distingue do ruído - mas esse motor cita tão poucas empresas locais que o cálculo se apoia em um punhado de casos, então sinalizamos em vez de contar.

Essa divisão é coerente com o que medimos há dez dias: o efeito pertence aos motores que vão buscar na web. Um motor que responde de memória responde quase igual nos dois idiomas. Um motor que busca não busca no mesmo lugar conforme o idioma - e traz outra coisa.

O caso mais nítido: os encanadores de Lyon

Perguntada em francês sobre os melhores encanadores em Lyon, a Perplexity cita Plomberie Roche Lyon e Mb Plomberie. Em inglês, no mesmo minuto: AS DEPANN, Abatir, APAMS Plomberie, Plomberie Paul.

Não são empresas internacionais substituindo empresas locais. São encanadores lioneses dos dois lados - só que não os mesmos. E, enquanto isso, repetir a pergunta em francês devolve dois terços deles. Mesmo motor, mesma cidade, mesma profissão, mesmo instante: duas listas sem nenhum nome em comum.

Em São Paulo o contraste tem outra forma, e ela interessa a quem é encanador aqui. Em português a resposta da Perplexity é feita sobretudo de plataformas - GetNinjas, oHub, Solutudo - e de rótulos genéricos, com um único nome de empresa que conseguimos contar: Doutor Resolve. Em inglês ela produz SOS Hydro Master e as assistências residenciais da Porto Seguro e da Allianz. Nenhum nome em comum, e em nenhum dos dois idiomas um encanador paulistano independente é nomeado.

Alguém mais viu isso?

Sim, e vale dizer. Em 12 de fevereiro de 2026 a Peec AI publicou uma análise dos próprios dados - mais de 10 milhões de perguntas e 20 milhões de buscas disparadas em segundo plano pelo ChatGPT: 43 % dessas buscas são feitas na web em inglês embora a pergunta original tenha sido feita em outro idioma. O turco muda para o inglês com mais frequência (94 %), o espanhol com menos (66 %), e nenhum idioma não anglófono fica abaixo de 60 %. Vale pelo que é: a declaração de um fornecedor sobre os próprios dados, sem metodologia nem base publicadas, portanto não verificável de fora. Mas descreve exatamente o mecanismo que os nossos números tornam visível do lado do resultado.

A BrandGEO Global publicou em 1º de agosto de 2026 um teste feito em Paris em 10 de julho: em gestão de patrimônio, as respostas em francês citaram butiques independentes francesas, e as em inglês, grandes bancos privados internacionais; um escritório apareceu em três das quatro respostas francesas e em nenhuma das quatro inglesas. O denominador, como a própria fonte informa: quatro categorias, uma pergunta por idioma, quatro motores com dados aproveitáveis naquele dia, e o ChatGPT falhando em todos os prompts parisienses. É um sinal pontual, não uma série - e é exatamente essa lacuna que quisemos preencher com um controle.

Por fim, um fabricante escreve isso ele mesmo. A ficha técnica do Claude Opus 5, publicada pela Anthropic em 24 de julho de 2026, diz: « Claude is multilingual, typically responding in the same language as the user's input. Output quality varies by language. » A qualidade da resposta varia conforme o idioma. A frase nada diz sobre quais empresas são citadas, e não a fazemos dizer mais do que isso.

Um detalhe que verificamos antes de concluir

Duas das nossas seis perguntas no idioma local estavam gramaticalmente erradas: os nossos modelos concordam no masculino, o que produz « os melhores padarias » e « les meilleurs boulangeries ». O arquivo que guarda esses modelos afirma que uma pergunta mal escrita obtém uma resposta pior de todos os assistentes. Se isso for verdade, esses dois casos mediam um erro de concordância, não um idioma.

Refizemos então essas duas perguntas com a concordância correta, sem mudar mais nada: 4,4 pontos de diferença, contra 48 % de coincidência quando a mesma pergunta é simplesmente repetida. Isso é ruído. A crença não se confirma, os dois casos não ficam desqualificados - e não alteramos os modelos, porque um erro que incomoda na leitura não é razão suficiente para deslocar a medição de todos os clientes.

O que isso muda para você

Os limites, como sempre

Seis pares profissão-cidade, uma única manhã, três assistentes: isto é uma sondagem, não um censo. Comparamos os oito primeiros nomes de cada resposta, que é o que o nosso extrator guarda. As listas foram relidas à mão, e a conta fecha: das 334 cadeias extraídas, 154 não eram nomes de empresas - subtítulos, critérios de escolha, conselhos - e 23 eram diretórios. Sobraram 157 nomes, dos quais 4 foram descartados numa segunda leitura. As 153 grafias restantes designam 123 empresas distintas, depois de juntadas as variantes de grafia de um mesmo estabelecimento - sem o que « Aquarius » e « Panificadora Aquarius » teriam contado como duas padarias de Curitiba.

Essa limpeza não favorece a nossa conclusão; ela a reforça. Antes do filtro, o piso de ruído ficava em 32 % e a diferença em 21 pontos. Foi tirando o ruído que a diferença aumentou - o ruído, afinal, não fala idioma nenhum.