ChatGPT, Gemini e Perplexity recomendam o mesmo? Estudo em A Coruña: só 8 de 222 negócios

Olá a todos, esta semana a Iberian Press divulgou um estudo do consultor de SEO Manu Fraga sobre quem ChatGPT, Gemini e Perplexity recomendam quando alguém pede a eles um negócio em A Coruña. Ele fez a mesma pergunta às três, com busca na web ativada, em dez setores (dentista, fisioterapeuta, advogado, restaurante, salão de beleza, oficina mecânica, imobiliária…), duas vezes cada uma: 60 respostas no total.
O resultado: apareceram 222 negócios diferentes e só 8 são citados pelas três; 80 % aparecem em uma única ferramenta. Além disso, ao repetir a pergunta, o ChatGPT manteve em média só 17 % dos negócios, contra 60 % do Gemini e 64 % do Perplexity. Segundo o estudo, os nomes saem de quatro tipos de site: um site próprio que explica com clareza o que o negócio faz e onde, perfis completos em diretórios do setor, boas avaliações no Google e menções de terceiros (imprensa local, guias).
Atenção às ressalvas: o próprio estudo avisa que as perguntas foram feitas via API, sem histórico nem localização do usuário, e que é uma foto de um momento, não um ranking. Além disso, quem assina é um consultor que trabalha justamente com isso, então convém lê-lo com distanciamento.
Nossa leitura: se cada assistente puxa de fontes diferentes e ainda muda de uma consulta para outra, não há uma receita única e é preciso cuidar de várias frentes ao mesmo tempo, sem prometer posições a ninguém. E queremos perguntar a vocês: já testaram fazer a mesma pergunta várias vezes para o seu setor e cidade? A resposta muda de um dia para o outro? Vocês já contam isso aos seus clientes ou acham que ainda é cedo? Obrigado por compartilharem sua experiência.

Olá, heyscale. Somos a equipe da abogadostop10, marca da Ibérica Digital Partner (Alicante): fazemos marketing para escritórios de advocacia, então o setor «advogado» do estudo nos toca em cheio.

Antes de te responder, uma objeção ao dado que mais vai ser citado daqui. Os «80 % aparecem em uma única ferramenta» e os «17 % de estabilidade no ChatGPT» não são duas descobertas independentes: com só duas repetições por pergunta, um negócio pode ficar como exclusivo de uma ferramenta simplesmente porque na outra não apareceu daquela vez. Para separar «esta ferramenta não me conhece» de «esta ferramenta muda de resposta» são necessárias mais repetições da mesma pergunta; com duas não dá para distinguir, e o estudo não separa isso.

Ao que você pergunta:

1) Sim, repetimos a pergunta por especialidade e cidade (penal, família, imigração mais Alicante) e a resposta muda. O aviso prático é outro: se você testa pelo app com a sua conta, está medindo seu histórico e sua localização, não o que um cliente vê. Para servir, chat temporário ou sessão deslogada e sempre exatamente a mesma redação; senão, você não compara dois dias, compara dois contextos.

2) Aos clientes nós contamos, mas nunca como posição. Damos a eles o que não depende de como o prompt é redigido: se os rastreadores passam pelo site (dá para ver nos logs do servidor, por user agent) e se chega gente vinda de chatgpt.com ou perplexity.ai. Prometer «aparecer no ChatGPT» nós não fazemos: com essa variabilidade, não é algo que se possa prometer.

E dos quatro tipos de fonte que ele cita, o que mais fez diferença para nós em escritórios —observação nossa, não uma prova— é o site próprio explicando claramente o que faz e onde. É a única das quatro que você controla.

@abogadostop10 obrigado pela resposta tão detalhada, e você tem razão na objeção: com só duas repetições por pergunta, «80 % aparecem em uma única ferramenta» e «17 % de estabilidade» não podem ser lidos como duas descobertas separadas, e o estudo não distingue entre «esta ferramenta não me conhece» e «esta ferramenta muda de resposta». Tomamos isso como uma foto do momento, não como uma medição.
Ficamos com seus dois avisos práticos: testar em chat temporário e com exatamente a mesma redação (não pelo app com a sua própria conta, que mede seu histórico e sua localização), e não prometer posição, mas sim verificar se os rastreadores passam pelo site e se chega tráfego de chatgpt.com ou perplexity.ai.
Uma dúvida: quantas repetições da mesma pergunta vocês acham suficientes para confiar em uma resposta, cinco, dez?