Sua loja aparece no ChatGPT? Como medir de verdade

Por William Motta ·

William Motta sentado à mesa em ambiente de trabalho com iluminação quente, laptop visto por trás, ilustrando a medição de share of voice da marca em respostas de IA

Perguntar uma vez pro ChatGPT "qual a melhor loja de X" e ver a sua marca aparecer não prova que a sua loja é citada pela IA — porque a resposta é probabilística: a mesma pergunta, repetida, muitas vezes vem com uma lista diferente. Em testes com milhares de repetições, a mesma lista de marcas se repetiu em menos de 1 a cada 100 vezes. Por isso "ranking número 1 no ChatGPT", que se vende por aí, é matematicamente impossível de garantir. O jeito certo de medir é por frequência: rodar a mesma pergunta de 60 a 100 vezes e contar em quantas rodadas a sua marca aparece — isso se chama share of voice, e uma marca forte no nicho fica entre 30% e 50% de presença.

O print que não prova nada

É comum um dono de e-commerce mostrar, animado, um print: perguntou ao ChatGPT "melhor loja de X" e a loja dele apareceu na resposta. A leitura mais comum — "estou ranqueando na IA" — não se sustenta. Esse print é uma amostra de tamanho 1, e decisão tomada sobre amostra de 1 é achismo com aparência de dado. Se a mesma pergunta fosse feita de novo meia hora depois, a lista poderia vir sem a loja. Quem mede pouco comemora cedo; quem mede certo sabe exatamente onde está — e por isso sabe pra onde ir.

Por que uma pergunta só não vale nada

A IA não consulta uma "tabela de ranking" fixa: cada resposta é gerada na hora, com um componente de aleatoriedade. Julgar a presença da sua marca por uma única resposta é como avaliar a saúde de uma linha de produção olhando uma única peça que saiu da esteira — uma peça não diz se o processo está sob controle, é preciso amostra. Tem ainda uma segunda armadilha: o cache semântico. OpenAI e Google guardam respostas de perguntas parecidas por cerca de 24 horas, então repetir a mesma pergunta no mesmo dia pode só mostrar a mesma resposta velha, congelada — e dar falsa impressão de consistência.

Como medir na mão (o mínimo viável)

Três passos dão uma primeira leitura, antes de qualquer ferramenta:

1. Escolha de 5 a 10 perguntas reais que o seu cliente faria — não só "melhor loja de tênis", mas variações como "tênis de corrida bom e barato" ou "onde comprar tênis para pisada pronada". A pergunta do cliente se desdobra em várias sub-perguntas, e cobrir essa variação importa.

2. Rode cada pergunta cerca de uma dúzia de vezes, espaçando ao longo de dias e variando levemente a formulação para fugir do cache. Anote em quantas a sua marca apareceu e em quantas o concorrente apareceu.

3. Calcule a frequência. Apareceu em 2 de 12 rodadas? São 17%. O concorrente em 9 de 12? 75%. Agora você tem um número, não uma impressão. Faça essa contagem separada por ferramenta: ChatGPT e Perplexity se comportam de forma diferente.

ChatGPT, Perplexity e Google não recomendam do mesmo jeito

SuperfícieComportamento observado
ChatGPTRecomenda marca na quase totalidade das respostas comerciais de e-commerce — é onde medir citação pesa mais.
PerplexityTambém recomenda marca, mas com comportamento diferente do ChatGPT — meça em separado.
Google (resposta de IA)Tem caráter informativo/educativo; quase não recomenda uma loja específica.

Os 3 erros que estragam a medição

ErroPor que engana
Medir uma vez sóTrata uma resposta probabilística como foto fixa — e não é.
Medir tudo no mesmo minutoO cache semântico de ~24h devolve a mesma resposta velha, disfarçada de consistência.
Misturar as ferramentasChatGPT e Perplexity são índices diferentes, com pesos diferentes — presença em um não diz nada sobre o outro.

Do caseiro ao confiável

O método na mão já serve para sair do achismo — ele mostra a direção ("estou muito atrás do concorrente"). Mas para virar decisão de investimento, é preciso robustez estatística: as 60 a 100 rodadas por pergunta, um painel de 20 a 40 perguntas do nicho, rodadas espaçadas para fugir do cache, e o mesmo painel repetido todo mês para acompanhar a tendência.

É esse o desenho por trás do sigma-radar, a medição própria da E-Sigma: aplicar rigor estatístico — o mesmo usado para acompanhar qualquer processo produtivo — à pergunta "minha marca é citada pela IA". E o ponto que mais gente pula: medir o antes de mexer em qualquer coisa. Sem a foto do antes, dá para melhorar e não ter como provar — é a diferença entre dizer "acho que melhorou" e mostrar, por exemplo, que a presença no nicho foi de 5% para 22% em dois meses.

O que fazer com o resultado

Se a sua marca aparece pouco (ou nunca) nas rodadas de teste, o próximo passo não é tentar truque de SEO tradicional — é entender os fatores que fazem a IA decidir quem citar. É o que detalhamos neste outro artigo: da renderização no servidor ao dado estruturado, passando pela nota de avaliação e por não bloquear sem querer os robôs de busca de IA.