Como medir a visibilidade em IA sem se enganar
As respostas de IA mudam a cada execução, então um print não prova nada. Como amostrar prompts, quais números acompanhar e quantas respostas você precisa antes de considerar uma mudança real.
Pergunte ao ChatGPT "qual é a melhor ferramenta para X?" duas vezes seguidas e você pode receber duas listas diferentes. Os modelos geram texto com certa aleatoriedade e, quando buscam na web, os resultados que leem também mudam. Um print da execução em que você apareceu em primeiro diz muito pouco sobre o que o seu próximo comprador vai ver.
Medir a visibilidade em IA significa tratar cada resposta como uma amostra e acompanhar taxas.
Comece pelos prompts certos
Use as perguntas que seus compradores fazem, com as palavras deles. Ligações de vendas, tickets de suporte e as consultas do Google Search Console são fontes melhores do que um brainstorm. A maior parte da lista deve ser de perguntas de categoria, sem o nome da sua marca ("melhor software de emissão de notas para freelancers"), porque é nelas que você ganha ou perde novos compradores. Mantenha algumas perguntas de marca ("a SuaMarca é grátis?") para checar o que os assistentes dizem sobre você.
De vinte e cinco a cem prompts cobrem a maioria das empresas. Acompanhe cada mecanismo separadamente, porque ChatGPT, Gemini, Perplexity e Claude buscam e citam de formas diferentes.
Consulte cada prompt mais de uma vez
Uma resposta por prompt por semana equivale a jogar uma moeda toda semana. De três a cinco respostas por prompt a cada execução é um mínimo razoável, e você ganha precisão somando respostas de vários prompts e semanas.
A tabela mostra por quê. Ela traz um intervalo de confiança de 95% (intervalo de Wilson) para uma taxa de menções de cerca de 50% com diferentes tamanhos de amostra:
| Respostas | Taxa observada | Faixa real provável |
|---|---|---|
| 3 | 2 de 3 | 21% a 94% |
| 10 | 5 de 10 | 24% a 76% |
| 30 | 15 de 30 | 33% a 67% |
| 60 | 30 de 60 | 38% a 62% |
| 120 | 60 de 120 | 41% a 59% |
Com dez respostas, uma variação de 40% para 60% pode ser ruído. Com cento e vinte, é muito provável que seja real. Mostre as taxas com o tamanho da amostra ao lado e desconfie de qualquer painel que exiba um percentual sem ele.
Os números que valem a pena acompanhar
Taxa de menções é o percentual de respostas que citam você. É o número principal e o que mais reage ao trabalho de GEO.
Posição média é o seu lugar na ordem de recomendação quando você é citado. Quinto de cinco e primeiro de cinco contam igualmente como menção, mas o comprador age a partir do topo da lista.
Taxa de citação é o percentual de respostas que linkam uma das suas páginas como fonte. Ela mostra se o seu próprio conteúdo está fazendo o trabalho ou se você está sendo citado por causa de páginas de terceiros.
Precisão dos fatos é o percentual de afirmações sobre sua marca que correspondem à realidade. Preços errados e recursos omitidos nas respostas de IA fazem você perder compradores que nunca vão visitar seu site para conferir.
Separe os mecanismos e as amostras
Juntar todos os mecanismos num só número esconde o que está acontecendo. Uma alta no Perplexity e uma queda no ChatGPT podem se anular. Mantenha cada mecanismo separado e olhe a visão por prompt quando os totais mudarem, para ver quais perguntas mudaram.
Guarde também as respostas brutas. Quando um número cai, ler as respostas explica o motivo: um novo concorrente na lista, um artigo citado que tirou você, uma busca que agora retorna outras páginas.
Relacione as mudanças ao que você publicou
Anote a data em que você publica uma página, conquista uma menção numa lista ou corrige um bloqueio de rastreador, e acompanhe os prompts que devem ser afetados nas duas ou três semanas seguintes. Respostas que dependem de busca na web ao vivo costumam reagir poucos dias depois que a página é indexada. Respostas que dependem da memória do modelo só mudam com o lançamento de novos modelos.
FAQ
Com que frequência devo testar de novo?
Semanalmente é suficiente para a maioria das equipes. Execuções diárias custam mais e, na maior parte das vezes, só adicionam ruído, a menos que você acompanhe um conjunto muito grande de prompts.
Dá para medir a visibilidade em IA manualmente?
Dá, para poucos prompts, mas você precisa de sessões novas sem o seu histórico, várias execuções por prompt e um jeito consistente de registrar posições e fontes. Acima de dez prompts, vira um trabalho de meio período, e é essa lacuna que ferramentas como o Promptvane preenchem.
O que é uma boa taxa de menções?
Depende de quão concorrida é a sua categoria. Compare-se com os concorrentes citados nas mesmas respostas em vez de buscar uma meta absoluta, e acompanhe a tendência.