Auditoria de visibilidade em IA: a maioria mede ruído
TL;DR
- A maioria das auditorias de visibilidade em IA mede ruído: tratam um teste de prompt como uma posição de SERP, quando a mesma pergunta dá respostas diferentes a cada vez.
- Medir a sério é tratar isto como uma sondagem: uma taxa de menção sobre 7-8 corridas por motor, com margem de erro. Uma só corrida tem margem de ±33 pontos.
- Cobre os quatro motores (as fontes coincidem só em 3,8%) e as línguas de cada mercado (a língua é o maior fator de variação). Nunca uses a tua posição no Google como medida: 60%+ do que a IA cita não está no teu top 10.
- É o passo R - Rastreio - do método CITAR: sem medição, GEO é fé; com medição, é gestão.
Medir visibilidade em IA: sondagem, não ranking
- 1Taxa de menção, não um binário
- 27-8 corridas + margem de erro
- 34 motores e as línguas de cada mercado
- 4GSC e GA4 como camada, não proxy
Sem medição, GEO é fé
A maior parte das auditorias de visibilidade em IA mede ruído. Não porque a ideia seja má - porque trata um teste de prompt como se fosse uma consulta de posição no Google, quando é o oposto. Uma posição de SERP é determinística: mede-se uma vez. Uma citação de IA é uma distribuição: amostra-se. Enquanto medires a IA como um rank-check, tiras conclusões de uma moeda ao ar. Medir a sério começa por aceitar isto.
O que é uma auditoria de visibilidade em IA
É o processo de medir, de forma repetível, se e como a tua marca é citada pelos motores de IA generativa. Em vez de posições numa SERP, olhas para citações dentro das respostas: quantas vezes és mencionado, para que perguntas, com que fontes, e como te comparas com os concorrentes. O GEO está hoje onde o SEO estava em 2008 - toda a gente sabe que importa, mas a medição ainda mal existe. A auditoria é o que a torna possível.
Fazer tu ou mandar fazer?
Depende do que está em jogo. Se tens um mercado, tempo e vontade de aprender, o método abaixo chega para montares a tua auditoria e geri-la mensalmente. Se operas em vários mercados ou línguas, não tens tempo para a disciplina mensal, ou precisas de um diagnóstico defensável à frente de quem decide, faz mais sentido mandar fazer - é o que faço no serviço de GEO, e podes começar pela auto-auditoria CITAR para teres um primeiro retrato em minutos. O resto do artigo é como se faz, a sério.
Porque a maioria das auditorias de IA mede ruído
Porque trata uma resposta como um facto, quando é uma amostra. A mesma pergunta ao mesmo motor varia a cada execução - por sampling, memória, personalização, geografia e login. Os números não deixam dúvida:
- Em 12.778 respostas (5 motores, 164 dias), a ChatGPT devolveu o mesmo conjunto de citações em 0,06% das repetições; nenhum motor passou de 2,5% (EWR Digital).
- Numa decomposição de variância (12.933 respostas), uma resposta única carrega só 1,5% de sinal de marca; 34,8% é ruído puro entre repetições (Żatuchin, 2026 - preprint, n=20, interesse comercial declarado; cruzado com as outras fontes).
- A distinção que muda tudo: se és mencionado é estável (concordância 0,83 entre repetições); que fontes te citam é caos (0,31). "Apareço?" mede-se; "com que fontes?" é volátil.
E há dois erros de alvo. A língua é o maior fator sistemático (26-32% da variação): auditar num só idioma é cego, e para marcas multimercado é o erro que mais custa. E as citações descolam dos rankings - só 38% das citações das AI Overviews estão no top 10 orgânico (Ahrefs, 863 mil keywords). Medir visibilidade em IA pela tua posição no Google ignora 60%+ do que é citado. Há ainda o erro escondido das ferramentas: correm queries logged-out, das contas delas, sem a memória nem a geografia do teu cliente - o número que te vendem pode não ser o que o cliente vê.
Como medir a sério, sem te enganares
Trata-o como uma sondagem, não como um ranking: amostras, tiras uma percentagem com margem, segues a tendência e não sobre-interpretas uma sondagem isolada. Seis regras, cada uma a corrigir uma das falhas de cima:
- Taxa, não binário. A métrica é a Taxa de Menção: corridas que te mencionam a dividir por todas as corridas, vezes 100 (fórmula pública). "Uma taxa de uma corrida não é medição, é um sorteio."
- Reporta a margem e corre o suficiente. Uma corrida tem ±33 pontos de margem; 7-8 corridas trazem-na para ±9-10. Mínimo de 7-8 por prompt e motor.
- Largura, não repetição. Audita cada idioma-alvo e os quatro motores, em vez de repetir 100 vezes o mesmo prompt - a fiabilidade compra-se a cobrir, não a repetir.
- Mede a menção como sinal; trata as fontes como voláteis. Usa a lista de fontes para saber o que influenciar, não como KPI - ela muda a cada corrida.
- Carimba modelo e data; abre nova série quando o modelo muda. A variação entre meses é estatisticamente indistinguível de perguntar duas vezes - uma mudança só conta se ultrapassa a margem.
- Triangula com o GSC e o GA4, como camadas, não como proxy. A sondagem diz se és citado; o relatório de IA do GSC diz quanto apareces nas superfícies da Google; o GA4 diz o que vale em negócio.
| Corridas do prompt | Margem (IC 95%) |
|---|---|
| 1 corrida | ±33 pontos - um sorteio |
| 7-8 corridas | ±9-10 pontos - utilizável |
Quem mede bem, e quem é black box
A prova de que isto não é teoria: os poucos que medem bem mostram as contas.
- O framework de referência é o do iPullRank (Mike King): Input (relevância de passagem, saliência de entidade), Canal (share of voice, taxa de citação, sentimento) e Performance (tráfego e conversões, via GA4 e GSC). Quem mede a sério usa o GSC e o GA4 - na camada de resultado, não como proxy.
- A margem é pública: a 25%, 100 observações dão ±8,5 pontos, 300 dão ±4,9. Mais amostra, menos margem.
- Entre ferramentas, a Gumshoe documenta intervalo de confiança (95%, 800 observações por corrida). A Profound, a Peec e a Semrush não publicam metodologia nem contagem de corridas nem margem (comparação da Popsight, que é concorrente). A regra: desconfia de qualquer score de IA sem metodologia à vista.
Com que frequência auditar
Mensal para a maioria dos negócios; quinzenal se estás num setor competitivo ou a executar um plano de GEO ativo. Com uma condição que quase ninguém diz: a variação entre meses pode ser indistinguível de ruído, por isso a cadência só vale com a margem ao lado - se a mudança não ultrapassa o intervalo, não mudou nada.
O meu método de auditoria
Esta medição é o passo R (Rastreio) do meu método CITAR, e faço-a sempre na perspetiva do consumidor, nunca na que a marca acha que tem. Cruzo dados reais - a começar pela Search Console - com trabalho de campo: quando é preciso, faço de cliente mistério, interajo com o chat, o suporte ou a linha telefónica, envio dúvidas e espero pelas respostas. E o mais revelador: mapeio os gaps entre o que as marcas comunicam e aquilo que as pessoas vão realmente perguntar ao Reddit e aos fóruns sobre os produtos e as marcas. Esse fosso - entre a mensagem oficial e a dúvida real - é onde se perde a maior parte da visibilidade na IA.
Sem esta disciplina, continuas a adivinhar se a IA te cita - e quem mede ganha-te o espaço enquanto esperas. Se quiseres o retrato feito e defensável, trato disso no serviço de GEO.
Dados-chave
| Motores a cobrir | ChatGPT, Perplexity, Gemini, AI Mode |
|---|---|
| Fontes em comum entre motores | ~10% |
| Sinal do lado Google | Relatório de IA generativa (GSC) |
| Tráfego de IA | GA4 (regex de referral) |
| Métrica oficial única de citações | Não existe |
Não há métrica oficial única de citações em IA; combina-se baseline de prompts + GSC + GA4.
Fontes: Google Search Central - Gen-AI performance reports · Adapt - AI search roundup 2026
Erros comuns e como fazer bem
Uma auditoria de IA vale pelo método, não por uma captura de ecrã. O que a torna fiável:
| Evita (erro comum) | Faz (boa prática) |
|---|---|
| ✗ Perguntar uma vez e tirar conclusões | ✓ Repetir o mesmo conjunto de prompts periodicamente |
| ✗ Mudar os prompts a cada teste | ✓ Fixar as perguntas para comparar ao longo do tempo |
| ✗ Auditar só o ChatGPT | ✓ Cobrir ChatGPT, Perplexity, Gemini e AI Mode (fontes distintas) |
| ✗ Confiar só na perceção | ✓ Cruzar com impressões (GSC) e tráfego de IA (GA4) |
Ferramentas que uso e recomendo
- ChatGPTAssistente de IA para pesquisa, análise e auditorias rápidas.
- PerplexityMotor de resposta com fontes, útil para pesquisa e GEO.
- GeminiAssistente de IA do Google, com grounding no Search.
- Google Search ConsolePerformance orgânica, cobertura e Core Web Vitals de campo.
- Google Analytics 4Medição de comportamento e conversões.
Fontes
- EWR Digital - variância de respostas de IA (12.778 respostas, 2026)
- Żatuchin - decomposição de variância em respostas de marca de LLMs (arXiv, 2026)
- authoritytech - como se calcula a taxa de citação
- iPullRank - De Clicks a Citações: métricas de medição em IA
- Writesonic - sobreposição de fontes entre motores (161.286 prompts, 2026)
- Kevin Indig - The Consensus Gap (Growth Memo, 2026)
- Ahrefs via Search Engine Journal - citações das AI Overviews vs top 10
- Popsight - comparação de metodologia das ferramentas de visibilidade em IA
- Google Search Central - relatórios de performance de IA generativa
Perguntas frequentes
Preciso de ferramentas pagas para auditar a visibilidade em IA?
Não. Um conjunto de prompts disciplinado, corrido 7-8 vezes por motor, mais o relatório de IA do GSC e o GA4, já te dá o essencial. Se usares uma ferramenta, exige metodologia à vista: contagem de corridas e margem. Um score sem método é fé. Relatório de IA no GSC →
Porque não basta auditar o ChatGPT?
Porque cada motor cita fontes diferentes. Num estudo de 161.286 prompts, os quatro motores só concordaram na fonte em 3,8% dos casos (medido ao nível de domínio); mesmo dois motores partilham só 12% a 24%. Estar no ChatGPT não te põe no Gemini nem nas AI Overviews. AI Overviews vs AI Mode →
Quantas vezes tenho de correr o mesmo prompt?
No mínimo 7-8 por motor: uma corrida tem margem de ±33 pontos, 7-8 trazem-na para ±9-10. Reporta sempre o intervalo ao lado do número. Serviço de GEO →
O Search Console e o GA4 servem para isto?
Servem, como camada de resultado, não como medida de citação. O relatório de IA do GSC dá impressões nas superfícies de IA da Google; o GA4 dá o tráfego. O que não podes é usar a tua posição orgânica como proxy - 60%+ do que a IA cita não está no teu top 10. Medir tráfego de IA no GA4 →