Teste de SEO com grupo de controle: como provar resultado

Você trocou o title de todas as páginas de categoria da loja numa segunda-feira. Três semanas depois, o Search Console mostra mais cliques nessas páginas. A reunião de resultado está marcada e o gráfico parece falar sozinho.

Ele não fala. No mesmo período, a campanha de volta às aulas começou, o Google soltou uma atualização e um concorrente tirou o site do ar por dois dias. Sem um grupo de controle, nada separa o efeito da sua troca do efeito desses fatos.

A única forma de separar o seu efeito do resto é comparar com páginas que não mudaram. Esse conjunto de páginas intocadas é o grupo de controle, e ele é o que transforma um gráfico bonito em evidência.

Uma alta depois de publicar só prova que o número subiu. O teste de SEO com grupo de controle divide páginas parecidas em dois grupos, muda apenas um deles e mede a diferença entre os dois no mesmo período, e essa diferença é a parte do resultado que você pode chamar de sua.

Por que "subiu depois que eu publiquei" não prova nada

A comparação de antes e depois assume que só uma coisa mudou entre as duas datas. Em busca orgânica, essa premissa quase nunca vale.

A primeira fonte de ruído é a sazonalidade. Demanda por material escolar, ar-condicionado ou declaração de imposto sobe e desce no calendário, e o seu tráfego acompanha. Comparar setembro com agosto mistura o efeito da sua mudança com o efeito do mês.

A segunda é o próprio Google. O painel de status da Busca lista as atualizações de ranking com data de início e de fim, e em 2026 ele já registra atualizações de core e de spam em meses diferentes. Se a sua mudança caiu na mesma janela de uma delas, o antes e depois não separa uma coisa da outra.

A terceira é a concorrência. Um concorrente que perdeu posição, mudou de domínio ou saiu do ar libera cliques que caem no seu colo.

A quarta é o ruído do próprio Search Console. A documentação do relatório de desempenho avisa que os dados mais recentes são preliminares e ainda podem mudar. Os resultados também variam com hora, lugar, dispositivo e histórico de quem busca, então o mesmo conjunto de páginas oscila de semana para semana sem que ninguém tenha mexido em nada.

Quem já trabalha com cultura data driven conhece o problema de outro contexto: correlação no tempo não é causa. O antes e depois tem esse defeito por construção, e só um grupo de controle corrige.

Como funciona um teste com grupo de controle

A lógica é a mesma de um ensaio clínico, trocando pacientes por URLs. Você escolhe um conjunto de páginas parecidas e divide em dois grupos. Um recebe a mudança e o outro fica exatamente como estava.

Os dois grupos vivem a mesma sazonalidade, a mesma atualização de algoritmo e o mesmo concorrente que caiu. Tudo o que vem de fora bate nos dois. O que só um deles recebeu foi a sua mudança.

Por isso o resultado não é quanto o grupo alterado cresceu. O resultado é quanto ele cresceu a mais do que o grupo de controle no mesmo período. Se os dois subiram na mesma proporção, a mudança não fez diferença mensurável, por mais bonito que o gráfico do grupo alterado esteja.

A SearchPilot, empresa que vende esse tipo de experimento, descreve o método no material público sobre SEO split testing: as páginas são sorteadas entre controle e variante, e cada página tem uma versão só. A empresa também usa cerca de 100 dias de histórico dos dois grupos para montar um modelo que prevê o tráfego sem a mudança, e compara o observado com essa previsão.

Quando dá para testar e quando não dá

O teste depende de volume. Com poucas páginas, a oscilação natural de cada uma é maior que qualquer efeito que uma troca de title consegue produzir, e o resultado vira sorteio.

A própria SearchPilot diz que costuma trabalhar com sites que têm pelo menos centenas de páginas no mesmo template e ao menos 30 mil sessões orgânicas por mês no conjunto testado. É o critério de um fornecedor, sem valor de norma, mas dá a ordem de grandeza.

O formato que funciona é o de muitas páginas geradas pelo mesmo molde:

• loja virtual com centenas de páginas de produto ou de categoria;
• catálogo, classificado ou diretório com uma página por item;
• blog grande, com muitos posts do mesmo tipo e tráfego distribuído.

O formato que não funciona é o site institucional com vinte páginas, ou o blog com um punhado de posts que concentram quase todo o tráfego. Nesses casos, o recurso honesto é outro: série longa e registro de mudanças. Anote a data de cada alteração relevante numa planilha, compare períodos equivalentes (o mesmo mês do ano anterior, por exemplo) e confira o painel de status do Google antes de atribuir qualquer variação a você. Você não prova causa, mas deixa de contar vitória que não é sua.

Como montar os grupos

Os dois lados precisam ser parecidos em tráfego e em comportamento ao longo do tempo.

Comece pelo recorte. Escolha páginas do mesmo template e da mesma intenção de busca: só páginas de produto, ou só posts de tutorial. Misturar categoria com produto cria dois grupos que reagem de forma diferente a qualquer atualização.

Depois, puxe o histórico de cliques de cada URL. O relatório de desempenho do Google Search Console permite filtrar e exportar por página. Se o volume passar do limite da interface, a API resolve.

Com a lista em mãos, faça o sorteio. Ordene as páginas por cliques, forme pares vizinhos e mande uma de cada par para cada lado por sorteio. Isso evita que as páginas mais fortes caiam todas no mesmo grupo.

Por fim, confira o grupo de controle contra o grupo alterado em algumas semanas de histórico. As duas curvas devem subir e descer juntas. A SearchPilot usa o mesmo critério: grupos com tráfego parecido e que acompanham um ao outro no tempo. Se as curvas divergem antes do teste, refaça o sorteio.

Uma regra técnica fecha a montagem. A orientação do Google sobre testes em sites proíbe mostrar ao Googlebot uma versão diferente da que o usuário vê, porque isso é cloaking. No teste por página, o problema some: cada URL tem uma versão só, para todo mundo.

Tempo, métrica e leitura do resultado

O tempo mínimo depende de o Google rastrear as páginas alteradas e de os cliques se acumularem. A SearchPilot diz que seus experimentos costumam levar de 2 a 4 semanas para atingir significância estatística. Para quem não tem modelo estatístico, trate quatro semanas completas como piso e rode sempre semanas inteiras, porque o tráfego de segunda-feira é diferente do de sábado.

O Google também pede que o teste acabe quando já houver dados suficientes. A mesma página de orientação avisa que um experimento mantido por tempo desnecessário pode ser interpretado como tentativa de enganar o buscador.

A métrica certa é clique orgânico por grupo. Posição média engana, porque o relatório calcula a média sobre as consultas em que a página apareceu. Se a mudança faz a página aparecer em buscas novas e mais distantes, a média piora mesmo com mais visitas. Impressão sozinha tem o problema oposto: sobe sem que ninguém clique.

A leitura segue três passos:

• calcule a variação de cliques de cada grupo entre o período anterior e o período do teste;
• subtraia a variação do grupo de controle da variação do grupo alterado;
• olhe essa diferença semana a semana, e não só no total.

Alguns cuidados evitam autoengano. Defina a métrica e a duração antes de começar, e não mude de critério quando o número não agradar. Não pare o teste no primeiro dia bom. Desconfie de efeito grande demais para uma mudança pequena: costuma ser uma página com pico isolado puxando o grupo inteiro. E aceite o resultado neutro, porque ele também é informação: a mudança não pagou o custo de ser aplicada no site todo.

Se no meio do teste alguém mexer nas páginas do controle, o teste acabou. Combine com quem publica conteúdo que aquelas URLs ficam congeladas até a data de fim.

Teste de SEO e teste A/B de conversão dividem coisas diferentes

Um teste A/B de conversão divide usuários: metade dos visitantes vê a versão A da página e metade vê a versão B. O robô do Google não entra nessa conta, e o objetivo é medir o que o visitante faz depois de chegar.

O teste de SEO divide páginas. O Google precisa enxergar uma versão só de cada URL, então não dá para sortear visitantes. O objetivo é medir quantas pessoas chegam.

Os dois testes se completam. O de SEO responde se a mudança traz mais gente pela busca. O de conversão responde se quem chega compra mais.

Por onde começar

1. Escolha a hipótese. Uma mudança só, aplicável em lote: incluir o preço no title, reescrever a meta description ou adicionar um bloco de perguntas frequentes.
2. Escolha o recorte. Páginas do mesmo template, com tráfego suficiente. Uma auditoria de SEO técnico antes do teste evita que um erro de indexação contamine só um dos grupos.
3. Monte os grupos. Exporte o histórico, forme pares por volume de cliques e sorteie. Confira se as curvas andam juntas.
4. Defina duração e métrica por escrito. Semanas completas, cliques orgânicos por grupo e a data de fim registrada.
5. Aplique a mudança só no grupo alterado. Congele o grupo de controle e anote a data exata da publicação.
6. Leia a diferença. Compare a variação dos dois grupos, semana a semana, e decida: expandir para todas as páginas, descartar ou testar outra hipótese.

As hipóteses boas costumam vir dos próprios dados. O método de pautas a partir do Search Console encontra páginas entre as posições 8 e 20, e esse conjunto é um bom candidato para testar mudanças de title.

A SearchPilot trabalha com cerca de 100 dias de histórico para montar os grupos. Com o registro de mudanças começando hoje, daqui a pouco mais de três meses você tem esse histórico em mãos.