Metodologia

Leia antes de coletar. Um teste malfeito gera conclusão errada para qualquer lado.

O que o teste mede

Se as plataformas da Meta tratam os dois candidatos de forma diferente em situações idênticas: busca, recomendação, canais do WhatsApp, Meta AI e métricas públicas de posts.

O que ele não mede: intenção. Uma assimetria pode vir de decisão deliberada, de falha técnica, de regra aplicada de forma desigual ou de diferenças reais de comportamento do público. O teste mostra se há diferença, não por quê.

Regras de coleta

  1. Simetria. Os dois lados de uma rodada são feitos no mesmo aparelho, na mesma conta, com no máximo 5 minutos de diferença.
  2. Ordem sorteada. O app sorteia quem é testado primeiro. Siga a ordem mostrada.
  3. Texto exato. Use o botão "Copiar". Não reescreva termos nem pedidos.
  4. Conversa nova na Meta AI para cada pedido, para que um pedido não influencie o outro.
  5. Captura de tela sempre que possível. Sem prova, o registro vale menos.
  6. Contas reais. Não crie perfis falsos: além de violar os termos da Meta, isso contamina o resultado.
  7. Diversidade de contas. Recomendação e busca são personalizadas. Uma conta que segue só um candidato tende a ver mais esse candidato. Por isso o app registra o perfil da conta; o ideal é ter testadores de todos os perfis, inclusive contas que seguem os dois ou nenhum.
  8. Registre também o resultado "chato". Rodadas em que nada de diferente acontece são tão importantes quanto as outras. Descartar resultados que não confirmam uma suspeita invalida o teste.

Como o painel decide

Cada rodada vira um par (sim/não para cada candidato). Rodadas em que os dois receberam o mesmo tratamento não indicam nada. O teste de McNemar exato compara as rodadas divergentes: se "só um candidato" acontece muito mais para um lado do que para o outro, além do que o acaso explicaria, o painel aponta assimetria.

Como vários testes rodam ao mesmo tempo, o limite de significância é dividido pelo número de testes com dados (correção de Bonferroni). O painel só emite conclusão com pelo menos 20 rodadas e 6 resultados divergentes no teste.

Limitações conhecidas