Calculadora de Testes A/B

Sim. A calculadora é totalmente gratuita, sem registo e sem limites de utilização. Faça tantos cálculos de significância, tamanho de amostra e duração quantos precisar.

Sim. Todos os cálculos correm inteiramente no seu navegador. As visitas e as conversões que introduz nunca são enviadas nem guardadas num servidor.

O valor p frequentista é a probabilidade de observar uma diferença tão grande se as variantes fossem, na verdade, idênticas. O valor bayesiano é a probabilidade de a variante vencedora ser realmente melhor, algo que costuma ser mais fácil de interpretar e aplicar.

Um resultado é significativo quando o valor p fica abaixo do limite que escolheu, por exemplo 0,05 com 95% de confiança. Significa que é pouco provável que a melhoria observada se deva ao acaso, e não que a melhoria seja grande ou permanente.

Ambos usam a sua taxa de conversão base, o efeito mínimo detetável, o nível de confiança e a potência estatística para encontrar as visitas necessárias por variante. A duração limita-se a dividir esse objetivo pelo seu tráfego diário.

Mantenha o teste até atingir o tamanho de amostra calculado e cubra ciclos semanais completos para captar o comportamento durante a semana e ao fim de semana. Evite terminá-lo cedo demais ou espreitar os resultados, pois isso aumenta os falsos positivos.