ABtesting.tools

Calculadora de tamanho de amostra para testes A/B

Quantos visitantes preciso para meu teste A/B?

Planeje seu teste A/B calculando o tamanho da amostra necessário. Insira sua taxa de conversão base, o efeito mínimo detectável e o poder desejado para saber quantos visitantes você precisa por variante.

Como usar esta calculadora

Insira sua taxa de conversão base (sua taxa de conversão atual antes do teste), o efeito mínimo detectável (a menor melhoria que você deseja detectar), o nível de confiança desejado e o poder estatístico. A calculadora mostra instantaneamente quantos visitantes você precisa por variante. Ajuste o controle deslizante do MDE para ver como efeitos menores exigem exponencialmente mais tráfego.

Entendendo a fórmula

O tamanho da amostra é calculado usando análise de poder para um teste z de duas proporções. A fórmula leva em conta quatro parâmetros principais: sua taxa de conversão base, o tamanho do efeito mínimo detectável, o nível de significância (alfa) e o poder estatístico desejado (1 - beta). A relação entre tamanho da amostra e MDE não é linear — reduzir pela metade o tamanho do efeito que você deseja detectar aproximadamente quadruplica o tamanho da amostra necessário.

Quando usar esta calculadora

Use esta calculadora antes de lançar qualquer teste A/B para determinar quantos visitantes você precisa. Executar um teste sem planejamento adequado do tamanho da amostra é um dos erros mais comuns em experimentação. Um teste com poder insuficiente pode não detectar uma melhoria real, desperdiçando tempo e recursos. Um teste com poder excessivo desperdica tráfego que poderia ser usado em outros experimentos.

Erros comuns no planejamento de amostra

Definir o MDE muito pequeno leva a tamanhos de amostra impraticáveis. Seja realista sobre qual tamanho de efeito importa para o seu negócio. Esquecer de considerar o número de variantes (cada variante adicional precisa do mesmo tamanho de amostra) é outro erro frequente. Lembre-se também de que o tamanho da amostra é por variante, não total — se você precisa de 10.000 por variante com duas variantes, são 20.000 visitantes no total.