How long should you run an A/B test?

It depends on your traffic and effect size. Most tests need 1-4 weeks. Always run at least one full week.

Can I stop my test early if I see significant results?

Stopping early inflates false positive rates. Use sequential testing for valid early stopping.

Should I run my test for full weeks?

Yes, always round up to complete weeks to capture weekday and weekend traffic patterns.

Calculadora de duração para testes A/B

Question: How long should I run my A/B test?

Descubra quanto tempo seu teste A/B precisa ser executado para atingir significancia estatistica. Insira seu trafego diario e os parametros do teste para obter uma estimativa precisa.

Como usar esta calculadora

Insira a média de visitantes diários, a porcentagem de trafego alocada ao teste, sua taxa de conversao base atual e o efeito minimo detectavel. A calculadora calcula o tamanho da amostra necessario e divide pelo seu trafego diario disponivel para fornecer o numero de dias necessarios. Ajuste a porcentagem de trafego para ver como alocar mais ou menos trafego afeta a duracao.

Como a duração é calculada

O calculo de duracao combina analise de tamanho de amostra com planejamento de trafego. Primeiro, o tamanho da amostra necessario por variante e calculado usando analise de poder. Em seguida, a amostra total e dividida pelo trafego diario efetivo (visitantes diarios multiplicados pela porcentagem de trafego, dividido pelo numero de variantes). Isso fornece o numero minimo de dias necessarios. A melhor pratica e sempre executar por pelo menos uma semana completa para capturar efeitos de dia da semana.

Quando usar esta calculadora

Use esta calculadora durante a fase de planejamento para determinar se um teste e viavel com seu nivel de trafego. Se a duracao estimada exceder 4 a 6 semanas, considere aumentar o MDE (detectar apenas efeitos maiores), aumentar a alocacao de trafego ou escolher uma pagina com mais trafego para testar. Saber a duracao antecipadamente evita o erro comum de encerrar testes cedo demais.

Erros comuns na duração do teste

O maior erro e encerrar um teste antes de atingir a duracao necessaria porque os resultados iniciais parecem promissores (ou desanimadores). Isso se chama peeking e infla sua taxa de falsos positivos. Outros erros incluem nao considerar diferencas de trafego entre dias de semana e finais de semana, ignorar efeitos sazonais que podem distorcer os resultados, e nao planejar ciclos de negocios completos suficientes.