How long should you run an A/B test?

It depends on your traffic and effect size. Most tests need 1-4 weeks. Always run at least one full week.

Can I stop my test early if I see significant results?

Stopping early inflates false positive rates. Use sequential testing for valid early stopping.

Should I run my test for full weeks?

Yes, always round up to complete weeks to capture weekday and weekend traffic patterns.

Калькулятор длительности A/B теста

Как долго нужно проводить мой A/B-тест?

Узнайте, сколько времени нужно для достижения статистической значимости. Введите дневной трафик и параметры теста.

Как пользоваться калькулятором

Введите средних дневных посетителей, процент трафика в тесте, базовую конверсию и MDE. Калькулятор вычислит размер выборки и разделит на дневной трафик. Меняйте процент трафика, чтобы увидеть влияние на длительность.

Как рассчитывается длительность

Расчёт длительности сочетает анализ размера выборки с планированием трафика. Сначала вычисляется выборка на вариант через анализ мощности. Затем общая выборка делится на эффективный дневной трафик. Рекомендуется проводить тест минимум одну полную неделю.

Когда использовать этот калькулятор

На этапе планирования для определения осуществимости теста. Если длительность превышает 4-6 недель, рассмотрите увеличение MDE, увеличение доли трафика или выбор более посещаемой страницы.

Распространённые ошибки длительности

Главная ошибка — остановка теста до достижения нужной длительности из-за обнадёживающих ранних результатов. Это называется подглядыванием и повышает ложноположительные. Также: неучёт разницы будней/выходных, сезонных эффектов и недостаточное количество полных циклов.