Калькулятор A/B тестів метрик-відношень
Чи є різниця в моїй метриці-відношенні (наприклад, AOV або дохід на клік) статистично значущою?
Аналізуйте результати A/B тестів для метрик-відношень sum(X)/sum(Y): середній чек, дохід на користувача, CTR. Дельта-метод для точної оцінки дисперсії.
When to use: For metrics computed as sum(X)/sum(Y) where the denominator varies per user — e.g., AOV (revenue/orders), Revenue per Click, or Time per Session. Users contribute different numbers of events, making simple averaging biased. If your metric is one value per user (like total revenue), use the Continuous Metrics calculator instead.
Як користуватися калькулятором
Введіть розмір вибірки, середнє та стандартне відхилення. Калькулятор використовує дельта-метод для правильної оцінки дисперсії метрик-відношень.
Дельта-метод для метрик-відношень
Метрики-відношення не можна аналізувати простим t-тестом. Дельта-метод дає незміщену оцінку дисперсії відношення через розклад Тейлора.
Коли використовувати цей калькулятор
Коли метрика — відношення двох сум: дохід/користувачі (ARPU), дохід/замовлення (AOV), кліки/покази (CTR).
Поширені помилки тестування метрик-відношень
Найчастіша помилка — використання звичайного t-тесту, що дає зміщену оцінку дисперсії та неправильні p-значення.