Проверка результата AB-теста
Загрузите данные завершённого эксперимента: статистическая значимость, p-value, байесовский шанс победы, доверительный интервал и SRM. Каждый вариант — отдельная строка.
Предтестовый анализ AB-теста
Задайте базовую конверсию и трафик — калькулятор сам рассчитает минимальный детектируемый эффект (MDE) для каждой недели, целевую конверсию и потенциальную выручку. Гипотезу удобно заполнить в панели справа.
Калькулятор AB-тестов: посчитать тест и проверить статистическую значимость
Калькулятор тестов работает на двух этапах. До запуска он показывает, как минимальный детектируемый эффект (MDE) снижается неделя за неделей — вы сразу видите, какой прирост реально уловить на каждом сроке. После завершения — проверяет статистическую значимость: p-value, доверительный интервал, байесовский шанс победы и корректность распределения трафика (SRM).
Как посчитать AB-тест перед запуском
Укажите базовую конверсию и дневной трафик. Калькулятор AB-тестов сам вычислит MDE по неделям, целевую конверсию, необходимый размер выборки и покажет потенциальную выручку по среднему чеку.
Что такое статистическая значимость
Статистическая значимость означает, что разница между вариантами вряд ли случайна. Если p-value меньше уровня значимости (обычно 0,05), результат признаётся значимым.
Что такое мощность теста
Мощность теста (1−β) — вероятность обнаружить реальный эффект, если он есть. Стандарт — 80%: чем выше мощность, тем меньший эффект способен уловить тест.