Калькуляторы рекламы100% бесплатно
Калькулятор A/B тестов - Статистическая значимость
Определите, являются ли результаты вашего A/B теста статистически значимыми. Узнайте, когда у вас есть явный победитель и можно уверенно масштабировать лучший вариант.
Введите результаты теста
Вариант A (Контрольный)
Вариант B (Тестовый)
Результаты теста
Калькулятор размера выборки
Оцените, сколько посетителей на вариант вам потребуется перед началом теста.
Рекомендация по размеру выборки
Часто задаваемые вопросы о калькуляторе A/B тестов
Статистическая значимость означает, что различие между вашими вариантами вряд ли вызвано случайностью. Результат обычно считается значимым при уровне доверия 95% - это означает, что только 5% вероятность того, что различие случайно.
Обычно требуется как минимум 1,000 посетителей на вариант для значимых результатов. Точное количество зависит от вашего базового уровня конверсии и минимального обнаруживаемого эффекта. Меньшие различия требуют больше данных.
Проводите тесты как минимум 1-2 полных бизнес-цикла (обычно 2-4 недели), даже если вы достигли значимости раньше. Это учитывает влияние дня недели и вариации трафика. Никогда не прекращайте тест раньше времени на основе предварительных результатов.