Калькулятор A/B тестов
Введите количество посетителей и полученных конверсий для контрольной группы (А) и тестового варианта (В). Калькулятор мгновенно рассчитает достоверность результатов и определит победителя сплит-теста.
Исходные данные теста
Вариант A (Контрольный)
Вариант B (Тестовый)
Результаты анализа
Недостаточно данных
Введите корректные числовые значения посетителей и конверсий для запуска калькулятора.
Справочная информация
Что такое статистическая значимость?
В A/B тестировании статистическая значимость (или достоверность) показывает вероятность того, что разница между показателями конверсий вариантов А и Б не является случайным совпадением, а вызвана реальными изменениями. Достоверность свыше 95% считается стандартным порогом для принятия решений.
Как работает Z-критерий?
Z-критерий оценивает разницу двух пропорций (конверсий) с учетом размера выборок. На основе Z-score рассчитывается p-value — вероятность ошибочного подтверждения гипотезы. Чем больше выборка (трафик) и разрыв в конверсиях, тем выше достоверность.
Часто задаваемые вопросы
Какая минимальная выборка нужна для A/B теста? +
Не существует единого числа, но обычно рекомендуется иметь не менее 100-200 конверсий на каждый вариант для получения минимально стабильных результатов. Иначе случайные единичные клики будут сильно искажать общую картину.
Можно ли останавливать тест сразу при получении 95% значимости? +
Нежелательно делать это слишком рано (так называемая ошибка подглядывания или peaking effect). Заранее определите необходимый размер выборки с помощью калькулятора силы теста и проводите тест полную неделю или две, чтобы исключить влияние дней недели.
Что делать, если тест показал отсутствие значимой разницы? +
Если размер выборки достаточен, а результат нейтрален, это означает, что внедренное изменение не влияет на поведение пользователей. Вы можете безбоязненно оставить контрольный вариант и переходить к следующей гипотезе.
Популярные инструменты и профессиональные услуги
Вывод сайтов в ТОП Яндекса и Google за процент от прибыли. Безопасная раскрутка с гарантией коммерческого результата.
Создание быстрых, адаптивных сайтов на Laravel, Filament PHP и SPA. Оптимизировано под продвижение с первого дня запуска.
Глубокое сканирование всего сайта роботом-краулером: поиск битых ссылок (404), дубликатов заголовков и проблем с индексацией.
Проверка длины и соответствия заголовков и описаний стандартам поисковых систем Yandex и Google.
Проверка кодов ответа сервера (200, 301, 404, 500) одновременно для 50 ссылок с расширенным логом цепочки редиректов.
Полный каталог SEO-инструментов, маркетинговых калькуляторов и утилит для веб-разработчиков в одном месте.