Нулевая гипотеза

Нулевая гипотеза (null hypothesis) — это статистическое предположение о том, что между вариантами нет реальной разницы, а изменение не дает эффекта. В A/B тестировании нулевая гипотеза утверждает: новый вариант не лучше и не хуже контрольного, а любые расхождения случайны.

Смысл теста — попытаться опровергнуть нулевую гипотезу. Если результат статистически значим (разница слишком велика, чтобы быть случайной), нулевую гипотезу отвергают и признают, что изменение действительно повлияло. Если нет — оснований считать вариант лучше недостаточно.

Такой подход защищает от поспешных выводов: по умолчанию считается, что эффекта нет, пока данные убедительно не докажут обратное. Это дисциплинирует и не дает принять случайное колебание за реальный результат. Нулевая гипотеза — базовое понятие статистики, лежащее в основе корректных экспериментов и оценки статистической значимости.