Рассчитайте точное количество участников для A/B-теста, опроса или эксперимента с учётом мощности теста и минимального эффекта.
MDE — минимальный прирост конверсии, который считается значимым. 20% от базовой конверсии 5% = целевая конверсия 6%.
Как рассчитывается размер выборки
Важно: MDE (минимальный обнаруживаемый эффект) — это не то, какой эффект вы ожидаете, а минимальный, который имеет бизнес-смысл. Чем меньше MDE, тем больше нужна выборка.
Размер выборки и мощность теста
Мощность теста (1−β) — это вероятность обнаружить реальный эффект, если он существует. При мощности 80% вы рискуете пропустить реальный эффект в 20% случаев.
Уровень значимости (α) — вероятность ложноположительного результата: при α=0,05 вы принимаете 5% риск увидеть эффект там, где его нет. Размер выборки напрямую зависит от обоих параметров: повышение мощности с 80% до 90% увеличивает необходимую выборку примерно на 30%, а снижение α с 0,05 до 0,01 — ещё на 40%.
С помощью нашего калькулятора вы можете работать в трёх режимах — A/B-тест, опрос и сравнение средних, и получить не только размер выборки, но и длительность теста, таблицу сценариев и чеклист из 6 пунктов перед запуском.