Историческая конверсия была 8%. После редизайна у вас 5000 пользователей и 420 покупок. Какой тест подходит, чтобы проверить гипотезу H0: p = 0.08 на большой выборке?
AОдновыборочный
z-test для доли против фиксированного значения p0 = 0.08 на большой выборкеBДвухвыборочный
z-test между тестовой и контрольной группами, как в обычном A/B-экспериментеCПарный
t-test по пользователям с сравнением до и после редизайна на одних и тех же людяхDТест на корреляцию между временем визита и фактом покупки на пользовательском уровне
Правильный ответ. Если сравниваете одну долю с фиксированным
p0, используйте одновыборочный z-test (или точный биномиальный при малых n).Разбор
Здесь есть одна выборка и внешний ориентир p0 = 0.08, то есть задача не про сравнение двух независимых групп. На большой выборке нормальное приближение обычно достаточно, поэтому применяют одновыборочный z-test. При малых n вместо него часто выбирают точный биномиальный подход. Типичная ошибка — применять двухвыборочный тест, когда второй группы нет.
Проверь себя · 1/3разбор после ответа
В
z-test вы считаете статистику для разницы p_treat - p_control. Если значение z получилось отрицательным, что это обычно означает?Ещё вопросы по теме «Тесты для долей»
- Команда считает конверсию из показа в клик: 80 кликов на 1000 показов. Как корректнее всего описать эту величину как долю?
- `конверсия` выросла с 5% до 6%. Как корректно назвать абсолютное изменение?
- Если `n` увеличили в 4 раза при том же `p`, как примерно изменится стандартная ошибка доли `SE = sqrt(p*(1-p)/n)`?
- Когда двухвыборочный `z-test` для сравнения долей обычно уместен?
- Вы считаете конверсию из визита в покупку на уровне пользователя. Что корректно считать `success` и что считать `trial` для расчёта доли?
- Все вопросы по «Тесты для долей» →