Что такое доля в задачах про конверсию?
AОтношение числа
success к числу trial: x/nBРазница двух конверсий:
p_treat - p_controlCСреднее значение непрерывной метрики по пользователям
DВероятность события
p-value < 0.05Правильный ответ. Доля — это
x/n, где x успехов из n попыток.Разбор
В тестах для долей мы рассматриваем серию trial, каждый из которых заканчивается success или нет. Доля равна числу успехов x, деленному на число попыток n. Уже разницу долей (p_treat - p_control) обычно тестируют отдельной процедурой, например z-test.
Проверь себя · 1/3разбор после ответа
В A/B тесте вы сравниваете конверсию (долю покупок) между
control и treatment на уровне пользователя. Какой тест чаще всего выбирают как базовый на больших выборках?Ещё вопросы по теме «Тесты для долей»
- `конверсия` выросла с 5% до 6%. Как корректно назвать абсолютное изменение?
- Если `n` увеличили в 4 раза при том же `p`, как примерно изменится стандартная ошибка доли `SE = sqrt(p*(1-p)/n)`?
- Когда двухвыборочный `z-test` для сравнения долей обычно уместен?
- Вы считаете конверсию из визита в покупку на уровне пользователя. Что корректно считать `success` и что считать `trial` для расчёта доли?
- Какие допущения делают модель `binomial` разумной для конверсии?
- Все вопросы по «Тесты для долей» →