Какая ситуация лучше всего подходит для выбора z-test вместо t-test в типичном A/B тестировании?
AСравнение средних при неизвестной дисперсии и небольшом размере выборки.
BСравнение долей (например, конверсии) в двух группах на больших выборках.
CСравнение распределений по нескольким категориям в таблице частот.
DСравнение среднего чека при сильных выбросах: важно подумать про робастные метрики/подходы, а не «единственный правильный тест».
Правильный ответ.
z-test часто используют для сравнения долей, тогда как t-test — для сравнения средних.Разбор
Для конверсии (успех/неуспех) естественная модель — пропорции, и на больших выборках часто применяют двухпропорционный z-test. Для средних значений (например, чек) чаще берут t-test, потому что дисперсия обычно неизвестна. Для категориальных таблиц частот обычно выбирают chi-square.
Проверь себя · 1/3разбор после ответа
Вы сравниваете долю конверсии (успех/неуспех) в A и B на больших выборках. Какой тест чаще всего выбирают как базовый для сравнения долей?
Ещё вопросы по теме «Проверка гипотез и доверительные интервалы»
- В A/B тесте для конверсии вы получили `p-value` 0.03 при проверке `H0` об отсутствии разницы. Какая интерпретация корректна?
- Для разницы конверсий вы построили 95% `confidence interval`: от -0.2% до +1.4%. Что можно сказать о статистической значимости при `alpha` 0.05 и двусторонней проверке?
- Вы сравниваете долю конверсии (успех/неуспех) в A и B на больших выборках. Какой тест чаще всего выбирают как базовый для сравнения долей?
- Команда зафиксировала уровень значимости `alpha` 0.05. Что это в первую очередь контролирует в терминах ошибок?
- В A/B тесте при огромной выборке вы получили `p-value` < 0.001, но рост конверсии составил всего +0.02% при минимально полезном пороге +0.5%. Какое действие наиболее разумно?
- Все вопросы по «Проверка гипотез и доверительные интервалы» →