Вы сравниваете долю конверсии (успех/неуспех) в группах A и B на больших выборках. Какой тест чаще всего выбирают как базовый для сравнения долей?
A
t-test для независимых выборокBКритерий хи-квадрат для сравнения средних
C
z-test для разницы долейDКорреляция Пирсона для конверсии
Правильный ответ. Для долей на больших выборках базовым выбором обычно служит двухпропорционный
z-test.Разбор
При сравнении конверсий мы фактически сравниваем доли успехов в двух группах. На больших выборках распределение разности долей хорошо аппроксимируется нормальным, поэтому стандартный инструмент — двухпропорционный z-test. t-test рассчитан на средние при неизвестной дисперсии и применяется к долям только как приближение, при больших n он численно близок к z-test. Критерий хи-квадрат сравнивает наблюдаемые и ожидаемые частоты в таблице категорий, а не средние. Корреляция Пирсона измеряет линейную связь двух непрерывных переменных и для сравнения долей не подходит.
Проверь себя · 1/3разбор после ответа
Вы меняете уровень значимости с
alpha 0.05 на alpha 0.10, оставляя размер выборки прежним. Какой эффект на ошибки наиболее вероятен?Ещё вопросы по теме «Проверка гипотез и доверительные интервалы»
- В A/B тесте для конверсии вы получили `p-value` = 0.03 при проверке `H0` об отсутствии разницы между группами. Какая интерпретация корректна?
- Для разницы конверсий вы построили 95% доверительный интервал: от -0.2% до +1.4%. Что можно сказать о статистической значимости при уровне значимости 0.05 и двусторонней проверке?
- Команда зафиксировала уровень значимости `alpha` 0.05. Что это в первую очередь контролирует в терминах ошибок?
- В A/B-тесте при огромной выборке вы получили `p-value < 0.001`, но рост конверсии составил всего +0.02% при минимально полезном пороге +0.5%. Какое действие наиболее разумно?
- Вы заранее выбрали `alpha` 0.05. В результате теста получили `p-value` 0.06. Какой вывод корректнее всего?
- Все вопросы по «Проверка гипотез и доверительные интервалы» →