Вы меняете уровень значимости с alpha 0.05 на alpha 0.10, оставляя размер выборки прежним. Какой эффект на ошибки наиболее вероятен?
AРиск ошибки I рода вырастет, риск ошибки II рода обычно снизится: мощность критерия растёт.
BРиск ошибки I рода снизится, риск ошибки II рода вырастет: мощность критерия падает при том же
n.CОбе ошибки уменьшатся одновременно за счёт более либеральной границы значимости и того же объёма выборки.
DИзменений в ошибках нет: уровень
alpha влияет только на ширину доверительного интервала вокруг оценки.Правильный ответ. Поднимая
alpha, мы делаем критерий либеральнее: чаще отвергаем H0 (растёт риск ошибки I рода), но зато реже её ложно сохраняем (падает ошибка II рода).Разбор
Уровень значимости и мощность связаны напрямую при фиксированных n, дисперсии и эффекте. Чем больше alpha, тем шире зона отвержения, поэтому ошибочно отвергать верную H0 мы будем чаще (рост ошибки I рода), зато верно отвергать ложную H0 тоже будем чаще (мощность растёт, ошибка II рода падает). Уменьшать обе ошибки одновременно при том же размере выборки нельзя — для этого нужен дополнительный ресурс: больше наблюдений или снижение дисперсии метрики.
Проверь себя · 1/3разбор после ответа
Вы меняете уровень значимости с
alpha 0.05 на alpha 0.10, оставляя размер выборки прежним. Какой эффект на ошибки наиболее вероятен?Ещё вопросы по теме «Проверка гипотез и доверительные интервалы»
- В A/B тесте для конверсии вы получили `p-value` = 0.03 при проверке `H0` об отсутствии разницы между группами. Какая интерпретация корректна?
- Для разницы конверсий вы построили 95% доверительный интервал: от -0.2% до +1.4%. Что можно сказать о статистической значимости при уровне значимости 0.05 и двусторонней проверке?
- Вы сравниваете долю конверсии (успех/неуспех) в группах A и B на больших выборках. Какой тест чаще всего выбирают как базовый для сравнения долей?
- Команда зафиксировала уровень значимости `alpha` 0.05. Что это в первую очередь контролирует в терминах ошибок?
- В A/B-тесте при огромной выборке вы получили `p-value < 0.001`, но рост конверсии составил всего +0.02% при минимально полезном пороге +0.5%. Какое действие наиболее разумно?
- Все вопросы по «Проверка гипотез и доверительные интервалы» →