Вы хотите повысить power теста с 0.6 до 0.8, сохранив alpha и тот же целевой эффект. Какой шаг наиболее напрямую помогает добиться этого?
AУвеличить размер выборки
BУменьшить
alpha с 0.05 до 0.01CРазбить трафик на 5 сегментов и анализировать каждый отдельно при том же общем объёме
DСократить окно наблюдения, чтобы быстрее закончить тест, даже если метрика станет более шумной
Правильный ответ. При фиксированном
alpha самый прямой рычаг для роста power — увеличить выборку или снизить шум.Разбор
Рост выборки снижает стандартную ошибку и повышает вероятность обнаружить заданный эффект, то есть снижает beta и повышает power. Уменьшение alpha делает критерий строже и обычно снижает power. Дополнительное дробление на сегменты или шумная метрика при коротком окне часто ухудшают обнаружение эффекта.
Проверь себя · 1/3разбор после ответа
В A/B тесте вы сравниваете метрику
conversion между вариантами A и B. Какая формулировка H0/H1 корректна для двусторонней проверки отличий?Ещё вопросы по теме «Основы проверки гипотез»
- В A/B тесте вы сравниваете метрику `conversion` между вариантами A и B. Какая формулировка `H0`/`H1` корректна для двусторонней проверки отличий?
- Как корректно интерпретировать значение `p-value` = 0.03 в проверке гипотез?
- При уровне значимости `alpha` = 0.05 получено `p-value` = 0.04. Какое решение соответствует стандартному правилу проверки?
- Что означает выбор `alpha` = 0.01 в терминах `ошибка I рода`?
- Что такое `beta` в проверке гипотез?
- Все вопросы по «Основы проверки гипотез» →