Для разницы долей p_treat - p_control вы построили 95% доверительный интервал, и он целиком выше 0. Что это означает для двустороннего теста на уровне alpha = 0.05?
A
p-value будет меньше 0.05, потому что доверительный интервал не накрывает значение 0B
p-value будет больше 0.05, поскольку интервал выше нуля сам по себе ничего не доказываетCНичего нельзя сказать про
p-value без дополнительных данных о размере выборки и тестеD
p-value обязательно равен 0.05, так как граница интервала и порог теста совпадают по уровнюПравильный ответ. Если 95% доверительный интервал для разницы не включает 0, двусторонний тест обычно даёт
p-value < 0.05.Разбор
Доверительный интервал и тест гипотез связаны: отсутствие 0 в 95% интервале соответствует отклонению нулевой гипотезы на уровне alpha = 0.05 для двустороннего теста. Это удобный способ интерпретировать результаты без фокуса только на p-value. Типичная ошибка — одновременно говорить «эффект значим» и показывать интервал, который пересекает 0. Всегда проверяйте согласованность интервала и теста — если они расходятся, скорее всего, использовались разные методы оценки.
Проверь себя · 1/3разбор после ответа
При фиксированном
n у какой доли стандартная ошибка доли обычно максимальна (по p*(1-p))?Ещё вопросы по теме «Тесты для долей»
- Команда считает конверсию из показа в клик: 80 кликов на 1000 показов. Как корректнее всего описать эту величину как долю?
- `конверсия` выросла с 5% до 6%. Как корректно назвать абсолютное изменение?
- Если `n` увеличили в 4 раза при том же `p`, как примерно изменится стандартная ошибка доли `SE = sqrt(p*(1-p)/n)`?
- Когда двухвыборочный `z-test` для сравнения долей обычно уместен?
- Вы считаете конверсию из визита в покупку на уровне пользователя. Что корректно считать `success` и что считать `trial` для расчёта доли?
- Все вопросы по «Тесты для долей» →