Какое утверждение обычно верно для Benjamini–Hochberg по сравнению с Bonferroni при большом числе проверок?
AОн гарантирует полное отсутствие ложноположительных срабатываний в любой выборке любого размера
BОн делает пороги всегда строже, чем
Bonferroni, поэтому почти ни одна гипотеза в наборе не проходитCОн обычно менее строгий и даёт больше мощности, потому что контролирует
FDR, а не вероятность хотя бы одной ложной находкиDОн применим только к экспериментам ровно с двумя вариантами и теряет смысл при большом числе сравнений
Правильный ответ.
Benjamini–Hochberg обычно увеличивает шанс обнаружить реальные эффекты при большом числе проверок, контролируя FDR.Разбор
Когда гипотез много, контроль вероятности хотя бы одной ложной находки часто становится слишком строгим и «гасит» сигнал. Benjamini–Hochberg меняет цель: не исключить любую ложную находку, а ограничить их ожидаемую долю среди отвергнутых. Поэтому он обычно подходит для этапа поиска и ранжирования кандидатов и даёт больше мощности, чем Bonferroni. Утверждения о полной гарантии отсутствия ошибок, об ещё большей строгости или об ограничении только двумя вариантами — неверны.
Проверь себя · 1/3разбор после ответа
Команда сравнивает 8 вариантов с контролем и для каждого теста использует порог
alpha = 0.05 без коррекции. Что происходит с вероятностью получить хотя бы одно ложное срабатывание среди всех сравнений?Ещё вопросы по теме «Множественное тестирование»
- Вы запускаете `A/B/n`-эксперимент: контроль и 3 варианта интерфейса. Что принципиально меняется по сравнению с `A/B` в части риска ложноположительных результатов, если проверять каждое сравнение на `alpha` 0.05 без коррекции?
- В эксперименте `A/B/n` у вас контроль A и варианты B и C, и вы готовы запустить любой вариант, который статистически лучше контроля по одной основной метрике. Какие проверки логично считать одной семьёй для поправки на множественные сравнения?
- Команда сравнивает 8 вариантов с контролем и для каждого теста использует порог `alpha = 0.05` без коррекции. Что происходит с вероятностью получить хотя бы одно ложное срабатывание среди всех сравнений?
- Что означает контроль `FWER` (вероятности хотя бы одной ошибки I рода) в задаче с множественными сравнениями?
- Какое утверждение верно про коррекцию `Bonferroni` при множественных сравнениях?
- Все вопросы по «Множественное тестирование» →