Какое утверждение верно про коррекцию Bonferroni при множественных сравнениях?
AОна контролирует долю ложных открытий (
FDR), а не вероятность хотя бы одной ошибки I рода в семье проверокBОна работает только при независимых тестах, а при коррелированных проверках полностью теряет валидность и приводит к ошибкам
CОна контролирует семейную ошибку: каждый
p-value сравнивают с alpha, делённой на число проверок в семьеDОна повышает порог
alpha для каждого теста, чтобы увеличить мощность и сократить требуемый размер выборкиПравильный ответ. Коррекция
Bonferroni контролирует семейную ошибку: каждый p-value сравнивают с alpha, делённой на число проверок.Разбор
Идея проста: если проверок несколько, то для каждой проверки ставят более строгий порог, чтобы общий риск ошибки I рода был ограничен. Это делает метод надёжным, но часто консервативным. Поэтому при большом числе проверок Bonferroni сильно снижает мощность, и иногда выгоднее использовать пошаговые процедуры (например, Holm) или контроль FDR.
Проверь себя · 1/3разбор после ответа
Вы настроили контроль FDR (доля ложных открытий) на уровне 0.1 и после процедуры Бенджамини–Хохберга получили 20 значимых сравнений. Как корректнее интерпретировать это число?
Ещё вопросы по теме «Множественное тестирование»
- Вы запускаете `A/B/n`-эксперимент: контроль и 3 варианта интерфейса. Что принципиально меняется по сравнению с `A/B` в части риска ложноположительных результатов, если проверять каждое сравнение на `alpha` 0.05 без коррекции?
- В эксперименте `A/B/n` у вас контроль A и варианты B и C, и вы готовы запустить любой вариант, который статистически лучше контроля по одной основной метрике. Какие проверки логично считать одной семьёй для поправки на множественные сравнения?
- Команда сравнивает 8 вариантов с контролем и для каждого теста использует порог `alpha = 0.05` без коррекции. Что происходит с вероятностью получить хотя бы одно ложное срабатывание среди всех сравнений?
- Что означает контроль `FWER` (вероятности хотя бы одной ошибки I рода) в задаче с множественными сравнениями?
- Чем процедура Холма чаще всего отличается от процедуры Бонферрони, если цель та же — контроль общей вероятности ошибки первого рода в семье проверок?
- Все вопросы по «Множественное тестирование» →