Что означает контроль family-wise error (суммарная ошибка первого рода) в задаче multiple comparisons?
AОграничить средний размер эффекта по всем вариантам.
BОграничить ожидаемую долю ложных находок среди всех значимых результатов.
CОграничить вероятность пропустить реальный эффект.
DОграничить вероятность сделать хотя бы одну ложную находку (
false positives) внутри выбранной семьи гипотез.Правильный ответ. Контроль
family-wise error (суммарная ошибка первого рода) означает контроль вероятности хотя бы одного false positives в заданной семье проверок.Разбор
Это более строгая цель, чем контроль FDR, потому что она защищает от даже одной ложной «победы» среди множества сравнений. Такой контроль часто важен, когда цена ошибочного запуска высока. Поэтому методы, нацеленные на family-wise error (суммарная ошибка первого рода), обычно более консервативны.
Проверь себя · 1/3разбор после ответа
Какое утверждение обычно верно для
Benjamini–Hochberg по сравнению с Bonferroni при большом числе проверок?Ещё вопросы по теме «Множественное тестирование»
- Вы запускаете `A/B/n`-эксперимент: контроль и 3 варианта интерфейса. Что принципиально меняется по сравнению с `A/B` в части риска `false positives`, если проверять каждое сравнение на `alpha` 0.05 без коррекции?
- В `A/B/n` у вас контроль A и варианты B и C, и вы хотите выбрать любой вариант, который статистически лучше контроля по одной основной метрике. Какие проверки логично считать одной семьёй для коррекции `multiple comparisons`?
- Команда сравнивает 8 вариантов с контролем и для каждого теста использует `alpha` 0.05 без коррекции. Что происходит с вероятностью получить хотя бы один `false positives` среди всех сравнений?
- Какое утверждение верно про коррекцию `Bonferroni` при `multiple comparisons`?
- Чем процедура `Holm` чаще всего отличается от `Bonferroni`, если цель та же — контроль `family-wise error` (суммарная ошибка первого рода)?
- Все вопросы по «Множественное тестирование» →