Какой первый шаг в процедуре Holm для контроля семейной ошибки (FWER)?
AОтсортировать
p-value по убыванию и сравнить самый большой с фиксированным порогом alpha, как в одиночной проверкеBОтсортировать
p-value по возрастанию и сравнить минимальный с порогом alpha/m, далее идти пошагово с менее строгими порогамиCСравнить каждый
p-value с одним и тем же порогом alpha/m, как в коррекции Bonferroni, без дополнительной сортировкиDСложить все
p-value и сравнить полученную сумму с порогом alpha, чтобы оценить общий эффект серии тестовПравильный ответ. Процедура
Holm начинается с сортировки p-value по возрастанию и пошагового сравнения с меняющимися порогами.Разбор
Holm — это step-down процедура: сначала проверяется самый маленький p-value на самом строгом пороге alpha/m, затем пороги становятся менее строгими. Если на каком-то шаге условие не выполняется, дальше уже не отклоняют гипотезы. Типичная ошибка — воспринимать Holm как один фиксированный порог для всех тестов, как в коррекции Bonferroni.
Проверь себя · 1/3разбор после ответа
Вы проверяете эффект фичи на 5 сегментах и 2 платформах и планируете в презентации выбрать самые «успешные» результаты. Что разумнее всего считать семейством тестов для контроля
FWER (вероятности хотя бы одной ошибки I рода)?Ещё вопросы по теме «Множественные сравнения»
- Вы сделали множественные сравнения (`multiple comparisons`): 20 независимых проверок при `alpha = 0.05` и нашли одну метрику с `p-value = 0.04`. Что корректнее всего сказать про этот результат?
- Какая пара определений наиболее корректно описывает `FWER` и `FDR` при множественных проверках гипотез?
- Вы делаете 10 проверок и хотите контролировать FWER (вероятность хотя бы одной ошибки I рода) на уровне `alpha=0.05`. Какой порог для каждого теста задаёт поправка `Bonferroni`?
- Вы хотите контролировать `FWER`, но коррекция `Bonferroni` кажется слишком консервативной. Какое утверждение про процедуру `Holm` наиболее верное?
- Вы применяете процедуру `Benjamini–Hochberg` для контроля `FDR` на уровне 0.05 к 5 проверкам с отсортированными `p-value`: 0.004, 0.012, 0.018, 0.07, 0.2. Сколько гипотез будет отклонено?
- Все вопросы по «Множественные сравнения» →