Вы настроили контроль FDR (доля ложных открытий) на уровне 0.1 и после процедуры Бенджамини–Хохберга получили 20 значимых сравнений. Как корректнее интерпретировать это число?

AВ среднем по повторениям процедуры около 10% из этих 20 находок ожидаются ложноположительными
BВероятность хотя бы одной ложноположительной ошибки среди 20 находок в этом списке равна ровно 10%
CКаждая отдельная находка имеет ровно 10% шанс быть ложной независимо от остальных значимых результатов
DЭто означает, что общий уровень значимости alpha всего эксперимента после поправки стал равен 0.1
Правильный ответ. Контроль FDR задаёт ожидаемую долю ложных открытий среди объявленных значимыми, а не вероятность ошибки для каждой отдельной находки.

Разбор

FDR — это математическое ожидание по повторениям всей процедуры, а не гарантия для одного конкретного списка находок. Поэтому корректно говорить про среднюю долю ложных результатов среди значимых, а не про вероятность для одной находки. Контроль FDR также не равен FWER (вероятность хотя бы одной ошибки) и не превращается в общий уровень значимости alpha эксперимента.

Проверь себя · 1/3разбор после ответа
Вы настроили контроль FDR (доля ложных открытий) на уровне 0.1 и после процедуры Бенджамини–Хохберга получили 20 значимых сравнений. Как корректнее интерпретировать это число?
Тренировать A/B в Telegram

Ещё вопросы по теме «Множественное тестирование»