В A/B/n у вас контроль A и варианты B, C, D. В отчёте вы хотите интерпретировать сравнения каждого варианта с контролем и сравнение B с C. Что верно про выбор семьи для коррекции multiple comparisons?

AВ семью нужно включить все сравнения, которые вы собираетесь интерпретировать (A против B, A против C, A против D и B против C), иначе часть выводов будет некорректна по уровню ошибок.
BВ семью достаточно включить только те сравнения, где получилось p-value < 0.05.
CСемья всегда включает только сравнения с контролем, остальные сравнения не влияют на ошибки.
DКоррекция не нужна, потому что все сравнения сделаны в одном эксперименте.
Правильный ответ. Семья гипотез для multiple comparisons должна соответствовать набору утверждений, которые вы собираетесь делать по результатам.

Разбор

Коррекция нужна не «по факту значимости», а по факту количества проверяемых утверждений. Если вы планируете сделать выводы и про B против C, то это дополнительная проверка, влияющая на общий риск false positives. Поэтому семейство гипотез должно включать все сравнения, которые вы хотите трактовать как подтверждённые. Иначе часть отчёта будет выглядеть более уверенно, чем она есть на самом деле.

Проверь себя · 1/3разбор после ответа
Что описывает контроль FDR в процедурах вроде Benjamini–Hochberg?
Тренировать A/B в Telegram

Ещё вопросы по теме «Множественное тестирование»