Команда запускает одинаковый A/B тест много раз и каждый раз считает эффект Δ = x̄_B - x̄_A. Значения Δ 'плавают' вокруг какого-то уровня. Как лучше всего назвать распределение значений Δ по повторениям?

AРаспределение исходных данных внутри одной группы
BРаспределение параметра Δ в популяции
CВыборочная дисперсия метрики
Dsampling distribution статистики Δ
Правильный ответ. Если вы повторяете эксперимент, статистика Δ образует своё sampling distribution.

Разбор

Даже при одинаковом истинном эффекте результаты разных запусков будут немного отличаться из-за случайного состава выборок. Это и описывает sampling distribution для Δ: как распределяются оценки эффекта при повторении процедуры. Ошибка — интерпретировать одно наблюдение Δ как гарантированно точное значение эффекта без учёта разброса.

Проверь себя · 1/3разбор после ответа
Есть n независимых наблюдений с дисперсией σ^2. Как корректно описать, как меняются дисперсии статистик S=ΣXi и при росте n?
Тренировать статистику в Telegram

Ещё вопросы по теме «Случайные величины и выборочные распределения»