Маркетинг сравнивает конверсию (conversion rate) двух лендингов. Вариант A чаще показывали пользователям из region с высоким спросом, вариант B — из других region. Как корректнее всего контролировать этот фактор в анализе?

AСравнить общий conversion rate по вариантам и считать результат честным
BУдалить из данных все region, чтобы не мешали
CСравнить только segment лучшей region и экстраполировать на всех
DСделать stratification по region и сравнить варианты like-for-like внутри region, а затем агрегировать
Правильный ответ. Если варианты показаны разной аудитории, нужен контроль confounder через stratification.

Разбор

Разные region часто имеют разный base rate, поэтому сравнение без контроля будет искажено. Stratification позволяет сравнить варианты внутри одинаковой region и отделить влияние состава от влияния лендинга. После этого можно агрегировать вывод, сохраняя прозрачность по сегментам.

Проверь себя · 1/3разбор после ответа
Новая функция включается кнопкой, и анализ показал, что у включивших выше retention и conversion rate. Какая основная проблема такого вывода?
Открыть Карьерник в Telegram

Ещё вопросы по теме «Сегментация и конфаундинг»