Маркетолог утверждает, что кампания B лучше, потому что в B выше conversion rate. Вы видите, что в B больше segment device desktop, а в desktop обычно выше base rate покупки. Какой ответ наиболее корректен на интервью?
AСказать, что это может быть
confounder и сдвиг микса, поэтому нужно сравнить кампании like-for-like по device как control variable или сделать stratificationBСогласиться, потому что
conversion rate всегда сравнима независимо от составаCСказать, что
selection bias невозможен в маркетинге, поэтому вывод точныйDПредложить убрать
segment и смотреть только общий revenueПравильный ответ. Если состав по
device отличается, то сравнение conversion rate без контроля может быть искажено сдвиг микса и confounder.Разбор
Разные device часто имеют разные base rate и поведение users. Если кампания приводит несопоставимую аудиторию, общий rate отражает смесь сегментов, а не качество кампании. Поэтому правильно зафиксировать control variable device, сравнить like-for-like или провести stratification, а затем сделать вывод о реальной разнице.
Проверь себя · 1/3разбор после ответа
Маркетинг сравнивает конверсию (
conversion rate) двух лендингов. Вариант A чаще показывали пользователям из region с высоким спросом, вариант B — из других region. Как корректнее всего контролировать этот фактор в анализе?Ещё вопросы по теме «Сегментация и конфаундинг»
- После запуска новой версии приложения общий `conversion rate` упал. При этом выросла доля трафика на `android` (`platform` = `android`), а у `android` исторически ниже `base rate`. Какое объяснение наиболее правдоподобно без дополнительных данных?
- Вы сравниваете `conversion rate` между `channel` = `search` и `channel` = `social`. В `channel` = `search` заметно больше пользователей из `region` с высокой платежеспособностью. Какой наиболее вероятный `confounder` и что логично использовать как `control variable`?
- Новая функция включается кнопкой, и анализ показал, что у включивших выше `retention` и `conversion rate`. Какая основная проблема такого вывода?
- В сегменте `ios` `conversion rate` вырос, и в сегменте `android` тоже вырос, но общий `conversion rate` по всем `users` снизился. Какое объяснение наиболее вероятно?
- Вы сравниваете `retention` между `region` A и `region` B. В `region` A больше пользователей из более «старых» когорт, а в `region` B — больше новых. Что корректнее сделать, чтобы сравнение было справедливым?
- Все вопросы по «Сегментация и конфаундинг» →