Вы сравниваете ARPU между channel A и channel B и видите, что в channel A ARPU выше. При этом в channel A больше пользователей на ios (platform = ios), которые обычно тратят больше. Что является вероятным confounder и что нужно контролировать?
A
region всегда главный confounder, поэтому контролировать нужно только regionB
platform как confounder, поэтому стоит сделать stratification по platform и сравнить ARPU like-for-likeC
selection bias из-за того, что ARPU нельзя сравниватьDНичего не нужно контролировать, потому что
ratio metric всегда справедливПравильный ответ. Разный состав по
platform может быть confounder, который объясняет различие ARPU.Разбор
Если platform влияет на траты и распределён по channel неравномерно, общий ARPU по channel будет смесью с разными весами. Чтобы сравнить эффективность канала, важно контролировать platform через stratification или сравнение внутри сегментов. Тогда вы поймёте, есть ли разница в тратах именно из-за channel.
Проверь себя · 1/3разбор после ответа
В каждом сегменте по
device conversion rate снизился, но общий conversion rate вырос. Что сначала нужно проверить, чтобы понять ситуацию?Ещё вопросы по теме «Сегментация и конфаундинг»
- После запуска новой версии приложения общий `conversion rate` упал. При этом выросла доля трафика на `android` (`platform` = `android`), а у `android` исторически ниже `base rate`. Какое объяснение наиболее правдоподобно без дополнительных данных?
- Вы сравниваете `conversion rate` между `channel` = `search` и `channel` = `social`. В `channel` = `search` заметно больше пользователей из `region` с высокой платежеспособностью. Какой наиболее вероятный `confounder` и что логично использовать как `control variable`?
- Новая функция включается кнопкой, и анализ показал, что у включивших выше `retention` и `conversion rate`. Какая основная проблема такого вывода?
- В сегменте `ios` `conversion rate` вырос, и в сегменте `android` тоже вырос, но общий `conversion rate` по всем `users` снизился. Какое объяснение наиболее вероятно?
- Вы сравниваете `retention` между `region` A и `region` B. В `region` A больше пользователей из более «старых» когорт, а в `region` B — больше новых. Что корректнее сделать, чтобы сравнение было справедливым?
- Все вопросы по «Сегментация и конфаундинг» →