Вы хотите протестировать два уровня pricing, но цену A показываете только пользователям из платного трафика, а цену B — только органике. В чём главный риск такого теста?
AРиск только в том, что цены различаются, а не в методологии
BТакой тест всегда корректен, потому что
pricing сравнивается честноCНет рандомизации: вы сравниваете разные аудитории, и результат будет искажён
selection biasDНельзя тестировать
pricing в онлайне, это запрещеноПравильный ответ. Без рандомизации вы смешиваете эффект
pricing с различиями аудиторий и получаете selection bias.Разбор
Платный трафик и органика часто сильно отличаются по мотивации и платежеспособности, поэтому конверсии и средний чек будут различаться даже при одинаковой цене. В таком дизайне вы не сможете отделить эффект pricing от эффекта источника. Правильнее рандомизировать цену внутри одной и той же аудитории или хотя бы внутри каждого канала отдельно. Иначе вы рискуете принять решение на основе смещённых метрик.
Проверь себя · 1/3разбор после ответа
После изменения
pricing конверсия в оплату (conversion to paid) упала, но ARPU вырос. Какое объяснение наиболее вероятно?Ещё вопросы по теме «Монетизация и юнит-экономика»
- В freemium-приложении вы хотите понять, сколько в среднем приносит один платящий пользователь за месяц. Какая метрика отвечает на этот вопрос?
- Как корректнее считать месячный `ARPU` в модели freemium, где платит только часть аудитории?
- Вы тестируете новый `paywall` и хотите измерить `conversion to paid` именно из просмотра `paywall`. Что должно быть в знаменателе?
- Как лучше всего интерпретировать `LTV` в продукте с подпиской?
- После изменения `pricing` конверсия в оплату (`conversion to paid`) упала, но `ARPU` вырос. Какое объяснение наиболее вероятно?
- Все вопросы по «Монетизация и юнит-экономика» →