Вы хотите протестировать два уровня pricing, но цену A показываете только пользователям из платного трафика, а цену B — только органике. В чём главный риск такого теста?

AРиск только в том, что цены различаются, а не в методологии
BТакой тест всегда корректен, потому что pricing сравнивается честно
CНет рандомизации: вы сравниваете разные аудитории, и результат будет искажён selection bias
DНельзя тестировать pricing в онлайне, это запрещено
Правильный ответ. Без рандомизации вы смешиваете эффект pricing с различиями аудиторий и получаете selection bias.

Разбор

Платный трафик и органика часто сильно отличаются по мотивации и платежеспособности, поэтому конверсии и средний чек будут различаться даже при одинаковой цене. В таком дизайне вы не сможете отделить эффект pricing от эффекта источника. Правильнее рандомизировать цену внутри одной и той же аудитории или хотя бы внутри каждого канала отдельно. Иначе вы рискуете принять решение на основе смещённых метрик.

Проверь себя · 1/3разбор после ответа
После изменения pricing конверсия в оплату (conversion to paid) упала, но ARPU вырос. Какое объяснение наиболее вероятно?
Тренировать продукт в Telegram

Ещё вопросы по теме «Монетизация и юнит-экономика»