Вы тестируете новый экран оплаты; цель — увеличить число завершённых покупок. Какая метрика наиболее логична как primary metric для решения «выкатывать или нет»?
AКонверсия в оплаченный заказ на пользователя (или на сессию) среди тех, кто увидел экран
BКликабельность кнопки «Оплатить»
CКоличество просмотров экрана оплаты
DСреднее время на экране оплаты
Правильный ответ.
primary metric должна напрямую отражать итоговую цель эксперимента, а не промежуточные шаги.Разбор
Если цель — больше завершённых покупок, то метрика должна измерять именно оплату, а не клики или просмотры. Промежуточные показатели часто полезны как secondary metrics, но по ним легко сделать неверный вывод. Например, клики могут вырасти из-за путаницы, а время на экране — из-за трения в процессе оплаты.
Проверь себя · 1/3разбор после ответа
Вы улучшаете рекомендации, и команда спорит, что считать успехом:
CTR, добавления в корзину или выручку. Как лучше зафиксировать метрики перед запуском?Ещё вопросы по теме «Метрики и guardrail-метрики»
- Вы улучшаете рекомендации, и команда спорит, что считать успехом: `CTR`, добавления в корзину или выручку. Как лучше зафиксировать метрики перед запуском?
- В тесте новый онбординг улучшил `primary metric` (активацию), но упали повторные визиты и выросли отписки. Как корректнее использовать `secondary metrics` в такой ситуации?
- Стейкхолдеры предлагают считать успех теста одновременно ростом конверсии, выручки и времени в приложении. Какой подход к метрикам наиболее здравый?
- Вы тестируете увеличение числа рекламных блоков в ленте, ожидая рост выручки. Какие метрики наиболее уместны как `guardrail metrics`?
- Вы меняете текст про доставку на чекауте; `primary metric` — конверсия в заказ. Какую метрику логичнее поставить как `guardrail metrics`, чтобы контролировать риск для бизнеса?
- Все вопросы по «Метрики и guardrail-метрики» →