В A/B тесте новый onboarding поднял activation_rate на 3 п.п., но D7 retention упал. Какой вывод наиболее корректен?

AНужно объявить победу, потому что activation_rate важнее любых downstream-метрик
BНельзя автоматически объявлять победу: проверить guardrails, качество activation и понять, не стала ли она формальной без реального aha moment
CНужно немедленно остановить эксперимент и навсегда отказаться от экспериментов по onboarding
DНужно увеличить рекламный бюджет, чтобы компенсировать падение D7 retention
Правильный ответ. Рост activation_rate без downstream-пользы может означать, что activation стала слабым прокси для aha moment.

Разбор

В экспериментах по onboarding важно держать guardrails, чтобы не улучшать ранние метрики ценой долгосрочных. Падение D7 retention может означать, что пользователи быстрее доходят до формального события, но не получают устойчивой ценности. Стоит проверить качество активированных: повторные сессии, глубину использования, conversion дальше по воронке. Иногда решение — уточнить определение activation и перестроить путь к aha moment.

Проверь себя · 1/3разбор после ответа
Вы хотите понять, ускоряет ли новый onboarding достижение aha moment. Какая метрика лучше всего подходит?
Тренировать продукт в Telegram

Ещё вопросы по теме «Рост, активация и онбординг»