Рост, активация и онбординг: вопросы для собеседования (часть 4)
Activation rate, aha-moment, онбординг-воронка, growth loops — механики роста продукта, которые должен понимать аналитик. На собеседовании спрашивают, как найти aha-moment по данным, как измерить качество онбординга и что делать, если пользователи уходят на втором шаге. Рост — одна из главных задач продуктовых команд.
Вопросы 16–20 из 20
16В A/B-тесте новый онбординг включается только после события `signup_complete`. Часть посетителей уходит до регистрации. Как корректнее считать activation rate для сравнения вариантов?
AАктивированные / все посетители лендинга, включая тех, кто ушёл до регистрации
BАктивированные / все установки приложения за период эксперимента
CАктивированные / пользователи с событием `signup_complete`, которым реально назначен вариант
DАктивированные / активированные, чтобы сравнить «качество» активации между вариантами
Ответ: Для честного сравнения activation rate знаменатель должен соответствовать моменту назначения варианта в эксперименте.
Если вариант назначается после события `signup_complete`, сравнивать нужно только тех, кто дошёл до момента назначения. Иначе метрика смешает эффект онбординга и различия в верхней части воронки. Деление на всех посетителей или установки размоет эффект и может дать ложные выводы. Корректный знаменатель — аудитория, для которой тест реально применим, то есть назначенные пользователи.
Подробный разбор → 17В продукте есть петля роста через расшаривание. Регистрации растут, но число новых пользователей, достигших активации, перестало расти. Что самое полезное сделать первым?
AРазложить петлю роста на шаги и измерить конверсию каждого шага: долю расшариваний, переход в регистрацию и активацию, чтобы найти узкое место
BЗапустить отдельную реферальную программу с денежным бонусом за приглашение друга, не разбираясь в текущей конверсии шагов петли роста
CПоднять порог активации в текущем определении: тогда формально число активированных пользователей перестанет отставать от роста регистраций по отчёту
DРасширить географию запуска и добавить в петлю новые языки локализации, ожидая, что объём свежей аудитории сам подтянет показатели активации
Ответ: Диагностика петли роста начинается с разложения на шаги и измерения конверсии и скорости прохождения цикла.
Рост регистраций при стагнации активации означает, что где-то после входа воронка стала хуже: качество трафика, онбординг, путь до инсайта или сама петля. Разложение по шагам показывает, какой коэффициент упал: люди хуже кликают по шарингу, чаще бросают регистрацию или не доходят до активации. Время цикла помогает понять, не стал ли цикл просто медленнее, из-за чего эффект временно не виден. Логотип и бюджет на трафик действуют вслепую, а ожидание не даёт ответа на вопрос «где именно сломалось».
Подробный разбор → 18Вы добавили бонус за выполнение шага `complete_tutorial`. Активация выросла, но удержание и конверсия не выросли и даже слегка просели. Что наиболее вероятно и что делать?
AЭто идеальный итог запуска: рост активации на 3 п.п. покрывает любые краткосрочные просадки удержания и конверсии в первый месяц после релиза
BБонус слишком маленький и не мотивирует пользователей: нужно увеличить размер вознаграждения и повторить запуск с более крупной суммой за прохождение
CЭто доказывает, что момент ценности совпадает с шагом `complete_tutorial`, и удержание с конверсией просто измерены неправильно после релиза
DВы стимулировали формальный шаг, не связанный с моментом ценности: нужно переопределить активацию вокруг реальной пользы и смотреть на метрики дальше по воронке
Ответ: Если стимул поднимает активацию, но не улучшает удержание, вероятно, метрика активации не отражает момент озарения и реальную ценность.
Бонус может заставить людей «пройти туториал», не получив ценности, и даже вызвать разочарование из-за лишнего трения. Тогда активация становится искусственно завышенной и перестаёт быть хорошим индикатором качества онбординга. Важно привязать активацию к реальному ценностному действию и проверять метрики дальше по воронке: удержание, повторные ключевые действия, конверсию. Иногда лучше убрать стимулы или сместить их на шаг, который действительно ведёт к моменту озарения.
Подробный разбор → 19После запуска нового рекламного канала общий показатель активации упал с 25% до 18%. Что лучше всего проверить, чтобы понять, это проблема первого опыта в продукте или изменение качества трафика?
AПосчитать активацию по каждому каналу отдельно, сравнить внутри канала с историей и оценить вклад изменения микса трафика в общий показатель
BСразу менять воронку первого опыта: любое падение общего показателя автоматически означает проблему продуктовых шагов и текстов на старте
CИгнорировать падение и считать рост числа регистраций важнее активации: новый объём в абсолютных цифрах компенсирует относительное снижение
DУдвоить бюджет на новый рекламный канал: больший объём трафика сам по себе вернёт общий показатель активации к прежнему уровню
Ответ: Падение общего показателя активации часто объясняется сдвигом микса каналов, поэтому важно сегментировать метрику по источникам.
Если доля пользователей из нового канала выросла, общий показатель может упасть даже при неизменной воронке первого опыта — за счёт более холодной аудитории. Поэтому сначала смотрят активацию отдельно по старым и новым каналам и сравнивают с историей. Дальше можно сделать мысленное взвешивание по старому миксу и оценить, какая часть падения объясняется составом трафика. Если внутри каналов тоже стало хуже, тогда уже искать проблему в продуктовых шагах или изменениях.
Подробный разбор → 20У вас цикл роста через приглашения. Активированный пользователь в среднем отправляет 0.5 приглашения, 40% приглашённых регистрируются, 50% из них активируются в первые сутки. Какой вывод корректен, если коэффициент цикла = invites_per_user × signup_rate × activation_rate?
AЦикл сам себя разгоняет: итоговый коэффициент больше единицы, приглашений достаточно для роста
BЦикл разгоняется за счёт ненулевого числа приглашений и заметной доли регистраций по ним
CКоэффициент цикла равен `0.1`: цикл несамодостаточный и требует улучшения коэффициентов или внешнего притока
DВывод делать рано: нужны дополнительные метрики конверсии в оплату и удержания приглашённых
Ответ: В цикле роста важно, сколько новых активированных пользователей рождает один активированный — это и есть коэффициент цикла.
Здесь коэффициент цикла = 0.5 × 0.4 × 0.5 = 0.1, то есть один активированный пользователь приносит в среднем 0.1 нового активированного. Это значит, что без внешнего канала цикл не будет сам себя поддерживать. Улучшать можно любой множитель: больше приглашений, выше регистрация по приглашению, лучше онбординг для приглашённых, чтобы они быстрее активировались. Также важно смотреть время прохождения цикла, чтобы рост был не только возможным, но и быстрым.
Подробный разбор → Другие темы: Продуктовая аналитика