Падение конверсии заметно только у сегмента новых пользователей, а у возвращающихся всё стабильно. Какой шаг диагностики наиболее разумен первым?

AСразу выкатить точечные правки в онбординг для новых пользователей: ускорит реакцию команды без долгой диагностики причин
BСвериться по сегменту: сопоставить число новых с источником регистраций и проверить заполнение поля user_type и его распределение
CСначала проверить общий график конверсии: если в среднем стабильно, искать причину в новых сегментах преждевременно и можно подождать
DСравнить скорость загрузки и долю ошибок у новых и возвращающихся, чтобы выделить технические причины снижения именно у новых пользователей
Правильный ответ. Сегментный эффект требует сверки знаменателей и проверки инструментирования сегментирующих полей, а не сразу продуктовых выводов.

Разбор

Если поле user_type сломалось или изменилось правило классификации, метрика по сегменту может «поехать» без реального эффекта в продукте. Сверьте количество новых пользователей с независимым источником, например с таблицей регистраций, и проверьте распределение этих пользователей в эксперимент. Если знаменатель и сегментация корректны, тогда уже можно обсуждать реальное продуктовое влияние и искать причины в воронке.

Проверь себя · 1/2разбор после ответа
Вчера число событий purchase выросло в 2 раза, но число уникальных order_id почти не изменилось. Какой источник проблемы наиболее вероятен?
Открыть Карьерник в Telegram

Ещё вопросы по теме «Качество данных и инварианты»