Вопросы по теме «Постановка задачи»
Как превратить бизнес-вопрос в аналитическую задачу: определить метрику, выбрать гранулярность, учесть ограничения данных. На собеседовании дают кейс вроде «продажи упали» и ждут, что кандидат задаст правильные уточняющие вопросы, прежде чем бросаться писать запрос. Фреймирование задачи — первый шаг любого анализа.
Всего в этом разделе 20 вопросов. Каждый — с правильным ответом и кратким разбором теории. Разбито на 4 части по 5 вопросов.
Вопросы 1–5 из 20
1Менеджер продукта говорит: «нужно поднять удержание в следующем квартале». Какой вопрос лучше задать первым, чтобы отделить цель от метрики и зафиксировать критерии успеха?
AКакое именно удержание нужно: определение возврата, временное окно, целевая аудитория и критерии успеха относительно базовой линии
BКакие фичи команда уже планирует, чтобы оценить прогноз эффекта на удержание и подготовить план запусков на квартал
CКакие сегменты пользователей считаются приоритетными для роста удержания и какой канал привлечения важнее проработать
DСтоит ли использовать DAU как прокси для удержания и оптимизировать его до утверждения целевой метрики квартала
Ответ: Сначала нужно согласовать цель, затем выбрать метрику с явным определением, временным окном и критериями успеха.
Одну и ту же цель можно измерять разными метриками: D1, D7, weekly retention и так далее. Без явного определения возврата вы можете построить красивый отчёт, который не отвечает на вопрос бизнеса. Зафиксируйте аудиторию, временное окно и целевое изменение относительно базовой линии, чтобы дальше обсуждать решения предметно. Прыжок к фичам, замена на `DAU` или сразу опросы пропускают этап согласования критериев.
Подробный разбор → 2Руководитель просит: «Сколько у нас активных пользователей за прошлый месяц?». Какой первый шаг наиболее правильный, чтобы избежать спорных пограничных случаев?
AУточнить определение активности (какое событие и какой порог), границы временного окна, аудиторию и правила для тестовых аккаунтов
BВзять всех, кто хоть раз открыл приложение за месяц, и считать это числом активных пользователей за прошедший период
CПосчитать уникальные значения user_id, у которых был любой залогированный event за месяц, и сразу отправить число руководителю
DПосчитать MAU по стандартному определению инструмента аналитики и считать это искомым числом активных пользователей за месяц
Ответ: Термин «активный пользователь» требует определения, аудитории и обработки пограничных случаев, иначе метрика будет неповторяемой.
Активность может означать просто запуск приложения, выполнение ключевого действия или достижение порога действий за период. Без явного определения разные команды будут считать разные числа на одних и тех же данных. Важно зафиксировать аудиторию (платформы, регионы), временное окно с часовым поясом и правила для пограничных случаев — дублей, тестовых аккаунтов и аномальной активности. Только после этого `MAU` или любое другое число становится повторяемой метрикой.
Подробный разбор → 3CEO пишет: «DAU упал на прошлой неделе, разберись что случилось». Что важнее всего уточнить в первую очередь, чтобы зафиксировать корректную область задачи и не уйти в ложные причины?
AУточнить определение DAU, состав пользователей и временное окно, проверить изменения трекинга и источников данных
BСобрать топ-10 причин падения DAU по всем сегментам и отправить отчёт CEO до согласования области задачи
CСравнить прошлую неделю с позапрошлой по сегментам и предложить план роста DAU параллельно с диагностикой
DЗапустить продуктовые инициативы, нацеленные на рост DAU, и параллельно искать причину падения по разрезам
Ответ: Без чёткого определения метрики и области задачи падение `DAU` может оказаться артефактом данных, а не продуктовым эффектом.
Фраза «`DAU` упал» не определяет, что именно считается активностью и кого вы считаете в составе пользователей. Без временного окна и проверки трекинга легко перепутать реальное изменение поведения с багом в событиях или фильтрах. Первым шагом нужно согласовать определение и убедиться, что измерение стабильно, и только потом искать причины в продукте. Сразу строить топ-сегментов или предлагать план роста — значит работать с возможным артефактом.
Подробный разбор → 4Вам говорят: сделай дашборд по NPS. Какое уточнение самое важное для корректной аудитории и временного окна?
AКакую цветовую палитру и шрифты использовать в дашборде, чтобы он гармонировал с корпоративным стилем команды
BКого именно опрашиваем и кого включаем в аудиторию, за какое временное окно считаем NPS и как обрабатываем неполные ответы
CХотим ли добавить разбивку по типу устройства пользователя и платформе на отдельной странице дашборда для команды
DНужно ли выводить NPS отдельно по каждому месяцу или достаточно квартальной сводки в основной плитке для руководства
Ответ: Для `NPS` важно зафиксировать `population`, `time window` и правила учета ответов, иначе сравнения будут некорректны.
Если `NPS` собирается только у части пользователей, важно понимать, кто попадает в выборку и насколько она репрезентативна для `population`. Также нужно определить `time window`, например по дате ответа или по дате события, после которого отправили опрос. Наконец, правила обработки `edge cases` вроде пропусков или повторных ответов влияют на итоговую метрику и должны быть едиными.
Подробный разбор → 5PM спрашивает: Сколько пользователей используют фичу X. Какое уточнение наиболее важное, чтобы корректно определить `population` и `time window`?
AНужно ли разбить данные по платформам (iOS/Android/Web) и показать динамику использования фичи X отдельно для каждой за 30 дней
BНужно ли дополнить количественные данные качественными: включить отзывы и комментарии пользователей, чтобы понять причины использования
CЧто именно считается использованием по определению (какое событие), нужен ли порог частоты, какая аудитория и за какое временное окно
DНужно ли добавить тепловую карту экранов и показать, в каких частях интерфейса фича X встречается чаще всего, для оценки видимости
Ответ: Для метрики использования нужно определить `definition` события и `time window` для одной `population`, иначе цифры будут несопоставимы.
Использование может означать клик, успешное завершение действия или повторное использование, и это разные `definition`. Также важен порог: один раз за месяц и десять раз за неделю отвечают на разные вопросы. Наконец, `population` и `time window` определяют, кого и когда вы считаете, а это влияет на интерпретацию изменения метрики. После согласования можно добавлять разрезы по платформам и экранам.
Подробный разбор →