North Star, KPI и иерархия метрик: вопросы для собеседования (часть 4)
North Star Metric, дерево метрик, связь между продуктовыми и бизнес-KPI — на собеседовании просят построить систему метрик для конкретного продукта. Какая метрика отражает ценность для пользователя? Как декомпозировать revenue на составляющие? Ответы на эти вопросы показывают системное мышление кандидата.
Вопросы 16–20 из 20
16Как корректнее всего относиться к изменению `North Star Metric` по мере развития продукта?
A`North Star Metric` нужно менять каждую неделю, чтобы она всегда росла
B`North Star Metric` может эволюционировать при смене стратегии или стадии продукта, но менять её стоит редко и осознанно, обновляя `KPI tree`
C`North Star Metric` нельзя менять никогда, иначе потеряется история
D`North Star Metric` всегда должна быть заменена на `OMTM`, когда появляется новая инициатива
Ответ: `North Star Metric` может меняться, но это стратегическое решение, а не реакция на недельные колебания.
На ранней стадии продукт часто фокусируется на достижении ценности и активации, а на зрелой — на удержании и масштабировании. Поэтому со временем метрика может сместиться, но это требует аккуратной миграции: объяснить новую логику, переопределить драйверы в `KPI tree` и сохранить сопоставимость. Частая смена метрики разрушает фокус и делает цели «подгоняемыми». Лучше держать стабильную `North Star Metric` и менять её только при изменении сути продукта.
17Вы выбираете `North Star Metric` и боитесь получить «ванити-метрику», которую легко накрутить. Какая проверка наиболее полезна?
AВыбрать метрику с самым большим абсолютным значением, чтобы она выглядела внушительно
BПроверить, что метрика отражает доставленную ценность, связана с ключевыми `lagging indicator` и имеет понятные драйверы в `KPI tree`
CВыбрать метрику, которую легче всего собрать, даже если она не про ценность
DВыбрать метрику, которую конкурент публикует в пресс-релизах
Ответ: Хорошая `North Star Metric` должна отражать ценность и иметь прозрачную связь с драйверами и итоговыми `lagging indicator`.
Если метрика растёт, но не ведёт к улучшению удержания, удовлетворённости или выручки, это сигнал, что вы оптимизируете не то. Связь с `lagging indicator` не обязана быть идеальной, но логика должна быть понятной и проверяемой. `KPI tree` помогает показать, какие `leading indicator` и продуктовые рычаги двигают `North Star Metric`. Такой подход снижает риск накрутки и делает приоритеты команды более устойчивыми.
18У вас `KPI tree`: `North Star Metric` = `weekly active learners`. Команда контента оптимизирует `lessons started`, команда монетизации — `ad impressions`. При этом `retention` падает. Какое действие наиболее корректно, чтобы снизить риск «оптимизации не того»?
AОставить всё как есть: рост подметрик всегда гарантирует рост `North Star Metric`
BЗаменить `North Star Metric` на `ad impressions`, чтобы метрики не конфликтовали
CПривязать подметрики к `North Star Metric`, пересмотреть `OMTM` инициатив и добавить `guardrail` метрики типа `retention` и `satisfaction`
DЗапретить анализ по сегментам и оставить только общий отчёт
Ответ: Если команды оптимизируют локальные метрики, нужен общий контекст `KPI tree` и `guardrail`, чтобы избежать локального оптимума.
Рост `lessons started` может означать больше незавершённых уроков, а рост `ad impressions` — больше раздражения, оба сценария могут снижать `retention`. Правильный шаг — выровнять цели: показать, как подметрики должны поддерживать `North Star Metric`, и какие `guardrail` нельзя ухудшать. Затем пересмотреть `OMTM` инициатив, чтобы они были `leading indicator` для `North Star Metric`, а не просто метриками активности. Это помогает командам принимать решения, которые улучшают продукт в целом.
19B2B продукт: бизнес-цель — рост `ARR`. Выбран `North Star Metric` = `weekly teams creating and sharing at least one report`. Инициатива команды — упростить приглашение коллег в рабочее пространство. Какая `OMTM` наиболее логична как `leading indicator` для этой инициативы?
AДоля новых команд, которые пригласили 2+ участников в первые 3 дня
B`визиты на страницу тарифов`
C`средний чек по контрактам`
D`количество задач в беклоге`
Ответ: Лучший `leading indicator` для инициативы по приглашениям — метрика, которая измеряет успех именно в приглашениях, а затем связывается с `North Star Metric` через `KPI tree`.
Если команде важно, чтобы рабочие пространства становились многопользовательскими, то приглашения — прямой рычаг. Доля команд, пригласивших коллег, меняется быстро и отражает эффект улучшений UX приглашения. Затем это должно вести к большему совместному использованию, созданию и шарингу отчётов, а дальше — к `lagging indicator` вроде `ARR`. Визиты на тарифы и средний чек могут быть полезны, но они слишком далеко от конкретного изменения и хуже подходят как `OMTM`.
20В эксперименте новый онбординг улучшил `leading indicator` `activation rate`, но `lagging indicator` `30-day retention` пока не изменился. Какое решение наиболее разумно?
AСразу выкатывать на всех, потому что `leading indicator` всегда достаточно
BСразу откатывать, потому что `lagging indicator` не вырос за короткий период
CИгнорировать `lagging indicator` и держать фокус только на `OMTM`
DСчитать рост `leading indicator` ранним сигналом, продолжить наблюдение за `lagging indicator`, проверить связь в `KPI tree` и следить за `guardrail`
Ответ: `Leading indicator` даёт быстрый сигнал, но ценность инициативы подтверждается через `lagging indicator` и связь в `KPI tree`.
Если онбординг стал лучше, активация может улучшиться сразу, а удержание проявится позже, когда пользователи проживут достаточно времени. Поэтому важно не торопиться с выводами: проверить, что улучшение не сопровождается ухудшением `guardrail` метрик, и дождаться окна для `lagging indicator`. Также полезно убедиться, что выбранная `activation rate` действительно является `leading indicator` для удержания в вашем `KPI tree`. Такой подход снижает риск преждевременной оптимизации и делает решение более устойчивым.
Хотите тренировать интерактивно?
В приложении — таймер, прогресс, стрики и 1700+ вопросов по всем темам.
Тренировать в TelegramДругие темы: Продуктовая аналитика