North Star, KPI и иерархия метрик: вопросы для собеседования (часть 4)

North Star Metric, дерево метрик, связь между продуктовыми и бизнес-KPI — на собеседовании просят построить систему метрик для конкретного продукта. Какая метрика отражает ценность для пользователя? Как декомпозировать revenue на составляющие? Ответы на эти вопросы показывают системное мышление кандидата.

A/B-тесты в продуктовой аналитикеОсновы продуктовой аналитикиВоронки, когорты и retentionРост, активация и онбордингИнструментация и качество данныхМонетизация и юнит-экономикаПриоритизация и RICEПостановка задачи и PRDСегментация и позиционированиеСторителлинг и alignmentИсследование пользователей и JTBD

Вопросы 1620 из 20

16Как корректнее всего относиться к изменению `North Star Metric` по мере развития продукта?
A`North Star Metric` нужно менять каждую неделю, чтобы она всегда росла
B`North Star Metric` может эволюционировать при смене стратегии или стадии продукта, но менять её стоит редко и осознанно, обновляя `KPI tree`
C`North Star Metric` нельзя менять никогда, иначе потеряется история
D`North Star Metric` всегда должна быть заменена на `OMTM`, когда появляется новая инициатива
Ответ: `North Star Metric` может меняться, но это стратегическое решение, а не реакция на недельные колебания.

На ранней стадии продукт часто фокусируется на достижении ценности и активации, а на зрелой — на удержании и масштабировании. Поэтому со временем метрика может сместиться, но это требует аккуратной миграции: объяснить новую логику, переопределить драйверы в `KPI tree` и сохранить сопоставимость. Частая смена метрики разрушает фокус и делает цели «подгоняемыми». Лучше держать стабильную `North Star Metric` и менять её только при изменении сути продукта.

17Вы выбираете `North Star Metric` и боитесь получить «ванити-метрику», которую легко накрутить. Какая проверка наиболее полезна?
AВыбрать метрику с самым большим абсолютным значением, чтобы она выглядела внушительно
BПроверить, что метрика отражает доставленную ценность, связана с ключевыми `lagging indicator` и имеет понятные драйверы в `KPI tree`
CВыбрать метрику, которую легче всего собрать, даже если она не про ценность
DВыбрать метрику, которую конкурент публикует в пресс-релизах
Ответ: Хорошая `North Star Metric` должна отражать ценность и иметь прозрачную связь с драйверами и итоговыми `lagging indicator`.

Если метрика растёт, но не ведёт к улучшению удержания, удовлетворённости или выручки, это сигнал, что вы оптимизируете не то. Связь с `lagging indicator` не обязана быть идеальной, но логика должна быть понятной и проверяемой. `KPI tree` помогает показать, какие `leading indicator` и продуктовые рычаги двигают `North Star Metric`. Такой подход снижает риск накрутки и делает приоритеты команды более устойчивыми.

18У вас `KPI tree`: `North Star Metric` = `weekly active learners`. Команда контента оптимизирует `lessons started`, команда монетизации — `ad impressions`. При этом `retention` падает. Какое действие наиболее корректно, чтобы снизить риск «оптимизации не того»?
AОставить всё как есть: рост подметрик всегда гарантирует рост `North Star Metric`
BЗаменить `North Star Metric` на `ad impressions`, чтобы метрики не конфликтовали
CПривязать подметрики к `North Star Metric`, пересмотреть `OMTM` инициатив и добавить `guardrail` метрики типа `retention` и `satisfaction`
DЗапретить анализ по сегментам и оставить только общий отчёт
Ответ: Если команды оптимизируют локальные метрики, нужен общий контекст `KPI tree` и `guardrail`, чтобы избежать локального оптимума.

Рост `lessons started` может означать больше незавершённых уроков, а рост `ad impressions` — больше раздражения, оба сценария могут снижать `retention`. Правильный шаг — выровнять цели: показать, как подметрики должны поддерживать `North Star Metric`, и какие `guardrail` нельзя ухудшать. Затем пересмотреть `OMTM` инициатив, чтобы они были `leading indicator` для `North Star Metric`, а не просто метриками активности. Это помогает командам принимать решения, которые улучшают продукт в целом.

19B2B продукт: бизнес-цель — рост `ARR`. Выбран `North Star Metric` = `weekly teams creating and sharing at least one report`. Инициатива команды — упростить приглашение коллег в рабочее пространство. Какая `OMTM` наиболее логична как `leading indicator` для этой инициативы?
AДоля новых команд, которые пригласили 2+ участников в первые 3 дня
B`визиты на страницу тарифов`
C`средний чек по контрактам`
D`количество задач в беклоге`
Ответ: Лучший `leading indicator` для инициативы по приглашениям — метрика, которая измеряет успех именно в приглашениях, а затем связывается с `North Star Metric` через `KPI tree`.

Если команде важно, чтобы рабочие пространства становились многопользовательскими, то приглашения — прямой рычаг. Доля команд, пригласивших коллег, меняется быстро и отражает эффект улучшений UX приглашения. Затем это должно вести к большему совместному использованию, созданию и шарингу отчётов, а дальше — к `lagging indicator` вроде `ARR`. Визиты на тарифы и средний чек могут быть полезны, но они слишком далеко от конкретного изменения и хуже подходят как `OMTM`.

20В эксперименте новый онбординг улучшил `leading indicator` `activation rate`, но `lagging indicator` `30-day retention` пока не изменился. Какое решение наиболее разумно?
AСразу выкатывать на всех, потому что `leading indicator` всегда достаточно
BСразу откатывать, потому что `lagging indicator` не вырос за короткий период
CИгнорировать `lagging indicator` и держать фокус только на `OMTM`
DСчитать рост `leading indicator` ранним сигналом, продолжить наблюдение за `lagging indicator`, проверить связь в `KPI tree` и следить за `guardrail`
Ответ: `Leading indicator` даёт быстрый сигнал, но ценность инициативы подтверждается через `lagging indicator` и связь в `KPI tree`.

Если онбординг стал лучше, активация может улучшиться сразу, а удержание проявится позже, когда пользователи проживут достаточно времени. Поэтому важно не торопиться с выводами: проверить, что улучшение не сопровождается ухудшением `guardrail` метрик, и дождаться окна для `lagging indicator`. Также полезно убедиться, что выбранная `activation rate` действительно является `leading indicator` для удержания в вашем `KPI tree`. Такой подход снижает риск преждевременной оптимизации и делает решение более устойчивым.

1234

Хотите тренировать интерактивно?

В приложении — таймер, прогресс, стрики и 1700+ вопросов по всем темам.

Тренировать в Telegram

Другие темы: Продуктовая аналитика

A/B-тесты в продуктовой аналитикеОсновы продуктовой аналитикиВоронки, когорты и retentionРост, активация и онбордингИнструментация и качество данныхМонетизация и юнит-экономикаПриоритизация и RICEПостановка задачи и PRDСегментация и позиционированиеСторителлинг и alignmentИсследование пользователей и JTBD