Дерево метрик: что это такое и как построить?

То, что можно измерить, всегда можно улучшить.

Автор статьи - ProductStar Global.
Научный редактор: Андрей Бадин

Зачем нужна иерархия метрик (дерево метрик)?

Дерево метрик помогает:

сосредотачиваться на важных показателях
определять точки роста
расставлять приоритеты в функциях

Есть много показателей, которые можно и нужно измерять, также есть иерархия в подходе к измерению, и, как в любой иерархической структуре, если вы не настроите базу, вы не можете надеяться на достижение высот.

Когда у вас есть идея для фичи, полезно «внедрить» ее в дерево метрик. Это поможет понять, на какую метрику повлияет данная фича больше всего. Чем ближе метрика к «вершине» дерева метрик (к ключевой метрике вашего продукта), тем больше вероятность того, что функция будет успешной.

Алгоритм работы:

Может быть полезно визуализировать алгоритм с помощью MindMap (например, MindMeister, Mind42, Miro) или на листе / флипчарте.

Итак, алгоритм:

1. Определите основной показатель для вашей компании (например, «Выручка»).

2. Определите, какая ключевая метрика продукта соответствует основной метрике вашей компании (предположим, что это также "Выручка").

3. Определите, какие 3-5 основных метрик больше всего влияют на ключевую метрику продукта (например, это будут "Средняя стоимость покупки", "Частота покупок", "Количество пользователей" и "% платных пользователей") - это будут метрики первого уровня.

4. Для каждой метрики первого уровня задайте вопрос: "Какие субметрические показатели влияют на эту метрику больше всего?" (например, на "Среднюю стоимость покупки" влияют "Средняя стоимость товаров" и "Среднее количество товаров в конкретном заказе") - это будут метрики второго уровня.

5. Теперь берем метрики второго уровня и переходим к метрикам третьего уровня и так далее — в общем, разумно копать до 4-5 уровня (в зависимости от размера и сложности вашего продукта) — продолжайте копать, пока не достигнете уровня, который считаете разумным (и пока есть возможность повлиять на метрики данного уровня).

В результате вы должны получить нечто похожее на иерархию как на изображении ниже.

Давайте разберемся в иерархии!

Как уже было сказано, фичи должны быть связаны с метрикой, и чем ближе эта метрика к главной метрике компании, тем важнее фича.

Почему это так?

При построении дерева метрик цель состоит в том, чтобы разбить метрику на подметрики. Однако есть один нюанс. Фича часто влияет сразу на несколько субметрик (например, на «Среднее количество товаров в корзине» и на «Среднее количество товаров, отмеченных как избранные»). В таком случае будет некорректно «подключать» фичу лишь к одной субметрике и необходимо остановиться на «родительской метрике» — «Среднее количество товаров в заказе».

Чаще всего, чем ближе субметрика к ключевой метрике продукта, тем больше вероятность того, что фича окажется успешной (поскольку есть вероятность, что каждый шаг от субметрики к родительской метрике может ослабить влияние субметрики на ее “родителя”, соответственно, может принести статистические потери).

Другие нюансы и детали

В качестве простого варианта для начала — я бы предложил вам использовать «Выручку» в качестве ключевой метрики продукта (если у вас нет других предложений от руководства компании).
Список субметрик должен быть составлен таким образом, чтобы только они могли влиять на свою "родительскую" метрику - таким образом, "родительская" метрика полностью состоит из субметрик и зависит от них.
Элементы иерархии должны состоять из измеримых метрик (в отличие от фич).
Иерархия строится сверху-вниз (от целей компании до метрик, связанных с отдельными фичами).
Иерархия метрик обычно составляется один раз и обновляется только после масштабных изменений.
Иерархия метрик может содержать элементы, которые логически взаимосвязаны и имеют взаимное влияние, но находятся на разных уровнях иерархии. В таких случаях их можно визуально соединить пунктирной линией (чтобы учитывать этот факт при принятии решений). Кроме того, метрика может влиять на несколько родительских метрик, но в таких случаях метрика должна быть отнесена только к той родительской метрике, на которую она оказывает наибольшее влияние.

Что делать со всем этим дальше

Возьмите свой бэклог и разложите из него фичи по метрикам - чем ближе к вершине иерархии находится метрика, тем больше вероятность того, что функция будет успешной.
Проанализируйте метрики второго и третьего уровней, сфокусируйтесь на них и проведите мозговой штурм. Определите, какие новые функции могут повысить эти метрики.

Частые ошибки

1. Постановка целей: убедитесь, что метрика, которую вы выбрали для вершины иерархии, действительно является самой важной (подсказка - уточните у руководства компании + можно взять метрику "Выручка от реализации продукции" по умолчанию). Некоторые метрики отражают только часть показателей компании, упуская другие важные элементы. Действительно ли вы хотите, чтобы больше всего увеличилось "Количество заказов", а не "Общая выручка" или "Отношение дохода на пользователя к затратам на привлечение"?

2. Метрики должны количественно определять то, что вам действительно нужно знать. Убедитесь, что каждый элемент иерархии является измеримой метрикой.

3. Фокусируйтесь на метриках, а не на фичах: когда вы соотносите идеи фич и метрик, стоит писать идеи фич рядом (или в комментарии) с названием метрики, на которую они влияют, но не как отдельный элемент иерархии.

4. Следите за тем, чтобы количество "ванильных метрик" в вашей иерархии не превышало все остальные - иначе вы рискуете погнаться за ними и впоследствии игнорировать ключевые метрики продукта.

* Ванильные метрики - любые не объективные показатели, по ним нельзя судить о качестве результата и вообще о наличии результата как такового.

5. Не рекомендуется напрямую связывать субметрику с несколькими "родительскими" метриками - иначе вам будет сложно принимать решения. В крайнем случае, обозначьте одну из связей как основную, а остальные пометьте пунктирной линией.

Также вас могут заинтересовать следующие статьи:

Подписывайтесь на наши соцсети, чтобы не пропускать новые статьи: