Еще одна “Пирамида метрик”: как навести порядок в числах и бэклоге (Яндекс.Такси, Елена Серегина)

Как решить, какой релиз достоин проработки, а какой стоит отложить в долгий ящик? Что делать, если вы провели АБ-тест, но важные метрики продукта изменились двояко: одни стали выше в тестовой группе, другие – меньше? Дискуссионные вопросы, которые рано или поздно возникают в продуктовой работе. Возникновение таких вопросов – признак того, что в команде есть культура аналитического принятия решений.

Зачастую за этими вопросами стоят более простые по форме, и в то же время более сложные по содержанию задачи: какие метрики важны для конкретного продукта и какова связь между ними? Чтобы анализ данных и многочисленные счетчики не зря отнимали ресурсы, нужно уметь отвечать на такого рода вопросы.

Занимаясь аналитикой разнообразных продуктов, Елена прошла путь проб и ошибок. Как и большинство продактов, маркетологов и аналитиков, стремилась привести систему метрик в порядок и понять, что же такое продукт с точки зрения аналитики.

Каждая ситуация уникальна, и ни один из клиентов или работодателей, не желал бы, чтобы его секреты оказались предметом чьего-то выступления. И тем не менее ей есть, что вам рассказать.

Обобщая подход к построению прочной системы метрик, в которой решаемы трудные задачи и продуктивны сами измерения, Елена назвала свой метод “Пирамидой метрик”.