Что такое vanity metrics и почему они опасны для принятия решений?

Ответ: Vanity Metrics и их опасность

Определение Vanity Metrics

Vanity Metrics (тщеславные метрики) — это метрики, которые выглядят впечатляющими на графиках, растут со временем, но не показывают реального состояния бизнеса и не влияют на принятие решений.

Термин "vanity" (тщеславие) используется потому, что эти метрики льстят нашему эго и создают иллюзию успеха, но не отражают действительное развитие компании.

Примеры Vanity Metrics

В интернет-продуктах:

• Количество установок приложения — может быть высоким, но 90% пользователей могут никогда не открыть его
• Общее число пользователей — без разбора на активных и неактивных
• Количество просмотров страницы — если пользователи приходят, но ничего не делают
• Количество подписчиков в соцсетях — могут быть боты или неактивные аккаунты
• Размер базы данных — растёт, но неизвестно, какие данные полезны

В продакшене:

• Количество запущенных проектов без учёта их завершения
• Общее число часов, потраченных на работу
• Количество товаров в каталоге без учёта продаж

Почему они опасны для принятия решений

1. Скрывают реальные проблемы

Метрика: 1 млн скачиваний приложения ✓
Реальность: 800 тыс. удалили в первый день (churn 80%)
Выводы: Метрика врёт, пока чёрный ход открыт в приложении

2. Приводят к неправильным инвестициям

Компания может выделить бюджет на то, что кажется растущим, но не приносит деньги.

Пример: Растёт просмотр видео (vanity).
Реальность: Конверсия в покупку упала с 5% до 2% (actionable метрика).
Ошибка: Инвестируем в контент, в то время как нужно чинить воронку продаж.

3. Создают ложное чувство успеха

• Дизайнер: "Добавили 3 новых фильтра, просмотры выросли на 15%"
• Реальность: Сеанс стал длиннее на 0.5 сек, но удовлетворённость упала на 10%
• Вывод: Людям не нравится изменение, но они дольше ищут нужное

4. Затрудняют отправку плохих новостей

Когда начальство смотрит на красивые растущие цифры, сложнее обсуждать реальные проблемы пользователей.

5. Ведут к лишней работе и отвлекают от приоритетов

Менеджер: "Почему падает количество активных пользователей?"
Разработчик: "Потому что мы потратили квартал на оптимизацию скорости."
Реальность: Мы потеряли 20% выручки, но сайт загружается на 0.2 сек быстрее.

Как отличить Vanity от Action Metrics

Vanity Metrics (избегать):

• Растут, но не связаны с бизнес-результатами
• Абсолютные числа без контекста (1 млн пользователей)
• Трудно влиять на результат напрямую
• Пример: Total pageviews, total signups

Action Metrics (использовать):

• Прямо влияют на доход или удовлетворённость
• Относительные и сравнительные (% активных, DAU/MAU ratio)
• Можно действовать на основе данных
• Пример: Revenue per user, retention rate, conversion funnel

Практические примеры из аналитики

# ПЛОХО — только vanity
users_total = 1_000_000
page_views = 50_000_000
active_days = 180

# ХОРОШО — действенные метрики
active_users_ratio = 0.35  # 35% от всех пользователей
dau_mau_ratio = 0.12  # 12% DAU / MAU (коэффициент retention)
revenue_per_active_user = 5.50
churn_rate = 0.08  # 8% в месяц
conversion_to_purchase = 0.025  # 2.5% из всех посещений

Как структурировать метрики правильно

Пирамида метрик:

1. North Star Metric (главная метрика) — Revenue, Hours Saved, Quality Improved
2. Key Metrics — Retention, Engagement, Revenue per user
3. Supporting Metrics — Feature adoption, NPS, Error rate
4. Vanity Metrics — Total users, pageviews (только для информации)

Выводы

• Vanity Metrics опасны, потому что скрывают реальные проблемы
• Используй метрики, которые связаны с бизнес-целями
• Фокусируйся на действенных метриках (actionable)
• Всегда ищи связь между метриками и реальным влиянием на компанию
• Лучше иметь одну хорошую метрику, чем десять красивых цифр без смысла