Поскольку AI ускоряет процесс выпуска продуктов, продуктовые команды вынуждены следить за всё большим количеством метрик, имея при этом всё меньше времени на их анализ. Независимо от того, что измеряет ваша команда — коэффициент активации, количество активных пользователей в неделю или конверсию в регистрацию — контроль обычно сводится к одной и той же рутине: каждое утро открывать дашборд, чтобы проверить, не изменились ли показатели, или еженедельно вручную собирать данные, чтобы подготовить отчет для стейкхолдеров. Это работает, но требует ручного труда, а мониторинг происходит только тогда, когда вы о нем вспоминаете.
Мониторинг KPI в Mixpanel передает эту задачу AI-агенту. Вы выбираете метрику, задаете расписание, и агент круглосуточно следит за ней, а затем отправляет сводку в Slack или по электронной почте, сообщая, что изменилось и на что стоит обратить внимание. Вы держите руку на пульсе метрики, а информация сама приходит к вам с необходимым контекстом.
Определение
Что такое мониторинг KPI?
Мониторинг KPI — это практика отслеживания ключевой метрики с течением времени и получения уведомлений, когда она меняется значимым образом. В Mixpanel за вас это делает AI-агент: вы выбираете метрику, устанавливаете периодичность, и он доставляет персонализированную сводку в Slack или по электронной почте, где резюмирует изменения и отмечает то, что считает важным.
Это мониторинг KPI для продуктовой аналитики, а не мониторинг серверов или инфраструктуры. Он также отличается от «живого» дашборда, который нужно обновлять вручную, и от пороговых оповещений, которые срабатывают в тот же миг, когда число выходит за рамки. Мониторинг KPI предоставляет вам запланированный, контекстуальный отчет по вашей метрике.
Вот что делает KPI-агент и как его настроить.
Что делает агент мониторинга KPI
Агент мониторинга KPI в Mixpanel — это способ отслеживать KPI без постоянного участия, вместо того чтобы проверять дашборд самостоятельно. Вы получаете постоянную, не требующую усилий осведомленность о важном для вас показателе, доставляемую туда, где вы уже работаете.
Что делает агент и где его возможности заканчиваются
- Выполняет один фиксированный запрос по выбранной вами метрике
- Суммирует изменения относительно базового уровня
- Отмечает значимые сдвиги с пояснением причин
- Не предпринимает действий самостоятельно
Как настроить монитор KPI
Настройка занимает несколько минут и выполняется полностью внутри продукта. Вот полная последовательность действий:
- Откройте рабочий процесс автоматизации (Automation). В боковой навигации нажмите «+ Create New», затем выберите «Automation» в нижней части раздела «Analysis». (Если вы не видите эту опцию, возможно, в вашей организации еще не включен Mixpanel AI; администратор может активировать его в настройках.)
- Выберите метрику для мониторинга. Выберите метрику события в стиле Insights, которую вы уже настроили — будь то сумма, количество или количество уникальных пользователей. Агент использует существующее определение метрики как источник истины.
- Установите периодичность. Сводки могут приходить ежедневно, еженедельно или ежемесячно. Еженедельный вариант — разумный выбор по умолчанию для большинства команд, ежедневный подходит для метрик, на которые вы активно влияете, а ежемесячный — для медленно меняющихся показателей, которые вы все же хотите фиксировать.
- Добавьте инструкции. Это шаг, который большинство команд недооценивают. Поле «Instructions» формирует комментарии к сводке, а не сам запрос, поэтому вы можете объяснить агенту, что для вас важно.
- Выберите канал доставки. Slack или электронная почта. Для доставки в Slack сначала необходимо настроить интеграцию Slack для вашего проекта.
- Предварительный просмотр и сохранение. Используйте «run now», чтобы увидеть пример сводки перед тем, как утвердить расписание. Когда все выглядит правильно, сохраните настройки. Ваша первая запланированная сводка придет в следующий интервал времени, а вы сможете приостановить, отредактировать или удалить монитор в любой момент.
Совет от команды Mixpanel
Не пропускайте поле «Instructions». Оно определяет, как агент пишет сводку, а не то, что он запрашивает, поэтому давайте инструкции как коллеге: укажите, что считается значимым для этой метрики и с каким сравнением нужно начинать. Что-то вроде «сосредоточься на изменении неделю к неделе и отмечай всё, что отклоняется более чем на 2 стандартных отклонения от 30-дневного среднего» даст вам более точный результат, чем настройки по умолчанию.
Что отображается в сводке
Каждая сводка по дизайну лаконична. Вы получаете краткое резюме того, как метрика вела себя за последний период по сравнению с базовым уровнем, а также любые сдвиги, которые агент отметил как значимые, с пояснением причин. Также есть функция обратной связи: если агент выделил что-то бесполезное, вы можете сообщить об этом, и сводки станут точнее со временем.
На практике это читается как заметка от коллеги, который проверил цифры за вас. Еженедельный монитор по активным пользователям за неделю может начаться с того, что метрика выросла на 6% по сравнению с предыдущей неделей, а затем указать, что основной рост начался в середине недели. Вы получаете суть и контекст в паре предложений и сами решаете, что делать дальше.
Мониторинг KPI против оповещений и анализа первопричин (Root Cause Analysis)
Мониторинг KPI, оповещения об аномалиях и анализ первопричин — все они имеют дело с изменениями метрик, поэтому их часто путают. Однако они созданы для разных ситуаций и лучше всего работают вместе, а не как заменители. Вот как их различать с первого взгляда:
На какую метрику стоит поставить монитор?
Начните с того единственного показателя, за который вы отвечаете, а затем добавьте опережающие индикаторы, которые обычно меняются раньше него. Если вы не уверены, как эти показатели связаны, «Деревья метрик» (Metric Trees) помогут визуализировать, как ваши KPI влияют на результат, и позволят отслеживать их вместе. Это руководство по деревьям KPI — хороший вводный материал перед тем, как вы решите, за чем следить.
Монитор также оправдывает себя сразу после запуска. Когда вы выпускаете что-то за фича-флагом, поставьте монитор на метрику, на которую этот флаг должен повлиять, и следите за ней первые пару недель. Сохраняйте фокус: монитор отслеживает одну выбранную вами метрику и сообщает о ее тренде, он не сравнивает варианты друг с другом — это задача агента экспериментов (Experiments Agent).
Установите монитор и получайте информацию автоматически
Выберите метрику, которую проверяете чаще всего, установите на нее монитор и перестаньте открывать дашборд, чтобы узнать, не изменились ли показатели. Чтобы узнать больше, посмотрите, как агент Mixpanel KPI следит за вашей метрикой и отправляет вам обновления.
Staff Product Designer @ Mixpanel
