Поскольку ИИ ускоряет выпуск продуктов, продуктовые команды вынуждены следить за все большим количеством метрик, имея при этом все меньше времени на их анализ. Независимо от того, что измеряет ваша команда — коэффициент активации, количество активных пользователей в неделю или конверсию в регистрацию — отслеживание обычно сводится к одной и той же рутине: каждое утро открывать дашборд, чтобы проверить, не изменились ли показатели, или еженедельно вручную собирать данные, чтобы подготовить отчет для стейкхолдеров. Это работает, но требует ручного труда, а мониторинг происходит только тогда, когда вы о нем вспоминаете.

Мониторинг KPI в Mixpanel передает эту задачу AI-агенту. Вы выбираете метрику, устанавливаете расписание, и агент круглосуточно следит за ней, а затем присылает в Slack или на электронную почту сводку, в которой объясняется, что изменилось и на что стоит обратить внимание. Вы держите руку на пульсе метрики, а информация сама приходит к вам с необходимым контекстом.

Определение

Что такое мониторинг KPI?

Мониторинг KPI — это практика отслеживания ключевого показателя с течением времени и получение уведомлений, когда он меняется значимым образом. В Mixpanel за вас это делает AI-агент: вы выбираете метрику, задаете периодичность, и он доставляет персонализированную сводку в Slack или на почту, суммируя изменения и отмечая то, что он считает важным.

Это мониторинг KPI для продуктовой аналитики, а не мониторинг серверов или инфраструктуры. Он также отличается от «живого» дашборда, который нужно обновлять вручную, и от пороговых оповещений, которые срабатывают в тот же миг, когда число выходит за рамки. Мониторинг KPI предоставляет вам запланированный, контекстуальный обзор вашей метрики.

Вот что делает агент KPI и как его настроить.

Что делает агент мониторинга KPI

Агент мониторинга KPI в Mixpanel — это способ отслеживать KPI без лишних усилий, вместо того чтобы самостоятельно проверять дашборд. Вы получаете постоянную, не требующую внимания осведомленность о важном для вас показателе, доставляемую туда, где вы уже работаете.

Что делает агент и где его границы

Выполняет один фиксированный запрос по выбранной вами метрике

Суммирует изменения относительно базового уровня

Отмечает значимые сдвиги с пояснением причин

Не предпринимает действий самостоятельно

Как настроить монитор KPI

Настройка занимает несколько минут и происходит полностью внутри продукта. Вот полная последовательность действий:

Откройте рабочий процесс автоматизации (Automation). В боковой навигации нажмите «+ Create New», затем выберите «Automation» в нижней части раздела «Analysis». (Если вы не видите эту опцию, возможно, в вашей организации еще не включен Mixpanel AI, администратор может активировать его в настройках.)

Выберите метрику для мониторинга. Выберите метрику события в стиле Insights, которую вы уже настроили — будь то сумма, количество или количество уникальных пользователей. Агент использует существующее определение метрики как источник истины.

Установите периодичность. Сводки могут приходить ежедневно, еженедельно или ежемесячно. Еженедельный вариант — разумный выбор по умолчанию для большинства команд, ежедневный подходит для метрики, на которую вы активно влияете, а ежемесячный — для медленно меняющихся показателей, которые вы все же хотите фиксировать.

Добавьте инструкции. Это шаг, который большинство команд недооценивает. Поле «Instructions» формирует комментарии к сводке, а не сам запрос, поэтому вы можете объяснить агенту, что для вас важно.

Выберите канал доставки. Slack или электронная почта. Для доставки в Slack сначала необходимо настроить интеграцию Slack для вашего проекта.

Предварительный просмотр и сохранение. Используйте «run now», чтобы увидеть пример сводки перед тем, как утвердить расписание. Когда все выглядит правильно, сохраните настройки. Ваша первая запланированная сводка придет в следующий установленный срок, а вы сможете приостановить, отредактировать или удалить монитор в любое время.

Совет от команды Mixpanel

Не пропускайте поле «Instructions». Оно определяет, как агент пишет сводку, а не то, что он запрашивает, поэтому давайте инструкции как коллеге: укажите, что считается значимым для этой метрики и с каким сравнением нужно работать в первую очередь. Например, фраза «сосредоточься на изменении за неделю и отмечай все, что отклоняется более чем на 2 стандартных отклонения от 30-дневного среднего» даст вам более точный результат, чем настройки по умолчанию.

Что отображается в сводке

Каждая сводка по дизайну лаконична. Вы получаете краткий обзор того, как вела себя метрика за последний период по сравнению с базовым уровнем, а также любые изменения, которые агент отметил как значимые, с пояснением причин. Также есть функция обратной связи: если агент выделил что-то бесполезное, вы можете сообщить об этом, и сводки со временем станут точнее.

На практике это читается как заметка от коллеги, который проверил цифры за вас. Еженедельный монитор по количеству активных пользователей за неделю может начаться с того, что метрика выросла на 6% по сравнению с предыдущей неделей, а затем указать, что основной рост пришелся на середину недели. Вы получаете суть и контекст в паре предложений и сами решаете, что делать дальше.

Мониторинг KPI против оповещений и анализа первопричин

Мониторинг KPI, оповещения об аномалиях и анализ первопричин (Root Cause Analysis) — все они имеют дело с изменениями метрик, поэтому их часто путают. Однако они созданы для разных ситуаций и лучше всего работают вместе, а не как замена друг другу. Вот как их быстро различить:

Какую метрику стоит поставить на мониторинг?

Начните с того показателя, за который вы несете ответственность, а затем добавьте опережающие индикаторы, которые обычно меняются раньше него. Если вы не уверены, как эти показатели связаны, «Деревья метрик» (Metric Trees) помогут визуализировать, как ваши KPI влияют на результат, и позволят отслеживать их вместе. Это руководство по деревьям KPI — отличная база для начала, прежде чем вы решите, за чем следить.

Монитор также полезен сразу после запуска. Когда вы выпускаете что-то за фича-флагом, поставьте монитор на метрику, на которую этот флаг должен повлиять, и следите за ней первые пару недель. Будьте реалистичны в охвате: монитор отслеживает одну выбранную вами метрику и сообщает о ее тренде, он не сравнивает варианты между собой — это задача агента экспериментов (Experiments Agent).

Настройте монитор и получайте данные сами

Выберите метрику, которую проверяете чаще всего, настройте на нее монитор и перестаньте открывать дашборд, чтобы узнать, не изменилось ли что-то. Чтобы узнать больше, посмотрите, как агент Mixpanel KPI следит за вашей метрикой и отправляет вам обновления.

Staff Product Designer @ Mixpanel