Сегодня мы запускаем публичную бета-версию ClickHouse Observability — полностью управляемого решения для обеспечения наблюдаемости для SRE-инженеров и их агентов, работающего на базе ClickHouse Cloud и открытого ПО ClickStack.
Отправляйте данные OpenTelemetry на управляемую конечную точку OTLP, а остальное мы возьмем на себя. Вы получаете скорость выполнения запросов ClickHouse без необходимости рассчитывать вычислительные мощности, настраивать базу данных и схемы или управлять загрузкой данных.
Благодаря эффективности ClickHouse мы можем предложить лучшие на рынке цены на полностью управляемый сервис и сохранить простоту: учитываются только гигабайты загруженных логов и трассировок ($0,20/ГБ) и точки данных метрик ($0,10/млн).
Получите все преимущества ClickHouse для наблюдаемости за считанные минуты благодаря точным логам, метрикам и трассировкам, готовым к анализу. Изучайте телеметрию через пользовательский интерфейс ClickStack или подключайте собственные агенты с помощью специализированных инструментов MCP и SQL. Сосредоточьтесь на понимании работы систем в продакшене и устранении сбоев, пока мы обслуживаем платформу.
Мы также анонсируем закрытую предварительную версию ClickHouse Observability Apps. В то время как ClickHouse Observability делает преимущества ClickHouse более доступными, Apps решает более глобальную задачу: если агенты могут проводить расследования, а ПО — адаптироваться к задачам, почему интерфейсы наблюдаемости должны оставаться неизменными?
С помощью Observability Apps вы описываете то, что вам нужно, и создаете интерактивный пользовательский интерфейс наблюдаемости под вашу компанию, ваш сценарий использования, вашу команду, вашу роль или даже под конкретное расследование. Агенты могут использовать специализированные инструменты для расследования и SQL, чтобы превратить эти вопросы в интерфейс, который вы можете изучать, дорабатывать и которым можете делиться.
Преимущества ClickHouse для наблюдаемости хорошо известны. Ведущие компании, такие как Netflix, Anthropic, Twilio и OpenAI, используют его для хранения и запросов телеметрии в огромных масштабах.
Это стало возможным благодаря высокой степени сжатия, быстрым запросам и эффективному хранению данных, что позволяет хранить полную телеметрию без семплирования и с большей глубиной истории. В сочетании с выразительным SQL это дает инженерам и агентам богатый контекст, необходимый для расследования и диагностики проблем.
Эффективность ClickHouse изменила то, что команды могут позволить себе хранить и исследовать. За последний год мы неуклонно снижали барьер для доступа к этим преимуществам с помощью открытого исходного кода и Managed ClickStack, но опыт работы с базами данных, управление загрузкой данных и инфраструктурой по-прежнему оставались частью процесса.
Этот контроль по-прежнему важен для команд с достаточным опытом и масштабом, чтобы оправдать инвестиции. Но многие команды хотят исследовать свои приложения, не занимаясь при этом администрированием базы данных наблюдаемости. И по мере того, как агенты проводят все больше расследований, командам не должно приходиться постоянно пересматривать решения о емкости инфраструктуры ради агентов.
С ClickHouse Observability мы убираем эти требования.
«ClickHouse лежит в основе Buildkite’s Test Engine, обрабатывая более триллиона результатов тестов в месяц с задержкой загрузки всего в 10 секунд. Мы рады опираться на этот успех с ClickHouse Observability, чтобы лучше понимать нашу собственную CI. Во время закрытого тестирования интеграция OpenTelemetry от Buildkite с конечной точкой OTLP интерфейса ClickStack прошла без сучка и задоринки. Агент ClickStack за считанные минуты создал датборд, который позволил нам углубиться в отдельные задания, отслеживать общую производительность конвейера во времени и фильтровать данные по шагам, тегам агентов и многому другому. Мы с нетерпением ждем, когда клиенты Buildkite смогут опробовать это на своих собственных конвейерах». Крис Аткинс (Chris Atkins), заслуженный инженер, BuildKite
«ClickHouse лежит в основе Buildkite’s Test Engine, обрабатывая более триллиона результатов тестов в месяц с задержкой загрузки всего в 10 секунд. Мы рады опираться на этот успех с ClickHouse Observability, чтобы лучше понимать нашу собственную CI. Во время закрытого тестирования интеграция OpenTelemetry от Buildkite с конечной точкой OTLP интерфейса ClickStack прошла без сучка и задоринки. Агент ClickStack за считанные минуты создал датборд, который позволил нам углубиться в отдельные задания, отслеживать общую производительность конвейера во времени и фильтровать данные по шагам, тегам агентов и многому другому. Мы с нетерпением ждем, когда клиенты Buildkite смогут опробовать это на своих собственных конвейерах.
Крис Аткинс (Chris Atkins), заслуженный инженер, BuildKite
ClickHouse Observability делает эту работу нашей заботой. Вы решаете, какую телеметрию отправлять и какие вопросы задавать. Мы управляем базой данных и стоящей за ней инфраструктурой. Просто отправляйте данные и начинайте исследование.
Для начала создайте службу ClickHouse Observability, чтобы получить управляемую конечную точку OTLP и учетные данные. Настройте сборщики OpenTelemetry на эту конечную точку, сохранив существующие пайплайны инструментирования и сбора данных.
После этого мы берем на себя загрузку данных, схемы и хранение. Разделение вычислительных ресурсов для загрузки и запросов позволяет нам автоматически регулировать емкость для расследований по мере роста спроса, не требуя от вас оценки размера или настройки базовых служб.
Как только телеметрия поступает, вы готовы к исследованию. Ищите логи, изучайте метрики и отслеживайте трассировки в интерфейсе ClickStack. Превращайте полезные запросы в дашборды и оповещения, к которым ваша команда сможет возвращаться.
Эта же телеметрия доступна вашим агентам через входящий в комплект сервер ClickStack MCP. Специализированные инструменты позволяют им искать логи, отслеживать трассировки и анализировать шаблоны событий и дельты. SQL позволяет пойти еще дальше: объединять сигналы, сравнивать историческое поведение и проверять гипотезы, которые не покрывают стандартные инструменты.
«Наша способность работать небольшой командой, выпускать множество функций и при этом поддерживать высокое качество сервиса имеет абсолютно критическое значение. Это просто невозможно без постоянной триажи при поддержке ИИ, что потрясающе работает со стандартным агентом и простым доступом к ClickHouse Observability». Мэтт Матесон (Matt Matheson), соучредитель и технический директор, Trunk.io
«Наша способность работать небольшой командой, выпускать множество функций и при этом поддерживать высокое качество сервиса имеет абсолютно критическое значение. Это просто невозможно без постоянной триажи при поддержке ИИ, что потрясающе работает со стандартным агентом и простым доступом к ClickHouse Observability».
Мэтт Матесон (Matt Matheson), соучредитель и технический директор, Trunk.io
Исторически запуск наблюдаемости на базе ClickHouse Cloud означал оплату вычислений и хранилища. Это дает командам контроль, но для оценки счета необходимо понимать ресурсы, которые требуются их рабочей нагрузке. Без такого понимания команды часто перестраховываются и выделяют ресурсы с избытком, оплачивая неиспользуемую емкость.
Мы также считаем, что ценообразование должно быть простым для понимания и содержать как можно меньше параметров. Мы выбрали два знакомых показателя: объем отправляемых вами логов и трассировок, а также количество точек данных метрик. Тарификация метрик по точкам данных, а не по уникальным временным рядам означает, что добавление полезных измерений не влечет за собой отдельной платы за кардинальность — ClickHouse не страдает от высокой кардинальности, поэтому и вы не должны.
Во время публичного бета-тестирования оба параметра доступны со скидкой 50%.
Лого и трассировки тарифицируются по объему не сжатых данных, поступающих ежемесячно. Метрики тарифицируются по точкам данных, поступающим ежемесячно. Оба варианта включают 30 дней хранения в период публичной бета-версии, а для общей доступности планируется более длительный срок хранения.
Предоставление возможностей ClickHouse через управляемый сервис дает большим командам телеметрию с максимальной точностью без необходимости обслуживания базы данных.
Следующий шаг — предоставить этим командам свободу в выборе методов исследования. Базовые рабочие процессы для поиска логов и отслеживания трассировок по-прежнему имеют значение. Но у каждого бизнеса есть системы, обязанности и вопросы, которые экраны вендора не могут учесть полностью. Ваша система наблюдаемости не должна ждать своей очереди в чьем-то чужом дорожном карте.
ClickHouse Observability Apps, доступные сейчас в режиме частного предварительного просмотра, позволяют описать желаемый интерфейс и создать пользовательское приложение на основе ваших актуальных данных без написания кода приложения. Агент генерирует запросы, пользовательские визуализации и связанные экраны. Вы можете дорабатывать их в процессе общения и делиться приложением с вашей командой. SQL предоставляет свободу для анализа отдельных клиентов, арендаторов и транзакций с возможностью проверки запросов.
Команда платежного сервиса может сравнить показатели успешности с обычной производительностью каждого процессора, проследить аномалию до затронутых заказов и увидеть, какие из них прошли успешно после повторной попытки. Из заказа они могут открыть соответствующую трассировку, сохраняя контекст в ходе расследования. Службе поддержки может потребоваться другая отправная точка, организованная вокруг незавершенной покупки клиента.
Приложение может быть создано для одного расследования, а затем превратиться в инструмент, которым команда пользуется каждый день. Каждый пользователь и каждая команда получают свободу создавать интерфейс под свои вопросы, в то время как привычные инструменты расследования остаются частью рабочего процесса.
Мы спроектировали Observability Apps на основе трех принципов: безопасность, актуальные данные и интерактивный интерфейс, интегрированный с ClickStack. Сгенерированный код выполняется в изолированной среде (песочнице), а запросы работают только на чтение и используют разрешения базы данных пользователя, выполняющего просмотр. Приложения повторно используют уровень API за нашими инструментами расследования и MCP-сервером, при этом SQL доступен для анализа за пределами этих стандартных операций.
Создайте приложение для конкретного инцидента, поделитесь им с командой и используйте его повторно по мере изменения данных. Селектор времени ClickStack, средства просмотра трассировок и логов связывают пользовательские экраны с привычными инструментами расследования, позволяя переходить от вопроса к первопричинам с сохранением контекста.
Команды могут адаптировать свой опыт по мере появления новых вопросов, не дожидаясь, пока вендор разработает каждый экран. Основные инструменты расследования становятся многократно используемыми компонентами в приложениях, созданных под нужды каждой команды. В нашей специальной публикации мы исследуем, что это значит для наблюдаемости и какая работа еще требуется, чтобы сделать генерируемый пользовательский опыт последовательным и корректным.
Во время бета-тестирования мы сосредоточены на улучшении автоматического масштабирования и оптимизации схем. Мы опираемся на такие возможности, как On-Demand Compute, чтобы сделать пропускную способность запросов более отзывчивой к всплескам расследований со стороны инженеров и агентов. Мы также улучшаем то, как служба адаптирует схемы под вашу телеметрию и паттерны запросов, избавляя вашу команду от необходимости ручной настройки.
Приносите свою телеметрию и реальные рабочие процессы расследований. Ваши отзывы помогут нам определить, что улучшить по мере приближения к общей доступности.
Managed ClickStack становится самонастраиваемой опцией в составе ClickHouse Observability. Вы сохраняете пользовательский интерфейс ClickStack и инструменты расследования, получая контроль над базой данных, схемами, настройками и конфигурацией вычислений. ClickHouse Cloud продолжает управлять нижележащей инфраструктурой.
Self configued ClickHouse Observability остается хорошим выбором для команд с экспертными знаниями в области баз данных и масштабом, который оправдывает такие инженерные инвестиции ради достижения минимальных удельных затрат. Для большинства команд конфигурация по умолчанию должна стать отправной точкой: отправляйте телеметрию, проводите расследования и оставьте управление базой данных нам.
Self configued ClickHouse Observability остается хорошим выбором для команд с экспертными знаниями в области баз данных и масштабом, который оправдывает такие инженерные инвестиции ради достижения минимальных удельных затрат. Для большинства команд конфигурация по умолчанию должна стать отправной точкой: отправляйте телеметрию, проводите расследования и оставьте управление базой данных нам.
ClickStack остается проектом с открытым исходным кодом, и мы полностью привержены его дальнейшему развитию. Мы продолжим инвестировать в наши корни open source и предоставлять отличный готовый опыт для команд, которые хотят самостоятельно запускать средства наблюдаемости на базе ClickHouse. Вы можете развернуть стек на собственной инфраструктуре, адаптировать его под свои нужды и подключить агенты через MCP и SQL. ClickStack продолжает служить основой для ClickHouse Observability.
Пользователи могут начать работу сегодня всего за несколько минут. Создайте службу ClickHouse Observability, отправьте телеметрию на вашу управляемую конечную точку и приступайте к расследованию. Изучайте свои данные в интерфейсе ClickStack или подключайте агенты через MCP и SQL. Мы позаботимся о платформе, чтобы вы могли сосредоточиться на понимании работы продакшена.
Присоединяйтесь к частному предварительному просмотру Observability Apps
Присоединяйтесь к частному предварительному просмотру Observability Apps и помогите определить направление развития генерируемых приложений в ClickHouse Observability.
