Dev48
ЯЗЫК
  • О нас
  • Услуги
  • Индустрии
  • Технологии
  • Статьи
  • Контакты
Забронировать звонок
    Главная/Статьи/U sovremennogo steka dannyh byl horoshiy zabeg
Dev48
info@dev48.org+375 29 320-40-96WhatsApp@isky_by

© 2026 · Все права защищены.

У современного стека данных был хороший забег

Фото: Growtika (Unsplash) — https://unsplash.com/photos/a-computer-with-a-keyboard-and-mouse-9WnjxT1NCoY?utm_source=dev48&utm_medium=referral

Источник: Posthog•12 ноября 2026 г. в 11:28

У современного стека данных был хороший забег

1 июня 2026 года Fivetran и dbt Labs завершили слияние. Два логотипа, которые определяли современный стек данных, теперь делят одного генерального директора и около $600 млн выручки…

1 июня 2026 года Fivetran и dbt Labs завершили слияние. Два логотипа, определявших современный стек данных, теперь делят одного генерального директора и about $600M in revenue.

Это интересный шаг, если вспомнить 2021 год и зарождение современного стека данных, который обещал возможность выбора лучшего инструмента для каждого уровня. Два уровня с наибольшей монополией в своей части стека теперь выбрали друг друга.

Многие (включая Fivetran, Matillion и Hightouch) назвали это смертью современного стека данных, но я думаю, что это звучит слишком драматично. Категории ПО сначала разделяются, расползаются, а затем объединяются вновь. Инструменты работы с данными просто дошли до этапа объединения.

Теперь важно лишь то, кто контролирует этот пакет и насколько сильно вы от него зависите.

Краткая история современного стека данных

Разделение имело смысл в 2021 году. Облачные хранилища сделали хранение дешевым, поэтому команды сначала загружали все подряд, а трансформировали уже потом. Это ELT (Extract, Load, Transform — извлечение, загрузка, трансформация), и оно изменило подход к построению конвейеров данных, позволив использовать фрагментированный стек.

Вслед за автономными инструментами ELT появились средства моделирования, оркестрации, обратного ETL (reverse ETL), наблюдаемости, каталоги, семантические слои и хранилища метрик. Вокруг каждого уровня возникло множество стартапов, и за последние пять лет сформировались основные игроки.

В конечном счете каждый инструмент направлял вычисления в хранилище, а отдел продаж хранилища привлекал клиентов. Чем больше продавало хранилище, тем быстрее мог расти любой другой инструмент в стеке.

Но в 2022 году Федеральная резервная система начала повышать ставки для борьбы с инфляцией, и by mid-2023 they were above 5%. Венчурное финансирование резко упало по сравнению с пиком 2021 года, и инвесторы стали поощрять эффективность, а не рост. Финансовые отделы начали спрашивать, какова окупаемость всех этих инструментов и какие из них можно сократить или объединить в единое решение с более низкой ценой.

Компания The Modern Data Company surveyed 232 senior data professionals в конце 2024 года. Они выяснили, что 70% специалистов ежедневно лавируют между пятью-десятью инструментами. 85% назвали интеграцию этих инструментов одной из трех главных проблем, причем 63 респондентов тратят более пятой части своего времени на обслуживание конвейеров.

А теперь представьте, кто занимается этим обслуживанием. Опрос сообщества Metabase показал, что в большинстве команд данных работает от одного до трех человек, причем даже в крупных компаниях — это невероятно малочисленная команда. Они также выяснили, что респонденты высоко оценивают отдельные инструменты по сравнению со стеком в целом. Это наводит на мысль, что специалисты по данным считают каждый уровень стека эффективным сам по себе, но поддержка этих интеграций становится постоянной головной болью.

Ценообразование делает стек из десяти инструментов еще более запутанным. Каждый инструмент тарифицируется на основе чего-то своего: строк, кредитов, пользовательских мест, запусков моделей. Никто не может спрогнозировать общую сумму, и неожиданные счета стали обычным делом.

Повторное объединение сейчас идет сразу с двух сторон:

1. Отдельные вендоры скупают новые уровни стека

Ярчайший пример этого — Fivetran. Примерно за 13 месяцев Fivetran собрала все уровни стека, кроме вычислений:

  • Май 2025 года: покупка Census, инструмента обратного ETL. Теперь это Fivetran Activations.
  • Сентябрь 2025 года: покупка Tobiko Data, компании-разработчика SQLMesh.
  • Октябрь 2025 года: анонс слияния с dbt Labs, которое завершилось в июне 2026 года.

2. Облачные хранилища расширяют свои предложения

В июне 2025 года Snowflake запустила Openflow, нативный сервис ингестии на базе Apache NiFi. У Databricks есть Lakeflow Connect — собственные коннекторы для SaaS-приложений и баз данных.

Затем они взялись и за вашу базу данных приложений. В мае 2025 года Databricks купила Neon, компанию по созданию бессерверного Postgres, за about $1B. Три недели спустя Snowflake приобрела Crunchy Data примерно за $250 млн.

Оба лагеря стремятся завладеть каждым уровнем вашего стека. Как только какая-то компания приберет все к рукам, уход от ее стека будет означать переписывание всего с нуля. Это делает вас клиентом, который никуда не может деться, а клиент, который не может уйти, платит столько, сколько написано в новом договоре о продлении.

Нам нравится тенденция к объединению. Это означает меньше контрактов и меньше ночных поисков сломавшегося инструмента — и никто не будет скучать по постоянному переключению контекста между пятью разными программами.

Но какова цена? Ваш стек, возможно, становится проще за счет того, что от него становится все труднее отказаться.

У вас должна быть возможность отказаться от лишних инструментов без необходимости подписываться на всю чужую платформу и платить за функции, которые вы изначально не планировали приобретать.

Именно такой философии мы придерживались при создании нашего инструмента ELT. Он синхронизирует ваши данные с тем хранилищем, которое вы уже используете. Если вы предпочитаете не использовать хранилище, синхронизация происходит в хранилище PostHog, а если вы передумаете, можно добавить ELT-назначение для отправки тех же таблиц в ваше собственное хранилище. Добавление назначения запускает полную пересинхронизацию, которая тарифицируется за каждую строку, поэтому сначала проверьте количество строк. Для работы не нужны никакие другие продукты PostHog, инструмент просто делает то, что заявлено.

Ценообразование тоже не загоняет вас в ловушку. Исторические синхронизации бесплатны в течение первых семи дней после подключения нового источника (до 100 млн строк на бесплатном тарифе и без ограничений на платном), а первый миллион строк каждый месяц предоставляется бесплатно, после чего стоимость составляет $0,000015 за строку, снижаясь до $0,000001 при больших объемах. Минимальных требований по количеству подключений нет.

Вероятно, вас уже объединяют в пакеты, планировали вы это или нет; у этого подхода есть свои плюсы и минусы. Вот что нужно знать, чтобы сохранить свободу выбора и получить наилучшую сделку.

  • Читайте условия продления: Пакеты меняют ценообразование. В марте 2025 года Fivetran перешла на тарификацию за каждое подключение. В январе 2026 года был добавлен минимальный платеж в размере $5 за подключение. Операции удаления и изменения режима работы с историей данных теперь также учитываются как платные строки.
  • Подсчитайте, сколько инструментов требуется для получения ответа: Выберите один реальный вопрос, на который вам нужно регулярно получать ответ, и проследите его путь от источника до готового результата. Каждый инструмент, через который он проходит, стоит вам времени, денег или и того, и другого.
  • Оставляйте пути к отступлению: Отдавайте предпочтение открытым форматам и инструментам, которые вы можете запустить самостоятельно. Fivetran и dbt Labs заявляют, что dbt Core остается открытым на условиях текущей лицензии. Проверьте то же самое для всего, от чего вы зависите.
  • Оценивайте стоимость ухода: Перед добавлением инструмента продумайте, как вы будете от него избавляться. Если на это уйдет шестимесячная миграция, вы никогда этого не сделаете; вы просто продолжите платить по растущим счетам.
  • Моделируйте худший месяц: Строчная тарификация означает, что ваши счета из месяца в месяц будут непредсказуемыми. Ретроспективные загрузки (backfills), изменения схемы и таблицы с высокой степенью текучести — все это отразится в счете. Рассчитайте стоимость месяца по худшему сценарию, и тогда никакие счета не станут для вас неожиданностью.

Поскольку рынок движется в сторону объединения, вы не можете остаться в стороне, но вы можете выбрать, в чьем пакете оказаться.

Если вы хотите сохранить возможность замены компонентов, ознакомьтесь с принципом работы и стоимостью нашего инструмента ELT. Вы можете выполнять ретроспективную загрузку истории параллельно с текущими инструментами в течение 7 дней, не оплачивая эти исторические строки.

← Все статьи

О чём эта статья

Ещё в разделе «Маркетинг и реклама»

Все →
CleverAI™ Studio: где маркетинговая аналитика встречается с исполнением
Clevertap

CleverAI™ Studio: где маркетинговая аналитика встречается с исполнением

Начните относиться к AI-агентам как к первоклассным пользователям
Mixpanel

Начните относиться к AI-агентам как к первоклассным пользователям

Функции электронного маркетинга по отраслям (6 887 звонков)
Activecampaign

Функции электронного маркетинга по отраслям (6 887 звонков)

Приветствуем Сару О'Киф (Sarah O'Keefe), нашего нового инженера по работе с разработчиками
Resend

Приветствуем Сару О'Киф (Sarah O'Keefe), нашего нового инженера по работе с разработчиками

100 самых упоминаемых брендов в ChatGPT (ноябрь 2026 г.)
Ahrefs

100 самых упоминаемых брендов в ChatGPT (ноябрь 2026 г.)

10 вопросов, которые стоит задать представителю Braze после приобретения компании Salesforce
Clevertap

10 вопросов, которые стоит задать представителю Braze после приобретения компании Salesforce

Ещё от Posthog

Функция самоуправления вне стадии бета-тестирования (мы наконец-то исправили и цены)
Posthog

Функция самоуправления вне стадии бета-тестирования (мы наконец-то исправили и цены)

Обновление срока хранения данных о событиях для новых платных тарифных планов
Posthog

Обновление срока хранения данных о событиях для новых платных тарифных планов

Почему мы уходим с DuckDB для нашего хранилища данных
Posthog

Почему мы уходим с DuckDB для нашего хранилища данных

Что пользователи запрашивают в PostHog AI
Posthog

Что пользователи запрашивают в PostHog AI

Вы вообще тестируете производительность? Как мы оцениваем агентов в больших масштабах (с реальными примерами)
Posthog

Вы вообще тестируете производительность? Как мы оцениваем агентов в больших масштабах (с реальными примерами)

Инженеры выпускают код быстрее, поэтому мы сделали наш CI автономным, чтобы не отставать
Posthog

Инженеры выпускают код быстрее, поэтому мы сделали наш CI автономным, чтобы не отставать