Концепция lakehouse изменила корпоративную архитектуру данных. Она объединила данные, чтобы организации могли анализировать их, строить модели и принимать решения в больших масштабах. Но у нового поколения программного обеспечения другие требования: ему нужно действовать на основе того, что происходит прямо сейчас.
ИИ-агенты переходят от сбора аналитики к действиям. Это значит, что стоящие за ними системы должны оперировать текущим состоянием бизнеса, а не его копией многочасовой давности. Это меняет требования к лежащей в их основе инфраструктуре. Данные не могут быть устаревшими на часы, система не может зависеть от догоняющего пакетного конвейера и не может просто выдавать ответ. Ей необходимо предоставлять актуальные данные, производительность, средства контроля и прозрачность, чтобы команды могли надежно действовать в production-среде.
Lakehouse была создана для понимания данных. Streamhouse — это архитектура для практического применения «живых» данных. Она обеспечивает непрерывный сбор, передачу, трансформацию, управление и предоставление актуального состояния бизнеса, чтобы производственные приложения и агенты могли действовать на их основе.q
Мы не утверждаем, что lakehouse устарела. Организации будут продолжать использовать ее для аналитики, исторического контекста, разработки моделей и многих других рабочих нагрузок. Мы утверждаем, что операционным системам реального времени требуется собственная первоклассная архитектура.
Именно поэтому сегодня вместе с Aiven, Confluent, StreamNative и Ververica мы основываем рабочую группу Streamhouse и представляем независимую от вендоров архитектуру для следующего поколения инфраструктуры данных в реальном времени.
Создано в ответ на потребности клиентов
Компоненты Streamhouse не новы. Потоковая передача, обработка событий, базы данных SQL, API и аналитика — все они играют важную роль. Меняется то, как они должны взаимодействовать, когда программное обеспечение непрерывно обрабатывает «живые» данные, принимает решения и совершает действия в production-среде.
Клиенты уже запрашивают это. Они строят системы, которые должны реагировать на происходящее в реальном времени, и им нужна четкая архитектура для надежного решения этой задачи в больших масштабах.
Redpanda объединяет потоковую передачу, федеративный SQL и подключение систем в единую платформу по модели BYOC, которая работает в облаке клиента. Это соответствует растущему стремлению предприятий к большему контролю над данными и их выполнением при одновременном снижении затрат и операционной сложности.
Этот спрос создает для индустрии возможность сделать нечто большее, чем может любой отдельный вендор: объединиться вокруг открытой и независимой от поставщиков архитектуры, которая предоставляет клиентам надежный фундамент для построения таких систем. Мы конкурируем на некоторых участках этого рынка, но мы разделяем общую ответственность за помощь клиентам в адаптации к изменениям и в создании решений на основе единой архитектурной модели.
В этом и заключается суть Streamhouse.
Почему критически важному для бизнеса ИИ нужна плоскость управления
Следующий этап развития ИИ будет определяться не тем, что модели могут показать в демо-версии. Он будет определяться тем, смогут ли компании доверить агентам реальную работу. Для этого требуется больше, чем просто лучшие модели и больше данных. Нужна инфраструктура, способная непрерывно доставлять актуальные данные, обрабатывать события, обеспечивать необходимый контроль и поддерживать действия в production.
Данные в реальном времени важны, но не из-за них агенты застряли в песочнице. Большинство предприятий совершенно обоснованно не доверяют агентам действия в production. Помимо актуальных данных, в production также необходим контроль над тем, что агент может делать, и журнал того, что он сделал. Некоторые агенты используют потоковые данные, но большинство подключается напрямую к операционным системам, базам данных и SaaS-приложениям, управляющим бизнесом. Управление, которое заканчивается на платформе данных, далеко не доходит до того места, где реально работает агент.
Таким образом, плоскость управления должна охватывать все, к чему прикасается агент: текущее состояние бизнеса, контроль над его действиями и запись его поступков. Именно это делает возможным архитектура Streamhouse, и именно это сегодня воплощает в жизнь платформа Redpanda Agentic Data Plane для управления агентами в production.
Присоединяйтесь к нам
Streamhouse — это нечто большее, чем любая отдельная компания. Мы определяем независимую от вендоров архитектуру для систем, которым необходимо обрабатывать «живые» данные, принимать решения и действовать в production.
Посетите сайт streamhouse.com, чтобы познакомиться с открытой отраслевой инициативой, оспорить наши подходы и помочь сформировать стандарты, на которые будет опираться индустрия. Чтобы увидеть пример работы этой архитектуры, запишитесь на демонстрацию платформы Redpanda Agentic Data Plane.