Кто-то спрашивает, содержит ли база данных персональные данные. Вопрос касается базы данных; ответ находится в ее столбцах, на три уровня связей ниже, разбросанный по сотням активов. Каталог уже знает ответ. Теперь вы видите его там, где это важнее всего.
Что нового: Вычисляемые атрибуты
Вычисляемые атрибуты — это новый тип атрибутов в Collibra, который сейчас находится в закрытом предварительном просмотре. Вместо того чтобы кто-то вводил значение вручную, Collibra вычисляет его. Система следует по пути связей от актива, который вы просматриваете, собирает один атрибут из активов в конце цепочки и применяет к найденным данным одно правило: список уникальных значений, отображение «true», если хотя бы одно значение истинно, подсчет, сумма, среднее значение, минимальное или максимальное значение.
Как помогают вычисляемые атрибуты
Вопросы управления данными возникают на том уровне, где принимаются решения: использование ИИ, продукт данных, отчет. Факты, которые отвечают на них, обычно записаны где-то в другом месте: в столбце, таблице, исходной системе. Collibra хранит связи между этими активами, поэтому информация доступна. До сих пор, чтобы получить ее на том уровне, где она была нужна, приходилось просматривать сотни активов или создавать пользовательские отчеты.
Проблемы, которые они решают
- Ответ находится на другом активе: флаги конфиденциальности живут в столбцах, но вопрос касается базы данных или продукта данных, который их использует.
- Ручная проверка не масштабируется: подтверждение ответа на уровне базы данных означает открытие страниц схемы, таблицы и столбца по очереди, а сотни столбцов превращают простой вопрос в работу на полдня.
- Скопированные значения устаревают: команды копируют ответ в родительский актив, а затем кто-то должен не забыть обновить его каждый раз, когда столбец получает тег или таблица перемещается.
- Рабочие процессы распространения — это вторая работа: сценарии и рабочие процессы, которые передают значения вверх по иерархии, требуют усилий для создания, ломаются при изменении связей и добавляют лишние значения в граф.
- Люди перестают спрашивать: когда каждый ответ, требующий кросс-активного поиска, стоит так дорого, команды довольствуются атрибутами, которые видны напрямую, и оставляют остальную часть графа неиспользованной.
Как работают вычисляемые атрибуты
Возьмем вопрос с самого начала: содержит ли эта база данных PII?
Сегодня вы открываете базу данных в Collibra, переходите в схему, открываете таблицу, а затем прокручиваете ее столбцы в поисках флага «Персонально идентифицируемая информация». Затем вы делаете это снова для следующей таблицы. Или, что более вероятно, кто-то из вашей команды добавил поле «Содержит PII» в базу данных несколько месяцев назад, и вы надеетесь, что они поддерживают его в актуальном состоянии.
С вычисляемыми атрибутами администратор настраивает это один раз. В настройках операционной модели они добавляют тип вычисляемого атрибута под названием «Содержит PII» к типу актива «База данных» и задают три параметра:
- Путь: База данных → Схема → Таблица → Столбец
- Правило: true, если хотя бы один столбец имеет значение true
Простыми словами это означает: начните с этой базы данных, пройдите через каждую схему и таблицу к каждому столбцу и проверьте флаг PII каждого столбца. Если хотя бы один из них имеет значение true, значит, база данных содержит PII. Теперь вы открываете любую страницу базы данных, и атрибут «Содержит PII» находится прямо там, вместе с другими атрибутами, уже вычисленный.
Благодаря вычисляемым атрибутам информация отображается там, где она нужна.
Это работает, потому что связи уже управляются. Путь от базы данных к столбцу существует в каталоге Collibra.
Почему вы должны быть в восторге
- Администраторы операционной модели: определите бизнес-вопрос один раз как тип вычисляемого атрибута и откажитесь от рабочих процессов и сценариев, которые копируют значения между активами.
- Стюарды данных: откройте базу данных и узнайте, содержит ли она PII, не открывая ни одной страницы столбца. Время, которое уходило на клики по иерархии, возвращается к курированию самих столбцов.
- Владельцы продуктов данных: посмотрите, из чего состоит продукт данных, например, типы исходных систем, на странице самого продукта, вместо того чтобы отслеживать его столбцы обратно к базам данных.
- Команды по вопросам конфиденциальности и безопасности: получите представление на уровне базы данных о том, где находятся персональные данные, вычисленное на основе флагов на уровне столбцов, которые уже поддерживают стюарды.
Варианты использования
- ИИ, обученный на неконфиденциальных данных: вычисляемый атрибут «Содержит PII» в объекте использования ИИ возвращает «true», если флаг «Персонально идентифицируемая информация» хотя бы одного столбца равен true. Когда стюард помечает новый столбец, объект использования ИИ обновляется с небольшой задержкой, и никому не нужно трогать базу данных.
- Типы источников данных для продукта данных: вычисляемый атрибут в объекте «Продукт данных» следует по пути «Продукт данных → Столбец → Таблица → Схема → База данных» и возвращает уникальные значения атрибута «Тип источника данных», хранящегося на уровне базы данных. Потребитель, открывающий продукт данных, видит, какие типы источников его питают, не прослеживая связи обратно к каждой базе данных.
- Подсчет столбцов в базе данных: вычисляемый атрибут в объекте «База данных» подсчитывает столбцы под ней и показывает общее количество на странице актива. Владелец, оценивающий базу данных, получает число вместо прокрутки.
Ключевые выводы о вычисляемых атрибутах
Вычисляемые атрибуты переносят ответы, требующие кросс-активного поиска, на тот актив, где задается вопрос. Значения вычисляются, а не копируются, поэтому нет дубликатов для синхронизации и нет необходимости поддерживать пользовательские рабочие процессы. Эта возможность находится в закрытом предварительном просмотре, а вскоре перейдет в открытый предварительный просмотр.
- Задавайте вопрос там, где он живет: ответ появляется на странице базы данных, схемы или продукта данных, а не через сотню кликов.
- Определите один раз, вычисляйте везде: одно определение для типа актива применяется к каждому активу этого типа.
- Никакого ручного обслуживания: вычисляемые значения берутся из исходных атрибутов, которые уже поддерживают стюарды, поэтому не нужно ничего дополнительно сверять.
- Maxime JeanmartMaxime JeanmartМенеджер по продукту, Управление даннымиCollibra
Maxime Jeanmart
Maxime Jeanmart
Менеджер по продукту, Управление данными
Collibra
В этой статье:
- Что нового: Вычисляемые атрибуты
- Как помогают вычисляемые атрибуты
- Как работают вычисляемые атрибуты
- Почему вы должны быть в восторге
- Ключевые выводы о вычисляемых атрибутах
Будьте в курсе последних новостей от Collibra
Я хотел бы получать обновления о последних материалах, мероприятиях и многом другом от Collibra.
Рабочий адрес электронной почты
Произошла ошибка, пожалуйста, попробуйте еще раз
Пожалуйста, введите действительный рабочий адрес электронной почты
Отправляя эту форму, я подтверждаю, что со мной могут связаться напрямую по поводу моего интереса к продуктам и услугам Collibra. Пожалуйста, ознакомьтесь с Политикой конфиденциальности Collibra.
Спасибо за подписку
Скоро вы начнете получать образовательные материалы и приглашения для общения с нашим сообществом.











