Amazon DataZone представляет предварительную версию визуализации происхождения данных на основе API, совместимую с OpenLineage
Amazon DataZone представляет предварительную версию визуализации происхождения данных, которая помогает клиентам отображать события происхождения из систем с поддержкой OpenLineage или через API и отслеживать перемещение данных от источника к потребителю. Amazon DataZone — это сервис управления данными, позволяющий клиентам классифицировать и обнаруживать данные, а также обмениваться и управлять ими в любом масштабе за пределами организации с помощью средств управления и контроля доступа.
Функция визуализации происхождения данных Amazon DataZone фиксирует и демонстрирует преобразования ресурсов и столбцов данных, позволяя получить представление о перемещении данных от источника к потребителю. Используя API-интерфейс Amazon DataZone, совместимый с OpenLineage, администраторы доменов и поставщики данных могут фиксировать и хранить события происхождения за пределами того, что доступно в Amazon DataZone, включая преобразования в Amazon S3, AWS Glue и других сервисах. Потребители данных в Amazon DataZone могут быть уверены в происхождении ресурсов на основе всестороннего анализа происхождения данных, а поставщики данных могут оценить влияние изменений на ресурс, проанализировав его потребление. Кроме того, версии Amazon DataZone фиксируют каждое событие, что позволяет пользователям визуализировать происхождение данных в любой момент времени или сравнивать преобразования в рамках истории задания или ресурса. Эти исторические данные позволяют подробнее анализировать эволюцию данных, что крайне необходимо для устранения неполадок, аудита и проверки целостности ресурсов.
Доступна предварительная версия визуализации происхождения данных для Amazon DataZone во всех регионах AWS, где доступен сервис Amazon DataZone.
Чтобы узнать больше, см. раздел Amazon DataZone, прочитайте блог AWS News и ознакомьтесь с документацией по происхождению данных.