Amazon SageMaker 為 OpenLineage 社群貢獻自訂傳輸功能,並提供額外的譜系功能
AWS 宣佈,Amazon SageMaker 已為 OpenLineage 社群貢獻自訂傳輸「AmazonDataZoneTransport」,以及增強型自動化譜系功能。這些譜系增強功能包括來自 AWS Glue、Amazon Redshift 等來源的自動化項目改進,以及從工具中自動擷取譜系的功能,使資料科學家和工程師能夠更有效率地處理其資料和模型。
對 OpenLineage 社區的新「自訂傳輸」貢獻,可讓建構家下載傳輸和 OpenLineage 外掛程式,以增強和自動化從啟用 OpenLineage 之系統擷取的譜系事件。客戶可以透過此功能自動化譜系擷取作業,並將這些譜系事件傳送到 SageMaker Unified Studio 網域,增強資料工作流程中的資料控管和可追溯性。Amazon SageMaker 還導入來自各種來源的增強型自動譜系功能。這些改進包括針對 AWS Glue、Amazon Redshift 之譜系事件的更完善支援,以及從 vETL 流程和筆記本等工具自動擷取譜系。此外,SageMaker 還改進其 SQL 譜系支援 (尤其是針對 Amazon Redshift),且新功能包括對預存程序和具體化視觀表的支援。這些增強功能可自動擷取複雜資料作業的譜系,提供更全面的資料轉換和相依性檢視。
所有提供 Amazon SageMaker 的 AWS 區域皆可使用此功能。
若要進一步了解自訂傳輸貢獻和增強的譜系功能,請造訪 Amazon SageMaker 頁面。如需如何透過這些新功能開始使用譜系的詳細資訊,請參閱使用者文件。