Amazon SageMaker aporta un transporte personalizado a la comunidad de OpenLineage y ofrece capacidades de linaje adicionales
AWS anuncia que Amazon SageMaker ha aportado un ‘AmazonDataZoneTransport’ de transporte personalizado a la comunidad de OpenLineage y ha mejorado las capacidades de linaje automatizado. Estas mejoras de linaje incluyen mejoras en la automatización a partir de fuentes como AWS Glue y Amazon Redshift y la captura automática de linaje a partir de herramientas. Esto permite a los científicos e ingenieros de datos trabajar de manera más eficiente con sus datos y modelos.
La nueva contribución de transporte personalizado a la comunidad de OpenLineage permite a los desarrolladores descargar el transporte junto con los complementos de OpenLineage para aumentar y automatizar los eventos de linaje capturados en sistemas compatibles con OpenLineage. Con esto, los clientes pueden automatizar la captura de linaje y enviar estos eventos de linaje al dominio de SageMaker Unified Studio. Esto mejora la gobernanza y la trazabilidad de los datos en sus flujos de trabajo de datos. Amazon SageMaker también ha introducido capacidades de linaje automatizadas mejoradas de diversas fuentes. Estas mejoras incluyen una mejor compatibilidad con los eventos de linaje de AWS Glue y Amazon Redshift y la captura automatizada de linaje a partir de herramientas como los cuadernos y procesos vETL. Además, SageMaker ha mejorado su compatibilidad con el linaje SQL, especialmente para Amazon Redshift, con nuevas características que incluyen la compatibilidad con procedimientos almacenados y vistas materializadas. Estas mejoras permiten la captura automática del linaje de operaciones de datos complejas, lo que proporciona una visión más completa de las transformaciones y dependencias de los datos.
Esta característica está disponible en todas las regiones de AWS en las que Amazon SageMaker está disponible.
Para obtener más información sobre la contribución de transporte personalizada y las capacidades de linaje mejoradas, visite la página de Amazon SageMaker. Para obtener información detallada sobre cómo empezar a usar el linaje con estas nuevas características, consulte la documentación del usuario.