O Amazon SageMaker agora oferece suporte à linhagem de dados em domínios baseados em IAM
O Estúdio Unificado Amazon SageMaker agora oferece suporte à linhagem de dados compatível com OpenLineage em domínios baseados em IAM, capturando eventos de linhagem de trabalhos do Apache Spark executados no Amazon EMR, AWS Glue, SageMaker Visual ETL e notebooks. Esse recurso já está disponível em domínios baseados no IAM Identity Center. O gráfico de linhagem interativo fornece uma representação visual agregada de como os dados se movem da origem para o consumo, com profundidade de gráfico configurável, modo de registro de data e hora do evento para linhagem detalhada em nível de coluna e uma visualização somente de conjunto de dados para visualização simplificada. Para domínios baseados em IAM e baseados no IAM Identity Center, você pode publicar, consultar e gerenciar programaticamente a linhagem de dados a partir de aplicativos compatíveis com o OpenLineage. Agora você também pode remover eventos publicados usando a API DeleteLineageEvent.
O novo recurso agora está disponível em todas as regiões da AWS que oferecem o Estúdio Unificado Amazon SageMaker. Para começar a usar, acesse a documentação e a documentação da API do Estúdio Unificado Amazon SageMaker.