AWS Glue lança o conector do Amazon DynamoDB com suporte ao DataFrame do Spark
Agora, o AWS Glue oferece suporte a um novo conector do Amazon DynamoDB que funciona nativamente com os DataFrames do Apache Spark. Esse aprimoramento permite que os desenvolvedores do Spark trabalhem diretamente com os DataFrames do Spark para compartilhar código facilmente entre o AWS Glue, o Amazon EMR e outros ambientes do Spark.
Anteriormente, os desenvolvedores que trabalhavam com dados do DynamoDB no AWS Glue precisavam usar o objeto DynamicFrame específico do Glue. Com esse novo conector, os desenvolvedores agora podem reutilizar seu código existente do DataFrame do Spark com modificações mínimas. Essa alteração simplifica o processo de migração de trabalhos para o AWS Glue e simplifica o desenvolvimento do pipeline de dados. Além disso, o conector desbloqueia o acesso a toda a gama de operações do DataFrame do Spark e às mais recentes otimizações de performance.
Esse novo conector está disponível em todas as regiões comerciais da AWS nas quais o AWS Glue é oferecido. Para começar a usá-lo, acesse a documentação do AWS Glue.