AWS Glue 推出支持 Spark DataFrames 的 Amazon DynamoDB 连接器

发布于: 2025年11月21日

AWS Glue 现在支持新的 Amazon DynamoDB 连接器,该连接器可以与 Apache Spark DataFrames 进行原生集成。这项增强功能让 Spark 开发人员能够直接使用 Spark DataFrames,并且能够在 AWS Glue、Amazon EMR 和其他 Spark 环境之间轻松共享代码。

以前,在 AWS Glue 中处理 DynamoDB 数据的开发人员必须使用 Glue 特有的 DynamicFrame 对象。借助这一新的连接器,开发人员现在只需进行最少的修改即可重复使用其现有的 Spark DataFrames 代码。这一变更简化了将作业迁移到 AWS Glue 的流程,并简化了数据管道开发。此外,该连接器还让您能够使用全部 Spark DataFrames 操作,并利用最新的性能优化功能。

这一新的连接器已在提供 AWS Glue 的所有 AWS 商业区域推出。要开始使用,请访问 AWS Glue 文档