AWS Step Functions 扩展了分布式地图的数据来源和输出选项

发布于: 2025年2月7日

AWS Step Functions 现在支持分布式地图的更多数据来源和输出选项,从而实现更灵活的大规模并行处理工作流。分布式地图现在可以处理来自 JSON Lines (JSONL) 和存储在 Amazon S3 中的更广泛的分隔文件格式的数据。此外,分布式地图还提供了新的输出转换功能,可以更好地控制结果格式。

AWS Step Functions 是一项可视化工作流服务,可以编排来自 220 多项 AWS 服务的 14,000 多个 API 操作,以构建分布式应用程序和数据处理工作负载。通过此次更新,您可以使用 Step Functions 分布式地图更轻松地迭代和处理不同的数据集。除了现有的 JSON 和逗号分隔值 (CSV) 文件支持外,分布式地图现在还支持 JSONL 和新的分隔文件格式,例如分号分隔的文件和制表符分隔的文件。这扩展了对更多数据格式的处理能力,无需自定义预处理。通过新的灵活输出转换,您可以更好地控制结果的格式设置,从而更轻松地聚合结果并简化与下游系统的集成。

要开始使用,您可以立即在 AWS Step Functions 控制台中使用分布式地图模式,或阅读这篇博客文章。要了解更多信息,请访问 Step Functions 开发人员指南