发布于: Jun 23, 2023
AWS Glue 现已在 Glue Studio 中针对流任务提供数据预览,帮助数据工程师加快其流 ETL 任务开发。
Glue 流 ETL 任务与 Amazon Kinesis 和 Amazon MSK 等流数据来源连接,以摄取、清洗、转换和加载传输中的数据,并在几秒钟内使其可用于分析。数据工程师可以使用 Glue Studio 来构建和测试流数据管道。Glue Studio 提供 Glue 数据预览,这是可视化 ETL 编写界面的一项功能,可让用户在每个步骤中查看数据的输出预览。AWS Glue Studio 现在可让您在可视化任务编写过程的每个步骤中预览流数据。AWS Glue Studio 会自动对您的数据进行采样,然后在您的任务中运行每个转换,以便您可以测试和调试流数据管道,而无需保存或运行该任务。此功能已在提供 AWS Glue 的所有区域推出。要了解更多信息,请访问我们的文档和 AWS Glue 定价页面。