Amazon Kinesis Data Firehose
以可靠方式将实时数据流加载到数据湖、数据仓库和分析服务中
轻松捕获、转换和加载串流数据。只需单击几下,即可创建传输流,选择目的地,然后开始流式传输实时数据。
无需持续管理即可自动预置与扩展计算、内存和网络资源。
将原始串流数据转换为 Apache Parquet 等格式,同时动态分区串流数据,而无需构建自己的处理管道。
连接 30 多种完全集成的 AWS 服务和串流目的地,例如 Amazon Simple Storage Service(S3)和 Amazon Redshift。
工作原理
Amazon Kinesis Data Firehose 是一项提取、转换、加载(ETL)服务,可以将流式处理数据以可靠方式捕获、转换和提供到数据湖、数据存储和分析服务中。

使用案例
可以流式传输到数据湖和数据仓库中
可将数据流式传输到 Amazon S3,并且可将数据转换为所需格式用于分析,而不必构建处理管道。
可以提高安全性
可以使用受支持的安全信息和事件管理 (SIEM) 工具实时监控网络安全性,并且可在出现潜在威胁时创建提示。
可以构建 ML 流式处理应用程序
借助机器学习 (ML) 模型,可以丰富您的数据流,以在流迁移至其目标过程中分析数据并预测推理终端节点。