Amazon MSK Express 代理程式現在將 Apache Kafka 資料傳遞至 Amazon S3
Amazon MSK Express 代理程式現在將資料傳遞至 Amazon S3 一般用途儲存貯體,提供完全受管的功能,能夠透過最簡單、最可靠的方式在 Amazon S3 中傳遞 Apache Kafka 資料,以便用於下游處理。這項功能會自動擴展,將高輸送量 Kafka 資料傳遞至 S3,以針對關鍵任務工作負載提供端對端可靠性,同時與自我管理的替代方案相比,擷取和傳遞成本最高可降低 60%。
客戶會將 Apache Kafka 資料傳遞給 Amazon S3,以用於日誌封存、合規保留、Kafka 重新執行以及訓練 AI/ML 模型等使用案例,而且通常會使用自我管理連接器來建置這些管線,這會隨著工作負載擴展而增加成本和操作複雜性,從而迫使團隊建立或尋找 S3 連接器外掛程式、安全部署核准,並持續擴展容量,並在連接器機群中套用安全性更新。有了這項功能,MSK Express 會自動處理擴展、重試和反壓,因此客戶不再需要管理連接器機群或跨團隊進行協調。MSK Express 在將資料傳遞至 Amazon S3 時支援高達 10 GB/s 的輸送量,並在不會造成傳遞中斷的情況下管理例行作業,例如容量擴展和版本升級。此外,客戶能夠在無需佈建額外代理程式輸出輸送量的情況下新增此傳遞功能,消除擴展連接器型管道通常會產生的增量基礎架構成本,因此客戶能夠根據實際工作負載需求擴展傳遞功能,而不是針對峰值進行佈建,從而實現針對 Amazon S3 的可靠高輸送量傳遞,同時消除營運負擔並降低成本。
Amazon MSK 將資料傳遞至 Amazon S3 的功能目前適用於提供 Amazon MSK Express 代理程式的每個 AWS 區域。如需定價資訊,請瀏覽定價頁面。若要進一步了解,請參閱 Amazon MSK 開發人員指南和 Amazon MSK AI 技能。