Broker Amazon MSK Express kini mengirimkan data Apache Kafka ke Amazon S3
Broker Amazon MSK Express kini mengirimkan data ke bucket serbaguna Amazon S3, menyediakan kemampuan yang sepenuhnya terkelola untuk mengirimkan data Apache Kafka di Amazon S3 untuk pemrosesan lebih lanjut dengan cara yang paling mudah dan andal. Kemampuan ini secara otomatis menyesuaikan skala untuk mengirimkan data Kafka dengan throughput tinggi ke S3 dengan keandalan ujung-ke-ujung untuk beban kerja yang sangat penting, sekaligus mengurangi biaya penyerapan dan pengiriman hingga 60% dibandingkan dengan alternatif yang dikelola sendiri.
Pelanggan mengirimkan data Apache Kafka ke Amazon S3 untuk berbagai kasus penggunaan seperti pengarsipan log, penyimpanan data untuk kepatuhan, pemutaran ulang Kafka, dan pelatihan model AI/ML. Mereka biasanya membangun pipeline ini dengan konektor yang dikelola sendiri, yang menjadi mahal dan kompleks secara operasional seiring dengan peningkatan beban kerja. Hal ini memaksa tim untuk membangun atau mendapatkan plugin konektor S3, mengamankan persetujuan untuk menerapkannya, dan terus meningkatkan kapasitas, serta menerapkan pembaruan keamanan di seluruh armada konektor. Dengan kemampuan ini, MSK Express secara otomatis menangani penskalaan, percobaan ulang, dan tekanan balik sehingga pelanggan tidak perlu lagi mengelola armada konektor atau berkoordinasi antar tim. MSK Express mendukung throughput hingga 10 GB/s untuk pengiriman data ke Amazon S3, dan mengelola operasi rutin seperti penskalaan kapasitas dan peningkatan versi tanpa menimbulkan jeda pengiriman. Selain itu, pelanggan menambahkan kemampuan pengiriman ini tanpa menyediakan throughput egress broker tambahan, yang menghilangkan biaya infrastruktur tambahan yang biasanya ditimbulkan oleh penskalaan pipeline berbasis konektor, sehingga pelanggan dapat menyesuaikan pengiriman dengan permintaan beban kerja aktual daripada menyediakan kapasitas puncak, mencapai pengiriman throughput tinggi ke Amazon S3 sambil menghilangkan overhead operasional dan menurunkan biaya.
Pengiriman data Amazon MSK ke Amazon S3 kini tersedia di setiap AWS Region tempat broker Amazon MSK Express ditawarkan. Untuk informasi harga, kunjungi halaman harga. Untuk mempelajari lebih lanjut, kunjungi Panduan Pengembang Amazon MSK dan keterampilan AI Amazon MSK.