Amazon Data Firehose mendukung replikasi berkelanjutan perubahan basis data ke Tabel Apache Iceberg di Amazon S3
Amazon Data Firehose kini memungkinkan penangkapan dan replikasi perubahan basis data ke Tabel Apache Iceberg di Amazon S3 (Pratinjau). Fitur baru ini memungkinkan pelanggan untuk melakukan streaming data real-time dengan mudah dari basis data MySQL dan PostgreSQL langsung ke Tabel Apache Iceberg.
Firehose adalah layanan streaming nirserver yang dikelola sepenuhnya yang memungkinkan pelanggan menangkap, mengubah, dan mengirimkan aliran data ke Amazon S3, Amazon Redshift, OpenSearch, Splunk, Snowflake, dan tujuan lain untuk analitik. Dengan fungsi ini, Firehose menyalin data lengkap awal dari tabel basis data yang dipilih, kemudian secara terus melakukan streaming pembaruan Change Data Capture (CDC) untuk mencerminkan sisipan, pembaruan, dan penghapusan dalam Tabel Apache Iceberg. Solusi efisien ini menghilangkan pengaturan pipeline data yang kompleks sekaligus meminimalkan dampak pada kinerja transaksi basis data.
Kemampuan utama meliputi: • Pembuatan otomatis Tabel Apache Iceberg yang cocok dengan skema basis data sumber • Evolusi skema otomatis sebagai respons terhadap perubahan sumber • Replikasi selektif basis data, tabel, dan kolom tertentu
Fitur pratinjau ini tersedia di semua AWS region kecuali Region Tiongkok, AWS GovCloud (AS), dan Asia Pasifik (Malaysia). Untuk syarat dan ketentuan, lihat Partisipasi Layanan Beta di Ketentuan Layanan AWS.
Untuk memulai, kunjungi dokumentasi dan konsol Amazon Data Firehose.
Untuk mempelajari lebih lanjut tentang fitur ini, kunjungi postingan blog AWS ini.