Dengan Amazon Data Firehose, Anda membayar volume data yang Anda serap ke dalam layanan. Tidak ada biaya penyiapan atau komitmen di muka. Ada empat tipe penggunaan sesuai permintaan dengan Data Firehose: penyerapan, konversi format, pengiriman VPC, dan Partisi Dinamis. Biaya transfer data tambahan dapat berlaku.
Direct PUT dan KDS sebagai Sumber Penyerapan
Fungsi dasar aliran Firehose adalah penyerapan dan pengiriman. Harga penyerapan dibuat bertingkat dan ditagih per GB yang diserap dalam peningkatan 5 KB (catatan 3 KB ditagih sebagai 5 KB, catatan 12 KB ditagih sebagai 15 KB, dll.). Tidak ada biaya tambahan Data Firehose untuk pengiriman kecuali fitur opsional digunakan.
MSK sebagai Penyerapan Sumber
Fungsi dasar aliran Firehose adalah penyerapan dan pengiriman. Harga penyerapan bersifat berjenjang dan ditagih per GB yang diserap tanpa peningkatan 5 KB. Harga bersifat berjenjang dan ditagih per GB berdasarkan nilai yang lebih tinggi antara bita yang diserap serta bita yang dikirim. Penagihan didasarkan pada volume data, tidak ada pembulatan ukuran catatan.
Log Penawaran sebagai Penyerapan Sumber
Untuk catatan yang berasal dari Log Penawaran, harga Penyerapan berjenjang dan ditagih per GB yang diserap tanpa peningkatan 5 KB.
Konversi Format (opsional)
Anda dapat mengaktifkan konversi format JSON ke Apache Parquet atau Apache ORC dengan kecepatan per GB berdasarkan GB yang diserap dalam peningkatan 5 KB.
Pengiriman VPC (opsional)
Untuk Aliran Firehose dengan tujuan yang berada di Amazon VPC, Anda akan ditagih untuk jumlah data yang dikirimkan ke tujuan di VPC dan tiap jam Aliran Firehose Anda yang aktif di tiap AZ. Tiap jam parsial ditagih sebagai satu jam penuh.
Partisi Dinamis untuk pengiriman Amazon S3 (opsional)
Anda dapat mengaktifkan Partisi Dinamis untuk terus mengelompokkan data dengan mempartisi kunci dalam catatan (seperti “customer_id”), dan mengirimkan data yang dikelompokkan berdasarkan kunci partisi ke prefiks Amazon S3 yang sesuai. Dengan Partisi Dinamis, Anda membayar berdasarkan jumlah data yang diproses melalui Partisi Dinamis dan per objek yang dikirimkan ke Amazon S3. Jika menggunakan pengurai JQ untuk Partisi Dinamis, Anda membayar per jam pemrosesan untuk penguraian JQ.
Dekompresi Log CloudWatch (opsional)
Untuk catatan yang berasal dari Log CloudWatch, jika dekompresi diaktifkan, harga dekompresi ditagih per GB yang didekompresi.
Snowflake sebagai Tujuan
Untuk aliran Firehose yang dikonfigurasi dengan Snowflake sebagai tujuan, Anda akan ditagih untuk jumlah data yang diproses ke tujuan. Harga ditagih per GB yang diserap tanpa peningkatan 5 KB. Harga didasarkan pada nilai yang lebih tinggi antara bita yang diserap dan bita yang dikirim.
Tabel Apache Iceberg sebagai tujuan
Untuk aliran Firehose yang dikonfigurasi dengan Tabel Apache Iceberg sebagai tujuan, Anda akan ditagih untuk jumlah data yang diproses ke tujuan. Harga ditagih per GB yang diserap tanpa peningkatan 5 KB. Jika bita data yang diproses sebelum pengiriman lebih dari bita yang diserap karena pemrosesan Lambda khusus, bita tambahan juga ditagih. Bita tambahan ditagih dengan kecepatan yang sama seperti yang ditunjukkan pada Aliran Data Kinesis sebagai sumber ke tabel Apache Iceberg dan sebagai tujuan untuk semua sumber penyerapan termasuk Direct PUT.
-
Direct PUT
-
Kinesis Data Stream sebagai sumber
-
Log Penawaran sebagai sumber
-
MSK sebagai sumber
-
Direct PUT
-
-
Tabel Apache Iceberg sebagai tujuan
-
Snowflake sebagai tujuan
-
Tujuan lainnya
-
Tabel Apache Iceberg sebagai tujuan
-
-
Snowflake sebagai tujuan
-
-
Tujuan lainnya
-
-
-
Kinesis Data Stream sebagai sumber
-
-
Tabel Apache Iceberg sebagai tujuan
-
Snowflake sebagai tujuan
-
Tujuan lainnya
-
Tabel Apache Iceberg sebagai tujuan
-
-
Snowflake sebagai tujuan
-
-
Tujuan lainnya
-
-
-
Log Penawaran sebagai sumber
-
-
Tabel Apache Iceberg sebagai tujuan
-
Tujuan lainnya
-
Tabel Apache Iceberg sebagai tujuan
-
-
Tujuan lainnya
-
-
-
MSK sebagai sumber
-
-
Tabel Apache Iceberg sebagai tujuan
-
Tujuan lainnya
-
Tabel Apache Iceberg sebagai tujuan
-
-
Tujuan lainnya
-
-
Contoh harga
Harga Penyerapan untuk Direct PUT dan KDS sebagai sumber
Ukuran catatan 3 KB dibulatkan ke 5 KB terdekat yang diserap = 5 KB
Harga untuk 500 TB/bulan pertama = 0,029 USD per GB
GB yang ditagih untuk data penyerapan = (100 catatan/detik * 5 KB/catatan) / 1.048.576 KB/GB * 30 hari/bulan x 86.400 detik/hari = 1.235,96 GB
Biaya penyerapan bulanan = 1.235,96 GB * 0,029 USD/GB = 35,84 USD
Harga Penyerapan untuk MSK sebagai sumber
Ukuran catatan 2 KB (tidak ada peningkatan 5 KB)
Harga untuk 500 TB/bulan pertama = 0,055 USD per GB
GB ditagih untuk data penyerapan (dengan asumsi volume data yang sama dengan data pengiriman) = (100 catatan/detik * 2 KB/catatan) / 1.048.576 KB/GB * 30 hari/bulan * 86.400 detik/hari = 494,38 GB
Biaya volume data bulanan = 494,38 GB * 0,055 USD/GB = 27,19 USD
Harga Penyerapan untuk Log Penawaran sebagai sumber
Ukuran catatan 0,5 KB (500 Bita) = 0,5 KB (tidak ada penambahan 5 KB)
Harga untuk 500 TB pertama /bulan = 0,13 USD per GB
GB yang ditagih untuk penyerapan = (100 catatan/dtk * 0,5 KB/catatan) / 1.048.576 KB/GB * 30 hari/bulan *86.400 dtk/hari = 123,59 GB
Biaya penyerapan bulanan = 123,59 GB * 0,13 USD/GB = 16,06 USD
Harga Snowflake sebagai tujuan
Ukuran catatan 0,5 KB (500 Bita) = 0,5 KB (tidak ada penambahan 5 KB)
Harga per GB yang dikirim ke Snowflake = 0,071 USD per GB
GB yang ditagih untuk penyerapan = (100 catatan/dtk * 0,5 KB/catatan) / 1.048.576 KB/GB * 30 hari/bulan * 86.400 dtk/hari = 123,59 GB
Biaya penyerapan bulanan = 123,59 GB * 0,13 USD/GB = 8,77 USD
Harga untuk Tabel Apache Iceberg sebagai tujuan
Ukuran catatan 0,5 KB (500 Bita) = 0,5 KB (tidak ada penambahan 5 KB)
Harga per GB dikirim ke Tabel Apache Iceberg dari Kinesis Data Streams sebagai sumber = 0,045 USD per GB
GB yang ditagih untuk penyerapan = (100 catatan/dtk * 0,5 KB/catatan) / 1.048.576 KB/GB * 30 hari/bulan * 86.400 dtk/hari = 123,59 GB
Biaya penyerapan bulanan = 123,59 GB * 0,045 USD/GB = 5,56 USD
Harga konversi format: JSON ke Parquet atau ORC (opsional)
Ukuran catatan 0,5 KB (500 Bita) = 0,5 KB (tidak ada penambahan 5 KB)
Harga untuk 500 TB pertama /bulan = 0,13 USD per GB
GB yang ditagih untuk penyerapan = (100 catatan/dtk * 0,5 KB/catatan) / 1.048.576 KB/GB * 30 hari/bulan *86.400 dtk/hari = 123,59 GB
Biaya penyerapan bulanan = 123,59 GB * 0,13 USD/GB = 16,06 USD
Konversi format data adalah tambahan opsional untuk penyerapan data dan menggunakan tagihan GB untuk penyerapan untuk komputasi biaya.
Harga per GB yang diserap yang dikonversi = 0,018 USD
Biaya konversi format bulanan = 1.235,96 GB * 0,018 USD/GB yang dikonversi = 22,25 USD
Harga pengiriman VPC (opsional)
Pengiriman ke VPC adalah tambahan opsional untuk penyerapan data dan menggunakan GB yang dikirim ke tujuan dalam VPC untuk komputasi biaya.
Harga per GB yang dikirim ke tujuan dalam VPC = 0,01 USD
Harga per jam AZ untuk pengiriman VPC = 0,01 USD
Biaya pemrosesan VPC bulanan = 1.235,96 GB * 0,01 USD/GB yang diproses = 12,35 USD
Biaya bulanan VPC per jam = 24 jam * 30 hari/bulan * 3 AZ = 2.160 jam * 0,01 USD/jam = 21,60 USD Total biaya VPC bulanan = 33,95 USD
Harga partisi dinamis (opsional)
Partisi dinamis adalah tambahan opsional untuk penyerapan data, dan menggunakan GB yang diproses melalui Partisi Dinamis, jumlah objek yang dikirim ke S3, serta jam pemrosesan JQ opsional untuk komputasi biaya. Dalam contoh ini, kami menganggap objek berukuran 64 MB dikirimkan sebagai hasil konfigurasi petunjuk buffer Aliran Firehose.
Jika Anda menggunakan fitur opsional – seperti transformasi data menggunakan Lambda, konversi format, atau kompresi – di Aliran Firehose Anda, jumlah data yang diproses melalui partisi dinamis mungkin berbeda dari jumlah data yang diserap dari sumber atau jumlah data yang dikirimkan ke tujuan. Langkah-langkah pemrosesan data tambahan yang dilakukan sebelum dan sesudah partisi dinamis dapat membuatnya berbeda.
Harga per GB diproses melalui Partisi Dinamis = 0,020 USD
Harga per 1.000 objek S3 yang dikirim 0,005 USD = 0,005 USD
Harga per jam pemrosesan JQ = 0,07 USD
GB bulanan yang diproses melalui Partisi Dinamis = (3 KB * 100 catatan/detik) / 1.048.576 KB/GB * 86.400 detik/hari * 30 hari/bulan = 741,58 GB
Biaya bulanan untuk GB yang diproses melalui Partisi Dinamis = 741,58 GB 0,02 USD per GB yang diproses melalui Partisi Dinamis = 14,83 USD
Jumlah objek yang dikirim = 741,58 GB * 1.024 MB/GB / 64 MB ukuran objek = 11.866 objek
Biaya bulanan untuk objek yang dikirim ke S3 = 11.866 objek * 0,005 USD/1000 objek = 0,06 USD
Biaya bulanan untuk JQ (jika diaktifkan) = 70 JQ jam yang digunakan/bulan * 0,07 USD/ jam pemrosesan JQ = 4,90 USD
Dekompresi Log CloudWatch
Log CloudWatch mengirimkan data dalam format terkompresi gzip. Fitur dekompresi Data Firehose mendekompresi data dan mengenakan biaya per GB data yang didekompresi.
Penggunaan bulanan = 10 TB data Log CloudWatch yang didekompresi
Harga per GB yang didekompresi = 0,00325 USD/GB dalam IAD
Biaya dekompresi bulanan = 10240 GB *0,00325 USD/GB = 33,28 USD
Perjanjian Tingkat Layanan
Pelajari tentang Perjanjian Tingkat Layanan Amazon Data Firehose dengan mengunjungi FAQ kami.
Temukan lebih banyak sumber daya Amazon Data Firehose