Memulai Layanan Terkelola Amazon untuk Apache Flink
Mengapa harus Layanan Terkelola untuk Apache Flink?
Bangun aplikasi streaming dengan Apache Flink dan Apache Beam
1. Langkah 1: Unduh pustaka sumber terbuka ke IDE favorit Anda
Anda dapat memulai dengan mengunduh pustaka sumber terbuka termasuk AWS SDK, Apache Flink, dan konektor untuk layanan AWS.
2. Langkah 2: Bangun aplikasi sampel menggunakan Apache Flink atau Apache Beam
Anda menulis kode aplikasi Apache Flink menggunakan aliran data dan operator streaming. Aliran data aplikasi adalah struktur data yang Anda proses terhadap penggunaan kode aplikasi Anda. Data terus mengalir dari sumber ke aliran data aplikasi. Satu atau beberapa operator streaming digunakan untuk menentukan pemrosesan Anda pada aliran data aplikasi.
3. Langkah 3: Unggah kode Anda ke Layanan Terkelola Amazon untuk Apache Flink
Setelah dibuat, unggah kode Anda ke Layanan Terkelola Amazon untuk Apache Flink. Layanan ini menangani semua yang diperlukan untuk terus menjalankan aplikasi waktu nyata Anda, termasuk penskalaan secara otomatis agar sesuai dengan volume dan throughput data masuk Anda.
Gunakan Layanan Terkelola Amazon untuk Apache Flink Studio secara intuitif
1. Langkah 1: Buat aplikasi Layanan Terkelola Amazon untuk Apache Flink Studio
Mulai dari Layanan Terkelola Amazon untuk Apache Flink, Amazon MSK, atau konsol Amazon Kinesis Data Streams. Anda juga dapat menggunakan konektor khusus untuk terhubung ke sumber data lainnya.
2. Langkah 2: Tulis kode di notebook nirserver dalam SQL, Python, dan Scala lalu kembangkan aplikasi Apache Flink dengan cepat
Jalankan paragraf individual dalam notebook, lihat hasilnya dalam konteks, dan gunakan visualisasi bawaan Apache Zeppelin untuk mempercepat pengembangan. Anda juga dapat menggunakan fungsi yang ditentukan pengguna dalam kode Anda.
3. Langkah 3: Bangun dan lakukan deployment sebagai aplikasi streaming Layanan Terkelola Amazon untuk Apache Flink
Deploy kode Anda sebagai aplikasi pemrosesan aliran yang terus berjalan hanya dengan beberapa klik. Aplikasi yang Anda lakukan deployment akan menjadi aplikasi Layanan Terkelola Amazon untuk Apache Flink dengan status tahan lama dan penskalaan otomatis. Anda juga akan mendapatkan kesempatan untuk mengubah sumber, tujuan, pencatatan, dan tingkat pemantauan sebelum Anda memproduksi kode.
Pembelajaran-Elektronik
Dalam lokakarya ini, Anda akan membangun arsitektur streaming menyeluruh untuk menyerap, menganalisis, dan memvisualisasikan data streaming secara hampir waktu nyata. Anda akan mulai mengoptimalkan operasi armada perusahaan taksi di New York City dengan menganalisis data telemetri armada taksi secara hampir waktu nyata.
Gunakan solusi yang dibuat sebelumnya untuk memulai dengan cepat. Gunakan Solusi Data Streaming AWS untuk Layanan Terkelola Amazon untuk Apache Flink yang membantu Anda menyelesaikan kasus penggunaan streaming waktu nyata, seperti menangkap log aplikasi volume tinggi, menganalisis data clickstream, pengiriman terus-menerus ke danau data, dan banyak lagi.
Dalam lokakarya ini, Anda akan membuat aplikasi pemrosesan aliran untuk mengidentifikasi pelanggan yang memasuki kasino Anda dan berani bertaruh besar. Aplikasi ini akan mengirimkan email kepada Anda saat ada yang bertaruh dalam jumlah besar di meja judi. Anda juga akan mengidentifikasi meja yang membutuhkan isi ulang chip, dan mengidentifikasi calon penipu di kasino Anda melalui pola taruhan dan kemenangan mereka.
Dalam seri pembelajaran lima bagian ini Anda akan membuat arsitektur streaming data modern untuk papan peringkat game secara aktual dengan Layanan Terkelola Amazon untuk Apache Flink Studio. Arsitektur ini mencakup penyerapan data, pengayaan aktual dengan pengambilan data perubahan basis data (CDC), pemrosesan data, serta komputasi, penyimpanan, dan visualisasi hasil.