Pelanggan Amazon MSK

Kafka telah menjadi komponen utama dari Platform Analitik Teknik kami di Arm selama beberapa tahun ini, baik on-premise maupun di cloud. Sejak pertama kali dioperasikan, kami telah menjalankannya pada arsitektur Arm, namun untuk meningkatkan keandalan dan mengurangi overhead manajemen, kami ingin menggunakan Amazon Managed Streaming for Apache Kafka (MSK).

Dengan peningkatan MSK untuk mendukung Graviton 3, kami dapat mengembalikan layanan analitik kami ke tumpukan yang sepenuhnya berbasis ARM sehingga memberikan performa yang lebih tinggi dengan biaya lebih rendah sekaligus mengurangi jejak karbon operasi kami.

Amazon MSK memungkinkan kami menskalakan dengan lancar sambil memanfaatkan keandalan dan keamanan tingkat perusahaan. Dengan memindahkan manajemen Kafka ke AWS, kami dapat tetap fokus pada bisnis inti kami dan berinovasi lebih cepat.

Diperlukan waktu 10 jam untuk menyinkronkan penyimpanan metadata kami. Namun sekarang, dengan menggunakan Amazon MSK, proses ini membutuhkan waktu 30 menit.

Saat bermigrasi dari pusat data kami ke AWS, kami membutuhkan cara untuk mempertahankan investasi penting bisnis kami di Kafka sekaligus mengurangi biaya operasional Kafka sendiri secara signifikan. Ini mengarahkan kami ke MSK. Kami sudah mengalihkan sebagian besar infrastruktur dan pengelolaan perangkat lunak Kafka ke kluster MSK, yang telah ditingkatkan untuk mendukung rata-rata penyerapan data lebih dari 40 GB/detik. Misalnya, kami tidak lagi harus mengelola perangkat keras dan perangkat lunak untuk menjaga kluster kami tetap terkini. Hasilnya, kami dapat menginvestasikan lebih banyak sumber daya kami untuk mengembangkan layanan di sekitar Kafka untuk tim klien kami, yang merupakan hal terbaik yang kami lakukan. Menggunakan MSK memungkinkan kami untuk fokus pada kompetensi utama; memungkinkan kami merilis produk yang lebih baik dengan lebih cepat dan lebih sering.

Sejak mengadopsi Amazon MSK, kami dapat meningkatkan efisiensi tim dan mengurangi waktu yang dihabiskan untuk memelihara klaster kami secara signifikan. Seiring meningkatnya persyaratan data dan kasus penggunaan, kami mulai mengalami biaya overhead dan kompleksitas yang cukup besar dalam mengelola klaster Kafka kami. Dengan Amazon MSK, kami dapat mengelola klaster dengan percaya diri, menghabiskan lebih sedikit waktu untuk memverifikasi performa klaster, menskalakan dengan mudah, dan memfokuskan lebih banyak waktu untuk berinovasi dan membangun aplikasi waktu nyata yang menggembirakan.

Amazon Managed Streaming for Apache Kafka (Amazon MSK) memudahkan kami menyiapkan, memelihara, dan menskalakan klaster Kafka sehingga memungkinkan pipeline penyerapan ujung ke ujung yang didukung oleh layanan yang terkelola penuh. Seiring meningkatnya permintaan, kami merasa percaya diri bahwa kami akan dapat menskalakan dengan mudah dan memperluas pipeline penyerapan streaming kami untuk pengayaan data dan machine learning waktu nyata, sehingga meningkatkan pengalaman bagi pelanggan kami.

Dengan Amazon MSK, Vonage telah mengurangi biaya overhead pemeliharaan sekaligus membangun platform berbasis layanan mikro yang memungkinkan bisnis dapat berkolaborasi dengan lebih produktif dan melibatkan pelanggan dengan lebih efektif. Kami kini dapat menyiapkan klaster Kafka baru dengan lebih cepat dan memperluas klaster tersebut seiring meningkatnya permintaan. Amazon MSK telah menghilangkan kerumitan penyiapan dan pemeliharaan, sehingga kami dapat fokus pada hal yang paling penting - membangun kemampuan baru yang inovatif bagi pelanggan kami.

Ketika mengembangkan dan meluncurkan aplikasi analitik keamanan kami, Secureworks memilih layanan Amazon MSK untuk mempercepat waktu masuk pasar serta mengurangi biaya overhead infrastruktur dan manajemen. Hal ini memungkinkan kami untuk fokus pada inovasi dan pembeda kami yang unik, sehingga kami dapat melindungi pelanggan dari ancaman siber.

Teknologi pengaliran (streaming) merupakan bagian penting dari hal yang kami lakukan sebagai sebuah bisnis, tetapi mengelola teknologi streaming melibatkan banyak hal berat yang perlu dilakukan oleh pengembang perangkat lunak kami. Amazon MSK memungkinkan kami menghilangkan banyak hal berat ini. Dengan Amazon MSK, kami tidak perlu lagi berupaya keras untuk memastikan ketahanan data, ketersediaan klaster, skalabilitas, dan kami kini dapat berfokus pada pembangunan aplikasi. Amazon MSK membebaskan tim kami dari beban pengoperasian dan pemeliharaan Kafka, dan pada waktu yang sama kami mengalami penurunan waktu henti karena klaster kami terkelola secara penuh.

Di ZipRecruiter, kami menggunakan Apache Kafka untuk pipa saluran pencatatan data log peristiwa, yang merupakan komponen infrastruktur vital yang mengumpulkan, menyimpan, dan memproses lebih dari 6 miliar peristiwa per hari dari pasaran tenaga kerja ZipRecruiter secara berkelanjutan. Kami beralih ke Amazon Managed Streaming for Apache Kafka (Amazon MSK) untuk mempermudah dalam mengelola, menjalankan, dan memelihara infrastruktur vital ini. Amazon MSK sangat mengurangi biaya overhead administrasi dan manajemen Apache Kafka kami, sehingga para perekayasa kami yang dulunya mengelola Apache Kafka secara reguler dapat mengalihkan fokusnya ke inovasi produk yang memudahkan para pencari kerja dan manajer perekrutan untuk menemukan kecocokan.

Delhivery menggunakan Apache Kafka sebagai komponen vital dalam pipa saluran untuk mengumpulkan, menyimpan, dan memutar metadata secara logis dari pengoperasian jarak Pertama, Tengah, dan Terakhir. Seiring kami meningkatkan skala operasional logistik, dilakukan upaya penting untuk mengelola kompleksitas infrastruktur di dalam klaster Apache Kafka kami. Amazon MSK tidak hanya membantu kami memindahkan overhead infrastruktur, tetapi juga mempertahankan performa dan throughput tinggi untuk saluran pipa metadata yang sangat penting bagi bisnis dengan cara yang lebih aman dan dapat diandalkan.

Vortexa menggunakan Apache Kafka untuk menerapkan model Machine Learning sesuai skala untuk aliran data historis dan baru serta membuat prediksi pasar real-time agar segera tersedia bagi pelanggannya melalui platform analitik miliknya. Amazon MSK telah menjadi teknologi yang punya peran penting bagi Vortexa, dan bersama Lenses.io, mereka memungkinkan kami mengalihkan upaya penting kami dari mempertahankan dan menstabilkan infrastruktur Apache Kafka yang rentan dan rumit menjadi lebih berfokus pada kualitas analitik dan wawasan pasar yang secara langsung memengaruhi nilai yang kami hadirkan kepada pelanggan. Kami kini dapat memperbarui aplikasi kami sesuai skala dengan yakin dan reguler, menjalankan topologi stream Kafka yang rumit dengan mudah, dan mendebug aplikasi, bukannya infrastruktur. Pendapatan dan pangsa pasar kami dipengaruhi secara langsung oleh kecepatan kami dalam menyampaikan data yang akurat ke pasar, dan Amazon MSK adalah faktor pendorong utama dalam hal itu.

Kami menggunakan berbagai layanan AWS untuk melakukan streaming dan memproses data dalam jumlah besar untuk olahraga langsung sehingga banyak bagian dari infrastruktur kami yang memiliki pemanfaatan tinggi pada hari-hari pertandingan dan nol pemanfaatan pada hari-hari biasa. Sebelum menggunakan Amazon Managed Streaming for Apache Kafka (Amazon MSK) Nirserver, bagian yang bergerak dan overhead operasional yang diperlukan untuk secara efisien menaikkan serta menurunkan skala selama hari-hari pertandingan menjadi beban besar, dan kapasitas sering kali disediakan secara berlebihan. Amazon MSK Nirserver membantu kami memindahkan beban masalah penskalaan ke Amazon, yang kemudian memberi kami kebebasan untuk menggunakan waktu rekayasa kami di tempat lain. Kami mulai menghemat puluhan ribu dolar untuk tagihan AWS bulanan dan dapat mengalokasikan kembali waktu rekayasa kami yang berharga mulai dari perencanaan kapasitas serta pengoptimalan mekanisme penskalaan hingga penanganan tugas-tugas lain.