Mengumumkan peningkatan AI generatif untuk Apache Spark di AWS Glue (pratinjau)

Dikirim di: 22 Nov 2024

AWS Glue mengumumkan peningkatan AI generatif untuk Apache Spark, kemampuan AI generatif baru yang memungkinkan praktisi data untuk dengan cepat meningkatkan dan memodernisasi pekerjaan Spark mereka yang sudah ada. Didukung oleh Amazon Bedrock, fitur ini mengotomatiskan analisis dan pembaruan skrip dan konfigurasi Spark, mengurangi waktu dan upaya yang diperlukan untuk pemutakhiran Spark dari hitungan minggu menjadi hitungan menit.

AWS Glue adalah layanan integrasi data nirserver dan berskala yang memudahkan penemuan, persiapan, dan penggabungan data untuk analitik, machine learning, dan pengembangan aplikasi. Dengan Spark Upgrades, Anda dapat memulai peningkatan otomatis dengan satu klik di konsol AWS Glue untuk memodernisasi pekerjaan Spark Anda dari versi lama ke AWS Glue versi 4.0. Fitur ini menganalisis pekerjaan Spark berbasis Python Anda dan menghasilkan rencana peningkatan yang merinci perubahan kode dan modifikasi konfigurasi. Ini memanfaatkan AI generatif untuk secara berulang memperbaiki dan memvalidasi kode yang ditingkatkan dengan menjalankan uji coba sebagai pekerjaan Glue. Setelah validasi berhasil, Anda menerima ringkasan mendetail tentang semua perubahan untuk ditinjau, sehingga memungkinkan deployment pekerjaan Spark yang ditingkatkan dengan percaya diri. Pendekatan otomatis ini mengurangi kompleksitas pemutakhiran Spark sambil mempertahankan keandalan pipeline data Anda.

Peningkatan AI generatif untuk pratinjau Apache Spark tersedia untuk AWS Glue di AWS Region berikut: AS Timur (Ohio), AS Timur (Virginia Utara), AS Barat (Oregon), Asia Pasifik (Tokyo), dan Asia Pasifik (Sydney). Untuk mempelajari selengkapnya, kunjungi situs web AWS Glue, baca blog Peluncuran, atau baca dokumentasi.