Mengumumkan agen peningkatan Apache Spark untuk Amazon EMR
AWS mengumumkan agen peningkatan Apache Spark, kemampuan baru yang mempercepat peningkatan versi Apache Spark untuk Amazon EMR di EC2 dan EMR Nirserver. Agen mengubah proses peningkatan kompleks yang biasanya memakan waktu berbulan-bulan menjadi proyek yang mencakup berminggu-minggu melalui analisis dan transformasi kode otomatis. Organisasi menginvestasikan sumber daya rekayasa yang besar untuk menganalisis perubahan API, menyelesaikan konflik, dan memvalidasi aplikasi selama peningkatan Spark. Agen memperkenalkan antarmuka percakapan di mana para insinyur mengungkapkan persyaratan peningkatan dalam bahasa alami, sambil mempertahankan kontrol penuh atas modifikasi kode.
Agen upgrade Apache Spark secara otomatis mengidentifikasi perubahan API dan modifikasi perilaku di seluruh aplikasi PySpark dan Scala. Insinyur dapat memulai peningkatan langsung dari SageMaker Unified Studio, Kiro CLI atau IDE pilihan mereka dengan bantuan kompatibilitas MCP (Model Context Protocol). Selama proses peningkatan, agen menganalisis kode yang ada dan menyarankan perubahan spesifik, dan insinyur dapat meninjau dan menyetujui sebelum implementasi. Agen memvalidasi kebenaran fungsional melalui validasi kualitas data. Agen saat ini mendukung peningkatan dari Spark 2.4 ke 3.5 dan mempertahankan akurasi pemrosesan data selama proses peningkatan.
Agen upgrade Apache Spark sekarang tersedia di semua AWS Region tempat Studio Terpadu SageMaker tersedia. Untuk mulai menggunakan agen, kunjungi Studio Terpadu SageMaker dan pilih IDE Spaces atau instal Kiro CLI. Untuk panduan implementasi terperinci, dokumentasi referensi, dan contoh migrasi, kunjungi dokumentasi.