Amazon EMR บน EKS รองรับ Agent สำหรับการแก้ไขข้อบกพร่องของ Apache Spark แล้ว
Amazon EMR บน EKS รองรับ Agent สำหรับการแก้ไขข้อบกพร่องของ Apache Spark แล้ว วิศวกรข้อมูลสามารถวินิจฉัยความล้มเหลวของงาน EMR บน EKS ได้ด้วยภาษาธรรมชาติ โดยได้รับการวิเคราะห์สาเหตุของปัญหาและคำแนะนำเกี่ยวกับโค้ด PySpark ที่ทำให้เป็นระบบอัตโนมัติ โดยไม่ต้องนำทางข้อมูลบันทึกแบบกระจายตัวและข้อมูลของ Spark History Server ด้วยตนเอง
Agent จะวิเคราะห์ข้อมูลของ Spark History Server, ข้อมูลบันทึกของ Executor แบบกระจายตัว และการกำหนดค่าคลัสเตอร์ เพื่อระบุปัญหา เช่น ข้อผิดพลาดด้านหน่วยความจำ, ความผิดเพี้ยนของข้อมูล, การแย่งชิงทรัพยากร และความล้มเหลวในการเชื่อมต่อ ด้วยการเปิดตัวครั้งนี้ Agent สำหรับการแก้ไขข้อบกพร่องของ Spark จึงรองรับตัวเลือกการนำไปใช้จริงทั้งหมดของ EMR แล้ว ได้แก่ EMR บน EC2, EMR Serverless และ EMR บน EKS สามารถเข้าถึง Agent ได้โดยตรงจากคอนโซล EMR บน EKS ผ่านตัวเลือก "Troubleshoot with AI" (แก้ไขข้อบกพร่องด้วย AI) ในงานที่ล้มเหลว นอกจากนี้ Agent ยังพร้อมใช้งานผ่าน MCP (Model Context Protocol) โดยใช้ AI Coding Agent ที่ทำงานร่วมกันได้ ซึ่งรวมถึง Kiro, Claude Code และ Cursor การดำเนินการทั้งหมดเป็นแบบอ่านอย่างเดียว, มีการยืนยันตัวตนด้วยบทบาทใน IAM และมีการบันทึกใน AWS CloudTrail
Agent สำหรับการแก้ไขข้อบกพร่องของ Spark สำหรับ Amazon EMR บน EKS พร้อมใช้งานใน AWS Region ทุกแห่งที่มีสตูดิโอแบบครบวงจรของ SageMaker ให้บริการ ในการเริ่มต้นใช้งาน ให้ไปที่คอนโซล EMR บน EKS หรือตั้งค่า MCP Server ใน AI Coding Agent ที่คุณต้องการ สำหรับคำแนะนำโดยละเอียด โปรดดูเอกสารประกอบ Agent สำหรับการแก้ไขข้อบกพร่องของ EMR