Amazon EMR trên EKS hiện hỗ trợ tác tử khắc phục sự cố Apache Spark
Amazon EMR trên EKS hiện hỗ trợ tác tử khắc phục sự cố Apache Spark. Kỹ sư dữ liệu giờ đây có thể chẩn đoán lỗi công việc EMR trên EKS thông qua ngôn ngữ tự nhiên, nhận phân tích nguyên nhân gốc rễ tự động và đề xuất mã PySpark mà không cần điều hướng thủ công bản ghi phân tán và dữ liệu Spark History Server.
Tác tử phân tích dữ liệu Spark History Server, bản ghi trình thực thi phân tán và cấu hình cụm để xác định các sự cố như lỗi bộ nhớ, sai lệch dữ liệu, tranh chấp tài nguyên và lỗi kết nối. Với lần ra mắt này, tác tử khắc phục sự cố Spark hiện bao gồm tất cả các tùy chọn triển khai EMR: EMR trên EC2, EMR phi máy chủ và EMR trên EKS. Tác tử có thể truy cập trực tiếp từ bảng điều khiển EMR trên EKS thông qua tùy chọn "Khắc phục sự cố với AI" trên các công việc bị lỗi. Ngoài ra, tác tử này có sẵn thông qua MCP (Giao thức ngữ cảnh mô hình) bằng bất kỳ tác tử lập trình dựa trên AI tương thích nào, bao gồm Kiro, Claude Code và Cursor. Tất cả các hoạt động đều ở chế độ chỉ đọc, được xác thực bằng vai trò IAM và được ghi lại vào AWS CloudTrail.
Tác tử khắc phục sự cố Spark dành cho Amazon EMR trên EKS có sẵn tại tất cả các Khu vực AWS nơi SageMaker Unified Studio khả dụng. Để bắt đầu, hãy truy cập bảng điều khiển EMR trên EKS hoặc thiết lập máy chủ MCP trong tác tử lập trình dựa trên AI ưa thích của bạn. Để biết hướng dẫn chi tiết, hãy xem tài liệu về tác tử khắc phục sự cố EMR.