Các tác tử khắc phục sự cố và nâng cấp Apache Spark hiện có sẵn dưới dạng gói sức mạnh Kiro
Tác tử khắc phục sự cố và tác tử nâng cấp Apache Spark dành cho Amazon EMR hiện có sẵn dưới dạng gói sức mạnh Kiro, hỗ trợ khả năng truy cập bằng một cú nhấp chuột vào các hoạt động Spark dựa trên AI ngay trong Kiro. Với những gói sức mạnh này, các kỹ sư dữ liệu có thể giảm thời gian khắc phục sự cố từ hàng giờ xuống còn vài phút và rút ngắn thời gian nâng cấp phiên bản Spark từ vài tháng xuống còn vài tuần.
Khi một tác vụ Spark thất bại, gói sức mạnh khắc phục sự cố sẽ xác định nguyên nhân gốc rễ bằng cách phân tích bản ghi, chỉ số và cấu hình trên EMR chạy trên EC2 và EMR phi máy chủ, đồng thời đưa ra các đề xuất mã cụ thể cho các ứng dụng PySpark. Gói sức mạnh nâng cấp tự động hóa việc nâng cấp phiên bản Spark, chẳng hạn như chuyển từ EMR 6.5 sang EMR 7.12, bằng cách xử lý chuyển đổi mã và giải quyết thành phần phụ thuộc thông qua xác thực từ xa và so sánh chất lượng dữ liệu trên EMR. Cả hai gói sức mạnh đều kết nối với các tác tử Spark thông qua MCP Proxy dành cho AWS với xác thực dựa trên vai trò IAM và tất cả các hành động được ghi lại trong AWS CloudTrail để có khả năng kiểm tra đầy đủ.
Gói sức mạnh khắc phục sự cố và nâng cấp Apache Spark có sẵn dành cho Amazon EMR ở tất cả các khu vực thương mại AWS. Để bắt đầu, hãy cài đặt nguồn khắc phục sự cố Apache Spark hoặc nguồn nâng cấp từ Kiro IDE. Để biết thêm thông tin, hãy xem tài liệu về tác tử khắc phục sự cố và tác tử nâng cấp.