Amazon EMR giới thiệu Hỗ trợ dài hạn với Apache Spark 4.1
Amazon EMR giới thiệu các bản phát hành Hỗ trợ dài hạn (LTS), bắt đầu với emr-spark-8.1.0 và Apache Spark 4.1. Với LTS, các phiên bản được chỉ định của thời gian hoạt động AWS dành cho Apache Spark nhận được 36 tháng hỗ trợ. Amazon EMR cung cấp các bản phát hành LTS với các bản sửa lỗi cho những sự cố trọng yếu và có mức độ nghiêm trọng cao liên quan đến bảo mật, lỗi và hỏng dữ liệu, tùy thuộc vào tình trạng sẵn có. LTS giúp bạn chạy khối lượng công việc Spark trong môi trường sản xuất trên một bản phát hành lâu hơn và nâng cấp theo lịch trình của riêng bạn mà không mất thêm phí.
Bản phát hành này bổ sung hỗ trợ đầy đủ cho Apache Iceberg v3, mang đến khả năng không gian địa lý mới, dấu thời gian có độ chính xác cao và tiến hóa lược đồ cho bảng của bạn. Các truy vấn Spark SQL có thể tham chiếu danh mục theo tên, bao gồm danh mục liên tài khoản và Bảng Amazon S3, đồng thời tự động phát hiện các định dạng bảng Apache Iceberg, Delta Lake và Apache Hudi mà không cần đăng ký từng danh mục trong cấu hình Spark của bạn. Kiểm soát truy cập chi tiết hiện bao gồm nhiều thao tác Apache Iceberg hơn và thao tác VACUUM của Delta Lake, vì vậy bạn có thể áp dụng quyền cấp cột và cấp hàng cho một tập hợp công việc rộng hơn. Các cụm Amazon EMR trên EKS hiện hỗ trợ điểm cuối Spark Connect với xác thực dựa trên mã thông báo.
emr-spark-8.1.0 được cung cấp ở tất cả các Khu vực AWS có sẵn Amazon EMR, cho Amazon EMR trên EC2, Amazon EMR trên EKS và Amazon EMR phi máy chủ.
Để tìm hiểu thêm, hãy xem ghi chú phát hành về emr-spark-8.1.0 và chính sách hỗ trợ tiêu chuẩn của Amazon EMR. Để bắt đầu, hãy tạo cụm EMR hoặc ứng dụng với emr-spark-8.1.0 từ Bảng điều khiển quản lý AWS hoặc sử dụng Tác tử nâng cấp Apache Spark cho Amazon EMR để chuyển các ứng dụng hiện có sang bản phát hành.