Bảng Amazon S3 hiện cung cấp một quy trình đơn giản, tiết kiệm chi phí để hiện đại hóa hồ dữ liệu
Bảng Amazon S3 hiện cung cấp dịch vụ di chuyển được quản lý các bảng Apache Hive sang Apache Iceberg. Iceberg bổ sung các giao dịch ACID, tiến hóa lược đồ và truy vấn dữ liệu tại thời điểm trong quá khứ vào hồ dữ liệu của bạn. Tuy nhiên, việc di chuyển khỏi Hive thường đồng nghĩa với việc xây dựng một quy trình di chuyển cho mỗi bảng, vốn có thể mất vài tuần. Giờ đây, bạn có thể cho phép Bảng S3 quản lý quá trình di chuyển, dẫn đến các bảng Iceberg sẵn sàng truy vấn, luôn được tối ưu hóa khi dữ liệu phát triển.
Bảng S3 xác thực, chuyển đổi và sao chép dữ liệu trong khi khối lượng công việc sản xuất tiếp tục chạy. Để giảm rủi ro di chuyển, bạn có thể xem lại từng bước, đồng bộ hóa bảng đích với các thay đổi nguồn thường xuyên khi bạn cần hoặc quay lui về dữ liệu nguồn. Bạn chỉ thanh toán cho dữ liệu được công việc sao chép, không mất phí cho chuyển đổi Hive sang Iceberg và các đối tượng nguồn trong S3 phân bậc thông minh vẫn ở bậc truy cập hiện tại. Nếu bảng của bạn sử dụng dạng nén Snappy, Bảng S3 sẽ nén lại bảng thành Zstandard (ZSTD) và thu gọn bảng, điều này làm giảm dung lượng lưu trữ và số lượng đối tượng, đồng thời cải thiện hiệu năng truy vấn.
Để bắt đầu, hãy truy cập Bảng điều khiển quản lý AWS hoặc sử dụng API di chuyển của Bảng Amazon S3. Kỹ năng di chuyển cũng có sẵn trong Agent Toolkit for AWS để giúp các tác tử AI điều phối quy trình làm việc một cách độc lập. Khi ra mắt, tính năng di chuyển được quản lý của Bảng S3 hỗ trợ các bảng Hive đã đăng ký AWS Glue được lưu trữ ở định dạng Parquet trong cùng một tài khoản AWS và Khu vực AWS. Tính năng này có sẵn ở các Khu vực AWS sau: Miền Đông Hoa Kỳ (Bắc Virginia, Ohio), Miền Tây Hoa Kỳ (Oregon), Châu Á Thái Bình Dương (Mumbai, Singapore, Sydney, Tokyo), Châu Âu (Frankfurt, Ireland, Stockholm). Để biết thông tin về giá, hãy truy cập định giá Amazon S3. Để tìm hiểu thêm, hãy xem trang tổng quan Bảng Amazon S3, tài liệu và Blog tin tức AWS.