Aurora PostgreSQL hiện hỗ trợ truy vấn dữ liệu Apache Iceberg và Parquet
Bắt đầu từ hôm nay, bạn có thể truy vấn trực tiếp dữ liệu hoạt động cùng với dữ liệu được lưu trữ trong hồ dữ liệu ở định dạng Apache Iceberg và Parquet bằng các ứng dụng và công cụ PostgreSQL hiện có của bạn mà không cần quy trình trích xuất, chuyển đổi và tải (ETL) hoặc sao chép dữ liệu.
Các ứng dụng ngày càng cần truy cập vào dữ liệu từ hồ dữ liệu, thường được lưu trữ ở định dạng Apache Iceberg và Parquet, để đưa ra quyết định sáng suốt hơn và tự động hóa các quy trình kinh doanh. Việc truy cập dữ liệu thường yêu cầu các quy trình sao chép dữ liệu từ hồ dữ liệu của bạn vào Aurora, làm tăng chi phí và công việc kỹ thuật khi các lược đồ phát triển. Với lần ra mắt này, bạn có thể tạo các bảng ngoại PostgreSQL tham chiếu dữ liệu Iceberg hoặc Parquet của bạn trong Amazon S3, Bảng Amazon S3 hoặc Danh mục dữ liệu AWS Glue. Khi khách hàng truy vấn các bảng ngoại này, Aurora sử dụng công cụ truy vấn hiệu năng cao của DuckDB, được nhúng trong PostgreSQL, để thực thi truy vấn dựa trên dữ liệu Iceberg và Parquet nền tảng. Các ứng dụng và công cụ BI hiện có của bạn tiếp tục sử dụng cùng một giao diện PostgreSQL.
Bạn cũng có thể truy vấn bảng từ các danh mục tương thích Danh mục REST Iceberg (IRC) bên ngoài được liên kết thông qua Danh mục dữ liệu AWS Glue mà không cần di chuyển hoặc sao chép dữ liệu. Đối với khối lượng công việc nhạy cảm với độ trễ, bạn có thể hiện thực hóa dữ liệu Iceberg hoặc Parquet vào các bảng Aurora PostgreSQL gốc bằng cách sử dụng các câu lệnh SQL tiêu chuẩn mà không cần quy trình ETL.
Khả năng này được cung cấp rộng rãi trên Aurora PostgreSQL bắt đầu từ 17.11, 18.6 trở lên ở tất cả các Khu vực AWS thương mại và GovCloud (Hoa Kỳ) mà không mất thêm phí. Để bắt đầu, hãy sử dụng bảng điều khiển Amazon RDS hoặc bất kỳ máy khách PostgreSQL nào. Để tìm hiểu thêm, hãy xem bài đăng blog hoặc tài liệu.