AWS Glue công bố hỗ trợ VPC, đẩy xuống bộ lọc và hỗ trợ phân vùng cho trình kết nối API REST
AWS Glue hiện hỗ trợ kết nối VPC, đẩy xuống bộ lọc và hỗ trợ phân vùng cho trình kết nối API REST. Trình kết nối API REST cho phép bạn tải nhập dữ liệu từ bất kỳ nguồn nào hiển thị API dựa trên REST, bao gồm các hệ thống độc quyền và nền tảng mới nổi mà không có các trình kết nối gốc của AWS Glue. Với lần ra mắt này, bạn có thể vận hành các quy trình ETL của mình từ các nguồn dữ liệu với các điểm cuối API REST bằng cách kết nối an toàn với các điểm cuối riêng tư, chỉ truyền dữ liệu cần thiết cho các điểm cuối và xử lý song song các lần đọc để tải nhập nhanh hơn, tất cả được thực hiện mà không cần viết mã tùy chỉnh.
Với hỗ trợ VPC, bạn có thể sử dụng trình kết nối API REST để truy cập các nguồn dữ liệu được lưu trữ trong các mạng con riêng hoặc được kết nối thông qua VPN hoặc AWS PrivateLink mà không để lưu lượng truy cập đi qua Internet công cộng. Tính năng đẩy xuống bộ lọc chuyển các vị ngữ truy vấn của bạn thành các tham số gốc API, do đó chỉ các bản ghi khớp mới rời khỏi nguồn, giảm chi phí truyền dữ liệu và cải thiện hiệu suất công việc. Hỗ trợ phân vùng chia các tập dữ liệu lớn cho nhiều trình xử lý Spark bằng cách sử dụng chiến lược dựa trên trường hoặc số lượng bản ghi, cung cấp các lần đọc song song giúp giảm thời gian tải nhập cho các API được phân trang, có khối lượng lớn.
Những khả năng này được cung cấp ở tất cả các khu vực AWS thương mại có AWS Glue.
Để bắt đầu, hãy truy cập tài liệu về trình kết nối API REST của AWS Glue.