Amazon SageMaker đóng góp một phương thức truyền tải tùy chỉnh cho cộng đồng OpenLineage và cung cấp các tính năng dòng bổ sung
AWS thông báo rằng Amazon SageMaker đã đóng góp một phương thức truyền tải tùy chỉnh “AmazonDataZoneTransport” cho cộng đồng OpenLineage và nâng cao tính năng dòng tự động. Trong số những cải tiến về dòng này, có sự cải thiện tự động hóa từ các nguồn như AWS Glue, Amazon Redshift và thu thập dòng tự động từ công cụ, cho phép các nhà khoa học và kỹ sư dữ liệu làm việc hiệu quả hơn với dữ liệu và mô hình của mình.
Với đóng góp “truyền tải tùy chỉnh” mới cho cộng đồng OpenLineage, các nhà xây dựng có thể tải xuống truyền tải cùng với các plugin OpenLineage để tăng cường và tự động hóa các sự kiện dòng được thu thập từ các hệ thống hỗ trợ OpenLineage. Nhờ đó, khách hàng có thể tự động hóa quá trình thu thập dòng và gửi các sự kiện dòng này đến miền Studio hợp nhất của SageMaker, tăng cường quản trị dữ liệu và khả năng truy xuất nguồn gốc trong quy trình làm việc về dữ liệu của mình. Amazon SageMaker cũng đã giới thiệu các tính năng dòng tự động nâng cao từ nhiều nguồn khác nhau. Những cải tiến này bao gồm hỗ trợ tốt hơn cho các sự kiện dòng từ AWS Glue, Amazon Redshift và thu thập dòng tự động từ các công cụ như quy trình vETL và sổ tay. Ngoài ra, SageMaker cũng cải thiện hỗ trợ dòng SQL, đặc biệt cho Amazon Redshift, với các tính năng mới bao gồm hỗ trợ cho các thủ tục được lưu trữ và chế độ xem cụ thể hóa. Những cải tiến này cho phép tự động thu thập dòng của các thao tác dữ liệu phức tạp, cung cấp chế độ xem toàn diện hơn các chuyển đổi và mối quan hệ phụ thuộc dữ liệu.
Tính năng mới này được cung cấp ở tất cả các Khu vực AWS có Amazon SageMaker.
Để tìm hiểu thêm về đóng góp truyền tải tùy chỉnh và tính năng dòng nâng cao, vui lòng truy cập trang Amazon SageMaker. Để biết thông tin chi tiết về cách bắt đầu chế độ dòng bằng các tính năng mới này, vui lòng tham khảo tài liệu dành cho người dùng.