Luồng dữ liệu Amazon Kinesis công bố bảng truyền phát, phân phối dữ liệu đến các bảng Apache Iceberg trên Bảng Amazon S3
Luồng dữ liệu Amazon Kinesis giới thiệu bảng truyền phát, một khả năng hoàn toàn phi máy chủ mới liên tục phân phối dữ liệu từ các luồng Kinesis sang Bảng Amazon S3 ở định dạng Apache Iceberg. Các bảng truyền phát loại bỏ nhu cầu xây dựng và vận hành các quy trình phân phối Iceberg tự quản lý, từ đó giảm chi phí phân phối dữ liệu đến 50%. Nén nội tuyến thông minh giúp loại bỏ các sự cố với tệp nhỏ và giữ cho hiệu năng truy vấn có thể dự đoán, từ đó giảm chi phí truy vấn hạ nguồn đến 30%.
Amazon Kinesis Data Streams là dịch vụ phát trực tuyến dữ liệu phi máy chủ giúp dễ dàng nắm bắt, xử lý và lưu trữ các luồng dữ liệu ở mọi quy mô. Khách hàng ngày càng muốn phân phối dữ liệu truyền phát đến các bảng Apache Iceberg để hỗ trợ phân tích gần theo thời gian thực và các quy trình tính năng AI/ML bằng cách sử dụng dữ liệu mới nhất. Để thực hiện điều này, hiện nay, khách hàng xây dựng và quản lý các quy trình tùy chỉnh, xử lý chuyển đổi định dạng và quản lý cơ sở hạ tầng điện toán, làm tăng thêm chi phí của họ. Việc tải nhập truyền phát khối lượng lớn cũng tạo ra nhiều tệp Parquet nhỏ làm giảm hiệu năng truy vấn hạ nguồn và tăng chi phí lưu trữ. Với bảng truyền phát, khách hàng chỉ cần tạo bảng truyền phát, một khả năng hoàn toàn phi máy chủ để liên tục phân phối dữ liệu từ luồng Kinesis đến Bảng Amazon S3. Nén nội tuyến thông minh giúp loại bỏ tác động đến hiệu năng của các tệp nhỏ và giữ cho hiệu năng truy vấn có thể dự đoán mà không làm mất độ mới của dữ liệu. Luồng dữ liệu Kinesis tự động xử lý khả năng điều chỉnh quy mô, các lần thử lại, nén và độ tin cậy phân phối, đồng thời phân phối chỉ trong vài phút mà không cần ứng dụng tùy chỉnh, không có điện toán tự quản lý và không mất chi phí hoạt động. Khách hàng cấu hình bảng truyền phát chỉ với một vài cú nhấp chuột từ bảng điều khiển dưới dạng trải nghiệm tích hợp hoặc thông qua API.
Bảng truyền phát hỗ trợ các chế độ dung lượng Lợi thế theo nhu cầu (ODA) và Tiêu chuẩn theo nhu cầu (ODS) với giá dựa trên mức sử dụng, không mất phí thiết lập hay yêu cầu cam kết tối thiểu. Bạn chỉ bị tính phí cho dữ liệu được phân phối thành công. Bảng truyền phát được cung cấp ở tất cả các Khu vực AWS có sẵn Luồng dữ liệu Amazon Kinesis, bao gồm cả khu vực AWS GovCloud (Hoa Kỳ) và Trung Quốc. Để bắt đầu, hãy xem Hướng dẫn sử dụng Luồng dữ liệu Amazon Kinesis và trang định giá.