Giới thiệu Công việc truyền trực tuyến của Amazon EMR phi máy chủ giúp liên tục xử lý dữ liệu truyền trực tuyến

Ngày đăng: 4 Th06 2024

Amazon EMR phi máy chủ là một tùy chọn phi máy chủ trong Amazon EMR giúp kỹ sư dữ liệu và nhà khoa học dữ liệu dễ dàng chạy các khung phân tích dữ liệu lớn nguồn mở, mà không cần định cấu hình, quản lý và mở rộng cụm hay máy chủ. Chúng tôi vui mừng thông báo chế độ công việc truyền trực tuyến mới trên Amazon EMR phi máy chủ, hỗ trợ bạn liên tục phân tích và xử lý dữ liệu truyền trực tuyến.
Truyền trực tuyến đã trở thành yếu tố quan trọng giúp doanh nghiệp thu thập thông tin chuyên sâu liên tục từ các nguồn dữ liệu như cảm biến, thiết bị IoT và nhật ký web. Tuy nhiên, việc xử lý dữ liệu truyền trực tuyến có thể trở thành thách thức do các yêu cầu như tính sẵn sàng cao, khả năng phục hồi sau sự cố và khả năng tích hợp với các dịch vụ truyền trực tuyến. Công việc truyền trực tuyến của Amazon EMR phi máy chủ tích hợp sẵn các tính năng giúp giải quyết những thách thức này. Chế độ này đem lại tính sẵn sàng cao thông qua khả năng phục hồi nhiều Vùng sẵn sàng (AZ) bằng cách tự động chuyển sang AZ có tình trạng tốt. Chế độ này cũng tăng khả năng phục hồi thông qua hoạt động thử lại công việc tự động khi xảy ra lỗi và các tính năng quản lý nhật ký như nén và luân chuyển nhật ký, ngăn chặn tích lũy các tệp nhật ký có thể gây lỗi cho công việc. Công việc truyền trực tuyến của Amazon EMR phi máy chủ cũng hỗ trợ xử lý dữ liệu từ các dịch vụ truyền trực tuyến như cụm Apache Kafka tự quản lý, Dịch vụ truyền được quản lý của Amazon dành cho Apache Kafka và hiện tích hợp với Luồng dữ liệu Amazon Kinesis bằng Bộ kết nối luồng dữ liệu Amazon Kinesis mới được tích hợp sẵn, giúp dễ dàng xây dựng quy trình truyền trực tuyến đầu cuối hơn.

Công việc truyền trực tuyến của Amazon EMR phi máy chủ được hỗ trợ rộng rãi ở bản phát hành EMR 7.1.0 trở lên tại các Khu vực AWS sau: Miền Đông Hoa Kỳ (Bắc Virginia, Ohio), Miền Tây Hoa Kỳ (Oregon), Châu Âu (Stockholm, Paris, Frankfurt, Ireland, London), Nam Mỹ (São Paulo) và Châu Á Thái Bình Dương (Tokyo, Seoul, Singapore, Mumbai, Sydney). Để bắt đầu, hãy truy cập trang về Công việc truyền trực tuyến của Amazon EMR phi máy chủ trong Hướng dẫn sử dụng Amazon EMR phi máy chủ.