Amazon Kinesis Data Firehose

Chuẩn bị và tải luồng dữ liệu thời gian thực lên các kho dữ liệu và dịch vụ phân tích

Amazon Kinesis Data Firehose là cách thức dễ dàng nhất để tải dữ liệu truyền vào các hồ dữ liệu, kho lưu trữ dữ liệu và dịch vụ phân tích một cách đáng tin cậy. Sản phẩm này có thể thu thập, biến đổi và phân phối dữ liệu truyền đến Amazon S3, Amazon Redshift, Amazon Elasticsearch Service, các điểm cuối HTTP chung và các nhà cung cấp dịch vụ như Datadog, New Relic, MongoDB và Splunk. Đây là một dịch vụ được quản lý hoàn toàn, tự động thay đổi quy mô để phù hợp với thông lượng dữ liệu và không cần quản trị liên tục. Công cụ này còn có thể chia lô, nén, chuyển đổi và mã hóa các luồng dữ liệu trước khi tải, nhờ đó giảm thiểu lượng dung lượng lưu trữ sử dụng và tăng độ bảo mật.

Bạn có thể dễ dàng tạo luồng phân phối Firehose từ Bảng điều khiển quản lý AWS, đặt cấu hình cho luồng này chỉ bằng vài lần nhấp chuột và bắt đầu xử lý dữ liệu truyền từ hàng trăm nghìn nguồn dữ liệu đến các đích cụ thể. Bạn cũng có thể cấu hình luồng dữ liệu của mình để tự động chuyển đổi dữ liệu đến thành các định dạng mở và dựa trên tiêu chuẩn như Apache Parquet và Apache ORC trước khi dữ liệu được phân phối.

Khi dùng Amazon Kinesis Data Firehose, bạn không cần trả mức phí tối thiểu hay phí cài đặt. Bạn thanh toán cho lượng dữ liệu mà bạn truyền qua dịch vụ, nếu có, để chuyển đổi định dạng dữ liệu và để phân phối lên Amazon VPC cũng như truyền dữ liệu.

Yêu cầu hỗ trợ chứng minh tính khả thi hoặc đánh giá của bạn »
Amazon Kinesis Data Firehose là gì? (1:45)

Lợi ích

Dễ sử dụng

Amazon Kinesis Data Firehose cung cấp cách thức dễ dàng để ghi lại, chuyển đổi và tải dữ liệu truyền với chỉ vài cú nhấp chuột trong Bảng điều khiển quản lý AWS. Bạn có thể nhanh chóng tạo luồng phân phối Firehose, chọn đích đến và bắt đầu gửi đồng thời dữ liệu trong thời gian thực từ hàng trăm nghìn nguồn dữ liệu. Dịch vụ sẽ đảm nhiệm phần quản lý luồng, bao gồm toàn bộ tác vụ thay đổi quy mô, phân mảnh và theo dõi cần thực hiện để tải liên tục dữ liệu đến điểm đích theo các khoảng thời gian bạn chọn.

Tích hợp với các dịch vụ AWS và nhà cung cấp dịch vụ

Amazon Kinesis Data Firehose được tích hợp với Amazon S3, Amazon Redshift và Amazon Elasticsearch Service. Dịch vụ này cũng có thể phân phối dữ liệu đến các điểm cuối HTTP chung và phân phối trực tiếp đến các nhà cung cấp dịch vụ như Datadog, New Relic, MongoDBSplunk. Từ Bảng điều khiển quản lý AWS, bạn có thể hướng Kinesis Data Firehose đến điểm đích tùy ý và sử dụng các ứng dụng và công cụ hiện có để phân tích dữ liệu truyền.

Chuyển đổi dữ liệu phi máy chủ

Amazon Kinesis Data Firehose đem đến cho bạn khả năng chuẩn bị dữ liệu truyền trước khi tải lên kho lưu trữ dữ liệu. Với Kinesis Data Firehose, bạn sẽ có thể dễ dàng chuyển đổi dữ liệu truyền thô từ các nguồn dữ liệu thành các định dạng như Apache Parquet và Apache ORC theo yêu cầu của kho lưu trữ dữ liệu đích mà không phải dựng hệ thống xử lý dữ liệu riêng. Tìm hiểu thêm »

Gần với thời gian thực.

Amazon Kinesis Data Firehose thu nhận và tải dữ liệu với tốc độ gần như trong thời gian thực. Dịch vụ này tải dữ liệu mới lên điểm đích trong 60 giây sau khi dữ liệu được gửi đến dịch vụ. Kết quả là bạn sẽ có thể truy cập dữ liệu mới sớm hơn và ứng phó nhanh hơn trước các sự cố hoạt động và kinh doanh.

Không cần quản trị liên tục

Amazon Kinesis Data Firehose là dịch vụ được quản lý toàn phần có chức năng tự động cung cấp, quản lý và thay đổi quy mô điện toán, bộ nhớ và tài nguyên mạng cần để xử lý và tải dữ liệu truyền của bạn. Sau khi thiết lập, Kinesis Data Firehose liên tục tải các luồng dữ liệu lên điểm đích khi chúng đến.

Bạn chỉ phải trả tiền cho những gì mình sử dụng

Với Amazon Kinesis Data Firehose, bạn chỉ phải trả tiền cho lượng dữ liệu bạn truyền qua dịch vụ và phí chuyển đổi định dạng dữ liệu, nếu có. Bạn cũng có thể thanh toán cho việc phân phối lên Amazon VPC và truyền dữ liệu, nếu có. Không yêu cầu mức phí tối thiểu hay cam kết trả trước.

Cách thức hoạt động

Cách thức hoạt động của Amazon Kinesis Data Firehose

Trường hợp sử dụng

Amazon Kinesis Data Firehose là cách thức dễ dàng nhất để tải dữ liệu truyền vào hồ dữ liệu, kho lưu trữ dữ liệu và công cụ phân tích một cách đáng tin cậy. Dưới đây là những ví dụ về các trường hợp sử dụng chính mà khách hàng của chúng tôi giải quyết bằng Amazon Kinesis Data Firehose.

Phân tích IoT

Với Amazon Kinesis Data Firehose, bạn sẽ có thể dễ dàng ghi lại dữ liệu liên tục từ các thiết bị được kết nối như thiết bị tiêu dùng, cảm biến tích hợp và thiết bị giải mã tín hiệu truyền hình của TV. Kinesis Data Firehose tải dữ liệu lên điểm đích cụ thể, cho phép truy cập gần như trong thời gian thực vào các số liệu, thông tin chuyên sâu và bảng điều khiển.

Phân tích đường dẫn nhấp chuột

Bạn có thể sử dụng Amazon Kinesis Data Firehose để xử lý dữ liệu đường dẫn nhấp chuột trong thời gian thực, cho phép chuyên viên tiếp thị kết nối với khách hàng một cách hiệu quả nhất. Bạn có thể phân luồng hàng tỷ tin nhắn nhỏ được nén, mã hóa và phân phối đến các điểm đích của bạn. Từ đó, bạn sẽ có thể tổng hợp, lọc và xử lý dữ liệu cũng như làm mới bảng thông tin hiệu suất của nội dung gần như trong thời gian thực.

Phân tích nhật ký

Bạn có thể phát hiện lỗi ứng dụng ngay khi lỗi xảy ra và xác định nguyên nhân gốc rễ bằng cách thu thập, theo dõi và phân tích dữ liệu nhật ký. Bạn có thể dễ dàng cài đặt và cấu hình Amazon Kinesis Agent trên máy chủ của bạn để tự động theo dõi ứng dụng và tệp nhật ký máy chủ rồi gửi dữ liệu về Kinesis Data Firehose. Kinesis Data Firehose sẽ liên tục truyền dữ liệu nhật ký đến điểm đích để bạn có thể trực quan hóa và phân tích dữ liệu.

Theo dõi bảo mật

Kinesis Data Firehose hỗ trợ Splunk làm điểm đích. Nghĩa là, bạn sẽ có thể ghi lại và gửi nhật ký luồng lưu lượng mạng đến Kinesis Data Firehose, sau đó, dịch vụ sẽ chuyển đổi, bổ sung rồi tải dữ liệu lên Splunk. Với giải pháp này, bạn sẽ có thể theo dõi tình hình an ninh mạng theo thời gian thực và phát cảnh báo ngay khi có hiểm họa tiềm ẩn nảy sinh.

Nghiên cứu điển hình

3Victors
3Victors xử lý hơn một tỷ lượt tìm kiếm về du lịch trên toàn thế giới và 230 tỷ lịch trình có báo giá mỗi ngày từ các hệ thống đặt chỗ lớn nhất thế giới.
Đọc nghiên cứu điển hình 
Hearst
Hearst phát trực tiếp trên 30 terabyte dữ liệu luồng nhấp chuột mỗi ngày từ trang web của mình để phân tích.
Đọc nghiên cứu điển hình 
Comcast
Comcast ghi lại và phân tích sở thích của khách hàng để cung cấp trải nghiệm giải trí phong phú.
Đọc nghiên cứu điển hình 
Redfin
Redfin xây dựng đường dẫn tiếp nhận nhật ký đáng tin cậy đã cải thiện SLA cho các dịch vụ xuôi chiều.
Đọc nghiên cứu điển hình 
Realtor.com
Realtor.com phát trực tiếp dữ liệu về độ ấn tượng của quảng cáo và thu thập hiểu biết có thể tạo nên hành động nhằm cải thiện hiệu quả của quảng cáo.
Đọc nghiên cứu điển hình 
Repp Health
Repp Health sử dụng các dịch vụ Amazon Kinesis để xử lý và tải dữ liệu truyền IoT lên hồ dữ liệu Amazon S3 để phân tích địa điểm.
Đọc nghiên cứu điển hình 

Bài đăng trên blog

Ngày
  • Ngày
1

Đọc blog về Amazon Kinesis Data Firehose.

Bắt đầu với Amazon Kinesis Data Firehose

Đọc hướng dẫn dành cho nhà phát triển
Xem hướng dẫn dành cho nhà phát triển

Tìm hiểu về Kinesis Data Firehose từ hướng dẫn dành cho nhà phát triển.

Tìm hiểu thêm 
Đăng ký một tài khoản AWS miễn phí
Đăng ký một tài khoản miễn phí

Nhận quyền sử dụng ngay lập tức Bậc miễn phí của AWS. 

Đăng ký 
Bắt đầu hướng dẫn Kinesis Data Firehose
Bắt đầu phát trực tiếp dữ liệu của bạn

Thử trải nghiệm thực tế bằng hướng dẫn này.

Bắt đầu hướng dẫn 

Tìm hiểu thêm về các tính năng của Amazon Kinesis Data Firehose

Truy cập trang tính năng
Bạn đã sẵn sàng bắt đầu chưa?
Đăng ký
Bạn có thêm câu hỏi?
Hãy liên hệ với chúng tôi