Amazon Kinesis Data Firehose

準備即時資料串流並載入資料存放區和分析服務

Amazon Kinesis Data Firehose 是將串流資料載入資料湖、資料存放區和分析服務最簡單可靠的方式。它可以擷取、轉換及交付串流資料至 Amazon S3、Amazon Redshift、Amazon Elasticsearch Service、一般 HTTP 端點以及 Datadog、New Relic、MongoDB 和 Splunk 等服務供應商。這是一項全受管的服務,可因應資料的輸送量自動擴展,而且無須全程管理。它也可以在載入前先批次處理、壓縮、轉換及加密您的資料串流,以大幅減少使用的儲存體數量及提高安全性。

您可以從 AWS 管理主控台輕鬆建立 Firehose 交付串流,按幾下按鍵進行設定,然後開始從數十萬個資料來源擷取串流資料至您指定的目標。您也可以設定資料串流,在資料交付前自動將傳入資料轉換成 Apache Parquet 和 Apache ORC 等開放且標準的格式。

使用 Amazon Kinesis Data Firehose,沒有最低費用或設定費用。您需要支付透過此服務所傳輸的資料量 (如適用),轉換資料格式、Amazon VPC 交付和資料傳輸的費用。

請求概念驗證或評估的支援 »
什麼是 Amazon Kinesis Data Firehose? (1:45)

優勢

易於使用

Amazon Kinesis Data Firehose 提供一個簡單的方式來擷取、轉換和載入串流資料,只需在 AWS 管理主控台中按幾下按鍵即可。您可以快速建立 Firehose 交付串流、選取目標,以及開始從數十萬個資料來源同時傳送即時資料。服務會根據您指定的時間間隔,負責處理將資料持續載入目標所需的串流管理,包括所有擴展、共享及監控。

與 AWS 服務及服務供應商整合

Amazon Kinesis Data Firehose 已經與 Amazon S3、Amazon Redshift 及 Amazon Elasticsearch Service 整合。它還可以交付資料至一般 HTTP 端點,並直接交付至 DatadogNew RelicMongoDBSplunk 等服務供應商。從 AWS 管理主控台,您可以將 Kinesis Data Firehose 指向您選擇的目標,並使用您現有的應用程式及工具分析您的串流資料。

無伺服器資料轉換

Amazon Kinesis Data Firehose 可讓您將串流資料準備好,再載入資料存放區。使用 Kinesis Data Firehose,您可以輕鬆地將原始串流資料從資料來源轉換為目標資料存放區要求的格式,例如 Apache Parquet 和 Apache ORC,無須建立您自己的資料處理管道。進一步了解 »

近乎即時

Amazon Kinesis Data Firehose 以近乎即時的速度來擷取和載入資料。它可以在資料傳送到服務之後的 60 秒內,將新的資料載入您的目標。因此能讓您更快存取新資料,以及更迅速地因應商業和營運事件。

無須全程管理

Amazon Kinesis Data Firehose 是一項全受管服務,它會自動佈建、管理及擴展用來處理和載入串流資料所需的運算、記憶體和網路資源。設定完畢後,Kinesis Data Firehose 會在資料串流到達時持續將它們載入您的目標。

只需按實際用量付費

使用 Amazon Kinesis Data Firehose 時,您只需支付透過此服務傳輸的資料量費用,而且如果適用,還需支付資料格式轉換費用。另外,您需要支付 Amazon VPC 交付和資料傳輸費用 (如適用)。沒有最低費用,也無須前期承諾。

運作方式

Amazon Kinesis Data Firehose 的運作方式

使用案例

Amazon Kinesis Data Firehose 是將串流資料載入資料湖、資料存放區和分析工具最簡單可靠的方式。以下是我們客戶使用 Amazon Kinesis Data Firehose 處理重要情況的範例。

IoT Analytics

有了 Amazon Kinesis Data Firehose,您可以持續從連線裝置 (例如,家用電器、內嵌感應器以及電視機上盒) 擷取資料。Kinesis Data Firehose 將資料載入您的指定目標,讓您以近乎即時的速度存取指標、洞見和儀表板。

點擊流分析

您可以使用 Amazon Kinesis Data Firehose 擷取即時點擊流資料,讓行銷人員以最有效率的方式與客戶進行交流。您可以串流經過壓縮、加密並傳送到您目標的幾十億則簡短訊息。您可以從該處彙總、篩選和處理資料,並以近乎即時的速度重新整理內容效能儀表板。

日誌分析

您可以偵測到正在發生的應用程式錯誤,並透過收集、監控和分析日誌資料找出根本原因。您可以在伺服器上輕鬆安裝和設定 Amazon Kinesis 代理程式,以自動查看應用程式和伺服器日誌檔,並將資料傳送到 Kinesis Data Firehose。Kinesis Data Firehose 可持續將日誌資料串流到您的目標,讓您視覺化資料並進行分析。

安全監控

Kinesis Data Firehose 支援使用 Splunk 做為目標。這表示您可以擷取網路流量日誌並傳送到 Kinesis Data Firehose,以轉換、充實資料並載入 Splunk。使用這個解決方案,可即時監控網路安全,並在發生可能的威脅時傳送提醒。

案例研究

3Victors
3Victors 每天從全球最大的幾個預訂系統擷取超過 10 億個全球旅遊搜尋及 2,300 億個計費行程。
閱讀案例研究 
Hearst
Hearst 每天從網站串流 30 多 TB 的點擊流資料以進行分析。
閱讀案例研究 
Comcast
Comcast 擷取並分析客戶的偏好,以提供豐富的娛樂體驗。
閱讀案例研究 
Redfin
Redfin 建立可靠的日誌導入管道,提升下游服務的 SLA。
閱讀案例研究 
Realtor.com
Realtor.com 串流廣告曝光資料並取得可行洞見,以提升廣告效能。
閱讀案例研究 
Repp Health
Repp Health 使用 Amazon Kinesis 服務擷取、監控及載入 IoT 串流資料至 Amazon S3 資料湖以進行位置分析。
閱讀案例研究 

部落格文章

日期
  • 日期
1

參閱 Amazon Kinesis Data Firehose 的部落格

開始使用 Amazon Kinesis Data Firehose

閱讀開發人員指南
檢閱開發人員指南

如需 Kinesis Data Firehose 的相關資訊,請參閱開發人員指南。

進一步了解 
註冊免費的 AWS 帳戶
註冊免費帳戶

立即存取 AWS 免費方案 

註冊 
開始 Kinesis Data Firehose 教學
開始串流資料

透過此教學取得實作經驗。

開始教學 

進一步了解 Amazon Kinesis Data Firehose 的特色

瀏覽功能頁面
準備好開始使用了嗎?
註冊
還有其他問題嗎?
連絡我們