Amazon Elasticsearch Service 是一種全受管服務,它提供 Elasticsearch 易於使用且即時的 API,同時也提供生產工作負載所需的可用性、擴展性及安全性。Amazon Elasticsearch Service 非常適合用於日誌分析、應用程式監控、互動式搜尋及其他分析使用案例。但是從資料來源收集資料、進行轉換、映射並將其載入 Elasticsearch 索引是複雜且費時的工作。您必須將原始資料轉換成結構化資料格式 (如 JSON 或 CSV)、清理資料,然後將它映射到目標資料欄位。您也必須分批及緩衝處理資料以進行高效載入,這樣資料才可立即提供查詢,而不會讓叢集的運算和聯網資源超載。為了輕鬆完成這些所有的工作,您可以使用 Amazon Elasticsearch Service 與 Amazon Kinesis FirehoseLogstashAmazon CloudWatch LogsAWS IoT 的內建整合,端視您的特定使用案例需求而定。


您可以設定 Amazon Kinesis Firehose 先準備好串流資料,然後再將它載入 Amazon Elasticsearch Service。有了這項功能,您可以將資料來源的原始串流資料輕鬆轉換為 Elasticsearch 索引要求的格式,無須建立您自己的資料處理管道。

若要使用這項功能,只需從 AWS 管理主控台中的 Amazon Kinesis Firehose 交付串流組態標籤選取一個 AWS Lambda 函數。Amazon Kinesis Firehose 將自動套用 AWS Lambda 函數到每筆輸入資料記錄,並將轉換後的資料載入 Amazon Elasticsearch 索引。

Amazon Kinesis Firehose 提供預先建立的 Lambda 藍圖,這些藍圖可將 Apache 日誌和系統日誌這類常見的資料來源轉換為 JSON 和 CSV 格式。您可以直接使用這些預先建立的藍圖,不需進行任何變更,或是進一步自訂它們,甚至是編寫您自己的自訂函數。您也可以設定 Amazon Kinesis Firehose 自動重試失敗的任務,以及備份原始串流資料。進一步了解 »


Amazon Elasticsearch Service 支援與 Logstash 整合,它是一個開放原始碼資料處理工具,可從來源收集資料、進行轉換,然後載入 Elasticsearch。您可輕鬆地在 Amazon EC2 上部署 Logstash,並設定 Amazon Elasticsearch 網域做為後端存放區,用來儲存透過 Logstash 實作時產生的所有日誌。Logstash 支援預先建立的篩選條件庫,以輕鬆執行一般轉換,例如透過模式比對將非結構化日誌資料剖析為結構化資料;重新命名、移除、取代和修改資料記錄中的欄位;以及彙總指標。進一步了解 »


Amazon CloudWatch Logs 可讓您透過現有系統、應用程式和自訂日誌檔來監控系統和應用程式,以及進行故障排除。您可以透過 CloudWatch Logs 訂閱設定 CloudWatch Logs 日誌群組,以近乎即時的速度將資料串流到 Amazon Elasticsearch Service 網域。如果您已經使用 CloudWatch Logs 來收集日誌資料,而且想要將此資料與 Amazon Elasticsearch Service 使用者共享,則這個整合非常方便。進一步了解 »


AWS IoT 是一個受管的雲端平台,可讓連線的裝置輕鬆安全地與雲端應用程式及其他裝置進行互動。透過 AWS IoT,您可以從連線裝置 (例如,家用電器、內嵌感應器以及電視機上盒) 擷取資料,並從 AWS 管理主控台設定 AWS IoT,將資料直接載入 Amazon Elasticsearch Service。這可讓您為客戶提供近乎即時的 IoT 資料和指標存取。進一步了解 »

您要根據特定使用案例的需求 (例如,資料延遲和資料類型),選擇正確的導入機制。對於大量資料,我們建議使用 Amazon Kinesis Firehose,它是一種全受管的服務,可自動擴展以因應資料的輸送量,而且不需要全程管理。它也可以先轉換、壓縮和分批資料,然後再將資料載入 Amazon Elasticsearch Service 網域。選擇時通常也要將已使用的服務列入考慮。例如,假設您已經使用 Amazon CloudWatch Logs 收集應用程式日誌,您只需將該資料載入 Amazon Elasticsearch Service 網域即可,無須執行其他操作。

開始試用我們的免費方案,此方案包含每月多達 750 小時的單一可用區 t2.micro.elasticsearch 或 t2.small.easticsearch 執行個體和每月 10 GB 的選用 Amazon EBS 儲存免費用量。

免費試用