オブザーバビリティ

Amazon OpenSearch Service は、オブザーバビリティの問題を解決するのに役立つ新しい機能を提供します。オープンインターフェイスを使用して、テレメトリデータ (OpenTelemetry、Fluentd、Fluent Bit、Logstash、Data Prepper などを含む) を収集、ルーティング、および変換します。ネイティブ機能を使用して、大量の半構造化データを検索および分析できます。OpenSearch Dashboards の異常検出オブザーバビリティ機能を使用して、視覚化、モニタリング、およびアラートを実行し、クエリインターフェイスである Piped Processing Language (PPL) を使用してデータのインタラクティブな分析と視覚化を実行できます。

Amazon OpenSearch Service は、オブザーバビリティ、トレース分析、ログ分析、およびアプリケーションパフォーマンスモニタリング (APM) の問題に次の 4 つの次元でアプローチします。

収集: まず、分析のためにデータを収集する必要があります。収集には、複数のソースからのデータの収集、強化、フィルタリング、変換、および正規化が含まれます。

検出: 多くの場合、お客様の下で問題が発生しても、その問題がすぐに検出されるわけではありません。問題が発生してから通知されるまでに時間がかかることがよくあります。この時間は可能な限り短くすべきです。検出はプロアクティブかつ多面的である必要があります (テレメトリのアラームなど)。異常検出は重要なツールであり、関連するアラームをリンクさせてアラーム疲れを軽減するための機能も備えています。検出のコアコンポーネントには視覚化とモニタリングも含まれており、Amazon OpenSearch Service は OpenSearch Dashboards と呼ばれるコンポーネントを使用してこれを実行します。 PPL などのツールを使用してデータをインタラクティブに分析することもできます。

調査: 調査は、運用イベント中に最も多くの時間が費やされる段階であり、通常、調査には複数の人員が必要です。これは、平均インシデント時間 (MTTI) と平均復旧時間 (MTTR) の最大の要因です。混乱を切り抜け、何に注力すべきかを理解することは、依然として困難な課題です。ログ、メトリクス、トレースを使用して、AWS、オンプレミス、またはその他のクラウドでメトリクス、ログ、およびトレースを相互に関連付けながら、根本原因の分析を迅速に実施できます。OpenSearch Dashboard ノートブックを使用して調査に協力し、分析結果を文書化します。

修復: 障害の原因を特定したら、それを修復する必要があります。何かを修復しようとして状況を悪化させることほど悪いことはありません。障害の発生に先立って失敗を防ぐにはどうすればよかったのかを判断するために、事後分析を実施することを忘れないでください。問題の再発を防ぐことができるように、提案された変更を文書化します。目標は、同じ問題が再発しないようにすることですが、再発した場合は、それを自動的に特定して修正できるようにする必要があります。

ログ分析については、取り込みパイプを構築するためのタスクがいくつかあります。プロデューサーは、バックエンドサーバー、AWS のサービス、ウェブサーバーなどです。これには、OpenTelemetry、AWS Distro for OpenTelemetry、Jaeger、Zipkin が含まれます。コレクターはソースからデータを移動し、場合によってはデータをローカルに変換します。AWS ネイティブサービスについては、Amazon Kinesis Agent または Amazon CloudWatch Agent を使用できます。オープンソースについては、一般的なコレクターは、Elastic Beats、Fluentd、Fluentbit、または OpenTelemetry Collector です。アグリゲーターはコレクターからの情報をバッファリングします。これにより、Amazon OpenSearch Service への全体的な接続が大幅に減少します。その後、Amazon OpenSearch Service はアグリゲーターの結果をインデックス化して分析します。結果を視覚化してモニタリングするために、OpenSearch Dashboards または Kibana を使用できます。

場合によっては、アプリケーションパフォーマンスモニタリング (APM) がオブザーバビリティの最初の成熟度レベルになります。しかし、APM だけでは十分ではありません。アプリケーションモニタリングダッシュボードがすべて緑色であっても、アプリケーションは実際に想定どおりに動作していますか? お客様には必要なユーザーエクスペリエンスが提供されていますか? アプリケーションの用途は何ですか? アプリケーションのどの部分がスケール制限に達していますか? 最も大きく成長しているのはどの地域ですか? どの傾向を視覚化して計画できますか? メトリクスを収集できれば、新しいコードをデプロイしたり、インフラストラクチャを変更したりするときに、これらの変更の影響を確認できるので、確信に基づいて対応できます。オブザーバビリティにより、APM はこれらの追加の質問に対する回答を提供できます。

Amazon OpenSearch Service のオブザーバビリティ機能を使用すると、単純なモニタリングを超えて、どのようなイベントが発生しているのかだけでなく、なぜ発生しているのかを理解することができます。このワークショップでは、ユーザーフロントエンドからサービスバックエンドまで、およびその間のあらゆるものについて、メトリクス、トレース、およびログデータを計測、収集、分析する方法を学びます。これを Amazon OpenSearch Service、AWS Distro for OpenTelemetry、FluentBit、および Data Prepper と組み合わせます。