Amazon MSK Replicator がレプリケーションの可視化のためのログ転送をサポート
Amazon MSK Replicator は、レプリケーションの状態をエンドツーエンドで可視化するためのレプリケーターログを提供するようになりました。レプリケーターログには、重要なレプリケーションイベントとエラー、および各問題の解決方法に関するガイダンスが表示されるため、AWS サポートに問い合わせることなく、より迅速にトラブルシューティングを行うことができます。
MSK Replicator は Amazon MSK の機能の 1 つで、Kafka クラスター間のデータレプリケーションを自動化します。これにより、カスタムレプリケーションインフラストラクチャを管理したり、オープンソースツールを設定したりする必要がなくなります。これまでは、Amazon CloudWatch メトリクスを使用してレプリケーションの進行状況を追跡し、レプリケーションの状態を可視化できました。今回のリリースにより、MSK Replicator は、ソーストピックの権限不足、ターゲットクラスターのパーティションクォータの枯渇、レコードのサイズ制限超過など、最も一般的なレプリケーションエラーをログエントリに表示し、各問題の解決方法に関する具体的なガイダンスを提供することで、レプリケーション中の問題の診断をさらに簡素化します。 MSK Replicator は、オフセットコミット、トピック検出イベント、レプリケーター内部で使用される Kafka クライアントからのエラーや警告など、定常状態のレプリケーションアクティビティをログに記録します。これにより、レプリケーションの状態をエンドツーエンドで可視化できます。 Amazon MSK コンソール、AWS CLI、または AWS CloudFormation を使用してレプリケーターを作成または更新する際にログ配信を有効にし、ログを Amazon CloudWatch、Amazon S3、または Amazon Data Firehose に転送できます。
この機能は、MSK Replicator が利用可能なすべての AWS リージョンでサポートされています。ログ配信コストは、選択した送信先サービスによって異なります。Amazon CloudWatch、Amazon S3、および Amazon Data Firehose の料金ページを参照してください。