Amazon MSK Replicator が外部 Apache Kafka クラスターから MSK Standard ブローカーへのレプリケーションをサポート
Amazon MSK Replicator は、オンプレミス、AWS でセルフマネージド、またはその他のクラウドプロバイダーを含む外部 Apache Kafka クラスターから Amazon MSK Standard ブローカーへのデータレプリケーションをサポートするようになりました。この機能により、MSK Express ブローカーへの既存のサポートに加えて、MSK Standard ブローカーへのレプリケーションサポートが拡張されます。このリリースにより、ワークロードを MSK Standard ブローカーに移行し、MSK クラスターをフェイルオーバーまたはバックアップターゲットとして使用することでディザスタリカバリをサポートし、ハイブリッド環境およびマルチクラウド環境全体でデータ分散することが可能になります。
MSK Replicator は Amazon MSK の機能の 1 つで、Kafka クラスター間のデータレプリケーションを自動化します。これにより、カスタムレプリケーションインフラストラクチャを管理したり、オープンソースツールを設定したりする必要がなくなります。従来、MSK Replicator は外部 Apache Kafka クラスターから MSK Express ブローカーへのレプリケーションのみをサポートしていました。このリリースにより、SASL/SCRAM または相互 TLS (mTLS) 認証のいずれかを使用して外部クラスターに接続し、外部 Kafka クラスターから MSK Standard ブローカーにデータをレプリケートできるようになりました。また、MSK Replicator を使用して Amazon MSK Standard から外部の Kafka クラスターにデータをレプリケートすることで、信頼性の高いフェイルバックやマルチクラウドデータ配信を実現することもできます。セルフマネージド型のレプリケーションツールとは異なり、MSK Replicator では、レプリケーション中に元の Kafka トピック名を保持しつつ、無限のレプリケーションループを自動的に回避します。さらに、コンシューマーグループのオフセットを双方向に同期するため、調整の制約やデータ損失のリスクなしに、プロデューサーとコンシューマーを任意の順序で、クラスター間で独立して移動できます。
この新しい機能は、Amazon MSK Replicator が利用可能なすべての AWS リージョンでサポートされています。詳細については、MSK Replicator のドキュメント、製品ページ、料金ページ、およびこちらの AWS ブログ投稿をご覧ください。