Репликатор Amazon MSK теперь поддерживает улучшенную синхронизацию смещений для двунаправленной репликации
Репликатор Amazon MSK теперь обеспечивает лучшую синхронизацию смещений потребителей при двунаправленной репликации, что позволяет приложениям после перемещения между кластерами Kafka возобновлять обработку данных с нужной точки. Это делает возможным независимое перемещение приложения производителей и потребителей из кластера в кластер в любом порядке без риска потери данных.
Репликатор MSK – это функция Amazon MSK, которая автоматизирует репликацию данных между кластерами Kafka, устраняя необходимость в управлении собственной инфраструктурой репликации или настройке инструментов с открытым исходным кодом. Ранее при двунаправленной репликации с помощью смещения групп потребителей синхронизировались только в том случае, если производители и потребители работали в одном кластере. Это требовало тщательного соблюдения последовательности перемещений из кластера в кластер и повышало риск дублирования информации при отмене произведенных изменений. Благодаря этому обновлению Репликатор MSK синхронизирует смещения групп потребителей в исходном и целевом кластерах независимо от того, где работают производители, что позволяет приложениям перемещаться между кластерами без ограничений или риска дублирования.
Улучшенную синхронизацию смещений можно включить при создании репликатора с помощью консоли Amazon MSK, интерфейса командной строки AWS или сервиса AWS CloudFormation. Эта возможность поддерживается во всех регионах AWS, где доступен Репликатор MSK.
Дополнительные сведения вы найдете в документации по Репликатору MSK, на странице продукта, странице цен и в публикации в блоге AWS.