Amazon MSK ahora admite hasta 5 veces más particiones en agentes de Express
Amazon Managed Streaming para Apache Kafka (Amazon MSK) ahora admite hasta 5 veces más particiones por agente de Express. Esto mejora la relación precio-rendimiento hasta un 50 % para las cargas de trabajo vinculadas a particiones. Los agentes de Express son un tipo de agente de Amazon MSK que ofrecen un rendimiento hasta 3 veces más alto, un escalado hasta 20 veces más veloz y una recuperación hasta un 90 % más rápida en comparación con los agentes estándar de Apache Kafka. Con este lanzamiento, las cargas de trabajo vinculadas a particiones se pueden alojar en menos agentes. Por ejemplo, las instancias m7g.16xlarge ahora admiten hasta 20 000 particiones por agente, en comparación con las 4000 particiones admitidas anteriormente. Para mejorar aún más la resiliencia de sus clústeres, Amazon MSK ahora también limita el número máximo de particiones que se pueden crear por agente de Express. Estas cuotas ayudan a mantener la estabilidad del clúster al evitar que los recuentos de particiones superen los umbrales seguros en estos límites más altos.
El aumento en la compatibilidad con particiones es especialmente valioso para las aplicaciones de streaming que requieren numerosos temas, las arquitecturas de microservicios con muchos temas pequeños y las canalizaciones de ingesta de datos que admiten múltiples fuentes de datos, etc. Estas mejoras ya están disponibles en todas las regiones de AWS en las que se ofrecen agentes de Amazon MSK Express, sin costo adicional. Para obtener más información sobre los límites de partición para diferentes tipos de instancias y las prácticas recomendadas para escalar las cargas de trabajo de Apache Kafka, consulte nuestra documentación.