تدعم AWS Lambda الآن قوائم الانتظار لـ Apache Kafka في مصادر أحداث Kafka المُدارة ذاتيًا
تدعم AWS Lambda الآن قوائم الانتظار لـ Apache Kafka في تخطيطات مصادر أحداث Kafka المُدارة ذاتيًا (ESM)، ولكتل Kafka التي يديرها العملاء بأنفسهم، وللعروض المُدارة مثل Confluent Cloud. يمكن للعملاء الآن توسيع نطاق معالجة أعباء عمل Kafka بما يتجاوز عدد أقسام الموضوع، وزيادة معدل النقل أثناء ارتفاع حركة المرور وتحسين مرونة المعالجة.
يتعامل العملاء الذين يبنون أعباء عمل Kafka القائمة على الأحداث لحالات الاستخدام مثل ترميز الصور والفيديو واكتشاف الاحتيال وتسليم الإشعارات واستيعاب القياس عن بُعد مع كل حدث كوحدة عمل مستقلة، حيث تكون سرعة المعالجة أكثر أهمية من الطلب الصارم. في السابق، استخدمت Kafka ESMs بروتوكول مجموعة عملاء Kafka، الذي يخصص كل قسم لمستهلك واحد بالضبط داخل مجموعة المستهلكين. كان على العملاء الذين يحتاجون إلى مستوى أعلى من التوازي تقسيم الموضوعات بشكل مفرط أو نقل حركة المرور إلى نظام انتظار منفصل، وإضافة البنية التحتية للتشغيل ورمز المنتج للحفاظ عليه. تم بناء دعم قائمة الانتظار لـ Kafka ESMs المُدارة ذاتيًا على مجموعات مشاركة Kafka، والتي تتوفر بشكل عام في Apache Kafka 4.2. يتيح هذا الإطلاق للعديد من مستطلعي الأحداث الاستهلاك بشكل متزامن من نفس القسم، حيث يدعم كل مستطلع أحداث ما يصل إلى 10 استدعاءات متزامنة. يؤدي هذا إلى فصل التوازي عن عدد الأقسام دون إجراء تغييرات على المنتجين أو تكوين الموضوع أو رمز الوظيفة. ونتيجة لذلك، يحصل العملاء على معدل نقل أعلى أثناء ارتفاع عدد الزيارات ومعالجة أكثر مرونة، لأن الحدث البطيء أو الفاشل لم يعد يحمل أحداثًا أخرى في نفس القسم. لا يحافظ وضع قائمة الانتظار على ترتيب الأقسام وهو مخصص لأعباء العمل التي لا تتطلب ذلك.
تتطلب هذه الإمكانية مجموعة Kafka مع تمكين مجموعات المشاركة، مثل Apache Kafka 4.2 أو الأحدث، وهي متاحة في جميع مناطق AWS التجارية حيث تتوفر Kafka ESM المُدارة ذاتيًا. للبدء، قم بإنشاء نظام Kafka ESM مُدار ذاتيًا مع تعيين وضع الاستهلاك على قائمة الانتظار من خلال وحدة إدارة تحكم AWS أو Lambda API أو AWS CLI أو AWS CloudFormation أو AWS SAM أو AWS CDK. يتم تطبيق التسعير القياسي لـ Lambda. العملاء الذين يقومون بتكوين الوضع الموفر لـ Kafka ESM المُدار ذاتيًا يدفعون أيضًا مقابل استخدام وحدة استطلاع الأحداث (EPU). لمعرفة المزيد، اطلع على دليل مطوري AWS Lambda وتسعير AWS Lambda.