يدعم Amazon EMR الآن Apache Spark 4.0.2 في التوفر العام
يدعم Amazon EMR الآن Apache Spark 4.0.2 عبر جميع نماذج النشر الثلاثة. باستخدام Spark 4.0.2، يمكنك إنشاء مسارات البيانات والحفاظ عليها بسهولة أكبر باستخدام أنواع بيانات ANSI SQL وVARIANT، وفرض تحكم دقيق في الوصول (FGAC) على مستوى الصف أو مستوى العمود، وتعزيز أطر عمل الامتثال والحوكمة باستخدام تنسيق جداول Apache Iceberg v3، ونشر تطبيقات جديدة أسرع في الوقت الفعلي بفضل إمكانيات البث المُحسَّنة.
باستخدام Spark 4.0.2، يمكنك إنشاء مسارات البيانات، مما يجعل هندسة البيانات في متناول نطاق أوسع من المستخدمين من خلال دعم ANSI SQL القياسي، مما يلغي الحاجة إلى تعلم بناء الجملة الخاص بـ Spark. يدعم Spark 4.0.2 أصلًا JSON والبيانات المهيكلة من خلال أنواع بيانات VARIANT، مما يوفر المرونة للتعامل مع تنسيقات البيانات المتنوعة. يمكنك فرض التحكم الدقيق في الوصول (FGAC) على كلتا عمليات القراءة والكتابة لجداول AWS Lake Formation المسجلة في وظائف Apache Spark الخاصة بك. وبناءً على هذه القدرات الأمنية، يوفر تنسيق جدول Apache Iceberg v3 ضمانات أقوى للمعاملات ويتتبع نسب البيانات، مما يؤدي إلى إنشاء مسارات التدقيق المطلوبة للامتثال التنظيمي. تعمل عناصر التحكم في البث المُحسَّنة على تبسيط إدارة العمليات المعقدة المعتمدة على الحالة وتحسين المراقبة، مما يتيح لك نشر تطبيقات الوقت الفعلي لاكتشاف الاحتيال، والتخصيص، وغيرها من حالات الاستخدام الحساسة للوقت بصورة أسرع.
يتوفر Apache Spark 4.0.2 في جميع المناطق التي تتوفر فيها EMR. إذا كنت تقوم بترقية تطبيق EMR الحالي الخاص بك، يمكنك استخدام وكيل ترقية Apache Spark لتسريع عمليات الترقية الخاصة بك. لمعرفة المزيد حول Apache Spark 4.0.2 على Amazon EMR، اطّلع على ملاحظات إصدار Amazon EMR، أو ابدأ بإنشاء تطبيق EMR باستخدام Spark 4.0.2 من وحدة إدارة تحكم AWS.