التخزين بلا خادم على Amazon EMR بلا خادم يدعم الآن shuffle على نطاق تيرابايت
يوفر Amazon EMR بلا خادم الآن إمكانات تخزين محسّنة بلا خادم مع دعم ما يصل إلى 1 تيرابايت من عمليات shuffle، مما يرفع الحد السابق البالغ 200 جيجابايت لكل مهمة. Amazon EMR بلا خادم يجعل من السهل على مهندسي البيانات وعلماء البيانات تشغيل أطر عمل تحليلات البيانات الضخمة مفتوحة المصدر دون تكوين الكُتل أو الخوادم وإدارتها وتوسيع نطاقها. يمكّن هذا التحسين عملاء المؤسسات من تشغيل أعباء عمل Apache Spark على مستوى الإنتاج والتي تتطلب معالجة كميات كبيرة من بيانات shuffle أثناء العمليات المعقدة مثل عمليات الربط والتجميع والفرز.
يمكن لفرق البيانات في المؤسسات الآن بكل ثقة ترحيل أعباء عمل الإنتاج التي تعالج بشكل روتيني مجموعات البيانات بحجم تيرابايت دون القلق بشأن قيود التخزين. يعد هذا التحسين مفيدًا بصورة خاصة لأعباء العمل التي تتضمن عمليات ربط الجداول الكبيرة عبر مجموعات بيانات أحجامها عدة تيرابايت، وعمليات التجميع المعقدة للبيانات ذات عدد مرتفع من القيم المميزة التي تتطلب كميات كبيرة من البيانات لعمليات shuffle. تضمن إضافة دعم spill أن المهام يمكنها التعامل بسلاسة مع العمليات التي تتطلب ذاكرة كبيرة عن طريق تفريغ البيانات إلى القرص عند الضرورة، وتحسين موثوقية المهام ومعدلات النجاح لأعباء العمل التحليلية المتطلبة.
تتوفر هذه الميزة مع Amazon emr-7.14 وemr-spark-8.1 والإصدارات الأحدث، في 18 منطقة من مناطق AWS حيث تتوفر خدمة Amazon EMR بلا خادم. راجع وثائق Amazon EMR للحصول على القائمة الكاملة للمناطق المدعومة وحدودها المطبقة.
لمعرفة المزيد حول Amazon EMR بلا خادم والبدء في استخدام دعم عمليات shuffle على نطاق تيرابايت، تفضل بزيارة صفحة Amazon EMR بلا خادم.