ขณะนี้การปรับขนาดที่จัดการโดย Amazon EMR รับรู้ถึงตำแหน่ง Application Master แล้ว
วันนี้ เราตื่นเต้นเป็นอย่างยิ่งที่จะประกาศเปิดตัวการเพิ่มประสิทธิภาพครั้งใหม่ในการปรับขนาดที่จัดการโดย EMR ซึ่งช่วยปรับปรุงความทนทานต่อความเสียหายของแอปพลิเคชัน รวมถึงปรับขนาดคลัสเตอร์ตามความต้องการของผู้ดำเนินการและ ApplicationMasters โดยเพิ่มการรองรับป้ายกำกับโหนด Yarn ตามค่าเริ่มต้น Amazon EMR จะรับประกันว่ากระบวนการที่ควบคุมงานที่เรียกใช้อยู่และจำเป็นต้องคงอยู่ตลอดอายุของงาน (ApplicationMasters) สามารถเรียกใช้ได้ทั้งบนโหนดหลักและ Task Node อย่างไรก็ตาม ลูกค้าจำนวนมากโดยเฉพาะผู้ใช้ Spot Instance เพื่อเรียกใช้ Task Node เลือกที่จะเรียกใช้ ApplicationMasters บนโหนดหลักแบบ On-Demand เท่านั้น เพื่อให้แน่ใจว่างานที่เรียกใช้อยู่จะไม่ล้มเหลวหาก Application Master ที่เรียกใช้บน Spot Instance หยุดชะงัก การเปิดตัวในวันนี้ส่งผลให้การปรับขนาดที่มีการจัดการ EMR จะปรับขนาดคลัสเตอร์ตามความต้องการแล้วสำหรับคำขอของ AM หรือคำขอของผู้ดำเนินการแต่ละรายการตามที่ป้ายกำกับโหนด YARN กำหนดไว้ การปรับขนาดคลัสเตอร์อย่างชาญฉลาดตามความต้องการของ AM หรือผู้ดำเนินการจะทำให้ได้ประสิทธิภาพและการใช้งานที่ดีขึ้น รวมถึงค่าใช้จ่ายที่ต่ำลง
เมื่อใช้ EMR รุ่น 7.2 ขึ้นไปซึ่งเป็นส่วนหนึ่งของการเปิดตัวในวันนี้ Amazon EMR จะยังเอื้อให้คุณสามารถระบุนิพจน์ป้ายกำกับโหนด YARN ระดับแอปพลิเคชันตามประเภทตลาด ได้แก่ On-Demand หรือ Spot โดยก่อนหน้านี้ ลูกค้าสามารถระบุนิพจน์ป้ายกำกับโหนด YARN ได้ตามระดับประเภทโหนดเท่านั้น ได้แก่ แบบหลักหรือ Task แต่ตอนนี้ การเพิ่มประสิทธิภาพครั้งใหม่จะทำให้ลูกค้ามีความยืดหยุ่นเพิ่มเติมเพื่อให้ตอบสนองความต้องการต่อเวิร์กโหลดคลัสเตอร์ของคุณได้เหมาะสมยิ่งขึ้น
ฟีเจอร์นี้ใช้งานได้กับ Amazon EMR รุ่น 7.2 ขึ้นไปใน AWS Region ทุกแห่งที่การปรับขนาดที่จัดการโดย Amazon EMR พร้อมให้บริการ ดูเอกสารประกอบเกี่ยวกับการปรับขนาดที่มีการจัดการเพื่อเรียนรู้เพิ่มเติม