Бессерверная конфигурация Amazon EMR теперь поддерживает более крупные рабочие узлы для выполнения рабочих нагрузок, требующих больший объем вычислительных ресурсов и памяти
Бессерверная конфигурация Amazon EMR теперь предлагает более крупные конфигурации рабочих узлов из 32 виртуальных процессоров и с максимум 244 ГБ памяти, что позволяет выполнять более требовательные к вычислениям и памяти рабочие нагрузки. Ранее самая большая конфигурация рабочих узлов, доступная в Бессерверной конфигурации EMR, состояла из 16 виртуальных процессоров с объемом памяти до 120 ГБ. Более крупные рабочие узлы могут помочь вам улучшить производительность среды выполнения, а также профили затрат для ваших рабочих нагрузок.
При выполнении рабочих нагрузок с большим количеством операций обменов данных более крупные рабочие узлы сокращают неэффективную передачу данных между исполнителями. При выполнении заданий с расфазировкой данных более крупные рабочие узлы снижают вероятность сбоев из-за нехватки памяти. Для заданий, требующих кэширования данных, более крупные рабочие узлы позволяют хранить больше данных в памяти, что повышает производительность задания. Чтобы воспользоваться этими преимуществами, мы рекомендуем использовать более крупные рабочие узлы для рабочих нагрузок Spark и Hive, требующих больших вычислительных ресурсов и памяти.
Чтобы узнать больше о различных конфигурациях рабочих узлов, ознакомьтесь с документацией по Бессерверной конфигурации EMR. Более крупные рабочие узлы доступны во всех регионах AWS, в которых доступна Бессерверная конфигурация EMR.