AWS Glue теперь поддерживает новые рабочие узлы для более крупных рабочих нагрузок с интенсивным использованием памяти
AWS Glue предлагает новые дополнительные типы рабочих узлов для самых разных нужд в области интеграции и обработки данных. В число новых рабочих узлов входят более крупные универсальные вычислительные узлы G.12X и G.16X, а также четыре новых узла с оптимизацией памяти R.1X, R.2X, R.4X и R.8X, предназначенные для рабочих нагрузок AWS Glue с интенсивным использованием памяти. Теперь клиенты Glue могут выполнять более сложные преобразования, агрегирования, объединения и запросы, а также быстро обрабатывать большие объемы данных с помощью Apache Spark.
Новые рабочие узлы G.12X и G.16X расширяют имеющийся ассортимент размеров узлов серии G, предлагая больше вычислительных ресурсов, памяти и хранилища. Эти рабочие узлы идеально подходят для клиентов с большими и ресурсоемкими рабочими нагрузками. Новые рабочие узлы R.1X, R.2X, R.4X и R.8X предоставляют вдвое больше памяти по сравнению с рабочими узлами серии G, благодаря чему они подходят для рабочих нагрузок с операциями Spark, интенсивно использующими память, такими как кэширование, перемешивание и агрегирование. Клиенты могут выбрать эти новые типы рабочих узлов в AWS Glue Studio, используя ноутбуки или Визуальный инструмент ETL, либо посредством API-интерфейсов Jobs для Glue.
Подробнее об этих новых типах рабочих узлов и регионах AWS, где они доступны, см. в документации AWS Glue.