AWS Glue теперь предоставляет очередь заданий
Сегодня в AWS добавлена очередь заданий AWS Glue. Эта новая возможность позволяет отправлять запуски заданий AWS Glue без необходимости управлять квотами и ограничениями на уровне аккаунта.
Очередь заданий AWS Glue отслеживает квоты и ограничения на уровне вашего аккаунта. Если квот или ограничений недостаточно для запуска задания Glue, AWS Glue автоматически поставит задание в очередь и дождется освобождения ресурсов. Как только ресурсы станут доступны, AWS Glue повторит запуск задания. При постановке заданий Glue в очередь на них будут распространяться такие ограничения, как максимальное количество одновременных запусков заданий на аккаунт, максимальное количество одновременных блоков обработки данных (DPU) и недоступность ресурсов из-за исчерпания IP-адресов в Amazon Virtual Private Cloud (Amazon VPC). Очередь заданий AWS Glue можно включить для заданий с помощью Консоли управления AWS или API/CLI.
Очередь заданий AWS Glue доступна во всех коммерческих регионах AWS, в которых сервис AWS Glue является общедоступным. Чтобы узнать больше, посетите страницу продукта AWS Glue, ознакомьтесь с нашей документацией или с публикацией в блоге.