В Единую студию Amazon SageMaker добавлена возможность наблюдения за заданиями AWS Glue с помощью метрик CloudWatch
Единая студия Amazon SageMaker обеспечивает возможность наблюдения за заданиями. Теперь метрики Amazon CloudWatch для заданий AWS Glue отображаются непосредственно вместе с журналами заданий в едином унифицированном интерфейсе. Это усовершенствование добавляет наблюдаемость в Единую студию SageMaker, позволяя специалистам по обработке данных и разработчикам ETL оптимизировать процессы устранения неполадок.
Благодаря этой функции команды могут быстрее диагностировать проблемы с производительностью, сопоставляя модели использования ресурсов, включая загрузку блока обработки данных (DPU), потребление памяти, загрузку процессора и объем перемещаемых данных, непосредственно с выводом журнала заданий. Конкретные примеры использования включают выявление узких мест в вычислительных системах, обнаружение дефицита памяти или ситуаций выхода за ее пределы, оптимизацию распределения ресурсов и мониторинг производительности конвейера данных в нужном масштабе. Объединяя метрики и журналы в одном рабочем пространстве, организации могут значительно сократить среднее время решения (MTTR) проблем с конвейером ETL и повысить общую операционную эффективность.
Эта функция теперь предлагается во всех регионах AWS, в которых общедоступна Единая студия Amazon SageMaker. Чтобы получить доступ к метрикам CloudWatch, перейдите к любому заданию Glue в Единой студии SageMaker, откройте предыдущее задание и выберите вкладку «Метрики» для просмотра исчерпывающих данных о производительности.
Чтобы узнать больше о Единой студии Amazon SageMaker и этой новой возможности, посетите страницу Единой студии SageMaker и ознакомьтесь с документацией.