Функция «Качество данных AWS Glue» позволяет бесплатно обнаруживать аномалии ETL и улучшает прогнозирование аномалий
Функция «Качество данных AWS Glue» теперь предлагает улучшенное обнаружение аномалий благодаря новому режиму наблюдения, который снижает количество обнаруженных ложных аномалий и устраняет плату за обнаружение аномалий в заданиях ETL. Клиенты, использующие рабочие процессы на основе блокнотов или исследовательские рабочие процессы, теперь выигрывают от интеллектуального обнаружения аномалий, позволяющего эффективно обрабатывать поступление данных с нерегулярными интервалами. Эта новая возможность позволяет избежать чрезмерной экстраполяции трендов, используя постоянный базовый уровень вместо линейного тренда, что обеспечивает более точные оповещения и снижает уровень шума, чтобы команды могли сосредоточиться на реальных аномалиях.
Новый режим наблюдения за обнаружением аномалий особенно полезен для исследовательского анализа данных, наборов данных с плоскими или случайными шаблонами, рабочих нагрузок без предсказуемых трендов и в случаях, когда вы проводите проверки качества данных по разным графикам или в интерактивных средах, таких как блокноты. Кроме того, обнаружение аномалий для заданий AWS Glue ETL теперь доступно без дополнительной оплаты, поэтому вы можете отслеживать аномалии качества данных во всех конвейерах Glue, не беспокоясь о ценах.
Эти улучшения доступны во всех коммерческих регионах AWS и регионах AWS GovCloud (США).
Для начала работы ознакомьтесь с документацией по функции «Качество данных AWS Glue». Подробнее о ценах см. на странице цен на AWS Glue.