发布于: Nov 26, 2023
AWS Glue 宣布推出新的 Glue 数据质量自动监测功能预览版,该功能使用 ML 提供支持的异常检测算法来检测难以发现的数据质量问题和异常。这可以帮助客户主动发现质量问题并进行修复,以便数据用户可以自信地做出业务决策。
数据工程师和分析师编写数据质量规则来测量和监控他们的数据。当规则知道数据的预期结果时,规则可以正常运行。但是,规则无法识别诸如缺失值突增或记录数突降等异常模式。借助这项新功能,数据工程师和分析师现在可以轻松启用异常检测算法,以分析一段时间内的数据统计信息并生成有关这些异常模式的见解。这项新功能还提供可以轻松添加到数据管道以进行持续监控的规则建议。有关更多信息,请参阅博客和文档。
此项新功能现已在如下 AWS 区域推出:美国东部(俄亥俄州)、美国东部(弗吉尼亚州北部)、美国西部(俄勒冈州)、亚太地区(东京)和欧洲地区(爱尔兰)。