发布于: Jan 20, 2022

我们宣布推出在使用 Amazon EMR 与 AWS Lake Formation 的集成时,支持使用 Apache Spark SQL 更新 Glue 数据目录表。

在 Apache Spark 用户通过 Glue 数据目录访问 Amazon S3 中的数据时,Amazon EMR 与 AWS Lake Formation 的集成可让您定义和实施数据库、表和列级权限。以前,启用 AWS Lake Formation 集成之后,只能使用 SHOW DATABASES 和 DESCRIBE TABLE 等 Spark SQL 语句读取数据。现在,您可以使用以下语句将数据插入 Glue 数据目录表和对其进行更新:INSERT INTO、INSERT OVERWRITE 和 ALTER TABLE。

该功能现已在以下 AWS 区域的 Amazon EMR 5.34 中推出:美国东部(弗吉尼亚北部)、美国东部(俄亥俄)、美国西部(加利福尼亚北部)、美国西部(俄勒冈)、欧洲(法兰克福)、欧洲(爱尔兰)、欧洲(伦敦)、欧洲(巴黎)、欧洲(米兰)、欧洲(斯德哥尔摩)、加拿大(中部)、亚太地区(孟买)、亚太地区(首尔)、亚太地区(新加坡)、亚太地区(东京)、亚太地区(悉尼)和南美洲(圣保罗)。

要开始使用,请参阅 Amazon EMR 与 AWS Lake Formation 的集成