Amazon SageMaker Unified Studio, 데이터 처리 작업을 위한 AWS Glue 5.1 지원 시작
Amazon SageMaker Unified Studio가 이제 Visual ETL, 노트북 및 코드 기반 데이터 처리 작업에 AWS Glue 5.1을 지원합니다. Amazon SageMaker Unified Studio에서 AWS Glue 5.1을 사용하면, 데이터 엔지니어와 데이터 과학자는 Python 3.11 및 Scala 2.12.18이 탑재된 Apache Spark 3.5.6에서 작업을 실행할 수 있습니다. 또한, Apache Iceberg 1.10.0, Apache Hudi 1.0.2, Delta Lake 3.3.2 등 업데이트된 오픈 테이블 형식 라이브러리를 활용할 수 있습니다.
Amazon SageMaker Unified Studio에서 AWS Glue 5.1을 사용하려면 데이터 처리 작업을 생성할 때 작업 설정의 버전 드롭다운에서 Glue 5.1을 선택하면 됩니다. 이는 Visual ETL 작업, 노트북 작업 및 코드 기반 작업에 모두 적용되므로, 모든 데이터 처리 워크플로에서 최신 Spark 런타임 및 오픈 테이블 형식 라이브러리를 활용할 수 있습니다.
Amazon SageMaker Unified Studio의 AWS Glue 5.1은 Amazon SageMaker Unified Studio를 사용할 수 있는 모든 리전에서 제공됩니다. 자세한 내용은 Amazon SageMaker Unified Studio 설명서를 참조하세요. 업데이트된 오픈 테이블 형식 지원, 액세스 제어 기능을 비롯하여 AWS Glue 5.1에 포함된 기능은 AWS Glue 설명서에서 자세히 알아볼 수 있습니다.