Amazon SageMaker Unified Studio 노트북, 이제 EMR Serverless 지원
Amazon SageMaker Unified Studio 노트북이 Apache Spark Connect와 함께 Amazon EMR Serverless를 지원합니다. 이제 데이터 엔지니어와 분석가는 대화형 분석과 데이터 엔지니어링 워크로드를 위한 Spark 런타임을 더 유연하게 선택할 수 있습니다. 사용자는 이제 Amazon Athena Spark 뿐만 아니라 Amazon EMR Serverless를 Spark 런타임으로 활용하여 요구 사항에 따라 최적의 엔진을 선택할 수 있습니다.
이번 출시로 노트북 셀의 EMR Serverless Spark 애플리케이션에서 PySpark와 Spark SQL을 실행할 수 있습니다. 사용자는 노트북 사이드 패널에서 Spark 런타임을 선택할 수 있으며, 선택한 런타임은 Python과 SQL 셀 모두에 적용됩니다. 또한 사용자는 내장된 AI 어시스턴트인 SageMaker Data Agent를 활용하여 자연어 프롬프트에서 코드와 실행 계획을 생성하고 EMR Serverless를 통해 Spark 개발 워크플로를 가속화할 수 있습니다. 조직은 사전 초기화된 용량을 활용하여 세션 시작 시간을 단축하고, 지원되는 모든 엔진에서 통합 Spark UI 모니터링을 활용하여 작업 실행과 성능에 대한 일관된 가시성을 확보할 수 있습니다. 또한 EMR Serverless는 네트워크 격리가 필요한 워크로드에 VPC 연결 지원을 제공합니다.
이 기능은 Amazon SageMaker Unified Studio가 제공되는 모든 AWS 리전에서 사용할 수 있으며, SageMaker Unified Studio 노트북과 JupyterLab IDE 환경을 모두 지원합니다. 시작하려면 Amazon SageMaker Unified Studio 사용 설명서를 참조하세요.