Amazon Athena para Apache Spark ya está disponible en los cuadernos de Amazon SageMaker
Amazon SageMaker ahora es compatible con Amazon Athena para Apache Spark. Esto reúne una nueva experiencia de bloc de notas y una experiencia rápida de Spark sin servidor en un espacio de trabajo unificado. Ahora, los ingenieros de datos, los analistas y los científicos de datos pueden consultar datos, ejecutar código Python, desarrollar trabajos, entrenar modelos, visualizar datos y trabajar con inteligencia artificial fácilmente desde un solo lugar, sin infraestructura que administrar ni facturación de segundo nivel.
Athena para Apache Spark se desescala horizontalmente en segundos para soportar cualquier carga de trabajo, desde consultas interactivas hasta trabajos a escala de petabytes. Athena para Apache Spark ahora se ejecuta en Spark 3.5.6, el mismo motor Spark de alto rendimiento disponible en AWS, optimizado para formatos de tablas abiertas, como Apache Iceberg y Delta Lake. Incluye nuevas características de depuración, supervisión en tiempo real en la interfaz de usuario de Spark y comunicación interactiva segura entre clústeres a través de Spark Connect. A medida que utiliza estas capacidades para trabajar con sus datos, Athena for Spark ahora aplica los controles de acceso en las tablas, los cuales se definen en AWS Lake Formation.
Athena para Apache Spark ya está disponible con los cuadernos de Amazon SageMaker en todas las regiones en las que se admite Amazon SageMaker Unified Studio. Para obtener más información, visite la versión 3.5 del motor Apache Spark, lea el AWS News Blog o consulte la documentación de Amazon SageMaker. Visite la guía de introducción para probar esta funcionalidad desde los cuadernos de Amazon SageMaker.