Annuncio degli aggiornamenti di IA generativa per Apache Spark in AWS Glue (anteprima)

Inserito il: 22 nov 2024

AWS Glue annuncia aggiornamenti basati su IA generativa per Apache Spark, una nuova funzionalità di IA generativa che consente ai professionisti dei dati di aggiornare e modernizzare rapidamente i loro processi di Spark esistenti. Basata su Amazon Bedrock, questa funzionalità automatizza l'analisi e l'aggiornamento degli script e delle configurazioni di Spark, riducendo il tempo e le risorse necessarie per gli aggiornamenti di Spark da settimane a minuti.

AWS Glue è un servizio scalabile di integrazione dati serverless che semplifica l'individuazione, la preparazione e la combinazione dei dati per l'analisi, il machine learning e lo sviluppo di applicazioni. Con Spark Upgrades, puoi avviare aggiornamenti automatici con un solo clic nella console AWS Glue per modernizzare i tuoi processi di Spark da una versione precedente alla versione 4.0 di AWS Glue. Questa funzionalità analizza i tuoi processi di Spark basati su Python e genera piani di aggiornamento che descrivono in dettaglio le modifiche al codice e alla configurazione. Sfrutta l'IA generativa per migliorare e convalidare iterativamente il codice aggiornato eseguendo esecuzioni di test come processi di Glue. Una volta completata la convalida, riceverai un riepilogo dettagliato di tutte le modifiche da esaminare, per consentire una distribuzione sicura dei processi di Spark aggiornati. Questo approccio automatizzato riduce la complessità degli aggiornamenti di Spark mantenendo l'affidabilità delle pipeline di dati.

Gli aggiornamenti di IA generativa per l'anteprima di Apache Spark sono disponibili per AWS Glue nelle seguenti regioni AWS: Stati Uniti orientali (Ohio), Stati Uniti orientali (Virginia settentrionale), Stati Uniti occidentali (Oregon), Asia Pacifico (Tokyo) e Asia Pacifico (Sydney). Per ulteriori informazioni, visita il sito web di AWS Glue, leggi il blog sul lancio o consulta la documentazione.