Inserito il: Jun 15, 2020
Amazon EMR ora mantiene invariato il server temporale YARN e l'interfaccia utente di Tez (IU) insieme ai registri di eventi e container all'esterno del cluster. Adesso puoi eseguire il debug e monitorare le tue applicazioni YARN indipendentemente dal ciclo di vita del cluster accedendo direttamente alle interfacce Web tramite la console EMR. Il server della sequenza temporale YARN e l’interfaccia utente Tez sono applicazioni open source che forniscono metriche e strumenti visivi per i cluster attivi e terminati.
Il debug delle applicazioni distribuite richiede l’analisi tramite i log da più origini. YARN (scheduler risorse), Tez (framework di Big Data) e Spark (motore di analisi) migliorano l’esperienza di debug sovrapponendo i log al contesto di esecuzione e presentando un'interfaccia utente intuitiva. Tuttavia, è necessario eseguire più fasi connettendosi al nodo principale per visualizzare le interfacce Web sul cluster EMR per motivi di sicurezza. Inoltre, se si esegue un cluster temporaneo, l'interfaccia utente non sarà disponibile una volta terminato il cluster. Amazon EMR semplifica il debug e il monitoraggio introducendo il server Spark History permanente, il server temporale YARN e l'interfaccia utente di Tez accessibile direttamente dalla console EMR.
Per iniziare a utilizzare il server temporale YARN e l’interfaccia utente Tez, visita la Console di gestione AWS.
Questa funzionalità è disponibile se si usa EMR versione 6.0.0 o successiva e nelle seguenti regioni: Stati Uniti orientali (Virginia settentrionale e Ohio), Stati Uniti occidentali (California settentrionale e Oregon), Canada (Centrale), UE (Francoforte, Irlanda e Londra) e Asia Pacifico (Mumbai, Seul, Singapore, Sydney e Tokyo).