張貼日期: Jun 15, 2020

Amazon EMR 現在將 YARN 時間軸伺服器和 Tez 使用者界面 (UI) 連同事件和容器日誌一起保留在叢集外部。現在,您可以透過使用 EMR 主控台直接登入 Web 界面,來偵錯和監控與叢集生命週期無關的 YARN 應用程式。YARN 時間軸伺服器和 Tez UI 為開放原始碼應用程式,可為作業中和終止的叢集提供指標和視覺化工具。 

偵錯分散式應用程式需要剖析多個來源的日誌。原生 YARN (資源排程器)、Tez (大數據框架) 和 Spark (分析引擎) 可透過將日誌覆蓋到執行內容並呈現直覺式 UI,來提升偵錯體驗。但是,出於安全原因,您需要透過連接主節點來檢視 EMR 叢集上的 Web 界面,以執行多個步驟。此外,如果您執行的是暫時性叢集,則叢集終止後將無法使用 UI。Amazon EMR 透過引入可從 EMR 主控台直接存取的持續 Spark 記錄伺服器、YARN 時間軸伺服器和 Tez UI,簡化了偵錯和監控程序。 

若要開始使用 YARN 時間軸伺服器和 Tez UI,請瀏覽 AWS 管理主控台。 

此功能適用於 EMR 版本 6.0.0 及更新版本,可在美國東部 (維吉尼亞北部和俄亥俄)、美國西部 (加州北部和奧勒岡)、加拿大 (中部)、歐洲 (法蘭克福、愛爾蘭和倫敦) 以及亞太區域 (孟買、首爾、新加坡、雪梨和東京) 等區域使用。