게시된 날짜: Jun 15, 2020
이제 Amazon EMR은 클러스터 외부의 이벤트 및 컨테이너 로그와 함께, YARN 타임라인 서버 및 Tez UI(사용자 인터페이스)를 영구적으로 지원합니다. 이제 EMR 콘솔을 통해 웹 인터페이스에 직접 로그인하여 클러스터의 수명 주기와 상관없이, YARN 애플리케이션을 디버깅 및 모니터링할 수 있습니다. YARN 타임라인 서버 및 Tez UI는 활성 및 종료된 클러스터에 대한 지표와 시각적 도구를 제공하는 오픈 소스 애플리케이션입니다.
분산된 애플리케이션을 디버깅하려면 여러 소스에서 로그를 구문 분석해야 합니다. 네이티브 YARN(리소스 스케줄러), Tez(빅 데이터 프레임워크) 및 Spark(분석 엔진)는 실행 컨텍스트에 로그를 오버레이하고 직관적 UI를 제공하여 디버깅 경험을 개선시킵니다. 그러나 보안상의 이유로 EMR 클러스터에서 웹 인터페이스를 보기 위해 마스터 노드에 연결하여 여러 단계를 거쳐야 합니다. 또한 임시 클러스터를 실행하는 경우 클러스터가 종료되면 UI를 사용하지 못합니다. Amazon EMR은 영구 Spark 히스토리 서버, YARN 타임라인 서버 및 EMR 콘솔에서 직접 액세스 가능한 Tez UI를 도입하여 디버깅 및 모니터링을 간소화합니다.
YARN 타임라인 서버 및 Tez UI를 시작하려면 AWS Management Console을 방문하십시오.
이 기능은 미국 동부(버지니아 북부 및 오하이오), 미국 서부(캘리포니아 북부 및 오레곤), 캐나다(중부), EU(프랑크푸르트, 아일랜드 및 런던) 및 아시아 태평양(뭄바이, 서울, 싱가포르, 시드니 및 도쿄) 리전의 EMR 버전 6.0.0 이상에서 사용할 수 있습니다.