게시된 날짜: Sep 15, 2023
오늘 AWS는 이제 Amazon EMR on EKS에서 공개 평가판으로 Apache Flink를 지원한다는 소식을 발표했습니다. 이번 출시로 이미 EMR을 사용하고 있는 고객은 동일한 Amazon EKS 클러스터에서 Apache Flink 애플리케이션을 다른 유형의 애플리케이션과 함께 실행할 수 있어 리소스 사용률을 높이고 인프라 관리를 간소화할 수 있습니다. 이미 Amazon EKS에서 빅 데이터 프레임워크를 실행하고 있는 고객은 이제 Amazon EMR을 통해 프로비저닝 및 관리를 자동화할 수 있습니다.
Apache Flink는 고객이 처리량이 많은 데이터 소스에서 실시간 스트림 처리를 실행하는 데 사용하는 오픈 소스 프레임워크입니다. 지금까지는 고객이 EKS에서 자체 관리형 Apache Flink 애플리케이션을 실행할 수는 있었지만, Apache Flink를 수동으로 설치하고 구성해야 했기 때문에 깊이 있는 이해가 필요했습니다. 오늘 출시로 고객은 Flink Kubernetes 연산자를 설치하기만 하면 되고, 이 연산자를 통해 EKS 클러스터에 직접 작업을 제출하고 EMR on EKS가 Apache Flink 애플리케이션의 수명 주기를 관리하도록 할 수 있습니다. 따라서 애플리케이션 전반에서 리소스를 공유하고 단일 Kubernetes 도구 세트를 사용하여 인프라를 중앙에서 모니터링하고 관리할 수 있습니다. 또한 이번 출시로 Amazon S3에서 jars를 사용한 Flink 애플리케이션 시작, Amazon S3 및 Amazon CloudWatch와의 통합 모니터링, 컨테이너 로그 교체 등 주요 접근성 및 모니터링 기능도 사용할 수 있게 되었습니다.
자세히 알아보고 시작하려면 Apache Flink 섹션의 설명서를 참조하세요. Apache Flink를 지원하는 Amazon EMR on EKS는 현재 Amazon EMR on EKS가 제공되는 리전에서 평가판으로 사용할 수 있습니다.
2023년 10월 5일 - 이 게시물의 이전 버전에서 Amazon EMR on EKS의 Apache Flink를 완전관리형 제공으로 잘못 언급했습니다. 이제 이 문제는 수정되었습니다.