EKS üzerindeki Amazon EMR artık Apache Spark sorun giderme temsilcisini destekliyor
EKS üzerindeki Amazon EMR artık Apache Spark sorun giderme temsilcisini destekliyor. Veri mühendisleri artık EKS iş arızalarında EMR'yi doğal dil aracılığıyla teşhis ederek dağıtılmış günlüklerde ve Spark Geçmiş Sunucusu verilerinde manuel olarak gezinmeden otomatik kök neden analizi ve PySpark kod önerileri alabilir.
Temsilci; bellek hataları, veri çarpıklığı, kaynak çekişmesi ve bağlantı hataları gibi sorunları belirlemek için Spark Geçmişi Sunucusu verilerini, dağıtılmış yürütücü günlüklerini ve küme yapılandırmalarını analiz eder. Bu lansman ile Spark sorun giderme temsilcisi artık tüm EMR dağıtım seçeneklerini kapsar: EC2'de EMR, EMR Sunucusuz ve EKS'de EMR. Temsilciye, başarısız işlerde “Yapay Zeka ile Sorun Giderme” seçeneği aracılığıyla doğrudan EKS konsolundaki EMR'den erişilebilir. Temsilci, ayrıca Kiro, Claude Code ve Cursor dahil olmak üzere herhangi bir uyumlu yapay zeka kodlama temsilcisi kullanılarak MCP (Model Bağlam Protokolü) aracılığıyla kullanılabilir. Tüm işlemler salt okunur, IAM rolleri ile kimlik doğrulaması yapılır ve AWS CloudTrail'de kaydedilir.
EKS üzerinde Amazon EMR için Spark sorun giderme temsilcisi, SageMaker Birleşik Stüdyosu'nun kullanılabildiği tüm AWS Bölgelerinde mevcuttur. Başlamak için EKS konsolunda EMR'ye gidin veya tercih ettiğiniz yapay zeka kodlama temsilcisinde MCP sunucusunu ayarlayın. Ayrıntılı rehberlik için EMR sorun giderme temsilcisi belgelerine bakın.