亚马逊AWS官方博客

Tag: Udit Mehrotra

Amazon EMR 对 Spark 集群提升弹性并增强恢复能力的实现

借助 Amazon EMR 中的自动扩展功能，客户可以根据集群使用情况或其他与作业相关的指标来动态扩缩集群。虽然这些功能可帮助您有效利用资源，但也可能会导致 EC2 实例在作业运行过程中关闭。这可能会导致计算和数据丢失，从而影响作业的稳定性或者因重新计算产生重复工作。