Publicado: Aug 2, 2018
Você já pode usar o Apache Flink 1.5.0 e o Apache Livy 0.5.0 no Amazon EMR versão 5.16.0. O Flink 1.5.0 conta com vários novos recursos, incluindo um novo modelo de implantação com suporte à alocação dinâmica de recursos no YARN para utilização eficiente de recursos, o suporte a um estado de transmissão que permite replicação de regras e padrões de configuração para todas as instâncias paralelas de uma função, um novo cliente de ILC de SQL para executar consultas ad-hoc em streams de dados, a capacidade de armazenar informações de estado em discos locais para aumentar a rapidez e a eficiência das recuperações de falhas, e outras atualizações de performance e throughput para tarefas de streaming. O Livy 0.5.0 acrescenta o suporte ao interpretador SparkSQL para execução de consultas SQL interativas, a capacidade de usar várias linguagens e compartilhar o SparkContext em uma única sessão, a capacidade de compartilhar variáveis entre tarefas e outras melhorias. Além disso, agora você pode usar estas versões atualizadas: Apache Hadoop 2.8.4, Apache Spark 2.3.1, Presto 0.203, Apache Phoenix 4.14.0 e Apache MXNet 1.2.0.
Você pode criar um cluster do Amazon EMR com a versão 5.16.0 escolhendo o rótulo de versão “emr-5.16.0” no Console de Gerenciamento da AWS, na ILC da AWS ou no SDK. Ao lançar um cluster do EMR, você pode escolher entre Flink, Livy, Hadoop, Spark, Presto, Phoenix e MXNet para instalar os aplicativos. Consulte a documentação do Amazon EMR para obter mais informações sobre os softwares EMR versão 5.16.0, Flink 1.5.0, Livy 0.5.0, Spark 2.3.1, Presto 0.203, Hadoop 2.8.4, Phoenix 4.14.0 e MXNet 1.2.0
Agora o Amazon EMR versão 5.16.0 está disponível em todas as regiões que oferecem suporte para o Amazon EMR.
Adicionamos um feed de RSS para as notas de release do EMR. O feed tem um breve resumo das atualizações importantes e um link para as notas de release detalhadas. Use o ícone de RSS na parte superior do guia de lançamento do EMR para vincular o URL do feed diretamente ao seu leitor de feeds favorito (http://docs.aws.amazon.com/emr/latest/ReleaseGuide/amazon-emr-release-notes.rss)