亚马逊AWS官方博客

在大规模部署基础设施期间采用 AWS CodePipeline 和开放源工具

在这篇博客文章中,我们将向您介绍如何运用 AWS 开发人员工具和热门的开放源工具(如,CFN-Nag、CFN-Python-Lint 和 Stacker 等)在 AWS 上构建无服务器基础设施部署管道(即,您无需管理构建服务器)。管道会对照 CloudFormation 模板运行自动验证检查;若模板有效,它将部署对应的 CloudFormation 堆栈。

Read More

新增功能 – 使用 Amazon EMR 和 Apache Hudi 插入、更新、删除 S3 上的数据

从今天开始,EMR 版本 5.28.0 包含 Apache Hudi(孵化),因此,您不再需要构建自定义解决方案来执行记录级插入、更新和删除操作。Hudi 开发于 2016 年开始于 Uber,用于解决提取和 ETL 管道间的效率低下。 近几个月来,EMR 团队与 Apache Hudi 社区密切合作,贡献了很多修补程序,包括将 Hudi 更新为 Spark 2.4.4 (HUDI-12)、支持 Spark Avro (HUDI-91)、增加对 AWS Glue Data Catalog (HUDI-306) 的支持以及多个漏洞修复。

Read More

参加 Open Distro for Elasticsearch 研讨会,为 re:Invent 2019 做好准备

今年,re:Invent 2019 将推出一个全新主题,内容都与开源有关! 多场关于 Open Distro for Elasticsearch 及其 Alerting、Security 和 Performance Analyzer 等组成部分的研讨会即将精彩呈献。快来加入了解更多信息并参加动手实践研讨会! 敬请关注我们关于 k-NN 等机器学习功能及如何设置 Open Distro 的研讨会。

Read More

使用 Amazon EC2 G4 实例搭建云游戏服务器

Amazon EC2 G4实例提供了极具成本效益的GPU,并支持实时光线追踪技术,可以使游戏渲染更加高效和真实,为云游戏提供经济高效的解决方案。本文从G4实例在云游戏服务器使用方面的优势、应用场景等方面进行介绍,并用动手实践文档向您介绍如何使用G4实例搭建云游戏服务器,帮助您快速上手。

Read More

通过 S3 Batch Operations (批量操作)功能轻松处理海量对象

S3 Batch Operations(批量操作) 可以简单快捷的对S3存储桶中数百万甚至数十亿对象进行批量操作。借助S3批量操作功能,我们可以方便地对海量对象进行批量操作,而无须自行编码去构建一个作业管理平台。S3批量操作目前支持标签替换、ACL替换、对象复制、Glacier/Deep Archive数据还原以及触发Lambda函数。通过Lambda函数我们可以自行编码相应的处理逻辑,从而方便地扩展S3批量操作功能。这个博客会以批量替换对象标签为例,详细演示如何在S3控制台上进行S3 Batch的配置。

Read More

利用 SD-WAN 和专线混合组网,加速境内外企业 IDC 和多云数据中心

国内目前有很多企业涉及境外业务,比如跨境电商、游戏、社交、区块链等,会用到 AWS 的海外区域,同时这些企业在国内有自己的机房、 IDC 或者使用了国内的其他云厂家的机房,如果希望彼此进行互联互通或者数据传输。除了使用专线的方式之外,还能选择 SD-WAN 方案,或者专线加 SD-WAN 的混合组网方法。

Read More