亚马逊AWS官方博客

Category: Storage

举重若轻-用snowball迁移数据库上云

随着企业上云渐渐形成“新常态”,越来越多的迁移方案和工具为大家所熟悉,但大部分的数据传输都是基于网络的,即使使用专线的解决方案,在海量数据迁移的场景下也依然可能力不从心。因此,AWS针对这类场景推出了AWS Snowball服务,客户可通过物理存储设备 (绕过 Internet) 加快将海量数据传入和传出 AWS 的速度。通过本文,您将对通过snowball迁移数据库上云有一个直观的认识。

Read More

了解 AWS 服务和解决方案 – AWS 1 月在线技术讲座

新年快乐! 参加 1 月的在线讲座,了解 AWS 服务和解决方案。AWS 在线技术讲座是一系列在线直播演示课程,涵盖不同技术水平的各种主题。这些技术讲座由 AWS 解决方案架构师和工程师牵头主持,包含技术详解、现场演示、客户案例以及与 AWS 专家的问答互动等环节。立即注册!

Read More

分布式 Lambda 从海外到中国自动同步S3文件

现在,越来越多的中国公司,在AWS海外区域部署业务。利用 S3 作为数据湖,存储海量的数据,包括图片、视频、日志、备份等等。很多场景下,需要把海外的 S3 数据复制到中国,在中国进行进一步分析处理。AWS S3 在海外提供跨区域自动复制功能 (Cross region replication, CRR) 。但是,由于中国和海外区域隔离,不能使用CRR功能。

Read More

新增功能 – 通过智能分层自动优化 Amazon S3 成本

您可以在将数据上传到 S3 时选择适用的存储类,也可以使用 S3 的生命周期策略告诉 S3 根据对象的创建日期将对象从“标准”转换为“标准 – IA”、“单区 – IA”或“Glacier”。请注意,低冗余存储类仍受支持,但我们建议在新应用程序中使用“单区 – IA”。

Read More

构建自动化的 EBS 快照生命周期管理

本方案通过使用 Amazon CloudWatch Events、AWS Lambda、 Amazon DynamoDB 等服务实现了一个适用于北京区域和宁夏区域的无服务器架构的 EBS 卷生命周期管理,希望通过本文读者对以上服务有进一步直观的认识与了解。AWS 提供丰富的无服务器服务以及 API 接口,用户可以很容易的根据业务需求构建适合自己业务场景的解决方案。

Read More

AWS 常见问题汇总

大家在使用 AWS 过程中总会遇到一些问题。在此以 Q&A 形式,总结一些常见的架构和故障排查问题,希望有所帮助。如果有中国(北京和宁夏区域)特有的问题,会特别注明。

Read More

AWS Storage Gateway 概述 – SMB 支持、RefreshCache 事件及更多内容

借用我自己以前说过的话,AWS Storage Gateway 是一项包含多协议存储设备的服务,适合用于您的现有应用程序与 AWS 云之间。根据配置方式的不同,您的应用程序会将网关视为文件系统、本地磁盘卷或虚拟磁带库。 今天,我想分享一些有关 Storage Gateway 的文件网关配置的新近更新,还会展示一下如何将其结合使用,以支持某些新的处理模型。首先,我们来看一下最新更新: SMB 支持 – 文件网关已支持通过使用 NFS(支持版本 3 和 4.1)的客户端进行访问。上个月,我们添加了对服务器信息块 (SMB) 协议的支持。这允许使用 SMB v2 或 v3 进行通信的 Windows 应用程序通过网关将文件作为对象存储在 S3 中,从而实现混合云使用案例,例如备份、内容分发以及机器学习和大数据工作负载的处理。您可以使用现有的本地 Active Directory (AD) 域或 AWS Directory Service 中托管的基于云的域来控制对网关的访问,也可以使用经过身份验证的访客访问。要了解更多有关此次更新的信息,请参阅 AWS Storage Gateway 添加 SMB 支持以在 Amazon S3 存储桶中存储和访问对象。 跨账户权限 – 部分客户在一个 AWS 账户中运行网关,并将其配置为上传到另一个账户拥有的 S3 存储桶。这允许他们使用实际扣款和名义扣款模型跟踪部门存储和检索成本。为了简化此重要使用案例,您可以配置网关,以便为存储桶拥有者提供完整权限。这可以避免存储桶拥有者无法查看对象时出现的难题。要了解具体设置方法,请参阅使用文件共享进行跨账户访问。 申请方付款 – […]

Read More
如何将亚马逊 AWS S3 存储桶的访问权限到一个特定IAM角色

如何将亚马逊 AWS S3 存储桶的访问权限到一个特定 IAM 角色

在本博文中,我们会向您展示如何使用 Conditions(而非 NotPrincipal 元素),将 S3 存储桶的访问权限限制到一个账户内的特定 IAM 角色或用户。即便相同账户中的另一个用户拥有 Admin 策略或带有 s3:* 的策略,只要未被显式列出,也同样会被拒绝。例如,您可以使用此方法配置存储桶,以供 Auto Scaling 组内的实例访问。您还可以使用此方法,限制对具有高级别安全需求的存储桶的访问。

Read More

使用 Amazon Comprehend 和 Amazon Relational Database Service 构建文本分析解决方案

直到现在,从大量非结构化或半结构化内容中提取价值一直都很困难,并且需要机器学习 (ML) 方面的背景。Amazon Comprehend 消除了这些进入障碍,让数据工程师和开发人员可以轻松访问丰富、持续训练的自然语言处理服务。

您可以通过将来自 Amazon Comprehend 的分析与关系业务信息相结合来构建完整的分析解决方案,从而生成有价值的趋势分析。

Read More