亚马逊AWS官方博客

新的 Amazon S3 存储类 – Glacier Deep Archive

许多 AWS 客户收集并存储大量(通常为 1PB 或更多)重要数据,但却很少访问这些数据。在某些情况下,原始数据被收集并立即处理,然后存储数年或数十年,以防需要进一步处理或分析。在其他情况下,数据被保留用于合规或审计目的。 以下是适合此描述的一些行业和用例:

金融 – 交易存档、活动和审计日志以及通信日志。

医疗/生命科学 – 电子病历、影像(X 射线、MRI 或 CT)、基因组序列、药物开发记录。

媒体和娱乐 – 媒体存档和原始制作素材。

物理安全 – 原始摄像胶片。

在线广告 – 点击流和分发日志。

运输 – 车辆遥测、视频、雷达和激光雷达数据。

科学/研究/教育 – 研究输入和结果,包括与石油和天然气勘探的地震测试相关的数据。

今天,我们将介绍一种存储 Amazon S3 中重要但不经常访问的数据的更具成本效益的新方法。

Amazon S3 Glacier Deep Archive 存储类

新的 Glacier Deep Archive 存储类旨在提供价格上可与外部磁带归档服务竞争、持久且安全的大量数据长期存储。数据存储在 3 个或更多 AWS 可用区中,可在 12 小时或更短时间内检索。您不再需要处理昂贵而娇气的磁带驱动器,也不用安排外部存储或担心如何将数据迁移到较新一代媒体。

现有兼容 S3 的应用程序、工具,代码、脚本和生命周期规则都可以利用 Glacier Deep Archive 存储。您可以在上传对象时手动指定新存储类,手动或以编程方式更改现有对象的存储类,或使用生命周期规则根据对象年数安排迁移。您还可以使用其他 S3 功能,例如存储类分析对象标记对象锁定跨区域复制

现有 S3 Glacier 存储类允许您在几分钟内访问您的数据(使用加速检索),非常适合需要更快访问的数据。如需了解有关所有选项的更多信息,请阅读 S3 开发人员指南中的存储类 。 如果您已在使用 Glacier 存储类但很少访问您的数据,则可以切换到 Deep Archive,立即开始节省成本。

使用 Glacier Deep Archive 存储 – 控制台

我可以使用 S3 控制台将现有 S3 对象的存储类切换到 Glacier Deep Archive。定位文件,然后单击属性

然后单击存储类

接下来,选择 Glacier Deep Archive ,然后单击保存

进行此更改后,无法下载对象或编辑对象的任何属性或权限:

如果我需要访问这个 2013 年的视频,我可以选择它,然后从操作 菜单中选择恢复

然后,我指定保留还原副本的天数,并选择批量检索或标准检索:

使用 Glacier Deep Archive 存储 – 生命周期规则

我也可以使用 S3 生命周期规则。我选择存储桶并单击管理,然后选择生命周期

然后,我单击添加生命周期规则并创建我的规则。我输入一个名称 (ArchiveOldMovies),并且可以选择使用路径或标记过滤器来限制规则的范围:

接下来,我指示我希望规则应用于我的对象的 当前版本 ,并指定我希望我的对象在创建后 30 天转换到 Glacier Deep Archive:

使用 Glacier Deep Archive – CLI / 编程访问

我可以使用 CLI 上传新对象并设置存储类:

$ aws s3 cp new.mov s3://awsroadtrip-videos-raw/ --storage-class DEEP_ARCHIVE

我还可以通过将其自我复制来更改现有对象的存储类:

$ aws s3 cp s3://awsroadtrip-videos-raw/new.mov s3://awsroadtrip-videos-raw/new.mov --storage-class DEEP_ARCHIVE

如果我打算构建一个管理归档和恢复的系统,可以选择在启动和/或完成恢复后接收有关 SNS 主题、SQS 队列或 Lambda 函数的通知:

其他访问方式

您还可以使用 AWS Storage Gateway 的磁带网关配置创建虚拟磁带库 (VTL) ,并将其配置为使用 Glacier Deep Archive 存储已归档虚拟磁带。这将允许您将现有基于磁带的备份移动到 AWS 云,而无需对现有备份工作流程进行任何更改。您可以在 12 小时内将存档在 Glacier Deep Archive 中的虚拟磁带检索到 S3。借助 Tape Gateway 和 S3 Glacier Deep Archive,您不再需要本地物理磁带库,并且随着技术的发展,也不需要管理硬件刷新并将数据重写到新的物理磁带。有关更多信息,请访问《Storage Gateway 用户指南》中的 使用备份软件测试您的网关设置页面。

现已推出

S3 Glacier Deep Archive 存储类现已在所有商业区域和 AWS GovCloud 区域中推出。价格因地区而异,存储成本比现有的 S3 Glacier 存储类低 75%;更多信息请访问 S3 定价页面。

 

本篇作者

Jeff Barr

AWS 首席布道师; 2004年开始发布博客,此后便笔耕不辍。