Amazon S3 Metadata（预览版）

在 CMT，我们存储并分析来自全球移动物联网设备的多 PB 数据，以提高驾驶员安全和道路行驶安全。随着业务扩展，查找特定数据以开发新的见解和模型变得越来越具有挑战性。S3 Metadata，尤其是其自定义元数据功能，让我们能够对所有数据进行注释，并在可查询的托管表中维护元数据。现在，查找相关数据只需要一个高效且经济的 SQL 查询。这使得 S3 Metadata 成为变革的关键，让我们能够为客户提供新功能。

S3 Metadata 为我们提供一种简单、直接的机制，可使用 Amazon Athena 和 Amazon QuickSight 等标准工具分析数万亿个 S3 对象。借助此功能，我们可以将时间花在决策上，而不是构建复杂的数据管道以访问和查询 S3 对象元数据。

S3 Metadata 加速我们的生成式人工智能计划。当我们为团队构建 LLM 应用程序（例如内部聊天机器人）时，PDF 等非结构化数据会变得越来越有价值。我们需要将大量特定领域的文档输入到检索增强生成（RAG）应用程序中，以便聊天机器人能够适应 Roche 的特定业务环境。然而，这也意味着我们需要管理的非结构化数据会越来越多。我们需要元数据系统来有效描述我们的非结构化数据，以便我们的用户能够快速筛选我们的大型数据湖，为他们正在构建的特定生成式人工智能应用识别相关数据集。借助 S3 Metadata，构建功能强大的元数据系统变得非常简单，只需在 AWS 管理控制台中点击几下即可。随着我们不断摄取更多的非结构化数据，S3 Metadata 会自动显示元数据并保持元数据处于最新状态。我们还使用自己的 Lambda 来提取特定业务的元数据，例如根据与 Roche 相关的分类标准对文档进行分类，并将这些元数据与 S3 Metadata 表一起存储在同一个粘合目录中，这样只需简单的 SQL 连接，我们就能获得所需的所有元数据。S3 Metadata 可以帮助我们更快地构建生成式人工智能应用，从而使我们能够专注于构建而不是组织数据。

想象一下驾驶时光机器探索您的 Amazon S3 数据。在 SmugMug 和 Flickr，我们在 S3 中存储了超过 22 年的客户照片，对象数量达数千亿。新的 S3 Metadata 功能帮助我们以较低的价格轻松探索我们的 S3 对象元数据，通过查询对象大小等元数据来了解我们的数据是如何演变的，这在以前需要将昂贵的数据库查询与对象清单结合起来。了解摄影师如何使用我们的存储，有助于进一步履行我们通过摄影的力量建设更美好世界的承诺。

Solink 每月处理超过 5 亿小时的视频，将安全录像与 350 多个来源的关键业务数据进行集成。AWS 支持我们所依赖的基础设施，而 Amazon S3 Metadata 将进一步提供实时见解，以加强我们的内容管理，包括监控存储和使用情况以及跟踪客户配置更改的实时效果。

Amazon S3 已成为各种数据类型的领先云存储提供商。Amazon S3 元数据将确保 Commvault 等供应商能够主动帮助识别和保护敏感信息，同时还有助于自动化数据分层等元素，并改善我们共享客户的成果。S3 Metadata 可促进高效的数据组织，有助于简化数据发现，能够对对象进行详细标注，这对于云优先的网络弹性至关重要。

New Relic 是可观测性领域的领导者，其数据引擎每天处理大约 1.3 EB 的 Amazon S3 数据。S3 Metadata 将通过自动生成丰富的对象元数据加速我们的创新，从而简化我们团队运行产品实验和构建概念验证（如开发有益于客户的新指标）所需的数据探索。S3 Metadata 将减少我们构建和维护强大元数据系统的工作量，从数百小时减少到只需在 S3 管理控制台点击几下，使我们的工程师能够专注于数据分析而不是数据组织。