此 AWS 解决方案有什么作用?
集中式日志记录解决方案可帮助组织在单个控制面板上收集、分析和显示 Amazon CloudWatch Logs。该解决方案可整合、管理和分析来自不同来源的日志文件。您可以从多个账户和 AWS 区域收集 Amazon CloudWatch Logs。
该解决方案使用 Amazon OpenSearch Service 和 Kibana(一个与 Amazon OpenSearch Service 集成的分析和可视化平台),可以将所有日志事件整合在统一的视图中。通过与其他 AWS managed services 相结合,此解决方案为您提供了一个一站式环境,以便开始记录和分析您的 AWS 环境和应用程序。
优势
AWS CloudFormation 模板会自动启动和配置必要的组件,以将日志文件从多个账户和 AWS 区域上传到 Amazon OpenSearch Service,以便在可自定义的用户友好型控制面板中进行分析和可视化。
使用 Amazon Cognito 控制对仪表盘的访问,以简化对 Amazon OpenSearch Service 的身份验证。
将您的日志功能扩展到默认的 AWS 服务日志之外。此灵活的解决方案包括用于捕获主机级日志文件和 VPC 流量日志的示例,并且可随着您业务的增长而扩展。
使用内置的 Amazon OpenSearch Service 对 Kibana 的支持来简化数据可视化,其中包括一组默认的预配置控制面板,使您可以初步了解 Kibana 的自定义功能。
AWS 解决方案概览
下图显示了您可以使用该解决方案实施指南和随附的 AWS CloudFormation 模板自动部署的架构。

集中式日志记录架构
集中式日志记录解决方案包含以下组件:日志提取、日志索引和可视化。您必须在打算存储日志数据的 AWS 账户中部署 AWS CloudFormation 模板。
- 日志提取:Amazon CloudWatch Logs 目标在主账户中部署,并在每个选定区域中使用所需权限创建。可以配置 CloudWatch Logs 订阅筛选器,以将日志组流式传输到集中式日志记录账户。可以部署一个可选的演示 AWS CloudFormation 模板来为 AWS CloudTrail、Amazon Virtual Private Cloud (Amazon VPC) 流日志和 Amazon Elastic Compute Cloud (Amazon EC2) Web 服务器生成示例 CloudWatch Logs。
- 日志索引:预置集中式 Amazon Kinesis Data Streams 和 Amazon Kinesis Data Firehose 来为集中式 Amazon OpenSearch Service 域上的日志事件创建索引。创建用于流式传输日志事件的 CloudWatch Logs 目标,将 Kinesis Data Streams 作为其目标。一旦日志事件传输到 Kinesis Data Streams,该服务将调用 AWS Lambda 函数将每个日志事件转换为 Amazon OpenSearch Service 文档,然后将其放入 Kinesis Data Firehose。您可以在 Kinesis Data Firehose 发送包含每个交付流的详细监控数据的自定义 CloudWatch Logs 时对其进行监控。
- 可视化:Amazon OpenSearch Service 和 Kibana 提供数据可视化和浏览支持。在 Amazon VPC 内创建了一个 Amazon OpenSearch Service 域,以防止公众访问 Kibana 控制面板。可以根据需要启动 Microsoft Windows Jumpbox 服务器来访问 Amazon OpenSearch Service 集群和 Kibana 控制面板。
集中式日志记录
版本 4.0.1
上次更新日期:2021 年 12 月
作者:AWS
预计部署时间:30 分钟