亚马逊AWS官方博客
Tag: Amazon Athena
明察秋毫 — 轻松实现 S3 用量细颗粒度追踪
对于 SaaS 服务供应商来说,如何实现租户之间的数据隔离、服务的权限控制、计费管理等,是其构建用户系统最核心的问题之一。本文旨在探讨如何利用亚马逊云科技 S3 服务的功能,在不改变现有工作流程和数据集的情况下对请求者级别的用量进行追踪。
PBS 通过 Amazon Personalize 为观众带来量身定制的体验
Public Broadcasting Service(PBS)希望构建一个智能推荐引擎(SRE,Smart […]
基于AWS Step Functions的通用负载编排框架
利用AWS Step Functions可以从正在运行的状态机开始新的状态机执行这一特性,可以构建基于AWS Step Functions的通用负载编排框架(Workload Orchestration Framework, WOF),使用嵌套工作流以实现降低主要流程的复杂性。为了更灵活的实现工作流,本方案开发了基于配置和Amazon EventBridge事件驱动的编排框架,可以通过配置文件而不是修改AWS Step Functions的JSON定义来编排工作流。
宝马云数据中心:亚马逊云科技现代数据架构的参考实施
在这篇博客中,我们将讨论宝马集团如何利用亚马逊云上的云原生技术重新构建数据湖,并围绕数据重新思考我们的组织流程,从而克服其内部数据湖面临的挑战。
TLS 1.2将成为亚马逊云科技API端点的最低TLS协议级别
TLS 1.2 将成为亚马逊云科技最低 TLS 协议级别。从现在启至2023年6月,我们将逐个端点推动此变更
基于Amazon CloudFront Extensions开发的CDN监控API
Amazon CloudFront Extensions解决方案提供了监控、配置快照等功能,帮助客户提升CloudFront运维效率。亚马逊云科技合作伙伴VeryCloud结合客户实际使用场景,总结了使用CloudFront Extensions的经验和心得。
使用Athena (Presto) 分析本地 Oracle 数据库导出的数据
在企业环境下,混合云架构是一种常见的架构,理想环境下摄取本地Oracle数据库的数据是通过Apache Sqoop或DMS使用网络专线将数据迁移到s3存储桶,进行数据分析。但受本地条件限制,很多用户是用Oracle Datapump或者Exp/Imp将数据导出后,再将本地数据传输到s3存储桶。本文通过阐述使用上述两种不同的工具,介绍如何将数据导入s3存储桶,使用Athena做数据分析。
使用 AWS Step Functions 和 Amazon Athena 实现简易大数据编排
本文介绍了如何使用 AWS Step Functions 和 Amazon Athena 实现简易的大数据编排。
使用 Amazon Athena、Amazon EMR 和 AWS Glue 构建 Apache Iceberg 数据湖
大多数企业将其关键数据存储在数据湖中,您可以将来自各种来源的数据存储到集中存储中。数据由专门的大数据计算引擎处理,例如用于交互式查询的 Amazon Athena、用于 Apache Spark 应用程序的 Amazon EMR、用于机器学习的 Amazon SageMaker 和用于数据可视化的 Amazon QuickSight。
在 Amazon Athena 中使用 EXPLAIN 和 EXPLAIN ANALYZE 优化联合查询性能
Amazon Athena 是一种交互式查询服务,可使用标准 SQL 轻松分析 Amazon Simple Storage Service(Amazon S3)中的数据。Athena 是一种无服务器服务,因此您无需管理任何基础设施,而且只需为所运行的查询付费。2019 年,Athena 增加了对联合查询的支持,以便跨存储在关系、非关系、对象和自定义数据来源中的数据运行 SQL 查询。