亚马逊AWS官方博客
Tag: AWS Step Functions
PBS 通过 Amazon Personalize 为观众带来量身定制的体验
Public Broadcasting Service(PBS)希望构建一个智能推荐引擎(SRE,Smart […]
基于AWS Step Functions的通用负载编排框架
利用AWS Step Functions可以从正在运行的状态机开始新的状态机执行这一特性,可以构建基于AWS Step Functions的通用负载编排框架(Workload Orchestration Framework, WOF),使用嵌套工作流以实现降低主要流程的复杂性。为了更灵活的实现工作流,本方案开发了基于配置和Amazon EventBridge事件驱动的编排框架,可以通过配置文件而不是修改AWS Step Functions的JSON定义来编排工作流。
AWS DMS在数据迁移任务可用性及对源数据归档支持的实践
提高AWS DMS数据迁移任务可用性及支持对DMS源MS SQL Server表数据归档或截断方案
使用 AWS Step Functions 和 Amazon Athena 实现简易大数据编排
本文介绍了如何使用 AWS Step Functions 和 Amazon Athena 实现简易的大数据编排。
基于AWS Step Functions和Amazon API Gateway的跨账号工作流服务
实际使用场景中,需要在多个AWS账号下进行AWS Step Functions工作流的编排。 文章提供了一个通过Amazon API Gateway来实现跨账号工作流服务的解决方案,并且提供AWS 管理控制台和AWS CDK基础架构即代码(IaC)两种部署方式作为参考。
基于云原生构建的 HPC 平台演示
Blog结合 AWS Serverless 及云原生的HPC服务,演示了相对完整的HPC业务场景,包括前端交互、任务自动化编排及调度、HPC 计算与任务管理,以及CI/CD与基础设施代码化构建业务所需环境。
云原生编排数据分析管道初探
公有云是适合数据分析和大数据处理的天然平台。近年来,云服务和开源社区涌现出许多优秀的工作流编排工具,方便就数据分析中复杂的抽取转换加载 (ETL) 过程进行任务编排。要成功运行数据分析管道,需要至少两个必要准备,一是搭建好支持运行数据管道的基础设施。二是编排好数据管道的 ETL 任务顺序。前者涉及运维,后者事关业务。从数据分析的角度,则希望运维难度最小,业务易用度最大。本文从上述两个角度切入,就 Airflow 和状态机支持数据分析管道的情况进行分析,并初步探讨云原生编排数据管道的方法和意义。
使用 Step Functions 编排从数据库到数据仓库的数据ETL
数据仓库是信息的中央存储库。业务分析师、数据工程师、数据科学家和决策者通过商业智能 (BI) 工具、SQL 客户端和其他分析应用程序访问数据。数据和分析已然成为各大企业保持竞争力所不可或缺的部分。企业用户依靠报告、控制面板和分析工具从其数据中获得洞察力、监控企业绩效以及更明智地决策。
使用Amazon Step Functions实现Amazon CloudWatch持续报警
本文将介绍,如何基于无服务器函数编排工具AWS Step Functions,在警报被触发后轮询警报状态,实现持续报警的效果,以强调警报的存在,确保您系统中的问题可以得到足够的重视。
在中国区构建自动、弹性、安全的多账号体系——账号自动创建和初始化
本博客向大家介绍了在利用中国区在没有Control Tower的情况下,如何利用现有AWS服务,自动化的构建弹性、安全的多账号架构。