亚马逊AWS官方博客
Category: Application Integration
基于 Axios 的 HTTP 测试工具解决方案
Serverless 的广泛应用使得创建 HTTP/HTTPS 接口变得越发容易,但是如何以贴近实际使用场景的方式访问和测试这些接口仍然是一个问题。Axios[1]作为业界流行的开发库广泛用于浏览器、H5 和移动端,在其之上构建可视化UI用于访问和测试 HTTP/HTTPS 接口可以达到更加贴近实际应用场景的目的。本方案基于 Axios 构建可视化 UI,支持一键安装部署,支持免费套餐,助力用户在成本极低的情况下尽早发现和排除潜在问题、缺陷和风险,加快应用的构建、迭代速度,获得商业上的成功。
使用 Rolling Batch 加速 SageMaker LLM 模型推理性能
本文介绍了近期业界新的 Rolling Batch(continually batch)的批处理推理优化技术原理,并给出了在 Amazon SageMaker 上使用 vLLM 框架进行 Rolling Batch 推理优化的实践和测试对比,可以帮助客户在实际生产场景中通过简单配置,立竿见影地提升线上部署的 LLM 的推理吞吐量,降低响应时延,节省资源。
通过 SageMaker JumpStart 部署 Llama 2 快速构建专属 LLM 应用
本文介绍了如何使用 SageMaker JumpStart 部署 Llama 2 模型,结合 Gradio 轻松构建生成式 AI 聊天助手。
使用 Amazon Selling Partner API Guard 来进行安全审计使你的 SP-API 应用更合规
Amazon Selling Partner API Guard 是 2022 年亚马逊为 SP-API 开发者发布的一套针对安全合规的无服务器扫描方案。Amazon Selling Partner API Guard 可以扫描部署在亚马逊云上的负载环境,以评估开发者的环境是否满足 Amazon 的 DPP 数据保护协议的要求和需要。
Gamelift 的游戏会话日志可视化方案
本文将以 Amazon Linux2 系统和 Unity 引擎为基础,讨论几种 Gamelift 游戏服务端会话日志可视化方案。
一种使用 AWS 云原生服务部署高可用 APACHE AIRFLOW 集群的方案
对于需要在 AWS 上使用 Apache Airflow 但是 无法使用 AWS 托管服务 MWAA , 或者想使用特定 Apache Airflow 版本, 或者想定制 Apache Airflow 登陆、部署方式的用户,可以通过此方案搭建高可靠的 Apache Airflow 集群,同时提供用户登陆和鉴权机制。此方案已在全球知名 Tier One 汽车供应商的高级辅助驾驶系统(Advanced driver-assistance system, ADAS)开发平台成功应用。
使用Terraform与事件驱动的AWS CodeBuild提升云上数据应用运维效率
通过AWS CodeBuild为引擎的CI/CD流水线,自动化云上数据应用运维关键步骤,减轻数据开发团队与云运维团队在管理云上数据应用时的额外工作压力
SP-API 中 Notifications API 结合 Amazon SQS 使用的详细教程
使用 Amazon SQS 和 Notifications API,您可以创建接收通知、订阅通知、删除通知订阅等操作。当事件触发您订阅的通知时,您的应用程序可以直接从 Amazon 接收信息,而不再需要进行轮询,这样做可有效减少 SP-API 各个接口的轮询次数, 并拥有更高的实时性。
EC2 Spot实例中断引起的AWS Batch任务重试优化
EC2 Spot实例终止会导致AWS Batch任务失败,本文通过Batch的失败Event结合Lambda函数实现以自动化方式再次重新提交任务,缓解了量化场景下模型策略开发用户在由于Spot中断而必须手动提交任务上所付出的额外工作,提升了策略模型开发的效率
Amazon SES邮件备用方案初探
为了方便云上企业应用向企业内部或者合作伙伴的随机收件人发送邮件通知,本文探讨一种SES邮件服务的备用方案(Workaround Solution),使用亚马逊云科技无服务器化(Serverless)的Amazon Simple Queue Service (SQS)与AWS Lambda服务,结合使用企业自有的SMTP服务器中继完成发送邮件通知的功能