Amazon EC2 G6 实例

基于 GPU 的高性能实例,适用于深度学习推理和图形密集型应用

由 NVIDIA L4 Tensor Core GPU 驱动的 Amazon EC2 G6 实例可用于各种图形密集型和机器学习应用场景。 与 EC2 G4dn 实例相比,G6 实例可提供高达 2 倍的深度学习推理和图形工作负载性能。

客户可以使用 G6 实例部署用于自然语言处理、语言翻译、视频和图像分析、语音识别和个性化的机器学习模型,以及图形工作负载,例如创建和渲染实时、电影质量的图形和游戏直播。

G6 实例配备了多达 8 个 NVIDIA L4 Tensor Core GPU(每个 GPU 有 24GB 内存)和第三代 AMD EPYC 处理器。它们还支持最多 192 个 vCPU、最高 100Gbps 的网络带宽和最多 7.52TB 的本地 NVMe SSD 存储。

优势

高性能且具有成本效益,适用于深度学习推理

与 G4dn 实例相比,G6 实例可提供高达 2 倍的深度学习推理性能。它们由 L4 GPU 驱动,具有第四代张量内核,是高性能且具有成本效益的解决方案,适用于想要使用诸如 TensorRT、CUDA 和 cuDNN 之类的 NVIDIA 库来运行其机器学习应用程序的客户。

适用于图形密集型工作负载的高性能实例

与 G4dn 实例相比,G6 实例可提供高达 2 倍的图形性能。它们由具有第三代 RT 内核并支持 NVIDIA RTX 技术的 L4 GPU 驱动。这使得它们非常适合用于更快速地渲染真实场景、运行功能强大的虚拟工作站和支持更高保真度和分辨率的图形密集型应用程序。Gr6 实例支持的 vCPU 与内存比率为 1:8,非常适合内存要求较高的图形工作负载。

资源效率最大化

G6 实例基于 AWS Nitro System 构建,该系统是专用硬件和轻量管理程序的组合,几乎将主机硬件的所有计算和内存资源都提供给您的实例,从而提供更好的整体性能和安全性。借助 G6 实例,Nitro 系统可以在穿透模式下预置 GPU,从而提供与裸机相当的性能。

功能

NVIDIA L4 Tensor Core GPU

G6 实例配备 NVIDIA L4 Tensor Core GPU,可提供适用于图形密集型和机器学习应用程序的高性能。每个实例最多可配备 8 个 L4 Tensor Core GPU,每个 GPU 拥有 24 GB 内存、第三代 NVIDIA RT 内核、第四代 NVIDIA RT Tensor 内核和 DLSS 3.0 技术。NVIDIA L4 GPU 包括四个视频解码器和两个视频编码器,并具有 AV1 硬件编码功能。

NVIDIA 驱动程序和库

G6 实例可为客户提供 NVIDIA RTX Enterprise 和游戏驱动程序,无需额外收费。NVIDIA RTX Enterprise 驱动程序可用于为各种图形密集型工作负载提供高质量虚拟工作站。NVIDIA 游戏驱动程序可为游戏开发提供无可比拟的图形和计算支持。此外,G6 实例还支持 CUDA、cuDNN、NVENC、TensorRT、cuBLAS、OpenCL、DirectX 11/12、Vulkan 1.3 和 OpenGL 4.6 库。

高性能联网和存储

G6 实例提供 100 Gbps 联网吞吐量,从而使它们能够满足机器学习推理和图形密集型应用程序的低延迟需求。每个 GPU 24 GB 内存以及对高达 7.52 TB 本地 NVMe SSD 存储的支持使得能够本地存储高性能机器学习训练和推理中的大型模型和数据集。此外,G6 实例还可以本地存储大型视频文件,从而提高图形性能,并且能够渲染更大、更复杂的视频文件。

基于 AWS Nitro System 构建

G6 实例依托 AWS Nitro System 构建,该系统是丰富的构建数据块集合,可将许多传统虚拟化功能卸载到专用硬件和软件,实现高性能、高可用性和高安全性,同时还可降低虚拟化开销。

产品详细信息

  实例大小 GPU GPU 内存(GB) vCPU 内存 (GiB) 存储 (GB) 网络带宽 (Gbps) EBS 带宽 (Gbps) 按需价格/小时* 1 年期 ISP 的有效小时 (Linux) 3 年期 ISP 的有效小时 (Linux)

单 GPU VM

 

 

 

 

 

g6.xlarge 1 24 4 16 1x250 最高 10 最高 5 0.805 USD 0.499 USD 0.342 USD
g6.2xlarge 1 24 8 32 1x450 最高 10 最高 5 0.978 USD 0.606 USD 0.416 USD
g6.4xlarge 1 24 16 64 1x600 最高 25 8 1.323 USD 0.820 USD 0.562 USD
g6.8xlarge 1 24 32 128 2x450 25 16 2.014 USD 1.249 USD 0.856 USD
g6.16xlarge 1 24 64 256 2x940 25 20 3.397 USD 2.106 USD 1.443 USD
vCPU:RAM 比率为 1:8 的 Gr6 实例
gr6.4xlarge 1 24 16 128 1x600 最高 25 8 1.539 USD 0.954 USD 0.654 USD
gr6.8xlarge 1 24 32 256 2x450 25 16 2.446 USD 1.517 USD 1.040 USD
                       
多 GPU VM g6.12xlarge 4 96 48 192 4x940 40 20 4.602 USD 2.853 USD 1.955 USD
g6.24xlarge 4 96 96 384 4x940 50 30 6.675 USD 4.139 USD 2.837 USD
g6.48xlarge 8 192 192 768 8x940 100 60 13.35 USD 8.277 USD 5.674 USD

上表所示价格适用于美国东部(弗吉尼亚州北部)AWS 区域。

客户评价

Varjo

Varjo 为高级虚拟现实用户生产最高沉浸度的虚拟现实和混合现实产品。他们的解决方案用于培训宇航员、飞行员和核电站操作员,以及汽车设计和开创性研究。 

“对于高端企业级混合现实应用,Amazon EC2 G6 实例掀起了一场变革。我们能够以经济高效、可扩展的方式训练复杂的机器学习模型,为客户提升用户体验,同时实现高性价比的投资回报率。”

Varjo 工程主管 Knut Nesheim

Cloudinary

Cloudinary 的使命是帮助公司释放媒体的全部潜能,创造最引人入胜的视觉体验。

“对于高效视频处理工作流而言,Amazon EC2 G6 实例可显著加快 AV1 视频编码的速度,让我们更快地为客户交付高度优化的内容。”

Cloudinary 媒体技术副总裁 Amnon Cohen-Tidhar

SmugMug

数百万的客户使用 SmugMug 的照片和视频共享服务来存储数十亿的珍贵照片和视频。

“在 SmugMug 和 Flickr,我们的宣言是‘您的照片在这里将更加光彩照人’”。自 2013 年以来,我们一直在使用 Amzon EC2 GPU 实例类型来帮助履行这一承诺。每一代 EC2 GPU 都会带来更快的性能和更高的吞吐量性价比,使我们能够经济高效地扩展图像渲染,以获得更大的照片尺寸,为更高分辨率的显示器提供更大尺寸的照片。我们对 g6 实例系列以及它进一步优化基础设施性能和性价比的能力感到兴奋。”

SmugMug 和 Flickr 首席工程师 Andrew Shieh

开始使用适用于机器学习的 G6 实例

使用 DLAMI 或深度学习容器

DLAMI 可以为机器学习从业人员和研究人员提供基础设施和各种工具,从而加快在云中进行任意规模的深度学习的速度。Deep Learning Containers 是预先安装了深度学习框架的 Docker 映像,可以让您跳过从头构建和优化环境的复杂流程,从而简化自定义 ML 环境的部署。

使用 Amazon EKS 或 Amazon ECS

如果您更愿意通过容器编排服务管理自己的容器化工作负载,则可以使用 Amazon EKSAmazon ECS 部署 G6 实例。

AWS 入门

注册 AWS 账户

注册 AWS 账户

立即享受 AWS 免费套餐

通过简单教程进行学习

通过 10 分钟教程进行学习

通过简单教程进行探讨和学习。

开始在控制台中使用 EC2 构建

开始在控制台中构建

按照可帮助您启动 AWS 项目的分步指南开始构建。