GPU Cloud · NVIDIA · Ampere

按小时租用 NVIDIA A40 GPU

NVIDIA A40 是一款基于 Ampere 架构构建的数据中心 GPU,具备 8.6 计算能力和 45 GB VRAM。在 ONIE 上,它在 300 W 功耗范围内提供约 29.9 TFLOPS 的单精度性能和约 536 GB/s 的显存带宽。您可以通过按小时计费、完整的 SSH 访问权限以及包含 PyTorch/CUDA、vLLM、Ollama 和 ComfyUI 的预置模板来进行部署。

规格参数

单卡 VRAM

45 GB

架构

NVIDIA Ampere

计算能力

8.6

FP32 算力

≈ 29.9 TFLOPS

显存带宽

≈ 536 GB/s

功耗限制

300 W

数值由基础设施提供商根据当前上架机器提供;实际性能因机器而异。

可用配置

实时库存与价格,持续更新。最终价格将在您下单前确认。

正在加载实时价格…

A40 的适用场景

大语言模型推理

使用预配置的 vLLM 或 Ollama 模板,运行需要高达 45 GB 显存的模型。

深度学习微调

利用充足的 VRAM 在 PyTorch/CUDA 中微调神经网络,支持更大的批次大小和权重。

生成式图像工作流

使用 ComfyUI 执行复杂的扩散管线,并在显存中同时保留多个模型检查点。

数据中心计算任务

利用约 29.9 TFLOPS 的单精度算力和约 536 GB/s 的显存带宽,处理仿真和渲染工作负载。

这款 GPU 适合您吗?

当您的工作负载需要基于数据中心级 Ampere 架构的 45 GB VRAM(超出标准消费级显卡容量)时,请选择 A40。如果您的模型可以在较小显存中运行,可以选择显存较小的消费级显卡;如果您的训练任务受到显存吞吐量的严重制约,则可以升级到更高带宽的数据中心 GPU。

与同类 GPU 对比

GPU单卡 VRAM架构FP32 算力每小时起价详情
A4045 GBAmpere≈ 29.9 TFLOPS—
RTX A600048 GBAmpere≈ 36.1 TFLOPS—详情
RTX 309024 GBAmpere≈ 35.4 TFLOPS—详情
RTX 3090 Ti24 GBAmpere≈ 36.4 TFLOPS—详情

常见问题

NVIDIA A40 适合用于 LLM 推理和微调吗?

是的,45 GB 的 VRAM 容量使 A40 非常适合托管中大型语言模型并执行参数高效微调。您可以直接在 ONIE 上启动 vLLM、Ollama 或 PyTorch/CUDA 模板,立即开始工作。

与较小的消费级 GPU 或更大的数据中心 GPU 相比,A40 表现如何?

A40 提供 45 GB VRAM,针对显存受限型工作负载,它比标准消费级 GPU 具有更大的显存余量。不过,其约 536 GB/s 的显存带宽低于采用 HBM 显存的更高端数据中心 GPU。

在 ONIE 上,A40 支持哪些软件环境?

A40 支持 CUDA 计算能力 8.6,并可使用 PyTorch/CUDA、vLLM、Ollama 和 ComfyUI 的预置模板进行部署。同时提供完整的 SSH 访问权限,方便您根据需要自定义软件栈。

A40 实例如何计费?

ONIE 对所有 A40 租用均采用按小时计费模式。您只需为实例处于活动状态的时间付费,无论是短期实验还是长期生产运行都非常实用。

按小时租用 A40

创建账户、选择配置并通过 SSH 连接。删除 GPU 后即停止计费。

租用 A40

所有 GPU →