GPU Cloud · NVIDIA · Ampere

Louez un GPU NVIDIA A40 à l’heure

Le NVIDIA A40 est un GPU pour centre de données basé sur l'architecture Ampere, doté d'une capacité de calcul de 8.6 et de 45 GB de VRAM. Sur ONIE, il offre environ 29.9 TFLOPS de performances en simple précision et environ 536 GB/s de bande passante mémoire pour une enveloppe thermique de 300 W. Vous pouvez le déployer avec une facturation à l'heure, un accès SSH complet et des modèles prêts à l'emploi incluant PyTorch/CUDA, vLLM, Ollama et ComfyUI.

Spécifications

VRAM par GPU

45 GB

Architecture

NVIDIA Ampere

Capacité de calcul

8.6

Calcul FP32

≈ 29.9 TFLOPS

Bande passante mémoire

≈ 536 GB/s

Limite de puissance

300 W

Valeurs communiquées par le fournisseur d’infrastructure pour les machines actuellement répertoriées ; les performances réelles varient selon la machine.

Configurations disponibles

Stock et tarifs en temps réel, mis à jour en continu. Le prix final est confirmé avant votre commande.

Chargement des tarifs en temps réel…

Cas d’usage idéaux pour le A40

Inférence de grands modèles de langage

Exécutez des modèles nécessitant jusqu'à 45 GB de mémoire à l'aide de modèles vLLM ou Ollama préconfigurés.

Fine-tuning d'apprentissage profond

Affinez des réseaux de neurones dans PyTorch/CUDA grâce à une VRAM généreuse adaptée aux tailles de lots et aux poids plus importants.

Flux de travail d'images génératives

Exécutez des pipelines de diffusion complexes et conservez simultanément plusieurs points de contrôle en mémoire avec ComfyUI.

Tâches de calcul en centre de données

Exploitez environ 29.9 TFLOPS de calcul en simple précision et environ 536 GB/s de bande passante mémoire pour les charges de travail de simulation et de rendu.

Est-ce le bon GPU pour vous ?

Choisissez l'A40 lorsque votre charge de travail nécessite 45 GB de VRAM sur une architecture Ampere pour centre de données, ce qui dépasse les capacités mémoire grand public standard. Optez pour une carte grand public plus modeste si vos modèles tiennent dans moins de mémoire, ou passez à un GPU de centre de données à bande passante plus élevée si vos tâches d'entraînement sont fortement limitées par le débit mémoire.

Comparer avec des GPU similaires

GPUVRAM par GPUArchitectureCalcul FP32À partir de / heureDétails
A4045 GBAmpere≈ 29.9 TFLOPS—
RTX A600048 GBAmpere≈ 36.1 TFLOPS—Détails
RTX 309024 GBAmpere≈ 35.4 TFLOPS—Détails
RTX 3090 Ti24 GBAmpere≈ 36.4 TFLOPS—Détails

Questions fréquentes

Le NVIDIA A40 est-il adapté à l'inférence et au fine-tuning de LLM ?

Oui, la capacité de 45 GB de VRAM rend l'A40 particulièrement adapté à l'hébergement de modèles de langage de taille moyenne à grande et à la réalisation de fine-tuning économe en paramètres. Vous pouvez lancer directement des modèles vLLM, Ollama ou PyTorch/CUDA sur ONIE pour commencer à travailler immédiatement.

Comment l'A40 se compare-t-il aux GPU grand public plus petits ou aux GPU de centre de données plus grands ?

L'A40 fournit 45 GB de VRAM, vous offrant une marge de mémoire supérieure à celle des GPU grand public standard pour les charges de travail exigeantes en mémoire. Cependant, sa bande passante mémoire d'environ 536 GB/s est inférieure à celle des GPU de centre de données de niveau supérieur qui utilisent de la mémoire HBM.

Quels environnements logiciels sont disponibles pour l'A40 sur ONIE ?

L'A40 prend en charge la capacité de calcul CUDA 8.6 et peut être déployé avec des modèles prêts à l'emploi pour PyTorch/CUDA, vLLM, Ollama et ComfyUI. Un accès SSH complet est inclus afin que vous puissiez personnaliser votre pile logicielle selon vos besoins.

Comment fonctionne la facturation pour les instances A40 ?

ONIE applique une facturation à l'heure pour toutes les locations d'A40. Vous ne payez que pour la durée pendant laquelle votre instance est active, ce qui est pratique aussi bien pour de courtes expérimentations que pour de plus longues exécutions en production.

Louez le A40 à l’heure

Créez un compte, choisissez une configuration et connectez-vous via SSH. La facturation s’arrête lorsque vous supprimez le GPU.

Louer un A40

Tous les GPU →