GPU Cloud · NVIDIA · Ampere

Louez un GPU NVIDIA A100 PCIE à l’heure

Le NVIDIA A100 PCIE est un GPU pour centre de données basé sur l’architecture Ampere, équipé de 40 GB de VRAM et d’une enveloppe thermique de 250 W. Il délivre environ 15.6 TFLOPS de puissance de calcul en virgule flottante standard et environ 1313 GB/s de bande passante mémoire, avec la prise en charge de la capacité de calcul CUDA 8.0. Sur ONIE, vous pouvez louer ce matériel avec une facturation à l’heure, un accès SSH et des modèles prêts à l’emploi pour PyTorch/CUDA, vLLM, Ollama et ComfyUI.

Spécifications

VRAM par GPU

40 GB

Architecture

NVIDIA Ampere

Capacité de calcul

8.0

Calcul FP32

≈ 15.6 TFLOPS

Bande passante mémoire

≈ 1,313 GB/s

Limite de puissance

250 W

Valeurs communiquées par le fournisseur d’infrastructure pour les machines actuellement répertoriées ; les performances réelles varient selon la machine.

Configurations disponibles

Stock et tarifs en temps réel, mis à jour en continu. Le prix final est confirmé avant votre commande.

Chargement des tarifs en temps réel…

Cas d’usage idéaux pour le A100 PCIE

Inférence de grands modèles de langage

Exécutez des modèles de langage à l’aide de vLLM ou d’Ollama, en tirant parti de la capacité de 40 GB de VRAM et d’environ 1313 GB/s de bande passante mémoire pour la génération de jetons.

Ajustement fin pour l’apprentissage profond

Exécutez des tâches d’entraînement et d’ajustement fin sous PyTorch/CUDA sur une architecture de centre de données Ampere dotée d’une capacité de calcul 8.0.

Génération d’images haute résolution

Exécutez des flux de travail de diffusion complexes dans ComfyUI qui nécessitent davantage de mémoire que ce qu’offrent les cartes grand public.

Calcul scientifique et traitement de données

Traitez des simulations gourmandes en mémoire et des tâches d’analyse de données en exploitant environ 15.6 TFLOPS de performances de calcul.

Est-ce le bon GPU pour vous ?

Choisissez l’A100 PCIE 40 GB lorsque vos charges de travail dépassent les limites de mémoire des GPU grand public et nécessitent du matériel de centre de données à bande passante élevée. Optez pour un GPU grand public plus modeste pour une inférence légère, ou passez à un modèle de centre de données avec davantage de VRAM si vos modèles non quantifiés ou vos tailles de lots dépassent 40 GB.

Comparer avec des GPU similaires

GPUVRAM par GPUArchitectureCalcul FP32À partir de / heureDétails
A100 PCIE40 GBAmpere≈ 15.6 TFLOPS—
A100 SXM440 GBAmpere≈ 15.6 TFLOPS—Détails
Q RTX 800045 GBTuring≈ 11.9 TFLOPS—Détails
A800 PCIE80 GBAmpere≈ 15.6 TFLOPS—Détails

Questions fréquentes

L’A100 PCIE est-il adapté à l’inférence et à l’ajustement fin de LLM ?

Oui, ses 40 GB de VRAM et ses quelque 1313 GB/s de bande passante mémoire le rendent particulièrement adapté à l’hébergement et à l’ajustement fin de modèles moyens à grands qui ne tiennent pas sur des cartes grand public. Vous pouvez déployer rapidement vos charges de travail à l’aide de modèles préconfigurés pour vLLM, Ollama ou PyTorch/CUDA.

Comment l’A100 PCIE 40 GB se compare-t-il aux autres gammes de GPU ?

En tant que carte Ampere pour centre de données, elle offre une bande passante mémoire et une VRAM nettement supérieures à celles des GPU standards pour stations de travail ou grand public. Si votre pipeline d’entraînement ou d’inférence nécessite une capacité mémoire encore plus importante, vous devriez envisager une variante de GPU pour centre de données plus grande.

Comment puis-je me connecter à mon instance et la configurer sur ONIE ?

Chaque location inclut un accès SSH complet pour une gestion directe en ligne de commande. Vous pouvez également lancer votre instance avec des modèles prêts à l’emploi pour PyTorch/CUDA, vLLM, Ollama ou ComfyUI afin de commencer à travailler immédiatement.

Comment fonctionne la facturation pour l’A100 PCIE ?

Les instances sur ONIE utilisent une facturation à l’heure, vous permettant de ne payer que pour la durée pendant laquelle votre GPU de centre de données est actif.

Louez le A100 PCIE à l’heure

Créez un compte, choisissez une configuration et connectez-vous via SSH. La facturation s’arrête lorsque vous supprimez le GPU.

Louer un A100 PCIE

Tous les GPU →