GPU Cloud · NVIDIA · Ampere

Üüri NVIDIA RTX A4000 GPU-d tunnipõhiselt

NVIDIA RTX A4000 on Ampere-arhitektuuriga tööjaama GPU, millel on 16 GB VRAM-i ja arvutusvõimekus 8.6. 140 W energiapiirangus pakub see ligikaudu 20,6 TFLOPS ühekordse täpsusega (single-precision) arvutusvõimsust ja ligikaudu 372 GB/s mälu ribalaiust. Rendi seda platvormil ONIE tunnipõhise arveldusega, täieliku SSH-juurdepääsuga ning eelkonfigureeritud mallidega PyTorch/CUDA, vLLM, Ollama ja ComfyUI jaoks.

Tehnilised andmed

VRAM GPU kohta

16 GB

Arhitektuur

NVIDIA Ampere

Arvutusvõimekus

8.6

FP32 arvutusvõimsus

≈ 20.6 TFLOPS

Mälu ribalaius

≈ 372 GB/s

Energiapiirang

140 W

Väärtused on infrastruktuuri pakkuja esitatud praegu pakutavate masinate kohta; tegelik jõudlus võib masinati erineda.

Saadaolevad konfiguratsioonid

Laoseis ja hinnad uuenevad pidevalt. Lõplik hind kinnitatakse enne tellimust.

Hindade laadimine…

Mille jaoks RTX A4000 sobib

Mõõduka suurusega keelemudelite järeldamine

Käivita kvantiseeritud või keskmise suurusega keelemudeleid Ollama või vLLM abil 16 GB VRAM-i mahu piires.

Pildigenereerimise töövood

Rakenda ComfyUI mallid difusioonipõhiseks pildigenereerimiseks ja katsetamiseks, mida toetab ligikaudu 372 GB/s mälu ribalaius.

Süvaõppe prototüüpimine

Arenda ja testi PyTorch/CUDA treeningskripte Ampere tööjaama arhitektuuril, arvutusvõimekusega 8.6.

Tööjaama renderdamise ülesanded

Käivita renderdamis- ja simulatsioonitöid, mis saavad kasu ligikaudu 20,6 TFLOPS ühekordse täpsusega jõudlusest.

Kas see GPU sobib sulle?

RTX A4000 sobib arendajatele ja loojatele, kes vajavad usaldusväärset 16 GB Ampere tööjaama GPU-d järeldamiseks, pildigenereerimiseks ja koodi prototüüpimiseks. Lihtsaks testimiseks väiksema mälunõudlusega sobib väiksem GPU, kuid kui su mudelid ületavad 16 GB VRAM-i või vajavad suuremat mälu ribalaiust, vali suurem andmekeskuse või tööjaama kaart.

Võrdle sarnaste GPU-dega

GPUVRAM GPU kohtaArhitektuurFP32 arvutusvõimsusAlates / tundÜksikasjad
RTX A400016 GBAmpere≈ 20.6 TFLOPS—
RTX 4060 Ti16 GBAda Lovelace≈ 21.6 TFLOPS—Üksikasjad
RTX 5060 Ti16 GBBlackwell≈ 22.8 TFLOPS—Üksikasjad
L422 GBAda Lovelace≈ 24.2 TFLOPS—Üksikasjad

Korduma kippuvad küsimused

Kas RTX A4000 sobib LLM-i järeldamiseks ja peenhäälestuseks?

16 GB VRAM-i ja ligikaudu 372 GB/s mälu ribalaiusega toetab see väiksemate või kvantiseeritud keelemudelite järeldamist Ollama või vLLM abil ning ka kerget peenhäälestust. Täisparameetrilise peenhäälestuse või suuremate, kvantiseerimata mudelite jaoks soovitatakse GPU-d, millel on rohkem VRAM-i.

Kuidas see GPU võrdleb suuremate või väiksemate valikutega?

16 GB tööjaama kaardina, mille ühekordse täpsusega arvutusvõimsus on ligikaudu 20,6 TFLOPS, asub RTX A4000 algtaseme tarbijakaartide ja raskemate tööjaama- või andmekeskuse GPU-de vahel. Madalamale astmele liikudes väheneb partii suuruste jaoks saadaolev mälu, kõrgemale astmele liikudes saad suurema VRAM-i mahu ja mälu ribalaiuse raskemate koormuste jaoks.

Millised tarkvarakeskkonnad on RTX A4000 jaoks platvormil ONIE saadaval?

Saad paigaldada valmis malle, sealhulgas PyTorch/CUDA, vLLM, Ollama ja ComfyUI, mis kõik ühilduvad kaardi arvutusvõimekusega 8.6. Lisaks on tagatud täielik SSH-juurdepääs, et saaksid keskkonda oma vajadustele kohandada.

Kuidas toimib arveldus RTX A4000 rentimisel?

Rendid platvormil ONIE arvestatakse tunnipõhiselt, mis võimaldab maksta ainult selle aja eest, mil sinu instants on aktiivne.

Telli RTX A4000 tunni kaupa

Loo konto, vali konfiguratsioon ja ühendu SSH kaudu. Arveldamine lõpeb, kui GPU kustutad.

Telli RTX A4000

Kõik GPU-d →