GPU Cloud · NVIDIA · Ampere

Vuokraa NVIDIA A100 PCIE -GPU tunneittain

NVIDIA A100 PCIE on Ampere-arkkitehtuuriin perustuva datakeskus-GPU, jossa on 40 GB VRAM-muistia ja 250 W:n tehoraja. Se tarjoaa noin 15.6 TFLOPS tavallista liukuluku­laskentatehoa ja noin 1313 GB/s muistiväylän, ja tukee CUDA-laskentaominaisuustasoa 8.0. Palvelussa ONIE voit vuokrata tämän laitteiston tuntiveloituksella, SSH-yhteydellä sekä valmiilla PyTorch/CUDA-, vLLM-, Ollama- ja ComfyUI-malleilla.

Tekniset tiedot

VRAM per GPU

40 GB

Arkkitehtuuri

NVIDIA Ampere

Laskentakyky

8.0

FP32-laskenta

≈ 15.6 TFLOPS

Muistin kaistanleveys

≈ 1 313 GB/s

Tehoraja

250 W

Infrastruktuuripalveluntarjoajan ilmoittamat arvot tällä hetkellä listatuille koneille. Todellinen suorituskyky vaihtelee koneittain.

Saatavilla olevat kokoonpanot

Varastotiedot ja hinnat päivittyvät jatkuvasti. Lopullinen hinta vahvistetaan ennen tilaamista.

Ladataan hintoja…

Mihin A100 PCIE soveltuu

Suurten kielimallien inferenssi

Tarjoa kielimalleja vLLM:n tai Ollama:n avulla hyödyntäen 40 GB VRAM-kapasiteettia ja noin 1313 GB/s muistiväylää tokenien generointiin.

Syväoppimisen hienosäätö

Suorita koulutus- ja hienosäätötehtäviä PyTorch/CUDA:ssa Ampere-datakeskusarkkitehtuurilla, jonka laskentaominaisuustaso on 8.0.

Korkearesoluutioinen kuvagenerointi

Suorita ComfyUI:ssa monimutkaisia diffuusiotyönkulkuja, jotka vaativat enemmän muistia kuin kuluttajakortit tarjoavat.

Tieteellinen ja datalaskenta

Käsittele muistia vaativia simulaatioita ja data-analytiikkatehtäviä hyödyntäen noin 15.6 TFLOPS laskentatehoa.

Onko tämä oikea GPU sinulle?

Valitse A100 PCIE 40 GB, kun työkuormasi ylittävät kuluttaja-GPU:iden muistirajat ja vaativat suuren muistiväylän datakeskuslaitteistoa. Valitse pienempi kuluttaja-GPU kevyeseen inferenssiin tai siirry suuremman VRAM-muistin datakeskusmalliin, jos kvantisoimattomat mallisi tai eräkokosi ylittävät 40 GB.

Vertaa vastaaviin GPU:ihin

GPUVRAM per GPUArkkitehtuuriFP32-laskentaAlkaen / tuntiTiedot
A100 PCIE40 GBAmpere≈ 15.6 TFLOPS—
A100 SXM440 GBAmpere≈ 15.6 TFLOPS—Tiedot
Q RTX 800045 GBTuring≈ 11.9 TFLOPS—Tiedot
A800 PCIE80 GBAmpere≈ 15.6 TFLOPS—Tiedot

Usein kysytyt kysymykset

Sopiiko A100 PCIE LLM-inferenssiin ja hienosäätöön?

Kyllä. Sen 40 GB VRAM-muistia ja noin 1313 GB/s muistiväylä soveltuvat hyvin keskisuurten ja suurten mallien tarjoamiseen ja hienosäätöön, kun mallit eivät mahdu kuluttajakorteille. Voit ottaa työkuormat nopeasti käyttöön valmiiksi määritetyillä vLLM-, Ollama- tai PyTorch/CUDA-malleilla.

Miten 40 GB A100 PCIE vertautuu muihin GPU-tasoihin?

Datakeskuskäyttöön tarkoitettuna Ampere-korttina se tarjoaa huomattavasti suuremman muistiväylän ja enemmän VRAM-muistia kuin tavalliset työasema- tai kuluttaja-GPU:t. Jos koulutus- tai inferenssiputkesi vaatii vielä suurempaa muistkapasiteettia, kannattaa harkita suurempaa datakeskus-GPU-versiota.

Miten yhdistän instanssiini ja määritän sen palvelussa ONIE?

Jokainen vuokraus sisältää täydellisen SSH-yhteyden komentorivihallintaa varten. Voit myös käynnistää instanssisi valmiilla PyTorch/CUDA-, vLLM-, Ollama- tai ComfyUI-malleilla ja aloittaa työskentelyn heti.

Miten A100 PCIE:n laskutus toimii?

Palvelun ONIE instansseissa käytetään tuntiveloitusta, joten maksat vain ajasta, jolloin datakeskus-GPU:si on aktiivinen.

Vuokraa A100 PCIE tunneittain

Luo tili, valitse kokoonpano ja yhdistä SSH:n kautta. Laskutus päättyy, kun poistat GPU:n.

Vuokraa A100 PCIE

Kaikki GPU:t →