GPU Cloud · NVIDIA · Turing

Vuokraa NVIDIA RTX 2060 -GPU tunneittain

NVIDIA RTX 2060 palvelussa ONIE on Turing-arkkitehtuurin kuluttajaluokan GPU, jossa on 12 GB VRAM-muistia ja 130 W TDP. Se tarjoaa noin 6,5 TFLOPS yksinkertaisen tarkkuuden laskentatehoa ja noin 268 GB/s muistikaistaa, ja sen CUDA-laskentakyky on 7.5. Instanssit sisältävät SSH-yhteyden, tuntiperusteisen laskutuksen ja valmiiksi määritetyt mallipohjat PyTorch/CUDA:lle, ComfyUI:lle, Ollamalle ja vLLM:lle.

Tekniset tiedot

VRAM per GPU

12 GB

Arkkitehtuuri

NVIDIA Turing

Laskentakyky

7.5

FP32-laskenta

≈ 6.5 TFLOPS

Muistin kaistanleveys

≈ 268 GB/s

Tehoraja

130 W

Infrastruktuuripalveluntarjoajan ilmoittamat arvot tällä hetkellä listatuille koneille. Todellinen suorituskyky vaihtelee koneittain.

Saatavilla olevat kokoonpanot

Varastotiedot ja hinnat päivittyvät jatkuvasti. Lopullinen hinta vahvistetaan ennen tilaamista.

Ladataan hintoja…

Mihin RTX 2060 soveltuu

Perustason kuvageneroinnin

Aja ComfyUI-työnkulkuja ja tavallisia diffuusiomalleja, jotka mahtuvat hyvin 12 GB:n VRAM-muistiin.

Kompaktin kielimallin päättely

Ota käyttöön kvantisoituja tai pienempiä kielimalleja Ollaman tai vLLM:n avulla kevyisiin tekstintuottotehtäviin.

PyTorch-prototyyppien tekeminen ja virheenkorjaus

Kirjoita, testaa ja korjaa CUDA-koodia Turing-arkkitehtuurin kortilla ennen kuin skaalaat suurempiin instansseihin.

Pienimittakaavainen mallikoulutus

Kouluta kohtalaisen kokoisia neuroverkkoja ja koneoppimisputkia PyTorch/CUDA-mallipohjan avulla.

Onko tämä oikea GPU sinulle?

Valitse 12 GB:n RTX 2060, kun työkuormasi tarvitsee enemmän muistia kuin perustason kuluttajakortit tarjoavat, mutta et tarvitse uudempien arkkitehtuurien suurempaa laskentatehoa. Päivitä uudempaan sukupolveen tai työasema-GPU:hun raskaaseen koulutukseen tai valitse pienempi GPU, jos tehtäväsi vaatii vain vähän VRAM-muistia.

Vertaa vastaaviin GPU:ihin

GPUVRAM per GPUArkkitehtuuriFP32-laskentaAlkaen / tuntiTiedot
RTX 206012 GBTuring≈ 6.5 TFLOPS—
GTX TITAN X12 GBMaxwell≈ 6.8 TFLOPS—Tiedot
GTX 1070 Ti8 GBPascal≈ 7.4 TFLOPS—Tiedot
RTX 2060S8 GBTuring≈ 7.5 TFLOPS—Tiedot

Usein kysytyt kysymykset

Soveltuuko RTX 2060 LLM-päättelyyn?

Sen 12 GB:n VRAM-muisti ja noin 268 GB/s muistikaista riittävät kompakteille ja kvantisoiduille kielimalleille Ollaman tai vLLM:n kautta. Suuremmat mallit tai suuren läpäisykyvyn palvelu vaativat GPU:n, jossa on enemmän muistia ja suurempi muistikaista.

Mitä ohjelmistoyhteensopivuutta Turing-arkkitehtuuri tarjoaa?

RTX 2060 tukee CUDA-laskentakykyä 7.5, joka toimii PyTorch/CUDA-mallipohjaan sisältyvien tavallisten kehysten kanssa. Huomaa, että siinä ei ole laitteistotukea tietyille myöhempien arkkitehtuurien esittelemille uudemmille datatyypeille.

Miten tämä 12 GB:n RTX 2060 vertautuu muihin kuluttajaluokan GPU:hin?

12 GB:n muistikapasiteetti mahdollistaa suurempien mallien ja eräkokojen käsittelyn kuin pienemmän muistin kuluttajamallit, mutta sen noin 6,5 TFLOPS:n laskentateho on vaatimattomampi kuin uudemman sukupolven korteilla.

Miten laskutus ja instanssien käyttö toimivat palvelussa ONIE?

Instansseja laskutetaan tuntiperusteisesti. Voit yhdistää suoraan SSH:n kautta tai käynnistää heti valmiiksi määritettyihin PyTorch/CUDA-, vLLM-, Ollama- ja ComfyUI-mallipohjiin.

Vuokraa RTX 2060 tunneittain

Luo tili, valitse kokoonpano ja yhdistä SSH:n kautta. Laskutus päättyy, kun poistat GPU:n.

Vuokraa RTX 2060

Kaikki GPU:t →