GPU Cloud · NVIDIA · Ampere

Üüri NVIDIA RTX 3060 laptop GPU-d tunnipõhiselt

NVIDIA RTX 3060 laptop on Ampere arhitektuuril põhinev tarbijaklassi GPU, mille arvutusvõime on 8.6. Sellel on 12 GB VRAM-i, ligikaudu 12.9 TFLOPS ühekordse täpsusega arvutusvõimsust ja ligikaudu 299 GB/s mälu läbilaskevõimet 80 W võimsuspiiri juures. Platvormil ONIE saate seda GPU-d rentida tunnipõhise arveldusega ning kasutada SSH-juurdepääsu ja valmismalle, sealhulgas PyTorch/CUDA, vLLM, Ollama ja ComfyUI.

Tehnilised andmed

VRAM GPU kohta

12 GB

Arhitektuur

NVIDIA Ampere

Arvutusvõimekus

8.6

FP32 arvutusvõimsus

≈ 12.9 TFLOPS

Mälu ribalaius

≈ 299 GB/s

Energiapiirang

80 W

Väärtused on infrastruktuuri pakkuja esitatud praegu pakutavate masinate kohta; tegelik jõudlus võib masinati erineda.

Saadaolevad konfiguratsioonid

Laoseis ja hinnad uuenevad pidevalt. Lõplik hind kinnitatakse enne tellimust.

Hindade laadimine…

Mille jaoks RTX 3060 laptop sobib

Kompaktsete LLM-ide inferents

Käivitage eelseadistatud Ollama või vLLM mallide abil kvanditud keelemudeleid, mis mahuvad 12 GB VRAM-i.

Piltide genereerimise töövood

Genereerige pilte ja katsetage difusioonipõhiseid töövooge ComfyUI malliga Ampere arhitektuuril põhineval tarbijaklassi GPU-l.

PyTorch prototüüpimine ja silumine

Arendage ja testige masinõppekoodi SSH kaudu, kasutades PyTorch/CUDA malli ja arvutusvõime 8.6 tuge.

Väiksemate mudelite peenhäälestus

Peenhäälestage väikestel andmestikel mudeleid väheseid parameetreid muutes, kui piisab 12 GB mälust ja ligikaudu 299 GB/s läbilaskevõimest.

Kas see GPU sobib sulle?

Valige RTX 3060 laptop algtaseme arendus-, testimis- ja inferentsitöödeks, mis mahuvad 12 GB VRAM-i ega nõua suurt energiatarvet. Kui vajate suurte mudelite jaoks suuremat mälu läbilaskevõimet või rohkem VRAM-i, valige võimsam lauaarvuti või andmekeskuse GPU. Kui teie töö vajab väga vähe graafikamälu, valige väiksem GPU.

Võrdle sarnaste GPU-dega

GPUVRAM GPU kohtaArhitektuurFP32 arvutusvõimsusAlates / tundÜksikasjad
RTX 3060 laptop12 GBAmpere≈ 12.9 TFLOPS—
RTX 306012 GBAmpere≈ 12 TFLOPS—Üksikasjad
Titan Xp12 GBPascal≈ 11.7 TFLOPS—Üksikasjad
RTX 2080 Ti11 GBTuring≈ 14.6 TFLOPS—Üksikasjad

Korduma kippuvad küsimused

Kas RTX 3060 laptop GPU sobib LLM-ide inferentsiks ja piltide genereerimiseks?

Jah. Selle 12 GB VRAM-i ja arvutusvõime 8.6 sobivad väiksemate kvanditud keelemudelite käitamiseks Ollama või vLLM abil ning tavaliste difusioonimudelite käitamiseks ComfyUI-s. Suuremate, üle 12 GB mälu nõudvate mudelite jaoks on vaja suurema mälumahuga GPU-d.

Kuidas erineb see sülearvutiversioon lauaarvuti GPU-dest?

Tarbijaklassi sülearvuti GPU-na, mille võimsuspiir on 80 W, pakub see ligikaudu 12.9 TFLOPS ühekordse täpsusega arvutusvõimsust ja ligikaudu 299 GB/s mälu läbilaskevõimet. Need näitajad on väiksemad kui täisvõimsusel lauaarvuti- või tööjaamakaartidel. Samas pakub 12 GB VRAM-i piisavalt ruumi algtaseme töödeks, mille puhul on määrav mälumaht.

Kuidas toimub arveldamine platvormil ONIE?

Eksemplaride eest arveldatakse tunnipõhiselt, nii et maksate ainult aja eest, mil teie RTX 3060 laptop eksemplar on aktiivne.

Kuidas ühenduse loon ja tööga alustan?

Saate oma eksemplariga otse ühenduse luua SSH kaudu. ONIE pakub ka PyTorch/CUDA, vLLM, Ollama ja ComfyUI valmismalle, et saaksite kohe tööle asuda.

Telli RTX 3060 laptop tunni kaupa

Loo konto, vali konfiguratsioon ja ühendu SSH kaudu. Arveldamine lõpeb, kui GPU kustutad.

Telli RTX 3060 laptop

Kõik GPU-d →