GPU Cloud · NVIDIA · Blackwell

Üüri NVIDIA RTX 5060 Ti GPU-d tunnipõhiselt

NVIDIA RTX 5060 Ti on Blackwell arhitektuuril, compute capability 12.0. Sellel GPU-l on 16 GB VRAM-i, umbes 22,8 TFLOPS standardset ujukomaarvutusvõimsust ja umbes 368 GB/s mälu ribalaiust 180 W energiapiiri piires. Seda GPU-d saad rentida ONIE-is tunnipõhise arveldusega, SSH-ligipääsuga ning valmis mallidega PyTorch/CUDA, vLLM, Ollama ja ComfyUI jaoks.

Tehnilised andmed

VRAM GPU kohta

16 GB

Arhitektuur

NVIDIA Blackwell

Arvutusvõimekus

12.0

FP32 arvutusvõimsus

≈ 22.8 TFLOPS

Mälu ribalaius

≈ 368 GB/s

Energiapiirang

180 W

Väärtused on infrastruktuuri pakkuja esitatud praegu pakutavate masinate kohta; tegelik jõudlus võib masinati erineda.

Saadaolevad konfiguratsioonid

Laoseis ja hinnad uuenevad pidevalt. Lõplik hind kinnitatakse enne tellimust.

Hindade laadimine…

Mille jaoks RTX 5060 Ti sobib

LLM-ide järeldused kohalikus mastaabis

Käivita kvantiseeritud keelemudeleid Ollama või vLLM mallidega, mis mahuvad mugavalt 16 GB VRAM-i piiresse.

Generatiivsed pildi töövood

Rakenda ComfyUI torujuhtmeid pildi genereerimiseks ja difusioonülesanneteks, mida toetab Blackwell arhitektuur.

PyTorchi mudelite prototüüpimine

Arenda, testi ja silu süvaõppe koodi compute capability 12.0 riistvaral enne mastaabi suurendamist.

Parameetritõhus peenhäälestus

Käivita kergete adapterite treeningu ja peenhäälestuse töid, mis töötavad 16 GB mälumahu piires.

Kas see GPU sobib sulle?

RTX 5060 Ti sobib arendajatele, kes vajavad 16 GB VRAM-i ja Blackwell arhitektuuri võimalusi mõõduka mahuga järeldusteks, pildi genereerimiseks ja prototüüpimiseks. Väikese mälunõudlusega lihtsate skriptide jaoks vali väiksem GPU. Kui töökoormused vajavad rohkem VRAM-i või suuremat mälu ribalaiust kui umbes 368 GB/s, vali suurem tarbija- või andmekeskuse GPU.

Võrdle sarnaste GPU-dega

GPUVRAM GPU kohtaArhitektuurFP32 arvutusvõimsusAlates / tundÜksikasjad
RTX 5060 Ti16 GBBlackwell≈ 22.8 TFLOPS—
RTX 4060 Ti16 GBAda Lovelace≈ 21.6 TFLOPS—Üksikasjad
RTX A400016 GBAmpere≈ 20.6 TFLOPS—Üksikasjad
L422 GBAda Lovelace≈ 24.2 TFLOPS—Üksikasjad

Korduma kippuvad küsimused

Kas RTX 5060 Ti sobib LLM-ide järelduste tegemiseks ja peenhäälestuseks?

16 GB VRAM-i ja umbes 368 GB/s mälu ribalaiusega käsitleb see väikesi ja keskmise suurusega kvantiseeritud keelemudeleid järelduste tegemiseks Ollama või vLLM kaudu ning kergeid adapterite peenhäälestusi. Suuremate mudelite täielik peenhäälestus nõuab suurema mäluga GPU-d.

Kuidas 16 GB RTX 5060 Ti võrdub väiksemate või suuremate GPU-dega?

Selle 16 GB VRAM annab mudelikaaludele ja pildipartiidele rohkem ruumi kui sisendtaseme tarbijakaartidel väiksema mälupuhvriga. Kõrgema taseme tarbija- või tööjaama-GPU-d pakuvad aga suuremat arvutusjõudlust kui umbes 22,8 TFLOPS ning laiemat mälu ribalaiust rasketeks treeningutöödeks.

Milliseid tarkvarakeskkondi on selle GPU rentimisel saadaval?

Instantsid ONIE-is sisaldavad täielikku SSH-ligipääsu ning eelkonfigureeritud malle PyTorch/CUDA, vLLM, Ollama ja ComfyUI jaoks. Kaart toetab CUDA compute capability 12.0 versiooni NVIDIA Blackwell arhitektuuril.

Kuidas RTX 5060 Ti arveldus ONIE-is toimib?

Kasutust arveldatakse tunnipõhiselt ajal, mil sinu instants on aktiivne. Saad ühenduda SSH kaudu või käivitada valmis malli ning peatada instantsi, kui ülesanne on lõppenud.

Telli RTX 5060 Ti tunni kaupa

Loo konto, vali konfiguratsioon ja ühendu SSH kaudu. Arveldamine lõpeb, kui GPU kustutad.

Telli RTX 5060 Ti

Kõik GPU-d →