GPU Cloud · NVIDIA · Ampere

Üüri NVIDIA RTX 3070 GPU-d tunnipõhiselt

NVIDIA RTX 3070 on Ampere arhitektuuril põhinev tarbijaklassi GPU, millel on 8 GB VRAM-i ja 220 W TDP. ONIE platvormil pakub see kaart umbes 19,8 TFLOPS-i ühesuunalist arvutusvõimsust ja umbes 386 GB/s mälu ribalaiust. Arvutusvõimega 8.6 on see praktiline valik arendustööks, prototüüpimiseks ja kergeteks järeldustöödeks.

Tehnilised andmed

VRAM GPU kohta

8 GB

Arhitektuur

NVIDIA Ampere

Arvutusvõimekus

8.6

FP32 arvutusvõimsus

≈ 19.8 TFLOPS

Mälu ribalaius

≈ 386 GB/s

Energiapiirang

220 W

Väärtused on infrastruktuuri pakkuja esitatud praegu pakutavate masinate kohta; tegelik jõudlus võib masinati erineda.

Saadaolevad konfiguratsioonid

Laoseis ja hinnad uuenevad pidevalt. Lõplik hind kinnitatakse enne tellimust.

Hindade laadimine…

Mille jaoks RTX 3070 sobib

Kerge LLM-i järeldamine

Käivitage kvantiseeritud väikesed keelemudelid valmis Ollama- või vLLM-mallide abil 8 GB VRAM-i piires.

Pildigenereerimise töövood

Genereerige standardresolutsiooniga pilte ja testige sõlmede töövooge eelseadistatud ComfyUI malli abil.

PyTorchi koodi prototüüpimine

Arendage, silluge ja kontrollige masinõppe skripte Ampere riistvaral arvutusvõimega 8.6 enne mahu suurendamist.

Partiiandmete töötlemine

Kasutage umbes 19,8 TFLOPS-i ühesuunalist jõudlust ja umbes 386 GB/s mälu ribalaiust GPU-kiirendusega andmetöötlustorustikes.

Kas see GPU sobib sulle?

Valige RTX 3070 koodi testimiseks, kergeteks järeldusteks ja väikesemahuliseks pildigenereerimiseks, mis mahub mugavalt 8 GB mällu. Peenhäälestuseks või suurte mudelikaalude jaoks valige GPU suurema VRAM-iga või, kui töökoormus vajab minimaalset arvutusvõimsust, sisenemistaseme kaart.

Võrdle sarnaste GPU-dega

GPUVRAM GPU kohtaArhitektuurFP32 arvutusvõimsusAlates / tundÜksikasjad
RTX 30708 GBAmpere≈ 19.8 TFLOPS—
RTX 3060 Ti8 GBAmpere≈ 15.7 TFLOPS—Üksikasjad
RTX A400016 GBAmpere≈ 20.6 TFLOPS—Üksikasjad
RTX 2080 Ti11 GBTuring≈ 14.6 TFLOPS—Üksikasjad

Korduma kippuvad küsimused

Kas RTX 3070 sobib LLM-i järeldamiseks ja peenhäälestuseks?

8 GB VRAM-iga suudab RTX 3070 käsitleda väikeste, kvantiseeritud keelemudelite järeldamist, kasutades malle nagu Ollama või vLLM. Täielikuks peenhäälestuseks või suuremate mudelite käitamiseks tuleks valida GPU suurema mälumahuga.

Kuidas ühendada oma RTX 3070 instantsiga ONIE platvormil?

Saate ühenduda otse SSH-juurdepääsu kaudu käsurealiste töövoogude jaoks või käivitada eelseadistatud malle, sealhulgas PyTorch/CUDA, ComfyUI, Ollama ja vLLM. Arveldus toimub tunnipõhiselt, kuni teie instants on aktiivne.

Milliseid CUDA funktsioone RTX 3070 toetab?

Ampere-põlvkonna tarbijaklassi GPU-na toetab RTX 3070 arvutusvõimet 8.6. See võimaldab käivitada kaasaegseid PyTorch/CUDA töökoormusi, mis mahuvad tema 8 GB mälupiirangusse.

Kuidas RTX 3070 võrdub kõrgema taseme Ampere GPU-dega?

RTX 3070 pakub umbes 19,8 TFLOPS-i ühesuunalist arvutusvõimsust ja umbes 386 GB/s mälu ribalaiust 220 W TDP juures. Kõrgema taseme Ampere tarbija- või tööjaamade GPU-dele üleminek annab suurema VRAM-i mahu ja kõrgema mälu ribalaiuse raskemate töökoormuste jaoks.

Telli RTX 3070 tunni kaupa

Loo konto, vali konfiguratsioon ja ühendu SSH kaudu. Arveldamine lõpeb, kui GPU kustutad.

Telli RTX 3070

Kõik GPU-d →