GPU Cloud · NVIDIA · Ada Lovelace

Lei NVIDIA RTX 4070 GPU per time

NVIDIA RTX 4070 er en GPU i forbrukersegmentet, bygget på Ada Lovelace-arkitekturen, og kan leies på ONIE. Den har 12 GB VRAM, en minnebåndbredde på ca. 440 GB/s og en enkeltpresisjons-regneytelse på ca. 29,3 TFLOPS innenfor en effektramme på 200 W. Med støtte for CUDA compute capability 8.9 passer instansen godt til AI-inferens i liten skala, bildegenerering og kodeutvikling.

Spesifikasjoner

VRAM per GPU

12 GB

Arkitektur

NVIDIA Ada Lovelace

Compute capability

8.9

FP32-beregning

≈ 29.3 TFLOPS

Minnebåndbredde

≈ 440 GB/s

Effektgrense

200 W

Verdier oppgitt av infrastrukturleverandøren for maskiner som er tilgjengelige nå. Faktisk ytelse varierer mellom maskiner.

Tilgjengelige konfigurasjoner

Lagerstatus og priser oppdateres fortløpende. Endelig pris bekreftes før du bestiller.

Laster inn live-priser…

Hva RTX 4070 er god til

Kvantisert LLM-inferens

Kjør kompakte eller kvantiserte språkmodeller innenfor 12 GB VRAM-bufferen ved hjelp av ferdige maler som Ollama eller vLLM.

Diffusjonsbasert bildegenerering

Generer bilder og test nodearbeidsflyter i ComfyUI med utnyttelse av Ada Lovelace-arkitekturen og ca. 29,3 TFLOPS regneytelse.

PyTorch-prototyping og feilsøking

Skriv, test og feilsøk dyplæringsskript i et PyTorch/CUDA-miljø med compute capability 8.9 før du skalerer opp.

Lettvekts finjustering av modeller

Kjør parametereffektiv finjustering på små datasett som passer godt innenfor 12 GB minne med ca. 440 GB/s båndbredde.

Er dette den riktige GPU-en for deg?

RTX 4070 er et praktisk valg for utviklere som trenger moderne Ada Lovelace-arkitektur og 12 GB VRAM til prototyping eller moderate inferensoppgaver. Velg en GPU med mer VRAM hvis modellene eller batch-størrelsene dine overstiger 12 GB, eller velg en eldre eller mindre forbruker-GPU hvis du bare kjører minimale testskript.

Sammenlign med lignende GPU-er

GPUVRAM per GPUArkitekturFP32-beregningFra / timeDetaljer
RTX 407012 GBAda Lovelace≈ 29.3 TFLOPS—
RTX 308010 GBAmpere≈ 29.5 TFLOPS—Detaljer
RTX 3080 Ti12 GBAmpere≈ 35.1 TFLOPS—Detaljer
RTX 4070S12 GBAda Lovelace≈ 35.8 TFLOPS—Detaljer

Ofte stilte spørsmål

Er RTX 4070 egnet for LLM-inferens?

Ja, 12 GB VRAM og ca. 440 GB/s minnebåndbredde gjør at den kan kjøre små eller kvantiserte språkmodeller effektivt. Du kan raskt sette i gang slike oppgaver på ONIE ved hjelp av forhåndskonfigurerte Ollama- eller vLLM-maler.

Når bør jeg velge en større GPU enn RTX 4070?

Hvis arbeidsbelastningen din innebærer full finjustering, store batch-størrelser eller ukvantiserte modeller som overstiger grensen på 12 GB VRAM, bør du velge en forbruker- eller arbeidsstasjons-GPU i et høyere nivå. RTX 4070 er beregnet på lettvekts trening og moderate inferensoppgaver.

Hvilke programvaremiljøer er tilgjengelige for denne GPU-en?

ONIE tilbyr ferdige maler, inkludert PyTorch/CUDA, vLLM, Ollama og ComfyUI, som alle er kompatible med CUDA compute capability 8.9. Du får også full SSH-tilgang til å installere egne biblioteker og administrere filene dine direkte.

Hvordan fungerer fakturering for RTX 4070-instanser?

Instanser på ONIE faktureres per time, så du betaler kun for tiden RTX 4070-instansen er aktiv.

Lei RTX 4070 per time

Opprett en konto, velg en konfigurasjon og koble til over SSH. Fakturering stopper når du sletter GPU-en.

Lei RTX 4070

Alle GPU-er →