GPU Cloud · NVIDIA · Ampere

Pangisha GPU ya NVIDIA RTX 3080 kwa saa

RTX 3080 ni GPU ya watumiaji yenye usanifu wa Ampere na VRAM ya GB 10. Inatoa takriban 29.5 TFLOPS ya hesabu za kawaida za nukta sogezi na kasi ya kumbukumbu ya takriban 656 GB/s. Kwenye ONIE, unaweza kutumia GPU hii kwa malipo ya kwa saa, ufikiaji wa SSH, na violezo vilivyo tayari.

Vipimo

VRAM kwa kila GPU

10 GB

Usanifu

NVIDIA Ampere

Uwezo wa kompyuta

8.6

Kukokotoa FP32

≈ 29.5 TFLOPS

Bandwidth ya kumbukumbu

≈ 656 GB/s

Kikomo cha nguvu

380 W

Thamani zilizotolewa na mtoa miundombinu kwa mashine zilizoorodheshwa sasa; utendaji halisi hutofautiana kulingana na mashine.

Mipangilio inayopatikana

Hisa na bei za moja kwa moja, zinazosasishwa mfululizo. Bei ya mwisho inathibitishwa kabla ya kuagiza.

Inapakia bei za moja kwa moja…

Matumizi bora ya RTX 3080

Uendeshaji wa LLM Ndogo

Endesha modeli za lugha zilizopunguzwa ukubwa zinazotoshea ndani ya VRAM ya GB 10, kwa kutumia violezo vya Ollama au vLLM vilivyosanidiwa awali.

Mtiririko wa Kazi wa Kuzalisha Picha

Endesha mifumo ya diffusion katika ComfyUI kwa kutumia kasi ya kumbukumbu ya takriban 656 GB/s kwa utoaji thabiti wa picha.

Uundaji wa Mfano wa PyTorch

Tengeneza na ujaribu msimbo wa kujifunza kwa kina kwenye kadi ya Ampere yenye uwezo wa kompyuta 8.6 kabla ya kuongeza kiwango.

Kazi za Kompyuta za CUDA

Harakisha kazi maalum zinazotumia takriban 29.5 TFLOPS ya utendaji wa kawaida wa nukta sogezi.

Je, ni GPU sahihi kwako?

Chagua RTX 3080 kwa uundaji wa mfano, uzalishaji wa picha, na uendeshaji wa modeli ndogo ambapo VRAM ya GB 10 na uwezo imara wa hesabu wa Ampere vinatosha. Chagua GPU yenye kumbukumbu zaidi ikiwa modeli zako au ukubwa wa batch unazidi GB 10, au chagua kadi ya watumiaji ya kiwango cha chini kwa hati nyepesi ambazo hazihitaji takriban 29.5 TFLOPS.

Linganisha na GPU zinazofanana

GPUVRAM kwa kila GPUUsanifuKukokotoa FP32Kuanzia / saaMaelezo
RTX 308010 GBAmpere≈ 29.5 TFLOPS—
RTX 407012 GBAda Lovelace≈ 29.3 TFLOPS—Maelezo
RTX 3080 Ti12 GBAmpere≈ 35.1 TFLOPS—Maelezo
RTX 4070S12 GBAda Lovelace≈ 35.8 TFLOPS—Maelezo

Maswali yanayoulizwa mara kwa mara

Je, RTX 3080 inafaa kwa uendeshaji wa LLM na uzalishaji wa picha?

Ndiyo. VRAM yake ya GB 10 na kasi ya kumbukumbu ya takriban 656 GB/s vinashughulikia uzalishaji wa kawaida wa picha kwenye ComfyUI pamoja na modeli za lugha zilizopunguzwa ukubwa kupitia Ollama au vLLM. Modeli kubwa ambazo hazijapunguzwa ukubwa zitahitaji GPU yenye uwezo mkubwa zaidi wa kumbukumbu.

Ni violezo gani vya programu vinapatikana kwa RTX 3080 kwenye ONIE?

Unaweza kuzindua mifano kwa kutumia violezo vilivyo tayari vya PyTorch/CUDA, vLLM, Ollama, na ComfyUI. Kadi hii inaunga mkono uwezo wa kompyuta 8.6 kwa utangamano mpana na mifumo ya kisasa ya kujifunza kwa mashine.

Ni lini nipaswa kuhamia GPU kubwa zaidi kutoka RTX 3080?

RTX 3080 inatoa uwezo imara wa hesabu wa kiwango cha watumiaji wa takriban 29.5 TFLOPS ndani ya kiwango cha nguvu cha 380 W, lakini ina kikomo cha VRAM ya GB 10. Ikiwa batch zako za mafunzo au uzito wa modeli unasababisha hitilafu za kumbukumbu kujaa, workstation au GPU ya kiwango cha data center yenye bafa kubwa zaidi ya kumbukumbu ndiyo chaguo sahihi.

Malipo na ufikiaji hufanyaje kazi kwenye ONIE?

Mifano hutozwa kwa msingi wa kila saa wakati inapofanya kazi. Unapata ufikiaji kamili wa SSH wa kusimamia mazingira yako, pamoja na kiolesura chochote cha wavuti kinachotolewa na kiolezo ulichochagua.

Kodi RTX 3080 kwa saa

Fungua akaunti, chagua mpangilio na uunganishe kupitia SSH. Malipo yanakoma unapofuta GPU.

Kodi RTX 3080

GPU zote →