GPU Cloud · NVIDIA · Turing

घण्टाका आधारमा NVIDIA RTX 2080 Ti GPU भाडामा लिनुहोस्

NVIDIA RTX 2080 Ti एक Turing आर्किटेक्चरमा आधारित उपभोक्ता GPU हो, जुन ONIE मा माग अनुसार भाडामा उपलब्ध छ। यसमा 11 GB VRAM छ, लगभग 501 GB/s मेमोरी ब्यान्डविड्थ छ, र लगभग 14.6 TFLOPS single-precision कम्प्युट छ। 250 W TDP र compute capability 7.5 सहित, यसले प्रति-घण्टा बिलिङमा हल्का मेसिन लर्निङ, इन्फरेन्स र ग्राफिक्स कार्यभार सम्हाल्छ।

विशिष्टताहरू

प्रति GPU VRAM

11 GB

आर्किटेक्चर

NVIDIA Turing

कम्प्युट क्षमता

7.5

FP32 कम्प्युट

≈ 14.6 TFLOPS

मेमोरी ब्यान्डविथ

≈ 501 GB/s

पावर सीमा

250 W

अहिले सूचीबद्ध मेसिनहरूका लागि पूर्वाधार प्रदायकले रिपोर्ट गरेका मानहरू हुन्; वास्तविक कार्यसम्पादन प्रत्येक मेसिनअनुसार फरक हुन सक्छ।

उपलब्ध कन्फिगरेसनहरू

प्रत्यक्ष स्टक र मूल्यहरू लगातार अपडेट हुन्छन्। अन्तिम मूल्य अर्डर गर्नुअघि पुष्टि गरिन्छ।

प्रत्यक्ष मूल्यहरू लोड हुँदैछ…

RTX 2080 Ti का लागि उपयुक्त कामहरू

Quantized LLM इन्फरेन्स

तयार Ollama वा vLLM टेम्प्लेट प्रयोग गरेर 11 GB VRAM भित्र अट्ने सानो वा quantized भाषा मोडेलहरू चलाउनुहोस्।

इमेज जेनेरेसन वर्कफ्लो

छवि बनाउन र 11 GB मेमोरी सीमाभित्र सहजै चल्ने diffusion पाइपलाइनहरू परीक्षण गर्न ComfyUI डिप्लोय गर्नुहोस्।

Deep Learning प्रोटोटाइपिङ

ठूला हार्डवेयरमा विस्तार गर्नुअघि, compute capability 7.5 भएको Turing GPU मा PyTorch र CUDA कोड लेख्नुहोस्, डिबग गर्नुहोस् र परीक्षण गर्नुहोस्।

ब्याच डेटा प्रोसेसिङ

GPU-द्वारा छिटो बनाइएका डेटा पाइपलाइन र रेन्डरिङका लागि लगभग 14.6 TFLOPS single-precision कार्यक्षमता र लगभग 501 GB/s मेमोरी ब्यान्डविड्थ प्रयोग गर्नुहोस्।

के यो तपाईंका लागि सही GPU हो?

विकास, सानो मोडेलमा इन्फरेन्स, र 11 GB VRAM भित्र अट्ने मध्यम तालिम कार्यका लागि RTX 2080 Ti छान्नुहोस्। ठूला स्तरका तालिम वा quantized नगरिएका मोडेलका लागि बढी मेमोरी र नयाँ आर्किटेक्चर भएको GPU छान्नुहोस्, वा आधारभूत डिबगिङका लागि सानो उपभोक्ता कार्ड प्रयोग गर्नुहोस्।

मिल्दाजुल्दा GPU हरूसँग तुलना गर्नुहोस्

GPUप्रति GPU VRAMआर्किटेक्चरFP32 कम्प्युटसुरु / घण्टाविवरण
RTX 2080 Ti11 GBTuring≈ 14.6 TFLOPS—
RTX 3060 laptop12 GBAmpere≈ 12.9 TFLOPS—विवरण
RTX 306012 GBAmpere≈ 12 TFLOPS—विवरण
RTX 3060 Ti8 GBAmpere≈ 15.7 TFLOPS—विवरण

बारम्बार सोधिने प्रश्नहरू

के RTX 2080 Ti LLM इन्फरेन्स र इमेज जेनेरेसनका लागि उपयुक्त छ?

हो, यसको 11 GB VRAM र लगभग 501 GB/s मेमोरी ब्यान्डविड्थले सानो वा quantized भाषा मोडेल र मानक diffusion मोडेल चलाउन सक्छ। 11 GB नाघ्ने ठूला मोडेल वा compute capability 7.5 भन्दा माथिका नयाँ आर्किटेक्चरका सुविधा चाहिने कार्यका लागि बढी मेमोरी भएको GPU भाडामा लिने विचार गर्नुहोस्।

यो GPU भाडामा लिँदा कुन सफ्टवेयर वातावरण उपलब्ध हुन्छ?

तपाईंले आफ्नो इन्स्ट्यान्समा पूर्ण SSH पहुँच पाउनुहुन्छ र PyTorch/CUDA, vLLM, Ollama, र ComfyUI सहितका तयार टेम्प्लेटहरू सुरु गर्न सक्नुहुन्छ। यो कार्डले compute capability 7.5 सँग मिल्ने CUDA कार्यभारलाई समर्थन गर्छ।

RTX 2080 Ti नयाँ वा ठूला GPU सँग कस्तो तुलना हुन्छ?

11 GB VRAM र लगभग 14.6 TFLOPS single-precision कम्प्युट भएको Turing पुस्ताको उपभोक्ता कार्डका रूपमा, यसले प्रवेश-स्तरका उपभोक्ता GPU भन्दा बढी मेमोरी दिन्छ। तर भारी तालिम कार्यका लागि नयाँ पुस्ताका workstation वा datacenter GPU ले बढी VRAM र उच्च मेमोरी ब्यान्डविड्थ दिन्छन्।

ONIE मा RTX 2080 Ti इन्स्ट्यान्सका लागि बिलिङ कसरी हुन्छ?

ONIE मा इन्स्ट्यान्सहरूमा प्रति-घण्टा बिलिङ लागू हुन्छ, त्यसैले तपाईंले GPU सर्भर सक्रिय रहेको समयको मात्र शुल्क तिर्नुहुन्छ।

RTX 2080 Ti प्रति घण्टा भाडामा लिनुहोस्

खाता बनाउनुहोस्, कन्फिगरेसन छान्नुहोस् र SSH मार्फत जडान गर्नुहोस्। GPU मेटाएपछि बिलिङ रोकिन्छ।

RTX 2080 Ti भाडामा लिनुहोस्

सबै GPU →