GPU Cloud · NVIDIA · Ampere

घण्टाका आधारमा NVIDIA CMP 170HX GPU भाडामा लिनुहोस्

NVIDIA CMP 170HX एउटा Ampere आर्किटेक्चरमा आधारित डेटासेन्टर GPU हो, जसमा 64 GB VRAM र 250 W TDP छ। यसले compute capability 8.0 मा लगभग 1516 GB/s मेमोरी ब्यान्डविथसँगै लगभग 12.1 TFLOPS single-precision compute प्रदान गर्छ। ONIE मा तपाईं यो कार्डलाई प्रति-घण्टा बिलिङ, पूर्ण SSH पहुँच, र PyTorch/CUDA, vLLM, Ollama, तथा ComfyUI का लागि तयार टेम्प्लेटहरूसहित डिप्लोय गर्न सक्नुहुन्छ।

विशिष्टताहरू

प्रति GPU VRAM

64 GB

आर्किटेक्चर

NVIDIA Ampere

कम्प्युट क्षमता

8.0

FP32 कम्प्युट

≈ 12.1 TFLOPS

मेमोरी ब्यान्डविथ

≈ 1,516 GB/s

पावर सीमा

250 W

अहिले सूचीबद्ध मेसिनहरूका लागि पूर्वाधार प्रदायकले रिपोर्ट गरेका मानहरू हुन्; वास्तविक कार्यसम्पादन प्रत्येक मेसिनअनुसार फरक हुन सक्छ।

उपलब्ध कन्फिगरेसनहरू

प्रत्यक्ष स्टक र मूल्यहरू लगातार अपडेट हुन्छन्। अन्तिम मूल्य अर्डर गर्नुअघि पुष्टि गरिन्छ।

प्रत्यक्ष मूल्यहरू लोड हुँदैछ…

CMP 170HX का लागि उपयुक्त कामहरू

मेमोरी-सीमित LLM इन्फरेन्स

64 GB VRAM क्षमता र लगभग 1516 GB/s मेमोरी ब्यान्डविथको उपयोग गरी vLLM वा Ollama मार्फत ठूला भाषा मोडेलहरू सेवा दिनुहोस्।

उच्च-मेमोरी डीप लर्निङ

ठूलो मेमोरी क्षमता र compute capability 8.0 चाहिने PyTorch/CUDA कार्यभारहरू, मोडेलहरूलाई यन्त्रहरूमा विभाजन नगरी चलाउनुहोस्।

जटिल इमेज जेनेरेसन वर्कफ्लोहरू

ComfyUI मा 64 GB मेमोरी पूलभित्र धेरै ठूला डिफ्युजन checkpoint र control net एकसाथ लोड गर्नुहोस्।

डेटा प्रोसेसिङ र सिमुलेसन

250 W को पावर सीमाभित्र उच्च मेमोरी थ्रुपुटबाट लाभ लिने मेमोरी-गहन डेटासेन्टर कार्यहरू चलाउनुहोस्।

के यो तपाईंका लागि सही GPU हो?

तपाईंको कार्यभार कच्चा single-precision compute भन्दा मेमोरी क्षमता र ब्यान्डविथद्वारा सीमित छ भने CMP 170HX छान्नुहोस्। छिटो प्रशिक्षण चक्र चाहिएमा उच्च compute थ्रुपुट भएको GPU रोज्नुहोस्, वा तपाईंका मोडेलहरूलाई 64 GB VRAM आवश्यक नपर्ने हो भने सानो उपभोक्ता कार्ड छान्नुहोस्।

मिल्दाजुल्दा GPU हरूसँग तुलना गर्नुहोस्

GPUप्रति GPU VRAMआर्किटेक्चरFP32 कम्प्युटसुरु / घण्टाविवरण
CMP 170HX64 GBAmpere≈ 12.1 TFLOPS—
Q RTX 800045 GBTuring≈ 11.9 TFLOPS—विवरण
A800 PCIE80 GBAmpere≈ 15.6 TFLOPS—विवरण
A100 PCIE40 GBAmpere≈ 15.6 TFLOPS—विवरण

बारम्बार सोधिने प्रश्नहरू

के CMP 170HX LLM इन्फरेन्सका लागि उपयुक्त छ?

हो, यसको 64 GB VRAM र लगभग 1516 GB/s मेमोरी ब्यान्डविथले vLLM र Ollama जस्ता टेम्प्लेटहरू प्रयोग गरी ठूला भाषा मोडेलहरू लोड गर्न र सेवा दिन यसलाई राम्रोसँग उपयुक्त बनाउँछ। तर, यसले लगभग 12.1 TFLOPS single-precision compute प्रदान गर्ने भएकाले, उच्च compute घनत्व भएका डेटासेन्टर GPU भन्दा prompt प्रोसेसिङ सुस्त हुनेछ।

यो GPU मानक डेटासेन्टर एक्सेलेरेटरहरूसँग कसरी तुलना गर्छ?

CMP 170HX ले 250 W TDP मा सञ्चालन हुँदै मानक Ampere डेटासेन्टर कार्डहरूसमान ठूलो 64 GB मेमोरी बफर र उच्च मेमोरी ब्यान्डविथ प्रदान गर्छ। यसको मुख्य ट्रेड-अफ लगभग 12.1 TFLOPS को कम compute थ्रुपुट हो, जसले यसलाई भारी compute कार्यभार भन्दा मेमोरी-सीमित कार्यहरूका लागि बढी उपयुक्त बनाउँछ।

यो GPU का लागि कुन सफ्टवेयर वातावरणहरू उपलब्ध छन्?

यो कार्डले CUDA compute capability 8.0 लाई समर्थन गर्छ र PyTorch/CUDA, vLLM, Ollama, तथा ComfyUI सहितका पूर्व-कन्फिगर गरिएका टेम्प्लेटहरू प्रयोग गरी ONIE मा सुरु गर्न सकिन्छ। तपाईंले आफ्नै लाइब्रेरीहरू इन्स्टल गर्न र वातावरण व्यवस्थापन गर्न प्रत्यक्ष SSH पहुँच पनि पाउनुहुन्छ।

CMP 170HX भाडामा लिँदा बिलिङ कसरी हुन्छ?

ONIE का इन्स्ट्यान्सहरूमा प्रति-घण्टा बिलिङ लागू हुन्छ, त्यसैले तपाईंले GPU सक्रिय रहेको अवधिको मात्र शुल्क तिर्नुहुन्छ।

CMP 170HX प्रति घण्टा भाडामा लिनुहोस्

खाता बनाउनुहोस्, कन्फिगरेसन छान्नुहोस् र SSH मार्फत जडान गर्नुहोस्। GPU मेटाएपछि बिलिङ रोकिन्छ।

CMP 170HX भाडामा लिनुहोस्

सबै GPU →